【应用计量系列79】平行趋势的秘密(四):如何给平行趋势假设提供经验证据?

方法二、均值差异检验(difference in mean,DIM)

DIM也是DID中一种常用的平行趋势假设检验,或处理组和控制组可比性的检验,它的原假设是“没有差异”,例如,彭飞,许文立,吕鹏,吴华清(2020)研究了“营改增”对企业非税负担的影响,就用均值差异检验提供了“营改增”的企业与非“营改增”企业非税负担之间的可比性。

彭飞,许文立,吕鹏,吴华清.未预期的非税负担冲击:基于“营改增”的研究[J].经济研究,2020,55(11):67-83.

上图报告了企业非税负担均值差异特征。从Part A 来看,非试点企业的规费支出在“营改增”前后的均值差异系数虽然为负,但不显著,初步表明,对照组企业的非税负担在“营改增”之后没有发生显著变化。与其不同,试点企业的规费支出在“营改增”之后显著增加。从Part B 来看,“营改增”之前,试点企业与非试点企业非税负担没有显著差异,而在“营改增”之后,试点企业的非税负担显著高于非试点企业。从营业收入对数均值差异来看,不论是“营改增”之前还是“营改增”之后( Part B) ,试点企业的营业收入都显著高于非试点企业,且“营改增”之后,两组企业的差距有扩大的迹象。

又例如,Liu, Wang and Xu(2022),详细的解读参见【香樟推文2481】面板数据因果推断实操指南

Liu, Wang and Xu(2022)

三、事件研究

目前的DID实践中,最常用的平行趋势检验方法称为“处理前趋势检验”。从理论上来说,处理前时期,处理并未发生,因此,处理前时期的ATTs=0。因此,大家都要检验传统的处理前趋势检验是通过检验一个参数𝜃=0, 𝜃=0表示处理组和控制组完美平行 ,不等于0表示在一定程度上偏离了平行趋势,也就是说,平行趋势检验类似于检验假设:

处理前趋势检验的原假设

它主要是利用事件研究法来呈现出处理前各个时期的安慰剂处理效应。(Cunningham,2020),例如,彭飞,许文立,吕鹏,吴华清(2020)、 Miller, Sarah, Sean Altekruse, Norman Johnson, and Laura R. Wherry(2021)。Roth(2022)统计了AEA的主要期刊上70多篇用事件研究的文章,最后用了12篇作为样本总结发现,实践中,处理前趋势检验最常用的标准:处理前单个系数的显著性,或者联合显著性,前者更常用

Roth J. Pretest with Caution: Event-Study Estimates after Testing for Parallel Trends[J]. American Economic Review: Insights, 2022, 4(3): 305-22.

很多人实际上有个误区:处理前系数全部不显著才说明处理前趋势检验通过,或者为平行趋势假设提供了可信的经验证据,只要有一个处理前系数显著,结果就不行,然后疯狂地抓头发,焦虑文章废了!

其实,从Roth(2022)的统计来看,顶刊上的处理前趋势检验也不需要全部的处理前系数都不显著,例如,上表中有三篇文章至少有一个处理前系数是显著的。在实践中,我们更多的是关注绝大多数系数不显著即可

换句话书,在事件研究中,处理前系数有个别显著也很正常,具体的原因请参见我和浙江大学Xiufen Liu et al(2022)、我和东财周闯、郑旭刚(2022)的研究。

实践中,我们通常呈现出处理前后的相对事件时间的系数:


彭飞,许文立,吕鹏,吴华清.未预期的非税负担冲击:基于“营改增”的研究[J].经济研究,2020,55(11):67-83.

表4 第( 1) 列结果显示,在改革之前,试点企业与非试点企业的规费支出没有显著差异,为平行趋势假设提供了一定的处理前的经验证据。而在改革之后, reform2系数高于reform1,意味着随着“营改增”的推进,企业非税负担面临加重的趋势。随着增值税抵扣链条不断完善,可抵扣范围增加,企业税收负担不断降低,为了应对税收收入减少,地方可能会加强非税收入征管,所以非税负担加重的风险增加。为了增强结论的稳健性,结合反事实思想,考察了“营改增”对企业其他支出的平行趋势结果。第( 2) 和( 3) 列结果显示,在“营改增”前后,没有发现试点企业和非试点企业在捐赠和社会保险支出方面的显著变化。

大家更常见地呈现处理前趋势检验的方式是事件研究图。例如,He and Wang(2017)研究的中国“大学生村官”对减贫的效应,处理前趋势检验的事件研究图为:


He, Guojun, and Shaoda Wang. 2017. Do College Graduates Serving as Village Offcials Help Rural China?“ American Economic Journal: Applied Economics, 9(4): 186-215.

根据上图,He and Wang(2017)下结论,“处理前系数都不显著…可以认为处理组和控制组处理前的结果趋势相似…未处理的村庄可以作为很好的对照组。”

四、处理前趋势检验的问题讨论

虽然,实践中,最常用的平行趋势检验方法是处理前趋势检验。如果相同趋势的原假设不能被拒绝,那么,研究者会认为PT假设可能对于处理后也会成立。但是,严格来讲,处理前PT经验证据与处理后PT假设并不等同,因此,我们就需要额外的、更多的关于处理后PT的讨论。正如Callaway and Sant' Anna(2022)所说:

重要的是,它仅仅只是一个处理前趋势检验;它与实际的PT检验并不相同。PT假设在处理前是否成立并不能告诉我们当前时期PT是否成立。处理前PT成立,处理后PT不成立也是可能的;处理前PT不成立,处理后PT成立也是可能的。我们只能说,将处理前趋势检验看作是DID设计可信性证据的一部分。

也就是说,处理前趋势检验对于DID的有效性来说,既不必要,也不充分(Kahn-Lang and Lang 2018)。我们很难从经验上证明PT假设是否成立,因为处理组未处理的潜在结果变量不可观测。因此,说服读者相信我们的PT假设是DID文献中最重要、最富争议的内容。例如,Kearney, Melissa S., and Phillip B. Levine(2015)识别了MTV的电视节目对青少年怀孕的影响,也提供了平行趋势检验。但是,学界对这篇文章的结论有极大的争议 (Jaeger, Joyce, and Kaestner, 2018; Kahn-Lang and Lang, 2019)。

Roth (2022,AER:insights) 指出了,处理前趋势检验的问题:(1)处理前趋势检验效力较低——AEA期刊上的文献,即使平行趋势假设不满足,可能也不会发现显著的处理前系数,效力一般在50%-80%;(2)处理前趋势检验偏误——DID效应依赖于处理前趋势检验,它本身存在问题,所以会更加恶化处理后的处理效应估计。

如果处理前趋势检验有问题,那还能做什么?
至少还可以做以下几个方面的工作:(1)处理前趋势的效力检验;(2)处理前趋势的敏感性检验;(3)等价性检验;(4)证伪分析;(5)制度/经济/社会背景分析;等等

未完待续...

如果这些内容,对大家有帮助,或者引用我的内容,请引用我的工作论文:
引用格式: 许文立. 平行趋势的秘密:我们要多相信平行趋势假设检验的证据?[J] 2022, 工作论文,https://wenddymacro.github.io/Wenddy-XU/.

©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 220,699评论 6 513
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 94,124评论 3 395
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 167,127评论 0 358
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 59,342评论 1 294
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 68,356评论 6 397
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 52,057评论 1 308
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 40,654评论 3 420
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 39,572评论 0 276
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 46,095评论 1 318
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 38,205评论 3 339
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 40,343评论 1 352
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 36,015评论 5 347
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 41,704评论 3 332
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 32,196评论 0 23
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 33,320评论 1 271
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 48,690评论 3 375
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 45,348评论 2 358

推荐阅读更多精彩内容