温馨提示: 定期 清理浏览器缓存,可以获得最佳浏览体验。
New!
lianxh
命令发布了:
随时搜索连享会推文、Stata 资源,安装命令如下:
. ssc install lianxh
使用详情参见帮助文件 (有惊喜):
. help lianxh
作者: 冷萱 (西南财经大学)
E-mail: lx@smail.swufe.edu.cn
「安慰剂检验专题」仓库: https://gitee.com/arlionn/placebo
本文相关资料放置在连享会码云仓库 「安慰剂检验」 中,后续会不断更新!
资料清单:经济研究-管理世界-2019-2020年安慰检验清单.xlsx、其他资料 (待更新)
目录
「编者按:」
此前,连享会发布了专题推文 稳健性检验!稳健性检验! (微信版),在公众号、知乎、连享会主页 ( lianxh.cn ) 几个平台的累积阅读量超过 30,000 次。
应数十位读者的要求,本期进一步退出「安慰剂检验!安慰剂检验!」专题。受限于能力,只能抛砖引玉,还望各位在项目主页 ( https://gitee.com/arlionn/placebo ) 留言区或微信公众号本文下方留言,我们会定期更新、完善。
关于「安慰剂效应」,维基百科的解释如下:
安慰剂效应 (placebo effect),又名伪药效应、假药效应、代设剂效应,是指病人虽然获得无效的治疗,但却让其 “预料” 或 “相信” 治疗有效,而让病患症状得到舒缓的现象。
随着「因果推断方法」在实证研究中的使用比例不断提升,越来越多的文章也会进行安慰剂检验。其检验基本原理与医学中的安慰剂类似,即使用「假的政策发生时间或实验组」进行分析,以检验能否得到政策效应。如果依然得到了政策效应,则表明基准回归中的政策效应并不可靠。进一步,经济结果可能是由其他不可观测因素导致的,而非关注的政策所产生。
答案当然是,为了让文章故事性更强,以及因果推断更加可信!
在实证研究中,无论是稳健性检验,还是安慰剂检验,亦或是异质性分析,其背后真实的目的只有两方面:
当然,不同的因果推断方法有着不同的安慰剂检验方法,这也进一步说明安慰剂检验是为因果推断服务的。而无论是哪一种因果推断方法,其对应的安慰剂检验思想均可理解为「构造伪政策」。但是,在应用安慰剂检验时,需要注意的是,不能为了安慰剂检验而进行安慰剂检验,其背后一定要有理论的逻辑。
例如,在使用 DID 方法后,通过随机构造实验组,并模拟 10000 次,然后将系数或
这样的做法看起来很完美,至少从实证角度看是这样的。如果想要更加完美,一定要解释为什么进行安慰剂检验,比如文章中的结果可能来源于其他因素。当然,这里需要具体问题具体分析。不过,方法还是可以照搬,而应用的场景和解释不可生搬硬套。
为帮助读者更好理解和应用「安慰剂检验」,本文通过整理《经济研究》与《管理世界》近两年发表的论文,归纳了安慰剂检验的常用方法和使用背景。
通过将政策发生时间前置以进行安慰剂检验的方法在双重差分中十分常见。实际上,这与我们经常看到的平行趋势检验是同一种方法。
在《经济研究》和《管理世界》发表的文章中,有近 1/3 的安慰剂检验使用的是前置政策发生时间。这在实际操作中也并不困难,设定一个虚拟的政策发生年份代替真实的政策发生年份,之后纳入回归即可。
但是,在没有任何理论逻辑支持下,进行这样的安慰剂检验可能比较枯燥。尤其是,在论文中单独一小节中专门呈现安慰剂检验结果。为此,我们可以借鉴部分已发表的文章,学习「如何将安慰剂检验有逻辑的放进文章中」。
王永钦和吴娴 (2019) 利用 2018 年 6 月 1 日中国人民银行扩大中期借贷便利 (MLF) 担保品范围政策这一准自然实验和债券市场微观数据,采用三重差分法识别了基于抵押品的货币政策的作用机制和政策效果。但是,文章结论的潜在威胁是,债券利差的下降可能是由市场的周期性变化而非政策导致的。为了证明前文回归结果的稳健性,作者设定了 2015 年 6 月 1 日为虚拟的货币政策实施时间,使用了 2015 年 1 月 1 日—2015 年 9 月 30 日发行的 AA 级以上公司信用类债券和金融债数据进行了安慰剂检验。
林毅夫等 (2020) 使用双重差分法、三重差分法和合成控制法来识别消费券的发放效果,并评估政府在助力经济复苏中的作用。但潜在的威胁是,发券城市的市民本身就有更强的消费倾向。为此,作者进行了安慰剂检验,分别假设消费券发放的时间提前 30 天或者 15 天,然后考察这些虚拟的消费券发放是否会影响支付笔数。
关于采用改变政策发生时间进行安慰剂检验的方法,还可参考以下文献:
另一种常见的安慰剂检验的方式是随机生成实验组。例如:
刘瑞明等 (2020) 根据中国文化体制改革的 “准自然实验”,采用中国 283 个地级市 2002—2016 年间的面板数据,评估了文化体制改革对地区旅游业发展的影响。对于文章的结论而言,一个可能的质疑是,人均国内旅游人次、人均国内旅游收入、人均国内外旅游总人次和人均国内外旅游总收入四个指标的统计显著可能来自于某些随机因素。为此,作者借鉴 Li 等 (2016) 和 Cantoni 等 (2017) 的方法进行安慰剂检验,以判断文化体制改革的旅游促进效应是否是由其他随机性因素引起的。
具体来看,刘瑞明等 (2020) 通过随机生成实验组的方式进行安慰剂检验,以判断文化体制改革的旅游促进效应是否是由其他随机性因素引起的。利用这一方法进行安慰剂检验主要目的是,排除由其他随机因素造成的经济后果,以得到更加可信的因果识别效应。通过随机抽取实验组,重复多次,提取安慰剂结果系数或
通过观察图 5 至图 8,可以发现,对于人均国内旅游人次、人均国内旅游收入、人均国内外旅游总人次和人均国内外旅游总收入四个指标,仅有极少数回归的
值大于真实回归系数的 值,这说明文化体制改革对国内旅游收入和人次的作用比较稳健,的确促进了地区旅游业的发展。详情可参考原文。
张克中等 (2020) 为研究信息技术、征税能力与企业逃税间关系,借助 “金税三期” 工程这一准自然实验,利用 2008—2016 年上市公司的微观数据和双重差分的估计方法进行相关分析。并借鉴 Chetty 等 (2009) 的做法,随机安排 “金税三期” 工程实施的年份和地区,重复此过程 10000 次,来进行安慰剂检验。
关于随机生成实验组进行安慰剂检验的方法,还可参考以下文献:
替换样本进行安慰剂检验与随机生成实验组的方法较为相似。不同之处在于,随机生成实验组的安慰剂检验方法最终结果以图形展示,而替换样本安慰剂检验结果多以表格形式展示。在实际操作过程中,替换样本安慰剂检验不需要重复模拟,这在技术上显得容易一点,但在理论逻辑上更加严谨。比如,某政策颁布后,受政策影响的是污染行业,在因果识别后,可对非污染行业进行分析,探究是否存在政策效应 (亦或对政策范围外的污染行业进行分析)。如果对于非污染行业依然存在所谓的政策效应,那么前文的分析并不可靠。例如:
张琦等 (2019) 以《环境空气质量标准 (2012)》的实施为准自然实验,采用双重差分法检验了新标准实施引致的官员动机变化对企业环保决策的影响。文章以 74 个试点城市以外的其他城市中重污染企业作为安慰剂样本,进行了证伪检验。
汪德华等 (2019) 基于 2013 年 CHIP 数据,运用截面数据双差法,评估了 20 世纪 90 年代中期二片地区 “国家贫困地区义务教育工程” 的政策效果。并以不受政策影响的样本作为分析对象,进行了安慰剂检验。
关于替换样本进行安慰剂检验的方法,还可参考以下文献:
替换变量进行安慰剂检验主要分为替换被解释变量和替换解释变量。与稳健性检验有所不同的是,稳健性检验希望在替换变量后结果依然稳健,而安慰剂检验希望替换变量后结果不再显著。首先,替换被解释变量。某项政策实施后,对特定经济活动会产生影响,但并不是对所有的经济活动都会产生影响。因此,将被解释变量替换为预期不会受到政策影响的变量进行安慰剂检验,以排除其他可能的干扰因素。例如:
陈林和万攀兵 (2019) 以双重差分法实证检验了《京都议定书》的政策效果。由于《京都议定书》未将 PM2.5 纳入减排考核目标,这诱使 CDM 项目实施方对 PM2.5 的防治有所忽略。可以预期,CDM 项目的实施并不会对以 PM2.5 为代表的常规空气污染物产生显著的减排效果。因此,以 PM2.5 为被解释变量进行安慰剂检验。
其次,替换解释变量。这一方法似乎没那么常用,或者说与前文的随机生成实验组和替换样本安慰剂检验有些类似之处。做法主要是将解释变量替换为看起来相似,但经济意义不同的变量。例如:
梁斌和冀慧 (2020) 在研究失业保险如何影响求职努力时,使用 “有失业保险” 的虚拟变量作为解释变量进行安慰剂检验。这主要是因为 “有失业保险” 不等于 “领取失业保险金”。
马黎珺等 (2019) 通过机器学习对 2009-2015 年的分析师报告进行了文本分析,以检验分析师报告的文字内容是否传递增量信息。结果表明,在控制了定量信息的影响之后,分析师报告中前瞻性语句的情感与报告发布后的累积超额收益显著正相关,说明前瞻性语句向市场传递了增量信息。在文章的稳健性检验部分,采用伪前瞻性语句对主要结果进行了安慰剂检验,以排除窗口期内其他并发事件对本文结果的影响。
关于替换变量进行安慰剂检验的方法,还可参考以下文献:
Note: 产生如下推文列表的命令为:
lianxh 安慰剂 稳健性 内生性 因果推断, m
安装最新版lianxh
命令:
ssc install lianxh, replace
连享会-直播课 上线了!
http://lianxh.duanshu.com
免费公开课:
直击面板数据模型 - 连玉君,时长:1小时40分钟,课程主页 Stata 33 讲 - 连玉君, 每讲 15 分钟. Stata 小白的取经之路 - 龙志能,时长:2 小时,课程主页 部分直播课 课程资料下载 (PPT,dofiles等)
支持回看
专题 | 嘉宾 | 直播/回看视频 |
---|---|---|
⭐ 最新专题 | 因果推断, 空间计量,寒暑假班等 | |
⭕ 数据清洗系列 | 游万海 | 直播, 88 元,已上线 |
研究设计 | 连玉君 | 我的特斯拉-实证研究设计,-幻灯片- |
面板模型 | 连玉君 | 动态面板模型,-幻灯片- |
面板模型 | 连玉君 | 直击面板数据模型 [免费公开课,2小时] |
Note: 部分课程的资料,PPT 等可以前往 连享会-直播课 主页查看,下载。
关于我们
课程, 直播, 视频, 客服, 模型设定, 研究设计, stata, plus, 绘图, 编程, 面板, 论文重现, 可视化, RDD, DID, PSM, 合成控制法
等
连享会小程序:扫一扫,看推文,看视频……
扫码加入连享会微信群,提问交流更方便
✏ 连享会学习群-常见问题解答汇总:
✨ https://gitee.com/arlionn/WD
New!
lianxh
命令发布了:
随时搜索连享会推文、Stata 资源,安装命令如下:
. ssc install lianxh
使用详情参见帮助文件 (有惊喜):
. help lianxh