透明度让研究可评估:评一篇发表于 Nature 的犯罪学田野实验
Data Colada 发文质疑一篇发表于 Nature 的犯罪学田野实验:该研究将 55 个公共住房楼群随机分组,报告干预使前三个月犯罪率下降 6.9%(p = .036)。作者指出其分析在若干重要方面偏离预注册,且关键操纵存在仅见于原始材料的混淆因素,因此对核心结论持怀疑态度,并强调透明度只保证研究可被评估,而非结论可信。
不同的认识方式
不同作者的论证与解释,不以热度代替理由,不把分歧合并成一个答案。
59 条精选近 30 天 33 条精选共收录 519 条
Data Colada 发文质疑一篇发表于 Nature 的犯罪学田野实验:该研究将 55 个公共住房楼群随机分组,报告干预使前三个月犯罪率下降 6.9%(p = .036)。作者指出其分析在若干重要方面偏离预注册,且关键操纵存在仅见于原始材料的混淆因素,因此对核心结论持怀疑态度,并强调透明度只保证研究可被评估,而非结论可信。
针对一项用裸盖菇素治疗重度抑郁症的新研究引发的热议,Eiko Fried 指出致幻剂作为抗抑郁疗法是否安全有效目前并无答案,因为研究不足且现有研究存在缺乏对照组、盲法缺失、利益冲突等重大问题。他因此整理了一份供记者、有亲身经历者和学者参考的问题清单。
MIT 教授 Sherry Turkle 提出四条“共情规则”——拥抱未知、拥抱根本差异、拥抱承诺、拥抱社群,主张共情能帮助人们应对规则失去合法性时的失范状态。她认为共情始于“我不知道你的感受,但我愿意倾听”的根本谦逊,而非“我懂你”的激进坦诚。共情并非社会失序的解药,但能促成建设性改变。
心理研究者 Eiko Fried 为 WARN-D 抑郁症早期预警项目考察公开跨诊断自评筛查工具后,指出 APA 发布的 DSM-5 自评一级跨症状量表(成人版)存在多处问题。该量表核心问题同时混合了困扰程度、严重度与频率,且频率选项“少于一天”与“完全没有”相互重叠;用于躁狂和人格障碍的条目措辞也不适合自评。Fried 最终在项目中只选用了其中少数题目。
心理学家 Eiko Fried 在博客中指出,心理学长期偏重实证检验而忽视理论建构,开放科学改革虽改善了可重复性,却未解决理论缺失问题。他引用 Meehl 的观点称,心理学理论往往既不遭反驳也不获证实,只是随兴趣消退而淡出。文章区分理论、模型、现象与数据,并讨论弱理论、潜变量理论及形式化理论的两个重要特征。
一篇 NBER 论文分析 462 场经济学研讨会的提问数据,称女性演讲者被问更多问题且问题更易带有居高临下或敌意。Data Colada 作者重新解读后认为,女性演讲者更多是免于"问题过少",而敌意与居高临下差异统计上偏弱、概念上不一致,尚不足以支持女性受到更差对待的结论。
2020年PNAS研究在457人和214人两个样本中,比较入职前人格与约14年后的组织权力,未发现低宜人性带来更多权力;第二项使用同事评价。该研究并非中国校招录取率调查。
2019年研究分析10236名异性同居伴侣关系中的受访者,发现认为家务或开支安排对自己不公平与较低关系满意度相关。来自美国网站的自愿横断面问卷,不能推出因果或统一分工比例。
针对氯胺酮及其衍生物数小时内缓解抑郁症状的说法,Robinson与Fried梳理Canuso等2018年发表于《美国精神病学杂志》的试验:68名因自杀风险需住院的患者随机接受艾司氯胺酮鼻喷剂或安慰剂,每周两次、共25天。
Eiko Fried 公开了 James Coyne 对其提起的网络骚扰与霸凌诉讼:2017 年 8 月,Coyne 曾向阿姆斯特丹大学正式投诉 Fried,指控其“与种族主义结盟”“敌视患者群体”,但未提供任何证据,校方未进一步处理。
莱顿大学临床心理学组一位研究者发起“每周失败”分享,并公开自己2017年论文中的编码错误:Rachel Visontay于2018年8月28日发现该错误并告知,作者已向《Journal of Affective Disorders》提交更正,并在Open Science Framework上传更正说明与更新后的R代码。
Eiko Fried 统计 Robert Sternberg 近两年在《Perspectives on Psychological Science》发表的7篇论文,351条引用中161条为自引,占46%,单篇自引率从未低于39%。Fried 称这只是小样本、不作更大推断,但该样本涵盖 Sternberg 任主编期刊近两年的全部发文。
心理学家 Eiko Fried 撰文梳理学术出版流程:研究者无偿写作、审稿和编辑,论文却常被出版商付费墙锁住,连哈佛也难以负担订阅费。他援引数据称全球订阅费每年约 100 亿美元、约合每篇论文 5000 美元,而成本中性出版仅需数百美元。文章还批评美国心理学会(APA)2017 年的相关举动,并提到 Sci-Hub。
Eiko Fried 在博文中指出,将精神障碍定义为“脑障碍”在文献中虽常见,但仍属推测,尽管数十年研究投入,许多最常见精神障碍仍未找到特异可靠的生物标记。他批评 NIMH 前主任 Thomas Insel 等人的生物还原论结论并不由数据推出,并分享了一份关于精神障碍本质的10周阅读清单。
Eiko Fried 回应 Richard Morey 关于小样本并非天然有问题的讨论,主张在临床心理学与临床试验中,小样本确实会带来麻烦。他以德国选举民调模拟说明抽样变异如何影响参数估计精度,并援引 Simons 等人提出的“普遍性约束”论文,指出当前发表规范未要求作者限定推断范围,读者容易做出最宽泛的推广。
心理学家Eiko Fried发文追问,是否对心理学家要求过多,并列出人们常期待他这位35岁临床心理学与方法论方向博士后掌握的能力:从基础统计、SEM、IRT、网络模型、贝叶斯统计到R、Mplus、JASP,再到写R包、用LaTeX、开放科学、运营博客、社交媒体辩论、审稿、教学、申请经费和频繁跨国搬迁。
Eiko Fried 在博客中指出,社交媒体上为粗鲁言论辩护的“语气警察警察”需为两件事负责:科学讨论无法呈现全部论点,以及年轻学者因社会压力而不敢公开发声。他以 James Coyne 为例,说明其频繁的人身攻击和辱骂性语言会令他人不敢公开反驳,并认为在科学讨论中保持礼貌没有坏处。
Eiko Fried 在博文中质疑 Ionescu 等人 2016 年发表于《临床精神病学杂志》的氯胺酮研究:该研究仅纳入 14 名患者、无安慰剂对照组,且所有人继续服用原有抗抑郁药,240 分钟后 7 人、3 个月后仅 2 人自杀意念改善。作者却得出“重复剂量氯胺酮快速且稳健地降低自杀意念”的结论,Fried 认为该结论缺乏证据,改善可能源于安慰剂效应、原有药物或均值回归。
研究未支持迅速开始新关系必然更糟的简单判断,新关系与部分适应指标存在积极关联。研究非随机、样本偏年轻,不能推导越快恋爱越好,也没有给出统一等待期。