在一项新的重复在Nature期刊和Science期刊上发表的21篇心理学论文的大型研究中,来自中国、美国、瑞典、奥地利、新加坡、新西兰、德国和荷兰的研究人员报道他们在62%的时间里得出与原始论文相同的结论。即便重复实验与原始论文中的实验取得相一致的结果,效应大小也会变小。他们认为假阳性和“膨胀效应大小(inflated effect size)”是这个领域的重复性问题的一部分。相关研究结果于2018年8月27日在线发表在Nature Human Behavior期刊上,论文标题为“Evaluating the replicability of social science experiments in Nature and Science between 2010 and 2015”。

  图片来自Nature Human Behaviour, doi:10.1038/s41562-018-0399-z。

  论文共同作者、瑞典斯德哥尔摩经济学院经济学教授Anna Dreber表示,“假阳性结果能够让初始的研究人员和其他的研究人员花费大量时间、精力和金钱用于实际上并不成立的结果上。这会浪费资源和导致效率低下,因此越早发现结果不成立,就会越好。”

  除了这项最新研究中开展的重复尝试之外,Dreber和她的同事们还测试了一种预测哪些研究结果确实是可重复的方法。他们要求大约200人(其中没有一个人参与这些实验)在类似股票市场的情景中对哪些结果会成功进行下注。值得注意的是,这些参与者对这些用于重复初始研究结果的研究进行了预测。

  作为来自荷兰马斯特里赫特大学的一名参与者,Paul Smeets表示,“我对这些结果是否真地有意义进行了取样测试。有些结果看起来很壮观,但似乎也太好了而不可能是真的,这通常意味着它们就是如此。”

  这21篇原始论文在2010年至2015年期间发表,是从著名的Nature期刊和Science期刊中挑选出来的。这些论文的原始作者都收到了他们的研究结果的重复情况,并被要求提供反馈。作为这些原始作者中的一员,美国肯塔基大学心理学教授Will Gervais在2012年的一项研究中研究了参与者在观察罗丹的著名雕塑《思想者》之前和之后的宗教虔诚。正如这种预测方法所预期的那样,该研究并未得到重复。Gervais表示,“事后回想,我们的那项研究是非常愚蠢的。”

  美国加州大学戴维斯分校心理学家Simine Vazire(未参与这项新的研究)表示,“我们不应当将Science期刊或Nature期刊上发表的论文视为一项特别强有力的发现或一名特别有能力的研究人员的标志。”这两种期刊“并不是特别擅长挑选出真正强有力的发现或优秀的研究实践。”这些期刊“并不是特别擅长选择真正有力的发现或优秀的研究实践。这种预测方法增加了我的挫折感,这是因为它表明存在着呈现这些论文本身的证据是否有说服力的线索。”


相关文章

Nature:文化并非人类独有,猩猩传承文化能力

荷兰乌得勒支大学的研究人员在 Nature Human Behaviour 期刊发表了题为:Chimpanzeesusesocialinformationtoa......

数据存在虚假陈述该杰出学者NCB的文章也被撤回

2015年6月22日,St.Jude儿童研究医院DouglasR.Green团队在NatureCellBiology(IF=21)在线发表题为“MolecularcharacterizationofL......

神话破灭!轰动全球的4篇Nature、PRL等4项研究成果陆续被撤回

2022年8月11日,内华达大学AshkanSalamat及罗彻斯特大学RangaPDias等团队合作在ChemicalCommunications在线发表题为“Carboncontentdrives......

燕山大学发表2024年第2篇nature

燕山大学亚稳材料制备技术与科学国家重点实验室高压科学中心田永君院士团队与国内外学者合作,采用功能基元序构的设计策略,通过调控高能亚稳态到低能亚稳态的固态相变,合成出层状基元转角序构的氮化硼陶瓷,成功实......

Nature:2024年值得关注的七项技术,它是核心

随着人工智能(AI)技术的不断突破和大型模型的层出不穷,AI受到了前所未有的关注。面对这一浪潮,人们不禁好奇:未来究竟会是什么样子?为了解答这一问题,《Nature》杂志发布了未来的一年里,将密切关注......

七院院士,最新Nature:高性能柔性纤维问世,可穿戴电子新突破!

新加坡南洋理工大学的魏磊教授、七院院士高华建教授,以及中科院苏州纳米所的张其冲和中科院深圳先进技术研究院的陈明,共同发表了一篇关于高性能半导体纤维的最新研究成果。这篇题为“High-qualityse......

Nature发布2024年值得关注的七大技术,首位中国科学家成果入选

2024年1月22日,《自然》发布了2024年值得关注的七大技术——大片段DNA插入、人工智能设计蛋白质、脑机接口、细胞图谱、超高分辨率显微成像、3D打印纳米材料和DeepFake检测。七大技术中,生......

北京大学合作最新Nature

钙钛矿太阳能电池(PSCs)由一个固体钙钛矿吸收体夹在几层不同的电荷选择材料之间,确保设备的单向电流流动和高压输出在p型/intrinsic/n型(p-i-n)PSCs(也称为倒置PSCs)中,电子选......

零下273.056摄氏度我国科学家Nature发文实现无液氦极低温制冷

大约一个世纪前,人类首次将氦气液化,开启了利用液氦进行极低温制冷的新纪元。随后,极低温制冷技术被广泛应用于大科学装置、深空探测、材料科学、量子计算等国家安全和战略高技术领域。然而,用于极低温制冷的氦元......

回顾:2023年Nature\Science上的锂电池成果

2023年Nature上的电池文章汇总1.固态电解质最新成果登上Science日本东京工业大学创新研究所全固态电池研究中心RyojiKanno教授团队利用高熵材料的特性,通过增加已知锂超离子导体的组成......