越是不可靠的研究,传播度越广?

长期以来,一篇学术论文的被引用次数,都被视为是衡量一项研究的质量的重要指标,但这也存在争议。比如2011年,一篇发表在《科学》杂志上的心理学论文就发布了一个非常“有趣”的结论,论文称,人们将互联网作为一种“外部”记忆形式,依赖它来获取信息,而不是靠自己回忆事实。这样的研究结果在社交媒体和学术界都引发了不小的轰动。

然而,在2018年的一项研究中,一组研究人员对21篇于2010年和2015年之间发表在《科学》和《自然》期刊上的备受瞩目的论文进行了检验,其中就包括我们刚刚提到的那篇论文。研究人员发现,这篇论文中的一项关键发现无法被复制。但是,这篇论文的被引用次数高达1417次,其中有超过400次引用发生在2018年的复制工作之后。

于是,关于学术论文的引用次数出现了这样一种声音:在一项发现的有趣程度和不可复制性之间,存在某种关联,越是不可靠的研究,传播度越广。现在,一项新的研究结果似乎印证了这场正在发生的“复制危机”。

5月21日,加州大学圣迭戈分校的经济学家MartaSerra-Garcia和UriGneezy在《科学进展》杂志上发表了一项新的研究,他们发现当试图对那些发表在主要的心理学、经济学和科学期刊上的社会科学以及医学论文进行重复时,很多结果都不成立。而且与那些可复制的研究相比,无法复制的研究的被引用次数往往比那些可复制的研究更高。

在这项研究中,Serra-Garcia和Gneezy从三个有影响力的复制项目中,收集到了80篇论文的数据。这些项目试图系统地复制一些发表在顶级心理学、经济学和其他综合类科学期刊(如《自然》和《科学》)上的发现。从数据来看,在心理学领域被调查的100个实验中,只有39%被成功复制;经济学领域的18项研究中有61%的可被复制。

有意思的是,研究人员还发现,发表在《自然》和《科学》上的论文有着最显著的引用次数差距——不可复制论文的被引用次数比可复制论文的被引用次数多300次。

而且,当研究人员检查这些不可复制的论文在复制项目发表之后的引用次数时,发现这种差距也仍然存在。引用这些论文的研究很少在新论文中提到复制失败的事实,据调查,提到了复制失败一事的研究只有12%。

在论文中,研究人员写道,其实专家是可以很好地预测哪些论文将能被复制、哪些不能的。因此他们想知道,为什么那些不可复制的论文还是能得以发表呢?他们提出了一种可能的答案,即学术期刊的评审团队在做“取舍”,当一项研究的结果看起来“很有趣”时,他们就会降低对其证据的要求,采用更低的可重复性标准。

当然,一次失败的复制并不意味着最初的发现就一定是错误的。因为对于一些社会科学研究来说,研究方法的改变和参与者习惯的演变,有可能导致新得出的结果不同于过去。

但不可否认的是,新的研究结果或许指出了一个我们在评判一项研究时所存在的“根本问题”,即大多数学术机构都将引用次数作为衡量一项研究的重要指标,以及一些期刊也倾向于刊登更有趣、更吸引眼球的发现,是目前复制危机的根源。

而那些被多次引用的并不可靠的研究所能产生的影响可能是巨大的。例如1998年,英国的神经科医生AndrewWakefield在著名的生物医学期刊《柳叶刀》上发表了一篇论文,称自闭症和接种麻腮风(麻疹、腮腺炎和风疹)三联疫苗之间存在关联,导致世界各地无数的父母加入了反对麻腮风疫苗的行列。虽然《柳叶刀》在2010年撤回了这项错误的发现,然而关于自闭症与麻腮风疫苗有关的说法仍没有停息。

我们说,“非凡的主张需要非凡的证据”。这或许应该成为学者和期刊评审团队在看到有趣的研究结果时谨记在心的一条宗旨。新的研究结果再次提醒我们,无论是学者还是评审,都应该付出额外的努力来加强已发表研究成果的可信度;同时,当读者在读到有趣的研究时,也应该持更谨慎的态度。

THE END
1.班产24吨蛋奶饮料厂设计毕业论文(开题报告论文正班产24吨蛋奶饮料厂设计毕业论文(开题报告-论文正文-外文翻译)https://bbs.pinggu.org/thread-13155256-1-1.html
2.正高答辩自述其次,我想谈谈这篇论文的结构和主要内容。 本文分成五个部分 第一部分从制造业的地位、加强制造型企业成本控制的意义来阐述成本控制的重要性。 第二部分从4个方面说明制造型企业成本控制的特点。 第三部分从5个方面说明我国制造型企业成本控制的现状及问题 https://www.360wenmi.com/f/filepxnq38ny.html
3.“那个张颖,我联系到了啊”2018年,科创板开闸,创投市场对制造业的调研需求开始猛增。与此同时,由于当时金融行业缺少对制造业的覆盖,选材标准更多集中在商科范畴里,对“猛增的调研需求”又转化为了“猛增的招聘需求”。于是又有理工学科背景、又有一定管理学知识基础的我,忽然变成了市场里最受欢迎的“人才画像”,我需要做的就是顺水推舟,选择https://www.myzaker.com/article/668660838e9f093e1548271f
4.东北网2013年11月14日新闻汇总[1253][东北网生活] 【民生】哈尔滨市一半小区有业委会 明年将完善相关法规 2013-11-14 10:48 [1254][东北网汽车] 为销量发力 务实的企业有好果子吃 2013-11-14 10:48 [1255][东北网国际] 美强奸杀人犯临死要求捐献器官 州长紧急叫停死刑 2013-11-14 10:37 [1256][东北网社会] 男子自述赴越南相亲经历https://www.dbw.cn/system/2013/11/14/0_20131114.shtml
5.新华每日电讯*习近平:用心用情促进儿童健康成长全面发展 *贺 信 *习近平信贺中国宋庆龄基金会成立四十周年强调秉承宋庆龄先生“永远和党在一起”的信念为促进海内外中华儿女大团结作出新的更大的贡献汪洋出席纪念大会并讲话 *贺 信 *努力建设人与自然和谐共生的现代化 http://mrdx.cn/content/20220601/Page05DK.htm