学术审稿潜规则被Science曝光:作者名气越大,审稿人打分越高
来自同类研究中的最大试验
羿阁 发自 凹非寺
量子位 | 公众号 QbitAI
Science最新发文: 当论文的作者名气大时,审稿人会给予更高的分数 。
而且这一分数差距还不小。
这一结论来自一个号称“ 同类研究中最大规模 ”的随机对照试验,整个过程邀请了 3300名 研究人员参加。
试验结果可以说揭露了学术界的“潜规则”:
当一篇论文的唯一作者不为人知时,只有 10% 的审稿人建议接收这篇论文,但当同一篇论文的署名者是诺贝尔奖得主时, 59% 的审稿人表示赞同。
对于这一差距悬殊的数据,斯坦福大学博士后研究员、《研究诚信与同行评议》主编Mario Malicki直呼“ 令人难以置信 ”。
话不多说,让我们赶紧来看看研究人员是怎么得出这一结论的。
学术界的马太效应
其实多年来,学术界对于“ 马太效应 ”的抱怨一直存在。
马太效应,是指一种强者愈强、弱者愈弱的现象,引申到学术界来,就是地位高的研究人员往往能不成比例地获得更多研究成果。
相较于以前都是“口说无凭”,这次研究人员用一个精心设计的试验给出了确凿的证据。
来自奥地利因斯布鲁克大学Jürgen Huber领导的研究团队,向大约 3300名研究人员 发了一封电子邮件,询问他们是否愿意审查一份为期刊准备的经济学研究成果。
这项研究有两位作者,都来自美国查普曼大学:
一位是 2002年诺贝尔经济学奖得主 Vernon Smith,去年他在Google Scholar上被引用超过5.4万次;另一位则是Smith以前的 博士生 Sabiou Inoua,去年被引用次数只有42。
为了实验效果,3000多位潜在的同行审稿人被分成3批,分别被告知了不同的作者信息:
第一,只点名Smith,把他列为通讯作者;第二,只有Inoua;第三,没有作者。
该团队近日在芝加哥举行的国际同行评议和科学出版物大会上报告说,最终有821名研究人员同意进行评审。
从结果上看,Smith的“ 诺奖得主光环 ”似乎影响了人们的反应。
在只得到他名字的研究人员中,38.5%的人接受了评审邀请;在没有收到作者名字的人员中,这一比例为30.7%;而只有Inoua的版本接受比例最低,仅为28.5%。
不仅如此,为了避免出现偏见,研究小组还进行了下一步研究。
他们将重点放在313名最初没有收到作者姓名的自愿审稿人身上,并随机分配给他们3份手稿中的一份进行审稿:
其中一份只列出Smith,另一份仅列出Inoua,第三份没有作者。
该团队还告知评审者,他们的评估将是一项试验的一部分,该试验涉及多个受邀同行评审,而不是通常的两到三个(但是没有透露研究设计)。
与上一轮结果相同, Smith的手稿赢得了审稿人的最高评价 ,他们称赞其包含了新的信息和有数据支持的结论。
与此对应的是,在没有作者的版本中,只有24%的人建议接收该版本(有直接或轻微修改),而这一比例在Inoua一个人版本的中还要再少一倍。
网友评论
面对这一差距悬殊的数据,有网友却表示并不意外:
我一直是这么认为的,但有确凿的证据还是发人深省的。
有人还把这一现象形象的比喻为“大明星也可能演烂片、不知名演员也可能有突破性表演”,并呼吁改变这种看法:
因斯布鲁克大学的行为经济学家Christian Konig Kersting也表达了对这一结果的担忧:
同样的工作不应该因作者不同而受到不同的评价,因为这会让年轻和不知名的研究人员很难在学术过程中迈出第一步。
为了解决这一问题,有网友提议是时候开始实行双盲审机制了。
双盲审,即作者和评审者互相都不知道身份,一般被认为比普通的盲审更加客观公正。
但对于这个提议,Konig Kersting却表示,这种策略可能不起作用,因为审稿人通常可以从预印本或会议报告中识别作者。
话说回来,对于这种学术界“ 潜规则 ”,你怎么看?
参考链接:
[1]http://www.science.org/content/article/reviewers-award-higher-marks-when-paper-s-author-famous
[2]http://www.science.org/doi/10.1126/science.159.3810.56
— 完 —
版权所有,未经授权不得以任何形式转载及使用,违者必究。
- LeCun:概率论无法实现真正AI,我们要退回原点重新开始
- Text-to-3D!建筑学小哥自称编程菜鸟,攒了个AI作画三维版,还是彩色的
- 连你家电器的算力都不放过,新发现Linux恶意软件用IoT设备挖矿,大小仅376字节
- Linux之父是个果粉:给自用M2 Mac装上Fedora Linux,除了图形加速和Chrome都搞定了
- 在百度搞发明的人
- 40系显卡首批7199元起!赛博朋克2077帧数x4,老黄:大部分像素都是AI预测而非计算
- DeepMind用新AI超越自己:提速200倍,在所有雅达利游戏上胜过人类
- 比标准Attention快197倍!Meta推出多头注意力机制“九头蛇”
- 可生成高清视频的Stable Diffusion来了!分辨率提升4倍,超分算法来自腾讯,支持Colab在线试玩
- 大规模显卡挖矿彻底凉凉,网友开香槟坐等价格崩盘,老黄连夜发40系预热
- 小鹏打响特斯拉FSD对垒第一枪,城市路况AI开,目前仅限广州
- 学术审稿潜规则被Science曝光:作者名气越大,审稿人打分越高
- 7cm半机械蟑螂火了!极端环境也能做搜救工作,网友:我得吓死
- 2022字节跳动Byte Camp夏令营:53所高校学员云端完成24个项目
- 理想总裁2天套现近1亿上热搜,网友:要跑?
- 抖音智创语音团队三维菁彩声助力总台中秋晚会沉浸式直播
- iOS 16升级引热议,网友吐槽锁屏太花哨,潘粤明更新后一度登不上微信
- 扎克伯格把PyTorch捐了!已归入Linux基金会
- 晚上多吃不一定会胖,Cell子刊最新研究颠覆减肥认知
- 谁是下一个丘成桐?产业界也开始关心这事儿了