科学界最被滥用的指标正在进行改造——尽管许多研究人员希望它完全消失。
信息公司汤森路透表示,它将提高其计算影响因子的透明度,这是一个对超过 10,900 种科学期刊的年度排名,它 于 7 月 29 日发布,同时还公布了 39 种期刊 被排除在该列表之外。
这家总部位于纽约的公司还在改进其商业分析产品 InCites,以添加基于单个文章的指标,并允许用户进行自己的计算。但批评人士表示,还需要更多的改变。
关于支持科学新闻
如果您喜欢这篇文章,请考虑通过以下方式支持我们屡获殊荣的新闻报道 订阅。通过购买订阅,您正在帮助确保有关塑造当今世界的发现和想法的具有影响力的故事的未来。
影响因子的发明是为了帮助图书馆决定购买哪些期刊:粗略地说,影响因子较高的期刊会吸引更多的引用。但它已经成为衡量研究人员及其论文质量的诱人标准——这激怒了科学家,他们表示,他们是根据发表的期刊,而不是他们发表的内容来评判的。
马里兰州贝塞斯达美国细胞生物学会执行主任斯特凡诺·贝尔图齐说,结果是一场进入具有高影响因子的期刊的竞赛,几乎每个人都对这种情况感到不满。
汤森路透表示,问题在于影响因子的使用方式,而不是指标本身。但即使是图书馆员和期刊编辑也不满意,因为他们说该公司对其如何计算指标并不清楚。“我们不确定他们的数据是否可靠,”德国海德堡《欧洲分子生物学组织期刊》主编伯恩德·普尔弗勒说,他表示自己一直在努力使自己的分数与该公司的分数相匹配。
更清晰的影响?
去年,贝尔图齐协调了一份由数百个研究机构和超过 11,000 名科学家签署的声明,即《旧金山研究评估宣言 (DORA)》,该宣言谴责了对影响因子的滥用,并呼吁采用更好的方法来评估研究。但他和普尔弗勒还向汤森路透发送了一封私人信件,要求其改进计算影响因子的方式。他们说,这封信从未得到回复,因此在 7 月 25 日星期五,他们将其在 DORA 网站上公开了。
现在,汤森路透,表示它确实回复了这封信,并表示它正在“采取重大步骤来提高期刊影响因子计算的透明度”。例如,它将允许(付费)用户查看计算中包含的每个项目。
它还提供文章的引用指标,而不仅仅是期刊的引用指标。现在,任何订阅者都应该可以计算任何文章集合的影响——无论是对于期刊、大学还是科学家——并对这些计数进行标准化,这很重要,因为一些学科的引用量比其他学科多得多,因此将生物学文章与数学文章进行比较是不公平的。
这足以阻止对汤森路透的批评吗?“我们赞赏这些新功能,但汤森路透将责任推给了用户,”贝尔图齐说。他说,这是一个问题,因为研究人员仍然会更喜欢“官方”数字。他希望该公司改进其发布的指标——例如,通过排除评论文章,因为它们包含的引用次数比研究文章多得多。
引用堆叠
汤森路透还宣布,由于39 种期刊今年将不会获得影响因子——这是单一年份被禁止的期刊的创纪录数量——原因是过度自引或来自其他期刊论文的“引用堆叠”。
在连续两年因引用堆叠而被抓的期刊中,有一本是《国际传感器网络期刊》(IJSN)。汤森路透发现,它在 2013 年 IEEE 消费者通信和网络会议论文集中被大量引用。而那些大量引用 IJSN 的会议论文集中的两篇文章的合著者是 IJSN 的主编杨肖。IEEE(电气和电子工程师协会)表示,它正在评估情况,并将“采取认为必要的适当行动”。
阿拉巴马大学塔斯卡卢萨分校的计算机科学家肖,去年已经看到 IJSN 因同样的做法受到谴责,当时汤森路透在《并行和分布式计算期刊》上发现了一篇 2011 年的论文,其中包含大量对 IJSN 的引用。同样,肖也是该论文的合著者。今年二月,它被其出版商爱思唯尔撤回,后者表示该论文违反了其关于引用操纵的政策。截至本文付印时,肖尚未回复电子邮件。
指标挑战
为了配合汤森路透的公告,一群物理学期刊编辑也发起了一项尝试,完全放弃其期刊对影响因子的依赖,转而采用基于开放引用数据库的自有衡量标准。
去年,汤森路透拒绝了《仪器杂志》的影响因子,因为它被电子工程师雷扎德·罗曼纽克在《SPIE 会议论文集》中的一系列论文中大量交叉引用。经过一番争论后,该期刊由总部位于伦敦的物理学会和意大利国际高级研究学院 (SISSA) 出版,被恢复了。但 SISSA Medialab(一家由 SISSA 拥有的非营利公司)的首席执行官恩里科·巴利表示,“由于处理该问题缺乏透明度,延迟损害了该期刊及其作者的声誉”。
相反,巴利领导开发了一个平行的期刊影响因子,称为Jfactor,该因子基于费米实验室、欧洲核子研究中心和其他实验室建立的关于高能物理文章和引用的信息系统 INSPIRE 收集的开放数据。他指出,如果物理学期刊采用它,那么汤森路透的专有指标将不再需要。
贝尔图齐希望其他指标能够在评估个人方面获得普及。在 7 月 29 日更新的 DORA 网页上,他和他人正在收集避免完全使用影响因子的良好研究评估实践示例。“我们可以讨论你想要的所有指标,但最终,真正重要的是论文中的内容,”他说。
本文经许可转载,并于 2014 年 7 月 20 日首次发表。