科研影响力评估:别再迷信影响因子了,行吗?
我有个朋友,搞材料科学的,去年发了篇Nature子刊。按说该高兴吧?结果他愁得直挠头——学校要评职称,算‘科研影响力’,看的是影响因子加被引次数。他那篇倒是争气,上线三个月被引二十多次。可隔壁老王,发在某个没人听过的期刊上,做的是AI辅助药物筛选,结果被一堆顶级实验室引用,谷歌学术上显示‘高被引’标签。你说气不气人?
这事儿吧,让我忍不住想聊聊科研影响力评估这档子事儿。说实话,每次看到那些评价体系,我都觉得又爱又恨。爱的是大家都在努力找一种公平的尺子,恨的是这把尺子往往量不出真正重要东西。
影响因子,你这磨人的小妖精
先说说影响因子吧。这玩意儿,多少年了,还是很多学校、基金评审的‘金标准’。一篇发在影响因子20的期刊上的文章,和一篇发在5的期刊上的文章,在他们眼里就是天壤之别。可你细品——影响因子算的是期刊平均被引次数,又不是你这一篇的。你投了个高影响因子期刊,不代表你文章就一定牛。我就见过有人在Nature旗下某刊灌水,内容嘛,也就那么回事,但挂着‘大刊’的名头,照样被捧上天。
更离谱的是,有些领域引用习惯本来就不同。数学、工程、计算机,跟生物医学能比吗?生物医学恨不得一篇参考文献列八十条,数学那边可能一篇到顶就引用二十条。可评估的时候,一刀切拿影响因子比,这不是耍流氓吗?
我这么说,不是要全面否定影响因子。它至少提供了一种简单粗暴的横向比较思路。但话说回来,你要是把科研影响力等同于影响因子,那可真就刻舟求剑了。
看个图感受下影响因子怎么被玩坏的:
影响因子游戏计算方式示意图
Altmetrics:网红式的影响力,靠谱吗?
Altmetrics:网红式的影响力,靠谱吗?
后来大家觉得光看引用太慢、太滞后,于是搞出了Altmetrics——就是什么社交媒体提到啦、新闻转载啦、政策文件引用啦,统统算进去。一时间,很多学者开始疯狂刷Twitter,博眼球。
我承认,有些研究确实需要快速传播,比如公共卫生突发事件的应对策略。这时候Altmetrics能快速反映社会关注度,挺好的。但,你能说一篇被《纽约时报》报道的论文,就一定比一篇默默无闻但被业内人士反复琢磨的文章更有影响力吗?不见得。
再说,Altmetrics太容易被操纵了。买粉儿、刷转发、搞标题党,这些操作在学术圈外面都不新鲜了,圈里人照样玩得溜。我记得有次看到一篇论文,标题里全是‘震惊’‘颠覆’,Twitter上转了几千次,结果点进去一看……算了不吐槽了。
所以啊,Altmetrics可以作为辅助,但要是把它当成唯一的金标准,那科研这池水就真的浑了。
同行评议:最土但可能是最靠谱的?
说来说去,其实学界最传统也最核心的评估方式,还是同行评议。就是你写的东西,拿给同领域的专家看,让他们判断有没有价值,有没有创新。这个办法土,但有时候就是歪打正着地准。
我有个做社会学研究的朋友,她的论文发在一个没有影响因子的期刊上,纯粹是因为那个期刊的编辑是真正懂行的人。论文里她用了一个很冷门的田野调查方法,换到那些大刊,可能审稿人都看不懂,直接拒稿。但在这个期刊,同行专家认认真真看了,给了很中肯的意见,后来这篇文章被一个国际政策报告引用了,直接影响了某个地方的社会救助方案。你说,这种影响力,影响因子能量出来吗?Altmetrics能算出来吗?
当然,同行评议也有问题——人情味太重,有时候‘圈内大佬’说了算,你想挑战主流观点,门儿都没有。但这总比一个冷冰冰的数字要全面得多,对吧?
现在有些机构在尝试‘结构化同行评议’,让评审人打分的时候分几个维度,比如创新性、方法严谨性、可复现性等等。这算是一种折中,但总归是往更好的方向走了。
同行评议流程与评估指标图
那到底该怎么评?我的几个不成熟的小建议
那到底该怎么评?我的几个不成熟的小建议
说了这么多,总得给点干货吧。我觉得未来的科研影响力评估,一定要多元化,别一根筋。至少得考虑这几层:
- 首先要看论文本身的质量,而不是期刊的名字。你得真去读,看看方法对不对,数据真不真,结论站不站得住。这需要时间,但值得。
- 其次要追踪长期被引模式,不是只看被引次数,而是看被谁引、在什么场景下引。比如被教科书引,被专利引,被政策文件引,这些都是不同维度的认可。
- 还有要结合领域差异,别拿物理学的尺子去量社会学。跨比较的时候,必须做归一化处理,至少是同类相比。
- 最后,把开放科学也算进去。你数据共享做得怎么样?代码有没有开源?你的研究是不是可复现的?这直接影响后续研究的效率,也是一种隐性的影响力。
但我心里清楚,这些建议说说容易,做起来难。毕竟,大学要排名,要申请经费,需要一个标准化量化指标来‘省事’。完全抛弃影响因子,不现实。可你要是一味地抱着它不撒手,那科研生态就会越来越卷,越来越浮夸。
我有个前同事,现在去了一所双一流,他们院里正在试一种新评价方式——每篇论文填表,写清楚这篇论文到底解决了什么问题,创新点是什么,然后由院学术委员会投票。我还挺好奇这种做法的效果的,但至少他们愿意尝试,而不是死磕影响因子。
话又说回来,评估这事儿,从来不只是学术问题,背后还牵扯着资源分配、晋升机制、甚至个人前途。所以每一次评估体系的变动,都牵一发而动全身。
我写这么多,不是想给大家一个标准答案——我自己也拿不出。只是想抛个砖,让更多人意识到,科研影响力评估这件事儿,我们真的需要换换思路了。别让那一个个冷冰冰的数字,掩盖了科研真正的热忱和贡献。
好了,扯了这么多,希望别太啰嗦。你要是也遇到过被影响因子坑惨了的经历,欢迎在评论区里吐槽,咱们一起想办法,看看有没有更好的活法。