2023-01-17如何评价科研人员的学术水平?(2)——论论文引用数和H-index的不可靠性

        昨天的文章已经谈到现行的最为普遍的评价科研人员学术水平的指标是论文的数量,论文引用数,论文引用的H-index等(2023-01-16如何评价科研人员的学术水平?(1) - 简书 (jianshu.com))。

        但是,首先需要指明的是,上述指标有时候并非不能够准确地反映一个科研人员的学术水平。论文数量,应该是最不准确的指标了。尤其是考虑到中国这种以流水线的方式大量产出论文的科研生态之下,论文数量与学术能力这两者相关性是很低的。再说到论文引用数量或者H-index,这两者其实都基于引用数量越大学术水平越高这个前提假设。但事实是,这个前提假设有时候是不成立的。更准确地讲,论文引用数量与一个研究领域的热门程度更加相关。一个领域越是热门,研究的人员也就越多,这样一来,一篇论文其引用数自然就会越高。如果说,这个热门领域中的知名研究人员在顶级杂志上发表了一篇在多年之后被证明是错误的论文,那么论文引用数量的越大反而会产生更加严重的负面效果。相反,那些具有开创意义的研究,因为新开辟了一个研究领域,或者给出了某种超越时代认知的重大发现,前者因为从事相关领域研究的人员本身就少,后者因为大多数人无法接受这种革命性的重大发现,结果是在短期内(甚至可以达到十几数十年)论文的引用数量一直不会很高。可见,论文引用数量或者H-index都可以错误的评估那些具有重大创新意义的研究论文。

        所以,综上所述,如果仅仅依靠论文引用数量或者H-index这种定量指标去评价一个科研人员的学术水平,有可能会得出错得离谱的判断。还有一种情况(在中国尤其普遍),如果单看论文引用数量或者H-index,那就会对科研人员的学术水平得出完全是错误的判断:“包工头制”。所谓“包工头制”,是指一个有人脉有地位的研究人员(比如会搞人脉的人,还有高校的院长,校长,以及大量的院士)通过招聘数十甚至上百的研究生,博士后,以人海战术保持每年数篇论文较高质量论文的产出,如此就可以创造出在明面上还不错的定量指标。但实际上,这些所谓的“资深”研究人员真正完成的工作是圈钱,招人,很多时候ta都不知道底下的人到底做了什么,怎么做的,但是最终这些“包工头”们却是论文的最主要的冠名者。可见,在评估这种“包工头”式的科研模式时,论文引用数量或者H-index完全不能反映科研人员的真实的学术水平。基本可以大致断言,一个实验室越大,这种评估的准确性就越低。

        这里面隐含了一个关于如何评价个体在团队性成果中的贡献的复杂问题。一篇发表出来的论文,第一作者贡献多大,第二作者贡献又有多大,通讯作者又贡献几何?这是一个极难评估的问题。外人绝不可能知道真实情况,有时候甚至是直接参与人也无法达到共识。这就为有权者提供了谋利和藏拙的可能性。这也是为什么经常爆出某某院士论文造假,最后院士出来推责,指明是第一作者造假,自己完全不知情这样的学术丑闻和笑话。

        综合上述分析的各种情况,我想说明的不外乎是:单凭论文引用数量或者H-index这种定量指标,是无法准确地评估一个科研人员的学术水平的。所以,除了这些定量化的硬性指标,我们还需要一些直接衡量一个研究人员学术能力的“软指标”,用于反映其与科研直接相关的各种能力,这些“软指标”,这些直接的科研能力包括哪些呢?明天继续讨论。

©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 216,125评论 6 498
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 92,293评论 3 392
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 162,054评论 0 351
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 58,077评论 1 291
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 67,096评论 6 388
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 51,062评论 1 295
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 39,988评论 3 417
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 38,817评论 0 273
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 45,266评论 1 310
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 37,486评论 2 331
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 39,646评论 1 347
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 35,375评论 5 342
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 40,974评论 3 325
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 31,621评论 0 21
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 32,796评论 1 268
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 47,642评论 2 368
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 44,538评论 2 352

推荐阅读更多精彩内容