随着学术界对“核心期刊”、SCI论文以及影响因子等学术量化指标的重视,量化评价也受到了种种质疑和责难,认为“学术评价量化背离学术评价宗旨”,“学术评价要靠同行评议”,甚至认为是学术评价量化导致了种种学术不端行为。对此,笔者认为,有必要仔细分析学术评价量化与同行评议的关系。
概括而言,科研论文的评价分为两个方面,其一是从专业学术角度,对论文内容本身的创新性、app性和应用性及其发表价值的评审,这主要靠同行评议;其二是从科研管理角度对科研人员或机构的绩效考核,这主要是运用app计量学的方法对已发表的论文及其学术影响力,尽可能作出符合实际情况的量化评价结果。二者操作主体和功能目的不同,但既相对独立又相互联系。前者是学术评价的基础,评价主体是同行专家,主要是评审论文成果的价值以决定是否能够发表及其发表的场合;后者主体是科研管理部门或机构以及app计量分析人员,主要是对已发表论文成果数量和质量的综合评价,其目的是作为绩效考核、职务评聘、资源分配的依据。同行评议历来是app共同体内学术评价最主要、最基本的评价方法,但现实中的同行评议也并非无懈可击,如,受到个人学识水平、主观倾向或学术成见的影响,或遇到利益冲突时,同行评审也可能被人为操控而失去公正性和客观性,且评审结果不易量化统计和比较。尽管有单盲法、双盲法、公开式、交互式、集体法等多种方法以尽量保证评审的客观性,但并不能完全解决社会环境、伦理道德、行为规范、心理动机等方面存在的问题。计量化评价则主要通过对发表论文数量、期刊影响力、论文被引频次等量化统计分析,或对设定的评审指标量化打分、综合计算,得出量化评价结果。其特点是计量明确、相对客观,但存在诸如将期刊影响因子等同于论文质量指标的不合理性,且同样存在人为操控等问题,如为提高影响因子过分自引,或以不正当手段追求论文发表数量等。可见,同行评议与量化评价各有利弊,都非完美无缺。
目前,对量化评价诟病的同时强调应重视同行评议,但殊不知,量化评价的基础本身就是同行评议。因为量化评价所统计的每一篇论文都是经过同行评审而正式发表的。尽管量化评价中遭受指责最多的是用期刊影响力来表征其发表论文的质量水平,但不能不承认,由于高水平权威性期刊如某专业核心期刊或SCI收录期刊的责任编辑、主编尤其是编委或同行评审专家往往都具有较高学术水平,其审查把关较普通期刊更为严格,更由于高水平权威期刊的“马太效应”,投稿量大而用稿率极低,录用发表更为困难,高水平期刊的高水平评委用高水平期刊录用标准评审,在众多论文中相对择优筛选出来的论文得以在高水平期刊上发表,自然容易被认为是高水平论文。从这一角度看,量化评价之所以把论文水平等同于期刊水平的“合理性”依据恰恰是同行评议。但事实上,所谓“高水平期刊上发表的论文”其学术影响力(被引频次)确实差异较大而呈现良莠不齐。这也从反面说明了同行评议并非万能。以强调同行评议为由指责量化评价也难以令人信服。
学术评价确实是一项困难而复杂的事情,任何单一的方法都难以奏效,想用一种方法取而代之是行不通的。事实上,同行评议与量化评价本身不是对立的,二者是相互联系、不可偏废的:量化评价的基础就是同行评议,其本身也包含同行评议的成分,量化评价之所以强调一定数量的核心期刊或SCI论文数是因为,这些论文都是经过相应层次的同行评审的,更因为量化评价中统计的论文被引频次、影响因子其实也来源于同行评议——论文被同行评论、综述、正面引用以及负面引述(批评性引用)也都属广义的同行评议。学术评价量化注重核心期刊或SCI论文数量的统计和评比本身并没什么错;错的是因急功近利、唯利是图而不择手段去追求论文数量,制造“学术泡沫”。学术评价尤其是量化评价之所以存在诸多问题和弊端,关键并不在于方法本身,而在于被简单化滥用,更在于功利意识驱使下的种种失范行为。
(作者为总参工程兵科研三所高级工程师)