【作者】金丽群,张蕾:杭州出版社有限公司《深冷技术》编辑室
【摘要】为消除科技论文同行评审过程中存在的弊端,缩短评审周期和获得参考价值较高的评审意见,结合科技期刊的自身特色和所在学科领域技术发展的特点,动态管理评审专家库。详细阐述在动态管理评审专家库的新增专家、更新专家信息和解聘专家方面实施的行之有效的方法:通过多种途径新增专家,完整收集专家的基本信息并动态跟踪、及时更新,准确定位专家的专业方向并动态跟踪、及时更新,定期评价专家的评审质量,勤于调整、适时解聘等。
目前,国内外绝大多数科技期刊采取同行评审制度来保障科技期刊的学术质量,规范学术行为。专家的评审结果是编辑部决定科技论文是否录用的重要依据,起到决定性作用;但是,同行评审存在拒审、评审周期长、评审质量不高、评审不端行为等缺点。有资料统计,76.43%的评审专家有过拒审经历,有过拒审经历的评审专家中,91.27%的专家是因为稿件内容与自己的研究领域不符而拒绝评审。随着经济和科技的不断发展,各学科相互渗透、融合以及新兴研究领域不断出现,科技论文的内容常常涉及几个专业领域;学科分支越来越细,专业方向越来越小,科技论文的内容越来越细化。同行评审中“准同行”“大同行”评审现象较突出,影响了对科技论文发表价值的正确评估,甚至由于作者的学术不端行为,存在影子评审现象,作者利用虚假邮箱伪造身份操纵同行评审流程,提供对论文有利的意见,使同行评审制度形同虚设,失去意义;或者由于评审专家的主观原因,存在拖延审稿和勉强审稿等评审不端行为叫。这些同行评审弊端存在的最根本原因是编辑部对评审专家的通信方式、研究领域、主要观点和学术态度等信息掌握不全面、不准确和不及时;所以,科技期刊编辑部应利用多种渠道全面收集评审专家信息,并及时完善和更新,动态管理评审专家库,以便在科技论文送审时,能准确、快速地找到专业对口的“小同行”专家,缩短审稿周期,获得参考价值较高的评审意见,积极引导编辑部对科技论文做出正确决定,进而保证科技期刊的质量和学术水平。
根据《深冷技术》所在学科领域的技术发展和特点,对《深冷技术》评审专家库的动态管理主要体现在新增专家、更新专家信息和解聘专家3个方面。
1、评审专家库的信息组成
评审专家库的信息必须体现专家的学术水平、学术态度和研究方向,包括3大类信息:基本信息、专业方向和评审质量评价值,每大类信息包括的详细内容见表1。
表1 评审专家库的信息组成
项目 | 内容 |
基本信息 | 姓名、年龄、毕业学校、学位、工作经历和现工作单位、职务和职称、联系方式(电话、电子邮箱、微信号和微博号等) |
专业方向 | 发表论文、科研项目和基金项目,研究方向、研究重点,主要观点,评审论文类型和专家类型 |
评审质量评价值 | 0-100分 |
基本信息主要体现专家的教育背景、工作经历和通信方式。正确的基本信息是确保科技论文能及时送达专家本人的必要条件。一方面,可以保证审稿周期;另一方面,可以消除影子专家等学术不端行为。
专业方向是选择科技论文评审专家的根本依据。因为专业性很强的科技期刊,评审专家的研究方向和研究重点一般很明确,但是专家的学术视野与从事的工作有很大的关系。工作性质偏向于理论和新技术研究开发的专家,对理论类和综述类的科技论文较感兴趣,而对实际应用类论文,往往会认为学术水平不高,而错杀经济效益很好、值得推广的新方法、新应用;工作性质偏向于具体应用项目的计算、设计和操作的专家,前瞻性相对较差,难以准确地判断某些新的学术趋势和动向,难免对论文的创新性和超前价值做出有失公正的评价。所以,要根据专家的具体工作,送审适合他们工作性质的论文。
根据科技论文的类别(论证型、发现发明型、科技报告型、设计计算型和综述型),在专业方向中设置了评审论文类型和专家类型这2个信息内容。根据工作性质将专家分为2类:理论研究型和设计实践型。理论研究型专家审阅论证型、发现发明型和综述型论文,设计实践型专家审阅科技报告型、设计计算型和发现发明型论文。
评审专家的学术观点也会对评审结果的公正性产生影响。如果评审专家对某种研究方法、某个作者或某个单位存在偏见,或者科技论文与评审专家的学术观点相反,就会不自觉地反映到评审结论中去,对论文的评分相对较低或很低。
评审质量评价值的赋值为0-100分,由100分开始根据评价指标扣分。
2、动态管理的有效方法
2.1、新增专家
科技期刊应在正确定位其在学科领域的影响力的基础上,根据自身特色,多元化选择评审专家,优化评审专家库,使科技论文评审专家的整体学术水平和学缘结构与学科领域和科技期刊的发展相适应。
到目前为止,已有较多文献对选择和补充专家提出了很多种行之有效的途径。结合具体工作实际,笔者认为可行性较高的评审专家新增途径主要有以下10条:1)编委推荐;2)作者或审稿人推荐;3)利用科技期刊主办单位的学科优势选择;4)从综述类科技论文的参考文献的作者中挑选;5)从学科领域的重大课题和基金项目的负责人中选取;6)从学科领域高被引频次论文的作者中选取;7)利用互联网信息选取,如单位网站上的专家介绍信息,高等院校、科研院所、企业公布的课题和项目负责人;8)从学术会议的专题报告或会议论文集的专家中选取;9)从学科领域其他科技期刊的作者以及学科领域的国家标准和部级标准的编写者中选取;10)利用学科领域技术发展的动态信息挑选。利用动态信息,编辑可以了解学科领域的技术发展的新点、热点和与之相关专家,及时将新发现的专家增加到评审专家库中,当有涉及这些新点和热点的科技论文需要评审时,就能很快找到专业契合度高的专家,不仅节约了临时选择专家的时间,提高审稿时效性,又能获得质量较高的审阅意见。
在新增专家时,必须将准确的专家基本信息完整地录人评审专家库中,同时正确定位专家的专业方向。除了从互联网、出版物等公众媒体中获得信息外,最好的方法是与专家直接联系,充分沟通,请专家本人确认基本信息和专业方向。尤其是专业方向中的研究方向、研究重点和主要观点,编辑部可以提供几个参考建议,由专家自己选择或补充,再编辑部确认,双方达成一致。新增专家的评审质量评价值赋值100分,评审完一定数量的科技论文或一段时间后对评审质量重新评价并赋予新值。
2.2、更新专家信息
选择评审专家的主要依据是专业方向和评审质量评价值,而专家信息的缺失或错误(过时)常常导致无法及时将稿件送达专业契合度高的专家,导致对科技论文的真正价值不能正确评价和审稿周期延长。所以,编辑部应经常通过各种途径关注专家的科研状况和动态,及时更新专家信息。
2.2.1、基本信息
评审专家的基本信息不仅在新增专家时就应完整、正确,而且平时工作联系或通过互联网等媒体及时关注专家基本信息的改变情况,再通过其他联系方式核实后,将信息更新到专家库并标注更新日期。同时,定期(一般是1年)集中对专家的基本信息进行回访,及时记录反馈信息,更新有变化的信息并标注更新日期。
2.2.2、专业方向
编辑部除了在新增专家时正确定位专家的专业方向外,在平时更要关注专家的研究、技术工作等动态,及时更新和维护评审专家库,使评审专家库中的专业方向与专家正在从事的科研方向和主要观点等内容一致,提高送审准确度。主要渠道包括以下10条:1)定期(一般为1年)回访;2)专家近期公开发表的论文和出版的专著;3)学术会议上专家的演讲报告,学术论文集上专家的论文;4)专家的作者简介;5)互联网信息,如单位网站上专家的信息和专家微博、微信等社交网站信息;6)国家和部级基金项目主要负责人信息;7)国家标准和部级标准的主要编写者信息;8)学科领域技术发展动态信息;9)学科领域主要课题项目主要负责人信息;10)专家自己的意见。
2.2.3、评审质量
评价编辑部建立了评审质量评价指标体系,定期(一般是1年)对专家的评审质量进行综合评价,并将评价值记录在评审专家库中。编辑部根据评价值,对评审专家进行分类,为科技论文选择合适的评审专家提供依据。
评审质量评价值执行100分制,以减分方式进行评价。评价指标见表2,由编辑、编委会、其他审稿专家·作者和读者来评价、打分。
表2 科技论文专家评审质量评价指标
评价指标 | 统计数据 | 分值 |
评审时效性(20分)(标准1月) | >15d | -10 |
>30d | -20 | |
稿件通过率(10分)(标准50%) | >70%,<30% | -5 |
>90%,<10% | -10 | |
与其他专家评审结论的一致性(10分) | <60% | -5 |
<30% | -10 | |
评审结论的具体程度(30分) | 高 | 0 |
一般 | 0 | |
低 | -20 | |
评审结论的公正性、公平性、全面性和正确性(30分) | 高 | 0 |
一般 | 0 | |
低 | -20 |
评价指标的统计数据为1年的平均值,评审质量评价值60分为合格分。80分以上的专家保持正常的审稿邀请,60分以下的专家解聘;60-80分的专家,具体情况具体处理。如果是因为新聘专家对科技论文的评审经验不足,而且编辑部也没有及时很好地与他交流、沟通,扣分指标主要在评审时效性和评审结论的具体性,则保留正常的审稿邀请,同时由编辑直接与专家交流,使专家充分领悟编辑部的评审标准和要求,不断提高新聘专家的评审时效性和质量。如果扣分指标主要在稿件通过率、评审结论的一致性,这时就要分2种情况分析:一种情况是稿件通过率特别高(高于70%甚至达到90%)、评审结论的一致性很低,就要对这些专家的学术水平提出质疑,尽量减少审稿数,甚至解聘;另一种情况是稿件通过率特别低(低于30%甚至低于10%)、评审结论的一致性也很低,这种情况往往表明专家对该科技期刊在学科领域的定位不清楚,编辑部就应该与专家充分交流,使专家了解科技期刊的技术定位,不误杀有发表价值的科技论文。如果扣分指标主要在评审结论的公正性、公平性、全面性和正确性,就说明专家的学术态度不够严谨,不能客观地评价科技论文的科学性和创新性,不适合担任审阅专家,直接解聘。
90分以上的专家,如果评审结论的具体程度和评审结论的公正性、公平性、全面性和正确性这2项的统计数据为高,而且评审的论文数达到了一定的量,就可以列人核心评审专家的候选名单,由编辑部和编委会共同讨论决定是否补充到核心评审专家队伍。一定规模的相对固定又灵活调整的核心专家群体,是科技期刊保持评审专家整体学术水平的有效方法。
2.3、解聘专家
根据评审专家库信息,解聘已经退休、职务或岗位变动后所从事的技术工作不在科技期刊的学科范畴和评审质量评价值在60%以下的专家,建立一支高水平、高效率、高公正性的评审专家队伍,提高科技论文的评审效率和质量。
1)根据基本信息中专家的年龄信息,解聘到了退休年龄、确实从技术岗位上退休的专家。如果退休后被返聘继续从事原来的技术工作,保持正常的审稿邀请。
2)在收集信息后更新和维护专家信息库时,发现专家因为岗位或单位变动,技术岗位已经不在科技期刊的学科范畴,有些虽然还在原来的学科范畴,但是所从事的技术工作已经不再是学科领域的前沿水平,这些专家也要解聘并在专家信息库中给予标注。
3)评审质量评价值在60分以下的专家直接解聘,在专家信息库中给予标注。对于60-80分的专家,要找出正确原因后分别对待,解聘学术水平低和学术态度不够严谨,不能客观地评价科技论文的科学性和创新性的专家。
3、结束语
通过专家信息的及时更新和根据学科领域的发展储备的专家信息,科技论文的拒审率很低,保证了科技论文评审的时效性。现在,科技论文外审专家的评审周期平均值在15-20d。评审质量评价值80分以上的专家和有价值的评审结论的比例都达到了90%,评审结论的一致性、具体程度和公正性进一步提高,正确引导了编辑部对科技论文做出判断。
为了缩短科技论文的评审周期,保持评审专家的整体学术水平,提高评审质量,编辑部应定期跟踪、了解评审专家的科研状况和动态以及工作岗位和社会兼职情况,及时调整不能承担审稿工作的专家,适时补充新专家,解聘退休或因工作调动后不在科技期刊学科范围的专家;在评审行为发生后,对专家的学术水平和学术态度进行评价,及时发现和纠正论文评审中存在的问题,解聘评价值低的专家;勤于调整,恰当取舍,保证核心评审专家数量,不断优化专家队伍。