【摘 要】为研究红点指标与其他期刊科学计量指标的相关性,探讨它的合理使用范围,分析其在期刊出版和评价中的应用,本文选取《中国科技期刊引证报告(核心版)》(2018年)收录的56种医药大学学报的24项科学计量指标进行统计分析。同时,选取相关学报的关键词生成词云图,进一步探究红点指标的应用。通过分析发现,24项期刊科学计量指标中红点指标与核心被引半衰期、文献选出率、地区分布数、机构分布数、海外论文比、引用半衰期6项指标具有相关性,与其他18项指标没有相关性。医药大学学报的高频关键词中含有很多不具备体现期刊定位特点的医学常用词汇,如影响因素、治疗结果、学报等。因此可以认为,红点指标与其他期刊评价指标的相关性结果不具有广泛使用性,只有在同类期刊进行比较时才有意义。
【关键词】红点指标;相关性;医药大学学报;高频关键词;文献分析方法
《中国科技期刊引证报告(核心版)》(2017年)首次提出了红点指标RPF ( Red Point Factor)的概念[1]。红点指标以测度学术论文研究内容的前沿性为出发点,指某期刊发表的论文中,关键词与其所在学科排名前1%的高频关键词重合的论文所占的比例,用于测度期刊论文与学科研究热点的重合程度[2]。红点指标的应用对于学术期刊整体出版质量的评价具有重要的作用,也是科学计量学的重要发展,受到了学术界的极大关注。为了在学术期刊评价和科研管理中合理使用红点指标,本文以我国高校医学学报为样本,研究红点指标与其他期刊科学计量指标的相关性,探讨它的合理使用范围,分析其在期刊出版和评价中的应用,在此基础上提出期刊编辑出版思路和建议。
1 数据来源
将《中国科技期刊引证报告(核心版)》(2018年)中收录的56种医药大学学报的24项学术计量指标与红点指标进行相关性分析。为比对便捷,按照《中国科技期刊引证报告》的计量指标分类方法,将需要分析的期刊指标分成3类:期刊被引计量指标、期刊来源计量指标和学科分类内期刊计量指标,共25项学术计量指标[1]。
为进一步分析期刊红点指标与关键词的对应关系,通过关键词分析学科发展的趋势,再从中选取医药大学学报所发论文的关键词作对比研究。为了使研究结果具有代表性,分别选取红点指标排名前5名、中间5名和最后5名共15种期刊作为样本,从超星数据库提取这些期刊2017年出现次数排名前10位的关键词作为研究数据。将选取好的期刊关键词用Tagxedo词云软件生成词云图。
2 数据处理
运用SPSS 25对搜集的期刊指标数据进行处理。由于期刊的红点指标不连续,呈现非正态分布特征,所以采用双变量相关性Spearman秩相关分析法(非参数检验法)分析红点指标与影响因子、总被引频次等24项期刊评价指标的相关性,2个量之间的相关程度以相关系数r表示,认为P<0.05表示具有显著相关关系。且r值越大,P值越小,相关程度越紧密。
3 结果与分析
3.1 红点指标与24项期刊指标的相关性统计
对我国医药大学学报类期刊指标数据进行统计,56种医科大学学报类期刊的红点指标的平均值为0.62,其中有25种(44.64%)期刊红点指标大于均值。红点指标数值最高为1,代表该期刊评价时间窗口内所有发表论文的关键词都能与同期同学科高频关键词相重合;数值最低为0,代表该期刊评价时间窗口内发表的所有论文的关键词与同期同学科高频关键词均不重合。其中《海南医学院学报》红点指标最高,为0.89。《沈阳药科大学学报》红点指标最低,为0.43。表1选取2018年红点指标排名前5名、中间5名和最后5名的医药大学学报的主要科学计量学指标。
表1 15种医药大学学报红点指标与主要科学计量学指标
期刊名称 | 红点指标 | 核心总被引频次 | 核心影响因子 | 综合评价总分 | 学科扩散指标 | 学科影响指标 |
海南医学院学报 | 0.89 | 2715 | 1.128 | 78.2 | 6.89 | 0.57 |
青岛大学医学院学报 | 0.80 | 470 | 0.288 | 30.4 | 4.48 | 0.38 |
贵州医科大学学报 | 0.77 | 717 | 0.432 | 35.4 | 5.41 | 0.52 |
西安交通大学学报(医学版) | 0.74 | 906 | 0.764 | 59.3 | 6.70 | 0.55 |
东南大学学报(医学版) | 0.74 | 839 | 0.634 | 45.7 | 5.84 | 0.48 |
山东大学学报(医学版) | 0.63 | 980 | 0.536 | 52.2 | 7.34 | 0.66 |
华中科技大学学报(医学版) | 0.62 | 813 | 0.565 | 55.0 | 6.64 | 0.61 |
成都医学院学报 | 0.62 | 490 | 0.433 | 46.2 | 4.30 | 0.32 |
山西医科大学学报 | 0.62 | 843 | 0.397 | 45.2 | 6.61 | 0.52 |
山东大学耳鼻喉眼学报 | 0.62 | 399 | 0.445 | 30.1 | 2.77 | 0.43 |
兰州大学学报(医学版) | 0.54 | 358 | 0.825 | 37.5 | 2.98 | 0.23 |
首都医科大学学报 | 0.53 | 1107 | 0.911 | 65.2 | 7.46 | 0.64 |
新疆医科大学学报 | 0.52 | 1268 | 0.446 | 44.5 | 7.18 | 0.55 |
广东药学院学报 | 0.45 | 733 | 0.440 | 39.8 | 4.91 | 0.30 |
沈阳药科大学学报 | 0.43 | 1058 | 0.384 | 41.2 | 4.77 | 0.29 |
3.1.1 红点指标与期刊被引指标的相关性
将各医药大学学报的红点指标与期刊被引用计量指标进行相关性分析,结果见表2。发现红点指标与核心被引半衰期呈负相关(P<0. 05),与核心总被引频次、核心影响因子、核心即年指标、核心他引率、核心引用刊数、核心开放因子、核心扩散因子、核心权威因子相关性不具有统计学意义(P>0.05)。核心被引半衰期是指期刊在统计当年被引用的全部次数中,较新一半是在多长时间内发表的。它是测度期刊老化的一个指标,更多地反映了某一学科的发展速度。学科发展速度越快,核心被引半衰期值越小。同时,红点指标反映的是期刊与学科发展趋势的重合度,体现的是学科发展的最新进展。因此,红点指标与被引半衰期的值在一定程度上存在负相关的统计学意义。
表2 医药大学学报红点指标与期刊被引指标的相关性分析
红点指标 | 核心总被引频次 | 核心影响因子 | 核心即年指标 | |||
r | P | r | P | r | P | |
-0.088 | 0.521 | 0.092 | 0.500 | -0.025 | 0.853 | |
红点指标 | 核心他引率 | 核心引用刊数 | 核心开放因子 | |||
r | P | r | P | r | P | |
-0.144 | 0.290 | -0.077 | 0.572 | -0.073 | 0.595 | |
红点指标 | 核心扩散因子 | 核心权威因子 | 核心被引半衰期 | |||
r | P | r | P | r | P | |
0.076 | 0.580 | -0.061 | 0.657 | -0.273 | 0.041 |
3.1.2 红点指标与期刊来源计量指标的相关性
将各医药大学学报的红点指标与期刊来源计量指标进行相关性分析,结果见表3。发现红点指标与文献选出率、地区分布数、机构分布数呈正相关(P<0.05),与海外论文比、引用半衰期呈负相关(P<0.05),与来源文献量、AR论文量、平均引文数、平均作者数、基金论文比相关性不具有统计学意义(P>0.05)。一般来说,现代医药学研究的热点课题会受到不同地区和不同机构的普遍关注,会有众多地区和机构的学术共同体围绕热点课题发表论文,因而,期刊的红点指标与作者的地区分布数和机构分布数呈正相关就容易被理解。文献选出率反映的是期刊统计来源文献量与期刊全年发表的所有文献总量之比,反映了期刊报道学术、技术类成果的比例。在医药学研究中,热点课题的研究成果主要是通过学术、技术类论文来表现,这可能是文献选出率与红点指标具有正相关性的原因。统计结果表明,红点指标与期刊引用半衰期呈负相关,其原因可能是引用半衰期反映了期刊利用文献的新颖度,与红点指标反映学科的热点课题,具有类似的特性。而引用半衰期与期刊利用文献的新颖度成反比,所以引用半衰期与红点指标具有负相关的统计学意义。统计结果还表明,红点指标与海外论文比呈负相关,若寻找其原因需要对海外论文的数量、学科特点、研究方法等进行进一步分析,才能够得出比较合理的结论。
表3 医药大学学报红点指标与期刊来源计量指标的相关性分析
红点指标 | 来源文献量 | 文献选出率 | AR论文量 | 平均引文数 | 平均作者数 | |||||
r | P | r | P | r | P | r | P | r | P | |
0.112 | 0.412 | 0.383 | 0.004 | 0.081 | 0.551 | -0.095 | 0.487 | -0.186 | 0.170 | |
红点指标 | 地区分布数 | 机构分布数 | 海外论文比 | 基金论文比 | 引用半衰期 | |||||
r | P | r | P | r | P | r | P | r | P | |
0.264 | 0.049 | 0.306 | 0.022 | -0.346 | 0.009 | -0.058 | 0.670 | -0.274 | 0.041 |
3.1.3 红点指标与学科分类内期刊计量指标的相关性
将医药大学学报红点指标与学科分类内期刊计量指标进行相关性分析,结果见表4。发现红点指标与综合评价总分、学科扩散指标、学科影响指标、总被引频次的离均差率、影响因子的离均差率相关性均不具有统计学意义(P>0.05)。
表4 医药大学学报红点指标与学科分类内期刊计量指标的相关性分析
红点指标 | 综合评价总分 | 学科扩散指标 | 学科影响指标 | |||
r | P | r | P | r | P | |
-0.096 | 0.480 | -0.117 | 0.392 | 0.016 | 0.904 | |
红点指标 | 总被引频次的离均差率 | 影响因子的离均差率 | ||||
rs | P | rs | P | |||
-0.088 | 0.517 | 0.120 | 0.380 |
3.2 15种期刊关键词及词云图分布
通过研究红点指标与其他期刊指标的相关性,试图找到红点指标的分布规律,有利于提高期刊的科学计量学指标。为了尝试从指标设计原理和计算方式解释数值分布规律和相关性的构成原因,研究对红点指标所反映的关键词进行了统计。此外,在学术期刊编辑出版实践中,还可以通过红点指标所反映的关键词变化来分析医药学发展的前沿和趋势,以利于编辑在选题策划工作中有的放矢,瞄准学科发展的热点问题进行组稿和报道。为此,研究将2017年56种医药大学学报类期刊按红点指标排名,选取前5名、中间5名和最后5名共15种期刊,统计每个期刊出现次数前10位的关键词,结果见表5。利用Tagxedo词云软件将这些关键词生成词云图,见图1。从图1中可以看出,字号很大的关键词是医学研究领域中常用的词汇,这些词汇反映了学科发展的趋势和热点问题,如细胞凋亡、增殖、糖尿病等。同时,一些字体很小的关键词可以表现出学报独特的闪光点,如肺纤维化、剖宫产术等。
表5 15种医学大学学报排名前10位的高频关键词
期刊名称 | 关键词 |
海南医学院学报 | 炎症反应、氧化应激、增殖、凋亡、侵袭、炎性因子、血管新生、免疫应答、免疫功能、应激反应 |
青岛大学医学院学报 | 治疗结果、病例报告、危险因素、2型糖尿病、剖宫产术、超声检查、肿瘤坏死因子卒中、白细胞介素、影响因素分析 |
贵州医科大学学报 | 疗效、细胞凋亡、危险因素、血清、白细胞介素、儿童、糖尿病、免疫组织化学、感染、肺肿瘤 |
西安交通大学学报(医学版) | 凋亡、西安交通大学、大鼠、学报、出生缺陷、乳腺癌、肝纤维化、细胞凋亡、肝星状细胞、胃癌 |
东南大学学报(医学版) | 文献综述、预后、小鼠、凋亡、2型糖尿病、危险因素、大鼠、细胞凋亡、中西医结、学报 |
山东大学学报(医学版) | 预后、1251粒子、队列研究、放射性粒子、影响因素、老年人、阿尔茨海默病、多囊卵巢综合征、高龄辅助生殖技术 |
华中科技大学学报(医学版) | 侵袭、细胞凋亡、增殖、信号通路、乳腺癌、凋亡、抑郁症、迁移、微小RNA、糖尿病 |
成都医学院学报 | 老年、疗效、影响因素、老年人、高血压、焦虑、医学院、儿童、并发症、2型糖尿病 |
山西医科大学学报 | 细胞凋亡、细胞增殖、乳腺癌、小鼠、糖尿病、胃癌、结直肠癌、食管鳞癌、儿童、大鼠 |
山东大学耳鼻喉眼学报 | 睡眠呼吸暂停,阻塞性、变应性鼻炎、儿童、白内障、高龄、辅助生殖技术、低温等离子、外科手术、治疗结果、鼻咽癌 |
兰州大学学报(医学版) | 胃癌,META分析、铜绿假单胞菌、疗效、细胞凋亡、高效液相色谱法、凋亡、机制、慢性阻塞性肺疾病、细胞增殖 |
首都医科大学学报 | 乳腺癌、过敏性鼻炎、首都医科大学、凋亡、2型糖尿病、胰岛素抵抗、合并症、氧化应激、多囊卵巢综合征、小鼠 |
新疆医科大学学报 | 维吾尔族、宫颈癌、食管癌、超声造影、危险因素、满意度、食管鳞状细胞癌、糖尿病、2型糖尿病、影响因素 |
广东药学院学报 | 美国FDA,FDA批准、化学成分、高效液相色谱法、研究人员、药物、增殖、结构鉴定、凋亡、提取工艺 |
沈阳药科大学学报 | 高效液相色谱法、含量测定、刊物、学报、药动学、药物制剂、科技期刊、高效液相色谱、结构鉴定、有关物质 |

图1 15种期刊关键词词云图
4 讨论
4.1 红点指标与其他指标的相关性
通过对《中国科技期刊引证报告(核心版)》(2018年)中56个医药大学学报的24项学术计量指标与红点指标进行相关性分析,得到红点指标与文献选出率、地区分布数、机构分布数呈正相关,与海外论文比、引用半衰期、核心被引半衰期呈负相关。红点指标主要与期刊来源计量指标相关,与所有学科分类内计量指标相关性不具有统计学意义。
在搜集相关资料时发现,关于红点指标与其他期刊科学计量指标的相关性,不同的研究者得出了不同的结果。如翁嘉敏[3]选取《中国科技期刊引证报告(核心版)》(2018年)的医学综合类期刊共41种为研究样本,得到红点指标与11项评价指标呈正相关,即总被引频次、引用刊数、权威因子、来源文献量、文献选出率、AR论文量、地区分布数、机构分布数、学科扩散指标、学科影响指标、总被引频次的离均差率;与3项评价指标呈负相关,即扩散因子、被引半衰期、引用半衰期。易耀森[4]选取2018年“中国科技核心期刊”目录收录的7种康复医学类期刊,得到红点指标与总被引频次、影响因子、即年指标、他引率、学科影响指标等常见期刊评价指标呈正相关关系(R= 0. 612,P<0. 05)。上述文献的研究结果互有不同且均与本研究得到的相关性结果也差异很大,但在处理数据时所采用的方法均一致,为有效对照。所以,认为红点指标与其他期刊评价指标的相关性结论不具有普适性,有关红点指标与其他指标相关性的结论存在很大偏移。对于不同类型期刊而言,红点指标与其他指标的相关性结果是不同的,且红点指标分布情况受期刊类型影响很大。在未指定期刊种类的前提下,讨论红点指标与其他指标相关性并无意义。
综上,从与其他期刊科学计量指标的相关性来看,红点指标相关性的结论有很大的局限性。红点指标可以作为测度某个期刊涵盖热点多少的指标,但仅可以作为在这一类型期刊评价中的一个评价角度,不能与其他不同类型的期刊进行横向比较。同时该结论也符合莱顿宣言(Leiden Manifesto)提出的合理使用文献计量指标的10条原则[5],其中一条指出评价指标不可避免会在概念上的模糊和不确定,并且可能建立在一些强大但并不具有普适意义的假设基础上,采用多个指标可以提供一个更为可靠和多元的呈现。另外,在研究过程中发现,期刊科学计量指标相关性的横向比较具有局限性,那么纵向比较是否更有效,即同一类型期刊的红点指标在不同年份与其余指标的相关性结果是否也会不同,有待作进一步研究。
4.2 关键词特征与期刊学术水平的关系
关键词的选取直接影响红点指标。由于一些作者对论文主题内容理解不够,不太熟悉关键词的选择,或不懂关键词的组配原则,往往随意选用一些词充当关键词[6]。这对红点指标的计算产生了影响。
从15种学报为样本统计的关键词来看,其中的高频关键词,如影响因素、治疗结果、学报等词均是医药研究领域无具体研究对象指向的词汇,并不具备体现期刊学术水平的特征。李秀霞等叫通过提取15种学报近5年的关键词,统计每种关键词出现的频次,发现其方程参数与期刊影响因子、综合评价值之间具有显著的相关性。这样,定性和定量分析的结果就出现了差异,定量分析的结果是关键词特征与期刊学术水平有关,定性分析的结果是无关。本文认为,这种差异的形成主要来自于出现次数很多的无效高频关键词。当15种学报5年的关键词汇集到一起时,这种普遍存在的共性特征,即每种学报都会存在无效高频关键词,在运用数学方法计算时无法体现出来,即生成函数的过程中会将这些词汇的影响消除。但是将具体的关键词一一罗列出来,就会发现很多高频关键词并没有体现出期刊特有的内容,信息量很小,乃至无效,也就是说这些关键词并没有对学报学术水平产生影响,但会对红点指标产生影响。
此外,这些医药类大学学报,由于不同期刊有不同的办刊特点,综合性强的期刊涉及主题较多,专业性强的期刊涉及主题较少[8]。这样在关键词种类上后者处于劣势,随之还有关键词数量的减少,也会对红点指标的计量造成影响。
4.3 关键词特征与期刊特色的关系
通过分析这些学报的关键词可以发现,去掉无效的关键词,不同期刊有着不同的侧重内容,有的期刊具有鲜明的办刊特点,有的则未体现显著特点,有的期刊针对某一读者群体,有的又涵盖了很广泛的知识内容。在词云图中,关键词的字号越大,表示该词出现的次数越多。从分析中可以得出以下结论:在以学报类期刊为样本的讨论中,存在高频关键词可以反映文章内容和主题的现象,但这些高频关键词的出现,与期刊是否具有办刊特色关系不大。例如,《海南医学院学报》红点指标的数值比《沈阳药科大学学报》红点指标的数值高很多,但从二者的关键词来看,《沈阳药科大学学报》更具有特点,关键词显示期刊偏向药物分析。
综上,红点指标是基于大量关键词产生的,红点指标本身仅能应用于追踪热点方面,不能代表期刊学术水平的高低或者特色,原因是存在无效关键词,它们与常见关键词构成了高频关键词。此外,红点指标的定义中指出只要存在一个或一个以上关键词与高频关键词重合,则该文章在计算红点指标时为含高频词文章。而高频关键词是关键词排名前1%的集合[5],这个关键词集合是通过排名并未经过筛选得出。这样造成的结果是无论什么含义的关键词,只要一致,就认为该篇文章含有高频关键词。通过这种计算方式,会增加很多“万能文章”,即它们含有几个无实际意义的高频关键词,就可能对红点指标产生影响。
5 结束语
结合最新的2019年版《中国科技期刊引证报告》(核心版),《北京大学学报(医学版)》红点指标为1,《海南医学院学报》为0.29,有些学报红点指标很小,如《昆明医科大学学报》仅为0.05。说明红点指标数值每年变化巨大,这一指标特征不具有稳定性,对期刊综合评价参考价值有限,仅可做横断评价。
因此,高校学报应把握自身特点,坚持内容为王、服务学科建设、建设特色栏目、从实际出发。如《西安交通大学学报(医学版)》《新疆医科大学学报》的关键词中包含明显有当地特色的词汇,这些文章很好地显示了当地特有的学术环境,构成了学术的多样性。高校学报没有必要特意为追求红点指标,人为地标引高频关键词,丢失本身的特色。
总之,红点指标作为反映期刊内容与学科热点的重合度,能够在一定程度上体现期刊服务学术共同体、引导学科发展趋势的能力。但是在编辑出版实践中,要合理使用和正确看待,不能舍本逐末,片面追求高频词。一方面,编辑要积极策划学科发展热点稿件,采取措施吸引热点稿件,提高期刊的红点指标。另一方面,在稿件编辑出版中,要准确规范标引关键词,以利于读者查阅和引用文章,提高期刊的学术影响力。
6 参考文献
[1]中国科学技术信息研究所.2018年版中国科技期刊引证报告(核心版):自然科学卷[M].北京:科学技术文献出版社,2018
[2]马峥,俞征鹿.学术期刊“红点指标”的定义与应用[J].编辑学报,2018,30(1):102
[3]翁嘉敏,孙昌朋,林萍,等.期刊红点指标与期刊评价指标的相关性研究:以医学综合类期刊为例[J].中国科技期刊研究,2019,30(5):545
[4]易耀森.“红点指标”分析对康复医学类期刊选题组稿的启示[J].编辑学报,2019,31(4):404
[5]HICKS D,WOUTER P.Bibliometrics:the leiden manifesto for research metrics[J].Nature,2015,520:429
[6]徐鸿飞,缪宏建.医学期刊关键词选择的多维构想[J].南通医学院学报,1996(4):634
[7]李秀霞,程结晶,邵作运.文献关键词分布特征与期刊学术质量的关系[J].中国科技期刊研究,2019,30(4):426
[8]伍军红,孙秀坤,孙隽,等.期刊影响力指数与影响因子评价国际期刊的比较研究[J].编辑学报,2017,29(5):500