业内信息

影响因子百分位在学术期刊跨学科评价中的局限性

2018-11-23 来源:《中国科技期刊研究》
  【关键词】期刊影响因子百分位  学术期刊  期刊评价  跨学科评价
 
  【作 者】刘雪立、魏雅慧、孟君:新乡医学院河南省科技期刊研究中心
 
  【摘 要】[目的] 探讨影响因子百分位(Journal Impact Factor Percentile,JIFP)在学术期刊跨学科评价中的局限性。[方法] 通过JCR数据库获取相关数据,结合JIFP计算公式进行分析,揭示JIFP的局限性。[结果] JIFP的数值过于依赖学科规模;JIFP过分强调影响因子排序而掩盖了影响因子数值的差异;同一期刊在不同学科的JIFP差异明显。[结论] JIFP应用于学术期刊跨学科评价具有明显局限性,应慎重使用JIFP进行期刊跨学科评价。
 
  2015年《期刊引证报告》(Journal Citation Reports,JCR)中新增了一个文献计量学评价指标——期刊影响因子百分位(Journal Impact Factor Percentile,JIFP),用于表征某期刊影响因子在所属学科的排序位置,目的是为不同学科期刊的跨学科评价设置一个完全定量的评价指标。同时新增的指标还有标准化特征因子(Normalized Eigenfactor),其也具有期刊的跨学科评价属性。目前,跨学科期刊评价和学术评价是全球科学评价领域的难题之一。JIFP推出以后,国内学者对其进行了有限研究。俞立平介绍了该指标的特点,认为JIFP的最大优点是通过标准化变换得出学科内每一种期刊的相对位置,这样可以方便不同学科期刊之间的比较;刘雪立等采用统计分析的方法,比较了JIFP与论文被引频次8个区段百分位数排序(Percentile Rank 8,PR8)指数的跨学科评价效果;盛丽娜等比较了JIFP与h指数的期刊评价效果;顾欢比较了JIFP与另一个跨学科期刊评价指标——篇均来源期刊标准影响(Source Normalized Impactper Paper,SNIP)的评价效果;牛晓锋根据JIFP的计算公式,计算了2016年JCR中85种图书情报学期刊5年JIFP和他引JIFP,并与其他常用文献计量学评价指标进行对比,以分析JIFP在期刊评价中的作用。自2015年JIFP提出以来,研究者关注的是该指标用于期刊评价和跨学科期刊评价的效果,尚未检索到对JIFP局限性的研究报告。JIFP是由各期刊影响因子在所属学科的排序位置转换而来,所以JIFP几乎完全继承了影响因子自身的局限性。本研究主要探讨JIFP在学术期刊跨学科评价中的局限性。
 
  1  JIFP的数值过度依赖于学科规模
 
  JIFP是指某期刊影响因子在其所属学科所处的百分位数位置,其计算公式为
 
  rJIFP=(N-R+0.5)/N            (1)
 
  式中N为某学科期刊总数,R为该学科某期刊影响因子降序排列的位次。分子中增加0.5,其作用是避免R=N时(即每个学科排名最后一位的期刊),rJIFP=0。
 
  众所周知,JCR中同一期刊被划分到2个或更多学科的现象非常普遍,因此JCR中给出的是每种期刊的平均JIFP(Average JIFP,AJIFP),即某期刊在各所属学科JIFP的平均值,其计算公式为
 
  rAJIFP=(rJIFP1+rJIFP2+…+rJIFPn)/n            (2)
 
  式中n为某期刊所属的学科数。
 
  根据(1)式计算了Adv Funct Mater和Bone Marrow Transpl2种期刊在不同学科的JIFP(表1),而AJIFP是JCR中给定的值,该值正好等于相应期刊在不同学科JIFP的平均值。
 
表1  部分期刊在不同学科的JIFP和AJIFP
 
期刊名 学科 分区 影响因子 学科排序 学科期刊数/种 JIFP AJIFP
Adv Funct Mater Chemistry,Multidisciplinary Q1 12.124 12 166 93.07 92.92
Chemistry,Physical Q1 12.124 10 145 93.45
Materials Science,Multidisciplinary Q1 12.124 13 275 95.45
Nanoscience&Nanotechnology Q1 12.124 7 87 92.53
Physics,Applied Q1 12.124 9 147 94.22
Physics,Condensed Matter Q1 12.124 8 67 88.81
Bone Marrow Transpl Hematology Q2 3.874 20 70 72.14 70.66
Immunology Q2 3.874 47 150 69.00
Oncology Q2 3.874 71 217 67.51
Transplantation Q2 3.874 7 25 74.00
 
  由JIFP的计算公式可知:当R值一定时,N值越大,JIFP就越大;反之,N值越小,JIFP就越小。不同学科内排序相同的期刊,其JIFP的大小完全由学科内期刊总数来决定,这必将导致小学科的优秀期刊被低估,大学科的优秀期刊可能会被高估。表2给出了不同规模学科中影响因子排名第一的期刊的JIFP,按照期刊JIFP的降序排列与按照学科期刊数的降序排列完全一致。2016年JCR中自然科学被划分为177个学科,其中期刊数最少的学科是男科学(Andrology),影响因子排名第一的期刊为我国的Asian J Androl,其JIFP仅为91.667;而期刊数最多的学科是数学(Mathematics),影响因子排名第一的期刊为美国的Acta Numer,其JIFP达到了99.839。国际权威期刊Nature所在的多学科交叉科学(Multidisciplinary Sciences)期刊数为64种,其JIFP为99.219。JCR的177个学科中,期刊数大于64的学科有82个,这意味着有82种期刊的JIFP大于Nature,这一排序比按影响因子排序中Nature所处的位置更靠后,与Nature的实际影响力不匹配。此外,大学科的差期刊可能会被低估,小学科的差期刊可能会被高估。比如,各学科影响因子排在最后一位的期刊,即(1)式中R=N,其rJIFP=0.5/N,N的值越大,JIFP越小。数学学科影响因子排名最后一位期刊的rJIFP=0.5/310=0.00161(按JCR数据呈现形式标记为0.161)。
 
表2  不同规模学科影响因子排名第一期刊的JIFP和AJIFP
 
期刊名称 学科 所属国家/地区 学科期刊数/种 影响因子 JIFP AJIFP
Acta Numer Mathematics 美国 310 6.250 99.839 99.839
Annu Rev Plant Biol Plant Sciences 美国 211 22.808 99.763 99.763
Nat Rev Immunol Immunology 英格兰 150 39.932 99.667 99.667
Arch Comput Method E Mathematics,Interdisciplinary Applications 荷兰 100 5.061 99.500 97.817
Exerc Immunol Rev Sport Sciences 德国 81 7.600 99.383 93.858
Nature Multidisciplinary Sciences 英格兰 64 40.137 99.219 99.219
Head Neck-J Sci Spec Otorhinolaryngology 美国 42 3.376 98.810 90.859
Coast Eng Engineering,Ocean 荷兰 14 3.221 96.429 94.814
Asian J Androl Andrology 中国 5 2.996 91.667 80.855
 
  2  过分强调影响因子排序而掩盖了影响因子数值的差异
 
  JIFP是根据期刊影响因子在所属学科的排序转换而成的百分位数位置指标,影响因子具有参数性质,而影响因子排序属于非参数指标,改变了影响因子的统计学特征,在很大程度上掩盖了影响因子数值的差异程度。JCR的177个学科中,各学科期刊影响因子值的分布形态各异,转换成JIFP后,有些期刊影响力将被显著高估,有些期刊影响力则被严重低估。表3给出了多学科交叉科学和森林学这2个学科Q1区期刊的影响因子和JIFP。这2个学科规模相同(都是64种期刊),Q1区期刊都是16种。根据JIFP计算公式可知,2个学科排序相同的期刊,其JIFP也完全相同,但影响因子的分布却迥然不同。在多学科交叉科学,影响因子排在第3位的期刊,其影响因子不足第2位期刊的1/3;而森林学中影响因子排在第3位的期刊,其影响因子和第2位,甚至和第1位也无明显差异。因此,JIFP只反映了期刊在学科内所处的位置,极大掩盖了期刊影响因子的数值差异。把影响因子为40.137的Nature等同于影响因子为3.887的AgrForest Meteorol,这显然是极不妥当的。再者,虽然NatCommun和Forest Ecol Manag的影响因子在各自中学科均排在第3位,但是与本学科排名第2位的期刊相比,影响因子降低的程度明显不同,NatCommun的影响因子是Science的32.587%,而ForestEcolManag的影响因子是Tree Physiol的83.876%,但二者JIFP是完全相同的。
 
表3  多学科交叉科学和森林学2个学科期刊影响因子和JIFP的比较
 
Multidisciplinary Science(多学科交叉科学)   Forestry(森林学)
排序 期刊名称 期刊分区 影响因子 JIFP 排序 期刊名称 期刊分区 影响因子 JIFP
1 Nature Q1 40.137 99.219 1 Agr Forest Meteorol Q1 3.887 99.219
2 Science Q1 37.205 97.656 2 Tree Physiol Q1 3.653 97.656
3 Nat Commun Q1 12.124 96.094 3 Forest Ecol Manag Q1 3.064 96.094
4 P Natl Acad Sci USA Q1 9.661 94.531 4 J Veg Sci Q1 2.924 94.531
5 Natl Sci Rev Q1 8.843 92.969 5 Int J Wildland Fire Q1 2.748 92.969
6 Gigascience Q1 6.871 91.406 6 Appl Veg Sci Q1 2.474 91.406
7 Sci Data Q1 4.836 89.844 7 Dendrochronologia Q1 2.259 89.844
8 Ann NY Acad Sci Q1 4.706 88.281 8 Forestry Q1 2.232 88.281
9 Complexity Q1 4.621 86.719 9 Urban For Urban Gree Q1 2.113 86.719
10 Sci Rep-UK Q1 4.259 85.156 10 Ann Forest Sci Q1 2.101 85.156
11 Sci Bull Q1 4.000 83.594 11 Eur J Forest Res Q1 2.017 83.594
12 J R Soc Interface Q1 3.579 82.031 12 Forest Policy Econ Q1 1.982 82.031
13 Res Synth Methods Q1 3.018 80.469 13 Forests Q1 1.951 80.469
14 Philos T R Soc A Q1 2.970 78.906 14 Holzforschung Q1 1.868 78.906
15 PLoS ONE Q1 2.806 77.344 15 Trees-Struct Funct Q1 1.842 77.344
16 P Jpn Acad B-Phys Q1 2.324 75.781 16 Can J Forest Res Q1 1.827 75.781
 
  3  同一期刊在不同学科的JIFP差异明显
 
  学术期刊跨学科评价的目的是为了矫正引证指标在不同学科间的巨大差异,同一期刊在不同学科指标值差异越小,说明该指标学科标准化的效果越好。然而,同一期刊在不同学科的JIFP差异可能很大,而且这种现象非常普遍(表4),Agrochimica在应用化学学科的JIFP是其在土壤学科的近10倍。这说明JIFP这一指标的学科标准化效果并不理想。
 
表4  部分期刊在不同学科JIFP的差异比较
 
期刊名称 学科 学科期刊数/种 影响因子 影响因子学科排序 JIFP
Agrochimica Chemistry,Applied 72 0.450 63 13.194
Soil Science 34 0.450 34 1.471
Am J Pharm Educ Education,Scientific Disciplines 41 1.109 23 45.122
Pharmacology & Pharmacy 256 1.109 220 14.258
Ann Biol Clin-Paris Medical Laboratory Technology 30 0.225 28 8.333
Medicine,Research & Experiment 128 0.225 126 1.953
Ann Zool Fenn Ecology 153 1.533 95 38.235
Zoology 162 1.533 44 73.148
Arch Hist Exact Sci History & Philosophy of Science 60 0.308 40 34.167
Mathematics,Interdisciplinary Applications 100 0.308 96 4.500
J Am Leather Chem As Chemistry,Applied 72 0.543 62 14.583
Materials Science,Textiles 24 0.543 13 47.917
P Am Math Soc Mathematics 310 0.679 143 54.032
Mathematics,Applied 255 0.679 185 27.647
Tissue Antigens Cell Biology 189 1.596 161 15.079
Immunology 150 1.596 128 15.000
Pathology 79 1.596 51 36.076
 
  另外,JCR给出的是各期刊的AJIFP,单一学科期刊JIFP与AJIFP是相同的,对于隶属于多个学科的期刊,如表1中的Adv Funct Mater隶属于6个学科,该刊的AJIFP是该刊在这6个学科JIFP的平均值。本研究认为,取最大值作为该刊的评价指标要比平均值更合理,Scopus的JournalMetrics给出的CiteScore百分位就是取最大值,即Highest Cite Score Percentile。
 
  4  结语
 
  由于JIFP完全由影响因子排序转换而来,因此同一学科的期刊JIFP或AJIFP与影响因子评价效果完全相同。该研究主要基于对JIFP计算公式的分析和思考,探讨JIFP在学术期刊跨学科评价方面的局限性,并通过实证研究加以证实。其局限性主要表现在以下3个方面:(1)JIFP的大小与期刊所属学科规模(期刊数量)关系密切,学科规模越大,相同排序的期刊JIFP越大;(2)JIFP过分强调期刊影响因子排序而忽视了影响因子数值的差异程度;(3)同一期刊在不同学科JIFP差异很大,而且这一现象非常普遍。理想的跨学科评价指标应该能够最大限度地平衡不同学科之间的差异,JIFP的学科标准化效果并不理想。因此,JIFP在学术期刊的跨学科评价方面存在明显的局限性。
 
  目前,科研论文的产出数量和质量依然是学术评价的基础性和关键性指标,期刊质量和影响力评价依然是学术评价的基础,应建立更加科学合理的跨学科期刊评价指标,以适应新时期跨学科期刊评价乃至学术评价的需要。
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 

国家广播电视总局 | 湖北省人民政府 | 中国邮政集团公司 | 武汉市人民政府 | 中国期刊协会 | 中国图书进出口(集团)总公司 | 中国邮政集团公司报刊发行局 | 湖北省广播电视局 | 湖北日报传媒集团 | 长江广电传媒集团 | 长江日报报业集团 | 知音传媒集团 | | 湖北中图长江文化传媒有限公司 | 决策信息网 | 湖北新闻出版广电传媒周

copyright(c) 2013 湖北省新闻出版局 版权所有 技术支持

鄂ICP备19004605号-4  鄂公网安备 42010602004016号