中国科技期刊研究  2015, Vol. 26 Issue (9): 1010-1016   PDF    
期刊发展动态指标“增长指数”在期刊评价中的应用
张娟, 李云霞 , 张以民    
中国农业科学院农业信息研究所《中国农业科学》编辑部,北京海淀区中关村南大街12号 100081
摘要:【目的】采用动态、静态指标相结合的方法对全国农业科技期刊2009—2012年总体发展趋势和发展速度进行定量评价。【方法】 以CNKI《中国学术期刊影响因子年报》(2010—2013年版)为数据来源,选取5个核心定量指标对全国13个类别911种农业科技期刊增长指数的变化幅度、整体水平、地区分布,以及增长指数在农业核心期刊评价中所起的作用等方面进行分析。【结果】综合性农业类单个期刊增长幅度最大,园艺类整体进步期刊最多,正增长最多的农业期刊主要分布地区是北京。2014年遴选的189种中国农业核心期刊中,44个期刊由于增长指数跻身于核心期刊行列。【结论】经过4年的发展,我国农业科技期刊有不同程度的进步,但也有一半以上的期刊发展较为缓慢,甚至逐渐下降。引入表征期刊发展动态指标——增长指数,对全国农业科技期刊进行评价,在目前各大机构评价体系中尚属首次。
关键词增长指数    期刊评价    动态指标    核心期刊    
Journal dynamic assessment index “increasement index” as a new indicator for journal evaluation
ZHANG Juan, LI Yunxia , ZHANG Yimin    
Editorial Department of Scientia Agricultura Sinica,Agricultural Information Institute of Chinese Academy of Agricultural Sciences,Beijing 100081,China
Abstract: [Purposes] This paper aims to have a comprehensive evaluation for 911 Chinese agricultural journals using dynamic and static indexes. [Methods] Based on 5 core evaluation indexes of CNKI reports (2010-2013) as data resource,we analyze the journal development trend,area distribution and the role of increasement index. [Findings] The increasement index of comprehensive agricultural class is the highest,the number of the advanced journals of horticulture class is the most and more advanced agricultural journals are in Beijing. In 189 kinds of Chinese agricultural core journals,44 journals have been selected as core journals according to increasement index. [Conclusions] From 2009 to 2012,Chinese agricultural sci-tech journals have different levels of improvements,but some are slow or behind. Increasement index can reveal the dynamic development of journals on the basis of static evaluation,which is the first time in the comprehensive evaluation system at present.
Key words: Increasement index    Journal evaluation    Dynamic index    Core journal    
1 引言

1992年,国家科委、中宣部、新闻出版总署正式颁发《科学技术期刊质量要求》,是政府发布的第一个科技期刊评价指标体系。目前,许多评价机构主要采用影响因子、被引频次、即年指标、他引率、被引半衰期、基金论文比等指标作为学术评价和期刊评价的主要依据。

随着科学的发展和评价目的的不同,原有的评价指标体系也在不断发展,以满足各种评价需求。近年来,相关学者和评价机构针对评价指标的科学性和客观性,相继开展了一系列研究,对新的期刊关键评价指标进行了探索与改进,提出了多种新指标用于期刊评价。如,基于h指数、K指数推导出的能剔出载文量影响的A指数[1];从篇均引文数的角度减少不同主题领域期刊的引用行为差异的SNIP期刊评价新指标[2];综合考虑引用次数和引用质量,客观反映期刊权威性的权威因子[3];从期刊引用形象和期刊引用认同角度提出的期刊引用认同评价指标[4];代表期刊整体贡献和期刊论文分值的评价指标期刊贡献值(JCV)和期刊贡献因子(JCF)[5];以及2008年Scopus推出的声望指数(SJR),2009年汤森路透(Thomson Reuters)科技集团增加的特征因子和论文影响分值[6, 7]等。

这些期刊评价的新指标大多是从普遍关心的引文质量角度进行分析和计算,均为静态指标。从动态的角度出发,研究和评价科技期刊学术水平的发展趋势,目前只有姜联合等[8]提出的趋势指数,但其仅对国外19种和国内6种植物学科期刊的影响因子数据进行了比较研究。

本研究引入表征期刊发展动态的指标——增长指数,采用动态、静态指标相结合的方法对全国911种农业科技期刊的发展趋势和发展速度进行定量评价,在各大机构评价体系中尚属首次。

2 农业科技期刊定量评价数据来源与计算过程 2.1 数据来源

选取CNKI《中国学术期刊影响因子年报(自然科学与工程技术)》和《中国学术期刊影响因子年报(人文社会科学)》(2010—2013年版)5个核心定量指标数据,分别为影响因子、总被引频次、他引率、Web即年下载率和基金论文比。其中,2010年版为基准年数据,2011—2013年版为评价年数据。评价年数据与基准年数据相比,增长或降低的百分比为该期刊的增长指数。

2.2 期刊分类

根据学科属性及刊登文章的内容划分类型,将911种农业科技期刊分为13类[9],分别为综合性农业类、农业大学学报类、农学与农作物类、园艺类、植物保护类、农业资源与生态环境类、农业工程类、食品科学与农产品加工类、林业类、畜牧与兽医类、水产与渔业类、农业经济与农村发展类和特种养殖类。

2.3 评价方法与计算过程

根据中国农业核心期刊评价目的着重选取能够反映期刊核心竞争力和总体发展水平的指标,构建以上5个定量指标的评价指标体系,构建过程及相应权重见文献[9]。

由于指标之间含义不同,必须对指标进行无量纲处理。归一法是一种基于极值法的组合评价方法,通过对指标隶属度的转换,解决了不同性质的指标数据之间可比性问题。具体步骤如下。

2.3.1 构建统计数据矩阵V

对原始数据构建数据矩阵,对每个指标计算评价年定量数据的平均值,得到统计数据矩阵V。其中i为期刊编号(i = 1,2,3…,I),j为指标编号(j = 1,2,3…,J),vij为第i个期刊第j个指标评价年3年数据的平均值。

2.3.2 分类转换各指标隶属度

分类别对各指标的平均值进行归一计算。即,对某个指标来说,将该类别中该指标的最大值定为1,其余各指标的值除以最大值得到的数据即为归一后的校正数值,也就是每个指标对该指标中最大值的隶属度。由此,统计数据vij 即转换成对该类期刊该指标的隶属度值yij。第i个期刊第j个指标的隶属度计算方法为:

(vij)为该期刊所属的专业类别中该指标的最大值,可知0≤yij≤1。

换算后得到评价矩阵Y

他引率指标是介于0到1的数值,且并非越大越好,因此不必做归一处理。

2.3.3 评价矩阵加权,计算质量得分

计算各期刊质量得分(Q),即定量指标与各自权重加权求和,计算公式为:

其中,qj为各指标权重,yj为第j个指标归一计算后的隶属度值。

2.3.4 根据增长指数计算增量得分

计算各期刊增量指数,即,该期刊评价年质量得分(Q2011-2013)与基准年质量得分(Q2010)相比,增长或降低的百分比(I)。计算公式为:

同类别期刊的I值相差很大,为了更科学的进行比较,采取直接赋分的计算方法。即,各类别期刊以I 值进行排序,按正、负值各5档进行赋分,每档1分。则增长最快的期刊得5分,退步最多的期刊减5分,依档递减,所得分值为其增量得分(S)。

2.3.5 汇总得到定量评价得分

根据评价指标体系,综合质量得分和增长得分,得到该期刊定量评价得分,计算公式为:

3 结果与分析 3.1 农业科技期刊增长指数的变化幅度

通过计算全国911种农业科技期刊的质量得分和增长指数,可以比较出各类别农业科技期刊4年间进步或退步的幅度。

表1分别列举了各类别农业科技期刊中增长指数最大值和最小值,以显示各类别期刊中进步最大和退步最大的幅度。其中,综合性农业类增长指数最大值为56.77%,即,该类别某期刊2011—2013年版质量得分比2010年版质量得分增加了56.77%,进步最快。将12个类别农业期刊中进步最快的前5名期刊按增长指数从高到低进行排列,见表2。显示出这些期刊与本领域其他期刊相比,其综合学术竞争力和发展趋势展现出良好的上升态势。

表 1 各类别农业期刊中增长指数极值比较

表 2 12个类别农业期刊进步最快的前5名期刊

农学与农作物类、综合性农业类、特种养殖类、农业大学学报类、畜牧与兽医类、园艺类、水产与渔业类、植物保护类这8类期刊的增长指数最小值比较接近,退步幅度不大。农业资源与生态环境类期刊退步幅度最大,是农学与农作物类的7倍多,具体分析主要是该期刊从2009年到2012年总被引频次和影响因子逐年下滑,特别是影响因子下滑严重。

综合比较各类别期刊的增长指数最大、最小值,可以看出,农业资源与生态环境类期刊的增长指数最大值为43.54%,位居第2名,而增长指数最小值为-49.73%,位居倒数第一,表明该类期刊的进步最快和退步最多的期刊两极分化严重。

3.2 农业科技期刊整体发展水平比较

为了比较各类别农业科技期刊整体发展水平和发展趋势,各类别期刊中正增长的期刊所占比率见表3。结果表明,园艺类、植物保护类、综合性农业类、农业大学学报类和农学与农作物类农业科技期刊中正增长的期刊超过69%,表明这些类别的期刊整体进步显著。特别是园艺类期刊,虽然增长指数最大只有18.73%(表1),但是77.78%的期刊都在进步,显示出一个良好、稳定的发展态势。综合性农业类和农学与农作物类期刊的增长幅度和整体发展水平最强;特种养殖类和农业经济与农村发展类期刊负增长的期刊接近75%,而且正增长的指数也不高(表1)。总体来看,13个类别的农业科技期刊中,正增长的期刊占46.49%,即近一半的农业科技期刊在2009—2012年有不同程度的进步。

表 3 各类别农业期刊整体进步水平比较
3.3 农业科技期刊发展趋势的地区分布

2009—2012年,各类别农业科技期刊发展趋势的地区分布见表4。13类农业期刊中,正增长和负增长最多的期刊分布地区不均,北京均占有绝对份量。植物保护类、畜牧与兽医类和农业经济与农村发展类3个类别正增长的期刊地区分布比较集中,北京超过50%。农业工程类正增长的期刊分布比较零散,6个地区的占比均为16.67%。负增长最多的期刊在各类别地区分布的占比集中在20%~44%。其中,综合性农业类、农业经济与农村发展类和植物保护类负增长期刊主要分布在北京,超过40%。园艺类期刊中,负增长期刊在4个地区的分布平分秋色,分别是北京、福建、河北和河南。

表 4 农业科技期刊发展趋势地区分布

所有农业期刊增长指数的地区分布统计分析显示(表5),正增长的期刊分布在30个地区(省、自治区、直辖市)。北京为21.45%,占全国的五分之一,具有绝对优势。黑龙江和江苏虽然位居第二名和第三名,但占比仅仅是北京的四分之一。其余地区正增长期刊都比较少,有17个地区占比集中在2%~3%之间。负增长的期刊分布在31个地区(省、自治区、直辖市),北京同样是占比最多的地区,为28.99%。江苏和黑龙江以7.69%和6.51%位居第二和第三名,说明这三个地区不仅是进步期刊最多的地区,也是退步期刊最多的地区。

表 5 正增长的农业科技期刊地区分布

表 6 负增长的农业科技期刊地区分布
3.4 增长指数在核心期刊评价中的作用

基于定量得分,辅以专家定性评价,我们对全国911种农业科技期刊按类别进行评价,遴选出13类别189种中国农业核心期刊[10]。引入动态指标“增长指数”后,13个类别的农业核心期刊的排名与仅对各类别期刊的质量得分进行排名相比,有所变化(表7)。总体来看,189种农业核心期刊中,78种期刊排名上升,62种期刊排名下降,49种期刊排名未受影响。189种核心期刊中,有44种期刊由于增长指数跻身于核心期刊的行列。

表 7 增长指数对农业核心期刊排名的影响

从专业类别来看,除了特种养殖类,其余各类别期刊中都有近三分之一以上的核心期刊排名有所上升。排名下降数量最多的期刊是畜牧与兽医类和农业大学学报类,占该类核心期刊数量的一半左右。农业经济与农村发展类、植物保护类、农业工程类和特种养殖类这4类的核心期刊,没有因为增长指 数而新增核心期刊,只是原范围内排名的变化,显示这几个类别的核心期刊发展水平较为稳定。核心期刊排名上升最多的是综合性农业类,有14种期刊排名上升,而且排名上升的期刊最高上升了16个位次;有6种期刊由于增长指数较大而被调整入选为农业核心期刊。分析表明,这些期刊质量得分一般位于比较靠近核心期刊的区域,增长指数分别为21.0%,11.4%,19.1%,9.6%,6.9%和6.2%,增量得分使得总分提高、位次提前,显示出良好的进步趋势,因此得以入选。由此可见,引入增长指数这个动态指标,体现了农业核心期刊的评价不仅考虑了期刊各项指标的静态值,也反映了期刊发展的动态变化,使评价更科学、更客观、更全面。

4 讨论与小结

我国期刊评价研究已有几十年的历史,在全面提升期刊 质量、优化期刊结构等方面发挥了重要促 进作用。如何优化期刊评价指标体系一直是各方面关注的重点和热点,如何公平合理地评价期刊仍然有待相关研究领域的学者做出进一步的探索。

目前,我国对期刊评价多采用定性与定量相结合的方法,使用的评价指标主要是传统的量化指标,多为一年一评。虽然北京大学图书馆自1992年出版的《中文核心期刊要目总览》基本上四年一评(2011年版间隔为三年),但也采用的是静态指标的平均值,没有分析评价年期间期刊的发展变化。中国农业核心期刊评价研究引入增长指数,综合计算了4年间期刊评价核心指标的增长率。结果表明,经过4年的发展,我国46%以上的农业科技期刊总体水平有所提高,有些还是大幅提高,综合性农业类、植物保护类、农学与农作物类等期刊进步幅度和整体发展趋势都很强。另外,农业核心期刊中有67.2%的期刊保持稳定增长态势,23.3%的期刊由于快速发展而被评为农业核心期刊,这些都是可喜的成绩。但通过研究分析,也应该清楚地意识到,一半以上的农业科技期刊发展是缓慢的,甚至是严重退步的,这必须引起相关期刊管理部门足够的重视。根据增长指数对全国农业科技期刊的发展趋势做了地区分布,发现进步和退步最多的地区都是北京,而且均远远超过第二名。北京的科技投入和项目支撑以及科研队伍和科研创新能力在全国占据绝对优势,农业科技期刊总数也最多,因此北京的农业科技期刊要把握自身优势,退步的期刊要找到问题,迎头赶上。

增长指数是在传统静态指标的基础上进行的创新与完善,综合考虑了一个时期范围内,期刊的发展速度和发展势头。一方面,有助于更加全面客观地评价期刊所处的地位,有效提高期刊评价的公正性与科学性;另一方面,通过进一步对数据的挖掘和分析,能够促使质量较高的期刊加强管理、提高水平、确保优势,同时敦促质量较低的期刊认真研究刊物发展规律,找出影响期刊发展的瓶颈问题,制定改进措施,从而提高期刊的学术水平和竞争力,进一步促进科技期刊的健康、稳定、快速的发展。这在期刊评价中具有广泛的应用前景,将是未来期刊评价的重要方向。

总体来说,期刊评价没有单一的完美指标,也不是一成不变的,不断提出的新指标只能是对原有指标不足之处的改进,是另一个供人们评价使用的参考依据。

参考文献
[1] 安静, 李海燕, 夏旭.期刊评价新指标——A 指数与 h 指数的相关性分析[J].科技管理研究, 2012 (15):264-266.(1)
[2] 程小娟, 杨晶晶.Scopus数据库引文评价新指标SNIP原理及可行性探讨[J]. 图书情报工作, 2012, 56(10): 6-9, 34.(1)
[3] 苏成, 潘云涛, 马峥, 等. 权威因子:一个新的期刊评价指标[J]. 编辑学报, 2010, 22(4): 369-373.(1)
[4] 李晓辉, 孙坦.基于期刊引用形象和期刊引用认同的期刊评价[J]. 大学图书馆学报, 2011, 29(2): 103-107.(1)
[5] 刘霞, 赵基明, 魏攀.期刊评价新指标及实证研究——期刊贡献值与贡献因子[J]. 重庆大学学报(社会科学版), 2013, 19(4): 101-106.(1)
[6] Fersht A.The most influential journals: Impact Factor and Eigenfactor[J].Proceedings of the National Academy of Sciences of the United States of America, 2009, 106(17):6883-6884.(1)
[7] 任胜利.特征因子(Eigenfactor): 基于引证网络分析期刊和论文的重要性[J].中国科技期刊研究, 2009, 20(3):415-418.(1)
[8] 姜联合, 姜丹.科技期刊动态评价指标——趋势指数[J].编辑学报, 2001, 13(2):81-83.(1)
[9] 张娟, 李云霞, 张以民. 2014年中国农业科技期刊综合评价及结果分析[J]. 中国科技期刊研究, 2015, 26(7):743-748.(2)
[10] 许世卫, 李云霞. 中国农业核心期刊概览2014[M]. 北京:中国农业出版社.(1)