学科评价之文献计量指标分析

来源:用户上传      作者:

　　[摘要]立足学科评价，重点在于对文献计量评价指标的研究。筛选国内外当前用于学科评价的文献计量指标，给出一套科学常用的学科评价之文献计量指标参考集。设计指标分析过程和指标集成结构图，对指标参考集中指标进行功能分析，试图发掘文献计量评价指标的内在特征和规律。
　　[关键词]学科评价　文献计量　指标
　　[分类号]G353 G359
　　
　　1　引 言
　　
　　自20世纪80年代中期以来，随着量化方法在科研评价中的应用，科研评价也经历了从专家定性评价到定性和定量评价相结合的过程。值得一提的是，文献计量方法在科研评价中的作用逐渐受到重视。科研评价由部分使用文献计量指标，到完全使用文献计量指标体系，再到使用高级文献计量指标，进而到有意识地进行文献计量评价指标的有用性、公正性、透明度及指标使用总结的转变，开始了文献计量指标从使用到反思的过渡。澳大利亚REPP“科研评价指标战略评估”项目预示着文献计量科研评价指标将从使用实践上升到理论反思阶段。国内科研评价还形成系统的文献计量评价指标体系。文献计量评价指标理论研究，除《社会科学评价的文献计量理论与方法》系统研究了社会科学文献计量指标的评价机理和功能，较少见对科研评价之文献计量指标的系统研究和总结。
　　研究学科评价中的文献计量指标，以科研评价的第三层级学科评价为平台，明确文献计量指标的评价机理、评价功能，有助于科学地选择评价文献计量指标，最大限度地发挥文献计量指标在学科评价中的有效性，进而促进文献计量方法在科研评价中的利学使用。本文在为我国科研决策人员、科研人员、基金管理人员在学科评价中科学使用文献计量指标提供帮助，为国家科研知识创新工程的全面系统提供有效的工具参考。
　　
　　2　研究样本及分析方法设计
　　
　　2.1　指标研究样本
　　选取7套国内外代表性文献计量评价指标集(见表1)，这些指标集中①②③⑦指标完全用于学科评价、⑤⑥指标部分用于学科评价、④是通用指标。经过合并去重，选取了111项代表性衍化指标，以下的分析都是基于衍化指标。
　　
　　
　　2.2　指标分析方法设计
　　衍化指标是评价指标集中直接用于学科评价的原始指标。基础指标对衍化指标作了概念上的抽象。文献计量指标的识别标志是反映指标形式与内容特征的标志。其中，指标评功能是学科评价主体选择指标的依据，识别标志和基础指标是设计指标的依据。
　　
　　按照指标分析过程(见图1)，抽象衍化指标，站在宏观角度整理得到基础指标，为进一步提炼或拓展衍化指标做准备；基于基础指标，识别文献计量指标的本质特征，挖掘基础指标间的内在联系，得到指标识别标志。根据识别标志评价机理，总结衍化指标的评价功能；最后将整个分析结果制成识别标志一指标评价功能集成图(集成图结构见图2)
　　
　　3　学科评价代表性文献计量指标
　　
　　3.1　学科评价文献计量指标集成图
　　限于篇幅，截取指标集成图中部分指标(见图3)。图3是学科研究热点及未来发展趋势评价的指标集成，各项指标从上到下严格按照识别标志―基础指标―衍化指标评价功能四个层次集成。从图中可清楚地看到文献计量衍化指标、基础指标、指标评价功能、指标识别标志之间的联系。
　　
　　
　　3.2　学科评价文献计量指标参考集
　　从识别标志―指标一评价功能集成图中，得到衍化指标111项及其对应基础指标58项(见表2)，作为学科评价重要参考指标。A学科指被评价学科，x指代除A外的各个学科，a、b分别指代某一个学科，x指代任一科研基金。指标以科学产出中的论文为统计对象进行说明。
　　
　　4　文献计量指标的评价功能
　　
　　IMEC指出，文献计量用于评价，主要具备两类评价功能。①绩效评价。以科学产出和引用为基础，用以评价国家、大学、机构、个人等科研绩效水平；②科学映射。目的在于说明：A学科指被评价学科，x指除A外的各个学科，a、b分别指某一子学科，x指任一科研基金。
　　
　　揭示科学研究的结构和变化趋势。从识别标志－指标－评价功能集成图中，得到文献计量指标具有的学科评价功能如下；
　　学科群规律分析。包括：学科群中各学科相互引用情况，间接预测学科交叉趋势，选择凯德洛夫的当采学科理论，确定科学中心，计算科学中心科学兴隆期。
　　学科产出与影响力基本特征分析。包括：学科国际论文产出对国际论文产出的贡献，被评价国家对学科国际论文产出的贡献，学科二级子学科国际论文产出和对学科的贡献，学科二级子学科国际论文产出规模的变化过程，被评价国家学科论文产出对本国论文产出的贡献，学科国际论文质量，学科被评价国家论文质量，学科国际论文影响力，学科国内论文影响力，学科被评价国家在国际发表论文的影响力，学科中文论文在国内的影响力，学科中文论文在国外的影响力，学科二级子学科论文影响力，学科论文质量，学科高影响力论文对学科的贡献，学科被评价国家发表国际的高影响力论文及对学科的贡献，学科老化趋势、学科发展阶段，学科对国外文献使用情况，学科列各类科学资源的使用情况，学科科学产出类别(“被评价国家”可根据需要换成被评价机构、个人等实体)。
　　学科结构分析。包括：学科子学科产出规模及分布。
　　
　　学科与相关学科分析。包括：学科独立性、稳定性，识别学科的相关学科及其联系程度。
　　学科研究热点及未来发展趋势分析。包括：识别学科研究领域，学科活跃研究领域，学科子学科活跃研究领域，学科国际关注热门论文，预测学科各子学科交叉发展方向，追溯学科发展历史、预测发展趋势，学科国际研究热点子学科，学科中国研究热点子学科，学科与其它学科分化、组合趋势。
　　学科内国家及地区分析。包括：识别学科主要研究国家。识别子学科主要研究国家，学科被评价国家国际论文产出，学科被评价国家地区布局及论文产出，学科国际有影响力国家，学科被评价国家的学科影响力。
　　学科内机构分析。包括：识别学科发文机构类型，识别学科核心机构，学科研究机构的科学生产力、机构地位，学科机构主要研究领域、及在该领域活跃水平，学科核心机构的地区布局，学科核心影响力的机构，学科研究机构对学科的影响力分析，学科研究机构对各子学科影响力，机构对学科的影响力、机构论文质量，学科核心研究机构地区布局。
　　学科科研人员分析。包括：学科科研人员整体规模，学科主要科研人员，学科子学科主要科研人员，学科科研人员组织结构，学科核心影响力科研人员，学科被评价科研人员特征参数。
　　学科期刊分析。包括：学科主要研究期刊，学科期刊对学科的影响力。
　　学科基金分析。包括：学科可使用基金及其产出对学科的贡献，学科基金产出对学科的贡献，基金在各学科产出，学科基金论文产出的年度变化。
　　学科合作情况分析。包括：学科合作率，国家的国际合作水平，机构合作水平，学科个人合作水平，国家合作伙伴分析，学科机构合作伙伴，学科个人合作伙伴。
　　按照IMEC定义，以上及部分评价功能属于学科绩效评价，及部分功能属于学科映射。
　　文献计量评价衍化指标可拓展性很强，论文涉及的衍化指标取自国内外代表性评价指标集，虽然不可能面面俱到，但也极具代表性，能够较好展示文献计量指标的评价机理，各项指标所具有的评价功能已可见一斑。

转载注明来源:https://www.xzbu.com/1/view-154720.htm