利用Web of Science 及科学计量学工具分析机构与个人的科研产出 汤森路透科技与医疗集团 2011年11月17日

演讲提纲 科学计量学与引文分析 科研产出分析的主要工具 如何评估本机构的科研产出和影响力? 如何寻找学科关键人才? 如何评估某篇论文的影响力？ 如何评估技术成果? 分析软件的综合利用 小结

演讲提纲 科学计量学与引文分析 科研产出分析的主要工具 如何评估本机构的科研产出和影响力? 如何寻找学科关键人才? 如何评估某篇论文的影响力？ 如何评估技术成果? 分析软件的综合利用 小结

科学计量学与引文分析 科学计量学 引文分析方法 应用数理统计和计算技术等数学方法对科学活动的投入（如科研人员、研究经费）、产出（如论文数量、被引数量）等方面进行定量分析的方法； 引文分析方法 是指利用数学、统计学等方法对文献之间的引用关系进行分析，评价科学工作者和科研机构在科学研究中的贡献，追踪和研究科技发展、科技文献交流过程，检索、评价科技文献

用引文分析对科学研究进行评估的前提 美国社会学家罗伯特·默顿 (Robert K. Merton): 《科学的规范结构》 文献引用的动机 Citation motivation: 原文献的科学价值Citation – Impact, Influence, Importance, Performance 结果要公开发表 在发表时科研人员要通过在论文中列出参考文献来说明他们是怎样依赖前人的工作的 学术文献被重要的期刊文献引用的次数是这一文献的影响或国际显著性的一种度量 Moed et al., The use of bibliometric data for the measurement of university research performance, Research Policy, 14, 131-149,1985; Oppenheim, C. Journal of Documentation, 1995 由于目前在科学共同体的研究准则中，对前有工作的引证已成为一种规范 按照默顿的说法，正是通过引文，科学家感谢给他们带来灵感和给予他们指导的人 关于科学精神的理论研究，美国科学社会学家罗伯特·默顿（Robert K．Merton）于1942年发表过一篇重要论文，题为《科学的规范结构》，在这篇文章中，默顿给科学精神下了一个定义：科学的精神气质是有感情情调的一套约束科学家的价值和规范的综合。这些规范用命令、禁止、偏爱、赞同的形式来表示。它们借助于习俗的价值而获得其合法地位。这些通过格言和例证来传达、通过法令而增强的规则在不同程度上被科学家内在化了，于是形成了他们的科学良心。 1)对开拓者表示尊重； 2)对有关著作给予荣誉 科研人员的工作要依赖本领域中的同行和前人的工作 结果要公开发表 在发表时科研人员要通过在论文中列出参考文献来说明他们是怎样依赖前人的工作的 科学期刊在同行科学家的交流中起着根本的作用。这就是科学文献能够代表科学活动以及不同分支学科之间关系网的主要理由。 可以将一个研究机构出版物的数量作为其科学产出力的一个指标 在整个期刊系统中，可以区分出“重要”的学术期刊 学术文献被引用的次数是这一文献的影响或国际显著性的一种度量 Web of Science 通过SCI覆盖了纯科学、应用科学和医学领域的大部分重要期刊； SSCI在社会科学领域起着同样的作用 Moed et al., The use of bibliometric data for the measurement of university research performance, Research Policy, 14, 131-149,1985; Oppenheim, C. , Journal of Documentation, 1995

引文索引：信息检索和分析 一种新的科技信息检索方法，在此之前应用于法律文档中(谢泼得引文) 克服了信息索引和检索中与词汇处理相关的问题 使得人们可以沿着文献发表的年代向前追溯 揭示了研究人员之间的社会认知联系，以及科学体系的组织结构和层次 能够辅助进行研究机构的定量评估与描述—“将科学研究的工具用于科学本身” Derek de Solla Price (1963) Eugene Garfield, “Citation indexes for science: a new dimension in documentation through association of ideas,” Science 122(3159):108-11, 15 July 1955

实证研究：被引频次和同行认可程度之间的相关性 Name Field Year Kenneth E. Clark Psychology 1957 Jonathan R. Cole & Stephen Cole Physics 1967, 1973 Henry G. Small Collagen research 1977 Julie A. Virgo Cancer research Michael E.D. Koenig Pharmaceutical research 1983 Eugene Garfield Nobel Prize winners 1992 Charles Oppenheim University rankings (RAE) Mid 1990s- Andy T. Smith & Michael Eysenck 2002 大量研究发现, 二者的相关系数r = 0.7 ~ 0.9 Smith and Eysenck, comparing 1996 and 2001 RAE scores given to psychologists at 38 UK universities (peer review) with their citation counts, concluded: “The two approaches measure broadly the same thing.”

研究绩效定量评价基础指标与思路 学科领域分析 相关机构对比 相对影响力对比 机构百分位排名 高被引论文 …… 定量评价基础指标 即机构发表论文的总被引频次 总体影响力 即机构发表论文的篇均被引频次与全球论文篇均被引频次的比值 相对影响力 相对影响力对比 机构百分位排名 高被引论文 论文产出 即在高影响力、同行评议国际学术期刊所发表的论文数量 ……

引文分析和研究绩效评估: 从国家到个人 基本准则 基础研究优于应用研究 整体优于个体 长期优于短期 相对指标优于绝对指标 多指标优于单指标 总的来说：同类对比，而非“拿苹果与橘子比较” Henk F. Moed, Citation Analysis in Research Evaluation, (Springer 2005)

定量分析与同行评议 “科学计量学指标并不是要取代专家(评议)，而是为了能够对研究工作进行观察和评论，从而使专家掌握足够的信息，形成根据更充分的意见，并在更高的信息集成水平上更具权威性。” Dr. Ronald Rousseau, “评价科研机构的文献计量学和经济计量学指标”，《科研评价与指标》，红旗出版社，第17页，2000年 相互补充 定量分析 同行评议

演讲提纲 科学计量学与引文分析 科研产出分析的主要工具 如何评估本机构的科研产出和影响力? 如何寻找学科关键人才? 如何评估某篇论文的影响力？ 如何评估技术成果? 分析软件的综合利用 小结

Web of Science—全球权威学术信息 严格遵循50多年来一贯的选刊标准，遴选全球最具学术影响力的高质量期刊 完整收录每一篇文章的全部信息，包括全面的引文信息 前所未有的回溯深度，包含1900年至今的共4900多万条文献和7亿多条参考文献 布拉德福定律：80%的重要科技文献集中在20%的出版物中

ESSENTIAL SCIENCE INDICATORS 全球学术成果定量评价基准 来自于 Web of Science 的10年滚动数据，基于22个学科； 总影响力（总引用次数）进入全球前1%的科学家、研究机构（或大学）排名；进入全球前50%的国家（或地区）及学术期刊排名 高被引论文、热点论文和研究前沿分析 全球权威学术信息 主流文献计量方法

INCITES 机构研究绩效综合分析工具 全球权威学术信息 主流文献计量方法 来自于 Web of Science 的30年数据，提供更灵活的学科分类体系； 基于全球基准数据，深入分析机构单篇论文、作者、学科、科研合作及研究影响力 对全球170多个国家与地区的2,000多所研究机构的产出和影响力进行多角度比较与分析 全球权威学术信息 主流文献计量方法

全球范围内使用Web of Science进行研究绩效评估的机构 其中有1300多所机构都在使用汤森路透提供的研究评估工具 5,000+ 1,300+

全球利用Web of Science数据进行科研绩效评估的机构与报告 US, NSF: biennial Science & Engineering Indicators report (1974 - ) European Union, EC’s DG XII (Research Directorate) UK, Office of Science & Technology; Higher Education Funding Council Canada, NSERC, FRSQ (Quebec), Alberta Research Council France, Min. de la Recherché, OST - Paris, CNRS Italy, CRUI (University Rectors) MURST (Ministry of Research, CNR Spain, CSIC (Spanish Science Agency), CIRIT (Catalonia) Japan, National Institute of Informatics, Ministry of Education, Ministry of Economy, Trade & Industry People’s Republic of China, ISTIC, Chinese Academy of Sciences, Shanghai Jiao Tong University, Wuhan University Korea, Korea Research Foundation, Korea Advanced Inst. Of S&T Australia, Australian Academy of Science, gov’t lab CSIRO New Zealand, S. Africa, Portugal, Ireland, Switzerland, Austria, Poland, Czech Republic, Singapore, Malaysia, Thailand, Sweden, Norway, Denmark, Finland, Mexico, Brazil, Chile, Argentina, Uruguay, Russia… and more! Nations and Agencies using WoS and subsidiary products 16

演讲提纲 科学计量学与引文分析 科研产出分析的主要工具 如何评估本机构的科研产出和影响力? 如何寻找学科关键人才? 如何评估某篇论文的影响力？ 如何评估技术成果? 分析软件的综合利用 小结

某知名大学科研成果概览 截止到2011年10月30日，某知名大学共有科技论文12129篇被Web of Science数据库收录 19 19

▪作者 ▪出版年 ▪来源期刊 ▪文献类型 ▪会议名称 ▪国家/地区 ▪基金资助机构 ▪授权号 ▪团体作者 ▪机构 ▪语种 ▪学科类别 对大学的研究成果进行多角度深入分析 强大的分析功能： ▪作者 ▪出版年 ▪来源期刊 ▪文献类型 ▪会议名称 ▪国家/地区 ▪基金资助机构 ▪授权号 ▪团体作者 ▪机构 ▪语种 ▪学科类别 ▪ WOS学科类别 ▪编者

某知名大学科研成果增长趋势 1980年以来，某知名大学的科研活动主要经历了3次大的飞跃，它们的起点分别在1995年、2001年和2006年，其中每一个阶段都比前一次呈现出更高的增长速度。 2008年一年被收录1,470篇 23 23

某知名大学科研成果与中国总体对比分析 在我国科技事业突飞猛进的今天，某知名大学的科技论文数量在30多年中始终保持与国家总体产出相一致的增长态势。 24 24

某知名大学较为活跃的学科领域 化学、分子生物学是某知名大学最为活跃的几个研究领域 25 25

某知名大学杰出的学科带头人 进一步分析显示：某教授是某知名大学中科研成果被Web of Science收录较多的学者之一，共有241篇科技论文。 26 26

某知名大学的科研合作 科研合作关系是开放办学和大学国际化的重要因素，其意义在于“资源整合、优势互补、任务分担、成果共享”。 27 27

某大学十年来的科研产出和影响力 1999年1月～2009年2月

某知名大学的全球影响力 通过分析所有学科领域的数据，可以看到：某知名大学在全球前1%研究机构中，论文总数排名449位，总被引次数排名773。 论文排名 影响力排名 30 30

演讲提纲 科学计量学与引文分析 科研产出分析的主要工具 如何评估本机构的科研产出和影响力? 如何寻找学科关键人才? 如何评估某篇论文的影响力？ 如何评估技术成果? 分析软件的综合利用 小结

杰出科学家的研究产出与影响力 某知名教授——电子陶瓷科学和工程创新领域专家 32

杰出科学家的研究产出与影响力—H指数 “H指数=n”的定义是：某位科学家发表的所有文章中，有n篇文章的被引次数不低于n次。H指数是加州大学圣地亚哥分校物理学家乔治·赫希(Jorge E．Hirsch)提出的一种定量评价科研人员学术成就的方法。 赫希认为h指数能够比较准确地反映一个人的学术成就。一个人的h指数越高，则表明他的论文影响力越大。 《中国科学基金》杂志刊发了重庆大学经济与工商管理学院的赵星、高小强、何培合写的文章《科学基金h指数：基金论文成果数量与影响力的综合衡量》。 为了在科学基金绩效评价中综合反映科学基金论文成果的数量和影响力，文章给出了科学基金h指数的计算方法，用因子分析、回归和相关性分析等方法分析了我国 科学基金论文成果的数据，实证研究了科学基金h指数的特点。结果表明：科学基金h指数综合衡量了基金论文成果的数量与影响力，分别与基金论文成果数量和总 被引呈幂律关系。 33

在全球各国的学术影响力 34 34

在全球研究机构中的影响力 35 35

对不同学科的渗透性 36 36

高被引论文 在全球范围内已经形成了相当规模的研究群体 37 37

针对学术人才的分析报告

ResearcherID——全球学术人才库 39 39

ResearcherID ——全球学术人才库 40

Researcher ID automatically produces citation metrics from the data in your publication list that was obtained through a Web of Science search. Click on the ** Citation Metrics tab from your profile. You’ll see total citations, average citations and the h-index for your work. Keep in mind that publications uploaded from an RIS file will not contain citation data, and therefore will not be included in citation metrics. 41

42

43

演讲提纲 科学计量学与引文分析 科研产出分析的主要工具 如何评估本机构的科研产出和影响力? 如何寻找学科关键人才? 如何评估某篇论文的影响力？ 如何评估技术成果? 分析软件的综合利用 小结

期刊影响因子 – Journal Impact Factor ×期刊影响因子不能用来评估科学家及其论著 数据来源: Journal Citation Reports & Web of Science

按照每一学科和年限比较引文平均数的大小

利用百分比了解一篇研究论文的被引情况在该学科中所处的位置

浏览学科排名可了解每个学科总体的统计数据和趋势

高被引论文 – 被引用次数前1%的论文 数据来源: Essential Science Indicators

引文分析中要注意的问题 不要完全只依赖于论文发表数和/或论文被引次数 不要跨学科、跨年代、把不同规模的机构进行比较，而不做数据的归一处理 不要忽略其它因素（比如：教学能力、行政职责等） 不要过度地被有关某项研究工作的争议所影响 不要假设所有的自引都有问题而不考虑自引的原因与程度 Do not rely on publication and/or citation counts exclusively不要完全只依赖于论文发表数和/或论文被引次数 Do not make invidious comparisons across disciplines, age groups, and different-size institutes without normalizing data不要跨学科、跨年龄、把不同规模的机构进行比较，而不做数据的归一处理 Do not ignore other factors(eg. Teaching ability, administrative duties, etc.) 不要忽略其它因素（比如：教学能力、行政职责等） Do not be unduly influences by disagreements about the signficance of an authors’s work 不要过度地被有关某项研究工作的必要性的争议所影响 Do not assume that self-citations are necessarily problematical without determining the reasons for and extent of self-citations 不要假设所有的自引都有问题而不考虑自引的原因与程度

科研评估 - 定量分析和同行评议 “科学计量学指标并不是要取代专家(评议)，而是为了能够对研究工作进行观察和评论，从而使专家掌握足够的信息，形成根据更充分的意见，并在更高的信息集成水平上更具权威性”。 -- Dr. Ronald Rousseau, “评价科研机构的文献计量学和经济计量学指标”，《科研评价与指标》，红旗出版社，第17页，2000 51

引文分析和同行评议 定量分析和同行评议进行互补! 利用引文分析进行科研评估并不简单 引文分析的黄金规则: Compare like with like 注意: 学科领域间的差别 时间对引文的影响 利用引文分析进行科研评估并不简单 complement Journal citation data - examples Characteristics of citation data Journal citation data – other than Impact Factor 2 step maps 定量分析和同行评议进行互补!

演讲提纲 科学计量学与引文分析 科研产出分析的主要工具 如何评估本机构的科研产出和影响力? 如何寻找学科关键人才? 如何评估某篇论文的影响力？ 如何评估技术成果? 分析软件的综合利用 小结

高校占各国家专利产出的百分比 来源: Thomson Innovation

2009年获得专利授权较多的中国高校 1 浙江大学 919 2 清华大学 811 3 上海交通大学 730 4 北京航空航天大学 520 5 　　清华大学 811 3 　　上海交通大学 730 4 　　北京航空航天大学 520 5 　　哈尔滨工业大学 429 6 　　东南大学 301 7 　　华南理工大学 300 8 　　天津大学 256 9 　　西安交通大学 243 10 　　同济大学 241 来源: Derwent World Patent Index

加州大学的专利情况

较活跃的专利发明人 58 58

优势技术 领域

演讲提纲 科学计量学与引文分析 科研产出分析的主要工具 如何评估本机构的科研产出和影响力? 如何寻找学科关键人才? 如何评估某篇论文的影响力？ 如何评估技术成果? 分析软件的综合利用 小结

分析过程 在 DII/SCI检索，下载数据 数据导入TDA进行数据清理、分析 各种维度的分析 文本聚类 生成报告

例：将SCI数据导入TDA进行分析

明确问题 哪些作者发文较多？集中在哪些领域？作者课题研究发展的变化趋势？ 哪些作者在哪些研究方向上与哪些机构（国内外）合作较多？哪些是研究有关联但是没有合作的（竞争）？哪些研究领域是合作最多的领域？ 近3年的研究关注点是什么？文献关键词的变化趋势如何？文献关键词、主题词和题目涉及的词的汇聚集合中，高频词有哪些？ 从参考文献中分析该机构的文献保障情况。常引用的文献包括哪些？从参考文献上分析某领域研究上集中的作者群有哪些？

了解数据概况

数据清理 机构清理 作者清理

哪些作者发文较多？集中在哪些领域？作者课题研究发展的变化趋势？ Tech Report

近3年的研究关注点是什么？ Tech Report

高频词

常引用的参考文献

通过参考文献了解高影响力作者

机构研究关联性

学科产出对比 TDA Report

国际合作对比 TDA Report

演讲提纲 科学计量学与引文分析 科研产出分析的主要工具 如何评估本机构的科研产出和影响力? 如何寻找学科关键人才? 如何评估某篇论文的影响力？ 如何评估技术成果? 分析软件的综合利用 小结

Web of Science 在科研管理人员的工作中 进行科研成果的评价与分析 学科科研成果的评估 人才引进的评估 国家、教育部重点实验室的评估 验收项目或鉴定成果 为开展学位点的申报提供服务 开展国际合作研究 开展与企业的合作研发 科研成果转化的管理与促进 77

Web of Science 在图书馆员的工作中 为学校的教学科研开展深层次信息咨询服务 帮助科研人员尽快获得科技信息资源 帮助科研人员进行投稿期刊的选择 报道本机构的每年度SCI/SSCI、ISTP论文收录情况和分析其科研影响力 提供论文收录及引用检索报告，为职称申报、学位点的申报、国家、教育部重点实验室申报、基金申请、科研成果的评价提供服务 方便图书馆人员自身申请软课题

谢谢！ 100190 北京市海淀区科学院南路2号 融科资讯中心C座北楼610室 汤森路透知识产权与科技信息集团北京代表处 张帆 Email: ts.support.china@thomsonreuters.com Tel: 010-57601200 Fax: 01082862088 谢谢！