露丝·a·佩格尔著
突发新闻:西马哥国际排名研究中心已从公众视野中删除,包括所有备份文件。
“排名职位更多地取决于方法,而不是业绩。”(Schmoch 2015)
(2015年8月12日)从我们的第一篇专栏开始已经一年了,现在是时候巩固一下我们所学到的知识,然后再写一些新的文章,介绍一些新的概念和排名。
露丝的排名1包括9个不同的排名。表13.1更新这九个排名,并增加三个。它包括10个组织,产生了12个不同的全球排名,其中至少有一个百分比的指标来自学术出版物的文献计量基础。指表13.1(所有排名的url在文章后面的附录中)。
在这一年中,亚洲国家在Web of Science和Scopus上的产出有所增加,如表13.2.在过去四年中,增长最大的是中国。从文献计量学的最初介绍露丝的排名3,我们已经添加了标准化和细分、大小依赖和大小独立等概念。我们知道要看每个分数之间的距离,而不仅仅是排名,我们知道要阅读方法。
排名是多维度的。它们都取决于机构和出版物的选择过程。结果是被纳入的机构之间的互动,所使用的指标,基础数据的来源,排名机构对数据的操纵和用于显示数据的web界面。这篇文章阐明和总结了我们排名中的这些多维方面。以下是使用任何排序时需要考虑的元素列表。
选择的机构
每个排名都有自己的标准。例如,尽管《泰晤士报高等教育》(THE)和《美国环球新闻》(U.S. News Global)使用汤森路透(Thomson- Reuters)提供的相同基础数据,并使用类似的指标,但它们的纳入标准和得分权重不同。因此,它们的顶尖大学有所不同,10所大学中只有7所同时出现在两份榜单上。
《泰晤士高等教育》在2014-2015年的排名中排除了“不教本科生的大学;如果他们只教一个狭窄的科目;或者他们的研究产出在2008年到2012年间少于1000篇文章(每年200篇)。主题字段则有其他例外。结果是401所世界大学进入排名。
《美国新闻与世界报道》全球排名使用了750所大学。这些院校必须进入汤森路透全球声誉调查的前200名。接下来,一家机构必须是在最近5年里发表文章最多的机构之一,与声誉调查中的前200名进行对比。《美国新闻与世界报道》还包括了被排除在《泰晤士报》之外的研究生院。
定义
论文包括同行评审的文章;文章和评论;论文集或所有出版物。
ARWU和国立台湾大学也使用汤姆森-路透社的出版物作为他们的基地。ARWU使用的是“2012年科学引文索引扩展和社会科学引文索引收录的论文总数”。只考虑“文章”和“论文集”类型的出版物。在计算一个机构的论文总数时,社会科学引文索引收录的论文引入了2的特殊权重。
南洋理工大学排名使用的“文章数量”从基本科学指标,为期11年。在这两项排名中,排名前十的大学中只有五所是相同的
机构可以在系统级(U California system)、单个大学(UCLA)或单个出版单位(university of Massachusetts Medical School)表示。排名可能只包括符合出版标准的大学或所有机构。甚至什么是“大学”也不一致,因为一些排名包括高产的中国科学院。
作者没有排名。将一篇文章连接到正确的机构是在文章水平上计算的,这对于普通的名字来说通常是困难的。Thomson-Reuters和Scopus都有方法消除作者姓名的歧义,但都有其局限性。
指标
前几篇文章中介绍的不同排名方法介绍了排名系统使用的40多个不同指标,其中一些是其他指标的衍生。例如,对于指标引用,我们有总引用数,每作者数量的引用数,每文章数量的引用数,以及被引用的文章数量。
大小是排名的重要因素。规模更大的机构通常有更多的产出,因此可能有更多的引用。使用出版物或引文的总数被称为大小依赖。计算每个教员的文章或每个文档的平均引用被称为大小独立。
文章/引用计数在引文计数的早期,只有第一作者被包括在内。今天的学术环境鼓励来自不同机构和国家的作者之间的合作。对于每一篇文章,每个机构和国家计算一次,或者在作者之间分配学分,称为分数计算。
指标有不同的权重。除了它们的权重,它们还可以根据研究领域进行调整,重要的引用,按地区或按大小进行调整。例如,在莱顿和SIR中,没有权重,每个指标都是独立评分的。
定性ty-选择范围从同行评审的文章到所有论文;前1%、10%或50%的引用或高引用。
语言影响引用。研究表明,非英语语言出版物的平均被引用次数少于英语出版物(Van Leeuwen et al.(2001)和Van Raan et al.(2011))。
年的数据与本年度相比,排名有所不同(减1);5年或11年(来自Thomson-Reuters Essential Science Indicators);分析日期的其他因素是更新频率,通常是每年和发布日期。的排名表13.1于2014年8月至2015年6月上映。
数据集
来源出版物从汤森路透(Thomson - Reuters)和Scopus的数千份报告,到《自然》(Nature)自己为《自然-亚太指数》(Nature Asia-Pacific Index)出版的出版物,不一而足。指的是表13.1.B在自然亚洲指数(Nature Asia index)中,前十名中有七名来自南大和SIR名单。
引文计数的来源被引用次数的计算是一个有争议的问题,我们将在以后的文章中进行更深入的讨论。对于那些不能等待的人,请阅读引文影响指标的文献综述(Waltman 2015)。
- 汤姆森-路透期刊引用报告(JCR) -需订阅;
- Scopus的免费引文计数:
- sci期刊与国家排名(SJR);
- 每篇论文的来源标准化影响(SNIP)和每篇出版物的影响(IPP)
- 从CWTS
Webometrics目前正在研究使用谷歌Scholar作为引用来源
排名
不同的排名可以用不同的方式进行分类。表13.1.A团体排名包括各种来源的指标,包括调查和机构级别的数据表13.1.B包括那些只有学术指标的。排名还可以根据有或没有Leiden和SIR等综合评分进行分类。它们可以根据排名主体的类型进行分类。THE、QS和U.S. News都是商业来源;ARWU最初是一所大学的倡议,现在与上海交通大学的一个研究机构合作,而南洋理工大学接手了由教育部和台湾大学成立的台湾高等教育评估与认证委员会编制的排名。SCImago是一个独立的研究实验室;自然是一个使用自己出版物的出版商。
排名可能是一个整体排名;每类别等级;每个地区或国家的排名或每个学科的排名。
得分可以是一个整体的综合分数,也可以是个别类别的分数。yabovip001排名方法描述了不同的分数是如何计算的。
数据对排名有贡献的因素很少提供。Leiden提供的原始数据是免费的,Incites则需要付费。本系列的第14篇文章介绍了爱思唯尔的SciVal产品的原始数据。
权重各项指标在每次排名中都有所不同。它们可能是基于文献计量学的百分比;每个指标或指标类别的权重。拥有原始数据的价值在于,它可以让机构根据自己的权重创建自己的排名。
排名的网站
排名网站的功能和显示的数据各不相同。
过滤器通过以下方法缩小数据集,帮助机构进行基准测试:
- 地区和国家
- 主题领域;有限或广泛的类别;yabovip001基于期刊或个人论文(主题将在以后的文章中涉及)。没有在总体排名中名列前茅的院校可能会在某一特定学科下进行排名。
- 机构类型-仅指大学或数据集中的所有机构(SIR)
- 可使用年限
- 出版物数量或机构规模;莱顿大学允许你设置一个最低限额,但对于规模较小的大学,没有能力设置上限
工具进一步支持个人定制
- 排名由各个指标;THE允许根据5个指标重新排名;U-Multirank有多个选择,但缺少数据;汤森路透在其数据集中针对所有机构的多个类别提供了多个指标——这是有代价的yabovip001
- 可视化工具比如地图、饼图和曲线图
- 下载功能-整个数据集(来自莱顿),按类别或无
更有趣的是,所使用的指标、指标和权重的来源并不是每年都是静态的。例如,莱顿在2015年简化了网站上的“影响”指标。这两年的默认条件都是规模独立的与化为分数计算使用的论文数量都在排名前10%这导致了一些不同的结果,如表13.1.B.
例子13.1展示了莱顿大学在2015年世界和亚洲排名第一(亚洲顶尖大学的世界排名)。这表明,通过使用相对较小和较新的机构的规模独立指标,如南洋理工大学排名高于新加坡国立大学,后者的规模依赖排名更高。
结论
如果你读过以前的文章,你应该知道我的结论总是一样的。没有一个“最佳排名”。如果你所在学校或国家的排名下降,你不应该恐慌。例如,在表13.1.B泰国的整体世界排名下降,但其产出继续上升。顶尖大学将继续保持顶尖大学的地位。这些排名的用户应该选择一组学校作为基准。通过检查各种排名,你可以从排名中选择对你有意义的个人指标。
亚洲地区的国家可能有兴趣参加COLLNET 2015从11月26日到28日,在德里,许多论文都致力于文献计量学。
引用:
摘自Ulrich Schmoch第十章国际大学排名的信息价值:一些方法论的评论《激励与绩效:研究组织的治理》,《管理科学》2015年第1期
Van Leeuwen, T. N., Moed, H. F., Tijssen, R. J., Visser, M. S. & Van Raan, A. F.(2001)。科学引文索引的语言偏见及其对国家研究表现的国际比较的影响。科学计量学,51(1), 335 - 346。
Van Raan, A. F., Van Leeuwen, T. N. & Visser, M. S.(2011)。在大学排名中语言影响严重:特别是德国和法国在引用排名中被误解。科学计量学,88(2), 495 - 498。
Waltman, Ludo(2015年7月)。引文影响指标文献综述,7月31日http://arxiv.org/abs/1507.02099
露丝的排名
露丝的排名和新闻更新列表在这里.
*露丝·a·佩格尔(Ruth A. Pagell)目前是夏威夷大学图书馆与信息科学项目的兼职教师。在加入UH之前,她是新加坡管理大学李嘉诚图书馆的创始图书管理员。她在图书管理的各个方面都有广泛的写作和演讲,包括为ACCESS撰写文章https://orcid.org/0000-0003-3238-9674