作者:Ruth A. Pagell*
(2017年1月25日)网络计量学大学排名网包括26000多所机构,其中仅美国就有3200多所。新兴大学、发展中国家的大学或你的母校进入前1000名的可能性有多大?更不用说精英大学前200名了。《Ruth’s ranking》专注于描述不同全球排名系统的优势和劣势,他们总是以对参数和方法的理解为结尾。本文是对英国高等教育政策研究所(HEPI)最近的一份报告的回应,并简要介绍了本地和全球排名的差异。
十二月份的一篇文章世界大学新闻(O 'Malley, 2016年12月15日)总结了一份报告HEPI,《国际高等教育排名:是好是坏?》不到一个月后,Altbach和Hazelkorn(2017年1月9日)在同一份出版物上发表了《为什么大多数大学应该退出排名游戏》,这对我来说比HEPI报告更有价值。Altbach和Hazelkorn是两位跟踪高等教育和排名超过十年的研究人员。
HEPI这份长达32页的文件关注的是商业高等教育排名的缺陷。它呈现的发现,好像这是一些新的东西,它包括没有参考书目。如果这对学术期刊的老读者来说是一个惊喜,我会很失望的科学计量学或者露丝的排名。使用全球经济或人口统计数据的人也不会感到惊讶。
的HEPI报告将问题分为四类:yabovip001
- 对决策的影响
- 数据质量和定义
- 数据显示
- 权重
对决策的影响不是排名或排名者的责任,而是分析和使用它们的人的责任。Altbach和Hazelkorn的文章是对许多高等教育机构滥用排名的一个优秀而简明的总结。
HEPI的一些担忧是,非书目指标要么来自调查,要么来自机构自己的数据,而书目数据都是关于研究的。它强调了声誉调查对QS和the等排名的重要性,并建议取消它们。在我们最新的文章中露丝的排名22我们指出了印度大学排名中声誉调查和国际化指标的问题。
该报告采用了全球排名QS,的,ARWU而且U-Multirank.U-Multirank是HEPI的排名范例,因为它既包括教学也包括研究。HEPI的报告有一个免责声明,U-Multibank也有缺陷。在我看来,这是最不完美的!例如,化学领域的顶级教学机构都来自俄罗斯和乌克兰。在商科研究方面,只有两所美国大学上榜。
HEPI报告承认研究领域数据的一致性,但没有解决关于规模、语言和主题的文献计量学问题。它没有提到雪球指标这是爱思唯尔和英国一些大学的合作成果。滚雪球指标使用了许多来自英国高等教育统计局的现有定义(颅脑).HESA也提供标准化的主题定义。HEPI可能不知道经合组织术语表中的国际标准数据定义。教育制度之间的差异,即使有标准的定义,也很难进行国际比较。
全球排名确实强调研究和声誉。本科生应该关注使用与全球排名不同指标的本地排名。然而,这些排名往往依赖于学生调查和机构提供的数据。从与学生共事的个人经验来看,他们认为好的教学更多的是轻松的评分和有趣的讲课,而不是内容和知识。
由于这是一份英国报告,我比较了来自《卫报》而且完整的大学指南英国QS, the和ARWU的排名。我为23所大学分别列出了前十名。顶尖大学的排名并不像我预期的那样截然不同。前10名中有8个在本地榜单上相同,4个在至少一个全球榜单上排名前十。在本地榜单的前十名中,只有两名没有进入至少一家全球榜单的前25名。看到表23.1用于比较、指标和分析。
我用《美国新闻与世界报道》比较了美国的全国排名和全球排名。它在30多年前推出了美国排名,并在2015年进入了全球排名领域。表23.2《美国新闻与世界报道》将全美大学排名与全球排名进行了比较,不仅对前十的大学进行了排名,还对中间的大学进行了排名。排名靠前的商学院之间存在一致性,但排名靠后的商学院之间的一致性较差。在世界排名中,只有4所中等大学的排名高于美国。在美国,许多大学的全球排名相对低于美国的全国排名。大部分美国新闻大学的数据可以从公共来源获得。这两个来源之间唯一的共同指标是信誉调查的使用。美国调查中唯一的免费数据是学费数据。关于方法论的更多信息包含在表23.2.
结论
HEPI的报告令人失望。然而,它很好地提醒了人们围绕排名的问题,如缺乏对方法论的关注。阿尔特巴赫和黑泽尔科恩建议大学,尤其是那些中等规模、全国性、地区性和专业性的大学,退出排名游戏。
以下是我对排名利益相关者的建议。
对薄层土的建议:
- 除了排名列表,至少要包括分数和理想的基础数据
- 让方法更容易在网页上找到
- 支持数据下载,以便决策者能够操作数据,创建自己的权重,并使其与环境更加相关。
- 与OECD和Snowball等组织合作,将定义标准化,并为机构提供数据时使用的术语表
给决策者的建议:
- 一个昂贵的解决方案是与科睿唯尔(Clarivate, WOS, InCites)或爱思唯尔(Elsevier, Scopus, SciVal)合作,购买原始数据并创建自己的排名
- 不要只看排名。我们已经多次提到,排名可以下降,但分数可以上升
- 采用其他模式,如旗舰模式,继续争取质量,但不一定是在全球舞台上。
给学生及资讯专业人士的建议:
- 本科生应该使用当地或地区的排名。泰晤士高等教育的美国大学排名不同,变量也不同,排名机构在地区排名中使用的权重至少也不同。
- 如果用户知道他们感兴趣的领域,可以进一步深入到主题领域
- 查看学费、奖学金机会和签证要求,这些可能比任何排名都重要
研究人员建议:
既然排名是固定的,既然合作是当今重要的文献计量学,科学计量学和高等教育政策研究人员之间的更多合作可能会为所有用户带来更相关的指标。
众所周知,排名中使用的指标是有缺陷的,排名者不断调整他们的方法。如果它们被误用和曲解了,那不是度量的错。
引用:
Altbach, P. G.和Hazelkorn, E.(2017年1月8日)。为什么大多数大学应该退出排名游戏。大学世界新闻,(442)于2017年1月10日访问http://www.universityworldnews.com/article.php?story=20170105122700949
Bekhradnia, B.(2016年12月)。国际大学排名:是好是坏?HEPI 89报告于2017年1月10日访问http://www.hepi.ac.uk/2016/12/15/3734/
college, L.(2014年6月)。滚雪球指标食谱,2nd2015年8月30日。http://www.snowballmetrics.com/wp-content/uploads/snowball-metrics-recipe-book-upd.pdf
B. O 'Malley(2016年12月15日)。“全球大学排名数据存在缺陷”——HEPI。大学世界新闻, #441于2017年1月10日访问http://www.universityworldnews.com/article.php?story=20161215001420225
经济合作与发展组织。统计术语1月13日在http://stats.oecd.org/glossary/(注:需剪切粘贴URL)
露丝的排名
露丝排名和新闻更新的列表是在这里.
*露丝·帕格尔(Ruth A. Pagell)目前是夏威夷大学图书馆与信息科学项目的兼职教员。在加入哈佛大学之前,她是新加坡管理大学李嘉诚图书馆的创始馆长。她曾就图书馆工作的各个方面进行过广泛的写作和演讲,包括向ACCESS -投稿https://orcid.org/0000-0003-3238-9674.