解读 QS 世界大学排名的方法论

你是否好奇 QS 世界大学排名 是如何运作的?又为什么会采用这样的方式?下面就为你解答一些关于我们所使用的 方法论 的常见问题。 QS 在过去 20 年里一直在开展大学和商学院研究。在此期间,我们引入了多项创新,其中包括将全球雇主调查和学术调查作为我们方法的核心支柱。

2012年11月2日 · 阅读约 9 分钟 · 原作: QS 编辑团队 · 整理: Hayden Young
解读 QS 世界大学排名的方法论
Photo by John Bakator on Unsplash

你是否好奇 QS 世界大学排名 是如何运作的?又为什么会采用这样的方式?下面就为你解答一些关于我们所使用的 方法论 的常见问题。

QS 在过去 20 年里一直在开展大学和商学院研究。在此期间,我们引入了多项创新,其中包括将全球雇主调查和学术调查作为我们方法的核心支柱。

在此期间,QS 研究已获得高度认可,每年都会被大约 1000 份不同的报纸、期刊和网站引用,可谓汇聚了全球最具代表性的媒体。

自 2004 年以来,QS 一直发布 世界大学排名。它已成为跨国比较大学最广泛使用的依据。仅在 2009 年,我们的排名结果网页就吸引了超过 2000 万访问者,另有许多人通过印刷版看到这些排名。

排名本质上就很复杂,没有任何一种排名体系会宣称自己是完美的。但我们对自己排名所达到的准确性和接受度感到自豪。麦肯锡季刊前主编 Alan Kantrow 教授曾说:“QS……负责评选出了全球最好的大学排名。”

为什么 QS 要发布世界大学排名?

QS 的使命是:“帮助有抱负的人通过教育成就、国际流动和职业发展,实现自身潜力。”

早在 20 世纪 90 年代末,越来越多的年轻人希望到本国以外攻读本科和研究生课程,这一点已经变得十分明显。过去十年间,在海外求学的人数已从 250 万增长到 400 多万。跨国比较大学的依据变得十分必要,而这正是 QS 使命的核心所在。

我们的首要关注点,是满足这些年轻人的信息需求;同时,我们也认识到,学者、大学管理者和雇主同样对我们的排名高度关注。

QS 的方法是如何设计的?

QS 在开始进行国际大学排名时,首先确定了世界一流大学的主要使命:研究质量、毕业生就业能力、教学质量和国际化程度。随后,我们尝试为这些使命分别建立衡量方式。

在编制排名方法和确定这些核心使命的过程中,QS 与许多大学校长进行了咨询。随后,我们又通过面对面的研讨会,向近 8000 名学者征求意见,结果表明,大家对我们聚焦世界一流大学这些主要使命的做法给予了强烈支持,尽管这些使命并非全部。

接下来,QS 着手开发一种经过反复验证的方法,用于开展学术质量的专家同行评议调查。我们还引入了统计和技术专家,以确保我们的调查设计不会被“钻空子”,并且能够提供有效结果。该调查设计建立在许多在线政治民调的原则之上,而这些民调在预测选举结果方面的准确性正日益提高。

帝国理工学院校长 Richard Sykes 爵士认为:“学术评议是比较大学的合适方式。判断聪明人,需要聪明人。”

QS 的方法论是什么?

QS 选定了以下指标及权重。关于方法论的更详细说明,可在 QS Intelligence Unit 的 网站 上查看。

  • 学术同行评议 40%
  • 全球雇主评议 10%
  • 每位教师论文引用数 20%
  • 国际学生比例 5%
  • 国际教师比例 5%
  • 师生比 20%

这套方法是否准确可靠?

QS 所进行的同行评议已由一位顶尖统计学家独立验证。哥伦比亚大学临床教授、公共卫生统计专家 Paul Thurman 认为:“QS 所做的研究,比如今许多其他定性方法或简单排名方法都更先进。”

他还补充说:“你们的方法消除了大多数响应偏差,并且对样本进行了控制,使其在学科和地区上都具有广泛代表性。你们的结果当然具有统计学效力。在 2% 的样本响应率、共 9500 份回应的情况下,95% 置信水平下的误差幅度仅为 0.98%。 ”这个误差幅度与当今世界上大多数政治民调相比,已经同样好,甚至更优。

QS 的方法论是否曾受到批评?

在两家机构六年合作于 2009 年结束后,《泰晤士高等教育》随即发起了对 QS 世界大学排名的批评活动。QS 拥有世界大学排名结果和方法论的全部知识产权。

看来,THE 认为,只有假装对 QS 不满,才能为自己推出新的排名争取合法性。Martin Ince 曾在 THE 担任 6 年排名编辑,负责监督与 QS 的合作;在此之前,他还是 THE 的副主编。他说:“我可以诚实地说,QS 制作的排名被视为一项出色的工作……准确、深刻,而且完全符合用途。”

麦肯锡季刊前主编 Alan M. Kantrow 教授补充说:“高等教育领域的全球竞争,使得我们必须拥有某种跨国比较质量的依据……QS 的学术同行评议和雇主评议,恰当地把比较的基础交到了专家手中,也就是全世界的学者和雇主。”

这套方法有哪些局限?

任何排名都有局限性。显然,不存在唯一正确的答案,这也是 QS 相信排名竞争、为使用者提供多元视角的原因。最常见的批评包括以下几点:

  • 院校规模。 排名常被批评偏向大型大学。上海交通大学学术排名(SJT)确实更偏向规模大、资金充足、重视科学领域的机构,而且其大多数指标都没有按规模调整。相比之下,QS 世界大学排名中的所有硬数据指标都按规模进行了调整。我们的调查设计采用自发作答的方式,也意味着受访者必须主动回想自己了解并确知其科研表现突出的大学,而雇主也必须主动思考他们希望从哪些大学招聘。
  • 偏向自然科学和生命科学。 引文数量等指标确实会偏向在医学自然科学领域更强的大学,因为这些领域有更成熟的发表和引用文化。不过,在同行评议中,QS 会在五个宽泛学科领域之间进行标准化处理:生命科学、自然科学、信息技术与工程、社会科学,以及艺术与人文,同时也会在不同地区之间进行标准化。这确保在人文或社会科学方面表现突出的大学,在我们的结果中与科学类强校拥有几乎同等的机会。
  • 盎格鲁-撒克逊偏向。 全球排名常见的批评之一是,它们偏向以英语发表的大学,因为文献计量数据库统计的大多数期刊和论文引用都使用英文。此外,盎格鲁-撒克逊学者彼此引用成果的文化,也比其他国家的学者更强。但 QS 的同行评议并不受这类语言偏差影响,QS 还不遗余力地将问卷翻译成多种语言,以免对非英语母语学者造成不利。我们承认,在“每位教师引用数”这一指标中仍然存在一定偏差,但我们正在鼓励尽可能纳入更多外文期刊。我们的引文数据供应商 Scopus 所使用的数据库,一般被认为比其主要竞争对手 Thomson Reuters 更不容易受到语言偏差影响,而 THE 使用的正是后者。

你们如何核实收集到的数据?

QS 通过多种来源,对所收集的全部数据进行严格核实。引文数据来自由 Elsevier 提供的 Scopus,双方共同确保数据分组准确。每所大学的每个附属学院都需要纳入分析。例如,MIT 就有 1741 个不同的附属关系。

大多数硬数据指标都直接向大学收集,并使用系统记录录入时间和录入人员。所有数据都会与政府统计数据以及大学官网进行比对。任何不一致之处都会直接向相关大学追问并加以解决。这是一项浩大的工作,需要一支能讲多种语言的研究团队。

你们会对不同类型的大学进行分类吗?

QS 已建立一套系统,根据 12 项不同标准对每所大学进行分类,这些标准包括:大学是否为专门型机构、是否为综合性大学、是否设有医学院、学生人数,以及最终的科研产出表现。

以人文艺术为主的大学,其科研论文数量往往远少于以理工科为主的大学。因此,可以根据分类来绘制子排名。QS 也会按照前文界定的五大宽泛学科类别发布子排名:生命科学、自然科学、信息技术与工程、社会科学,以及艺术与人文。

QS 世界大学排名的方法论有多透明?

排名所使用的全部硬数据都以各种形式发布在 上。QS 还会公布学术调查和雇主调查受访者的详细构成,并在全球学者和雇主参加的研讨会上展示这些内容。

QS 的方法有多被接受?

超过 8000 名学者参加了专门讨论 QS 世界大学排名方法论的研讨会。与会者几乎普遍接受 QS 的排名标准。

这些标准所赋予的权重则属于个人意见范畴,QS 将在 2010 年推出“个性化排名”系统。这将允许用户自行设定权重并生成自己的排名。对于总体排名,QS 则坚持稳定性,只有在必要时才会逐步调整,例如 2005 年引入雇主评议。

QS 世界大学排名方法论有哪些优势?

不同利益相关方会指出不同的好处。大学和学者最常提到的优势包括:

  • 战略规划。 QS 世界大学排名提供了一项可信、客观的衡量标准,使大学管理者能够评估本校提升办学表现所做的努力。排名本身不是目的,而只是一个衡量工具。它可与其他排名数据以及校内生成的数据结合使用,用来对照目标评估表现。
  • 基准比较。 过去 6 年的结果,使大学管理者能够将本校的发展轨迹与其他机构进行基准比较。
  • 衡量质量。 我们使用引文数据,可作为科研产出的质量指标。随后,大学还可以借助 Elsevier 提供的工具,从单个院系层面更深入地识别独特的科研能力和科研产出。
  • 国际认可与品牌知名度。 QS 声誉调查是目前衡量大学品牌在其他学者和雇主中强弱的最佳工具。在全球教育市场中,这是一项至关重要的指标。

对于雇主而言,也有类似的好处。QS 世界大学排名使雇主能够在全球任何地方的高排名大学中规划招聘活动。过去,公司进入新市场扩张时,在招聘毕业生时往往只能依赖当地口碑。如今,他们有了可靠的目标院校选择依据。事实上,这些排名还鼓励许多雇主去尝试招聘他们此前并不熟悉的大学毕业生。

对于学生和家长来说,世界大学排名的好处则不言而喻。任何想要出国留学的申请者,如今都不必再依赖某位可能按佣金提成推荐特定大学的中介意见。相反,他们可以使用客观数据,比较不同大学的优势,并做出更有依据的初步筛选。QS 还出版了《Top Universities Guide》和电子指南,提供关于 40 个国家、500 多所大学的更多信息,这些大学都在排名中被评估。

世界各国的政府官员和政策制定者也非常关注 QS 世界大学排名。该排名的设立,部分源于英国财政部的一项建议。排名为一国高等教育体系提供了客观衡量标准。它既能有力地发现高等教育中的优势领域,也能找出必须加以解决的薄弱环节。

相关文章