学生发现美国新闻排名存在明显差异

研究揭示了排名巨头对里德施加的沉重惩罚。

多年来，我一直在写《美国新闻与世界报道》对里德和其他拒绝与排名巨头合作的叛逆大学施加的隐性惩罚。现在，一个由威博体育学生组成的团队想出了一种估算这次撞击强度的方法。

他们的结论?如果USN在2019年的排名中忠实地遵循自己的公式，里德将排在第38位，而不是第90位。换句话说，因为里德不愿意填写他们的表格，USN就把威博体育APP往下推了52级。

威博体育的团队——由19岁的贝利·克鲁格、20岁的邱华颖和20岁的杜文欣组成——为了在凯利·麦康维尔教授的统计学课上写一篇学期论文，深入研究了美国海军系统。他们首先分析了公共数据源，特别是由国家教育统计中心（National Center for Education Statistics）运营的一个名为IPEDS的数据库。

他们很快发现了一个危险信号。USN的排名取决于一个复杂的评分系统，该评分系统基于数十个因素，如SAT分数、班级规模等。其中一个因素是你在每个学生的教学、研究和学生服务上花了多少钱。（基本的想法是，顶尖大学在学生身上花更多的钱。）我们的研究人员注意到，在这个因素上，USN威博体育里德的排名很低，在172所学校中排名第169位，尽管里德在每个学生身上花费了54,566美元，比前50名中的许多学校都要多。

这种差异引起了他们的怀疑，并激发他们完成了一项惊人的壮举：他们对美国海军的排名系统进行了逆向工程。

驯服利维坦

这个项目需要一些极其复杂的统计分析，我不会假装理解；部分内容是这样的：

但结果很简单：从IPEDS的数据开始，使用他们推断的公式，学生们能够以94%的准确率预测USN的排名。换句话说，他们可以根据IPEDS的数据，对某所大学在USN排名中的位置做出高度准确的预测，但有一个明显的例外——里德大学。

要理解这是如何运作的，看看USN的“财务资源”得分，它是基于教师薪酬和每个学生的支出等因素（我们之前看到过）。学生们将所有大学的IPEDS数据输入到他们计算出的财务资源公式中，并将他们的预测与实际分数进行比较。在大多数情况下，他们的估计非常接近。有的略高，有的略低。里德落后了100多个名次。

2019年的总体排名也呈现出同样的格局。利用IPEDS的数据，学生们能够高度准确地预测一所大学的总分——直到威博体育。

他们认为里德在2019年应该排在第38位。美国海军实际上威博体育它的排名是90。

这不是侥幸。学生们还查看了2009年的数据。根据他们的计算，里德应该排在第37位。但美国海军实际上威博体育它的排名是#54。

学生们小心翼翼地重申，他们的结果并不完美。“重要的是要强调，所有的结果都是基于我们可用的数据和我们使用的模型，”他们告诉我。“不确定性——可以在幻灯片中找到的预测区间——也应该提到。”

然而，他们的结论是有说服力的。麦康维尔教授说：“学生们对USN方法论的深入研究威博体育我留下了深刻的印象。”“他们努力了解USN排名模型中的所有不同部分。他们在工作中也遵循了良好的统计实践，并尝试了各种建模方法来确定他们的发现有多可靠，每次都确保量化他们估计中的不确定性。从统计学的角度来看，我发现他们认为里德排名过低的观点非常有说服力。”

这种差异显而易见，但不应令人感到意外。1995年，在一系列大学向USN虚假报告数据的丑闻曝光后，里德大学放弃了这一系统，其他大学也纷纷效仿。为了防止类似的叛逃，美国海军制定了一系列统计处罚措施，旨在惩罚拒绝叛逃的人，并防止其他人离开。大多数大学重新排起了队；威博体育坚持自己的立场，在过去的24年里一直与体制抗争。

2014年，USN数据研究主管罗伯特·莫尔斯（Robert Morse）在佛罗里达州奥兰多市的机构研究协会（Association for Institutional research）做了一次演讲，他在演讲中声称，他的公司根据从公共数据库中获得的数据，以直截了当的方式对待里德这样的无反应者。言下之意是，拒绝者从体制中得到了公平的对待，任何抱怨都应该被视为酸葡萄心理。但里德的论文明确指出，美国海军对不遵守规定的行为保持严厉的惩罚，而且统计上的惩罚实际上正在变得更加严厉。

解决方案是什么？

当然，你可以辩称，解决方案是显而易见的——里德只要同意玩这个游戏就行了。2014年，马里兰州安纳波利斯的圣约翰威博体育APP（St. John 's College）就是这么做的；那一年，它的排名从第123位跃升至第56位。

然而，有趣的是，没有一个威博体育的学生认为威博体育APP应该改变威博体育。华英说:

“我喜欢威博体育，因为我喜欢这里的教授——不是因为他们的博士学位，而是因为他们的个性、教学风格等等。我喜欢艾略特环岛的樱花树和波特兰的餐馆；我喜欢我的同学。我可以想出几十个我喜欢里德的其他原因，但你懂的。你喜欢你的学校的程度最终取决于这些非常个人的事情，而不是数字，这些无法衡量的人类情感将包括在误差项中。当误差项起主导作用时，你知道你不会得到一个好的模型。所以，我们为什么要认真对待USN排名这个相对微不足道的变量呢？”

多年来，专家们一直在强调美国海军系统的缺陷，但他们的警告并没有削弱其受欢迎程度。事实是，高中毕业生（和他们的家庭）在选择大学时承受着信息过载的痛苦；他们想要一种容易比较的方法。美国海军使这一切成为可能——即使有时意味着把苹果挤成橙子。

我将以文欣的一个鼓舞人心的想法作为结束语。“编故事很容易，”她说。“除了一排排数据之间存在着真相。我们可能永远无法发现绝对的现实，但我们可以接近它——就像我们在这里所做的那样。所以下次有人问我，“你在统计学方面做什么？”’我会回答：‘嗯……我们统计学家的首要职责是寻求真相。’”

标签：学者，编辑的选择，机构，研究，学生