http://www.isironline.org/isir-2015-invited-address-paul-sackett-nathan-kuncel/

Paul Sackett 和 Nathan Kuncel 在这次谈话中涵盖了很多内容，并且还杀死了很多龙。 测试偏见，批判性思维，理性测试，一旦你有了基本的智力，更高的分数就没有更多的贡献了：所有这些类型的野兽。

一位杰出的观众当时对我说：Paul Sackett 和 Nathan Kuncel 彻底摧毁了 SAT 考试不能预测大学成绩的想法。 他们的“巨大”数据集包含超过一百万学生。 一场滑稽的和数据丰富的谈话，他们留下了关于标准化测试无用的神话，就像证据高速公路上的道路杀手一样。

链接在上面，但这是他们的结论：

最后一点被他们的谦虚所掩盖：他们拥有庞大的数据集（1.2 万学生），他们非常仔细地分析这些数据，查看许多令人困惑的变量。 想搅浑水的聪明傻瓜总能找到一个小样本来证明他们想要的任何东西。 从现有文献的整理和评估中得出更可靠的图片，并按质量分级。

这是一个典型的“律师”而不是学术的聪明愚蠢的例子：

如果这种法庭科学得到任何信任，心理学将永远不会取得任何进展。

高校容易出现“橡皮尺子”扭曲：简单科目的学业成绩提高了表观能力，因此必须对课程的难度进行修正。 学业成绩测量通常将考试结果与出勤分数（甚至参与实验的学分）混为一谈。 学术能力的衡量标准越纯，通过良好的入学考试就能越有力地预测它。

Sackett 和 Kuncel 是出色的磨光机和抛光机，他们会甩掉灰尘以找到抛光的钢材。 他们了解自己的数据，并沉着应对。 通过这样做，他们消除了许多流行的妄想。

他们的演讲本身就值得一看，但也因为他们只需要 45 分钟，这让听众有时间提问，这让您可以了解该领域的一些主要研究人员，并深入了解他们的兴趣和意见。