O3被指涉嫌成绩造假，60余位数学泰斗遭瞒骗，OpenAI被曝暗中操控评测集
发布时间：2025-01-20 16:18:56来源：
OpenAI发布的推理模型O3在数学基准FrontierMath上表现出色，准确率相比O1提升了12倍。然而，近日曝出O3之所以取得如此成绩，是因为OpenAI资助了FrontierMath并能访问大部分数据集，而创建评测集的数学家们对此毫不知情。这引发了人们对O3成绩真实性的质疑。
Epoch AI回应称，他们与OpenAI有口头协议，不会使用特定数据集训练模型，但有保留集用于独立验证。然而，这一说法难以令人信服。事件曝光后，Epoch AI首席数学家承认错误并向数学家们道歉，联创也表示将致力于提高透明度。此次事件激起了热议，多位学术界大佬对OpenAI的行为表示谴责。同时，也有分析认为，OpenAI可能只是用FrontierMath的题库指导新训练数据的设计，而非直接操纵评测集。
免责声明：本答案或内容为用户上传，不代表本网观点。其原创性以及文中陈述文字和内容未经本站证实，对本文以及其中全部或者部分内容、文字的真实性、完整性、及时性本站不作任何保证或承诺，请读者仅作参考，并请自行核实相关内容。 如遇侵权请及时联系本站删除。
