OpenAI最强o3模型被曝造假,提前获取FrontierMath测试题库的特权访问权
一位名为“Meemi”的EpochAI承包商在Less Wrong论坛透露,OpenAI不仅为FrontierMath基准测试提供资金支持,还获得了测试题库的特权访问权。
EpochAI副主任兼联合创始人之一Tamay Besiroglu很快在X平台承认了此事。我们犯了一个错误,没有更早披露OpenAI在FrontierMath中的参与。我们的合同在o3发布前禁止我们这么做。事后看来,我们确实应该更努力地争取更早的透明性。我们承认这一点,并承诺未来做得更好。
EpochAI的首席数学家Elliot Glazer承认在项目过程中未主动披露行业资助方面的信息,并向那些如果事先知情可能不会参与的数学家道歉。关于o3成绩,他表示相信OpenAI报告的分数准确性,但强调EpochAI需要通过正在开发的独立保留测试集来验证,并承诺保留集评估分数将公开。当被质疑保留集状态时,Glazer澄清这个测试集仍在开发中,而不是已经完成。
据悉,FrontierMath是一个分量极重的高级数学推理能力评估基准。它由EpochAI联手60多位顶级数学家共同打造,参与者包括多位菲尔兹奖得主和国际数学奥林匹克竞赛的资深命题人。
1
0
免责声明:文章中的所有内容仅代表作者的观点,与本平台无关。用户不应以本文作为投资决策的参考。
你已了解市场,是时候开始交易了!
Bitget支持一站式交易加密货币、股票和黄金等。
立即交易!
加密货币价格
更多Bitcoin
BTC
$64,773.94
-3.21%
Ethereum
ETH
$1,801.94
-4.85%
Tether USDt
USDT
$0.9994
+0.04%
BNB
BNB
$588.48
-4.23%
USDC
USDC
$0.9998
+0.00%
XRP
XRP
$0.9528
-3.03%
Solana
SOL
$70.66
-5.95%
TRON
TRX
$0.3062
-2.11%
Hyperliquid
HYPE
$65.78
-4.83%
Zcash
ZEC
$894.62
-0.36%
交易热门币种
新用户可获得价值 6200 USDT 的迎新大礼包
立即交易
立即成为交易者?新用户可获得价值 6200 USDT 的迎新大礼包
立即注册