首页 > 快讯 > 水果公司论文中的基准数据错误引起了北京程序员的通宵校对：ICLR论文迅速发布修正版以应对30%的数据偏差问题
水果公司论文中的基准数据错误引起了北京程序员的通宵校对：ICLR论文迅速发布修正版以应对30%的数据偏差问题
发布时间：2025-12-01 12:17:03 | 责任编辑：吴昊 | 浏览量：4 次
ICLR2025一轮审稿刚结束，苹果一篇号称“小模型超越GPT-5”的视觉推理论文即遭公开“处刑”。阶跃星辰研究员Lei Yang在复现过程中发现:官方代码漏掉图片输入，修复后准确率反而暴跌;随即抽查20道题，竟有6道Ground Truth标签错误——估算整体GT错误率约30%。
Lei Yang在GitHub提交issue，仅获两句回复便被关闭，于是撰写长文向审稿人示警。帖子迅速发酵，作者团队次日承认“数据生成流程缺陷”，并紧急上传修正版基准，承诺重新跑实验、更新结果。事件引发学术圈热议:大模型时代自动生成的数据集若缺乏人工质检，即便巨头招牌也难免“翻车”。Lei Yang提醒同行，“复现前先跑一遍小样本‘体检’，别让错误GT浪费算力与通宵”。
参考资料：https://x.com/diyerxx/status/1994042370376032701
水果公司论文中的基准数据错误引起了北京程序员的通宵校对：ICLR论文迅速发布修正版以应对30%的数据偏差问题
这是一篇关于北京程序员通宵“扫雷”：苹果论文被曝30%基准数据出错，ICLR稿件紧急勘误的文章，内容值得关注。
©️版权声明：
本网站(https://aigc.izzi.cn)刊载的所有内容，包括文字、图片、音频、视频等均在网上搜集。
访问者可将本网站提供的内容或服务用于个人学习、研究或欣赏，以及其他非商业性或非盈利性用途，但同时应遵守著作权法及其他相关法律的规定，不得侵犯本网站及相关权利人的合法权利。除此以外，将本网站任何内容或服务用于其他用途时，须征得本网站及相关权利人的书面许可，并支付报酬。
本网站内容原作者如不愿意在本网站刊登内容，请及时通知本站，予以删除。
本网站(https://aigc.izzi.cn)刊载的所有内容，包括文字、图片、音频、视频等均在网上搜集。
访问者可将本网站提供的内容或服务用于个人学习、研究或欣赏，以及其他非商业性或非盈利性用途，但同时应遵守著作权法及其他相关法律的规定，不得侵犯本网站及相关权利人的合法权利。除此以外，将本网站任何内容或服务用于其他用途时，须征得本网站及相关权利人的书面许可，并支付报酬。
本网站内容原作者如不愿意在本网站刊登内容，请及时通知本站，予以删除。
