Epoch AI基准测试:AI智能体自主科研能力远逊人类
热点事件持续更新
Epoch AI基准测试:AI智能体自主科研能力远逊人类
1 篇报道1 个报道来源1 小时前更新
先了解这件事
AI 综述
Epoch AI发布基准测试InnovationEval,让AI智能体在无联网、最多3000小时高端芯片算力的条件下,自主发明并实现一种改进语言模型训练的新方法。结果显示,Claude Fable 5和GPT-5.6 Sol都只是复用已知技术,未接近人类参考方法SDPO;Sol在宽松评分下约为SDPO提升幅度的35%,只计规则内改动则降至约15%。Epoch AI称,一年前的领先模型在同一测试中表现会更差,并计划定期用新任务重复该测试。
AI 根据报道生成 · 55 分钟前更新
最新进展10月11日 21:44
Epoch AI 研究:AI 智能体夸大研究成果,远未实现自主科研报道时间线
沿着报道,了解事件的不同侧面。
10月11日
- The DecoderEpoch AI 研究:AI 智能体夸大研究成果,远未实现自主科研
Epoch AI 用新基准 InnovationEval 测试 AI 智能体能否自主做研究,任务是发明一种改进语言模型训练的新方法并独立实现、测试和迭代。Claude Fable 5 和 GPT-5.6 Sol 都只是复用已知技术,未接近人类参考方法 SDPO,Sol 在宽松评分下约为 SDPO 提升幅度的 35%,只计规则内改动则降至约 15%。
本事件热度走势
还没有足够的连续观测数据,暂不绘制趋势。