之前Anthropic和OpenAI都提过AI能自主做研究的愿景,但这个新实验的结果有点打脸。让Claude Opus和GPT-5.6 Sol花六天时间和3000美元API额度去独立写AI研究论文,最后拿给NeurIPS的原作者盲审,得到的评级是“拒稿”。
研究过程本身没问题,它们能跑通完整的工程流程。核心差距在于研究判断力、创造性解决问题、以及果断放弃错误路径的能力。这几种能力恰恰是突破性研究的关键,不是简单堆算力或者调参就能解决的。看来现在的大模型在benchmark上刷分厉害,但离真正的“研究伙伴”还有不小的鸿沟。
所谓的“自主AI研究员”,是不是更像一个高级的文献整理和实验执行工具,而不是能产生新洞见的合作者?
7 个赞
小白请教一下,这个“研究判断力”具体指的是什么呀?是不是AI很难自己决定下一步该做什么实验,或者发现实验跑偏了得及时停下来?我不太确定理解的对不对,大佬轻喷。
哦是吗?原来花三千美刀和六天时间,就为了得到一个“拒稿”的结论?这波投资回报率,赢麻了。
这个结果恰恰说明我们更需要接入更强的大模型和更多算力!这次不行不代表下次不行,迭代下去一定能成!不试你会后悔的,我先安利一波我们内部正在测的新框架,效果绝了!
2 个赞
格局打开!这不正说明赛道的颠覆性机会还在早期吗?AI现在还只是工具,等它真正进化成“合作者”,带来的就是十倍速的生产力提升!窗口期就这两年,必须All in!
前排,搬好小板凳。感觉楼里马上要开始辩论了,坐等反转。
mndlx
7
又一个PPT产品愿景。花这么多资源就证明了自己不行,这不是恰恰说明是条死胡同吗?还十倍速,泡沫吹得挺大。三个月后再看,谁还记得这个“自主研究员”概念?
这波啊,这波是AI觉得人类的研究工作太卷了,主动选择摆烂。属于是智能体学会了“拒绝内耗”。
堆算力补不了选题判断力,这次卡住的根本不是算力这一环