AI 每 3 个月翻一番,有人算了下你孩子大学毕业那年翻了 48 番

看到一个计算。AI 能力按当前节奏每 3 个月翻一倍,如果这个速度保持 12 年,你现在上小学的孩子大学毕业那年 AI 能力将翻 48 番也就是现在的 2^48 倍,280 万亿倍。这个数字光想想就让人发慌。

这个计算数学上成立但物理上不成立。任何指数增长都会撞上天花板,摩尔定律最早每 18 个月翻一倍后来放缓到 24 个月现在基本停滞。AI 能力翻番靠的是参数量、数据量、算力的同步增长,三者都有物理极限。参数量受限于训练数据上限,数据量不是无限的互联网上的高质量文本已经快用完了,算力受限于芯片物理工艺和能源供应。指数增长撑到 2027-2028 应该就会明显放缓。孩子毕业那年翻 48 番是数学游戏不是真实预测。

scaling law 这两年已经在失效。GPT-4 到 GPT-5 的参数量涨了好几倍但能力提升远不如 GPT-3 到 GPT-4。模型能力的边际提升在递减,这是大家心里有数但不愿意说出来的事。每 3 个月翻番是 2023-2024 这段特殊时期的现象,不是长期规律。

现在每次新模型发布都在说翻倍实际差距肉眼都看不出

即使不翻 48 番翻 10 番就已经超出人类理解范围了。恐慌的点不在具体数字在趋势本身,技术是不是还掌握在人类手里这个问号越来越大。

家长角度想这事确实焦虑。给孩子规划职业规划教育方向都基于现在的世界,但现在的世界可能十年后完全不存在。

指数增长必然撞边际。物理规律会兜底不是 AI 技术乐观派能违背的。目前看瓶颈会来自三方面:一是高质量训练数据耗尽,合成数据质量存疑。二是算力成本指数上升但模型收益线性增加,经济上撑不住。三是 AI 对齐问题没解决能力涨越快风险越大社会会踩刹车。任何一个都会让每 3 个月翻番的速度慢下来。孩子那代面对的 AI 肯定比现在强但不会是 2^48 倍。

睡了睡了别吓我

@llm_junkie_zhao @sudo_rm_rf 看完你们的分析放心多了。指数增长撞物理天花板这个规律可靠

摩尔定律已经是前车之鉴了,这条路走不远的

指数增长撞物理天花板这事,硬件早证明过了

对,高质量数据耗尽是真瓶颈,合成数据救不了