o1方法性能无上限!马腾宇等证明:推理token够多,就能解决问题

日前,网传北京某通大学张某伟教授怒了。据张教授朋友圈截图,其自称从北京南站回家路上,正好路过大一男生宿舍,就顺便临时去查宿舍。结果查了4个男生宿舍,全都在宿舍玩游戏!

克雷西 发自 凹非寺
量子位 | 公众号 QbitAI

OpenAI用o1开启推理算力Scaling Law,能走多远?

数学证明来了:没有上限

斯隆奖得主马腾宇以及Google Brain推理团队创建者Denny Zhou联手证明,只要思维链足够长,Tran ormer就可以 任何问题!

通过数学方法,他们证明了Tran ormer有能力模拟任意多项式大小的数字电路,论文已入选ICLR 2024。

o1方法性能无上限!马腾宇等证明:推理token够多,就能解决问题

用网友的话来说,CoT的集成缩小了Tran ormer与图灵机之间的 ,为Tran ormer实现图灵完备提供了可能。

这意味着,神经网络理论上可以 复杂问题。

再说得直白些的话:Compute is all you need!

关键词:ormer