3 月 23 日消息,图灵奖得主、meta 首席 AI 科学家杨立昆(Yann LeCun)做客 20 日播出的“Big Technology Podcast”科技播客节目,谈到了当前生成式 AI 为何难以做出科学发现以及未来 AI 如何发展等话题。
他表示,大语言模型等现有 AI 技术本质上是基于文本训练并通过统计规律生成答案,无法“创造新的事物”,因此存在局限性。而人类能够运用常识和心理模型思考并解决新的问题,这项能力是 AI 大模型所不具备的。“它们只是在大量文本数据上进行训练以进行检索和生成,缺乏对物理世界的理解和抽象推理能力。”
他认为当前大语言模型的发展已经接近瓶颈,训练数据的增长带来的回报正在逐渐递减,进一步获取数据不仅成本高昂,而且难以达到预期效果。仅仅通过扩大大语言模型的规模和训练更多数据无法实现人类水平的 AI,因为大模型缺乏真正的推理能力和对物理世界的理解能力。
杨立昆表示,“真正的 AI”需要理解物理世界,拥有持久的记忆,支持推理和规划。
据此前报道,杨立昆曾在今年 2 月预测,AI 技术到 2030 年前将迎来进一步的革命。但目前的 AI 系统依然受限,现有技术难以支撑家用机器人和自动驾驶汽车。
杨立昆正在研究一种新的系统,旨在通过建立一个模型来预测物理世界的行为,从而帮助 AI“理解”现实。“AI 现在还不能与人类匹敌。如果我们能够开发出像猫或老鼠一样聪明的系统,那就算是一大进步。”