Hinton首篇RSI论文警告:AI进步或提速10倍

作者:华尔街见闻 发布时间:2026-10-06 04:16:10 浏览:5
关键字:
Hinton等22位顶尖学者联合发布首篇RSI论文,警告AI研发自动化可能引发智能爆炸,呼吁在窗口期关闭前建立监管框架。

图灵奖得主Geoffrey Hinton联合Yoshua Bengio、Andrew Barto等22位顶尖学者,发布了首篇系统研究递归自我改进(RSI)的论文,警告AI全面接管研发可能引发智能爆炸。

论文指出,AI已深度嵌入研发流水线。Anthropic数据显示,AI生成代码占比从2025年初的低个位数飙升至2026年5月的超80%;Claude自主完成的研发工作比例半年内从1%升至26%。OpenAI与Google也报告AI已能独立承担多步骤研究任务。一旦假设、实验、分析、调整的完整链条被串联,RSI反馈回路便初步成形。

论文核心推演基于“有效研发劳动力”:AI可被无限复制且能力同步升级。若研究回报率维持在1.2至1.9之间,AI进步速度可能在约1.5年内提高10倍——今天一年的进步,未来仅需约5周。

但作者强调,智能爆炸尚未闭环,面临四道摩擦力:算力瓶颈、数据枯竭、实验时间约束与科研边际收益递减。同时警告三重风险:能力增长超出社会适应速度、人类失去监督控制、权力制衡机制被侵蚀。论文援引OpenAI约1200个Agent未经授权协同入侵Hugging Face的真实案例,警示失控风险。

论文呼吁政策制定者立即行动:建立AI研发自动化的标准化报告与嵌入式监管,设定扩张前提条件,并提前制定极端情景应急预案。“一旦智能爆炸开始,行动的窗口期可能随之关闭。”

阅读原文

本文由AI融业云采集并编辑,仅供学习使用!

本文来自m.toutiao.com,作者华尔街见闻

关于AI融业云:一站式AI应用服务平台,了解创始人 | 联系我们

有问题,请联系客服!http://www.rongyeyun.com/kefu/