简体 | 繁体
loading...
新闻频道
  • 首页
  • 新闻
  • 读图
  • 财经
  • 教育
  • 家居
  • 健康
  • 美食
  • 时尚
  • 旅游
  • 影视
  • 博客
  • 群吧
  • 论坛
  • 电台
  • 焦点新闻
  • 图片新闻
  • 视频新闻
  • 生活百态
  • 娱乐新闻
您的位置: 文学城 » 新闻 » 焦点新闻 » Hinton联合20多位AI大牛警告:“智能爆炸”或已不远

Hinton联合20多位AI大牛警告:“智能爆炸”或已不远

文章来源: APPSO 于 2026-10-05 13:55:21 - 新闻取自各大新闻媒体,新闻内容并不代表本网立场!
被阅读次数

「AI 之父」又出来发声警告了,这一次还拉上了一众行业大佬,对最近热门的「RSI」开炮。

Hinton联合20多位AI大牛警告:“智能爆炸”或已不远

这是由剑桥大学人工智能科学与政策项目 CASP 发布的一份由二十多名研究者共同撰写的报告,作者包括 OpenAI 首席科学家 Jakub Pachocki、Anthropic 联合创始人 Jack Clark、微软首席科学官 Eric Horvitz,以及 Geoffrey Hinton、Yoshua Bengio 和 Dawn Song 等人。

贴心的是,这次剑桥的官方发布还配备了中文版,AI 行业的中国力量,重要性不言而喻。



他们并没有宣布「智能爆炸」已经发生,而是试图回答一个过去显得颇为科幻、如今却逐渐具体的问题:当越来越多 AI 研发工作交给 AI,技术进步会不会突然开始加速?

报告列举的数据表明,这条循环的第一部分已经出现。Anthropic 内部由 AI 生成并最终获批的代码,占比从 2025 年初的个位数上升到 2026 年 5 月的 80% 以上;仅需人类进行高层监督、主要由 AI 自主完成的研发工作,则从今年 3 月的 1% 上升到 8 月的 26%。



Claude 官方数据披露 AI 已深度参与其自身迭代。图片来自:Anthropic

OpenAI 表示,代码 Agent 已经被用于未来模型的训练、评估和安全工作;Google 也称,几乎所有涉及代码、技术设计和研究构思的工作,都在不同程度上使用 AI。

几年前,模型只能可靠完成相当于人类数秒钟的任务。如今,最强的模型已经能够独立处理需要专家花费数小时乃至数天的 AI 研发工作。按照近年的增长趋势外推,报告认为,到 2028 年中,AI 可能有能力承担原本需要人类专家数月完成的研发项目。

AI 正在接近一个关键的临界点位置:现在已经不是模型一代更比一代强这么简单了,AI 开始深度参与制造那个将要替换自己的模型。

递归自我改进?几个意思?

「递归自我改进」到底是什么?想象有一家工厂,专门生产一种机器,但第一台机器造出来以后,却没有被送去商店或是用户手上,而是留在厂里,负责修改生产线。

改造后的生产线造出了性能更好的第二台机器,第二台又回来继续改造工厂……每循环一次,机器变得更强,生产机器的速度也变得更快。这大概就是 AI 领域讨论了数十年的「递归自我改进」(recursive self-improvement)。



最近几家大厂的动作,让「RSI」这个词快速出圈。例如 Google Research 最近发布的 RRSI,让 Agent 自动修改自己的 harness,包括提示词、工具、记忆、控制流程和上下文管理。



9 月发布的 MetaRSI / RSI² 让系统从失败中改进「制造模型的机器」,使以后产生的模型继承这些改进。



随着这些案例的出圈,RSI 也遭到误解,经常被添油加醋地描绘成 AI 突然觉醒、有意识了,读懂自己的代码,然后在深夜里不断自我升级。

但实际上更可能发生的,是既不需要 AI 拥有意识,也不需要某个模型亲手修改自己的参数,只需要让进入生产下一代 AI 的研发流程里。

一开始,AI 在整个流程里扮演的角色,只是研究员手里的辅助工具。人类决定研究方向、设计实验,再让模型帮助写代码、检索论文和寻找程序错误。它确实提高了效率,但整个研发过程仍然由人推动,AI 本身不会决定下一步该做什么。



很快,AI 开始成为研发流水线的一部分,研究员只需要提出一个较高层的目标,Agent 便能拆解任务、编写代码、运行实验、比较不同方案,再将值得继续尝试的方向交给人类确认。

到了这一步,AI 提高的已经不只是某位工程师的工作速度,它开始增加一家公司的「有效研究员数量」。同一个人可以同时调度几十甚至几百个 Agent,让它们沿着不同方向并行试错,且推理能力完全承受得住。



第三个阶段来到真正的递归。AI 参与研发出更强、更便宜的下一代模型,新模型随即被放回研发流程,开始承担更多任务,同时让公司能够运行更多「机器研究员」。研发能力的提高不再是一次性的,它会反过来加快下一轮提高。

这就来到了前面假设的「机器工厂」,真正发生自我改进的,是由模型、Agent、算力和人类研究员组成的整套系统。

一座可能突然加速的工厂

AI 研发尤其容易形成这种循环,因为它主要发生在数字世界。

新芯片完成设计后,还要经过制造、运输和数据中心建设,反馈周期通常以年计算;但一种更高效的训练算法、一套更好的合成数据,或者一条经过验证的 Agent 工作流,可以迅速部署到现有系统,再投入下一轮研发。

报告估算,假如 AI 达到顶尖研究员的能力,而运行成本仍然接近今天,单是 OpenAI 目前拥有的推理算力,理论上便足以支撑相当于数百万名人类研究员的 AI 队伍。



Sam Altman 参观与 OpenAI 与甲骨文合作开办的数据中心工地。图片来自:Oracle

这支队伍不需要工位、不需要实验室,却以被同时复制、全天运行,在大量研究方向上并行试错;更重要的是,它们工作的目标之一,正是让下一批 AI 研究员变得更聪明、更便宜。

在一组相当理想化的假设下,报告推算,AI 技术进步的速度可能在全面实现研发自动化后的约一年半内提高十倍。届时,按照今天速度需要一年完成的进步,可能只需要五周。



Hinton 将这种由 AI 研发自动化带来的突然加速称为「智能爆炸」,其中「爆炸」的意思除了数量上的激增,强度和完成度也可能会迎来大爆发。

这条循环仍然可能被卡住

不过,报告同时承认,目前的证据远远不足以证明这种爆炸必然发生。

数百万名 AI 研究员的估算,建立在模型已经达到专家水平、运行成本却没有明显上涨的前提上。更多 Agent 也未必等于更多发现,它们可能重复劳动,或者在必须顺序解决的问题前一起停下来。

研发下一代模型还需要实验算力、训练数据和持续数月的大型训练任务。即使 AI 可以在几分钟内提出一万个方案,现实中的计算资源也未必允许它逐一验证。到了生物、材料等领域,等待实验结果的时间更无法被代码直接压缩。



报告引用的研发回报率也来自历史数据,而历史上的算法进步与算力增长彼此纠缠,很难确认单靠软件改进,是否真的足以让循环持续加速。

这份报告在担忧的,是持续加速本身。「RSI」之所以会出圈,也是因为让人看到了加速的具象化。当 AI 不断参与制造下一代 AI,新模型再返回研发流程,「智能爆炸」或许就在不远处。

`
  • 金秋养生正当时,重磅大酬宾! 美国专利产品【骨精华】买6送2、买12送5;【心血通】【益脑灵】均有买5送2、买10送5。多买多送,超值优惠!
`
查看评论(1)
  • 文学城简介
  • 广告服务
  • 联系我们
  • 招聘信息
  • 注册笔名
  • 申请版主
  • 收藏文学城

WENXUECITY.COM does not represent or guarantee the truthfulness, accuracy, or reliability of any of communications posted by other users.

Copyright ©1998-2026 wenxuecity.com All rights reserved. Privacy Statement & Terms of Use & User Privacy Protection Policy

24小时热点排行

赖清德长子在美遭跟监!「华裔女间谍」长相曝
摇滚天后辞世享寿63岁!曾担任"加拿大偶像"评审
东航“空姐下跪”事件发酵 人民日报:不能纵容
诺贝尔医学奖公布,3学者共获殊荣
男乒世界第一易主,国足0比5惨败巴勒斯坦官媒震惊






24小时讨论排行

中国推行汉语教学,蒙族小学生与祖辈沟通困难
中国游客被老外比作“渡渡鸟” 出国后为何特别容易被偷
数百人“大篷车”已抵墨西哥 准备中期选举后进美国
华裔女监视赖清德长子被逮 FBI局长:想飞回上海没门
马斯克突然分手!她公开私信:我们不是试管是真爱
法学生抗议席卷全国,500所学校将全面或部分停课
加拿大竟开始认真准备“美国入侵” 真发生会怎样?
“60岁前都是炮灰”?中国新国防动员法引发热议
共和党铁票仓松动!纽时民调:5大深红州恐转蓝
女留学生十年无身份 机场"站错位置"被ICE顺手抓走
美国大学饭堂悲歌:半生豆配腥味鱼 难吃且增肥
美升级核爆炸探测 中国核试验和陈友麟案再引关注
大门越修越远,摆渡车强制消费,上百景区被摘牌
蔡康永遭抵制 昔日言论被挖:我来自台湾为何要回中国?
两条热搜,从日本和法国现在都“很难”说起
俄实验室病原外泄"女不明肺炎病逝"!美吁公开资讯
文学城新闻
切换到网页版

Hinton联合20多位AI大牛警告:“智能爆炸”或已不远

APPSO 2026-10-05 13:55:21

「AI 之父」又出来发声警告了,这一次还拉上了一众行业大佬,对最近热门的「RSI」开炮。

Hinton联合20多位AI大牛警告:“智能爆炸”或已不远

这是由剑桥大学人工智能科学与政策项目 CASP 发布的一份由二十多名研究者共同撰写的报告,作者包括 OpenAI 首席科学家 Jakub Pachocki、Anthropic 联合创始人 Jack Clark、微软首席科学官 Eric Horvitz,以及 Geoffrey Hinton、Yoshua Bengio 和 Dawn Song 等人。

贴心的是,这次剑桥的官方发布还配备了中文版,AI 行业的中国力量,重要性不言而喻。



他们并没有宣布「智能爆炸」已经发生,而是试图回答一个过去显得颇为科幻、如今却逐渐具体的问题:当越来越多 AI 研发工作交给 AI,技术进步会不会突然开始加速?

报告列举的数据表明,这条循环的第一部分已经出现。Anthropic 内部由 AI 生成并最终获批的代码,占比从 2025 年初的个位数上升到 2026 年 5 月的 80% 以上;仅需人类进行高层监督、主要由 AI 自主完成的研发工作,则从今年 3 月的 1% 上升到 8 月的 26%。



Claude 官方数据披露 AI 已深度参与其自身迭代。图片来自:Anthropic

OpenAI 表示,代码 Agent 已经被用于未来模型的训练、评估和安全工作;Google 也称,几乎所有涉及代码、技术设计和研究构思的工作,都在不同程度上使用 AI。

几年前,模型只能可靠完成相当于人类数秒钟的任务。如今,最强的模型已经能够独立处理需要专家花费数小时乃至数天的 AI 研发工作。按照近年的增长趋势外推,报告认为,到 2028 年中,AI 可能有能力承担原本需要人类专家数月完成的研发项目。

AI 正在接近一个关键的临界点位置:现在已经不是模型一代更比一代强这么简单了,AI 开始深度参与制造那个将要替换自己的模型。

递归自我改进?几个意思?

「递归自我改进」到底是什么?想象有一家工厂,专门生产一种机器,但第一台机器造出来以后,却没有被送去商店或是用户手上,而是留在厂里,负责修改生产线。

改造后的生产线造出了性能更好的第二台机器,第二台又回来继续改造工厂……每循环一次,机器变得更强,生产机器的速度也变得更快。这大概就是 AI 领域讨论了数十年的「递归自我改进」(recursive self-improvement)。



最近几家大厂的动作,让「RSI」这个词快速出圈。例如 Google Research 最近发布的 RRSI,让 Agent 自动修改自己的 harness,包括提示词、工具、记忆、控制流程和上下文管理。



9 月发布的 MetaRSI / RSI² 让系统从失败中改进「制造模型的机器」,使以后产生的模型继承这些改进。



随着这些案例的出圈,RSI 也遭到误解,经常被添油加醋地描绘成 AI 突然觉醒、有意识了,读懂自己的代码,然后在深夜里不断自我升级。

但实际上更可能发生的,是既不需要 AI 拥有意识,也不需要某个模型亲手修改自己的参数,只需要让进入生产下一代 AI 的研发流程里。

一开始,AI 在整个流程里扮演的角色,只是研究员手里的辅助工具。人类决定研究方向、设计实验,再让模型帮助写代码、检索论文和寻找程序错误。它确实提高了效率,但整个研发过程仍然由人推动,AI 本身不会决定下一步该做什么。



很快,AI 开始成为研发流水线的一部分,研究员只需要提出一个较高层的目标,Agent 便能拆解任务、编写代码、运行实验、比较不同方案,再将值得继续尝试的方向交给人类确认。

到了这一步,AI 提高的已经不只是某位工程师的工作速度,它开始增加一家公司的「有效研究员数量」。同一个人可以同时调度几十甚至几百个 Agent,让它们沿着不同方向并行试错,且推理能力完全承受得住。



第三个阶段来到真正的递归。AI 参与研发出更强、更便宜的下一代模型,新模型随即被放回研发流程,开始承担更多任务,同时让公司能够运行更多「机器研究员」。研发能力的提高不再是一次性的,它会反过来加快下一轮提高。

这就来到了前面假设的「机器工厂」,真正发生自我改进的,是由模型、Agent、算力和人类研究员组成的整套系统。

一座可能突然加速的工厂

AI 研发尤其容易形成这种循环,因为它主要发生在数字世界。

新芯片完成设计后,还要经过制造、运输和数据中心建设,反馈周期通常以年计算;但一种更高效的训练算法、一套更好的合成数据,或者一条经过验证的 Agent 工作流,可以迅速部署到现有系统,再投入下一轮研发。

报告估算,假如 AI 达到顶尖研究员的能力,而运行成本仍然接近今天,单是 OpenAI 目前拥有的推理算力,理论上便足以支撑相当于数百万名人类研究员的 AI 队伍。



Sam Altman 参观与 OpenAI 与甲骨文合作开办的数据中心工地。图片来自:Oracle

这支队伍不需要工位、不需要实验室,却以被同时复制、全天运行,在大量研究方向上并行试错;更重要的是,它们工作的目标之一,正是让下一批 AI 研究员变得更聪明、更便宜。

在一组相当理想化的假设下,报告推算,AI 技术进步的速度可能在全面实现研发自动化后的约一年半内提高十倍。届时,按照今天速度需要一年完成的进步,可能只需要五周。



Hinton 将这种由 AI 研发自动化带来的突然加速称为「智能爆炸」,其中「爆炸」的意思除了数量上的激增,强度和完成度也可能会迎来大爆发。

这条循环仍然可能被卡住

不过,报告同时承认,目前的证据远远不足以证明这种爆炸必然发生。

数百万名 AI 研究员的估算,建立在模型已经达到专家水平、运行成本却没有明显上涨的前提上。更多 Agent 也未必等于更多发现,它们可能重复劳动,或者在必须顺序解决的问题前一起停下来。

研发下一代模型还需要实验算力、训练数据和持续数月的大型训练任务。即使 AI 可以在几分钟内提出一万个方案,现实中的计算资源也未必允许它逐一验证。到了生物、材料等领域,等待实验结果的时间更无法被代码直接压缩。



报告引用的研发回报率也来自历史数据,而历史上的算法进步与算力增长彼此纠缠,很难确认单靠软件改进,是否真的足以让循环持续加速。

这份报告在担忧的,是持续加速本身。「RSI」之所以会出圈,也是因为让人看到了加速的具象化。当 AI 不断参与制造下一代 AI,新模型再返回研发流程,「智能爆炸」或许就在不远处。

× 文学城 App
文学城 App
让阅读更方便
免费 · iOS/Android
立即下载