乐鱼平台

网易乐鱼平台 > > 正文

突发!Anthropic呼吁全员停止AI研究

0
分享至

Jay 发自 凹非寺
量子位 | 公众号 QbitAI

重要发现:AI的自进化,开始了。

这是Anthropic刚刚在长文博客中,发表的暴论。

我们的内部数据显示,Claude正在加速AI发展,这可能是一条递归自我提升(RSI)的路径。



并非「危言耸听」,看了下文章,Anthropic是真的实打实地用数据在说话——

截止今年5月,80%以上的Anthropic代码,都是Claude写的。

而在Claude Code发布之前,这个数字还仅是个位数。

与此同时,Anthropic工程师平均每季度交付的代码量,是2021-2025年的8倍。



更重要的是质量——

在最开放、最模糊、连答案长什么样都不确定的编程任务上,Claude的成功率现在是76%,六个月前才26%。

50个百分点的跳升。半年。



Anthropic内部已经有不少工程师觉得,Claude写的代码质量和人类打平了。

预计年内会超过。

Anthropic还强调,如果这个趋势持续下去,AI自己设计和构建下一代AI,是完全可能的。

这可能彻底改变社会,在医疗、科技、经济领域带来巨大的好处。但也可能让对齐问题叠加恶化,最终导致失控。

因此,Anthropic带头呼吁:

如果存在一个可验证的机制,能保证AI实验室确实都没偷偷卷,我们愿意减速、甚至暂停。

除此之外,Anthropic的这篇博客里,还放出了蛮多有意思的观点和事实。

以下是经过整理,更方便大家阅读的版本。

Enjoy。

Anthropic长文定调

AI圈的摩尔定律来了

Anthropic创建了个全新的衡量维度,叫「AI能独立完成的任务时长」。

2024年3月,Claude Opus 3能搞定人类大概需要4分钟的软件任务。

一年后,Claude Sonnet 3.7,1.5小时。

又一年,Claude Opus 4.6,12小时。

而最新的Mythos,在内测中的表现是:

能连续工作「至少」16小时,已经到了METR测试框架能衡量的上限了。

这个翻倍速度,从原来的每7个月翻一倍,加速到了每4个月翻一倍。

如果趋势不变,2027年,可能是好几周。



Claude编写了大部分Anthropic代码

截至2026年5月,我Anthropic代码库的代码,超过80%由Claude编写。
在Claude Code发布前,这个数字一直只有个位数。

这种变化,也体现在工程师的工作方式上。

在 Anthropic 的最初四年,工程师每天Merge的代码行数基本保持不变。

2025年, Claude开始自己写代码,merge数突然开始飙升。

如今,2026年第二季度,工程师每天merge的代码量是2024年的8倍。



不过,代码量上去了,代码质量是不是注水了?

Anthropic说,这一年来,工程师纠正Claude的次数,越来越少了。

这一点,在benchmark中可见一斑,如下图所示。

所有难度类型的任务中,Claude的成功率,无一例外的一路暴增。



所以,Anthropic现在干脆用Claude来review代码。

是的,所有提交到代码库的改动,都会先过一遍Claude自动审查,检查bug、安全漏洞和其他缺陷。

他们回溯分析发现,如果之前每次改动都有这道自动审查,大约三分之一导致claude.ai线上事故的bug,上线之前就会被拦下来。

要知道,写那些代码的工程师,已经是全世界造AI系统最顶尖的一批人了。

Claude在抓他们的错误。

创造力的放大镜

接下来是Claude在研究层面的参与程度。

Anthropic有个惯例,每次发新模型,都会给Claude一段训练小型AI模型的代码,让它在保证正确性的前提下,把运行速度优化到最快。

2025年5月,Claude Opus 4交出的答案是:加速3倍。

2026年4月,Claude Mythos Preview做到了52倍。

作为参考,一个熟练的人类研究员,需要4到8个小时才能勉强达到4倍。

不到一年的时间,Claude超过了人类。

2026年4月,Anthropic丢给Claude一个AI安全研究,大意是「一个弱模型能不能可靠地监督一个强模型」,然后让Claude自己提假设、跑实验……

这次先说人类的表现吧,两个人类研究员花了大约一周时间,把gap缩小了23%。

而Claude,在大约800小时、花了大约18000美元的算力之后——

缩小了97%。



我们何去何从?

到这里为止,结论已经很清楚了。

人类在AI开发流程里的角色,每一个环节都在收窄。

代码,Claude写了。代码review,Claude做了。实验执行,Claude快了人类一个数量级。实验设计,Claude开始自己来了……

人类现在最后的比较优势,是研究品味和判断力。

但这个优势能守多久?

Anthropic在博客里说,他们也不确定。

一种可能是,「研究品味」就像之前AI不会的其他东西一样,先是做不到,然后突然就做到了。

就像AI理解幽默、展示心智理论、解语言谜题,都经历了同样的曲线。

另一种可能是,即便Claude永远学不会真正的研究品味,仅靠现在的加速趋势,每个人类研究员能同时指挥的工作量已经大了好几倍。

你不需要AI完全替代你思考,它只要把所有「执行」的活全干了,你就只需要做那5%的方向选择。



RSI的三种未来

博客结尾,Anthropic描绘了关于这次「自进化」趋势三个可能演化方向。

1、停滞。

那些指数曲线其实是S曲线。

也许研究判断力这个东西就是没法靠scale解决,需要一种全新的架构突破。

或者,瓶颈在能源、在芯片、在算力的物理供应链上。

不过,即便AI的能力就停滞在今天的水平,也会发生对世界带来重大变化。

前段时间的Project Glasswing,Mythos Preview在上线头几周就发现了超过一万个高危和严重级别的软件漏洞,遍布全球最关键的系统。

2、AI持续加速,但人类仍然把着方向盘。

组织效率会指数级提升,100人的公司做1万甚至10万人的活。知

Anthropic觉得我们大概率正在走进这个场景。

但他们也发现了一个有意思的现象,就是阿姆达尔定律在组织里的体现_

Claude把代码写得飞快了,结果代码review变成了新瓶颈。各种新想法、新工具、新实验爆炸式涌现,远超组织的消化能力。

瓶颈不会消失,只是转移到下一个环节。

3、AI实现完全的递归自我提升,开始自己造下一代自己。

这个场景下,AI的发展速度完全取决于算力了。人类退到监督、验证、审核的位置。

如果真的发生,这种能力大概率会迁移到其他科学领域,医学、材料、能源,全线起飞。

当然,另一种未来,是对齐失败。

这种情况下,偏差会在AI自我迭代的过程中逐步累积,最终——完全失控。

OMT

以上,便是Anthropic此次关于自进化,最关键的几个观点。

说实话,最开始我其实没太当回事,毕竟Anthropic马上就要IPO了,这一波不是典型的「Anthropic式」公关?

你别说,这次,可能真的有点不一样。

因为就在几天前,OpenAI也发布了类似的博客:

我们也在当今系统中看到自进化的早期迹象: AI的发展本身也被AI加速。
我们预计这将加剧开发商和国家之间的竞争压力,并带来现有机构无法应对的治理挑战。
随着RSI的出现,社会需要方法塑造AI的发展轨迹 ,确保其服务于人类利益。



奇点,似乎来得比所有人预想的都要快。

博客://www.anthropic.com/institute/recursive-self-improvement

参考链接:
[1]//x.com/kimmonismus/status/2062517474277675102
[2]//x.com/anthropicai/status/2062568873321513443

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
给千万企退工人一个公道:年年调资不是福利,是缴费换来的权益

给千万企退工人一个公道:年年调资不是福利,是缴费换来的权益

你在偷看谁
2026-08-12 20:02:35
2020年女子当众扇儿子耳光,儿子直接跳楼,如今女子已自杀身亡

2020年女子当众扇儿子耳光,儿子直接跳楼,如今女子已自杀身亡

观察鉴娱
2026-03-18 09:09:10
中国乒乓大捷!4-3夺冠,绝杀日本松岛美空,3小将强势登顶

中国乒乓大捷!4-3夺冠,绝杀日本松岛美空,3小将强势登顶

艳儿说电影
2026-10-17 16:29:58
李瑞环说:叶选平是叶帅的儿子,但水平比我高,为什么不能当省长

李瑞环说:叶选平是叶帅的儿子,但水平比我高,为什么不能当省长

章荳解说体育
2025-12-11 21:56:41
脱下礼服换冰鞋!苏提达日本这一滑,把梅根的脸都打肿了

脱下礼服换冰鞋!苏提达日本这一滑,把梅根的脸都打肿了

白露文娱志
2026-10-16 15:40:16
知名男歌手宣布:将开26场演唱会,每晚重唱不同专辑,观众手机须关机封存

知名男歌手宣布:将开26场演唱会,每晚重唱不同专辑,观众手机须关机封存

上观乐鱼平台-乐鱼(中国)一站式服务平台
2026-10-17 18:00:46
戏剧节这天,郝蕾泡面头像大妈,刘琳脸黄满脸褶,被51岁梅婷惊艳

戏剧节这天,郝蕾泡面头像大妈,刘琳脸黄满脸褶,被51岁梅婷惊艳

冰语历史
2026-10-16 11:58:50
他曾任安徽省委书记,1977年被万里接替,1984年遭撤职处理

他曾任安徽省委书记,1977年被万里接替,1984年遭撤职处理

大运河时空
2026-10-18 10:55:05
这叫衰落?英国手里,还攥着14块海外地盘,是本土的7倍多

这叫衰落?英国手里,还攥着14块海外地盘,是本土的7倍多

清沐执笔
2026-10-15 21:57:01
又萌又飒!50岁刘国梁怎么也没想到,一场省运会开幕式,竟暴露25岁孙颖莎的真实地位,百万网友集体守护!17年攒下的底气带火家乡

又萌又飒!50岁刘国梁怎么也没想到,一场省运会开幕式,竟暴露25岁孙颖莎的真实地位,百万网友集体守护!17年攒下的底气带火家乡

篮球热嗖
2026-10-18 13:24:05
江西省农业厅副厅长曹爱珍:仅5年从教师晋升副县长,耀眼明星终落马

江西省农业厅副厅长曹爱珍:仅5年从教师晋升副县长,耀眼明星终落马

十为先生
2026-09-11 14:18:51
泰国电诈升级!中使馆预警,多方暗中勾结,重点盯上这两类中国人

泰国电诈升级!中使馆预警,多方暗中勾结,重点盯上这两类中国人

新一说史
2026-10-18 13:10:53
事态彻底升级了!公海直接开火,美军炸瘫香港万吨货船,方便旗照样躲不过美军炮弹,引发舆论热议!

事态彻底升级了!公海直接开火,美军炸瘫香港万吨货船,方便旗照样躲不过美军炮弹,引发舆论热议!

林杰论事
2026-10-17 06:45:25
两性心理学:女人主动跟你说例假来了,过来人都懂,她其实是在暗示你这两句话,不要再傻乎乎地听不明白

两性心理学:女人主动跟你说例假来了,过来人都懂,她其实是在暗示你这两句话,不要再傻乎乎地听不明白

心理观察局
2026-09-06 06:41:37
硬刚张继科!刘丁硕自曝曾得抑郁症:想结束 输给樊振东是最高光时刻

硬刚张继科!刘丁硕自曝曾得抑郁症:想结束 输给樊振东是最高光时刻

念洲
2026-10-18 07:09:46
尤丽霞已任山西省委常委

尤丽霞已任山西省委常委

新京报政事儿
2026-10-17 20:14:06
北京即将进入重度老龄化!预计2035年占比将超33%,家庭养老该怎么办?

北京即将进入重度老龄化!预计2035年占比将超33%,家庭养老该怎么办?

辉哥说动漫
2026-10-18 11:05:13
外蒙古面积缩水30万平方公里?从180万到150万,原因你绝对想不到

外蒙古面积缩水30万平方公里?从180万到150万,原因你绝对想不到

抽象派大师
2026-09-21 16:40:31
“太窒息了,我要是孩子直接跳了”,一顿廉价早餐,让母亲发小作文

“太窒息了,我要是孩子直接跳了”,一顿廉价早餐,让母亲发小作文

熙熙说教
2026-10-12 13:43:52
原来大家已经悄悄存了这么多钱了!网友:手里有粮,心里不慌!

原来大家已经悄悄存了这么多钱了!网友:手里有粮,心里不慌!

另子维爱读史
2026-10-16 19:57:42
2026-10-18 14:31:00
量子位 incentive-icons
量子位
追踪人工智能动态
13506文章数 176583关注度
往期回顾 全部

王江舟院士:6G到底是不是骗局 是不是收割

特斯拉飞行汽车在美国引发疑问:从哪起飞 是否真能飞

特斯拉飞行汽车在美国引发疑问:从哪起飞 是否真能飞

升级版杨瀚森再闯难关:当上开拓者第三中锋还得拼

曝郭麒麟与25岁知名女星已经结婚,女方回应关系

马斯克:美债问题只能靠AI和机器人解决

星瑞L PLUS限时售价10.97万元起 开启智混3L时代

态度原创

“只筛选,不教育”,一线教师评价英语新教材,家长:已经想放弃英语了!

PS游戏从此只有数字版!实体光盘被索尼彻底判死刑

孩子拇指与众不同会敏感自卑,术后锻炼与心理疏导缺一不可

利好密集落地+现房好房断档,广州楼市买入窗口,正在倒计时!

无障碍浏览 进入关怀版