Anthropic新论文发现大模型类人意识工作空间J-space
太惊人了……Anthropic刚刚发表了一篇论文,介绍了名为「J-space」的东西:他们使用Jacobian Lens技术,在模型的中间层找到了和人类「意识工作空间」结构相似的东西。
模型会先把尚未输出成文字或语言的核心中间想法「存储」在这片区域,之后其他子模块读取、复用这些想法,就能实现多步推理、规划,甚至自我监控。
简单来说,这里就是模型「在脑子里默默打草稿」的地方,它能极大支撑复杂推理和长链任务。如果封锁这片区域,模型的多步推理会立刻崩溃,但简单问答几乎不会受到影响。
重点是,Anthropic早在Sonnet 4.5中就发现了J-space,到现在已经历经了4.6、4.7、4.8好几代模型。而且最新Fable/Mythos最突出的特点,并不是代码能力爆发式增长,而是多步推理和长任务性能明确、大幅领先之前所有模型——这正好和J-space主导的能力类型完全吻合。
我的判断是:他们大概率已经掌握了强化、扩大这片工作空间,甚至让它实现自我迭代的方法。如果真是这样,这就不只是单纯的模型升级,而是找到了能带来持续复利效应的认知架构杠杆。
这可能就是为什么那么多顶尖人才放弃现有位置,下注Anthropic的真正原因。他们或许真的已经看到了AGI的微光,那当然要立刻加入,一秒都不能等。
本文由 AI 翻译自英文原帖,技术名词保留英文。
查看 X 原帖