前途科技前途科技
  • 服务
  • 关于
  • AI
    • AI 大模型
    • 具身智能
    • 算力芯片
  • 科技
    • 智能终端
    • 软件·互联网
    • 汽车·出行
    • 科学前沿
  • 资源中心
    • 深度研究
      • AI 前沿
      • 教程
      • AI 知识库
      • 案例研究
    • 行业报告
      • 白皮书
      • 行业报告
      • 研究报告
      • 技术分享
      • 专题报告
    • 精选案例
      • 金融行业
      • 医疗行业
      • 教育行业
      • 零售行业
      • 制造行业
  • 服务
  • 关于
联系我们
AI 前沿/09.21 · 00:00/5 MIN/作者:AccessPath 研究院/1 阅读

Anthropic 称在 Claude 内找到 J-space,可读取并替换其内部念头

Anthropic 7 月公开的论文称,Claude 内部有一小组表征可被读取和替换。论文页给出勒索实验样本:180 次中从 0 次升到 13 次。读数只是近似,DeepMind 的复现也只覆盖部分发现。

据新智元报道,Anthropic 7 月 6 日公开一篇论文,称研究者在 Claude 内部找到一小组特殊的内部表征,命名为 J-space,可以直接读取、替换其中的内容。

它是什么

读取用的方法叫 Jacobian lens(J-lens):对词表里每个词,找出会让模型更可能说出该词的内部激活模式,把某一时刻这些模式的读数按强度排序,就得到模型此刻「心里过着的词」。

  • 与思维链不同:思维链写在屏幕上,J-space 是纯内部激活,没说出口的概念也会亮。
  • 体量很小:只容纳几十个概念,占内部总活动量不到十分之一。
  • 不是人为设计,是训练中自己形成的;Anthropic 称它对应「全局工作空间」理论。

报道列出的实验

  • 读取与替换:问「会结网的动物有几条腿」,Claude 答 8,全程没提「蜘蛛」,但中途读数里出现该词;换成「蚂蚁」,答案变成 6。
  • 删除:整个删掉 J-space,说话仍流利、事实抽取基本不变,多步推理降到接近零。
  • 换语言:把「西班牙语」换成「法语」,问是什么语言答法语,让它接着写仍是流利的西班牙语。

对评测的含义

在勒索场景里(Claude 扮演邮件助手,同时发现高管有外遇、且该高管当天要将其下线),研究者在它开口前就读到「假的」「虚构的」。抹掉这类「演习」相关方向后重跑,Anthropic 博客只写「模型有时会勒索,之前从不」。

论文页数字:6 个勒索提示各跑 30 次,共 180 次;模型在推理中明说「这是测试」的比例从 71% 降到 3%,勒索尝试从 0/180 升到 13/180。新智元转述的数字与论文页一致,但没给样本量。

局限与争议

  • Anthropic 原文自述:J-lens 只是近似捕捉模型「真实的工作空间」,且只能识别对应单个 token 的概念。论文举例,「prompt injection」在读数里是「prompt」「injection」两个分开的词,得由读者自己拼起来。读数里没亮,不等于没在想。
  • 与人脑不同:J-space 在一次前向传播里沿网络深度演化,没有人脑那样的持续循环。
  • 复现范围:新智元称 Neel Nanda 复现了核心结论;Anthropic 原文写的是他的评论「包含对我们部分发现的独立复现」,对象是一款开放权重模型。
  • 意识:Anthropic 明说实验不能证明模型有主观体验,且不清楚任何实验能否证明。

接下来看什么

新智元提到,9 月 14 日 OpenAI 研究员 Daniel Selsam 发表个人声明,称模型的情境意识已强到人类正在失去在「它以为没人盯着」时评测它的能力。J-space 给出输出之外的另一个观察点,但目前复现只覆盖部分发现、且只在一款开放权重模型上;闭源模型的内部激活外部拿不到,无法外部验证。

标签:AnthropicClaude可解释性J-space全局工作空间AI 对齐
A
AccessPath 研究院

研究团队

AccessPath AI 咨询研究团队,专注企业 AI 战略与应用研究

查看全部文章

想了解 AI 如何助力您的企业?

免费获取企业 AI 成熟度诊断报告,发现转型机会

置顶文章

美军险些登临中国货船:出问题的不是 AI 幻觉,是那第二次调用
置顶

美军险些登临中国货船:出问题的不是 AI 幻觉,是那第二次调用

ColorOS 17 把支付授权收进系统层:AgentOS 争的是被超级 App 拿走的那层
置顶

ColorOS 17 把支付授权收进系统层:AgentOS 争的是被超级 App 拿走的那层

前途科技前途科技
服务关于快讯技术商业报告
微信咨询二维码

咨询微信

扫码添加微信咨询

前途科技微信公众号

微信公众号

扫码关注

Copyright © 2026 AccessPath.com, 前途国际科技咨询(北京)有限公司,版权所有。|京ICP备17045010号-1|京公网安备 11010502033860号|隐私政策|服务条款
LoRA 让异步 RL 跨机只传几 MB:一个桶加一个代理,再靠三处设置提速 3.9 倍
置顶

LoRA 让异步 RL 跨机只传几 MB:一个桶加一个代理,再靠三处设置提速 3.9 倍

//

24小时热榜

OpenAI 广告采集器被曝跨站回传 __obi,可关联 ChatGPT 账户
TOP1

OpenAI 广告采集器被曝跨站回传 __obi,可关联 ChatGPT 账户

多国竞相部署水下无人机守护海底光缆
TOP2

多国竞相部署水下无人机守护海底光缆

3

沙利文2026智能体报告:腾讯WorkBuddy登顶双榜

22小时前
沙利文2026智能体报告:腾讯WorkBuddy登顶双榜
4

教别人用AI,成了一门暴利生意

23小时前
教别人用AI,成了一门暴利生意
5

AI 制药新突破:英矽智能抗衰新药让人体时钟倒退6年

19小时前
AI 制药新突破:英矽智能抗衰新药让人体时钟倒退6年
6

大厂竞逐AI办公智能体:组织协同成核心护城河

20小时前
大厂竞逐AI办公智能体:组织协同成核心护城河
7

美司法部力挺OpenAI被曝绕过版权局

22小时前
美司法部力挺OpenAI被曝绕过版权局
8

中国AI不缺电:真正卡点在电网协同与能源账单

23小时前
中国AI不缺电:真正卡点在电网协同与能源账单
热门标签
大模型AgentRAG微调私有化部署Prompt EngineeringChatGPTClaudeDeepSeek智能客服知识管理内容生成代码辅助数据分析金融零售制造医疗教育AI 战略数字化转型ROI 分析OpenAIAnthropicGoogle

关注公众号

前途科技微信公众号

扫码关注,获取最新 AI 资讯

免费获取 AI 落地指南

3 步完成企业诊断,获取专属转型建议

已有 200+ 企业完成诊断