前途科技前途科技
  • 服务
  • 关于
  • AI
    • AI 大模型
    • 具身智能
    • 算力芯片
  • 科技
    • 智能终端
    • 软件·互联网
    • 汽车·出行
    • 科学前沿
  • 资源中心
    • 深度研究
      • AI 前沿
      • 教程
      • AI 知识库
      • 案例研究
    • 行业报告
      • 白皮书
      • 行业报告
      • 研究报告
      • 技术分享
      • 专题报告
    • 精选案例
      • 金融行业
      • 医疗行业
      • 教育行业
      • 零售行业
      • 制造行业
  • 服务
  • 关于
联系我们
AI 大模型/11.05 · 15:10/4 MIN/编译自 Jay/1 阅读

MIT爆改Qwen权重被质疑,真相究竟如何

MIT关于Astra“直接读取并修改模型权重”的研究引发热议,但随后遭到spaCy作者公开质疑。分析指出论文存在误导,Astra在小模型上纯读权重,而在大模型上实际依赖Python代码和反复测试,偷换了技术路径概念。

麻省理工学院(MIT)此前公布的一项研究在人工智能圈引发关注:AI系统Astra被宣传具备一种惊人能力——无需训练、不计算梯度,即可直接修改另一个AI模型的权重。论文指出,Astra仅修改了Qwen3.5-0.8B模型0.016%的权重,就将其数学评测准确率从7.9%拉升至48.1%,性能暴涨6倍。

这一结论让不少人惊呼“AI已经能够透视并修改另一个AI的大脑”。然而,随着圈内专家的深入拆解,这项研究迎来了反转。

自然语言处理库spaCy作者、AI公司Explosion联合创始人Matthew Honnibal公开发文直言:这项研究的呈现方式存在严重误导。

Matthew Honnibal公开质疑Astra研究

魔术师式的“障眼法”

Honnibal用舞台魔术来比喻MIT这项研究的呈现逻辑:魔术师在多次表演同一套戏法时,每一次都使用完全不同的机关,却给观众制造出“同一种高超技法”的假象。

仔细阅读该论文可以发现,研究实际展示了三组完全不同的能力:

  1. 读权重:仅查看原始权重浮点数,识别微型神经网络正在执行的任务。
  2. 写权重:在不依赖外部环境反馈的情况下,直接生成或修改小型网络参数,使其学会玩简单游戏。
  3. 修复大模型:通过调整部分参数,大幅提高Qwen模型的数学解题能力。

论文摘要给外界传递的核心印象是,Astra凭借“直接观察原始权重”的统一机制,实现了对其他模型的理解与修复。但梳理论文中的8组实验后会发现,实现这三项任务的底层条件存在巨大差异。

两种截然不同的技术路径

在任务识别和微型网络控制实验中,Astra确实做到了“纯读权重”。实验限制极为严苛:

  • 原始权重数据(raw floats)作为提示词直接输入Astra的上下文窗口;
  • 严禁Astra运行Python代码;
  • 严禁运行目标模型以观察实际行为。

在这一模式下,Astra处理的网络参数规模极小,仅在1.7万至17.2万之间。这种能力本身具备理论探索价值,但距离真正解析现代大语言模型仍有本质差距。

Astra在不同实验中的条件对比

然而,在备受瞩目的Qwen数学能力修复实验中,实验环境完全变了样。

面对拥有8亿参数的Qwen模型,Astra并没有直接输入或分析庞大的原始浮点数权重。研究团队赋予了Astra编写并执行Python脚本的权限,并允许其进行最多50次前向推理测试。Astra通过让模型运行测试题、观察输出结果,再根据表现编写代码来分析和微调权重。

这意味着,在处理参数规模较大的实用模型时,Astra并不是在“直接读取神经网络思维”,而是扮演了一个编写调试脚本、反复测试验证的外部工程师角色。将微型网络上的“纯权重感知”与大语言模型上的“外部代码调试”打包归纳,极易让读者误以为纯读脑技术已经能够无缝扩展到现代大模型上。

剥离光环后的真实价值

尽管宣传口径存在夸大,但并不代表这项研究缺乏价值。

Honnibal指出,抛开“读脑神技”的光环,Astra展现出的工程水平依然可圈可点。系统能够通过提示词理解目标,自主编写测试代码,分析前向推理结果,并精准定位需要干预的特定参数位置。在以往的技术条件下,此类复杂的调试流程完全依赖资深机器学习工程师完成。

这一进展表明,顶尖前沿大模型在工具使用、代码编写以及复杂逻辑推理层面,已经具备了充当“初级AI工程师”的潜能。只是学术成果应当以严谨透明的方式呈现,而非将工具调用与参数感知的界限模糊化,助长不必要的行业泡沫。

标签:AstraQwen大语言模型

想了解 AI 如何助力您的企业?

免费获取企业 AI 成熟度诊断报告,发现转型机会

置顶文章

自己动手做模型:ML Intern 低成本定制小模型实战
置顶

自己动手做模型:ML Intern 低成本定制小模型实战

谷歌Playground的账本:做游戏的人付钱,玩游戏的人免费
置顶

谷歌Playground的账本:做游戏的人付钱,玩游戏的人免费

前途科技前途科技
服务关于快讯技术商业报告
微信咨询二维码

咨询微信

扫码添加微信咨询

前途科技微信公众号

微信公众号

扫码关注

Copyright © 2026 AccessPath.com, 前途国际科技咨询(北京)有限公司,版权所有。|京ICP备17045010号-1|京公网安备 11010502033860号|隐私政策|服务条款
微软和Meta收紧Claude:被削掉的是入口,不是模型
置顶

微软和Meta收紧Claude:被削掉的是入口,不是模型

//

24小时热榜

OpenAI用AI挖出Linux内核948个严重提权漏洞
TOP1

OpenAI用AI挖出Linux内核948个严重提权漏洞

百度开源文心5.5 Flash Base,多基准刷新同尺寸SOTA
TOP2

百度开源文心5.5 Flash Base,多基准刷新同尺寸SOTA

3

SpaceX被曝将用一年半追平谷歌27年数据中心算力

7小时前
SpaceX被曝将用一年半追平谷歌27年数据中心算力
4

英伟达特供芯片交付受阻:中国科技巨头或仅获1%配额

7小时前
英伟达特供芯片交付受阻:中国科技巨头或仅获1%配额
5

美中期选举掀反对潮:数十项数据中心禁令获选民通过

7小时前
美中期选举掀反对潮:数十项数据中心禁令获选民通过
6

AI重塑云计算:百亿资本竞赛下的少数派盛宴

8小时前
AI重塑云计算:百亿资本竞赛下的少数派盛宴
7

MIT爆改Qwen权重被质疑,真相究竟如何

4小时前
MIT爆改Qwen权重被质疑,真相究竟如何
8

Google工程评测戳破泡沫:单项正确率91%,交付合格率仅41%

5小时前
Google工程评测戳破泡沫:单项正确率91%,交付合格率仅41%
热门标签
大模型AgentRAG微调私有化部署Prompt EngineeringChatGPTClaudeDeepSeek智能客服知识管理内容生成代码辅助数据分析金融零售制造医疗教育AI 战略数字化转型ROI 分析OpenAIAnthropicGoogle

关注公众号

前途科技微信公众号

扫码关注,获取最新 AI 资讯

免费获取 AI 落地指南

3 步完成企业诊断,获取专属转型建议

已有 200+ 企业完成诊断