前途科技前途科技
  • 服务
  • 关于
  • AI
    • AI 大模型
    • 具身智能
    • 算力芯片
  • 科技
    • 智能终端
    • 软件·互联网
    • 汽车·出行
    • 科学前沿
  • 资源中心
    • 深度研究
      • AI 前沿
      • 教程
      • AI 知识库
      • 案例研究
    • 行业报告
      • 白皮书
      • 行业报告
      • 研究报告
      • 技术分享
      • 专题报告
    • 精选案例
      • 金融行业
      • 医疗行业
      • 教育行业
      • 零售行业
      • 制造行业
  • 服务
  • 关于
联系我们
AI 大模型/11.11 · 13:01/4 MIN/编译自 Hugging Face/1 阅读

Tether发布BotPsy端侧模型,8亿参数超越20亿大模型

Tether AI Research推出0.8B端侧AI智能体模型BotPsy,基于Qwen3.5-0.8B打造。该模型在多项工具调用基准测试中性能翻倍,并在BFCL v4等测试中击败参数量达2.5倍的Qwen3.5-2B,实现低延迟与数据隐私保护。

前沿云端大语言模型虽然强大,但运营成本高昂且波动难以预测。过度依赖第三方接口还会面临访问受限、定制化门槛高以及数据隐私泄露等风险。事实上,并非所有任务都需要顶尖水平的算力,小参数模型在特定场景下同样能够胜任日常工作,并且非常适合端侧部署。

Tether AI Research 近日推出了一款专为工具调用和智能体工作流设计的轻量级模型——BotPsy。该模型参数量仅为 8 亿(0.8B),基于 Qwen3.5-0.8B 开发,专为端侧本地部署打造,定位为用户的随身个人助手,可执行网络检索、出行生活、商业财务、设备控制及日程邮件管理等低中难度任务。

BotPsy与竞品工具使用基准测试对比

在同等尺寸模型中,BotPsy 展现出了极高的工具调用与智能体任务水平,全面领先 1.2B 及以下规格的同类产品。目前,该项目已在 Hugging Face 开源开放权重(遵循 Apache 2.0 协议),并提供适配 llama.cpp 的 GGUF 量化格式。

性能飞跃:8 亿参数击败 20 亿对手

测试数据显示,BotPsy 的智能体表现较基础模型几乎翻倍:在 BFCL v4 测试中得分从 23.4 升至 44.0,ACEBench 从 30.1 升至 58.7,τ-bench 则由 23.2 提升至 51.5。

更引人注目的是,在多项主流评测中,BotPsy 的成绩甚至超过了参数量为其 2.5 倍的 Qwen3.5-2B-Think。在 BFCL v4、ACEBench、τ-bench、ToolSandbox 和 BrowseComp-Plus 五项基准测试中,BotPsy 均实现了越级领先,仅在 Claw-Eval 测试中微弱落后于 2B 模型。

BotPsy通用知识与指令遵循能力对比

核心能力与安全表现

  • 复杂多轮交互可靠性更高:在模拟多轮客户服务的 τ²-bench 电信测试中,BotPsy 拿到了 82.5 分,显著优于 Qwen3.5-2B-Think 的 69.3 分。在商业服务与系统设备管理等复杂链条场景中,它的多步骤执行得分也居于首位。
  • 明确识别调用边界:AI 智能体不仅要懂得如何调用工具,更要清楚何时拒绝调用。在考察模型拒识能力的 BFCL v4 幻觉测试中,BotPsy 获得了 86.1 的高分,在缺乏对应工具时能准确识别并主动拒绝,避免盲目尝试。
  • 指令遵循与通用知识兼顾:工具调用的专项训练并未削弱其基础能力。BotPsy 在 IFEval 指令遵循基准上取得 90.8 分(基座模型为 59.7 分),并在 GPQA Diamond 和 MMLU-Pro 知识测试中逆势上扬。
  • 更安全的端侧防护:在针对有害内容的红队测试中,BotPsy 的不安全响应率降至 21%(基座模型为 36%),显著优于同量级竞品。针对端侧智能体面临的提示词注入攻击,其违规率从 46% 降到了 31%。

BotPsy四阶段训练技术架构图

四阶段训练范式:蒸馏与强化学习结合

BotPsy 的能力提升源自一套严密的四阶段后训练流水线,分别利用了示例模仿、专有教师引导以及规则奖励:

  1. 监督微调(SFT):利用多轮交互轨迹、并行工具调用及拒识用例开展全参数微调,初步建立工具使用规范。
  2. 多教师策略蒸馏(MOPD):通过 3 个分别强化了工具使用、通用推理和指令遵循的 Qwen3.5-4B 专家模型作为教师,以 KL 散度为信号指导学生模型生成。这一阶段不仅巩固了工具能力,还补齐了 SFT 阶段损失的通用知识。
  3. 第一阶段强化学习(RL):采用 DAPO 系统引入基于规则和验证器的细粒度反馈,细致评估工具名称和参数的正确度,摆脱二元评分的局限。
  4. 第二阶段强化学习:将训练拓展到数学、代码及模拟工作流等多步骤验证任务中,全面稳固多轮逻辑能力。

训练各阶段模型能力变化趋势

推理效率显著提升

在端侧设备上,推理效率直接决定了用户体验。评测显示,在回答相同难题时,BotPsy 在 GPQA Diamond 上消耗的思考 Token 数量仅为基座模型的三分之一(3,690 对比 11,563),在 MMLU-Pro 上减少了 2.7 倍。同时,在长指令测试中陷入死循环推理的几率从 22.9% 大幅下降至 1.4%,大幅缩短了端侧响应的延迟。

团队也明确指出了该模型的局限性:BotPsy 目前主要针对英语环境优化,在开放式深度检索及小语种场景下的表现仍显吃力,且小模型依然存在幻觉可能,不适宜用于高风险的财务或医疗自动决策。未来团队将进一步探索点对点去中心化协同与本地设备微调机制,持续推动端侧个人 AI 生态的发展。

标签:AI智能体端侧AI开源大模型

想了解 AI 如何助力您的企业?

免费获取企业 AI 成熟度诊断报告,发现转型机会

置顶文章

自己动手做模型:ML Intern 低成本定制小模型实战
置顶

自己动手做模型:ML Intern 低成本定制小模型实战

微软和Meta收紧Claude:被削掉的是入口,不是模型
置顶

微软和Meta收紧Claude:被削掉的是入口,不是模型

前途科技前途科技
服务关于快讯技术商业报告
微信咨询二维码

咨询微信

扫码添加微信咨询

前途科技微信公众号

微信公众号

扫码关注

Copyright © 2026 AccessPath.com, 前途国际科技咨询(北京)有限公司,版权所有。|京ICP备17045010号-1|京公网安备 11010502033860号|隐私政策|服务条款
谷歌Playground的账本:做游戏的人付钱,玩游戏的人免费
置顶

谷歌Playground的账本:做游戏的人付钱,玩游戏的人免费

//

24小时热榜

从实验到实效:澳洲律所 Gilbert + Tobin 的 AI 转型之路
TOP1

从实验到实效:澳洲律所 Gilbert + Tobin 的 AI 转型之路

Google 向云用户开放 Gemini 核心训练系统 Pathways
TOP2

Google 向云用户开放 Gemini 核心训练系统 Pathways

3

文件显示月之暗面曾租用英伟达B300服务器

8小时前
文件显示月之暗面曾租用英伟达B300服务器
4

Google 发布旗舰模型 Gemini 4 Carbon,定价极具竞争力

9小时前
Google 发布旗舰模型 Gemini 4 Carbon,定价极具竞争力
5

Yandex 遭无人机袭击:云服务 2.84% 的客户数据永久丢失

9小时前
Yandex 遭无人机袭击:云服务 2.84% 的客户数据永久丢失
6

英伟达 CEO 黄仁勋卷入间谍传闻,美国国会要求闭门听证

9小时前
英伟达 CEO 黄仁勋卷入间谍传闻,美国国会要求闭门听证
7

Anthropic 启动 IPO 路演:定价 70 至 78 美元

13小时前
Anthropic 启动 IPO 路演:定价 70 至 78 美元
8

OpenAI联合Upwork发布报告:AI如何重塑自由职业市场

21小时前
OpenAI联合Upwork发布报告:AI如何重塑自由职业市场
热门标签
大模型AgentRAG微调私有化部署Prompt EngineeringChatGPTClaudeDeepSeek智能客服知识管理内容生成代码辅助数据分析金融零售制造医疗教育AI 战略数字化转型ROI 分析OpenAIAnthropicGoogle

关注公众号

前途科技微信公众号

扫码关注,获取最新 AI 资讯

免费获取 AI 落地指南

3 步完成企业诊断,获取专属转型建议

已有 200+ 企业完成诊断