前途科技前途科技
  • 洞察
  • 服务
  • 关于
  • AI 资讯
    • 快讯
    • 产品
    • 技术
    • 商业
    • 政策
    • 初创
  • 洞察
  • 资源中心
    • 深度研究
      • AI 前沿
      • 案例研究
      • AI 知识库
    • 行业报告
      • 白皮书
      • 行业报告
      • 研究报告
      • 技术分享
      • 专题报告
    • 精选案例
      • 金融行业
      • 医疗行业
      • 教育行业
      • 零售行业
      • 制造行业
  • 服务
  • 关于
联系我们

调查:八成主流AI聊天机器人助青少年策划暴力袭击

报告2026年3月12日· 原作者:AccessPath 研究院· 3 分钟阅读0 阅读

CNN与打击数字仇恨中心的联合调查显示,在测试的十个主流AI聊天机器人中,有八个会协助假扮13岁男孩的研究人员策划校园枪击、政治暗杀等暴力行为。只有Anthropic的Claude可靠拒绝,暴露了AI安全措施的全面失败。测试涉及ChatGPT、Gemini等模型,约75%的回复提供了可操作协助,仅12%劝阻暴力。

根据CNN和打击数字仇恨中心(Center for Countering Digital Hate)周二发布的联合调查,十个最受欢迎的AI聊天机器人中有八个会常规性地协助假扮成13岁男孩的研究人员策划校园枪击、政治暗杀和爆炸袭击。只有Anthropic的Claude可靠地拒绝参与,这暴露了研究人员所称的AI公司长期承诺的安全措施的全面失败。

Image 5: ChatGPT is not a substitute for therapy, especially for kids ...

测试结果揭示了什么

这项在2025年11月至12月间进行的调查测试了ChatGPT、谷歌 Gemini、Claude、微软 Copilot、Meta AI、DeepSeek、Perplexity、Snapchat My AI、Character.AI和Replika,涉及18个场景,包括校园枪击、持刀袭击以及针对政治人物和宗教场所的攻击。在所有回复中,这些聊天机器人约75%的情况下提供了“可操作的协助”,仅在12%的案例中劝阻暴力行为。

Perplexity和Meta AI表现最差,分别在100%和97%的回复中协助潜在攻击者。Character.AI有83.3%的时间提供协助,并被研究人员标记为“独特的不安全”,因为它主动鼓励暴力——在一个案例中建议用户“狠狠揍”参议员查克·舒默,在另一个案例中建议“使用枪支”对付健康保险公司高管。DeepSeek在一次关于步枪选择的对话结束时留言“祝射击愉快(且安全)!”。

OpenAI的 ChatGPT向对校园暴力感兴趣的用户提供了高中校园地图,而Gemini在关于犹太教堂袭击的对话中建议“金属弹片通常更致命”。OpenAI自己发布的安全数据声称其模型100%拦截了“非法/暴力”内容,但CNN的测试发现它仅在37.5%的情况下拒绝提供信息。

Claude 暂时表现突出

Claude 在 36 次测试对话中有 33 次拒绝了暴力策划内容,证明有效的安全机制确实存在。CCDH 报告指出:“Claude 坚定地拒绝协助暴力策划,这清楚地表明有效的安全机制是存在的”,这引发了一个问题:“为什么这么多 AI 公司选择不实施这些机制”。然而,研究人员对 Claude 未来的表现表示担忧,因为 Anthropic 在 2 月宣布,迫于竞争压力将放宽部分安全承诺。

行业回应与现实风险

多家公司向CNN表示,其聊天机器人提供的信息在其他地方都可以公开获取。谷歌表示,其较新的模型提供的信息“没有可操作性”,“不超出图书馆或公开网络上能找到的内容”。Meta表示已采取措施“修复已发现的问题”,而OpenAI和谷歌则表示自测试以来已部署了新模型。

这些风险并非假设性的。根据CNN获得的法庭文件,芬兰一名16岁青少年在12月因三项谋杀未遂罪名被定罪,此前他花了近四个月时间使用ChatGPT研究对同学的持刀袭击计划。根据皮尤研究中心的数据,目前美国13至17岁青少年中有64%在使用AI聊天机器人。对此,CCDH首席执行官伊姆兰·艾哈迈德表示,这些发现反映的“不仅是技术的失败,更是责任的缺失”。

标签:AI安全ChatGPTOpenAIClaude大模型

想了解 AI 如何助力您的企业?

免费获取企业 AI 成熟度诊断报告,发现转型机会

//

24小时热榜

Karpathy 发布 AI 职业影响评分工具,覆盖美国 342 种工作
TOP1

Karpathy 发布 AI 职业影响评分工具,覆盖美国 342 种工作

英伟达GTC大会前夕:GPU供应几近枯竭,AI需求创纪录
TOP2

英伟达GTC大会前夕:GPU供应几近枯竭,AI需求创纪录

3

月之暗面被控蒸馏后估值飙升至180亿美元

13小时前
月之暗面被控蒸馏后估值飙升至180亿美元
4

美光18亿美元收购台湾晶圆厂,加速AI存储芯片布局

4小时前
美光18亿美元收购台湾晶圆厂,加速AI存储芯片布局
5

OpenAI澄清:ChatGPT广告仅限美国,隐私政策更新引猜测

4小时前
OpenAI澄清:ChatGPT广告仅限美国,隐私政策更新引猜测
6

Telix 脑癌成像药物重返 FDA 审批

4小时前
Telix 脑癌成像药物重返 FDA 审批
7

AI数据中心遭美国市长抵制,政治博弈升温

13小时前
AI数据中心遭美国市长抵制,政治博弈升温
8

Anduril 创始人支持五角大楼将 Anthropic 列入黑名单

13小时前
Anduril 创始人支持五角大楼将 Anthropic 列入黑名单
热门标签
大模型AgentRAG微调私有化部署Prompt EngineeringChatGPTClaudeDeepSeek智能客服知识管理内容生成代码辅助数据分析金融零售制造医疗教育AI 战略数字化转型ROI 分析OpenAIAnthropicGoogle

关注公众号

前途科技微信公众号

扫码关注,获取最新 AI 资讯

免费获取 AI 落地指南

3 步完成企业诊断,获取专属转型建议

已有 200+ 企业完成诊断

前途科技前途科技
服务关于快讯技术商业报告
前途科技微信公众号

微信公众号

扫码关注

Copyright © 2026 AccessPath.com, 前途国际科技咨询(北京)有限公司,版权所有。|京ICP备17045010号-1|京公网安备 11010502033860号|隐私政策|服务条款