前途科技前途科技
  • 服务
  • 关于
  • AI
    • AI 大模型
    • 具身智能
    • 算力芯片
  • 科技
    • 智能终端
    • 软件·互联网
    • 汽车·出行
    • 科学前沿
  • 资源中心
    • 深度研究
      • AI 前沿
      • 教程
      • AI 知识库
      • 案例研究
    • 行业报告
      • 白皮书
      • 行业报告
      • 研究报告
      • 技术分享
      • 专题报告
    • 精选案例
      • 金融行业
      • 医疗行业
      • 教育行业
      • 零售行业
      • 制造行业
  • 服务
  • 关于
联系我们
AI 大模型/10.28 · 00:01/4 MIN/编译自 Google DeepMind/0 阅读

Google DeepMind发布世界模型Genie 4:原生音效与实时互动交互

Google DeepMind正式发布新一代世界模型Genie 4,实现前所未有的逼真度与实时可交互模拟。模型首次实现原生音效生成与对话交互,并依托Gemini的多模态与复杂推理能力,为具身智能与虚拟交互提供全新基础设施。

Google DeepMind发布世界模型Genie 4:原生音效与实时互动交互

Google DeepMind 正式发布新一代世界模型 Genie 4。该模型不仅在画质逼真度和实时交互模拟上实现跨越式升级,更实现了原生多模态支持——在生成画面的同时,能够同步实时生成背景音乐、环境音效以及互动对话。

构建通用人工智能(AGI)的核心挑战之一,在于让 AI 真正理解并模拟物理世界。Genie 4 能够构建安全、无限多样的可交互虚拟仿真环境,为机器人训练、具身智能体研发以及下一代交互体验设计奠定基石。

融合 Gemini 体系,兼顾外观、物理与逻辑推理

Genie 4 深度集成了 Gemini 系列模型的能力体系。其中,Gemini Omni 为模拟场景提供了扎实的现实物理外观与行为特征;其他 Gemini 大语言模型则提供复杂的长链条推理能力,确保模拟世界在动态演进中的因果连续性与前后一致性。

用户只需给出一个起始事件,Genie 4 即可实时推演后续的发展:周围环境如何反馈、环境音效如何变化,以及场景中的角色如何走动、反应与对话。

四大核心能力突破

1. 实时自然语言塑形

在运行过程中,用户可以通过标准键盘操作控制视角,并使用自然语言即时修改场景——例如变换天气、切换镜头机位,或凭空引入全新的人物与物体。系统在接收到提示词(Prompt)后,会自动根据上下文将其无缝融入周围环境;在缺乏外部输入时,Gemini 也会持续监测并修正场景走向,保持演化逻辑连贯。

2. 物理规律与人体动态表现跃升

得益于深入的物理理解,Genie 4 能够逼真模拟空气动力学、碰撞等现实物理现象。最显著的进步在于角色模拟:人物动作自然流畅,能够对周边环境产生有机反馈,并且全程接受用户的实时控制交互。

3. 首次原生融合声音系统

作为 DeepMind 首个原生生成音频的实时世界模型,Genie 4 赋予每个世界专属的环境音效,无论是林间微风还是岸边浪潮均浑然天成。更重要的是实时人声对话系统,虚拟角色可根据突发事件或用户干预即兴开口交流。

4. 引入 Gemini 循环引导机制(In-the-loop)

在推演复杂的长流程任务时,Gemini 3.8 Flash 作为循环内的引导智能体(Agent)发挥关键作用:当 Genie 4 实时渲染世界时,Gemini 负责持续审视当前画面、将整体目标拆解为执行步骤,并根据实时反馈校验步骤完成度。一旦现实出现扰动,Gemini 会动态微调后续计划,确保场景符合严格的因果规律。

在与具身智能项目 Gemini Robotics 的联合测试中,系统已成功让 Apptronik 的 Apollo 人形机器人虚拟分身在世界模型中实时规划并下跳棋。

面向“混合世界模型”与落地探索

DeepMind 团队目前正与创意设计、新闻传播、游戏开发和工程等领域的测试伙伴展开合作:

  • 创意预演:影视创作者可利用其作为实时“草稿箱”,在虚拟片场自由切换机位、布光与调度并多轮试拍。
  • 单图动态化重建:单张静态历史档案照片可在数秒内转化为可漫游、带物理反馈的动态复原空间。
  • 轻量原型开发:游戏开发者无需编写引擎底层代码,即可通过自然语言在数秒内验证游戏机制与美术风格。

团队指出,未来的演进方向在于“混合世界模型”(Hybrid World Models)——将代码与大语言模型的严谨结构化逻辑,同像素级传感器仿真的丰富感知表现力相结合。Gemini 负责顶层结构与叙事时间线,Genie 负责实时渲染视听现实。

局限性与合规安全

Genie 4 目前仍处于实验阶段。在较长时长的连续运行、频繁复杂的提示词修改或大幅度视角位移下,模型仍可能出现物体恒常性衰减(漂移)、微观文字渲染模糊、长程物理一致性不足等限制。

在安全方面,Genie 4 配备了严格的安全防护机制以杜绝有害内容生成。同时,所有由该模型输出的视频与音频均默认嵌入 SynthID 隐形数字水印,以便追溯 AI 生成来源。

目前,Genie 4 已面向受信任测试者开放研究预览(Research Preview),后续将逐步向 Project Genie 的 Google AI Ultra 订阅用户,以及 Gemini API 和 Google AI Studio 的抢先体验开发者开放。

标签:Google DeepMindGemini世界模型具身智能

想了解 AI 如何助力您的企业?

免费获取企业 AI 成熟度诊断报告,发现转型机会

置顶文章

自己动手做模型:ML Intern 低成本定制小模型实战
置顶

自己动手做模型:ML Intern 低成本定制小模型实战

谷歌Playground的账本:做游戏的人付钱,玩游戏的人免费
置顶

谷歌Playground的账本:做游戏的人付钱,玩游戏的人免费

前途科技前途科技
服务关于快讯技术商业报告
微信咨询二维码

咨询微信

扫码添加微信咨询

前途科技微信公众号

微信公众号

扫码关注

Copyright © 2026 AccessPath.com, 前途国际科技咨询(北京)有限公司,版权所有。|京ICP备17045010号-1|京公网安备 11010502033860号|隐私政策|服务条款
微软和Meta收紧Claude:被削掉的是入口,不是模型
置顶

微软和Meta收紧Claude:被削掉的是入口,不是模型

//

24小时热榜

百度开源文心 Unlimited OCR 2,实现任意页数文档解析
TOP1

百度开源文心 Unlimited OCR 2,实现任意页数文档解析

倒卖Token暴利终结,AI中转站迎来大洗牌
TOP2

倒卖Token暴利终结,AI中转站迎来大洗牌

3

OpenAI发布GPT-6.1 Terra,价格腰斩主打电脑操作

2小时前
OpenAI发布GPT-6.1 Terra,价格腰斩主打电脑操作
4

苹果发布M6 MacBook Pro与OLED屏iPad mini

2小时前
苹果发布M6 MacBook Pro与OLED屏iPad mini
5

DeepMind发布Genie 4:支持原生音频与实时互动

2小时前
DeepMind发布Genie 4:支持原生音频与实时互动
6

苹果承诺为折痕开裂的iPhone Duo免费换新

2小时前
苹果承诺为折痕开裂的iPhone Duo免费换新
7

Anthropic深化美政府合作:Claude全线产品提供六折优惠

2小时前
Anthropic深化美政府合作:Claude全线产品提供六折优惠
8

Liquid AI推出LFM3专用多模态模型构建方案

9小时前
热门标签
大模型AgentRAG微调私有化部署Prompt EngineeringChatGPTClaudeDeepSeek智能客服知识管理内容生成代码辅助数据分析金融零售制造医疗教育AI 战略数字化转型ROI 分析OpenAIAnthropicGoogle

关注公众号

前途科技微信公众号

扫码关注,获取最新 AI 资讯

免费获取 AI 落地指南

3 步完成企业诊断,获取专属转型建议

已有 200+ 企业完成诊断