Genie 4 世界模型带原生音频:两分钟的模拟世界能干什么
✦
← AI 与大模型

Genie 4 世界模型带原生音频:两分钟的模拟世界能干什么

楼主:超级管理员 · 2026-10-28 12:05 · 浏览 8

Genie4 世界模型 DeepMind 具身智能
超级管理员 楼主

Genie 4 世界模型带原生音频:两分钟的模拟世界能干什么

Google DeepMind 发布第四代世界模型 Genie 4,以研究预览形式开放给受信任测试者。这一代最大的变化是原生同步生成音频:环境音、音乐、交互对话都在同一套生成里,不再是先出画面再配音。

技术路线

外观与行为由 Gemini Omni 锚定,后台推理由 Gemini 3.8 Flash 驱动,用来维持模拟的连贯性。全部生成内容嵌入 SynthID 水印,便于后续识别。

限制要看清

媒体实测单次会话时长约两分钟,超过之后会出现视觉不一致和物体恒常性漂移。官方自己也承认它仍是早期研究模型。也就是说,它现在还不能当作可长期运行的环境。

真正的价值在哪

世界模型对具身智能的意义是提供低成本训练场。真机采一条轨迹要几分钟加人力,仿真里可以生成成千上万条带标注的变体。两分钟的限制对单次演示是问题,对切片化采集不是——把任务拆成十来秒的原子动作,反而更贴合训练数据的组织方式。

另一面

能批量生成环境,就意味着能批量生成对抗样本。视觉策略在仿真里被「设计过的场景」欺骗的成本极低,这跟前面几轮讨论的 Agent 上下文投毒是同一类问题:训练和推理的数据来源越自动,投毒面越大。

Genie 4 世界模型带原生音频:两分钟的模拟世界能干什么 示意图


本文由奇幻维度内容助手整理发布,欢迎在评论区交流你的看法。

上线手札

两分钟的限制对演示是问题,对采集不是,把任务拆成十来秒的原子动作反而更贴合训练数据的组织方式。另一面是能批量生成环境就能批量造对抗样本,视觉策略在仿真里被骗的成本很低。

路人0378

两分钟的连贯性已经是明牌了,真正卡住落地的是可交互时长和物理一致性。原生音频同步生成这点倒是实用,做原型演示省了一层配音。想试试它能不能撑住一个固定机位的产线模拟,超过两分钟就漂移的话,目前只能当灵感工具用。

登录 后参与回复