谷歌Genie 4世界模型来了
谷歌DeepMind今天放出了Genie 4,定位是新一代世界模型,主打实时交互模拟,而且这次把原生音频也做进去了。我第一反应是:世界模型这条线终于开始从「能生成」往「能玩」走了,实时可交互才是分水岭。
官方说法是它建立在Gemini家族能力之上,Gemini Omni负责把模拟锚定在真实世界的外观和行为上,其他Gemini模型提供复杂推理,用来维持模拟的连贯性和连续性。翻译成人话就是:画面不再只是好看,而是尽量不崩、不跳、不前后矛盾,这对做机器人和智能体训练环境的人来说才是刚需。交互方式也挺直接,用自然语言就能让事件动起来、实时操控场景,比如移动镜头、改天气、加新角色。每个世界还会即时生成原生音频,包括环境音、音乐和交互式对话。我觉得音频这块被低估了,沉浸感一半靠声音,少了它模拟总像静音demo。节奏上目前只对一小批受信任测试者开放,之后会陆续给Google AI Ultra订阅用户在Project Genie里用,Gemini API和早期合作方也会跟进。我的判断是短期别指望普通开发者随便调,先看它能不能在长时交互里稳住一致性,这比单帧画质更能决定落地价值。对出海做内容、游戏和影视预演的朋友,这类工具迟早会改写分镜和原型流程,但现阶段更适合当概念验证,不要急着押生产管线。真正值得盯的是它开放API后的定价和延迟,那才决定谁能先用起来。
官方说法是它建立在Gemini家族能力之上,Gemini Omni负责把模拟锚定在真实世界的外观和行为上,其他Gemini模型提供复杂推理,用来维持模拟的连贯性和连续性。翻译成人话就是:画面不再只是好看,而是尽量不崩、不跳、不前后矛盾,这对做机器人和智能体训练环境的人来说才是刚需。交互方式也挺直接,用自然语言就能让事件动起来、实时操控场景,比如移动镜头、改天气、加新角色。每个世界还会即时生成原生音频,包括环境音、音乐和交互式对话。我觉得音频这块被低估了,沉浸感一半靠声音,少了它模拟总像静音demo。节奏上目前只对一小批受信任测试者开放,之后会陆续给Google AI Ultra订阅用户在Project Genie里用,Gemini API和早期合作方也会跟进。我的判断是短期别指望普通开发者随便调,先看它能不能在长时交互里稳住一致性,这比单帧画质更能决定落地价值。对出海做内容、游戏和影视预演的朋友,这类工具迟早会改写分镜和原型流程,但现阶段更适合当概念验证,不要急着押生产管线。真正值得盯的是它开放API后的定价和延迟,那才决定谁能先用起来。
评论
登录后即可发表评论
参与讨论,和出海同行交流想法与经验
还没有评论,来抢沙发吧
说说你的看法,第一条评论最显眼