谷歌DeepMind Genie 4世界模型震撼发布,实时交互与音频同步引领新潮流
2026-10-28 11:24:01未知 作者:徽声在线
10月28日最新资讯,根据徽声在线从海外渠道获得的消息,谷歌旗下DeepMind团队于本周二正式对外发布了其新一代世界模型——Genie 4,并同步开启了研究预览模式。这一创新模型标志着虚拟世界生成技术迈入了一个全新阶段,它不仅能够创造出迄今为止拟真度最高的交互式虚拟环境,还允许用户在模拟运行过程中动态输入提示词,实时调整场景细节。更为引人注目的是,Genie 4还具备了同步生成与虚拟世界完美匹配的音频能力,包括但不限于背景音乐、环境音效以及交互式对话,为用户带来了沉浸式的体验。
回溯至Genie 4发布前的几个月,AI视频领域的初创公司Runway已经推出了其第二款世界模型GWM Worlds 2,该模型同样支持交互式游玩,并能根据用户操作即时生成音频反馈。与此同时,世界模型这一细分领域正经历着前所未有的行业整合浪潮:由知名学者李飞飞创立的World Labs即将被AMD纳入麾下;亚马逊则正在与Decart进行收购谈判;而电动汽车制造商Rivian则完成了对Third Dimension的收购,旨在利用其自研仿真工具加速自动驾驶技术的测试进程。
谷歌此次推出Genie 4,无疑是在这一竞争白热化的赛道中巩固其领先地位的又一重要举措。
回溯历史,谷歌早在一年多前就以研究预览的形式推出了前代模型Genie 3。相较于前代,Genie 4在画面拟真度上实现了质的飞跃,新增了音频生成功能,并支持用户进行自由编辑,如实时切换天气状况、调整镜头视角,或在场景中添加新的人物和物品。其最长可维持两分钟连贯统一的场景画面,时长是Genie 3的两倍之多;同时,物理仿真效果也更为出色,虚拟人物的表现也更加接近真实人类。此外,Genie 4还引入了更先进的物理引擎,使得虚拟环境中的物体交互更加自然流畅。
值得一提的是,谷歌的大模型Gemini与Genie 4之间实现了更深层次的联动。在这一架构中,Gemini扮演着“导演”的角色,负责规划步骤、校验画面质量,而Genie 4则专注于生成高质量的视觉内容。在一项与Gemini Robotics紧密相关的研究实验中,Gemini 4 Argon模型将复杂任务拆解为一系列分步指令,并交由Genie 4进行实时仿真。这一实验不仅验证了虚拟仿真环境在机器人方案测试中的可行性,更为未来机器人技术的落地应用提供了有力支持。
谷歌研究总监特贾斯・库尔卡尼在简报会上展望未来时表示:“随着技术的不断进步,我们将见证越来越多混合式世界模型的出现。在这些模型中,Gemini将负责编写代码、生成文本等高级任务,而Genie则实时读取这些指令,并在不同抽象层级上仿真现实世界,从而为用户提供更加丰富多样的交互体验。”
与其他世界模型类似,Genie 4的商业化应用前景同样广阔,涵盖了游戏开发、交互式教学以及机器人研发等多个领域。以交互式学习为例,用户可以身临其境地进入一幅描绘历史事件的画作中,与画中人物进行对话,从而更加深入地了解这段历史背景。这种创新的学习方式不仅提高了学习的趣味性,还显著提升了学习效果。
而首批受邀测试谷歌前沿产品的“可信测试用户”更是挖掘出了Genie 4的一个全新潜在用途——电影前期样片的快速原型制作。这一发现无疑为电影制作行业带来了新的可能性,有望缩短电影制作周期,降低制作成本。
谷歌DeepMind工程师迭戈・里瓦斯在发布会中进一步阐述道:“实时渲染技术在需要保持创作连贯性的场景中具有无可比拟的优势。无论是在创意构思阶段还是分镜脚本阶段,Genie 4都能迅速迸发出创意火花,为创作者提供源源不断的灵感支持。”
除了Genie 4之外,谷歌还拥有另一款备受影视创作者青睐的AI视频生成模型Veo。该模型能够根据文本、图片或视频指令生成高清短片,并自动配上同步音频,为影视创作提供了极大的便利。
里瓦斯还透露,未来用户可以依托多模态大模型Gemini Omni(该模型支持根据图片、音频、文字生成视频)将Genie 4生成的仿真原型转化为正式的创作素材。然而,他也坦诚地表示,这套完整能力的落地还需要一段时间的技术积累和优化。
在整场简报中,里瓦斯多次强调Genie 4目前仍处于早期研发阶段,其最终完整产品形态尚未确定。同时,他也坦言模型目前还存在一些短板和挑战,如仿真时间越长画面细节和物体越容易出现畸变偏移等问题;以及如何保证音频准确性和场景内文字清晰可读等难题仍有待攻克。
目前,Genie 4仅面向可信测试者开放研究预览功能。预计在未来几周内,该模型将逐步开放给Google AI Ultra订阅用户(在Project Genie工具内使用)以及Gemini API、Google AI Studio的早期合作开发者进行体验和测试。

