Google发布Genie 4世界模型:新增音频、更真实世界与实时操控
The Block
1小时前
Ai 焦点
Google DeepMind周二以研究预览形式发布最新世界模型Genie 4,支持更逼真的交互式模拟、实时音频生成和自由形式编辑,并已向可信测试者开放,未来几周将扩展给部分Google AI用户。
有帮助
No.帮助

Google DeepMind周二以研究预览形式发布了其最新世界模型Genie 4。该模型生成了迄今最逼真、最具互动性的世界,允许用户在模拟过程中输入提示来改变场景。它还可以生成与模拟世界匹配的实时音频,包括音乐、环境噪音和互动对话。

在Genie 4发布前几个月,AI视频初创公司Runway刚发布了其第二款世界模型GWM Worlds 2——一款可玩、能动态响应用户输入并包含音频生成的模型。与此同时,世界模型行业正开始整合。李飞飞的World Labs正被AMD收购,亚马逊正洽谈收购Decart,Rivian则刚刚收购Third Dimension,以将模拟能力引入内部用于自动驾驶测试。

Genie 4是Google在拥挤赛道中保持领先的最新举措。

Google在大约一年多前以研究预览形式发布了前代产品Genie 3。除了远比前代更逼真并具备音频功能外,Genie 4还允许自由形式编辑,例如实时改变天气或摄像机角度,或添加新人物或物体。它可以将一致场景维持长达两分钟,是前代上限的两倍,并提供更好的物理效果和更接近人类的角色。

Google的AI模型Gemini也与Genie 4更紧密地集成,充当“导演”,负责规划步骤并检查画面,而Genie负责生成视觉内容。在与Gemini Robotics相关的一项研究实验中,Gemini 4 Argon模型将任务分解为步骤,由Genie 4实时模拟。该实验展示了一种可能的方式:在真实世界发生之前,先在模拟中测试机器人场景。

“未来我们将越来越多地看到这种混合世界模型,即Gemini编写代码和文本,Genie实时接收并模拟不同抽象层次的现实,”Google研究总监Tejas Kulkarni在简报会上表示。

与其他世界模型一样,其宣传的商业用例包括游戏、互动学习和机器人。互动学习的一个推测性例子是:进入一幅历史场景的画作,并与画中人物谈论所描绘的事件。

但“可信测试者”(首批获得Google尖端产品访问权限的人)正指向一个可能的新用途:电影原型制作。

“实时性在创意领域保持心流状态非常有用的地方最有价值,”Google DeepMind工程师Diego Rivas在新闻简报会上表示。“例如,在构思阶段、分镜阶段——任何时候你需要快速构思。”

Google还提供Veo,这是其AI视频生成模型,可根据文本、图像或视频提示制作带内置同步音频的高清片段。

Rivas补充说,用户最终可能依赖Gemini Omni,将这些原型转化为创意资产。不过他表示,这些能力仍有一段距离。

在整个简报会中,Rivas强调Genie 4仍处于早期阶段,尚不清楚端到端产品体验会是什么样。团队也承认Genie 4仍有差距:模拟运行时间越长,细节和物体可能发生漂移;他们也还没完全弄清楚如何确保音频准确以及世界内文字清晰可读。

Genie 4目前以研究预览形式向可信测试者开放。未来几周,该模型将向Google AI Ultra订阅用户开放,用于Project Genie,并向Gemini API和Google AI Studio的早期访问合作伙伴开放。

打赏
$0
点赞
0
收藏
0
浏览量 30
WalletJYS提醒,请广大读者理性看待区块链,切实提高风险意识,警惕各类虚拟代币发行与炒作, 站内所有内容仅系市场信息或相关方观点,不构成任何形式投资建议。如发现站内内容含敏感信息,可点击“举报”,我们会及时处理。
提交
评论 0
最热
最新
还没有人评论哦~快抢沙发吧!
相关阅读
苹果 iPhone Duo 因屏幕裂痕遭网友群嘲
苹果备受期待的折叠手机 iPhone Duo 刚上市就有早期用户反映屏幕折痕处出现裂痕,部分机型还伴随内屏一侧出现亮线。苹果表示受影响的是“小部分”设备,并建议用户联系 AppleCare 更换。与此同时,社交媒体和加密圈也围绕这款手机制作了大量梗图。
Businessinsider
·2026-10-28 07:51:52
8
SK海力士第三季度利润大幅超预期 受AI存储需求推动
韩国芯片制造商SK海力士周三公布第三季度业绩,营收和营业利润均大幅超出LSEG SmartEstimates预期。公司称,作为英伟达高带宽存储器HBM芯片的重要供应商,正受益于全球AI基础设施建设;公司还在8月宣布了4000亿韩元的回购并注销计划,并上调股东回报目标。
CNBC
·2026-10-28 07:51:50
13
CADC Reserve Trust称已收到最终招股说明书收据并可通过SEDAR+查阅
CADC Reserve Trust表示,安大略省证券委员会已就其最终招股说明书出具收据,CADC这一与加元挂钩的区块链代币可通过授权参与方在加拿大各地发行。
PR Newswire
·2026-10-28 07:51:48
14
父母起诉 OpenAI,称 GPT-4o 诱导女儿停用癫痫药物
据《纽约时报》报道,31 岁的亚马逊软件工程师 Bowen Wan 去世后,她的父母起诉 OpenAI,称 ChatGPT 在她停用癫痫药物的过程中提供了建议,并让她向医生隐瞒用药调整。OpenAI 表示案件“令人非常心碎”,但涉及的是较旧版本的 ChatGPT。
TechCrunch
·2026-10-28 07:41:19
9
10月28日美股成交额前20:科技股多数上涨 波音财报不及预期跌超10%
周二美股成交额前20中,科技股多数上涨,Meta、英伟达、特斯拉、AMD、博通等均有相关消息;波音因第三季度亏损超预期大跌10.69%。
The Block
·2026-10-28 07:41:16
8
查看更多