给它一张静态照片,几秒钟后会发生什么? 你直接走进了这张照片里。 不是看一段几秒钟的固定视频。
给它一张静态照片,几秒钟后会发生什么? 你直接走进了这张照片里。 不是看一段几秒钟的固定视频。 这是一个带着环境音、能推拉镜头、能操控角色在里面实时漫游的世界。
这是 DeepMind 公布的交互世界模型 Genie 4。 官方目前给出的还只是技术演示,但思路已经跳出了传统的视频生成。 以前的模型再逼真,吐出来的也是一段定死的画面,你只能当观众。 Genie 4 解决的是实时物理交互。
给一段描述或者一张图,几秒钟后你就能操控角色身处其中。 镜头的视角、场景的细节,每一步都实时受你掌控。 你只要继续给提示,它就在后台实时计算接下来该发生什么。 探索城堡时,身边的同伴会当场大喊那是陷阱。 连周围的环境音,都在跟着你的动作与画面实时同步。
他们直接把这套世界模型,做成了机器人的虚拟练兵场。 在现实里试错,机器人要承担物理损耗和环境风险。 在虚拟世界里,却能让机器人把各种操作任务提前演练无数遍。 等在数字空间里把技能练扎实了,再让它们到物理世界里去干活。
我们在虚拟世界里漫游探索。 现实世界里的机器人,已经在里面悄悄把活给学会了。
翻译视频 / X 同步发布
相关 / RELATED
JSON- M科技视频生成模型都是只会生搬硬套像素的“傻瓜”?最近这个流行说法被新论文直接打脸了。 有人断言,只有像 V-JEPA 这样的…
- M科技沃顿商学院教授 Ethan Mollick 转发了一条视频测试,在硅谷技术圈掀起轩然大波
- M科技你的梦境,很快就能被“播放”出来了。 科幻正在变成现实。 DeepMind 创始人 Demis Hassabis 最近在…
- M科技AI 视频要进专业剧组,不能只靠嘴说。 导演需要绝对控制,不能跟 AI 玩盲盒。 一种全新的 AI 电影工作流诞生了。…
- M科技没改一行权重,AI通关25款游戏,动作比人少了一半多。 这是麻省理工团队刚公布的一组测试结果。 用的模型就是大家平时用的…
近期实时流信号 / STREAM SIGNALS
返回实时流 →首发与规范引用:墓碑科技 MUBEITECH(https://mubeitech.com/p/17833262) · X 同步推文:https://x.com/i/status/2115204698299130283
导出 / EXPORT
订阅 · SUBSCRIBE
每周一封独立、不受审查的科技与 AI 深度评论与信号,周一发出。