先了解这件事
AI 综述
World Labs 发布了 RTFM(Real-Time Frame Model)研究预览,这是一个随交互实时生成视频的生成式世界模型,可用于探索生成的 3D 世界和真实场景,并已在浏览器中开放体验。据官方介绍,RTFM 基于自回归扩散 Transformer,不依赖显式 3D 表示,而是把输入帧转为 KV cache 作为隐式世界表示,并通过带位姿帧的空间记忆和 context juggling 实现长时间交互下的持久性。官方称其仅用单张 H100 GPU 即可达到交互级帧率,并预期更大模型随推理预算提升继续改进。目前该研究预览已开放浏览器体验,暂无后续发展事实。
AI 根据公开报道生成
最新进展 · 正式报道
World Labs 发布实时生成世界模型 RTFM 研究预览事件进展
1 个已确认进展
- 来源:World Labs Blog
报道与讨论时间线
按时间查看正式报道与传播讨论;两类内容的证据等级保持独立。
10月13日
World Labs Blog一手精选
World Labs 发布实时生成世界模型 RTFM 研究预览
World Labs 发布 RTFM(Real-Time Frame Model)研究预览,这是一个随交互实时生成视频的生成式世界模型,可用于探索生成的 3D 世界和真实场景,并已在浏览器中开放体验。RTFM 基于自回归扩散 Transformer,不依赖显式 3D 表示,而是把输入帧转为 KV cache 作为隐式世界表示,并通过带位姿帧的空间记忆和 context juggling 实现长时间交互下的持久性。官方称其仅用单张 H100 GPU 即可达到交互级帧率,并预期更大模型随推理预算提升继续改进。