腾讯混元发布 Hy-Nomas 技术报告并开源 Hy-Nomas-Bench
推荐理由原文给出了技术报告、开源基准和与 Genie 4 的对比视频,读者可据此判断该世界模型的可复现程度。
关注视频生成、理解、编辑与时序建模。
推荐理由原文给出了技术报告、开源基准和与 Genie 4 的对比视频,读者可据此判断该世界模型的可复现程度。
Google DeepMind 发布世界模型 Genie 4,可实时生成可交互世界,并首次原生生成环境音与角色对话。模型基于 Gemini 系列能力,由 Gemini 3.8 Flash 在循环中拆解目标、检查画面以维持多步事件的因果连贯,Gemini 4 Argon 也已用于与 Gemini Robotics 联合模拟任务。官方称其仍属早期实验模型,长时运行下物体恒常性与复杂物理交互仍会漂移,生成内容均带 SynthID 水印,目前先向可信测试者开放预览。

推荐理由官方披露了原生音频、实时语言操控与 Gemini 引导推理三项能力,可据此判断世界模型在机器人与内容预演中的位置。
推荐理由Higgsfield 公布 B 轮扩展融资与年化收入破 10 亿美元等数据,可观察 AI 视频公司的商业化进展。
推荐理由Kling 4.0 在 fal 上线并开放 API,原文列出时长、参考素材和关键帧控制等具体能力变化。
推荐理由Kling 4.0 在 idea.ai 上线,单条提示词可生成 30 秒场景并保持角色一致,读者可据此判断视频生成工作流的变化。
推荐理由原文给出了生成速度与第三方 Elo 的对照数据,读者可据此判断视频模型在速度与质量上的取舍。
推荐理由原文列出了 Kling 4.0 在 Higgsfield 上线后的几项具体能力变化,读者可据此判断视频生成工作流会受何影响。
推荐理由官方给出 FLUX 3 Max 在第三方人类偏好评测中的 Elo 分数与生成速度,可据此判断其在前沿图生视频模型中的位置。
推荐理由FastVideo 开源了 MiniMax FastH3 Omni 并附训练代码,读者可据此了解实时视频生成在 Blackwell 上的加速与量化方案。
NVIDIA 发布 Cosmos3-H-Dreams,基于 160 亿参数的 Cosmos3-H-Embodied-Nano 专门化,用于胆囊切除术的动作条件视频生成。模型使用 28 个动作维度、832 x 480 视频和 10 Hz 动作对齐训练,通过蒸馏得到四步与两步两个学生检查点,两步版本单独训练,推理更快但画质更低。官方同时提供 FlashDreams 流式运行时和适配自有数据与控制器的方法,并说明该模型是研究用模拟器,并非经过验证的临床系统。
推荐理由原文给出了从教师模型蒸馏到四步与两步学生模型的完整路径,读者可据此了解实时手术视频生成如何兼顾延迟与画质。
推荐理由这条内容给出了开源实时渲染器的输入类型、帧率和单卡部署规格,便于读者判断其可用性。
推荐理由原文给出 FLUX 3 Max 的生成速度与图生视频排名,可据此判断定制版模型在视频生成上的取舍。
推荐理由fal 与 Black Forest Labs 合作推出视频模型,并给出延迟与画质基准位置,可对照现有前沿视频模型的速度与成本。
推荐理由Viggle AI 把世界模型从像素空间搬到 3D 空间,读者可据此了解这条技术路线与主流做法的差异。
推荐理由第三方基准机构给出 FLUX 3 Max 在文生视频与图生视频榜单上的具体名次和价格对比,可据此判断其定位。
推荐理由官方给出 Kling 4.0 的可用入口与后续路线,读者可据此判断视频创作工作流会怎样接入。
Google Gemini 宣布 Gemini 4 Argon 能把视频或摄像头画面重新想象成可演奏的合成器。用户可在 Canvas 中快速搭建交互式音频应用,设定氛围后把摄像头当作乐器来演奏。
推荐理由Google Gemini 官方展示了在 Canvas 中把摄像头画面变成可演奏合成器的玩法,读者可了解其多模态交互的新用法。
World Labs 推出 Marble,这是其 3D 世界生成模型的有限访问 beta 预览,用户可在 marble.worldlabs.ai 查看和创建 3D 世界。给定图像或文本提示,模型可生成可无限探索、无变形、无不一致的 3D 世界,相比此前结果更大、风格更多样、3D 几何更干净。用户可将生成的世界导出为 Gaussian splats,并借助开源渲染库 Spark 集成到 Three.js 中,在桌面、笔记本、移动设备和 VR 头显上渲染。
推荐理由World Labs 首次开放 3D 世界生成模型的有限访问,读者可了解其几何质量与导出方式的变化。
World Labs 发布 RTFM(Real-Time Frame Model)研究预览,这是一个随交互实时生成视频的生成式世界模型,可用于探索生成的 3D 世界和真实场景,并已在浏览器中开放体验。RTFM 基于自回归扩散 Transformer,不依赖显式 3D 表示,而是把输入帧转为 KV cache 作为隐式世界表示,并通过带位姿帧的空间记忆和 context juggling 实现长时间交互下的持久性。官方称其仅用单张 H100 GPU 即可达到交互级帧率,并预期更大模型随推理预算提升继续改进。
推荐理由World Labs 公开 RTFM 的技术路线与单卡 H100 实时推理目标,可了解生成式世界模型如何绕开显式 3D 表示。
World Labs 宣布其多模态世界模型 Marble 即日起向所有人开放,此前仅面向少量 beta 用户。Marble 支持从文本、图像、视频或粗略 3D 布局生成 3D 世界,并可交互式编辑、扩展和组合,生成结果可导出为 Gaussian splats、网格或视频。同时推出 Marble Labs 创作社区,提供案例研究、教程和文档。
推荐理由World Labs 公布 Marble 的多模态输入、编辑与导出能力,读者可据此判断 3D 世界生成的工作流变化。