先了解这件事
AI 综述
韩国科学技术院(KAIST)与Google DeepMind研究人员提出4D新视角合成模型FL4N,可根据单目视频重建动态场景,并实时渲染不同视角与时间点的画面。相关论文已发布至arXiv,代码及模型权重同步开源。FL4N采用前馈式潜在空间建模,基于预训练静态场景模型引入轻量级动态编码器,通过时间残差学习物体运动,减少对复杂三维运动标注的依赖。在NVIDIA Dynamic Scenes、N3DV及Kubric4D数据集上,其多项图像质量指标优于所比较的4D Gaussian方法,有望用于XR内容制作、沉浸式视频及动态数字孪生。
AI 根据公开报道生成
最新进展 · 正式报道
KAIST与Google DeepMind开源FL4N:单目视频实时重建4D动态场景事件进展
1 个已确认进展
报道与讨论时间线
按时间查看正式报道与传播讨论;两类内容的证据等级保持独立。
10月28日
VR陀螺
KAIST与Google DeepMind开源FL4N:单目视频实时重建4D动态场景
韩国科学技术院(KAIST)与Google DeepMind联合提出4D新视角合成模型FL4N,可根据单目视频重建动态场景并实时渲染不同视角与时间点的画面,论文已发布至arXiv,代码及模型权重同步开源。FL4N采用前馈式潜在空间建模,基于预训练静态场景模型引入轻量级动态编码器,通过时间残差学习物体运动,减少对复杂三维运动标注的依赖。在NVIDIA Dynamic Scenes、N3DV及Kubric4D数据集上,其多项图像质量指标优于所比较的4D Gaussian方法,有望用于XR内容制作、沉浸式视频及动态数字孪生。