←事件详情

热点事件

NVIDIA发布实时手术世界模型Cosmos3-H-Dreams

4 篇正式报道2 条相关讨论6 条事件动态更新于 10月21日 20:39

先了解这件事

AI 综述

NVIDIA于2026年10月20日发布面向机器人手术的实时、动作条件生成式世界模型Cosmos3-H-Dreams,模型权重与配套代码同日公开。该模型基于CMR Surgical Versius系统的临床胆囊切除录像微调,约151.7亿参数,采用Mixture-of-Transformers架构。在单张RTX PRO 6000 GPU上,模型以832 x 480分辨率实现30.0 FPS(四步去噪)和43.2 FPS(两步去噪)。模型卡称其按NVIDIA Open Model License可用于商业或非商业用途,GitHub仓库采用Apache-2.0许可,并附有教师微调与Self-Forcing蒸馏的步骤说明。另有报道称,该模型基于160亿参数的Cosmos3-H-Embodied-Nano开发,训练数据从4792段手术记录中筛选出约526分钟真实手术视频,支持28维动作输入,并开源了4步和2步去噪两个学生模型版本。目前尚无后续发展。

AI 根据公开报道生成

最新进展 · 正式报道

英伟达推出AI手术模拟器Cosmos3-H-Dreams,基于真实胆囊切除术录像训练

事件进展

1 个已确认进展

  1. NVIDIA发布实时手术世界模型Cosmos3-H-Dreams

    来源:Unite.AI

报道与讨论时间线

按时间查看正式报道与传播讨论;两类内容的证据等级保持独立。

10月21日

  1. 财联社

    英伟达推出AI手术模拟器Cosmos3-H-Dreams,基于真实胆囊切除术录像训练

    英伟达发布实时AI手术模拟器Cosmos3-H-Dreams,基于真实胆囊切除术录像训练,可随器械操作实时生成手术画面。该模型以160亿参数基础模型为底座,聚焦抓钳和电钩两件器械,可接收双臂位置、夹钳开合等28项操作信号,在单块RTX PRO 6000 GPU上即可交互运行。英伟达表示它目前只是研究工具,尚未经过患者诊疗验证。

  2. 财联社相关讨论

    财联社 参与了这场讨论

    原帖参与热度计算,不等同于正式报道或已确认事实。

  3. 智东西

    英伟达开源手术世界模型 Cosmos3-H-Dreams,单卡可实时生成手术画面

    英伟达发布并开源实时生成式手术世界模型 Cosmos3-H-Dreams,可根据机器人操作指令实时生成手术画面,模拟器械移动、组织牵拉与形变。该模型基于 160 亿参数的 Cosmos3-H-Embodied-Nano 开发,训练数据从 4792 段手术记录中筛选出约 526 分钟真实手术视频,支持 28 维动作输入。借助教师-学生蒸馏和 FlashDreams 流式推理框架,模型仅需单张 NVIDIA RTX PRO 6000 GPU 即可实时交互,并开源了 4 步和 2 步去噪两个学生模型版本。

  4. VR陀螺

    英伟达发布手术世界模型 Cosmos3-H-Dreams 并开放权重

    英伟达发布面向机器人手术的生成式世界模型 Cosmos3-H-Dreams,同步开放模型权重及配套代码。该模型基于 CMR Surgical 旗下 Versius 系统的临床胆囊切除手术录像与机器人运动学数据微调,支持双臂位姿、钳口开合及电外科能量等 28 维动作输入,可根据初始内窥镜画面和机械臂指令实时生成手术场景视频。官方模型卡显示,在单块 RTX PRO 6000 Blackwell 工作站版 GPU 上以 832×480 分辨率运行时,四步去噪版本为 30 帧/秒,两步版本可达 43.2 帧/秒;配套代码支持动作回放,并可连接 WebXR 兼容头显进行实时交互控制。

  5. VR陀螺相关讨论

    VR陀螺 参与了这场讨论

    原帖参与热度计算,不等同于正式报道或已确认事实。

  6. Unite.AI

    NVIDIA 发布 Cosmos3-H-Dreams 实时手术世界模型

    NVIDIA 于 2026 年 10 月 20 日发布 Cosmos3-H-Dreams,这是一个面向机器人手术的实时、动作条件生成式世界模型,基于 CMR Surgical Versius 系统的临床胆囊切除录像微调,模型权重与配套代码同日公开。模型约 151.7 亿参数,采用 Mixture-of-Transformers 架构,在单张 RTX PRO 6000 GPU 上以 832 x 480 分辨率实现 30.0 FPS(四步去噪)和 43.2 FPS(两步去噪)。模型卡称其按 NVIDIA Open Model License 可用于商业或非商业用途,GitHub 仓库采用 Apache-2.0 许可,并附有教师微调与 Self-Forcing 蒸馏的步骤说明。

本事件热度走势

当前
9
区间峰值
28 10月22日 07:00
近 24 小时变化
-66%

移动指针或点击图表可查看每小时热度;键盘可用左右方向键切换。

关联事件

  1. 相关事件Meta发布开放权重模型Muse Spark Open
  2. 相关事件Reflection发布首个开放权重模型Beam
  3. 相关事件VAST开源实时世界模型EdenLive
  4. 相关事件StepFun 将 Step Code 更新至 v0.1.4