英伟达推出AI手术模拟器Cosmos3-H-Dreams，基于真实胆囊切除术录像训练

财联社财经通讯社

打开APP

英伟达推出AI手术模拟器Cosmos3-H-Dreams 基于真实胆囊切除术录像训练

财联社李莹责编龚闯 2026-10-21 20:17

①英伟达推出基于临床胆囊切除术录像训练的AI手术模拟器Cosmos3-H-Dreams，可随器械操作实时生成手术画面； ②该模型以160亿参数基础模型为底座，单块GPU即可交互运行，主要面向手术机器人训练与测试； ③英伟达表示其仍为研究工具，尚未经过患者诊疗验证。

财联社10月21日讯（编辑李莹）英伟达近日发布基于真实手术录像训练的实时AI手术模拟器Cosmos3-H-Dreams。借助这款新模拟器，手术机器人有望先在虚拟“腹腔”中练习、测试，但其距离临床应用仍需大量验证。

AI芯片巨头英伟达于当地时间10月20日发布手术模拟器Cosmos3-H-Dreams。手术模拟器是在虚拟环境中还原手术场景的工具，可让相关练习和测试无需在真人身上进行。

英伟达在开源AI平台Hugging Face上发布官方博客称，据其所知，这是首款基于临床胆囊切除术录像训练、可根据器械操作实时生成画面的手术模拟器。借助Cosmos 3平台和英伟达流式推理加速库FlashDreams，该模型在单块RTX PRO 6000 GPU上即可交互运行。

来源：英伟达官方博客

模型的训练素材，来自英国手术机器人企业CMR Surgical旗下Versius手术平台的临床手术视频和机械臂运动数据。

这并非英伟达与CMR Surgical首次合作。英伟达与CMR Surgical今年8月联合发表的技术论文显示，英伟达已将前代产品Cosmos-H-Dreams接入Versius手术机器人的医生操控台。

对于下一步，英伟达在博客中提出的研究方向包括将模拟范围扩展至完整手术流程、联合外科医生建立模拟效果的评测基准，以及用其训练可自主完成特定手术步骤的机器人。

不过，英伟达明确表示，上述仍属研究方向，Cosmos3-H-Dreams目前只是研究工具，尚未经过患者诊疗验证。

手术仿真场景升级

该模拟器的前代产品Cosmos-H-Dreams应用于达芬奇研究套件（dVRK），模拟的是背景相对简单的实验台缝合任务。达芬奇研究套件是由退役的达芬奇手术机器人改造而成的开源科研平台，供高校和研究机构开发、测试手术机器人技术。

思路虽然相同，但Cosmos3-H-Dreams的学习素材从实验台上的缝合练习视频换成了真实的腹腔手术录像，模型需要模拟的画面也复杂得多。

英伟达指出，体内器械轻微一动，组织就会被拉伸，反光随之移动，器官可能被遮挡，手术烟雾还会干扰视野。加之模型是逐段接续生成画面的，细小偏差会不断叠加，时间一长，模型生成的器械和器官画面都可能“走样”。

英伟达还强调，画面逼真只是第一关，模拟器还必须准确响应器械的移动、旋转和夹取指令，否则就只是一段逼真的视频，无法充当可交互的模拟环境。

针对这些难题，新模型以一个160亿参数的基础模型为底座，聚焦抓钳和电钩两件常用器械，可接收双臂位置、夹钳开合等28项操作信号。

据英伟达介绍，为兼顾实时性与稳定性，团队先训练一个“教师模型”学习手术画面的变化规律，再将其能力迁移给可实时逐段生成画面的“学生模型”。随后，学生模型以自身生成的画面为基础继续训练，并接受教师模型和一个评判模型的指导，以减少误差的逐步累积。

环球市场情报

人工智能

财联社声明：文章内容仅供参考，不构成投资建议。投资者据此操作，风险自担。

商务合作

热门解锁

【风口研报·公司】稀散金属+SOFC核心部件+半导体设备等全布局，这家平台型企业多个业务均具备竞争力，长期成长空间已打开；另有一家电测仪器龙头已在多领域达到国际先进水平，业绩确定性较强且成长天花板较高

①稀散金属+SOFC核心部件+半导体设备等全布局，这家平台型企业多个业务均具备竞争力，长期成长空间已打开； ②AI算力与本土替代双轮驱动，分析师强call这家电测仪器龙头已在多领域达到国际先进水平，业绩确定性较强且成长天花板较高。

【机构调研】这家公司前瞻布局端侧AI全栈技术，多款搭载公司芯片的终端硬件接入WorkBuddy生态

【电报解读】谷歌云与英伟达宣布Vera Rubin基础设施正式商用！分析师看好Vera Rubin量产将进一步验证光互连在下一代AI数据中心中的价值，这家公司在GTC大会上被列为CPO供应链合作伙伴

谷歌云与英伟达宣布Vera Rubin基础设施正式商用！分析师看好Vera Rubin量产将进一步验证光互连在下一代AI数据中心中的价值，这家公司在英伟达GTC大会上被列为CPO供应链合作伙伴，另一家800G光模块已完成多家大客户认证并批量发货，1.6T预计下半年量产。

推荐理由