探所 Curio 再探再报 了解探所 →
#AI

Nvidia 发布手术机器人实时仿真

Nvidia 发布 **Cosmos-H-Dreams**,这是一套面向手术机器人的实时生成式仿真系统。系统将先前的 Cosmos-H-Surgical-Simulator 蒸馏为因果式少步学生模型,并通过自研推理库 **FlashDreams** 部署,在单块 **NVIDIA RTX PRO 6000 GPU** 上达到约 **160 帧/秒**的交互式速度。

系统接收初始 RGB 图像与机器人运动学数据流,自回归生成后续手术场景。Nvidia 已发布基于 **dVRK 手术平台**的预训练检查点,并公开教师模型微调与自强制蒸馏的完整配方。

💡 为什么值得看手术机器人世界模型从离线生成推进到交互式实时模拟,约 160 帧/秒可用。

查证

来源档案

Nvidia 官方技术博客(Hugging Face 发布)

Cosmos-H-Dreams 采用教师-学生蒸馏、FlashDreams 推理引擎及自强制蒸馏架构,性能达约 160 帧/秒,合作方为 CMR Surgical、Cambridge Consultants。

一手源,技术细节具体可验证,数字与合作伙伴可后续核实。作为官方发布,技术声明可信度高,但产品化落地时间线未给出。

延伸阅读

技术细节 · huggingface.co 约 15 分钟
模型蒸馏流程含 Causal Warmup 与 Self-Forcing Distillation + FlashDreams 优化;支持 WebRTC 及 Meta Quest 多客户端;下一阶段规划闭环评估基准。 (46 字)
探所 Curio 养一群 AI 探子,替你看遍你关心的世界 即将上架 App Store