AI News

NVIDIA 推出其所稱的首個針對醫療機器人的開源、GPU 加速醫療物理模擬框架,進一步推動把模擬變成受監管臨床環境中 AI 模型與機器人開發的核心部分。這項名為 NVIDIA Medical Physics Simulation framework 的新能力,將隨 NVIDIA Isaac for Healthcare 一同提供,並被定位為在開發者進入高度依賴硬體的實驗室或臨床工作之前,用來訓練、測試與驗證機器人行為的基礎設施。

這項宣布之所以重要,是因為醫療機器人並不像自駕或倉儲自動化那樣擁有大量資料。按照 NVIDIA 的說法,醫療機器人開發者面臨持續的示範資料短缺、長尾且臨床上重要的罕見案例,以及緩慢的原型開發週期,這些都可能把開發時間拉長好幾年。公司認為,更好的模擬是缺少的那一層,可用來生成合成情境、用強化學習訓練策略,並測試在現實世界中很難取得的失敗案例。

NVIDIA 正在釋出什麼

根據 NVIDIA 的 Developer Blog 與企業部落格,這次釋出把物理模擬、解剖建模、感測器模擬與機器人學習整合到 NVIDIA Isaac for Healthcare 之下的模組化堆疊中。NVIDIA 表示,開發者可以用這套框架建立解剖數位孿生、模擬裝置與解剖之間的互動、渲染醫療影像輸出,並在 NVIDIA Isaac Sim 與 NVIDIA Isaac Lab 內以 GPU 規模訓練策略。

公司至少將此產品分成兩個主要元件。Endoluminal Simulation Module 目前已正式可用,而 Surgical Simulation Module 則處於早期存取階段。內腔模組針對在內部腔道中移動的長而柔性的器械,第一個參考工作流程聚焦於在透視導引下的血管內導管導航。

NVIDIA 表示,這套框架是開源的,可獨立使用,也可與其堆疊中的其他部分搭配使用。這種定位對研究人員與受監管醫材團隊很重要,因為他們需要檢視模型行為、重現結果,並記錄模擬如何建立。NVIDIA 的企業部落格明確把開放性描述為有助於證據建構與法規審查,不過這裡除了稱其為開源之外,並未提供授權條款或治理方面的細節。

為什麼醫療機器人需要不同的模擬

NVIDIA 的核心論點是,醫療機器人不能依賴網路規模的資料蒐集。每一次真實世界示範都可能需要專科臨床醫師、昂貴設備、屍體或動物模型的使用機會,或在受限制的實驗室環境中投入時間。即使如此,罕見解剖結構、併發症與失效模式仍常常表現不足。

這不僅會讓監督式學習遇到問題,也會影響泛化能力。NVIDIA 的 Developer Blog 指出,模仿學習往往會在可用資料分佈的邊界趨於停滯,而如果底層模擬器既逼真又夠快,強化學習則有助於探索更廣的狀態空間。從這個角度看,NVIDIA 把模擬定位成訓練基礎設施,而不是單純的視覺化工具。

公司也把這項釋出與開發速度連結起來。傳統醫療機器人計畫仍仰賴台面模型、屍體實作、動物研究與有限的臨床評估。NVIDIA 表示,這些步驟仍然必要,但它們是串行、昂貴且難以 масштабировать 的。如果 GPU 原生模擬迴圈夠可信,團隊就能在消耗實體測試資源之前先評估更多設計與策略。

技術設計:不是只有場景渲染,而是 GPU 原生管線

最有份量的技術細節來自 NVIDIA Developer Blog。文中將 Endoluminal Simulation Module 描述為建立在 NVIDIA Warp 與 Newton Physics 之上的 Python 實作,底層使用 CUDA。像導管這類柔性裝置被建模為 Cosserat rod,這是一種標準的力學表述,用於彎曲、扭轉、拉伸與剪切。

NVIDIA 表示,它不只依賴局部的迭代約束更新,而是把 rod 約束組裝成一個 block-tridiagonal 的 extended position-based dynamics 系統,並使用 Thomas algorithm 求解。目的是有效地把近端控制輸入沿著長器械傳遞,讓遠端尖端即使在長器械模擬中也能快速反應。

在接觸方面,公司說導管與血管的互動是直接在 GPU 上、針對病患特定的三角形網格並行計算,而不是使用另外預先計算的距離場。當前實作支援單向的剛性約束,也就是血管會限制導管,但尚未做到與可變形血管壁的完整雙向耦合。NVIDIA 表示,雙向耦合已規劃在未來版本中推出,這對任何以為這已經是一套完整組織互動堆疊的人來說,是個重要提醒。

另一個實務重點是資料搬移。NVIDIA 表示,Medical Physics Simulation 的設計目標,是讓模擬與學習都留在 GPU 上,以降低 CPU-GPU 傳輸開銷。NVIDIA Warp 的 Torch 互通性也是這項設計的一部分,讓模擬器可接到 NVIDIA Isaac Lab,用於 rollout 管理與強化學習迴圈。對 AI 建構者來說,這很重要,因為模擬瓶頸往往不只來自物理求解器本身,也來自協調、渲染與 tensor 管線。

生成式模擬進入堆疊

除了傳統物理之外,NVIDIA 也把這套框架連結到其生成式世界模型策略。公司表示,Medical Physics Simulation 可與 NVIDIA Cosmos-H 整合,並特別提到 NVIDIA Cosmos-H Dreams 是框架內的即時生成式 AI 物理模擬能力。

按照 NVIDIA 的說法,像接觸、摩擦與運動這類已知規則仍適合由傳統求解器處理,而生成式元件則可建模從程序資料學得的場景動態,並支援合成資料生成、動作條件式影片預測與互動環境。這種混合訊息與 NVIDIA 更廣泛的方向一致:把決定論模擬與學得的世界模型結合,而不是把其中一個視為另一個的完全替代品。

不過,就目前提供的證據而言,多半只是方向性的。NVIDIA 描述了生成層的角色,也點名了正在試用的合作夥伴,但來源並未提供 Cosmos-H Dreams 已準備好可廣泛用於臨床開發的獨立驗證。對開發者來說,短期價值很可能在於工作流程實驗與資料集生成,而不是假設生成式模擬器可以取代所有與物理關鍵相關的驗證。

證據、基準測試與合作夥伴訊號

這則故事中最強的效能主張都來自供應商自身。NVIDIA 的 Developer Blog 指出,該平台已用於 512 個平行環境與 1,500 次訓練迭代的實驗,單一環境物理運算約可達 1,300 Hz、512 個環境的物理運算為 60 Hz,而在 256 x 256 解析度下,完整模擬與渲染迴圈可達每秒 63 張影格。

NVIDIA Blog 還提出更大的基準測試聲稱:8,192 個機器人訓練環境以平行方式執行、並採用 GPU 原生模擬時,訓練時間從超過五小時縮短到不到兩分鐘。公司把這視為擴展能力的證據,但來源並未說明具體任務、硬體配置、基準假設或可重現條件。讀者應把它視為供應商基準,而非中立的產業衡量方式。

NVIDIA 也提到幾個早期使用者與探索型合作夥伴。據稱 CMR Surgical 與 Cambridge Consultants 正使用 NVIDIA Cosmos-H Dreams 進行軟組織手術程序模擬,CMR 並將 Versius Surgical Robotic System 的去識別臨床資料貢獻至 Open-H Embodiment 資料集。Johnson & Johnson MedTech 被描述為使用 Medical Physics Simulation 與一個基於 Cosmos 的模型,為其 MONARCH 泌尿平台建立數位孿生。XCath 正使用這套框架進行血管內自主策略訓練。Inner Logic 用它來做合成資料、裝置力學驗證與 in silico 證據生成。Medtronic Structural Heart 正探索把它用於模擬 X 光感測,以支援導管導航研究。

這些合作夥伴提及顯示了生態系的興趣,但仍是公司自行回報的採用訊號,而非獨立的客戶案例。來源沒有量化部署規模、正式生產使用或結果改善。

這對 AI 建構者與企業團隊意味著什麼

對醫療 AI 建構者來說,這次釋出與其說是新模型,不如說是缺失的基礎設施層。從事導航、內視鏡、導管機器人或手術輔助的團隊,往往有碎片化的流程:一個工具處理解剖、另一個處理力學、還有一個處理影像,另外再有一套獨立的學習堆疊。NVIDIA 正試圖把這些整合成一條以 GPU 為中心、圍繞 NVIDIA Isaac Sim 與 NVIDIA Isaac Lab 構建的工作流程。

如果這套框架如宣稱般運作,它可能降低啟動 RL 或合成資料專案所需的客製化模擬工程量。內腔方向尤其相關,因為導管與導絲工作流程依賴柔性體動力學、影像導引與病患特定解剖結構,而這些都很難在即時環境中一起建模。

對企業買家與平台團隊而言,更大的問題是可靠性與證據。開源有助於可稽核性,但受監管的機器人開發者仍須證明模擬在哪裡可信、在哪裡會失效,以及模擬結果與台面與臨床表現之間有何關聯。已發布模組中的血管互動模型目前仍是單向,這也凸顯了這些模擬器仍是抽象模型,而非最終的安全證明。

競爭層面的含義也很明確。NVIDIA 正把其算力護城河延伸到 Physical AI 的領域專屬模擬。它不只是賣 GPU,而是把 CUDA、NVIDIA Warp、Newton Physics、NVIDIA Isaac for Healthcare 與 NVIDIA Cosmos-H 打包成一套工作流程敘事,讓醫療機器人開發能圍繞其堆疊運作。

接下來要觀察什麼

下一個重要訊號,是第三方研究團隊是否會在 NVIDIA 宣布的合作之外採用 NVIDIA Medical Physics Simulation framework,並發表可重現的結果。比較 sim-to-real 轉移品質、策略穩健性與工作流程效率的獨立論文,會比標題式的基準數字更重要。

第二個訊號是 Surgical Simulation Module 的產品成熟度。NVIDIA 表示這個元件仍在早期存取,因此開發者應留意其是否更廣泛開放、文件是否更完整,以及公司是否能展示可信的軟組織互動與觸覺模擬表現,而不只是挑選過的展示。

第三,開發者應觀察這個專案在實務上到底有多開放:程式碼完整度、更新節奏、社群貢獻,以及與非 NVIDIA 工具整合的便利性。開源狀態很重要,但最終會決定團隊是否把它用在生產研究上的,是可用性與可維護性。

最後,生成式模擬的角色值得密切審視。如果 NVIDIA Cosmos-H 能在不損害物理保真度的前提下提升情境多樣性與合成訓練價值,那將很有意義。但如果團隊在驗證關鍵任務上仍主要依賴傳統求解器,生成層可能仍只是輔助工具,而非工作流程的核心。

Creati.ai 觀點

NVIDIA 正採取一個經過計算的動作,試圖掌握更多醫療機器人開發堆疊,而不只是底層晶片。這次釋出對準了一個真實痛點:大多數醫療機器人計畫失敗,不是因為團隊沒有模型想法,而是因為資料蒐集、邊界案例測試與安全迭代既慢又貴。可重複使用的模擬層,可能實質改變早期系統的訓練與評估方式。

但需要謹慎的是,這裡幾乎所有證據都來自 NVIDIA 自家管道。產品邏輯很強,技術架構看起來也很認真,但被放大的速度提升與採用訊號,仍然是供應商自述。對建構者來說,這是一套具有明顯潛力、值得關注的基礎設施。對買家與受監管團隊來說,它還不是獨立驗證、sim-to-real 證據,以及對模擬器能證明什麼、不能證明什麼的審慎範圍控管的替代品。

精選

NVIDIA 在 Isaac for Healthcare 內開源醫療物理模擬堆疊,支援醫療機器人

NVIDIA 已開源一套 GPU 加速的醫療物理模擬框架,目標是加速醫療機器人的訓練與測試。