AI News

NVIDIA 已釋出一套開源、GPU 加速的模擬框架,旨在協助醫療機器人團隊在實際硬體測試前,先模擬醫療裝置如何與人體解剖結構互動。NVIDIA Medical Physics Simulation 框架正於 NVIDIA Isaac for Healthcare 中導入,並提供解剖、裝置力學、影像與機器人學習工作流程的工具。

這次釋出瞄準的是醫療機器人中的一個棘手問題:開發者需要涵蓋多種解剖、程序、感測器條件與失效模式的訓練與評估資料,但現實世界的蒐集受到臨床可近性、專用設備與安全要求的限制。NVIDIA 表示,其框架可平行產生並執行大量虛擬情境,讓團隊能更早訓練策略並在開發初期探索邊界案例。

這項公告的重要性,與其說是承諾立即進入臨床部署,不如說是基礎建設上的一步。透過將框架開源並與 NVIDIA 的模擬與學習堆疊連結,NVIDIA 正尋求把裝置—解剖模擬變成研究人員與產品團隊可重複使用的一層,而不是為每個機器人或每個程序另外打造的客製專案。

一套用於解剖、裝置與影像的模擬堆疊

這個框架結合了傳統物理模擬與基於生成式 AI 的模擬。NVIDIA 將傳統方法描述為用來建模已知互動的機制,例如接觸、摩擦、彎曲與運動。其生成式方法則用來建模從程序資料中學到的視覺場景動態,並支援合成資料生成與互動式環境。

底層堆疊包含 NVIDIA Warp、Newton Physics 與 CUDA。NVIDIA 表示,將模擬與學習保留在 GPU 上,可降低反覆在 CPU 與 GPU 記憶體之間搬移資料的成本。該框架也設計為可與 NVIDIA 的開放式機器人學習框架 Isaac Sim 與 Isaac Lab 協同運作,讓團隊能將模擬觀測與動作連結到強化學習工作流程。

NVIDIA 開發者文件中首先強調的一個一般可用元件,是 Endoluminal Simulation Module。它可模擬長而柔性的器械在內部腔道中移動,初始工作流程聚焦於在透視引導下進行血管內導管導航。

此模組將柔性器械表示為 Cosserat rods,這是一種考慮彎曲、扭轉與拉伸的力學模型。NVIDIA 表示,它使用延伸的位置基礎動力學與 GPU 實作,能在器械長度增加時有效率地求解耦合的桿件約束。導管與血管的互動會針對病患特定的三角網格進行評估,且當器械被重新投影回血管內時,系統會保留切向滑動。

目前版本有一個重要界線:NVIDIA 將包容關係描述為剛性且單向。根據開發者文件,與可變形血管壁的雙向耦合預計會在未來版本推出。對於評估模擬器是否適用於特定程序的團隊而言,這項區別很重要,因為組織變形與器械回饋都會影響真實性與策略表現。

Surgical Simulation Module 已以早期存取形式提供。NVIDIA 將其描述為一個 GPU 加速環境,可在單一整合流程中處理軟組織變形、外科互動、觸覺回饋與渲染。該公司也將更廣泛的框架定位為模組化,允許開發者使用單一元件,或將其與數位孿生、醫療感測器模擬與開放模型結合。

NVIDIA 的基準測試展示了什麼,以及沒有展示什麼

NVIDIA 表示,8,192 個並行運行的機器人訓練環境,將一項訓練工作負載從超過五小時縮短到不到兩分鐘,相較於該公司所述的基準測試設定。公司也表示,在單一環境的物理模擬中約為 1,300 赫茲,在 512 個環境下約為 60 赫茲,而在其導管導航工作流程中,以 256×256 像素解析度執行完整模擬與渲染循環時,約為每秒 63 幀。

這些數字是供應商回報的效能主張,而非獨立基準測試。來源資料沒有提供與其他醫療模擬系統的中立比較,也沒有證明更快的模擬訓練能在真實裝置或病患身上產生等同表現。因此,對建構者而言,重要的問題不只是吞吐量,還有模擬器的可轉移性:在解剖、影像雜訊、裝置特性與臨床工作流程與虛擬設定不同時,在這些環境中訓練出的策略是否仍可靠。

NVIDIA 的開發者資料指出,導管工作流程將血管數位孿生、裝置力學與透視渲染整合在單一迴圈中。這種整合對於希望從影像式觀測而非簡化狀態資訊進行訓練的團隊可能很有幫助。然而,NVIDIA 的文件將此能力描述為未來策略訓練的基礎,而非已經存在臨床驗證的影像到動作系統之證明。

開源化可能讓這些限制更容易被檢視。NVIDIA 主張,讓開發者取得程式碼、模型與權重,可協助重現結果、比較不同解剖下的行為、找出失效模式,並彙整供法規審查使用的證據。開源可提升可檢視性,但它本身並不能建立臨床有效性、法規接受度,或已訓練機器人的安全性。

早期使用者與市場訊號

NVIDIA 表示,多家醫療科技公司正將以模擬驅動的開發應用在特定使用案例上。Johnson & Johnson MedTech 正使用 Medical Physics Simulation 與基於 Cosmos 的基礎模型,為其泌尿科 MONARCH 平台建立數位孿生,包括腎結石情境。XCath 正利用此框架進行血管內自主性策略訓練,而 Inner Logic 則將其用於合成資料、裝置力學驗證與 in silico 證據工作。

NVIDIA 也表示,Medtronic Structural Heart 正探索模擬 X 光感測,用於導管導航研究。CMR Surgical 與隸屬 Capgemini 的 Cambridge Consultants 正使用 Cosmos-H-Dreams,學習軟組織程序的互動物理並產生病患特定模擬。根據 NVIDIA 的說法,CMR 已向 Open-H Embodiment 資料集提供了來自其 Versius Surgical Robotic System 的近 500 小時匿名臨床資料。

這些是由 NVIDIA 提供的採用訊號,來源並未獨立量化上述任何組織的部署規模、生產使用情況或臨床影響。不過,這些案例的廣度顯示出公司認為有需求的領域:血管內導航、手術訓練、裝置驗證、數位孿生、合成影像與自主性研究。

其競爭意義在於,NVIDIA 正將硬體加速、模擬軟體、生成式模型與機器人學習工具整合打包。對醫療機器人公司而言,這可能減少分別建置物理、渲染與強化學習系統的需要,也可能提高對 NVIDIA 軟體與 GPU 生態系的依賴,尤其是對需要數千個同時運行環境的團隊。

對開發者與企業買家的影響

對早期機器人開發者而言,這套框架可能把稀缺的工程時間,從建立基礎模擬基礎設施,轉向裝置特定建模、資料驗證與安全評估。可重複使用的環境,對於臨床上難以蒐集的罕見事件尤其有價值,例如不尋常的解剖、器械纏結、導航錯誤或程序併發症。

代價是,模擬品質會變成核心產品風險。團隊需要用實體實驗來驗證解剖生成、材料屬性、接觸行為、影像真實度與感測器雜訊。即使某個策略在數千次虛擬試驗中成功,只要模擬器遺漏了臨床上重要的互動,或把它表現錯誤,仍然可能失敗。

企業買家也應區分訓練規模與證據品質。GPU 吞吐量可以縮短迭代時間並支援更大型實驗,但它無法取代台架測試、屍體研究、動物模型或受控臨床評估的需要,也無法解決病患來源資料、合成資料來源、模型版本管理與稽核能力等治理問題。

對研究人員而言,這次開源釋出提供了一種檢視與修改模擬層的方法,可能讓跨裝置與跨解剖比較變得更實用。其價值將取決於文件、可重現性、社群貢獻,以及框架超越其初始血管與早期存取手術能力的速度。

接下來要關注什麼

首先要觀察的是,NVIDIA 是否會在最初的導管導航範例之外,發布更多解剖、裝置模型、感測器與參考工作流程。未來對可變形血管壁雙向耦合的支援,對於研究組織—裝置互動而非剛性包容的團隊來說尤其重要。

第二個訊號是獨立評估。值得關注的後續證據包括 sim-to-real 結果、失敗率比較、可重現的基準配置,以及顯示使用此框架訓練的策略在未見過的解剖與影像條件下如何表現的研究。

最後,開發者應注意開源元件未來如何與 NVIDIA Cosmos、Isaac Sim 和 Isaac Lab 互動。實際問題在於,這個框架會成為一個廣泛互通的研究基礎,還是主要成為 NVIDIA 平台中高度整合的一條路徑。

Creati.ai 觀點

NVIDIA 的這次釋出解決了醫療機器人領域的一個真實瓶頸:實體測試昂貴、緩慢,而且不適合用來產生足夠多罕見但關鍵事件的案例。這項公告最強之處,在於把裝置力學、影像與機器人學習整合到 GPU 原生工作流程中,而不是又一個孤立的模擬器。

但這項公告仍然是基礎建設上的里程碑,而不是臨床可用性的證明。NVIDIA 的效能與採用主張皆為供應商回報,而這套框架最終的價值,將取決於它是否能被驗證地轉移到真實程序、能否透明分析失效原因,以及開放式模擬究竟是否真的提升安全性,而不只是增加訓練量。

精選

NVIDIA 將醫療機器人 GPU 模擬框架開源

NVIDIA 已釋出一套用於模擬醫療裝置與人體解剖的開源 GPU 框架,目標是減少醫療機器人領域中的資料與測試瓶頸。