全新服務可加速執行以通用場景描述為基礎的工作流程，以及工業數位孿生與機器人的開發
NVIDIA 今日宣布通用場景描述（OpenUSD）領域的重大進展，這將採用通用 3D 資料交換框架的範圍，擴大到機器人、工業設計和工程等領域，並且讓開發人員能夠更快取得為下一代 AI 的發展構建高精度虛擬世界的能力。
透過以 OpenUSD 為基礎的全新生成式 AI 與建構在 NVIDIA Omniverse™ 平台上的 NVIDIA 加速開發框架，現在有更多產業可以開發應用程式，用於視覺化呈現工業設計與工程項目，以及用於模擬環境以建立下一波的物理 AI 和機器人。
新產品包括適用於 AI 模型的 NVIDIA NIM™ 微服務，可以產生 OpenUSD 語言來回答使用者的查詢、產生 OpenUSD Python 程式碼、將材質套用至 3D 物件，以及瞭解 3D 空間與物理學，協助加速數位孿生的開發。此外，新的 USD 連接器可以將機器人和工業模擬資料格式以及開發工具連接起來，讓使用者將大量完全NVIDIA RTX™ 光線追蹤資料集傳輸到 Apple Vision Pro。
NVIDIA Omniverse 與模擬技術部門副總裁 Rev Lebaredian 表示：「重工業的生成式 AI 發展熱潮已經到來。直到最近，還是主要由創意產業主宰著數位世界。如今透過 NVIDIA NIM 微服務為 OpenUSD 所帶來的強化功能與使用便利性，各行各業都能建立符合物理條件的虛擬世界與數位孿生以推動創新，同時做好準備迎接下一波 AI 發展浪潮：機器人。」
生成式AI透過NVIDIA NIM與USD搭上線
由 NVIDIA 開發的全球首款適用於 OpenUSD 開發作業的生成式 AI 模型，將以NVIDIA NIM微服務的形式提供給外界使用。這些模型可讓開發人員將生成式 AI copilots 與代理程式納入 USD 工作流程，擴大 3D 世界的可能性，並且協助製造業、汽車業與機器人等新興工業領域加快採用 USD。
提供預覽版的微服務有：
- USD Code NIM：回答一般關於 OpenUSD 知識的問題，並且按照文字提示自動產生 OpenUSD-Python 程式碼，然後可以將其輸入 OpenUSD 檢視應用程式，例如 Pixar 的 usdview，或以 NVIDIA Omniverse Kit 為基礎的應用程式，以視覺化的方式呈現相對應的 3D 資料。
- USD Search NIM：讓開發人員能夠使用自然語言或圖片輸入，在大量的 OpenUSD、3D 和影像資料庫中搜尋。
- USD Validate NIM：檢查上傳檔案與 OpenUSD 發行版本的相容性，並且生成由 NVIDIA Omniverse Cloud API 或應用程式介面驅動的完全 RTX 渲染、路徑追蹤的影像。
剛宣布即將推出的 NIM 微服務有：
- USD Layout NIM：讓使用者能根據空間智慧，透過一系列文字提示，組合以 OpenUSD 為基礎的場景。
- USD SmartMaterial NIM：預測並套用極為逼真的材質至電腦輔助設計物件。
- fVDB Mesh Generation NIM：從點雲資料生成基於 OpenUSD 的網格，由 Omniverse Cloud API 進行渲染。
- fVDB Physics Super-Res NIM：在單一或一系列畫格上執行 AI SuperResolution，產生基於 OpenUSD 、高解析的物理模擬。
- fVDB NeRF-XL NIM：使用 Omniverse Cloud API 在 OpenUSD 中產生大規模神經輻射場。
全球擁有超過 170 家工廠的製造領導者鴻海集團，已受益於 NVIDIA 運算平台，使用 NIM 微服務和 Omniverse 創建正在開發中的工廠的數位孿生。
鴻海數位長暨智慧製造平台負責人史喆表示：「數位孿生將幫助我們加速下一波工業製造和自主機器的發展。NVIDIA Omniverse 和新的 NIM 微服務將使開發數位孿生的能力變得更加普及，幫助我們的團隊比以往更快地建立基於物理的虛擬工廠。」
全球行銷與傳播服務領導企業 WPP 率先採用 USD Search 與 USD Code NIM 微服務，在其以 NVIDIA Omniverse 為基礎的生成式 AI 內容創作管道中執行這些微服務，為可口可樂公司等客戶提供服務。
WPP 技術長 Stephan Pretorius 表示：「這項創新的美妙之處在於它與我們的工作方式高度相容，它還利用了開放標準，不僅加速未來的工作，還讓我們能夠繼續構建和擴展所有過去在 OpenUSD 等標準上的投資的效用。使用 NVIDIA NIM 微服務與 NVIDIA Omniverse，讓我們能夠以前所未有的速度，與可口可樂公司等公司一起推出創新的全新生產工具。」
USD連接器將生成式AI帶入更多產業
一系列用於機器人資料格式與串流傳輸至 Apple Vision Pro 的全新 USD 連接器，為更多產業開啟 OpenUSD 互通性及先進編輯功能的入口。
NVIDIA 與工業自動化及軟體領域的全球領導廠商西門子擴大合作關係，以使用 OpenUSD 促進處理更多工業工作負載。西門子將把OpenUSD 管道與其 Simcenter 模擬技術產品組合相整合，以支援關鍵利益關係人之間根據證據進行決策和協作。
這項整合能夠即時以逼真畫面呈現複雜的模擬資料，讓使用者更深入明白產品在真實作業環境的表現。這項工作將建立在西門子致力將 Omniverse 納入其 Teamcenter Product Lifecycle Management產品組合的基礎上。
NVIDIA 還發布一個從統一機器人描述格式（Unified Robotics Description Format）到 OpenUSD 的連接器，讓機器人專家可以完美地將機器人資料帶入不同的應用程式，包括設計、模擬和強化學習。
NVIDIA 為了進一步推動擴大OpenUSD 生態系，宣布推出 OpenUSD Exchange 軟體開發套件，讓開發人員能夠建立自己的強大 OpenUSD 資料連接器。
新的開發者工具與 API 可以將大規模 OpenUSD 場景從 Omniverse 平台上建立的應用程式，透過 NVIDIA 繪圖運算傳遞網路（GDN）串流傳輸至 Apple Vision Pro，現已開放搶先試用。
Pixar 技術長暨 OpenUSD 聯盟（AOUSD）主席Steve May 表示：「OpenUSD 將徹底改變我們創作 3D 內容以及與 3D 內容互動的方式。現在透過 NVIDIA 為 OpenUSD 打造的這些新服務和 API，我們期望看到 USD 加速成長，還有市場加快採用，為新的使用者與產業更輕鬆參與我們的生態系奠定基礎。」
OpenUSD生態系的發展動能
NVIDIA 在去年與 Pixar、Adobe、Apple 和 Autodesk 共同成立 AOUSD。而 NVIDIA 透過 AOUSD 與其他合作夥伴宣布推出新版 OpenUSD、說明 OpenUSD 核心規格的進展以及新成員。
上市時程
現已在 NVIDIA API 目錄推出 USD Search、USD Code 與 USD Validate NIM 的預覽版。現可透過 NVIDIA Isaac Sim™使用 OpenUSD to URDF 連結器。
開發人員可利用全新的 Omniverse 開發人員工具與參考工作流程，開始將生成式 AI 整合至 OpenUSD 工作流程，以便利用 OpenUSD 建立支援生成式 AI 的合成資料管道。
歡迎收看黃仁勳的爐邊談話內容，進一步瞭解從今日起到 8 月 1 日在丹佛舉行的 SIGGRAPH 電腦繪圖大會上生成式 AI 與加速運算的最新發展。
