NVIDIA 宣布針對 OpenUSD 語言、幾何學、物理學和材料 推出生成式 AI 模型和 NIM 微服務
前言：
全新服務可加速執行以通用場景描述為基礎的工作流程，以及工業數位孿生與機器人的開發
2024年7月29日--NVIDIA 今日宣布通用場景描述（OpenUSD）領域的重大進展，這將採用通用 3D 資料交換框架的範圍，擴大到機器人、工業設計和工程等領域，並且讓開發人員能夠更快取得為下一代 AI的發展構建高精度虛擬世界的能力。
透過以 OpenUSD 為基礎的全新生成式AI與建構在 NVIDIA Omniverse™ 平台上的NVIDIA 加速開發框架，現在有更多產業可以開發應用程式，用於視覺化呈現工業設計與工程項目，以及用於模擬環境以建立下一波的物理 AI 和機器人。
新產品包括適用於 AI 模型的 NVIDIA NIM™ 微服務，可以產生 OpenUSD 語言來回答使用者的查詢、產生 OpenUSD Python 程式碼、將材質套用至 3D 物件，以及瞭解 3D 空間與物理學，協助加速數位孿生的開發。此外，新的 USD 連接器可以將機器人和工業模擬資料格式以及開發工具連接起來，讓使用者將大量完全NVIDIA RTX™ 光線追蹤資料集傳輸到 Apple Vision Pro。
NVIDIA Omniverse 與模擬技術部門副總裁 Rev Lebaredian 表示：「重工業的生成式 AI 發展熱潮已經到來。直到最近，還是主要由創意產業主宰著數位世界。如今透過 NVIDIA NIM 微服務為 OpenUSD 所帶來的強化功能與使用便利性，各行各業都能建立符合物理條件的虛擬世界與數位孿生以推動創新，同時做好準備迎接下一波 AI 發展浪潮：機器人。」
生成式 AI透過 NVIDIA NIM與 USD搭上線
由 NVIDIA 開發的全球首款適用於 OpenUSD 開發作業的生成式 AI 模型，將以NVIDIA NIM微服務的形式提供給外界使用。這些模型可讓開發人員將生成式 AI copilots與代理程式納入 USD 工作流程，擴大3D 世界的可能性，並且協助製造業、汽車業與機器人等新興工業領域加快採用 USD。
提供預覽版的微服務有：
USD Code NIM：回答一般關於 OpenUSD 知識的問題，並且按照文字提示自動產生 OpenUSD-Python 程式碼，然後可以將其輸入 OpenUSD 檢視應用程式，例如 Pixar 的 usdview，或以 NVIDIA Omniverse Kit 為基礎的應用程式，以視覺化的方式呈現相對應的 3D 資料。
USD Search NIM：讓開發人員能夠使用自然語言或圖片輸入，在大量的 OpenUSD、3D 和影像資料庫中搜尋。
USD Validate NIM：檢查上傳檔案與 OpenUSD 發行版本的相容性，並且生成由 NVIDIA Omniverse Cloud API 或應用程式介面驅動的完全 RTX 渲染、路徑追蹤的影像。
剛宣布即將推出的 NIM 微服務有：
USD Layout NIM：讓使用者能根據空間智慧，透過一系列文字提示，組合以 OpenUSD 為基礎的場景。
USD SmartMaterial NIM：預測並套用極為逼真的材質至電腦輔助設計物件。
fVDB Mesh Generation NIM：從點雲資料生成基於 OpenUSD 的網格，由 Omniverse Cloud API 進行渲染。
fVDB Physics Super-Res NIM：在單一或一系列畫格上執行 AI SuperResolution，產生基於 OpenUSD 、高解析的物理模擬。
fVDB NeRF-XL NIM：使用 Omniverse Cloud API 在 OpenUSD 中產生大規模神經輻射場。
全球擁有超過 170 家工廠的製造領導者鴻海集團，已受益於NVIDIA 運算平台，使用 NIM 微服務和 Omniverse 創建正在開發中的工廠的數位孿生。
鴻海數位長暨智慧製造平台負責人史喆表示：「數位孿生將幫助我們加速下一波工業製造和自主機器的發展。NVIDIA Omniverse 和新的 NIM 微服務將使開發數位孿生的能力變得更加普及，幫助我們的團隊比以往更快地建立基於物理的虛擬工廠。」
全球行銷與傳播服務領導企業WPP率先採用USD Search與USD Code NIM微服務，在其以 NVIDIA Omniverse 為基礎的生成式 AI 內容創作管道中執行這些微服務，為可口可樂公司等客戶提供服務。
WPP 技術長 Stephan Pretorius 表示：「這項創新的美妙之處在於它與我們的工作方式高度相容，它還利用了開放標準，不僅加速未來的工作，還讓我們能夠繼續構建和擴展所有過去在 OpenUSD 等標準上的投資的效用。使用 NVIDIA NIM 微服務與 NVIDIA Omniverse，讓我們能夠以前所未有的速度，與可口可樂公司等公司一起推出創新的全新生產工具。」
USD 連接器將生成式 AI 帶入更多產業
一系列用於機器人資料格式與串流傳輸至 Apple Vision Pro 的全新 USD 連接器，為更多產業開啟 OpenUSD 互通性及先進編輯功能的入口。
NVIDIA 與工業自動化及軟體領域的全球領導廠商西門子擴大合作關係，以使用 OpenUSD 促進處理更多工業工作負載。西門子將把OpenUSD 管道與其 Simcenter 模擬技術產品組合相整合，以支援關鍵利益關係人之間根據證據進行決策和協作。
這項整合能夠即時以逼真畫面呈現複雜的模擬資料，讓使用者更深入明白產品在真實作業環境的表現。這項工作將建立在西門子致力將 Omniverse 納入其 Teamcenter Product Lifecycle Management產品組合的基礎上。
NVIDIA 還發布一個從統一機器人描述格式（Unified Robotics Description Format）到 OpenUSD 的連接器，讓機器人專家可以完美地將機器人資料帶入不同的應用程式，包括設計、模擬和強化學習。
NVIDIA 為了進一步推動擴大OpenUSD 生態系，宣布推出 OpenUSD Exchange 軟體開發套件，讓開發人員能夠建立自己的強大 OpenUSD 資料連接器。
新的開發者工具與API可以將大規模OpenUSD場景從Omniverse平台上建立的應用程式，透過NVIDIA 繪圖運算傳遞網路（GDN）串流傳輸至Apple Vision Pro，現已開放搶先試用。
Pixar 技術長暨 OpenUSD 聯盟（AOUSD）主席Steve May 表示：「OpenUSD 將徹底改變我們創作 3D 內容以及與 3D 內容互動的方式。現在透過 NVIDIA 為 OpenUSD 打造的這些新服務和 API，我們期望看到 USD 加速成長，還有市場加快採用，為新的使用者與產業更輕鬆參與我們的生態系奠定基礎。」
OpenUSD 生態系的發展動能
NVIDIA 在去年與 Pixar、Adobe、Apple 和 Autodesk 共同成立 AOUSD。而 NVIDIA 透過 AOUSD 與其他合作夥伴宣布推出新版 OpenUSD、說明 OpenUSD 核心規格的進展以及新成員。
上市時程
現已在 NVIDIA API 目錄推出 USD Search、USD Code 與 USD Validate NIM 的預覽版。現可透過 NVIDIA Isaac Sim™使用 OpenUSD to URDF 連結器。
開發人員可利用全新的 Omniverse 開發人員工具與參考工作流程，開始將生成式 AI 整合至 OpenUSD 工作流程，以便利用 OpenUSD 建立支援生成式 AI 的合成資料管道。
歡迎收看黃仁勳的爐邊談話內容，進一步瞭解從今日起到 8 月 1 日在丹佛舉行的 SIGGRAPH 電腦繪圖大會上生成式 AI 與加速運算的最新發展。
關於NVIDIA（輝達）
NVIDIA（輝達）為加速運算領域的先驅。
NVIDIA前瞻性聲明
本新聞稿根據目前預期所做出的前瞻性聲明，包含但不限於：NVIDIA的產品和技術（NVIDIA Omniverse、NVIDIA 微服務、NVIDIA RTX、USD Code NIM、USD Search NIM、USD Validate NIM、Omniverse Cloud APIs、USD Layout NIM、USD SmartMaterial NIM、fVDB Mesh Generation NIM、fVDB Physics Super-Res NIM、fVDB NeRF-XL NIM 和 NVIDIA 繪圖運算傳遞網路）的優勢、影響、性能、特色和可獲得性；第三方使用或採用 NVIDIA 產品、技術和平台及其優點和影響；NVIDIA與第三方的合作及其優點和影響；NVIDIA NIM 微服務為 OpenUSD 所帶來的強化功能與使用便利性，各行各業都能建立符合物理條件的虛擬世界與數位孿生模型以推動創新，同時做好準備迎接下一波 AI 發展浪潮：機器人；OpenUSD的影響等。這些前瞻性聲明包含可能導致實質結果與預期不符之風險與不確定因素。多項重要因素可能導致實際結果與前瞻性聲明所示之結果出現重大差異，所及範圍有全球經濟情況；NVIDIA的產品借重第三方協力廠商之製造、組合、封裝和測試；技術發展和市場競爭之影響；發展新產品與技術或強化現有的產品及技術；NVIDIA或合作廠商的產品的市場接受度；設計、製造或軟體缺陷；消費者偏好或需求之改變；業界標準和介面之改變；整合到系統後無法預期的NVIDIA產品或效能降低之技術缺失，以及NVIDIA定期提交給美國證券交易委員會（SEC）報告中的其他詳細因素，包含但不限於Form10-K的年度報告和Form10-Q的季度報告。NVIDIA 在公司官方網站上免費提供定期提交給SEC的報告之副本。這些前瞻性聲明不保證未來的效能，只陳述目前的狀態。除非法律規定，否則NVIDIA沒有意願或義務因為新資訊、未來事件或其他理由而更新或修改任何前瞻性聲明。
以下所述的許多產品和功能仍處於不同階段，將在可用時提供。此處的聲明並不構成承諾、保證或法律義務，不應如此解釋，任何所述產品的功能或特性的開發、發布和時間安排均可能變更，並完全由NVIDIA自行決定。NVIDIA對於未能交付或延遲交付此處所列的任何產品、功能或特性不承擔任何責任。
©本文為NVIDIA 公司 2024版權所有，並保留所有權利。NVIDIA、NVIDIA 標誌、NVIDIA NIM、NVIDIA Omniverse與NVIDIA RTX是NVIDIA 公司在美國及其他地區的商標及（或）註冊商標。所有其他公司及產品名稱乃為所屬個別公司之商標。功能、訂價、出貨時程和規格之變更不會另行通知。
