NVIDIA公布適用於OpenUSD的語言、幾何、物理與材料的生成式AI與NIM微服務,建構OpenUSD資產更容易

2024.07.30 04:30AM
照片中提到了USD Search、Objects in a warehouse such as conveyor belts, pallets, and、boxes,包含了屏幕截圖、汽車、屏幕截圖、市

作為OpenUSD的重要推廣者與AOUSD組織創始成員的NVIDIA在SIGGRAPH 2024除了積極提倡OpenUSD以外,也結合自身最擅長的GPU與AI運算以及AOUSD聯盟夥伴使開發OpenUSD的數位資產變的更容易;NVIDIA宣布適用於語言、幾何、物理與材料的生成式AI與NIM微服務,可加速OpenUSD的開發工作流程。

NVIDIA推出可因應用戶查詢、產生OpenUSD Ptthon程式碼、將材質應用於3D物件、理解3D空間與物理的生成OpenUSD語言的NVIDIA NIM微服務;此外透過連接機器人、工業模擬資料格式與開發工具的新USD連接器可將大量且具備光線追蹤的數據傳輸至Apple Vision Pro顯示。

由NVIDIA開發、可應用於OpenUSD開發的生成式AI模型將利用NVIDIA NIM提供服務,透過這些模型可將AI Copilot與代理與USD工作流整合;目前預覽版提供的NVIDIA NIM包括三大項,包括可回答OpenUSD相關服務、自動產生OpenUSD Python代碼的USD Code NIM,開發者可使用自然語言與影像搜尋OpenUSD、3D與影像資料庫的USD Search NIM,以及檢查上傳檔案與OpenUSD發行版本相容性、並產生由RTX渲染、路徑追蹤影像的USD Validate NIM。

▲NVIDIA公布多項工具,使開發者、企業更容易產生OpenUSD格式的數位資產

另外還有四項即將在近期投入的OpenUSD相關微服務,分別為使用戶可依據空間智慧的文字敘述組裝OpenUSD場景的USD Layout NIM,能預測真實材料並應用於電腦輔助設計物件的USD SmartMaterial NIM,可產生基於OpenUSD網格並於Omniverse Cloud API以點雲資料呈現的fVDB Mesh Generation NIM,可產生高解析OpenUSD物理模擬效果的 fVDB Physics Super-Res NIM,能在Omniverse Cloud API產生大規模神經輻射場的fVDB NeRF-XL NIM。

諸如鴻海富士康Foxconn正結合NVIDIA運算平台、NIM微服務、Omniverse建構工廠的數位孿生,行銷廣告公司WPP也透過USD Code NIM協助如可口可樂等客戶導入生成式AI產生適合不同市場的行銷素材。

  翻译: