全新 Omniverse Cloud API 幫助開發(fā)者采用 OpenUSD；生成式 AI 模型 ChatUSD LLM 使用 USD 進(jìn)行對話；RunUSD 將 USD 轉(zhuǎn)換成交互式圖形，DeepSearch LLM 實(shí)現(xiàn)語義 3D 搜索。

洛杉磯 — SIGGRAPH — 太平洋時(shí)間 2023 年 8 月 8 日 —NVIDIA 宣布將為開發(fā)者和企業(yè)提供一系列框架、資源和服務(wù)，以加速通用場景描述（即 OpenUSD）的采用。

NVIDIA 正在通過 NVIDIA Omniverse 與新的技術(shù)組合、ChatUSD 和 RunUSD 等云應(yīng)用編程接口（API）以及全新 NVIDIA OpenUSD 開發(fā)者計(jì)劃來推進(jìn) OpenUSD 的發(fā)展。OpenUSD 是一個 3D 框架，可實(shí)現(xiàn)軟件工具與數(shù)據(jù)類型之間的互通，從而構(gòu)建虛擬世界。

NVIDIA 上周宣布與皮克斯、Adobe、蘋果和 Autodesk 共同成立 OpenUSD 聯(lián)盟（AOUSD），以統(tǒng)一 OpenUSD 規(guī)范。對 OpenUSD 的這些投資將為該聯(lián)盟添磚加瓦。

NVIDIA 創(chuàng)始人兼首席執(zhí)行官黃仁勛表示：“正如 HTML 點(diǎn)燃了 2D 互聯(lián)網(wǎng)的重大計(jì)算革命，OpenUSD 也將開啟協(xié)作式 3D 和工業(yè)數(shù)字化的時(shí)代。NVIDIA 通過開發(fā) NVIDIA Omniverse 和生成式 AI ，正在全力推動 OpenUSD 的發(fā)展和應(yīng)用?！?/p>

NVIDIA 發(fā)布了四款自主構(gòu)建的全新 Omniverse Cloud API，幫助開發(fā)者更加無縫地實(shí)施和部署 OpenUSD 流程與應(yīng)用。

• ChatUSD：一款面向開發(fā)人員的大型語言模型 (LLM) copilot 工具，可以回答 USD 知識問題或生成 Python-USD 代碼腳本。ChatUSD 借助 NVIDIA 提供的 USD 功能和 Python-USD 代碼片段進(jìn)行微調(diào)。

• RunUSD：其是一個 Cloud API，它通過檢查上傳文件與 OpenUSD 版本的兼容性，將 OpenUSD 文件轉(zhuǎn)換為完全路徑跟蹤渲染的圖像，并使用 Omniverse Cloud 生成渲染。目前，NVIDIA OpenUSD 開發(fā)者計(jì)劃中的開發(fā)人員可以使用該 API 的演示。

• DeepSearch：其為 LLM 代理，可在海量無標(biāo)記資產(chǎn)數(shù)據(jù)庫中進(jìn)行快速語義搜索。

• USD-GDN Publisher：其為一鍵式服務(wù)，可助力企業(yè)和軟件制造商從 USD Composer 等基于 Omniverse 的應(yīng)用向 Omniverse Cloud GDN 發(fā)布基于 OpenUSD 的高保真體驗(yàn)，并實(shí)時(shí)傳輸?shù)骄W(wǎng)絡(luò)瀏覽器和移動設(shè)備。

OpenUSD 旨在更好地連接電影和動畫制作流程。同時(shí)，工業(yè)應(yīng)用（比如構(gòu)建具有互操作性的制造設(shè)計(jì)流程、創(chuàng)建符合物理學(xué)的實(shí)時(shí)工廠數(shù)字孿生或訓(xùn)練和驗(yàn)證自動駕駛汽車等）也對 3D 框架提出了不同的要求。

為了支持這些高度復(fù)雜的工業(yè)和感知 AI 工作負(fù)載，NVIDIA 正在開發(fā) NVIDIA Omniverse（用于開發(fā)應(yīng)用程序的 OpenUSD 原生軟件平臺），以及地理空間數(shù)據(jù)模型、度量組件、SimReady、OpenUSD 規(guī)范等。

OpenUSD 地理空間數(shù)據(jù)模型讓用戶可以對逼真的工廠、倉庫、城市乃至地球數(shù)字孿生進(jìn)行模擬和計(jì)算。對于極大規(guī)模的項(xiàng)目，它還會考慮到地球的曲率以確保模擬符合物理學(xué)。

工業(yè)應(yīng)用需要合并來自許多工具和來源的數(shù)據(jù)集，每個數(shù)據(jù)集以不同的單位表示。NVIDIA 正在開發(fā)一個 OpenUSD 度量組件，使用戶能夠百分之百準(zhǔn)確地合并不同格式的數(shù)據(jù)集。

NVIDIA 還在開發(fā)適用于全新 SimReady 3D 模型的結(jié)構(gòu)。這些模型將包含真實(shí)的材質(zhì)和物理屬性，這對于精準(zhǔn)訓(xùn)練自主機(jī)器人和車輛至關(guān)重要。例如負(fù)責(zé)分揀包裹的自主機(jī)器人需要在 3D 包裹上進(jìn)行模擬訓(xùn)練，這些包裹會像在真實(shí)世界中一樣移動并對物理接觸做出反應(yīng)。

歡迎通過 NVIDIA OpenUSD 開發(fā)者計(jì)劃搶先體驗(yàn) OpenUSD 服務(wù)、資源和工具，其中包括由 NVIDIA 設(shè)計(jì)師和藝術(shù)家構(gòu)建的兩個可完整分發(fā)的全新 OpenUSD 示例場景—— Da Vinci’s Workshop 與 Riverfront Tower。

進(jìn)一步了解：

• OpenUSD：

  https://www.nvidia.cn/omniverse/usd/

• OpenUSD 生態(tài)網(wǎng)絡(luò)：

  https://www.nvidia.com/en-us/omniverse/ecosystem/

• OpenUSD 聯(lián)盟：

  https://www.aousd.org

• NVIDIA Omniverse 平臺：

  https://www.nvidia.cn/omniverse/