在今年的 SIGGRAPH 2022 上，NVIDIA 宣布，為基于通用場(chǎng)景描述（USD）連接和構(gòu)建元宇宙世界的平臺(tái)——NVIDIA Omniverse 提供一系列新的開發(fā)者框架、工具、應(yīng)用和插件。

此次針對(duì) Omniverse 的擴(kuò)展包括多項(xiàng) AI 工具和功能，它們讓藝術(shù)家、開發(fā)者和工程師能夠比以往更加輕松地構(gòu)建虛擬世界和內(nèi)容，并且更加無縫地連接當(dāng)今領(lǐng)先的 3D 應(yīng)用。

讓我們一覽此次 SIGGRAPH 的最新發(fā)布與重要更新！

SIGGRAPH 22 全新發(fā)布

Omniverse Avatar Cloud Engine（ACE）

Omniverse Avatar Cloud Engine（ACE）能夠?yàn)橛螒?、聊?a href="http://www.brongaenegriffin.com/soft/data/42-101/" target="_blank">機(jī)器人、數(shù)字孿生和虛擬世界的開發(fā)者提供用于構(gòu)建和部署交互式虛擬形象的云原生 AI 模型，能夠讓用戶更輕松地構(gòu)建和自定義栩栩如生的虛擬助手和數(shù)字人。

通過將這些模型和服務(wù)遷移到云端，ACE 使任何規(guī)模的企業(yè)都能夠立即獲得創(chuàng)建并部署助手和虛擬形象所需的大規(guī)模算力。這些助手和虛擬形象能夠理解多種語言、響應(yīng)語音提示、與環(huán)境互動(dòng)并提供智能建議。

NVIDIA 的Project Maxine 和 Project Tokkio

NVIDIA 的Project Maxine 和 Project Tokkio 是建立在 ACE 上的兩個(gè)應(yīng)用

Project Maxine為虛擬協(xié)作和內(nèi)容創(chuàng)建應(yīng)用帶來了最先進(jìn)的視頻和音頻功能。

Project Tokkio賦予交互式虛擬形象以視覺、感知和智能對(duì)話能力，并使虛擬形象能夠提供建議，以提高餐廳等場(chǎng)所的客戶服務(wù)水平。

Kaolin Wisp

建立神經(jīng)場(chǎng)研究框架的 Pytorch 庫——Kaolin Wisp ，不但簡(jiǎn)化了設(shè)計(jì)師的創(chuàng)作流程，還使數(shù)百萬非專業(yè)設(shè)計(jì)人士也能輕松創(chuàng)建 3D 內(nèi)容。

開源USD （通用場(chǎng)景描述）資源

NVIDIA 正在發(fā)布一系列免費(fèi)資源來加速 USD 的采用范圍，其中包括數(shù)千種專門用于幫助不具備 3D 專業(yè)知識(shí)的用戶構(gòu)建開放虛擬世界的 USD 資產(chǎn)。NVIDIA 還提供數(shù)百個(gè)可按需選擇的教程、文檔和開發(fā)者工具來幫助普及 USD 教育。

開放的 USD 兼容性測(cè)試和認(rèn)證套件

開發(fā)者可以自由使用該套件來測(cè)試他們使用 USD 構(gòu)建的項(xiàng)目并驗(yàn)證結(jié)果是否符合預(yù)期。

SIGGRAPH 更新

用于科學(xué)數(shù)字孿生的 NVIDIA Modulus 的連接

物理機(jī)器學(xué)習(xí)框架 NVIDIA Modulus 現(xiàn)已可用為 Omniverse 擴(kuò)展程序。經(jīng) Modulus 訓(xùn)練的物理機(jī)器學(xué)習(xí)模型可提供近實(shí)時(shí)的性能，根據(jù)不同的應(yīng)用，其速度可提高 4000 甚至 100000 倍，并且具有前所未有、更接近高保真模擬的準(zhǔn)確性。Modulus 是 NVIDIA Earth-2 等科學(xué)數(shù)字孿生的基石之一。

Omniverse Kit

用于構(gòu)建本地 Omniverse 擴(kuò)展和應(yīng)用程序的工具包

Omniverse 中PhysX的主要更新，包括實(shí)時(shí)、多 GPU、可擴(kuò)展的柔體和顆粒布料仿真，幫助提高虛擬世界和物體的物理準(zhǔn)確性。

全新OmniLive Workflows：對(duì) Omniverse 中基于 USD 的協(xié)作進(jìn)行全面改造，為多個(gè)應(yīng)用程序的 3D 工作流程帶來更高的速度和性能并實(shí)現(xiàn)非破壞性的 USD 工作流程，使藝術(shù)家和開發(fā)者之間的協(xié)作比以往更容易。

Omniverse Audio2Face

直接通過音頻文件創(chuàng)建面部動(dòng)畫的 AI 工具，其推理和生成逼真情緒的新功能為 AI 動(dòng)畫帶來了巨大的飛躍，可用于制作所有面部特征動(dòng)畫。

Omniverse Machinima

用于輕松構(gòu)建 3D 電影和動(dòng)畫電影的應(yīng)用，發(fā)布了數(shù)百個(gè)來自游戲《戰(zhàn)爭(zhēng)附言（Post Scriptum）》、《跨越火線（Beyond The Wire）》和《影子武士 3（Shadow Warrior 3）》的全新免費(fèi) 3D 資產(chǎn)，以及 Audio2Gesture（可以利用音頻文件生成逼真手臂和身體運(yùn)動(dòng)的 AI）等一套全新 AI 動(dòng)畫工具。

Omniverse DeepSearch

現(xiàn)已面向 Omniverse Enterprise 客戶開放。DeepSearch 使用自然語言幫助團(tuán)隊(duì)利用 AI 直觀、準(zhǔn)確地在龐大的、未標(biāo)記的 3D 視覺資產(chǎn)數(shù)據(jù)庫中進(jìn)行搜索。對(duì)于因擁有數(shù)十萬未標(biāo)記資產(chǎn)而使搜索成為一大難題的游戲開發(fā)商或視覺特效工作室而言，DeepSearch 將帶來巨大的改變。

核心仿真模擬技術(shù)的重大更新

NVIDIA MDL: 10 年來，該材質(zhì)標(biāo)準(zhǔn)一直支持物理級(jí)精確的 3D 材質(zhì)表現(xiàn)，現(xiàn)已完全開源，使開發(fā)者能夠?yàn)槿魏武秩酒鲙聿馁|(zhì)定義語言支持。

NeuralVDB: 即將發(fā)布公測(cè)版的NeuralVDB 是 OpenVDB 的下一個(gè)升級(jí)版本。它為稀疏體積的數(shù)據(jù)集帶來了 AI 和 GPU 優(yōu)化，并將這些海量數(shù)據(jù)集的內(nèi)存占用率降低了多達(dá) 100 倍。

審核編輯：湯梓紅