通過使用 NVIDIA Omniverse、Audio2Face 應(yīng)用和 Epic Games 的虛幻引擎，3D 多面手和視頻剪輯師加快了創(chuàng)建逼真數(shù)字人場景的工作流程。

靈感的來源難以追尋，其導向也不可預(yù)知。

Anderson Rohr 是一名身處巴西南部的 3D 多面手和自由視頻剪輯師。十幾年來，他一直在創(chuàng)作各種內(nèi)容，包括婚禮視頻、電影動畫等。

在看到某位創(chuàng)作者使用 NVIDIA Omniverse 和由 AI 驅(qū)動的 Audio2Face 應(yīng)用為一個科幻人物的臉部制作動畫并配上聲音后，Rohr 表示迫不及待地想要使用這項技術(shù)。

最終，Rohr 使用這項技術(shù)為 1960 年代克里登斯清水復興合唱團（Credence Clearwater Revival）的曲目《Bad Moon Rising》制作了封面，并配上了使用自己聲音進行的翻唱。

使用 Omniverse、Audio2Face 應(yīng)用、RTXGI、虛幻引擎創(chuàng)建數(shù)字人

為了制作這段視頻，Rohr 使用了搭載 NVIDIA GPU 的 NVIDIA Studio 系統(tǒng)。

Rohr 的藝術(shù)創(chuàng)作流程

在制作這個項目的過程中，Rohr 首先錄制了自己的歌聲，并在 Audio2Face 中打開該文件。

Audio2Face 應(yīng)用在 Omniverse 中通過 NVIDIA AI 技術(shù)構(gòu)建而成，只需一個旁白音軌或任何其他音源，就能立即為數(shù)字人生成富有表現(xiàn)力的面部動畫。

然后，Rohr 手動為角色的眼睛、眉毛和脖子制作動畫，并對場景的照明進行調(diào)整。

Rohr 表示：“NVIDIA Omniverse 能夠幫助我為數(shù)字人制作更自然的效果并加快工作流程，讓我可以將更多時間用于創(chuàng)作。”

在使用 Omniverse 之前，某些動畫的渲染需要花費長達 300 小時。同時，Rohr 還面臨著軟件不兼容的問題，他表示這進一步減慢了他的工作速度。

而現(xiàn)在，憑借 Omniverse 及用于各種軟件應(yīng)用的連接器，Rohr 可以實時完成渲染。

他表示：“Omniverse 在沒有大幅改變工作流程的前提下遠遠超出我的預(yù)期，我經(jīng)常使用它，我希望我所創(chuàng)作的作品能夠啟發(fā)大家在虛擬制作、游戲、電影場景或任何其他創(chuàng)作項目中達到實時效果?！?/p>

通過 Omniverse，NVIDIA Studio 創(chuàng)作者可以使用經(jīng)過優(yōu)化的 RTX 加速硬件和軟件驅(qū)動，以及先進的 AI 和模擬功能，為藝術(shù)創(chuàng)作錦上添花。

在這個視頻中，Rohr 詳細介紹了他如何使用 NVIDIA Omniverse 進行工作。

Anderson Rohr：認識 Omniverse

重磅！NVIDIA行業(yè)微站一睹為快！內(nèi)容涵蓋NVIDIA主要的12大行業(yè)方案，以及NVIDIA當期重點產(chǎn)品資料。關(guān)注“NVIDIA英偉達企業(yè)解決方案”微信公眾號，點擊菜單欄進入行業(yè)微站，或長按識別下方二維碼直接訪問。

原文標題：Omniverse 創(chuàng)作者使用 AI 創(chuàng)建具有歌唱功能的數(shù)字人場景

文章出處：【微信公眾號：NVIDIA英偉達企業(yè)解決方案】歡迎添加關(guān)注！文章轉(zhuǎn)載請注明出處。