研究人員展示能夠快速創(chuàng)建和編輯材質(zhì)的 AI 技術(shù)，助力加速 3D 工作流。

在 SIGGRAPH 上，NVIDIA 的研究人員展示了一種可以幫助藝術(shù)家快速創(chuàng)建和迭代 3D 場景材質(zhì)的生成式 AI 工作流。

這項研究的演示現(xiàn)身 SIGGRAPH 展會 Real-Time Live 活動，展示了藝術(shù)家如何利用文本或圖像提示來更快地生成織物、木材和石材等自定義紋理材質(zhì)，同時對創(chuàng)作進行更加精細的把控。NVIDIA Picasso將提供這些功能，使企業(yè)、軟件創(chuàng)作者和服務(wù)提供商能夠使用其經(jīng)過完全授權(quán)的數(shù)據(jù)來開發(fā)自定義生成式 AI 材質(zhì)模型。

這套 AI 模型將促進材質(zhì)創(chuàng)建和編輯的迭代，使企業(yè)能夠提供新工具來幫助藝術(shù)家快速完善 3D 對象的外觀，直到達到想要的效果。

在演示中，NVIDIA 研究人員在 AI 的輔助下，像室內(nèi)設(shè)計師一樣嘗試用 3D 渲染應(yīng)用制作了一個客廳場景。這次研究人員使用的是NVIDIA Omniverse USD Composer——一個使用通用場景描述（即 OpenUSD）進行場景組裝和構(gòu)圖的參考應(yīng)用。他們使用這個應(yīng)用添加帶有磚紋理的墻壁，創(chuàng)建和修改沙發(fā)與靠墊的織物選項，并在墻壁的特定區(qū)域加入一個抽象的動物設(shè)計。

生成式 AI 推動實現(xiàn)設(shè)計迭代

這次 Real-Time Live 演示結(jié)合了幾個經(jīng)過優(yōu)化的 AI 模型，開發(fā)者將能夠使用 Picasso 來自定義這些工具，并將其集成到專為藝術(shù)家打造的創(chuàng)意應(yīng)用程序中。

在這些功能集成到創(chuàng)意應(yīng)用中后，藝術(shù)家只需要輸入簡短的文本提示就能生成磚塊或馬賽克圖案等材質(zhì)。這些材材質(zhì)可以平鋪，所以可以在任何大小的表面上無縫復(fù)制。他們還可以導(dǎo)入?yún)⒖紙D像，比如一塊法蘭絨織物，然后將其應(yīng)用于虛擬場景中的任何對象。

AI 編輯工具可以讓藝術(shù)家修改他們正在處理的材質(zhì)的特定區(qū)域，例如咖啡桌紋理的中心。

這些 AI 生成的材質(zhì)支持符合物理學(xué)的渲染，可以逼真地對場景光照的變化作出響應(yīng)。其所包含的法線、粗糙度和環(huán)境遮擋貼圖等功能對于創(chuàng)建和微調(diào)逼真 3D 場景的材質(zhì)至關(guān)重要。

在NVIDIA Tensor Core GPU的加速下，藝術(shù)家可以近乎實時地生成材質(zhì)并在后臺升級，可實現(xiàn)高達 4K 的分辨率，同時創(chuàng)作者可以繼續(xù)完善場景的其他部分。

在建筑、游戲開發(fā)和室內(nèi)設(shè)計等創(chuàng)意產(chǎn)業(yè)中，這些功能可以幫助藝術(shù)家快速挖掘創(chuàng)意并嘗試不同的美學(xué)風(fēng)格，創(chuàng)造出多個版本的場景。

例如，游戲開發(fā)者可以使用這些生成式 AI 功能加速開放世界環(huán)境設(shè)計，或創(chuàng)建角色的服裝等。建筑師可以在不同的照明環(huán)境中嘗試不同風(fēng)格的建筑立面設(shè)計。

使用 NVIDIA Picasso

構(gòu)建生成式 AI 服務(wù)

這些符合物理學(xué)的材質(zhì)生成功能都將在 NVIDIA Picasso 中提供。NVIDIA Picasso 是一個云平臺，企業(yè)能夠在其上構(gòu)建、優(yōu)化和微調(diào)用于視覺內(nèi)容的生成式 AI 基礎(chǔ)模型。

借助 Picasso，內(nèi)容提供商能夠基于完全授權(quán)的版權(quán)數(shù)據(jù)開發(fā)并訓(xùn)練生成式 AI 工具和服務(wù)。Picasso 隸屬于NVIDIA AI Foundations，NVIDIA AI Foundations 是一套模型制作服務(wù)，旨在推動生成式 AI 在文本、視覺內(nèi)容和生物學(xué)領(lǐng)域的應(yīng)用。

在 SIGGRAPH 主題演講中，NVIDIA 創(chuàng)始人兼首席執(zhí)行官黃仁勛還宣布了一項新的 Picasso 功能——根據(jù)簡單的文本或圖像提示生成逼真的 360 HDRi 環(huán)境貼圖，并以此為 3D 場景增色。