3D 藝術家們不斷進行原型設計
在傳統(tǒng)工作流中,建模師必須構建占位模型、低精度資產(chǎn)來填充 3D 場景,優(yōu)化核心資產(chǎn)以完成場景。之后,可以優(yōu)化、細化并最終完成視覺效果。
原型設計非常耗時,且通常是一次性工作,藝術家不得不將時間花費在繁瑣的建模而不是創(chuàng)意探索上。
生成式 AI 可加速中間任務來輔助藝術家工作,例如建議和生成草稿對象來設計場景原型。但要連接多個 AI 模型以釋放這些加速工作流,在技術上可能具有挑戰(zhàn)。
NVIDIA AI Blueprint 可幫助應對這一挑戰(zhàn),它可提供示例工作流,以便用戶可以跳過過于技術化的階段,并快速受益于先進的生成式 AI 技術。此外,AI Blueprint 可以根據(jù)每個用戶的特定需求量身定制。
NVIDIA 今天發(fā)布了用于 3D 模型生成的 AI Blueprint,該工作流讓 3D 藝術家只需輸入簡單的文本提示,即可創(chuàng)建多達 20 個 3D 模型來設計場景原型。
此外,全新的 Microsoft TRELLIS NVIDIA NIM 微服務可在用于 3D 模型生成的 AI Blueprint 中運行來生成高質量 3D 資產(chǎn),速度比原生應用快 20%。
生成、原型設計、重復
3D 項目始于創(chuàng)意的萌生,隨后要仔細考慮視覺細節(jié),如主題、位置、裝飾、顏色、紋理等。即使在場景布景后,藝術家們?nèi)员仨毝啻螜z查和編輯單獨和整體的視覺效果。
全新用于 3D 模型生成的 NVIDIA AI Blueprint 為用戶提供了自動化原型設計的工作流。
由 3D 模型生成 AI Blueprint 生成的示例模型預覽。
NVIDIA SANA 是一個文本轉圖像框架,可快速合成高分辨率圖像,并生成預覽以展示可能的物體效果。每個對象都可以重新生成、修改或丟棄,讓藝術家完全掌控創(chuàng)意。
專業(yè)提示:由 Llama 3.1 8B NIM 微服務提供支持的 LLM 可以為場景中要包含的物體生成創(chuàng)意,并提供提示建議,即使沒有豐富提示詞經(jīng)驗的藝術家也可以提高創(chuàng)意效率。
然后,藝術家可以通過全新的 Microsoft TRELLIS NVIDIA NIM 微服務將每個對象從高質量預覽轉換為隨時可用的 3D 模型,這簡化了該先進模型的部署,并將其加速 20%。
此外,由多達 20 個 3D 資產(chǎn)組成的集合可供立即使用或在開源 3D 平臺 Blender 中進一步優(yōu)化,用于 3D 模型生成的 AI Blueprint 會自動導出到該平臺。藝術家們還可以導出到其他流行的 3D 應用。
Blender 中的這個 3D 場景中布置了在 3D 模型生成 AI Blueprint 中生成的對象。
設置這一系列工作流通常會耗費大量時間并且需要技術知識,還要試驗不同的模型以選擇合適的工作流。NVIDIA AI Blueprint 通過預先選擇經(jīng)過驗證的工作流來簡化入門流程,并通過將所需組件打包在一起,簡化在 NVIDIA GeForce RTX 和 RTX PRO GPU 上的部署。
Microsoft TRELLIS
Microsoft TRELLIS 是由 Microsoft Research 開發(fā)的尖端 3D 資產(chǎn)生成模型,能夠根據(jù)文本或圖像提示生成細節(jié)豐富、包含復雜形狀和紋理的 3D 資產(chǎn)。
由于它可以生成可即時預覽的材質和產(chǎn)品級模型,因此特別適用于游戲設計、建筑和數(shù)字媒體制作。
供消費者使用的高質量文本轉圖像 3D 模型往往很難設置。Microsoft TRELLIS NIM 微服務可無縫集成到用于 3D 模型生成的 NVIDIA AI Blueprint 中,為藝術家節(jié)省大量時間。
在 Blueprint 中使用時,得益于 PyTorch 的推理速度優(yōu)化,Microsoft TRELLIS NIM 微服務的速度可提高 20%。remove 對于為數(shù)十個場景生成數(shù)百個資產(chǎn)的 3D 自由職業(yè)者來說,節(jié)省下來的時間是非??捎^的。
所有配備 16GB 或更大顯存的 NVIDIA GeForce RTX 50 系列和 40 系列 GPU(臺式機和筆記本電腦)均支持 Microsoft TRELLIS NIM 微服務。
準備、瞄準目標、部署
按照以下說明開始使用用于 3D 模型生成的 NVIDIA AI Blueprint:
1. 加載 Blueprint,包括模型。
2. 輸入簡單的場景創(chuàng)意(例如“夜市”或“陽光明媚的沙灘”)。
3. 將自動生成 20 個圖像預覽。
4. 點擊圖像下方的刷新圖標可替換任何不需要的對象。
a. 提示:點擊圖像下方的鉛筆圖標可編輯原始提示,從而更好地控制替換圖像。
5. 點擊圖像下方的垃圾桶圖標可刪除不需要的對象。
6. 使用圖像下方的“->3D”圖標可轉換單個圖像。
7. 使用底部的“Convert all to 3D”(全部轉換為 3D)按鈕可將所有預覽轉換為 3D。
a. 提示:點擊“Start over with a new scene prompt”(使用新場景提示重新開始)可開始新場景。這將清除當前進度,因此請務必先保存。
8. 使用頁面底部的內(nèi)置按鈕可將文件導出到 Blender,以繼續(xù)優(yōu)化 3D 模型。
立即探索各種精心策劃的 AI Blueprint,包括 3D 引導生成式 AI Blueprint 和 NIM 微服務。
-
NVIDIA
+關注
關注
14文章
5430瀏覽量
108201 -
AI
+關注
關注
88文章
36973瀏覽量
289790 -
模型
+關注
關注
1文章
3607瀏覽量
51410
原文標題:眼見為實:借助 NVIDIA AI Blueprint 快速構建 3D 世界
文章出處:【微信號:NVIDIA_China,微信公眾號:NVIDIA英偉達】歡迎添加關注!文章轉載請注明出處。
發(fā)布評論請先 登錄
評論