研究人員展示能夠快速創(chuàng)建和編輯材質(zhì)的 AI 技術，助力加速 3D 工作流。

在 SIGGRAPH 上，NVIDIA 的研究人員展示了一種可以幫助藝術家快速創(chuàng)建和迭代 3D 場景材質(zhì)的生成式 AI 工作流。

這項研究的演示現(xiàn)身 SIGGRAPH 展會 Real-Time Live 活動，展示了藝術家如何利用文本或圖像提示來更快地生成織物、木材和石材等自定義紋理材質(zhì)，同時對創(chuàng)作進行更加精細的把控。NVIDIA Picasso 將提供這些功能，使企業(yè)、軟件創(chuàng)作者和服務提供商能夠使用其經(jīng)過完全授權的數(shù)據(jù)來開發(fā)自定義生成式 AI 材質(zhì)模型。

這套 AI 模型將促進材質(zhì)創(chuàng)建和編輯的迭代，使企業(yè)能夠提供新工具來幫助藝術家快速完善 3D 對象的外觀，直到達到想要的效果。

在演示中，NVIDIA 研究人員在 AI 的輔助下，像室內(nèi)設計師一樣嘗試用 3D 渲染應用制作了一個客廳場景。這次研究人員使用的是 NVIDIA Omniverse USD Composer——一個使用通用場景描述（即 OpenUSD）進行場景組裝和構圖的參考應用。他們使用這個應用添加帶有磚紋理的墻壁，創(chuàng)建和修改沙發(fā)與靠墊的織物選項，并在墻壁的特定區(qū)域加入一個抽象的動物設計。

生成式 AI 推動實現(xiàn)設計迭代

這次 Real-Time Live 演示結合了幾個經(jīng)過優(yōu)化的 AI 模型，開發(fā)者將能夠使用 Picasso 來自定義這些工具，并將其集成到專為藝術家打造的創(chuàng)意應用程序中。

在這些功能集成到創(chuàng)意應用中后，藝術家只需要輸入簡短的文本提示就能生成磚塊或馬賽克圖案等材質(zhì)。這些材材質(zhì)可以平鋪，所以可以在任何大小的表面上無縫復制。他們還可以導入?yún)⒖紙D像，比如一塊法蘭絨織物，然后將其應用于虛擬場景中的任何對象。

AI 編輯工具可以讓藝術家修改他們正在處理的材質(zhì)的特定區(qū)域，例如咖啡桌紋理的中心。

這些 AI 生成的材質(zhì)支持符合物理學的渲染，可以逼真地對場景光照的變化作出響應。其所包含的法線、粗糙度和環(huán)境遮擋貼圖等功能對于創(chuàng)建和微調(diào)逼真 3D 場景的材質(zhì)至關重要。

在 NVIDIA Tensor Core GPU 的加速下，藝術家可以近乎實時地生成材質(zhì)并在后臺升級，可實現(xiàn)高達 4K 的分辨率，同時創(chuàng)作者可以繼續(xù)完善場景的其他部分。

在建筑、游戲開發(fā)和室內(nèi)設計等創(chuàng)意產(chǎn)業(yè)中，這些功能可以幫助藝術家快速挖掘創(chuàng)意并嘗試不同的美學風格，創(chuàng)造出多個版本的場景。

例如，游戲開發(fā)者可以使用這些生成式 AI 功能加速開放世界環(huán)境設計，或創(chuàng)建角色的服裝等。建筑師可以在不同的照明環(huán)境中嘗試不同風格的建筑立面設計。

使用 NVIDIA Picasso 構建生成式 AI 服務

這些符合物理學的材質(zhì)生成功能都將在 NVIDIA Picasso 中提供。NVIDIA Picasso 是一個云平臺，企業(yè)能夠在其上構建、優(yōu)化和微調(diào)用于視覺內(nèi)容的生成式 AI 基礎模型。

借助 Picasso，內(nèi)容提供商能夠基于完全授權的版權數(shù)據(jù)開發(fā)并訓練生成式 AI 工具和服務。Picasso 隸屬于 NVIDIA AI Foundations，NVIDIA AI Foundations 是一套模型制作服務，旨在推動生成式 AI 在文本、視覺內(nèi)容和生物學領域的應用。

在 SIGGRAPH 主題演講中，NVIDIA 創(chuàng)始人兼首席執(zhí)行官黃仁勛還宣布了一項新的 Picasso 功能——根據(jù)簡單的文本或圖像提示生成逼真的 360 HDRi 環(huán)境貼圖，并以此為 3D 場景增色。

在 SIGGRAPH Real-Time Live活動上了解該研究

Real-Time Live 是 SIGGRAPH 上最受期待的活動之一。今年，該活動將展示十多個經(jīng)過評審的項目，包括 Roblox、猶他大學以及 NVIDIA 初創(chuàng)加速計劃（旨在培育尖端初創(chuàng)企業(yè)的項目）成員 Metaphysic 的項目。

在活動中，NVIDIA 的研究人員現(xiàn)場展示了這種交互式材質(zhì)研究，包括演示超分辨率工具。

SIGGRAPH 2023

NVIDIA 精彩發(fā)布

【1】SIGGRAPH 主題演講：NVIDIA 首席執(zhí)行官帶來生成式 AI 多項創(chuàng)新 SIGGRAPH 2023 | NVIDIA 發(fā)布新一代 GH200 Grace Hopper 超級芯片平臺 SIGGRAPH 2023 | NVIDIA 發(fā)布支持生成式 AI 與 OpenUSD 的重大 Omniverse 升級 SIGGRAPH 2023 | NVIDIA Omniverse 開啟通往 OpenUSD 廣闊天地的大門 SIGGRAPH 2023 | NVIDIA 與全球數(shù)據(jù)中心系統(tǒng)制造商大力推動 AI 與工業(yè)數(shù)字化的發(fā)展 SIGGRAPH 2023 | NVIDIA 與全球工作站廠商共同推出用于生成式 AI、LLM 開發(fā)、內(nèi)容創(chuàng)作和數(shù)據(jù)科學的系統(tǒng) SIGGRAPH 2023 | NVIDIA AI Workbench 助力全球企業(yè)加速采用自定義生成式 AI SIGGRAPH 2023 | NVIDIA 與 Hugging Face 將連接數(shù)百萬開發(fā)者與生成式 AI 超級計算

更多精彩，仍在繼續(xù)...

敬請持續(xù)關注

點擊“閱讀原文”，或掃描下方海報二維碼，觀看 NVIDIA 創(chuàng)始人兼 CEO 黃仁勛在 SIGGRAPH 現(xiàn)場發(fā)表的 NVIDIA 主題演講回放，了解 NVIDIA 的新技術，包括屢獲殊榮的研究，OpenUSD 開發(fā)，以及最新的 AI 內(nèi)容創(chuàng)作解決方案。