研究人員展示能夠快速創(chuàng)建和編輯材質(zhì)的 AI 技術(shù)，助力加速 3D 工作流。

在 SIGGRAPH 上，NVIDIA 的研究人員展示了一種可以幫助藝術(shù)家快速創(chuàng)建和迭代 3D 場(chǎng)景材質(zhì)的生成式 AI 工作流。

這項(xiàng)研究的演示現(xiàn)身 SIGGRAPH 展會(huì) Real-Time Live 活動(dòng)，展示了藝術(shù)家如何利用文本或圖像提示來(lái)更快地生成織物、木材和石材等自定義紋理材質(zhì)，同時(shí)對(duì)創(chuàng)作進(jìn)行更加精細(xì)的把控。NVIDIA Picasso將提供這些功能，使企業(yè)、軟件創(chuàng)作者和服務(wù)提供商能夠使用其經(jīng)過(guò)完全授權(quán)的數(shù)據(jù)來(lái)開(kāi)發(fā)自定義生成式 AI 材質(zhì)模型。

這套 AI 模型將促進(jìn)材質(zhì)創(chuàng)建和編輯的迭代，使企業(yè)能夠提供新工具來(lái)幫助藝術(shù)家快速完善 3D 對(duì)象的外觀，直到達(dá)到想要的效果。

在演示中，NVIDIA 研究人員在 AI 的輔助下，像室內(nèi)設(shè)計(jì)師一樣嘗試用 3D 渲染應(yīng)用制作了一個(gè)客廳場(chǎng)景。這次研究人員使用的是NVIDIA Omniverse USD Composer——一個(gè)使用通用場(chǎng)景描述（即 OpenUSD）進(jìn)行場(chǎng)景組裝和構(gòu)圖的參考應(yīng)用。他們使用這個(gè)應(yīng)用添加帶有磚紋理的墻壁，創(chuàng)建和修改沙發(fā)與靠墊的織物選項(xiàng)，并在墻壁的特定區(qū)域加入一個(gè)抽象的動(dòng)物設(shè)計(jì)。

生成式 AI 推動(dòng)實(shí)現(xiàn)設(shè)計(jì)迭代

這次 Real-Time Live 演示結(jié)合了幾個(gè)經(jīng)過(guò)優(yōu)化的 AI 模型，開(kāi)發(fā)者將能夠使用 Picasso 來(lái)自定義這些工具，并將其集成到專為藝術(shù)家打造的創(chuàng)意應(yīng)用程序中。

在這些功能集成到創(chuàng)意應(yīng)用中后，藝術(shù)家只需要輸入簡(jiǎn)短的文本提示就能生成磚塊或馬賽克圖案等材質(zhì)。這些材材質(zhì)可以平鋪，所以可以在任何大小的表面上無(wú)縫復(fù)制。他們還可以導(dǎo)入?yún)⒖紙D像，比如一塊法蘭絨織物，然后將其應(yīng)用于虛擬場(chǎng)景中的任何對(duì)象。

AI 編輯工具可以讓藝術(shù)家修改他們正在處理的材質(zhì)的特定區(qū)域，例如咖啡桌紋理的中心。

這些 AI 生成的材質(zhì)支持符合物理學(xué)的渲染，可以逼真地對(duì)場(chǎng)景光照的變化作出響應(yīng)。其所包含的法線、粗糙度和環(huán)境遮擋貼圖等功能對(duì)于創(chuàng)建和微調(diào)逼真 3D 場(chǎng)景的材質(zhì)至關(guān)重要。

在NVIDIA Tensor Core GPU的加速下，藝術(shù)家可以近乎實(shí)時(shí)地生成材質(zhì)并在后臺(tái)升級(jí)，可實(shí)現(xiàn)高達(dá) 4K 的分辨率，同時(shí)創(chuàng)作者可以繼續(xù)完善場(chǎng)景的其他部分。

在建筑、游戲開(kāi)發(fā)和室內(nèi)設(shè)計(jì)等創(chuàng)意產(chǎn)業(yè)中，這些功能可以幫助藝術(shù)家快速挖掘創(chuàng)意并嘗試不同的美學(xué)風(fēng)格，創(chuàng)造出多個(gè)版本的場(chǎng)景。

例如，游戲開(kāi)發(fā)者可以使用這些生成式 AI 功能加速開(kāi)放世界環(huán)境設(shè)計(jì)，或創(chuàng)建角色的服裝等。建筑師可以在不同的照明環(huán)境中嘗試不同風(fēng)格的建筑立面設(shè)計(jì)。

使用 NVIDIA Picasso

構(gòu)建生成式 AI 服務(wù)

這些符合物理學(xué)的材質(zhì)生成功能都將在 NVIDIA Picasso 中提供。NVIDIA Picasso 是一個(gè)云平臺(tái)，企業(yè)能夠在其上構(gòu)建、優(yōu)化和微調(diào)用于視覺(jué)內(nèi)容的生成式 AI 基礎(chǔ)模型。

借助 Picasso，內(nèi)容提供商能夠基于完全授權(quán)的版權(quán)數(shù)據(jù)開(kāi)發(fā)并訓(xùn)練生成式 AI 工具和服務(wù)。Picasso 隸屬于NVIDIA AI Foundations，NVIDIA AI Foundations 是一套模型制作服務(wù)，旨在推動(dòng)生成式 AI 在文本、視覺(jué)內(nèi)容和生物學(xué)領(lǐng)域的應(yīng)用。

在 SIGGRAPH 主題演講中，NVIDIA 創(chuàng)始人兼首席執(zhí)行官黃仁勛還宣布了一項(xiàng)新的 Picasso 功能——根據(jù)簡(jiǎn)單的文本或圖像提示生成逼真的 360 HDRi 環(huán)境貼圖，并以此為 3D 場(chǎng)景增色。