GauGAN2利用深度學(xué)習(xí)模型將簡(jiǎn)單的書(shū)面短語(yǔ)或句子變成逼真的繪畫(huà)杰作

一幅價(jià)值連城的畫(huà)現(xiàn)在只需要說(shuō)幾個(gè)字就能創(chuàng)造出來(lái)，這都要?dú)w功于NVIDIA Research備受歡迎的AI繪畫(huà)Demo最新版本——GauGAN2。

GauGAN背后的深度學(xué)習(xí)模型讓任何人都能將自己的想象力轉(zhuǎn)化為逼真的繪畫(huà)作品，而且比之前更加容易。只需輸入一個(gè)短語(yǔ)，比如“海灘上的日落”，AI就會(huì)實(shí)時(shí)生成這個(gè)場(chǎng)景。如果再添加一個(gè)形容詞，比如“巖石海灘的日落”，或?qū)ⅰ叭章洹睋Q成“下午”或“雨天”，基于生成式對(duì)抗網(wǎng)絡(luò)（GAN）的模型就會(huì)立即修改繪畫(huà)。

只要按下一個(gè)按鈕，用戶就可以生成分割圖，也就是顯示場(chǎng)景中物體位置的總輪廓圖。用戶可以切換到繪畫(huà)模式，用天空、樹(shù)木、巖石和河流等標(biāo)簽所對(duì)應(yīng)的粗略涂鴉來(lái)調(diào)整場(chǎng)景并通過(guò)智能畫(huà)筆將這些圖畫(huà)融入到圖像中。

現(xiàn)在，用戶可以在NVIDIA AI Demos中體驗(yàn)全新的GauGAN2文本-圖像轉(zhuǎn)換功能。網(wǎng)站訪客可以通過(guò)NVIDIA Research的最新Demo來(lái)體驗(yàn)AI。借助各種文字提示和草圖繪畫(huà)的功能，用戶可以通過(guò)GauGAN2更加快速地創(chuàng)建和自定義場(chǎng)景并進(jìn)行更精細(xì)的控制。

“惜字如金”的AI

GauGAN2將分割映射、圖像修復(fù)和文本-圖像生成功能集成于一個(gè)模型中，使其成為了一個(gè)可以通過(guò)混合文字和圖畫(huà)來(lái)創(chuàng)造逼真藝術(shù)作品的強(qiáng)大工具。

該Demo首次將文字、語(yǔ)義分割、涂鴉、風(fēng)格等多種形式融入到一個(gè)生成式對(duì)抗網(wǎng)絡(luò)（GAN）框架中，它可以更快、更輕松地將藝術(shù)家的設(shè)想變成高質(zhì)量的AI生成圖像。

用戶不需要畫(huà)出想象中的每一個(gè)場(chǎng)景元素，而是可以輸入一個(gè)簡(jiǎn)短的短語(yǔ)（如白雪皚皚的山脈）來(lái)快速生成圖像的關(guān)鍵特征和主題。然后可以使用草圖功能來(lái)自定義起點(diǎn)，比如使某座山峰變得更高、在前景中增加幾棵樹(shù)或在天空中增加云朵等。

這一Demo不僅僅能創(chuàng)造逼真的圖像，藝術(shù)家們還可以用它來(lái)描繪想象中的場(chǎng)景。

想象一下，您將可以再現(xiàn)《星球大戰(zhàn)》系列中的標(biāo)志性星球——塔圖因星有兩個(gè)太陽(yáng)的景觀。您所需要做的僅僅是使用“沙漠丘陵的太陽(yáng)”這個(gè)短語(yǔ)來(lái)創(chuàng)建一個(gè)起點(diǎn)，然后再快速勾畫(huà)出第二個(gè)太陽(yáng)。

這一流程可以反復(fù)進(jìn)行，用戶在文本框中輸入的每一個(gè)字都會(huì)為AI所創(chuàng)造的圖像增加更多的內(nèi)容。

位于GauGAN2后臺(tái)的AI模型由NVIDIA Selene超級(jí)計(jì)算機(jī)使用1000萬(wàn)張高質(zhì)量景觀圖像訓(xùn)練而成。該計(jì)算機(jī)是全球最強(qiáng)大的10臺(tái)超級(jí)計(jì)算機(jī)之一，搭載NVIDIA DGX SuperPOD系統(tǒng)。研究者所使用的神經(jīng)網(wǎng)絡(luò)可以學(xué)習(xí)單詞與對(duì)應(yīng)視覺(jué)效果之間的聯(lián)系，比如“冬天”、“霧天”或“彩虹”等。與目前專門用于文本-圖像轉(zhuǎn)換或分割圖-圖像轉(zhuǎn)換應(yīng)用的最先進(jìn)模型相比，位于GauGAN2后臺(tái)的神經(jīng)網(wǎng)絡(luò)能夠生成種類更多、質(zhì)量更高的圖像。

GauGAN2研究演示展示了未來(lái)為藝術(shù)家提供強(qiáng)大圖像生成工具的可能性，比如基于GauGAN技術(shù)并向所有NVIDIA RTX GPU用戶開(kāi)放下載的NVIDIA Canvas應(yīng)用。

NVIDIA Research在全球擁有200多名科學(xué)家，他們專注于AI、計(jì)算機(jī)視覺(jué)、自動(dòng)駕駛汽車、機(jī)器人和圖形學(xué)等領(lǐng)域。

您可以充分參考和利用 NVIDIA 模塊化參考架構(gòu)NVIDIA DGX SuperPOD，它由 NVIDIA DGX A100 系統(tǒng)和NVIDIA生態(tài)系統(tǒng)中值得信賴的IT 解決方案供應(yīng)商提供支持，可助力構(gòu)建您的現(xiàn)代 AI 數(shù)據(jù)中心基礎(chǔ)架構(gòu)，引領(lǐng)您的AI 轉(zhuǎn)型之路。

原文標(biāo)題：請(qǐng)為我畫(huà)一幅畫(huà)：NVIDIA Research展示GauGAN AI藝術(shù)與文字之間的互動(dòng)

文章出處：【微信公眾號(hào)：NVIDIA英偉達(dá)】歡迎添加關(guān)注！文章轉(zhuǎn)載請(qǐng)注明出處。