在3月18日開幕的NVIDIAGPU技術(shù)會(huì)議(GTC)上,NVIDIA公布了其最新的圖像處理研究成果—GauGAN,一種基于生成的對(duì)抗性網(wǎng)絡(luò)技術(shù),能夠?qū)⒎指畹牡貓D轉(zhuǎn)換成真實(shí)的照片。
就算你是一位毫無繪畫基礎(chǔ)的新手,“GauGAN”也可以將你的簡單涂鴉同步成精美風(fēng)景照片。
“GauGAN”收集了超過100萬張圖片作為數(shù)據(jù)基礎(chǔ),使用深度算法讓AI進(jìn)行學(xué)習(xí),最終能夠在像素級(jí)的精度上分析圖像,分割,并生成新的圖片。“GauGAN”還擁有大量的選項(xiàng),可以調(diào)整場景,元素構(gòu)成,甚至還可以根據(jù)這些內(nèi)容調(diào)整光照。
GauGAN并非簡單的更換形狀和外觀,而是使用巖石、山脈、天空或者水等圖像根據(jù)用戶的區(qū)域輪廓進(jìn)行填充。除了考慮繪圖的原始形狀之外,GauGAN還考慮了場景中的其他物體,例如將一片草地變成一片池塘,那么就會(huì)在水體的周圍表面產(chǎn)生光線反射。
那么這項(xiàng)技術(shù)是怎樣實(shí)現(xiàn)的呢?NVIDIA的研究專家部署了生成對(duì)抗網(wǎng)絡(luò),也就是GauGAN中的“GAN”。生成網(wǎng)絡(luò)在創(chuàng)建圖像之后,會(huì)交給鑒別網(wǎng)絡(luò)進(jìn)行審查。鑒別網(wǎng)絡(luò)會(huì)根據(jù)現(xiàn)實(shí)生活中的真實(shí)拍攝照片進(jìn)行學(xué)習(xí),并一個(gè)像素一個(gè)像素的進(jìn)行引導(dǎo)。
GauGAN這項(xiàng)技術(shù)的應(yīng)用場景也非常明顯,就是給建筑師、城市規(guī)劃者到景觀設(shè)計(jì)師和游戲開發(fā)商提供一個(gè)強(qiáng)大的工具來創(chuàng)建虛擬世界。有了GauGAN,這些專業(yè)人員就能更好地設(shè)計(jì)出想要的原型,并快速改變它們。
NVIDIA應(yīng)用深度學(xué)習(xí)研究院副總裁BryanCatanzaro 說:「用簡單的草圖進(jìn)行頭腦風(fēng)暴設(shè)計(jì)要容易得多,而且這項(xiàng)技術(shù)能夠?qū)⒉輬D轉(zhuǎn)換成高度逼真的圖像?!?/p>
當(dāng)然這項(xiàng)技術(shù)對(duì)于我們普通人來說也非常有趣,對(duì)于我們這種完全沒有繪畫基礎(chǔ)的人來說,GauGAN只需要簡單的勾勒出大致倫敦,并使用油漆桶工具對(duì)區(qū)塊進(jìn)行著色,并選擇“瀑布”、“雪景”、“群山”等場景,就能輕松獲得一張非常逼真的風(fēng)景照片。這樣想想是不是還挺有趣的?
-
NVIDIA
+關(guān)注
關(guān)注
14文章
5627瀏覽量
109874 -
圖像處理
+關(guān)注
關(guān)注
29文章
1342瀏覽量
59588 -
深度學(xué)習(xí)
+關(guān)注
關(guān)注
73文章
5599瀏覽量
124457
原文標(biāo)題:將簡單涂鴉變成精美照片,看NVIDIA是怎么做的
文章出處:【微信號(hào):kejimx,微信公眾號(hào):科技美學(xué)】歡迎添加關(guān)注!文章轉(zhuǎn)載請(qǐng)注明出處。
發(fā)布評(píng)論請(qǐng)先 登錄
ADI攜最新成果亮相NVIDIA GTC 2026
思特威于ISSCC 2026發(fā)表論文研究成果
西井科技攜手同濟(jì)大學(xué) 三篇AI研究成果入選頂會(huì)ICLR 2026
普華基礎(chǔ)軟件開源小滿入選2025中國汽車ESG案例研究成果
2026年NVIDIA研究生獎(jiǎng)學(xué)金名單公布
NVIDIA DGX Spark助力構(gòu)建自己的AI模型
奧比中光3D視覺技術(shù)賦能IROS 2025研究成果
NVIDIA展示機(jī)器人領(lǐng)域的研究成果
思必馳與上海交大聯(lián)合實(shí)驗(yàn)室研究成果入選兩大頂級(jí)會(huì)議
Nullmax端到端自動(dòng)駕駛最新研究成果入選ICCV 2025
后摩智能與高校合作研究成果榮獲ISCA 2025最佳論文獎(jiǎng)
NVIDIA在ICRA 2025展示多項(xiàng)最新研究成果
佛山智能裝備院與華數(shù)機(jī)器人在具身智能工業(yè)機(jī)器人領(lǐng)域的研究成果
NVIDIA公布了其最新的圖像處理研究成果—GauGAN
評(píng)論