作為NVIDIA Studio創(chuàng)作套裝的一部分,NVIDIA Canvas應(yīng)用現(xiàn)在推出了一個免費測試版,RTX顯卡用戶都可以使用這個實時繪畫工具“GauGAN”。
通過使用深度學(xué)習(xí)模型,它可以讓創(chuàng)作者可以用素材而非顏料進行繪畫,利用AI將筆觸變成栩栩如生的圖像,將粗略的草圖變成逼真的場景,涂鴉瞬間就能變成風(fēng)景畫。
在作畫的過程中,它還會實時顯示攝影級效果,創(chuàng)作者無需等待,即可實時查看視覺設(shè)計。
創(chuàng)作過程中,用戶可以先用現(xiàn)實世界的素材勾勒出簡單的形狀和線條,例如草或云,AI模型就會立即以令人驚嘆的結(jié)果填充屏幕。
快速畫出四個形狀和一座令人驚嘆的山脈,再多畫幾條線,就顯現(xiàn)出一片美麗的田野。
畫一個池塘,附近的樹木和巖石等元素都會成為水中的倒影。
換一種素材,把白雪換成綠草,整個畫面就從冬日仙境變成熱帶天堂。
NVIDIA Canvas擁有9種風(fēng)格可選,包括修改畫作的外觀和感覺,并擁有天空、山脈、河流、石頭等15種不同素材,還支持在不同的圖層上作畫,以保持元素的分離。
它還提供風(fēng)格過濾器,讓圖像符合特定畫家的風(fēng)格,更具個性而不是千篇一律。
作品還可以保存為psd文件,再導(dǎo)入Adobe Photoshop,繼續(xù)完善,或者與其它藝術(shù)作品相結(jié)合。
當(dāng)然,NVIDIA Canvas的目的不是讓人涂鴉玩兒,而是幫助設(shè)計師快速構(gòu)思,節(jié)省時間,比如點幾下鼠標(biāo)就生成精美的效果渲染圖,方便最終定稿,而無需反復(fù)修改。
至于技術(shù)原理,NVIDIA Canvas采用了生成式對抗網(wǎng)絡(luò)(generative adversarial networks/GAN)的AI形式,包含一個生成器、一個鑒別器。
生成器的目的是將簡筆畫轉(zhuǎn)化為風(fēng)景畫,鑒別器則知道真實的池塘和湖泊會有倒影,并指導(dǎo)生成器生成一個栩栩如生的池塘或湖泊。
GAN已經(jīng)在NVIDIA DGX系統(tǒng)上使用超過500萬張圖像進行了訓(xùn)練,才獲得如此神奇效果。