網友評分: 5分
GauGAN是一款非常實用的神經網絡作圖軟件,有了這款軟件,我們就可以利用生成的對抗網絡將語意分割圖轉換為逼真的圖像,能夠將人類的繪畫方式和過程進行編譯,在幾秒鐘內繪制出草圖,并將其轉換為逼真的照片,非常方便快捷。
新手畫家可能會用畫筆在畫布上畫畫,目的是創作一幅壯美的日落景觀圖——崎嶇的、白雪覆蓋的山峰倒映在清澈的湖泊中——但最終畫出來的只不過是一些看起來更像多色墨水點的東西。
但是,由 Nvidia Research 開發的深度學習模型卻恰恰相反:它可以輕松地將粗糙的涂鴉變成照片級的寫實杰作。該工具利用生成的對抗網絡(GANs)將語意分割圖轉換為逼真的圖像。
這款使用該模型的交互式應用程序,輕輕松松地就達到了后印象派畫家的水平,它被命名為 GauGAN。
GauGAN 可以為從建筑師、城市規劃者到景觀設計師和游戲開發商的每個人提供一個強大的工具來創建虛擬世界。有了一個能夠理解現實世界的人工智能,這些專業人員可以更好地設計出想要的原型,并快速改變它們。
NVIDIA 應用深度學習研究院副總裁 Bryan Catanzaro 說:「用簡單的草圖進行頭腦風暴設計要容易得多,而且這項技術能夠將草圖轉換成高度逼真的圖像。」
Catanzaro 將 GauGAN 背后的技術比作「智能畫筆」,它可以在粗略的語意分割圖(即顯示場景中對象位置的高級輪廓)中填充細節。
GauGAN 使用戶可以畫出語意分割圖,并合成自己需要的場景,其中,這些分割圖都需要相應的標簽,如天空、大?;蛘哐?/p>
經過 100 萬張圖片的訓練,深度學習模型通過結果來填充景觀:在池塘中畫畫,附近的元素如樹木和巖石將在水中映射。將一個段標簽從「草地」換成「雪」,整個圖像將變為冬季場景,原來枝繁葉茂的樹木則變成了不毛之地。
Catanzaro 說:「這就像一幅彩色的圖畫,描繪了一棵樹在哪里,太陽在哪里,天空在哪里?!谷缓?,神經網絡能夠根據對真實圖像的了解,填充所有細節和紋理,以及反射、陰影和顏色。
GaoGAN 背后的技術來自來自英偉達和 MIT 的研究團隊,成員包括英偉達的 Ting-Chun Wang、劉明宇(Ming-Yu Liu),Taesung Park (當時在英偉達實習),以及來自 MIT 的朱俊彥(Jun-Yan Zhu)。
英偉達再出黑魔法GauGAN:憑借幾根線條,草圖秒變風景照
草圖秒變風景照,英偉達神筆馬良GaoGAN終于開源了
昨天,關于GaoGAN又有新的進展,論文作者之一劉明宇在Tw itter上宣布,GaoGAN軟件開放Beta測試,測試采用網頁版,完全公開,無需注冊和申請。也就是說,之前我們只能看著動圖和說明視頻驚嘆,而現在可以親自動手當一次“神筆馬良”了。當畫家,從未變得如此簡單!
從GaoGAN的測試界面來看,與之前英偉達放出的Demo和視頻介紹中幾乎完全一樣。只需要首先點擊屏幕下方的服務條款前面的勾,就可以盡情作畫啦。
軟件界面上方支持調節畫筆的粗細,左方可以選擇風景材質類型,比如大山、河流、森林、沙漠海洋等,下方支持更換背景。如果你不會玩,可以看看這個視頻,GaoGAN的開發者們手把手教你怎么玩!
總之你只管涂只管畫就是,剩下的全交給它就是了。只要會畫簡筆畫,GaoGAN就能讓你找到一種當藝術家的感覺,畢竟GaoGAN這個名字就容易讓人聯想到那位和梵高相愛相殺的19世紀著名后印象派繪畫大師高更。