NVIDIA的GauGAN Beta比預期的還厲害耶

原以為今年三月介紹過、那個於GTC 2019中所展示的風景生成工具”GauGAN”僅是個Demo,
未來頂多作為商用軟體套裝功能之一推出,大概不會有機會能使用到;
直到前幾日讀了iThome的”GauGAN AI作畫技術大公開“一文,
方才發現原來”GauGAN”已經於六月開放公測,只要到NVIDIA Research網站便能免費嘗鮮,
既然如此,當然要好好去看看這以”生成對抗網路(generative adversarial networks, gan)”為基礎,
還利用了超過百萬張圖片訓練所形成的模型到底有多厲害了 ww

GauGAN Beta網址: http://nvidia-research-mingyuliu.com/gaugan/
GauGAN NVIDIA
使用介面和三月的影片有些不同,但基本元素都還在,
左方風景筆刷的選擇甚至比當初的Demo還要豐富,繪圖工具也多了一些;
個人隨便用風景筆刷塗抹了一個畫工幼稚園等級、水中長出山的詭異圖樣,
選擇景觀風格並點選轉換後─還真的瞬間就能生成頗為擬真的風景圖片!
GauGAN NVIDIA
雖然一些細部(尤其是有加入房子或橋等人工物的部份)破綻滿大的,
但純天然物件組成的圖片品質大多很棒,水波倒影與物件陰影十分細緻不說,
配合風景圖片產生的各種風格亦非常自然,簡直到了難以辨識真假的地步,實在頗為令人驚艷呢 ww

GauGAN Beta除了自己畫以外,還提供自行上傳圖樣(Upload Segmentation Map)、
上傳風景圖片轉圖樣(Upload Landscape Image)和上傳風格圖片(Upload Custom Style Filter)等功能,
個人上傳了一張自己拍攝的Kilchurn Castle遠景當轉圖樣的範例:
GauGAN NVIDIA Segmentation Map
可明顯看到,其辨識並產生的Segmentation Map確實很精準,
不過再轉換後出來的照片就不是那麼接近原圖了…..GauGAN對人造建築的訓練似乎還需加強 XD

之前的展示影片中有”草地轉換成雪地後,樹木狀態也會隨著對應季節而更替”的功能,
然而這項內容感知的運作似乎滿隨機的,成果不一定會符合預期:
GauGAN NVIDIA
像個人選擇了雪地與花卉,就沒有展現出於冬季應枯萎凋謝的花朵,
反而是來個大片薰衣草在白雪靄靄的山丘旁盛開的奇景…..
雖然世上哪邊或許真有這麼個景觀(又剛好被加入訓練素材),但還是很違反常識 XD

GauGAN目前還只是公開測試版,功能算得上滿不錯,但也僅是能拿來玩玩的程度,
畢竟下載回來的圖片尺寸只有512×512像素,用途不大,且在筆刷交界處的破綻仍很明顯;
用以作為概念草圖或許足夠,但要拿來直接出靜幀、取代VUE一類景觀生成軟體,
恐怕還有段距離要走…..只是從NVIDIA那麼大一間科技公司卻連測試網站都沒加SSL來看,
實在讓人擔心是否真的有打算在將來把這東西認真發展好呢?

迴響: 0 則迴響

文章分類:科技&研究

標籤: ,

發表迴響

這個網站採用 Akismet 服務減少垃圾留言。進一步瞭解 Akismet 如何處理網站訪客的留言資料