這下真的是萬物皆可 JOJO 化了！
本來就神采飛揚的馬斯克，下一刻更是仿佛要直接“我不做人啦！”
世界名畫蒙娜麗莎神秘優(yōu)雅的微笑，似乎也變得 JO 灼了起來……
再來個同一次元的…… 團長你在做什么啊團長！
而上面這些效果只要打開網(wǎng)頁 Demo，點擊上傳任意本地圖片就能實現(xiàn)。
這就一下子引來了大批網(wǎng)友的圍觀，不僅推特熱度 800+，在線試玩的抱抱臉（Hugging Face）還排起了隊，一張照片最多要等四五分鐘。
還不僅 JOJO 一種風格，還有迪士尼風、英雄聯(lián)盟風…… 輸入任意一種風格的圖像，都可以將這種風格快速應用到新的圖片上：
看這楚楚可憐的卡姿蘭大眼睛，以及天真無邪的公主笑，我只想說…… 老馬，快收了神通吧！
在線 JO 化任意人像
看了上面的演示，是不是自己也想整一個 JO 化臉？
我們用開發(fā)者提供的 Hugging Face 和 Colab 來試一下。
首先是在線網(wǎng)頁版的 Hugging Face，點擊左邊框中空白處就能把任意本地照片丟進去：
再點 Submit，等個十幾秒…… 站在你面前的不是別人，而是 ko no 肌肉金輪大司馬噠！
這個方法點開鏈接就能即傳即玩。不過雖然簡單快捷，但偶爾還是要排隊等個幾分鐘：
所以強烈安利 colab 版本，向 test_input 文件夾中導入任意圖像，比如我們這里放入一張冰冰，然后點擊運行：
再繼續(xù)運行下面的生成模塊：
把我的冰冰女神 JOJO 化，這也在你的算計之中嗎 GAN !
而且，colab 中還提供了另一種玩法：導入一張任意風格的圖片，自己制作一個 XX 風格生成器。
嗯…… 這不得整一個提瓦特大陸版的馬斯克？
上傳一張老馬的正經(jīng)圖：
再在 style_images 文件夾中上傳一張原神風格的人像：
（上傳偏二次元風格的圖像可能會出現(xiàn)“找不到人臉”的情況，需要多試幾張圖）
然后進行微調(diào)，等待幾分鐘，再點運行：
這個堅毅的眼神，再配上原圖里老馬的那個遠眺抱胸的姿勢，感覺下一秒就能來句天動萬象了！
通過 GAN 反轉(zhuǎn)獲取近似風格
那么，這種方法到底是怎么做到只參考一張圖片，就能完美學習其美術(shù)風格，再將其運用到其他圖像上呢？
我們一起來看看這個叫做 JoJoGan 的模型。
它主要是通過 GAN 反轉(zhuǎn)（inversion）來獲取近似風格的，主要工作流程分四步：
通過 GAN 將參考風格圖像反轉(zhuǎn)為近似的配對訓練數(shù)據(jù)，得到相應的風格化的代碼；
根據(jù)風格化代碼生成真實的人臉圖像，并與參考風格圖像相匹配，形成成對的數(shù)據(jù)作為配對訓練集；
基于這些成對的訓練數(shù)據(jù)，對 StyleGAN 進行微調(diào)；
使用微調(diào)后的 StyleGAN 生成新的樣本。
開發(fā)者表示，這一模型非常關(guān)注零監(jiān)督下的風格細節(jié)，并且在不同風格中具有良好的通用性，能夠輕松泛化到其他風格的圖像上。
從二次元到技術(shù)宅
開發(fā)者 Min Jin Chong 也是我們的老熟人了，之前曾經(jīng)搞過二次元老婆生成器：
Min Jin Chong 本人本科畢業(yè)于美國伊利諾伊大學厄巴納-香檳分校（UIUC），后繼續(xù)留校讀博，主要研究領(lǐng)域為機器學習、計算機視覺和圖像生成。
此前他曾在字節(jié)實習過 3 個月，現(xiàn)在與兩位同校學生一起創(chuàng)立了一個叫做 Style Space 的時尚購物應用，允許用戶在虛擬空間中試用和購買產(chǎn)品。
而他的導師 David Forsyth 則是一位 CV 領(lǐng)域的大牛，曾與 Jean Ponce 著有計算機視覺經(jīng)典教材《Computer Vision：A Modern Approach》：
Hugging Face 在線試玩：
https://huggingface.co/spaces/akhaliq/JoJoGAN
colab 在線試玩：
https://colab.research.google.com/github/mchong6/JoJoGAN/blob/main/stylize.ipynb#scrollTo=LCLWiXoXwcJb
論文鏈接：
https://arxiv.org/abs/2112.11641
參考鏈接：
[1]https://twitter.com/ak92501/status/1473522187491590148
[2]https://github.com/mchong6/JoJoGAN
廣告聲明：文內(nèi)含有的對外跳轉(zhuǎn)鏈接（包括不限于超鏈接、二維碼、口令等形式），用于傳遞更多信息，節(jié)省甄選時間，結(jié)果僅供參考，IT之家所有文章均包含本聲明。