提到迪士尼,很多小夥伴們腦海中是不是第一時間浮現出了自己最喜歡的角色的模樣?
那你有沒有好奇過,如果自己進入迪士尼世界會是什麼模樣呢?
現在,機會來了!
近日,一款名為「Toonify Yourself」的工具風靡海外。只要你動動手指上傳自己的照片,就可以獲得迪士尼同款畫像,圓你一個迪士尼夢!
該軟體面世後,各種名人漫畫形象在外網上頻頻刷屏。
二次元畫像在保留了三次元真人特徵的基礎上
又增添了一絲獨屬於動畫的「萌感」
尤其是宮崎駿爺爺「變身」後的形象
真是非常符合他溫暖動人的畫風了!
當迪士尼風格
遇上熱門表情包!?
那麼這款「神仙」軟體是如何煉成的呢?
這就要從兩位技術宅小哥哥Justin Pinkney和Doron Adler說起了。
根據Doron Adler的介紹,Toonify Yourself採用的是混合網絡(Blended Network)機制,主要由兩部分模型來完成:StyleGAN Model 和 Blended Model。
首先,通過預訓練模塊對數據進行學習,之後再使用處理模塊進行圖像的混合生成。
為了保證卡通效果,他們二人收集了迪士尼、皮克斯、夢工廠等動畫製作廠商的約300多張漫畫圖像作為學習數據集。
接下來,經過人臉微調的圖像會進入 Blend Model 的處理階段。
由於 StyleGAN 的結構,模型中的不同層以不同的方式影響生成人物的外觀。低解析度層決定頭部姿態和人臉形狀,高解析度層則控制光線和紋理等細節。
Doron 使用的 Layer Swapping 腳本從原始模型中提取了高解析度層,從 StyleGAN Model 微調模型中提取低解析度層,因此,最終得到了具有卡通人臉結構且具備照片級逼真渲染效果的混合模型。
Toonify Yourself的另一位開發者Justin 曾是一名物理學家,現在英國 MathWorks 擔任軟體顧問,負責算法開發、模型訓練以及組織軟體開發實踐。
Justin 稱該工具的誕生基於自己和Doron早期的一些實驗。當時他想出了一些混合StyleGAN模型的新方法,希望用這種方法來製作逼真的浮世繪人像。
這和現在的「變身迪士尼動畫臉」的方法不同,但思路一致。
賈斯汀相信人工智慧和深度學習技術可以做的事情還有很多可能性,他認為現階段人們只是在摸索。
「現在,我們得到了DeepAI的大力支持,他們正在為我們運行神經網絡後端。儘管DeepAI現在承擔了大部分繁重的工作,但運行該站點仍然需要付出一些成本,對於那些在Ko-fi上為我們提供支持的人,我們深表感謝。」
「由於有大量代碼是開源的,通過Google Collab就可以訪問GPU資源,這意味著創作者和藝術家可以真正輕鬆地嘗試這些東西。」
感興趣的大家不妨來試試吧!
一鍵get你的迪士尼畫像~
https://toonify.justinpinkney.com/
(注意:因用戶訪問量過大,也許出現卡頓或其他情況,請耐心等待一段時間~)