一鍵變身漫畫!抖音特效火上熱搜 背後技術揭秘

2020-12-05 驅動之家

昨天,李榮浩又因為眼睛小上熱搜了。

在名為 #特效都整不大李榮浩的眼睛# 的話題下面,有一個李榮浩楊丞琳二人結婚照的換臉視頻,只見換臉後的李榮浩眼睛完全變成了一條線,孫紅雷也轉發微博「五十步笑百步」:

這個特效太過分了,李先生,有人黑你!

對此,網友的評論清一色成了「哈哈哈哈哈」。

細心的人可能留意到了視頻裡的抖音 APP logo。沒錯!上面這個對小眼睛群體不怎麼友好的功能正是抖音新上線的「變身漫畫」特效。

而在這樣的真人一鍵變身漫畫的效果背後,是生成式對抗網絡 GAN(Generative Adversarial Networks)。 

一鍵打破次元壁

當前,抖音「變身漫畫」特效榮登熱門挑戰榜的「本周實時榜」(2002 年 6 月 15-21 日)TOP 1,已有約 867.2 萬用戶使用。

其中,不少明星拍了同款視頻,玩法也是五花八門。

比如陳赫拿出神似蒼蠅拍的「神秘鑰匙」解除二次元封印。

鄧紫棋擦玻璃換臉。

張藝興來一段 rap 的功夫已經不知道用手勢在次元之間穿梭了多少回了。

進入二次元後,明星們的髮型、五官等細節「神還原」,同時還多了一絲俏皮靈動。

不過,把真人變成漫畫畫風並不稀奇了。近幾年特效拍照 APP 層出不窮,用戶想把圖片、視頻變成漫畫風、古風、手繪風、油畫風,甚至想換性別、變年齡,都不是問題。

生成式對抗網絡 GAN

提到換臉,就繞不開一項技術——生成式對抗網絡 GAN。 

雷鋒網(公眾號:雷鋒網)此前曾報導,GAN 作為一種深度學習模型,是機器學習中一個較新的概念,首次出現於 2014 年 10 月前谷歌大腦著名科學家 Ian Goodfellow 及其團隊發表的論文《對抗式生成網絡》(Generative Adversarial Networks)中。

機器學習的模型分為生成模型(Generative Model)和判別模型(Discriminative Model)兩種,顧名思義,其各自的功能分別是根據數據集生成和判斷。

而 Ian Goodfellow 之所以能成為「GANs 之父」,就在於創造性地提出了一個通過對抗(Adversarial)估計生成模型的概念,同時訓練生成模型和判別模型,讓二者進行對抗,生成模型要儘可能地生成真實的圖片去欺騙判別模型,與此同時判別模型也要儘量把生成模型生成的圖片和原數據集區分開。

這一過程就像遊戲中的兩個玩家進行 battle,一開始兩臉懵逼,最後「真理越辯越明」。這種機器之間自發的相互學習,可以說是非常智能了。

而 GAN 的種類也不少,其中最常見的比如說 Cycle GAN。

實際上,CycleGAN 是人臉轉換早期的一個重要嘗試,能從源轉換到目標,也能進行反向轉換,從而便捷地學習了兩個類別之間的轉換關係,也更好地保證了轉換後的圖像品質。

如上圖所示,能把斑馬變成馬,那麼即便是換個動作,馬也能再次轉換成斑馬;同理,夏天能變冬天,換了場景後冬天也可以變回夏天。

雖然上文所說的抖音動漫風換臉特效並未公開具體的技術信息,但此前將人臉變為漫畫形象的嘗試的確用到了 CycleGAN,相關論文也在 2019 年 7 月登上了預印本平臺 arXiv。

值得一提的是,這項研究利用的是所謂的 landmark assisted CycleGAN。

據論文介紹,這裡的「landmark」不是我們經常說的「地標」,而是指面部特徵,所以我們可以將這種技術理解為 CycleGAN 特別版——「有人臉特徵輔助的 CycleGAN」。

技術如何,還是看看效果(雷鋒網註:右二列為 CycleGAN 生成;右一列由有人臉特徵輔助的 CycleGAN 生成)。

現實中的美女變成了二次元小蘿莉。

型男生成的漫畫形象看上去也不錯。

此外,也有研究團隊曾基於 GAN,利用面部特徵,將低解析度圖像轉換為高解析度圖像。感覺多年的老近視被治好了!

看到這裡是不是想感嘆一句真神奇?

其實還有更神奇的,比如大變活人。

這是西班牙一家網際網路西洋棋棋盤製造商 REGIUM 網站上的員工個人信息頁面,看上去似乎並沒有什麼異常。但實際上,框出來的四位工程師都是「假人」,現實生活中並不存在。

雷鋒網了解到,這些「人造人」來自國外一個造臉網站 this person does not exist.com,而這些照片也都是基於 GAN。

不過,隨著換臉技術出現的還有諸多問題——比如曾經一夜爆火、三天涼涼的 ZAO APP 和在全世界範圍內臭名昭著的 Deepfake,都引起了各界的擔憂。

怎樣合理地利用這類換臉技術,是個需要思考的問題。

- THE END -

#抖音

原文連結:雷鋒網 責任編輯:隨心

相關焦點

  • 抖音上很火的變漫畫特效怎麼開 漫畫臉特效開啟步驟匯總
    首頁 > 問答 > 關鍵詞 > 抖音最新資訊 > 正文 抖音上很火的變漫畫特效怎麼開 漫畫臉特效開啟步驟匯總
  • 抖音變身漫畫特效在哪 手把手教你抖音變身漫畫人物怎麼拍
    抖音變身漫畫特效在哪 手把手教你抖音變身漫畫人物怎麼拍時間:2020-06-22 19:33   來源:騰牛網   責任編輯:沫朵 川北在線核心提示:原標題:抖音變身漫畫特效在哪 手把手教你抖音變身漫畫人物怎麼拍 抖音變身漫畫特效是現在很火爆的,我們可以用自己的圖片,一秒變身成漫畫圖片,非常有意思。
  • 從三次元變身紙片人?這款百度AI二次元技術你還不衝!
    這麼說吧,微博超話#尋找最美漫畫臉#被大家閱讀了1.8億次,還有8萬條海量評論一同蓋樓,使用二次元特效拍攝製作的短視頻累計播放量2487萬,甚至上了熱搜。點開特效,手機中的自己就從3D變成2D,不僅保留了五官、臉型等個性特徵,而且還可以跟隨動作、表情的改變實時變化,輕鬆變身漫畫世界的主人公。
  • 抖音變身奧義變身教程 抖音漫畫臉變身技巧方法
    抖音變身奧義怎麼變?最近抖音推出了一款特效,叫變身奧義,只要在臉上畫一些符號,就可以變身漫畫人物,那麼怎麼才能變成自己喜歡的漫畫人物的造型呢?下面小編就為玩家帶來抖音變身奧義變身教程,一起來看看吧。最近抖音推出了一款特效,叫變身奧義,只要在臉上畫一些符號,就可以變身漫畫人物,那麼怎麼才能變成自己喜歡的漫畫人物的造型呢?下面小編就為玩家帶來抖音變身奧義變身教程,一起來看看吧。
  • 抖音大頭漫畫特效在哪?怎麼錄製?ios漫畫製作
    抖音大頭漫畫特效在哪?怎麼錄製? ios漫畫製作;老郭發現最近這段時間抖粉們在刷抖音的時候,總是能刷到一些卡通動漫大頭特效的視頻,這個新花樣玩法很炫酷,現在已然成了抖音熱門,因此受到抖粉們的熱捧,抖粉們發現在抖音系統自帶的特效裡並沒有這個,那麼,這個卡通動漫大頭特效是怎麼錄製的呢?
  • 一張照片變身6種「手繪」特效|手機一鍵生成
    經常能看到一些很美的「手繪」圖片——彩鉛、油畫、水墨畫、素描、漫畫等效果。之前可能需要專業的PS才能達到。如今超強大的「手機後期軟體」完全可以一鍵生成, so easy!▼ 油畫、漫畫效果:▼ 水墨畫、素描鉛筆畫效果:▼ 蠟筆、水粉畫效果:這種「手繪特效」同樣適合處理人像圖片。
  • 全民小視頻「一鍵動漫」火到日本,AI技術「出海」成熱潮
    在對照了中日女生拍照喜好、濾鏡、風格的差異後,中國女生還展示了全民小視頻App新推出的一款名為「一鍵動漫」功能的AI神器,成功吸引了日本博主和女生嘉賓的注意,紛紛感嘆於中國強大的AI技術和這款App逼真的二次元效果。
  • 抖音超火的「漫畫臉」頭像,製作教程來了!
    下載安裝好軟體,首次打開需要根據指引開啟攝像頭和訪問相冊的權限,然後找到「漫畫臉」的功能項,點擊「馬上變身」,選擇拍照或從手機相冊中上傳一張自拍照片。傳圖後,軟體系統會識別照片上的人臉,並自動框選,可以手動移動框選的位置,然後點擊「立即進入」,稍等數秒後就可以生成你的專屬漫畫臉了。
  • 抖音裡很火的小仙女特效怎麼拍 抖音魔法棒特效在哪裡
    18183首頁 抖音裡很火的小仙女特效怎麼拍 抖音魔法棒特效在哪裡 抖音裡很火的小仙女特效怎麼拍 抖音魔法棒特效在哪裡
  • 霸佔抖音熱搜TOP榜 陌陌夕西單曲《歐巴我不傻》火了
    其實,夕西不僅是在陌陌平臺上火的一塌糊塗,她在外站抖音平臺上也是榜上有名,她的單曲《歐巴我不傻》同時登上了抖音的熱搜榜和音樂榜,搜索量也是接近百萬大關。不得不說,厲害了我的夕西!在抖音平臺的熱搜榜上,夕西的這首《歐巴我不傻》憑藉著90.5萬的搜索量排名第11,在音樂榜上以62.6萬的使用次數排名第13,能夠入圍這兩大榜單,足以說明夕西的《歐巴我不傻》有多火。
  • 上熱搜!仙遊72歲的「小盧」火了……
    上熱搜!昨日,來自我縣度尾鎮的「銀髮」「小盧」上熱搜了。登上央視新聞、《環球人物》等多個知名媒體,微博引起了熱議,這位從木頭裡找到「爺回青」的「老二次元」,是今年72歲的盧正義,從今年5月開始,通過 B 站帳號「盧正義的雕刻時光」,上傳自己用紅木製作的各種 ACG(動畫、漫畫、遊戲縮寫)角色手辦,火了。目前粉絲143萬多。
  • 抖音大頭特效是什麼 抖音大頭特效一覽
    抖音大頭特效是什麼? 抖音大頭特效一覽。下面跟著小編一起來看看吧!抖音大頭特效是哪個?抖音大頭特效在哪裡?捏完臉後返回「簡訊閱讀」界面點擊左下角「相機」;在「視頻」拍攝裡找到「漫畫書
  • 解讀#丁真現象# 看文旅營銷如何低成本上熱搜、借流量,高回報
    導語:10S,四川甘孜理塘的藏族小夥丁真走紅網絡;100億,當紅頂流的背後掀起一場全國「混戰」。內容為王,用戶至上,政府參與、媒體引導、全民互娛、流量為王,狂瀾熱搜、霸屏各大傳播平臺,這個轟動全國的「丁真現象」,成為今年文旅營銷的「頂流」。
  • 抖音漫畫濾鏡特效功能在哪裡弄 怎麼拍圖文教程分享
    抖音漫畫濾鏡怎麼弄?現在還是有很多的用戶不知道這個要怎麼拍攝,今天為大家整理了相關的製作教程,不過首先你得確定一下你得手機是蘋果X或者最新的蘋果手機,蘋果7或者8,以及更低型號的蘋果手機還有安卓手機都是沒有這個功能的,下面就一起來了解下吧。
  • 靠追流行梗單日漲粉20萬,抖音動漫IP是藍海?
    我們分析了抖音頭部、腰部、尾部的典型帳號後,總結出幾點打造抖音爆款IP的小技巧,今天就分享給大家。01 動漫IP怎麼追流行梗抖音本質上是個網紅平臺,帥哥美女雲集。這也導致,話題榜上的內容,絕大多數都是真人出鏡。唱歌跳舞耍帥的內容讓很多動漫IP頭疼:我知道這個火,但動漫IP該怎麼追這個熱搜呢?其實也好追。
  • 被眾多明星pick的抖音寶寶特效,真的可愛爆了!
    被眾多愛豆pick是一種怎樣的體驗,讓抖音寶寶特效來告訴你!就連在舞臺上slay全場的吳亦凡,也開始用寶寶特效調皮高冷隨意切換,一秒酷蓋變奶蓋。自抖音寶寶特效上線以來,受到了眾多明星的偏愛。為了成為有趣、好玩的寶寶,明星們紛紛大開腦洞。
  • 抖音大頭特效是怎麼弄的 需iPhoneX版本以上的手機才可使用
    抖音上的「大頭特效」實際上並不是抖音自帶的特效,而是只有iPhoneX以上版本的iPhone手機才特有的功能,這個功能是iPhone獨有的,是因為一些網友將它放在了抖音上,才讓人誤以為是抖音上的特效。
  • 抖音最厲害的主播是誰 哪個主播最火揭秘
    抖音最厲害的主播其實排名都有浮動,但是以下主播雷打不動經常登頂小時榜。
  • 徐錦江又上熱搜了!大反派變身溫馨聖誕老人,網友:我全都要
    徐錦江又上熱搜了!大反派變身溫馨聖誕老人,網友:我全都要影視圈發展了這麼多年,國內不乏很多德藝雙馨的老一輩藝術家,他們為我們帶來了很多膾炙人口的作品,超高的自我修養和豐富的演戲經驗都讓人佩服的五體投地。在娛樂圈浸潤這麼多年的他們,身上依舊充滿了古樸實在的氣韻。