一張照片「換臉」突然爆火 細說從頭

2021-01-18 環球網

「AI 換臉」這幾天又熱起來了。雷鋒網AI 科技評論秉承以往的風格,從技術角度簡單回顧一下近幾年重要的 AI 換臉技術。

Cycle GAN

Cycle GAN 可以說是所有人臉轉換嘗試重要早期嘗試。在對抗性生成式網絡(GANs)的風潮中,大家發現只要給定源類別的樣本和目標類別的樣本,GANs 可以便捷地學習到兩個類別之間的轉換關係,就天然地適用於「圖像到圖像轉換」問題,比如同一張風景照的冬天到夏天、一匹馬到一匹斑馬;Cycle GAN 核心思路在於,如果能從源轉換到目標、還能從源轉換回來,就可以認為模型很好地學習到了兩個類別間的轉換關係,也更好地保證了轉換後的圖像的品質。不過 Cycle GAN 的換臉效果並不怎麼好,它畢竟是一個對所有類別的圖像通用的方法。

Face2Face

Face2Face 可以說是一次「標準的、規矩的」的嘗試,它藉助 dlib 和 OpenCV,首先人臉檢測器檢測出源圖片中的人臉、找到人臉上的關鍵標記點,然後再使用針對人臉的 pix2pix 轉換模型把關鍵標記點轉換為目標人臉圖像。也許是因為這個方法沒有給深度學習留下足夠的發揮空間,所以它的效果也一般般。

在此之後,英偉達和 UC 伯克利的研究人員們根據 pix2pix 改進出了 pix2pixHD,提升了人臉圖像的生成效果,而且也依然保持了原 pix2pix 模型的多類別通用能力。

DeepFakes

最火熱、最廣為流傳的深度學習換臉模型無疑是 DeepFakes。出現於 2017 年底的 DeepFakes 是一個深度自動編解碼器模型(Autoencoder-Decoder),通過用源人物和目標人物的幾百張照片(越多越好)訓練模型分別識別、還原兩人面部的能力。最後用源人物的照片搭配目標人物的解碼器就可以完成轉換。它也對視頻到視頻的轉換有良好支持。

DeepFakes 的缺點在於,它無法在小樣本上工作,意味著無法憑一兩張照片替換任意兩個人的臉部;模型的訓練過程也需要消耗大量資源。

DeepFakes 剛剛公開時也僅限於技術愛好者們之間交流,也並沒有發布正式的論文。但一些蓋爾·加朵的換臉動圖一下子引爆了關注。今年年初曾經熱炒的「楊冪換臉朱茵」視頻也很可能是用這個方法實現的,因為 DeepFakes 中的編碼器經過足夠的訓練後確實能夠具有將任意輸入人臉(比如朱茵的人臉)轉換為高質量、高逼真度的目標人臉(楊冪人臉)的能力。

DeepFakes 的 GitHub 地址為 https://github.com/deepfakes/faceswap,如今它還在持續更新升級;後來推出了還名為 FakeApp 的桌面應用程式,便於更多 TensorFlow 玩不轉的小白用戶嘗試。

一張照片轉換面部動作

DeepFakes 式的「把目標圖像中的人臉換成另一張臉」可能未來也很難減小樣本數量要求和資源要求,所以也有另一種思路,那就是給定一張人臉圖像,然後根據給定的動作讓圖中的人「動起來」。三星莫斯科 AI 研究中心聯合斯科爾科沃科學技術研究所在今年 5 月發表的一篇論文就帶來了不錯的結果。不僅是真人的照片,他們甚至可以讓油畫中的人自然地開口說話。

相關焦點

  • 教你給照片「換臉」屌爆了!
    (PS:我換的那兩張是用PS,為了方便,特意為大家寫這期手機換臉教程~)用到的軟體「Picsart」第一步:換臉之前準備首先,你得先要找到要換的臉的對象
  • 爆紅「螞蟻呀嘿」突然涼涼!AI換臉軟體再碰壁
    通過相關模塊,用戶只需要上傳一張照片就可以自動生成詼諧好玩的動態唱歌視頻。然而,Avatarify應用火了不到7天,就有網友發現已經於3月2日凌晨被蘋果應用商店下架。至於下架原因,官方暫未說明。業內人士猜測,Avatarify應用或與此前爆紅的AI換臉軟體ZAO類似,因為涉及版權和隱私問題而被下架。
  • 日本手機那些事:爆紅的換臉照片怎麼拍
    那麼換臉照片究竟怎麼拍,有哪些app能夠實現換臉效果,我們就在本周《日本手機那些事兒》的豆知識環節一起來聊。日本手機那些事:爆紅的換臉照片怎麼拍    文章開頭先來看熱門配件商品。日本近期發售了一款可以讓將實體相冊中的照片直接作為圖片文件保存到iPhone中的配件產品。
  • AI換臉APP一夜爆紅,換臉一時爽,個人隱私卻...
    這款名為「ZAO」的AI換臉App在社交網絡一夜爆紅,不少網友在朋友圈上傳分享自己換臉後的短視頻作品。另一款為「ZAO-逢戲造臉」,介紹中稱是一款使用頂尖AI技術的換臉神器,僅需一張正臉照就能體驗新奇玩法。
  • AI換臉軟體licolico視頻,讓你一鍵換臉
    前些時間在網上大火的AI智能換臉軟體得到大多數人的追捧,許多小夥伴都希望玩轉這門黑科技,但使用電腦軟體程序去操作訓練人臉,需要比較高的電腦配置,耗時也很長,讓很多想要做玩一下的小夥伴頓時被打敗,失去了製作換臉視頻的興趣。
  • 又有換臉軟體被下架!從火到禁才7天
    然而就是這麼一個爆火、好玩的軟體,卻在昨日凌晨悄然下架了。有媒體猜測,這或許是與安全問題有關。就如同2019年下架陌陌的換臉軟體ZAO一樣.要知道,AI換臉在網際網路上,一直都是個類似於潘多拉盒子一樣的存在。
  • 陌陌旗下AI換臉APP「ZAO」一夜爆火,它能紅多久?
    8月30日晚間,一款名為「ZAO」的AI換臉應用刷爆朋友圈,一夜之間,「ZAO」已位居免費娛樂榜榜單第2名。用戶可在「ZAO」上選定想要換臉的視頻或表情包,上傳自拍或本地圖片,即可一鍵完成「換臉」。比如,選取「中餐廳」節目中的片段,換臉前的畫風是這樣的:
  • AI脫衣,明星換臉AV女優!這個刷屏爆火APP背後的隱患讓人擔憂...
    8月30,打出「僅需一張照片,出演天下好戲」口號的「ZAO」正式版上線後,迅速刷屏朋友圈。註冊後,系統將會提示你選擇一張圖片——注意,不夠清晰的、非正臉的照片是會被系統否決的,不允許上傳的。在選擇完照片後,APP還會要求你進行一項特殊的操作——肖像驗證。用戶需要在攝像頭前進行眨眼、扭頭、張嘴、低頭等三個指示動作,在系統判斷你上傳的這張照片就是你本人之後,才能進行下一步操作。
  • ZAO「換臉」爆紅,支付寶緊急回應!
    大量用戶使用這款App,上傳自拍照片,將自己「變成」影視片段的主角,並將這些「改頭換面」過的視頻片段,上傳微信朋友圈等社交平臺,引發「病毒式」傳播。雖然一夜又成為「現象級」app,但「ZAO」也引發了外界的隱私擔憂。
  • 刷爆朋友圈的換臉軟體,我真不敢用
    反正蟬主身邊的朋友齊刷刷都在玩換臉,朋友圈湧現了許多「戲精上身」的小視頻。 近日,一款名為「ZAO」的換臉軟體在人們的分享下火爆全網。其打出的「僅需一張照片,出演天下好戲」口號更吸引了無數人加入視頻創作。然而,就在換臉熱潮剛剛開啟的時候,大量爭議也隨之而來。
  • 換臉軟體ZAO爆火:那些你不在意的東西,正在成為別人傷害你的武器!
    最近一段時間,一款名為「ZAO」的app可謂是火的一塌糊塗。在這款app中,用戶只需要上傳一張圖片,便可以通過智能AI程序與各位明星進行「換臉」操作,還可以體驗各種大熱門電視劇中的「名場面」。app一經上線便展開病毒式傳播,在朋友圈迅速擴散,就連七爺的朋友圈也是不能倖免。
  • AI 換臉一夜刷爆,網友神作層出不窮,伺服器快被玩崩了!
    ZAO 的 slogan 為「僅需一張照片,出演天下好戲」。據了解,只需上傳一張正臉照片,就能將自己的臉替換在「小李子」「周潤發」「白展堂」「瑪麗蓮夢露」「緋紅女巫」身上,生成以自己為主角的視頻片段。其人臉融合效果非常逼真。根據網友的調查,「ZAO」由著名線上交友軟體「陌陌」團隊打造,官方微博介紹,這個月花 700 萬租的伺服器,昨晚已經消耗了 1/3。可見其火爆程度。
  • 你在用AI換臉ZAO造夢,而它卻可能用你的照片去造謠……
    ,這款APP一夜爆紅。下載手機註冊之後,只需上傳一張正面照。不出十秒鐘,就可以製作一段換臉視頻,過一把"明星癮"。至於用戶,專家解釋,如果僅限自娛自樂不構成侵權,倘若使用換臉視頻傳播以謀利,則同樣構成侵權。合成視頻敲詐照片主人 換臉技術隱患重重其實,AI換臉視頻已不是新鮮事了。早在2017年,就有國外帳號使用換臉技術發布視頻,在代碼開源後,這項技術如今已經遍布世界各地。記者搜索發現,蘋果軟體商城就有多款換臉軟體,而AI換臉也形成了產業鏈。
  • 「ZAO」換臉一時爽,隱私是否洩露了呢?!
    「僅需一張照片,出演天下好戲」。近日,一款名為ZAO的AI換臉APP在朋友圈刷屏。在這款名為 ZAO 的軟體中,你只需要上傳一張照片,在已經有的素材裡就能把電影片段裡面的周星馳、陳冠希、吳彥祖等人的臉,替換成你自己的臉。轉眼間自己也能跟明星對戲,自己也能在這段戲裡面了!
  • 刷爆朋友圈的換臉APP有重大隱私BUG,我能解決!
    我一看是個換臉軟體,就沒往心裡去。畢竟這也不是啥新技術,朱茵換臉楊冪的時候,唐唐替你們把這個東西從頭到腳研究一遍了。所以我估計這東西也就跟之前的「臉萌」差不多,火兩天就完事兒了。因為這APP換臉實在是太簡單了!
  • 換臉與明星「戀愛」一夜爆火?小心!這技術此前用於情色視頻
    app火了!於是各個版本的「陳坤」「鞠婧禕」「王俊凱」「胡歌」齊刷刷在朋友圈演戲了利用AI技術,ZAO可以在短短幾秒內將你照片上的臉替換到影視劇經典片段中,在一些正臉角度,融合效果幾乎可以以假亂真。在選擇完照片後,APP還會要求你進行一項特殊的操作——肖像驗證。用戶需要在攝像頭前進行眨眼、扭頭、張嘴、低頭等三個指示動作,在系統判斷你上傳的這張照片就是你本人之後,才能進行下一步操作。這一舉動是為了避免該技術被惡意運用,要確保「你」沒有拿其他人的照片來惡意AI換臉。
  • 體操女神,因一張「照片」爆火,誇張一字馬,網友:忍不住
    體操女神,因一張「照片」爆火,誇張一字馬,網友:忍不住!在中國體壇中,體操和遊泳跳水項目上面可謂是顏值擔當。雖然這些運動沒有硬性要求顏值,但是這樣項目中的運動員確實是顏值出眾。在舒思瑤的職業生涯中還是有很不錯的成績,但是人才輩出的體壇沒有太多的冠軍光環很難家喻戶曉,但並不妨礙她在網絡走紅,一張一字馬照片,讓她爆火全國。
  • 陌陌換臉App「ZAO」刷爆朋友圈,已有超10家VC約見,久違的風口來了?
    「ZAO」是一款基於AI技術的換臉App,用戶上傳自拍或本地圖片,即可一鍵完成視頻及表情「換臉」,可出演任何表情包,經典電影、搞笑片段。選擇一個視頻片段之後,上傳一張自己的照片,一鍵「替換」,視頻裡的人臉即變成自己的臉。表情素材庫裡是則是眾多經典網紅表情包,如還珠格格角色、中年王子曉明哥、武林外傳角色等。
  • 視頻換臉App火了!幾秒變身主角?你可要小心了
    一張自拍,就可以把多部經典影視劇主角的臉,替換用戶自己的臉。這讓AI換臉App「ZAO」刷屏朋友圈。
  • 這款AI換臉APP爆紅,你在P明星視頻的同時,或已掉入用戶條款陷阱
    操作簡單、換臉逼真、還能圓一把明星夢.怪不得網友們紛紛感嘆,ZAO好玩!AI厲害!  這款app有多火?8月30日,@ZAO官方助手 發微博表示,8月份花700萬租的伺服器,一晚上就消耗了1/3!  只不過,事實往往沒有表面看上去那麼簡單。就像大家早上還在為吳亦凡擁有甜甜的戀愛而祝福,24小時不到,吃瓜群眾就迎來劇情大反轉。ZAO的刷屏,當然也沒那麼簡單。