8月14日,短視頻平臺快手上線名為「變小孩」的魔法表情,在拍攝界面選擇該款魔法表情,就能體驗變童顏的特效。依賴生成技術的這款魔錶真實感極強。據了解,該魔錶適配任意ios及Android設備,支持絕大部分機型手機端上實時生成視頻版娃娃臉。
特效前後對比
真實感強 來快手一起回到小時候
記者體驗「變小孩」魔法表情發現,實時的算法運行穩定,臉部實時動作、臉部和頭髮邊界的渲染十分真實自然,在手機斷網的情況下也能實時生成「娃娃臉」。據快手產品人員介紹,開發這個特效,希望通過技術幫助用戶回味童趣,實時的特效已基本覆蓋所有手機機型,「覆蓋絕大多數機型給工程師帶來很大挑戰,但我們還是希望好玩的魔錶能夠讓更多普通人體驗到」。
快手自研國內首家端上實時GAN
負責研發快手「變小孩」魔法表情的工程師介紹,該特效基於深度學習的對抗生成網絡(GAN),結合快手積累的大量數據集及定製化的模型壓縮技術,才能達到實時在手機端實現的效果,「確實挑戰挺大,在Android實現端上實時,還沒有見其他公司做出來」。
特效前後對比
「在手機端上」實現這個效果,說明數據不用傳到伺服器做處理,在手機上即完成了處理,用戶手機不用聯網就能玩,省去了數據傳到伺服器處理又回傳到手機端上的時間。 這個「費算力」的玩法能覆蓋絕大多數機型,離不開快手自研的YCNN深度學習推理引擎以及快手自研的定製化模型壓縮算法。這兩項技術保證不同價位的手機機型都能享受AI和大數據帶來的技術紅利,支撐快手的普惠價值觀。
近幾年,在深度學習研究領域,對抗生成網絡(GAN)被廣泛的應用到解決各種問題上,而在國內,快手較早的將該項技術在手機端上實現,為用戶帶來更多新鮮玩法。