打造虛擬IP信手拈來:百度大腦視頻人臉融合產品上線

2020-12-13 量子位

在人工智慧技術發展的基礎上,越來越多的新業態正在湧現。近日,百度大腦開放平臺上線視頻人臉融合產品,用戶可通過人臉編輯技術,定製化生成非常接近真人的虛擬人臉圖,並可高保真地替換已有視頻素材中的形象。背靠百度大腦開放平臺領先的圖形圖像AI技術,這一產品解決了廣告創意、互動娛樂、遊戲影視等行業打造虛擬IP被高門檻要求拒之門外的痛點,同時又可以規避肖像權與隱私權風險,應用前景廣闊。

官網信息顯示,該產品可生成不同種族、年齡、性別、五官風格、膚色等的虛擬人物形象,滿足用戶的全方位需求。最重要的是,以前視頻換臉總是伴隨侵權風險,而該產品可以讓你打造專屬你本人IP的虛擬人臉,全程合法合規,可有效保障肖像權與隱私權,避免風險。此外,網絡生成的形象可以定製觀賞性高的角色,以滿足虛擬廣告形象、虛擬主播形象、虛擬遊戲影視形象等領域的高要求。

在效果上,不同場景均可以打造出觀賞性好,趣味性強,風格獨一的虛擬形象,且輸出的視頻可以保持高清晰度,並消除關鍵點、顏色等的抖動,具有非常高的穩定性。同時,產品的使用操作也相當簡易化,無需海量素材,僅一張圖片即可實現視頻級別形象替換,很快就能得到結果,僅需非常低的用戶成本。

(視頻人臉融合產品輸出效果)

據了解,視頻人臉融合技術在實際應用中,往往因為視頻畫面的複雜性,造成面容僵硬、光照條件變化、身份信息失真等問題,影響觀眾體驗,而且傳統解決方案輸出效率也較低。對此,百度大腦視頻人臉融合產品利用極易獲取的先驗知識,如3DMM係數,區域紋理編碼等,通過生成模型實現對於任意人臉的全方面編輯,涵蓋身份、姿態、表情、光照、妝容等維度,具備很大的靈活性,同時展現出強大的控制力。

(人臉形象替換示例,每列依次為換臉,換妝,光照控制效果)

為保障視頻人臉融合輸出的高質量與高保真度,百度團隊設計了Identity-Style Normalization Module框架,可利用身份信息和區域紋理編碼對主幹生成網絡特徵進行調製,使得視頻源的身份和區域紋理信息得到最大化的保留,在「換臉」時讓觀眾很難分辨出差異。同時,該產品利用一個簡單的前向模型來實現,僅用單圖就能對視頻進行換臉,數據效率更高。

此外,鑑於該方案在人臉融合技術領域的領先性,百度相關論文得到學術界肯定,被美國人工智慧協會(AAAI)2021年會收錄。同時,該產品面向娛樂行業的相關從業人員或愛好者,用戶可在百度大腦開放平臺官網進入產品頁面,更多信息可訪問:https://ai.baidu.com/tech/face/facemerge_video

(視頻人臉融合技術框架)

藉助這一全新產品,更多開發者與從業者將能夠體驗到虛擬角色形象帶來的新潛力,延伸出更多的玩法,讓娛樂行業更智慧化。實際上,作為百度打造的新型AI技術基礎設施,百度大腦正通過這些技術能力與產品方案的輸出,在工業、農業、教育、零售、文化娛樂、企業服務等眾多行業落地創新應用和智能化升級,僅AI能力就開放了273項。未來百度大腦也將持續開放能力和產品,讓更多行業走上AI之路,發展新業態,提供新動能。

— 完 —

相關焦點

  • 一圖實現視頻形象替換 百度大腦視頻人臉融合產品降低虛擬IP門檻
    (原標題:一圖實現視頻形象替換 百度大腦視頻人臉融合產品降低虛擬IP門檻)
  • 百度大腦人臉識別新產品及夥伴計劃發布會在深圳召開 發布8項新品...
    9月26日,人工智慧行業領軍者百度在深圳舉辦了百度大腦人臉識別新產品及夥伴計劃發布會,披露了3項全新發布、5項全新升級的8大能力,全鏈條推動人臉識別技術在身份認證、視頻監控、娛樂互動等細分場景下的落地進程。
  • 百度大腦全新開放人像特效能力棒...
    9月25日,百度大腦開放日人像特效專場在北京中關村百度大腦創新體驗中心召開。開放日上,百度大腦宣布全新開放互動娛樂、虛擬試妝、虛擬人、美業/健康四大人像特效應用場景下,七大類特效能力,並在現場演示產品使用效果。零技術低門檻、小時級批量製作高保真素材、半分鐘便可生成虛擬主播並適用於眾多場景等等技術優勢,全方位展現了百度大腦在人像特效領域的領先AI技術能力與應用前景。
  • 百度大腦AI虛擬主持人驚豔亮相媲美真人
    11月28日,百度大腦語音能力引擎論壇在京召開,百度大腦公布語音能力日均調用量已超100億次。百度語音首席架構師賈磊全面介紹了百度語音核心技術能力,其中,AI虛擬主持人一開口就贏得不少參會者的驚嘆。在今年的五四晚會上,百度大腦AI虛擬主持人小靈元氣登場,成為王俊凱口中本場最年輕的一位主持人。3D虛擬主持人小靈全程妙語連珠、還用人臉識別技術幫嘉賓測試「你是什麼花?」、藉由AR能力穿越到觀眾手機中實時互動,圈粉無數。除了小靈外,小菲也表現出色,現在她已經在百度與澎湃聯合打造的,全球首檔真人形象虛擬主播早晚新聞欄目中上線120天了!每天準點為大家帶來專業的早晚新聞播報。
  • 百度大腦與澎湃新聞聯合打造的虛擬主播「持證上崗」
    同時,借力百度在人工智慧方面的技術優勢,雙方將聯合打造全球第一檔真人形象的虛擬主播日播型早晚新聞欄目,欄目將每天在澎湃新聞客戶端與百度App及好看視頻三端同時播出。該欄目「主播」糅合了百度大腦領先的語音合成、唇動合成、肢體合成、視頻合成等AI技術,呈現出逼真的虛擬主播形象。
  • 「刷臉」開啟的AI熱浪 百度大腦人臉識別新產品及夥伴計劃發布會等...
    屆時不僅會為開發者、企業等分享百度大腦人臉識別的最新技術進展,發布系列新產品,還有諸多百度大腦的合作夥伴將現身說法,通過更加直觀的實際案例,講述人臉識別技術究竟是如何應用到行業具體場景中,為人們提供更加便捷的服務。
  • 百度大腦1月產品上新&技術升級:車輛分析、人臉考勤等方案發布
    百度大腦一月一次的最新技術&產品盤點來了。在這裡,與百度大腦一起成長,見證 AI 的力量。您可以從 PC 端訪問百度 AI 開放平臺申請邀測,或使用最新產品。2019年1月 新開放 AI 技術能力 1.
  • 百度大腦產品上新&技術升級:圖像處理、智能寫作平臺、語音識別
    百度大腦一月一次的最新技術&產品盤點來了。在這裡,與百度大腦一起成長,見證 AI 的力量。您可以從 PC 端訪問百度 AI 開放平臺(ai.baidu.com)申請邀測,或使用最新產品。新開放 AI 技術能力語音識別語音識別極速版支持60秒內音頻使用 REST API 方式進行調用,簡單易用。
  • 百度大腦領先活體檢測+合成圖鑑別 讓人臉「照片活化」無從遁形
    有人通過「換臉」技術進行色情視頻生成、虛擬政治人物講話等,造成嚴重不良影響;更有黑產使用人臉「黑科技」非法牟利。近日,各大媒體紛紛報導的人臉「照片活化」,便是黑產對個人身份信息造成洩露危害的新技術手段。據調查了解,黑產賣家出售的「照片活化」工具,可將人臉照片修改為執行「眨眨眼、張張嘴、點點頭」等操作的人臉驗證視頻。
  • 疫情加速百度人臉識別變革:戴口罩也能準確識別,迅速上線
    但這樣處理後的實驗效果並不明顯,原因是在真實場景中,人臉姿態會有變化,並且不同場景採集的圖像存在一定的差異性。針對這個問題,百度視覺採用了基於人臉關鍵點的3D圖像融合技術。更早的,針對密集人群戴口罩的檢測問題,百度與北京地鐵展開了合作,連夜集結專項項目組,3天完成初版部署,7天快速迭代上線,解決了檢測密集人群「是否戴口罩」的問題。嗯,看來是可以愉快的戴口罩上班了!
  • 百度大腦最新發布人臉合成圖甄別能力,人臉識別活體檢測更安全
    針對這一情況,百度大腦AI人臉識別的「H5視頻活體檢測」、「在線活體檢測」中增加了人臉合成圖鑑別能力,在多種活體技術加持的基礎上,可以鑑別AI換臉技術和黑客工具生成的人臉圖像,安全等級更進一步。該項新功能在人臉審核、新聞鑑真、肖像維權、色情圖像審核等諸多方面均有很高的實用價值,不僅保護著廣大個人用戶的信息、權益,還協助企業提升了其服務安全性。
  • 百度大腦開放戴口罩人臉識別AI能力 不摘口罩刷臉通行保障復工
    為助力復工復產期間的疫情防控,百度大腦宣布正式開放覆蓋全產品形態的口罩檢測相關AI能力,包括「口罩佩戴檢測模型」和「戴口罩時的人臉識別算法」等,全力支持合作夥伴和開發者相關抗疫項目的開發和落地。該技術方案也已最先落地在百度公司園區,員工均可在佩戴口罩時刷臉識別身份,保障安全、高效復工。
  • 百度大腦人臉合成圖甄別能力讓活體檢測更安全
    (人臉合成圖片示意) 針對這一情況,百度大腦在人臉識別的活體模塊中業內首發對人臉合成圖的鑑別能力,並在「人臉檢測」、「H5視頻活體檢測」、「在線活體檢測(百度大腦「人臉檢測」、「H5視頻活體檢測」、「在線活體檢測」API增加人臉合成圖鑑別能力) 在線活體檢測+人臉離線採集SDK,有效防止屏幕二次翻拍
  • 中國銀聯「刷臉付」發布,百度人臉多模態3D識別算法提供技術支持
    日前,由中國人民銀行主辦的「金融科技——深度融合·多向賦能」金融科技論壇在2019烏鎮世界網際網路大會上舉行,中國銀聯攜手百度等60餘家機構聯合發布了全新智能支付產品——「刷臉付」。據悉,在人臉識別領域,百度已經擁有超過1000+合作夥伴,落地項目超過10萬個。百度大腦人臉識別公有雲服務日均調用量超過1億,已穩居業界第一。此次「刷臉付」中廣泛應用了百度大腦人臉多模態3D活體算法,可確保業務流程體驗,並有效防禦二維靜態紙質圖像、二維靜態電子圖像、二維動態圖像、三維高仿面具、三維高仿頭模等不同方式的作弊攻擊。
  • 獲ICME人臉106關鍵點檢測比賽冠軍 百度大腦彰顯AI實力
    捷報頻傳,百度大腦再次登上國際舞臺。在今年4月初結束的ICME人臉106關鍵點檢測比賽(Grand Challenge of 106-p Facial Landmark Localization)中,百度大腦視覺技術團隊與來自全球的20多個優秀代表隊同臺競技,其中包括阿里、華為、美團、中科大等國內視覺技術實力強勁的團隊,最終一舉摘得桂冠。
  • 百度識圖上線:全網搜索相似的人臉
    昨日晚間,百度正式上線了「百度識圖」(http://image.baidu.com/),這是百度圖片搜索的一個新增功能,你可使用該服務在網絡上搜索具有相似人臉的圖片。據百度多媒體副總監餘凱透露,「百度識圖」是百度多媒體部在2012年的最後一個產品,而且號稱是世界上第一個基於圖像的全網人臉搜索。
  • 自己的開發者自己寵 百度全面開放漫畫臉特效SDK一起變身二次元
    作為視頻技術領域的「優等生」,百度在19年底已在百度大腦AI開放平臺上線圖片級二次元轉換,並於今年5月全球首發手機端上的實時二次元轉換。近日百度宣布將通過百度大腦AI開放平臺對外開放實時二次元SDK,讓更多行業開發者可以輕鬆擁有漫畫特效。
  • 百度AI,走過2019
    百度崑崙雲伺服器上線 2019年12月,基於百度自主研發的中國首款雲端全功能 AI 晶片「崑崙」的雲伺服器正式上線,百度崑崙雲伺服器為企業和開發者們提供超強的 AI 推理和訓練性能,加速 AI 技術與各行各業深度融合的步伐。
  • 百度人臉識別搜索是怎麼實現的?
    如果用戶給出一張圖片,百度識圖會判斷裡面是否出現人臉,如果有,百度識圖在相似圖片搜索之外,同時會全網尋找出現過的類似人像而且大部分以圖片作為輸入的搜尋引擎,例如tineye(2008年上線)、搜狗識圖(2011