實時打破次元壁 AI技術讓你秒變二次元人物

2020-12-12 光明網

  還在沉迷復古風、初戀風?現在最火的是漫畫風!還沒擁有二次元漫畫自拍的夥伴們,該上車啦!二次元漫畫風席捲朋友圈,不僅全民擁有了漫畫自拍和頭像,就連宋軼、李純、馮提莫、張雪迎、何泓姍等明星都穿越次元壁,二次元小視頻拍到停不下來!

  二次元漫畫風究竟有多火呢?這麼說吧,微博超話#尋找最美漫畫臉#被大家閱讀了1.8億次,還有8萬條海量評論一同蓋樓,使用二次元特效拍攝製作的短視頻累計播放量2487萬,甚至上了熱搜。

  實際上這些可鹽可甜的二次元自拍並非來自真人畫手,而是在人工智慧技術的幫助下一鍵生成的。點開特效,手機中的自己就從3D變成2D,不僅保留了五官、臉型等個性特徵,而且還可以跟隨動作、表情的改變實時變化,輕鬆變身漫畫世界的主人公。

  這類特效離不開技術君的支持,尤其是人工智慧視頻生成技術,漫畫特效的火爆也讓視頻生成技術的應用再次掀起小高潮,甚至走出國門。作為視頻技術領域的「優等生」,百度在19年底已在百度大腦AI開放平臺上線圖片級二次元轉換,並於今年5月全球首發手機端上的實時二次元轉換。近日百度宣布將通過百度大腦AI開放平臺對外開放實時二次元SDK,讓更多行業開發者可以輕鬆擁有漫畫特效。

  在此之前,百度AI二次元特效技術也已經與B612咔嘰、全民小視頻等產品合作,創造眾多「爆款」,並於近期上線於北美市場Toonout APP,讓更多應用輕鬆Get二次元特效。

  三次元變二次元 AI技術如何實時打破次元壁

  想要在特效中實現漫畫中亮閃閃的大眼睛、小巧的鼻子和多變的發色並非易事,背後的技術原理並非像看上去一樣簡單,漫畫特效不僅要做到準確定位人像,更重要的是生成與本人形象一致、且畫質清晰的圖像,這就需要圖像理解、生成等多種技術共同配合完成,也對圖像的識別檢測等精準程度等提出了較高要求。

  百度AI二次元特效技術將超過十項視覺基礎技術與十餘個深度學習模型進行組合,協同調動完成特效。為了讓漫畫版自拍貼近本人,百度採用了像素級別的分割算法、支持150+關鍵點定位的高精準的人臉關鍵點識別算法,仔細定位面部細節,保留人物個性化特徵,實現人像1:1生成。

  為了保證生成出的二次元圖像清晰、邊緣柔和,百度更是拿出「世界冠軍級」技術——CDSR 超分模型,通過級聯的方法逐步將圖像從模糊變清晰,可以生成720P 的高清圖像,保證用戶在手機上高清體驗。據悉,該模型曾於2019年,戰勝400餘支參賽隊,拿下計算機視覺 low-level vision 領域中影響力最大的競賽NTIRE的年度冠軍。

  特效自拍能隨動而動、實時顯示,也對計算效率提出挑戰,百度採用最新的模型壓縮和模型搜索技術,在手機端實現實時二次元轉換,保證了一秒生成的用戶體驗。

  「爆火」之前已有布局 百度二次元特效技術廣泛應用

  二次元特效技術的風靡其實早有預料。2020年伊始,百度旗下全民小視頻的「一鍵動漫」功能,基於二次元特效技術,量身定製的二次元虛擬形象,並收穫150萬條二次元視頻作品,紙片人才藝展示、紙片人小劇場等趣味視頻層出不窮。

  主打美顏相機的B612咔嘰也通過使用百度大腦的人像動漫化接口,簡單四步即可將用戶自拍照片轉換成高還原度的漫畫頭像,讓你成為朋友圈最二次元的仔。今年4月,雙方合作升級,推出多款趣味油畫濾鏡,讓用戶輕鬆變身戴珍珠耳環的少女,在二次元特效的基礎上擴展更多圖像特效風格,受到廣大女性用戶的喜愛。

  專注於漫畫卡通特效視頻&照片編輯功能的Toonout 也於近日接入了百度AI實時二次元特效功能,作為業內首發能力,在北美市場率先上線,產自中國的二次元特效技術「出口」海外。

  作為視頻技術領域的佼佼者,百度二次元特效功能可謂「頂配」級別,可以給用戶帶去更逼真生動、清晰隨動的娛樂體驗,該能力接口全面開放。

  百度AI開放平臺現開放人像特效及醫美特效十餘項服務邀測,人像特效包含人臉/人體關鍵點、人臉五官/人體分割、以及人臉屬性編輯、人臉融合、人像漸變、人像清晰度增強、美顏美化等多個API及SDK解決方案,滿足網際網路娛樂、短視頻、網絡營銷等多種業務需求。

  醫美特效包含對人臉皮膚上痘痣斑、膚色、皮膚光滑度、眼袋/黑眼圈、毛孔黑頭等進行高精度檢測與分析,同時支持完整的3D模擬整形解決方案,可生成高保真的人臉3D模型,模擬調整前後效果對比,可應用在智能醫美、互動娛樂等多個場景上。

  這樣,藉助百度二次元特效技術的開源開放,讓更多開發者有機會入局這一漫畫風口,創造更多娛樂應用,藉助百度AI的技術底色,再造「爆款」。(一鳴)

[ 責編:戰釗 ]

相關焦點

  • 何方「神仙太太」讓你秒變二次元人物?百度AI拍了拍你
    還沒擁有二次元漫畫自拍的夥伴們,該上車啦!二次元漫畫風席捲朋友圈,不僅全民擁有了漫畫自拍和頭像,就連宋軼、李純、馮提莫、張雪迎、何泓姍等明星都穿越次元壁,二次元小視頻拍到停不下來!二次元漫畫風究竟有多火呢?這麼說吧,微博超話#尋找最美漫畫臉#被大家閱讀了1.8億次,還有8萬條海量評論一同蓋樓,使用二次元特效拍攝製作的短視頻累計播放量2487萬,甚至上了熱搜。
  • 二次元角色打破次元壁,黴黴撞臉Fate呆毛王,小姐姐神似唐三
    導語:隨著二次元文化的發展,喜歡二次元文化的人越來越多,很多人開始cos二次元角色。雖然如今喜歡cosplay的人不少,cosplay的作品也很多,但是想要做到神還原並不容易。今天就跟大家分享一下,那些讓人不禁豎起大拇指的經典作品,當二次元角色打破次元壁,黴黴撞臉Fate呆毛王,小姐姐神似唐三。1.太乙真人cosplay國漫《哪吒之魔童降世》受到了很多人一致的好評,播出之後,票房創下了國漫電影的新高。《哪吒》塑造了很多深受大家喜歡的角色,除了哪吒和敖丙之外,哪吒的糊塗師父太乙真人也很受歡迎。
  • 打破次元壁 《甜甜萌物語》最美實體裙亮相
    在二次元中,《甜甜萌物語》將女孩子們的公主夢不斷延續著;而回歸現實生活,《甜甜萌物語》更是貼心地將遊戲內裙子原版打樣做出成衣,打破次元壁,讓夢想照亮實現!在本次2016上海Chinajoy上,最「甜甜」的小清新Lolita裙正式亮相。此條小裙子取材於《甜甜萌物語》遊戲中的「星芒之海」套裝。
  • 自己的開發者自己寵 百度全面開放漫畫臉特效SDK一起變身二次元
    還沒擁有二次元漫畫自拍的夥伴們,該上車啦!二次元漫畫風席捲朋友圈,不僅全民擁有了漫畫自拍和頭像,就連宋軼、李純、馮提莫、張雪迎、何泓姍等明星都穿越次元壁,二次元小視頻拍到停不下來!作為視頻技術領域的「優等生」,百度在19年底已在百度大腦AI開放平臺上線圖片級二次元轉換,並於今年5月全球首發手機端上的實時二次元轉換。近日百度宣布將通過百度大腦AI開放平臺對外開放實時二次元SDK,讓更多行業開發者可以輕鬆擁有漫畫特效。
  • 二次元人物突破次元壁後,有多驚悚?
    對於喜歡動漫的人來說,自己所喜歡的動漫人物突破次元壁,來到三次元的世界無疑是讓人非常興奮的!然而,事實真的如此嗎?不過也有一些手辦是真的比較"還原"的,就像上圖中的痞老闆一樣,手辦製作者沒有再搞什麼花活,而是簡單粗暴地整了一個"臭蟲"出來……不過你這手辦,難道不是拿了一隻真的蟲子出來忽悠人嗎?
  • 當次元壁被打破之後
    近年來,動漫IP不再只是二次元愛好者的話題,商業品牌與此的跨界營銷掀起了一波波熱潮。有人說這是奢侈品牌在迎合年輕市場,你覺得呢?
  • 跨越次元壁,拋棄剪刀手,帥哥親自示範二次元專屬的6種拍照姿勢
    隨著時代的發展,智慧型手機的普及,二次元文化影響著我們的生活方式。一部手機,一部動畫,可能影響著每一位二次元粉絲的人生。最近有名的二次元小師哥,親自向大家示範一個二次元愛好者如何玩轉模仿動漫的角色中的拍照姿勢。
  • 打破次元壁,男神大對決 誰是你心目中的NO.1?
    帥哥當道,萬千型男帥哥中,總有一款適合你。國內當紅小生無數,究竟哪個才是你的菜?嫌棄三次元人類不完美?
  • 突破次元壁除了靠COS,還可以仿妝,而她不需要化妝也能破壁
    隨著二次元文化的發展,喜歡ACG文化的人越來越多,尤其是動漫和遊戲近年來發展迅猛更是讓無數人入坑。為了讓喜歡的二次元角色突破次元壁,粉絲們絞盡腦汁,而COS是最直接也是最有效的破壁方式。既然玩不起COS,那還有什麼方式可以讓二次元角色突破次元壁呢?「仿妝」成了ACG界的新寵,因為不需要昂貴的COS道具加持,只需要會化妝,也可以分分鐘還原出二次元角色,並且效果還相當驚豔,一起來看看吧。焰靈姬作為國漫女神,是很多粉絲仿妝的對象。
  • 絕美CG臉打破次元 美圖秀秀&美顏相機打造動漫風自拍新體驗
    比如2015年上映的《速度與激情7》,主演保羅·沃克不幸因意外離世,劇組通過CG技術使尚未完成拍攝的保羅"復活"。影片上映後,逼真的特效使觀眾對CG技術留下了嘆為觀止的印象,震驚之餘更令人心生嚮往。  艾瑞諮詢數據顯示,2017年我國泛二次元用戶規模達3.4億,核心二次元用戶9100萬。二次元人群中,出生於1990年至2000年間的"Z世代"用戶約佔78%。
  • 初音未來代言洗髮水廣告:與斯嘉麗通話打破次元壁
    力士(Lux)的日本官方推特昨天公布了一段由初音未來出演的產品廣告,廣告中初音解開了雙馬尾,一頭柔順的長髮依然美麗動人,隨後更是同漫威人物「黑寡婦」的扮演者斯嘉麗·詹森通了電話,頗有一種打破二次元和三次元壁壘的感覺。
  • 可愛到打破次元壁,名偵探柯南cos,突然響起BGM是怎麼回事
    "身體雖然變小了,頭腦依然靈活,無所不知的名偵探——柯南!!"柯南,《名偵探柯南》中的角色,是偵探工藤新一被灌下一種神秘藥水,回到孩童後為不使周圍的人受到牽連,化名為「江戶川柯南」,coser@Kitaro_綺太郎給我們帶來了《名偵探柯南》中的江戶川柯南cos,可愛到打破次元壁,太可愛啦,突然響起BGM是怎麼回事啊啊啊啊!
  • 虛擬人物擴列Z世代,《跨次元新星》如何呈現二次元美好價值觀?
    多元化、新碰撞、正能量,《跨次元新星》的內容突圍從初音未來到洛天依,貂蟬,葉修,隨著動態捕捉、實時渲染技術的不斷升級,以及虛擬內容本土化的逐步推進和演變,國內虛擬藝人已經越來越多見,但幾十位虛擬藝人一起在一個大型才藝競演舞臺上互相battle,還是第一次。
  • 百度飛槳用AI打破「次元壁」,WAVE SUMMIT+2020體驗穿越動漫世界
    (圖:顏值計算器現場體驗)  測試完顏值,聽說前方的應用竟然能「打破次元壁」?原來這款顏值穿越器運用圖像分割等技術,讓每個人都能定製自己獨一無二的二次元動漫形象的「穿梭入口」,通過這個二次元入口,咱們都是高級「戀與製作人」。
  • 打破次元壁的《阿爾罕布拉宮的回憶》:遊戲還是影視劇?
    換句話說,為什麼遊戲與現實的次元壁會被打破?事實上,「破壁」是編劇宋載正偏愛的主題,並非此劇獨有。早在其前作《W-兩個世界》(W、,2016年)中,系列漫畫《W》的男主人公姜哲(李鍾碩飾)就打破了次元壁,成為了名副其實的「撕漫男」,即撕破漫畫走出來的美男子,與現實世界中的女主人公吳妍珠(韓孝周 飾)談起了一場奇幻戀愛。
  • 虛擬偶像打破次元壁,薇婭們怕不怕?
    即使是不了解二次元的人,相信也曾聽過洛天依、初音未來等名字,她們原本只是個虛擬人物、虛擬歌手,但卻跟很多真人歌手一樣,不僅有大批的粉絲,有自己的專輯,甚至還開過演唱會。根據愛奇藝的《2019虛擬偶像觀察報告》顯示,截至2018年,中國已有超過30個虛擬偶像或組合。
  • 別著急,百度AI來安排!
    還沒擁有二次元漫畫自拍的夥伴們,該上車啦!二次元漫畫風席捲朋友圈,不僅全民擁有了漫畫自拍和頭像,就連宋軼、李純、馮提莫、張雪迎、何泓姍等明星都穿越次元壁,二次元小視頻拍到停不下來!作為視頻技術領域的「優等生」,百度在19年底已在百度大腦AI開放平臺上線圖片級二次元轉換,並於今年5月全球首發手機端上的實時二次元轉換。近日百度宣布將通過百度大腦AI開放平臺對外開放實時二次元SDK,讓更多行業開發者可以輕鬆擁有漫畫特效。
  • Lisa代言國服打破次元壁,創意大招?巴黎聖日耳曼也來聯動!
    後有球星當紅歌手強力加盟,Lisa為國服代言打破次元壁,巴黎聖日耳曼也來聯動,還有「內馬爾」皮膚!《荒野亂鬥》上線還不到一個月,各大主播都在體驗這款遊戲,PDD,小團團和馬老師組成了「馬屁團」組合,還發起了水友賽,和網友們一起享受這款遊戲的樂趣,可見這款遊戲本身的可玩性是非常高的。
  • 洛天依cos衝破次元壁,coser是中學生,致敬coser!
    #二次元#對於二次元迷來說,洛天依的形象一定不會陌生。洛天依,是中國內地的一位虛擬歌姬。
  • 現實人物二次元化,小情侶秒變火影角色,日本排球女神還原度極高
    相信很多人都幻想過,將自己二次元化,或者是將二次元角色現實化。可惜呀,由於各位小夥伴跟社長一樣,都不具備這種能力,對於這些事情也只能幹看著、想著!然而這些能力,在萬能的網友手上,倒是成了家常便飯!近日,一對小情侶在公交車上的親密行為,被萬能的網友融入到了二次元裡面。一起來看看是怎麼回事吧?