高逼真度2D照片生成3D人像模型研究AvatarMe
2020-12-13 騰訊網6月19日青亭網報導，此前我們報導過很多類似的基於2D圖片生成3D模型或3D人像的技術，不過大部分都是支持將人臉部分貼圖到3D模型中。而在近期的CVPR 2020會議上，倫敦帝國學院的一篇論文正在結合AI和機器學習技術，與面部數據分析公司FaceSoft.io研究人員共同發布這個名為「AvatarMe」的機器學習模型。
據了解，該系統的特點是可以根據一個一張簡單的頭部2D照片，即刻生成一個高質量的3D人臉模型，解析度為4K×6K，並且具備逼真的光影效果。據了解，該技術可應用到各類虛擬會議、遠程協同、遠程會議應用。
原理方面，AvatarMe模型是基於真實的高清逼真3D捕捉技術演進而來，研發人員事先將168盞燈和9臺相機組成的球形面部捕捉方案，通過GANFIT模型學習出紋理合成等細節。
GANFIT機器學習模型有兩部分組成：生成器、結果鑑別器。
另外值得注意的是，AvatarMe另一個組件增強了紋理，包括烘焙照明等；還有一個單獨模塊負責面部細節，例如：皮膚毛孔、皺紋、毛髮、甚至傷疤等。
相關焦點
-
中國科學院研發AI人像生成模型 人臉合成技術超出預期
原標題：讓簡筆畫生成逼真人臉！中科院放大招，能用於警察破案近日，中國科學院北京分院的研究團隊研發出一個AI人像生成模型。該模型可以依據簡筆畫生成逼真的人臉肖像。利用這一模型，沒有繪畫經驗的人也可以很容易地得到逼真圖像。除了用於娛樂，在未來，這個模型或能幫助執法人員進行嫌疑人畫像。 -
用2D圖像生成3D模型,微軟新AI模型或成遊戲業福音
研究人員表示，在使用2D圖像進行訓練時，該框架始終可以比現有的模型生成效果更好的3D形狀，這對於遊戲開發、視頻製作、動畫等領域是一個極佳的自動化工具。微軟AI模型生成的3D沙發、椅子和浴缸通常來說，一個模型框架要將2D轉換為3D圖像，需要通過柵格化處理來進行微分步驟渲染，因此，過去研究人員在該領域的努力都專注於開發定製渲染模型。 -
生成逼真3D人偶,居然不用3D形狀建模,還能學會你的舞步 | 三星CVPR Oral
這是一項中選了CVPR 2019 Oral的研究，但不止是因為效果逼真：更重要的是，它沒有用到3D形狀建模 (Explicit 3D Shape Modeling) ，而是依靠2D紋理映射 (2D Texture Map) ，來完成渲染的。 -
讓簡筆畫生成逼真人臉!中科院放大招,能用於警察破案
智東西6月18日消息，近日，中國科學院北京分院的研究團隊研發出一個AI人像生成模型。該模型可以依據簡筆畫生成逼真的人臉肖像。利用這一模型，沒有繪畫經驗的人也可以很容易地得到逼真圖像。二、60位參與者打分1302次，證實模型輸出結果更逼真模型搭建好後，研究人員使模型在一臺搭載了一個英特爾i7-7700 CPU和一個NVIDIA GTX 1080Ti GPU、擁有16GB內存的電腦上運行，用17000張簡筆畫和照片進行訓練。訓練結束後，研究人員對模型進行了評估。研究人員首先用線條不同的簡筆畫作為輸入。 -
讓簡筆畫生成逼真人臉,中科院發新AI論文,能用於警察破案
智東西6月18日消息，近日，中國科學院北京分院的研究團隊研發出一個AI人像生成模型。該模型可以依據簡筆畫生成逼真的人臉肖像。利用這一模型，沒有繪畫經驗的人也可以很容易地得到逼真圖像。除了用於娛樂，在未來，這個模型或能幫助執法人員進行嫌疑人畫像。 -
讓簡筆畫生成逼真人臉!中科院發新AI論文,能用於警察破案
智東西（公眾號：zhidxcom）編 | 董溫淑智東西6月18日消息，近日，中國科學院北京分院的研究團隊研發出一個AI人像生成模型。該模型可以依據簡筆畫生成逼真的人臉肖像。二、60位參與者打分1302次，證實模型輸出結果更逼真模型搭建好後，研究人員使模型在一臺搭載了一個英特爾i7-7700 CPU和一個NVIDIA GTX 1080Ti GPU、擁有16GB內存的電腦上運行，用17000張簡筆畫和照片進行訓練。訓練結束後，研究人員對模型進行了評估。 -
無需3D建模 三星人工智慧就能將人像照片製作成動畫
無需3D建模 三星人工智慧就能將人像照片製作成動畫 圖片來源圖蟲：已授站長之家使用站長之家(ChinaZ.com) 5月23日 消息:三星莫斯科人工智慧中心和斯科爾科沃科技學院的工程師和研究人員已經創造了一個模型，在無需用到傳統 -
研究人員能將簡單的素描轉換成逼真的人像照
研究人員找到能將簡單線條畫轉換成逼真大頭照的方法。北京中國科學院（Chinese Academy of Sciences，簡稱中科院）研究團隊開發的DeepFaceDrawing，利用AI人工智慧「幫助未經訓練的用戶將粗糙甚至不完整的手繪素描轉換成高品質人像照」。 -
迄今最精準人臉數字模型,任意 2D 照片轉換逼真3維人臉
倫敦帝國理工學院的研究人員開發了一種新的系統，能自動對各種族、年齡的人臉進行準確的 3D 建模。他們還建立了一個大規模人臉掃描資料庫，用於訓練這個系統。實驗證明，該系統比當前常用的最好模型表現優異許多，可以將任意角度拍攝的 2D 快照生成逼真的 3D 人臉。Science 對此作了報導，標題中提到「計算機科學家構建了迄今最精準的人臉數字模型」。（題圖即為新模型隨意生成的一些人臉。） -
新AI技術現身頂會:只需一張大頭照,就能生成逼真3D人臉
如果只有一張圖片，怎麼創建出一個人逼真的數位化身？在 2020 年計算機視覺與模式識別會議（CVPR）期間，倫敦帝國學院和 AI 面部分析初創公司 FaceSoft.io 的研究人員介紹了一種 「AvatarMe」 技術，該技術能夠僅僅通過一張普通的圖像或照片，就重建逼真的 3D 半身像。 -
中科院AI生成模型,人臉識別的正確用法
近日，中國科學院北京分院的研究團隊研發出一個AI人像生成模型。該模型可以依據簡筆畫生成逼真的人臉肖像。這在日常當中，可以被人當作娛樂遊戲來進行消遣，但是其實它有更重要的作用，那就是幫助警察叔叔了解嫌疑犯的面容形象。 -
【CGwang動漫】知識普及時間:2D、2.5D、3D遊戲的區別
早先所有遊戲都是2d遊戲包括最開始的超級瑪麗、坦克大戰。所謂2d遊戲不是視點上的分別，只是加工方式為2d的方式。2d遊戲是技術層次的定義。引擎沒有3d引擎。只是2d的動畫的交互。2d遊戲也跟著進化。越來越多的2d和3d結合的遊戲出現了。很多遊戲採用2d人物3d背景。還有的採用3d人物2d背景等等。大富翁是比較典型的2d人物 3d背景的作品。 -
古玩古董錢幣字畫照片製作在線VR高清全方位旋轉展示模型
在線VR高清展示與電商產品三維3D在線展示基於HDR環境光照和物理材質可以更加逼真的展示產品，製作好模型貼好圖後，上傳到三維展示平臺，生成一個連結，在線通過微信、連結與二維碼輕鬆分享，無延遲與卡頓，反應更加快。 -
臺灣清華大學與Facebook再度攻破3D照片技術
更新：網友Alegriabaile指正「最新的3d照片與原來的主要區別是，原來的是根據蘋果人像模式RGB-D進行三維全景圖生成，重點在深度圖的全局一致性變形，當時Facebook發布的只是用到了裡面較簡陋的內容生成方法；最新的這個和19年的practical 3d photography更像，拍攝單幅RGB顏色圖片，利用深度學習得到深度圖 -
2d和3d有什麼區別 2d和3d的區別
2d和3d代表著兩個不同的維度，那麼用這些維度表達出來的電視劇、電影、遊戲等帶給人怎麼樣的感受呢?2d和3d又有什麼區別? 3、遊戲上的區別 2D遊戲和3D遊戲比較容易區分，最簡單區分3D遊戲的方式就是看能否實現遊戲中轉換360度視角，如果可以 -
曝光3d列印人像頂級工藝流程,老闆不讓說的秘密全在這裡啊!
經3d設計師精修之後就成為可以360度任意角度觀看的3D虛擬人像。 第三步：用3d印表機將3d虛擬人像列印成3d實體人像 【小科普】3D列印是運用材料粉末，如金屬粉末、塑料粉末和石膏粉末等，通過逐層列印的方式一邊鋪覆一邊黏合粉末，把電腦模型（在這裡是3d虛擬人像）立體製作出來。 -
3D列印人像應用!原來這樣就能列印出自己
今天，我們就來簡單介紹一下3D人像列印的三類應用方向。 一、文物人像恢復 3D列印技術在文物修復上的應用打開了新紀元，數位化應用的加入讓文物修復更精確，尤其在人像修復上可以更逼真細膩地還原。 -
3D列印新操作|智能算法助你隨心設計專屬人像模型
掃描獲得的三維數據，需通過三維建模軟體進行建模，才能得到數位化的三維模型。接著，要將模型轉換為3D印表機可識別的格式，才能夠進行3D列印。在很長一段時間裡，市場上3D掃描儀產品高昂的價格，以及從3D掃描到列印的繁瑣過程，都是限制3D列印大規模應用的原因。 -
一鍵生成人臉像素圖,還能上傳到動森!這個項目很好玩
日本獨立開發者 Sato neet 自學人工智慧技術，開發出網站 PixelMe，可以將人像照片一鍵轉換成像素畫，生成的圖像還可以導入到最近大熱的遊戲《動物森友會》。不止如此，這個網站還設有寵物模式，主子的照片也可以變成像素畫了。 -
基於GAN的「真人捏臉」已上線,照片逼真無死角
用3D模型的參數，控制2D照片目前的3D和2D人臉生成模型，在真實性和參數可控這兩方面，有著很大的差異。3D人臉的參數可以分為幾種：臉型變化、姿勢差異、表情變化。那麼，有沒有辦法將這兩類人臉模型的優勢結合起來，利用3D模型的參數控制，生成可以控制具體環節的2D照片呢？