• 作者 靈火 • 2016年12月19日21:31 • 速途網
2012年一部叫《刀劍神域》的日本動漫火遍了大半個世界,在這部動漫作品裡主人公桐人藉助著一款VR設備進入了虛幻世界與女主亞絲娜談了一場跨越虛擬與現實界限的戀愛。
但試想假如沒有一開始就掃描了所有玩家的真身這個前提的存在。那麼第一次見面的時候他看到的亞絲娜形象也許是這樣的(畢竟你哪知道對方會選什麼形象)…
你覺得他們還能戀愛嗎?
可是目前像Oculus Social、AltspaceVR、vTime這些已知的VR社交平臺都存在一個通病——每個人都的化身都不怎麼像人。
這種情況導致你在和對方交互的過程中根本不清楚這個人究竟是誰,就像這樣:
近日,一家加州初創公司推出了一款智能 3D 模型軟體 Loom.ai ,利用機器學習和計算機視覺技術,根據用戶 2D 平面照片,生成 3D
頭像。
值得一提的是,Loom.ai所生成的3D頭像可以達到以假亂真的效果。
開發初衷
當問及為何會開發這樣一項技術時,曾在盧卡斯電影公司,為《加勒比海盜》和《復仇者聯盟》做特效的Loom.ai創始人Kiran Bhat
表示,我們認為需要把用戶帶入到(虛擬空間)體驗之中。
員工頭像全部採用3D建模
這意味著,要找到一種把普通用戶像電影演員那樣數位化的方式(但不能那麼貴)。
於是,Kiran Bhat和視覺特效藝術家 Mahesh Ramasu
bramanian開始了這項研究。由於使用人群定位為普通消費者,那麼產品本身就不能和專業數位化設備一樣既佔空間又難於駕馭。
最終他們才有了將照片掃描技術和A.I技術合二為一的想法,研究之初他們給這一研究項目起了一個代號——Loom.ai。
功能
據該團隊介紹,Loom.ai的核心技術是A.I.算法。通過提前錄入的人體面部肌肉技術數據,Loom.ai可以找到2D圖片中人物面部對應的肌肉組的位置。然後通過深度計算將原本看不到的部分還原出來。
該公司表示,Loom.ai能做到:
1、媲美 3D 掃描的的視覺保真度
2、頭像是可動的,像動畫人物一樣
3、算法生成的 3A 級面部肌肉,自動契合不同臉型
4、頭像可以通過嘴巴、眼睛、面部肌肉的活動做出各種表情,表現豐富的情感
5、去除照片光線。生成的頭像可以融入各種光線環境,產生不同光照效果
值得注意的是,通過Loom.ai生成的3D頭像的眼睛部位採用了該團隊自主研發的高頻段掃描建模技術,可以最大程度真實還原照片中眼睛的樣貌。
俗話說眼睛是人類心靈的窗口,Loom.ai在人眼刻畫方面的出色表現還是值得點讚的。另外, Loom.ai
不僅可以做高仿真的細節,還能讓頭像高度虛擬化,成為可愛的動漫人物。
應用前景
從公布的消息來看團隊為用戶提供了一個表情包,由Loom.ai生成的3D 頭像目前可以表現傷心、快樂、憤怒和好奇這四種情緒。
用戶可以通過 Sketchfab (一個 3D
模型的展示、分享網站)來查看生成的頭像,並將其應用在相應的3D虛擬世界中的合成動畫場景和交互動態。
除此之外,Kiran Bhat在採訪中表示,目前Loom.ai 將許可給第三方公司使用,讓他們把 3D
頭像功能加入自己的VR平臺。而且目前已經有不少平臺在進行合作,比如Facebook。
在速途網看來,Loom.ai技術可以實現真人的3D建模,這對於遊戲來說是十分重要的一環。眾所周知,除了VR遊戲之外像《第二人生》、《WOW
》和《九陰真經》這些社交類主機遊戲裡面的人物角色幾乎也是一模一樣的,如果能讓玩家用自己的「真面目」遊戲,也應該會更受歡迎吧?
《九陽真經》人物
利用3D掃描來重建高仿真3D人物模型早已不是什麼新鮮事了,但是由於受到技術的限制這一技術遲遲未被應用在個人消費者的身上,畢竟這樣的成本實在太高,而Loom.ai技術恰好打破了這一尷尬局面。