【專訪】小米Face ID供應商Mantis Vision:虛擬會議場景很快就會實現

2021-01-07 界面新聞

《王牌特工2》中有一個場景:特工們只需要戴上AR眼鏡,就能實現遠程開會,世界各地的特工聚在一起,坐在長桌旁商討事務。一家以色列技術公司Mantis Vision已經通過手機將這項技術變為現實。

5月31日,小米8發布,搭載了Face ID技術,紅外人臉識別,官方稱即使在黑暗環境下也能快速解鎖。這也是第一款在Face ID上能與蘋果對標的安卓手機。

Mantis Vision是其3D結構光供應商。自從蘋果公司2013年以3.45億美金收購Prime Sense、並在iPhone X中首次將3D結構光用於人臉識別和支付後,這項技術就備受關注。這是該技術在安卓手機上的首次嘗試。不同於iPhone X的DOE(衍射光學元件)投影,Mantis Vision採用基於掩膜的編碼結構光,通過創新的專利編碼技術,獲取深度信息。

3D捕捉技術目前有三種主流方式:

雙目成像(stereoscopic):它模擬人的雙眼,使用兩個或者兩個以上的攝像頭同時採集圖像,通過比對這些不同攝像頭在同一時刻獲得的圖像的差別,使用算法來計算深度信息,從而多角三維成像。現在手勢識別領域的Leap MoTion使用的就是這種技術。光飛行時間(TIme of Flight):通過光打過去和返回來的相位差計算距離,實現3D成像。TOF系統可同時獲得整個場景,確定3D範圍影像。利用測量得到的對象坐標可創建3D影像,並可用於機器人、製造、醫療技術以及數碼攝影等領域的設備控制。代表廠商有微軟(Kinect2代)、意法半導體、英飛凌、德州儀器等。結構光(Structure Light):通過雷射把不同形態的光斑打到物體上。這些光斑人眼不可見,但可以用紅外攝像頭捕捉到,通過光斑反射過來的形變去推測物體表面的形狀。

第三種結構光技術目前是業界比較成熟的深度檢測方案,很多的雷射雷達和3D掃描技術都是採用的結構光方案。同時,這也是蘋果iPhone X和Mantis Vision採用的技術方案。

完成後,Mantis Vision同時提供的編碼技術,在高解析度模式下,使用1M傳感器能獲得120K特徵點,使用VGA傳感器能獲得40K特徵點;更多的真實坐標點,幫助保留物體更小的細節特徵,還原掃描目標的原貌,同時有效降低處理運算量。

這是什麼概念?3D 成像點數會決定物體的成像質量。如果點數過少,成像會有漏洞。據Mantis Vision中國區負責人介紹,iPhone X 3D投射發射器發射了2.8萬個點,成像是1.7萬個點。到年底的成品上,Mantis Vision會達到12萬個坐標點的量級。

以色列公司Mantis Vision已經成立有13年的歷史了,一直專注於3D及計算機視覺領域的創新技術。之前獲得過高通、索尼、三星等企業的投資。2018年3月,該公司正式進入中國。根據聯美控股此前的公告:聯美控股(600167)與以色列方面共同投資成立合資企業「螳螂慧視科技有限公司」,致力於將世界頂尖的3D及計算機視覺領域創新技術應用並服務於中國市場。除雙方合資的螳螂慧視公司之外,其還是以色列Mantis Vision公司的第一大股東。

中國區負責人告訴界面新聞記者,在多年研發的基礎上,Mantis Vision專利的自動校準技術,極大地提高了3D相機使用的穩定性。在日常使用中發生碰撞,或因溫度變化引起機械形變的過程中,Mantis Vision憑藉強大的技術,能支持設備在一定形變範圍內,通過軟體進行實時主動校準,以保證高質量3D數據的獲取。

雖然在小米8上,該技術只用於3D人臉識別和支付應用。但未來,這項技術承載的是真實世界input的角色,將真實世界數位化。從而產生一些與傳統二維成像完全不同的應用場景。

比如目前主流的裸眼3D展示技術,可以追蹤到你眼球的位置。用戶是在看網頁、廣告、在頁面上哪個點停留的時間多,都可以做出測算。人眼眨眼的頻率、瞳孔的放大縮小,可以反映80多種不同的情緒,根據這些信息,手機的前置攝像頭可能會變成最了解你的人。

現在的廣告投放主要依靠點擊和搜尋引擎,該技術很有可能徹底顛覆這種商業模式。

再比如,如果應用到新零售上,用戶走進一家商店時,門口的3D攝像頭就可以自動識別出這個人的身材、合適的服裝尺寸,直接向你推薦服裝甚至適合你的搭配風格。基於此,,甚至可以用來調整庫存情況。這是目前很多「試衣鏡」屏幕沒有辦法比擬的。

針對大數據方面的匯總分析,Mantis會提供行業相關的計算機視覺關鍵算法,如服裝零售行業,提供人體測量、姿勢識別算法;安防領域的人臉識別算法等。

回到文章開頭,在未來的虛擬會議上,前面180度的鏡像會出現在會議室裡、或者出現在別人的桌子上。如果有幾臺設備,就可以實現360度全息投影了。這項技術將在今年AWE上展示。

相關焦點

  • 小米8與iPhoneX的Face ID有什麼差別?分析3D結構光技術與供應鏈
    目前國產手機廠商華為、OPPO、VIVO等正在集體跟進蘋果的Face ID技術,小米則首發了小米8探索版支持Face ID,同樣內置3D傳感器元件,但與iPhone X的Face ID存在差異。另外,配合相機的高幀率,還可以實現 3D 內容的實時動態捕捉。 Face ID 3D結構光技術與其他基於2D信息的認證技術不同,人臉3D深度信息更安全更私密,這項技術承載的是將真實世界數位化,從而產生一些與傳統二維成像完全不同的應用場景,未來在諸多領域擁有廣泛的應用空間。 除了小米之外,OPPO也即將發布支持3D結構光的新機。
  • Linkface亮相CVPR 2017
    日前,計算機視覺領域頂級會議國際計算機視覺與模式識別會議(CVPR)在美國夏威夷火奴魯魯Hawaii Convention Center開幕,人工智慧初創企業Linkface亮相CVPR2017舞臺。
  • Mantis Vision攜手NTT DOCOMO在日本落地XR影棚
    Mantis Vision(螳螂慧視)作為全球領先的3D傳感設備和3D動態內容捕獲及分享技術的解決方案供應商,其3D影棚3iosk已經納入DOCOMO的3D影棚計劃中。  體積視頻捕捉技術是使用環繞式分布的攝像頭來記錄360度的人物動態內容,並將其轉變為逼真的3D全息影像。用戶可隨時隨地從行動裝置和電腦上以任何角度查看3D內容。這項技術已應用於娛樂行業,包括體育、音樂視頻及遊戲。
  • ARKit 2.0實現真實物體在虛擬場景中的反射、倒影效果
    文章相關引用及參考:映維網ARKit的一大進步(映維網 2018年06月13日)蘋果在2017年發布的ARKit給人留下了很深的印象,不過新版本ARKit 2.0更是充滿潛力,真實對象在ARKit SCNFloor功能下可以實現虛擬反射
  • Python多階段框架實現虛擬試衣間,超逼真
    作者 | 李秋鍵責編 | 晉兆雨頭圖 | CSDN下載自視覺中國任意姿態下的虛擬試衣因其巨大的應用潛力而引起了人們的廣泛關注。在標準數據集上進行的大量實驗表明,他們提出的框架實現了最先進的性能,特別是在保存服裝紋理和面部識別的視覺細節方面。故今天我們將在他們代碼的基礎上,實現虛擬換衣系統。
  • 專訪一數科技曹騰:用虛擬投影開啟可穿戴設備未來
    不久前CSE上,一家中國公司推出了一款頗具新意基於虛擬顯示技術的可穿戴設備。這款被稱為「腕投」的設備能否重新定義可穿戴?它到底有哪些創新之處?可穿戴設備的未來會是什麼?帶著這些疑問,我專訪了該產品研發公司一數科技的創始人曹騰。
  • 首款登陸iOS的人臉識別應用FaceVault
    這款應用的人臉識別是基於蘋果前置攝像頭和Eigenface特徵臉算法來進行分析而實現的,後者則是目前為止最為先進的人臉識別技術。這款應用的開發者Robert Neagu表示,「這種算法很先進,即使戴上眼鏡或化了妝,仍然可以完成解鎖。」如果人臉識別失敗,用戶就會自動轉入另一個屏幕,然後用後備密碼完成解鎖。
  • Linkface黃碩:不可錯過「人工智慧+」浪潮
    (GIC)上海論壇激辯創新……上半年,黃碩的身影在各大海內外人工智慧行業會議間穿梭。憑藉對市場的精準預判,Linkface在黃碩的帶領下逐步在人工智慧領域嶄露頭角。在技術為本的發展戰略下,創業之初的Linkface專注原創技術,不斷尋求算法和技術上的突破,在利用超過1億張人臉數據對模型進行持續訓練後,其人臉識別算法在國際權威臉部檢測資料庫LFW上實現了99.55%以上的準確率,超越Facebook同期發表的Deepface算法。
  • Linkface願景:利用人工智慧實現保險理賠自動化
    不僅是尋人,過去一年,一些門禁、自動售賣機上都實現了「刷臉支付」,人工智慧已經在更廣泛的領域給我們帶來驚喜,它也正在讓這個社會變得更加美好。計算機視覺企業Linkface正在努力把這種美好放大。在金融安全等領域站穩腳跟之後,Linkface又把目光投向保險行業,目前,Linkface正在聯合多家大型保險公司,希望將基於深度學習的圖像識別技術應用在車險、農險、壽險等領域,其中佔產險行業七成以上市場份額的車險是Linkface的關注重點。當前全行業車險處於微利和虧損之間,除了市場競爭環境影響外,還與各家保險公司管控水平有關。
  • 【前沿】5G全息,將成未來會議的標配場景
    更多精彩內容請關注我們 【前沿】5G全息,將成未來會議的標配場景 什麼是全息投影技術? 全息投影技術(front-projected holographic display)也稱虛擬成像技術,是利用幹涉和衍射原理記錄並再現物體真實的三維圖像的技術。
  • Linkface:AI助力傳統保險行業實現業務自動化
    36氪此前介紹了一家計算機視覺企業Linkface,它專注於將圖像識別技術應用在金融領域。《「刷臉」業務之後,Linkface想幫助金融機構更高效地建立個人徵信數據肖像》文中提到,Linkface當時的主營業務有兩部分,一部分是提供在線人臉身份認證服務,另一部分是通過挖掘單體深度人際關係,為金融機構提供更精準的客戶信用評估服務。
  • 3D空間數字網際網路|VR虛擬實境技術已經進入我們日常方方面面場景
    VR虛擬實境是一個新興的、快速增長的行業。隨著信息技術,尤其是5G、智能傳感器與圖形顯示等技術的發展,虛擬實境技術已成為21世紀最先進的主流技術之一,並且在產業應用方面的貢獻日益突出。虛擬實境以其獨特的沉浸性、構想性和交互性在商業、工業、軍事、醫療、教育、傳媒、娛樂等眾多領域應用廣泛且深入,實現各傳統型產業/專業的增值、增效。
  • 虛擬物品貿易存多重隱患 供應商逼債IGE中國
    虛擬物品貿易存多重隱患 供應商逼債IGE中國 央視國際 www.cctv.com  2007年05月31日 14:53 來源:第一財經日報   玩家在網路遊戲世界中創造了虛擬貨幣或道具,這些虛擬貨幣和道具進行跨國貿易成為了一個特殊而又很不規範的市場
  • 小米怎麼進入開發者選項/模式 虛擬身份證設置教程
    MIUI12.5迎來發布,最新的小米11將和MIUI12.5與大家見面,那麼小米手機是如何進入開發者模式MIUI的虛擬身份證怎麼開啟,今天小編就給大家帶來如何進入開發者模式以及虛擬身份證怎麼開啟詳細步驟,一起來看看吧
  • 蘋果手機的Face ID解鎖和小米MIX2S的AI人臉解鎖有什麼區別?
    目前包括小米MIX2S在內的所有國產手機的面部解鎖,都和iPhoneX的Face ID不可同日而語,是兩個不同時代和不同層次的東西。對比小米mix2s來說,蘋果的Face ID解鎖更安全,識別速度也更快。
  • 視覺工具包torchvision重大更新:支持分割模型、檢測模型
    慄子 發自 凹非寺量子位 出品 | 公眾號 QbitAIPyTorch宣布了視覺工具包torchvision的重大更新。終於來到torchvision 0.3了。torchvision算子就像開頭提到的那樣,torchvision這次有了定製的C++/CUDA算子,計算機視覺專用。
  • 基於手部動作感應和即時音頻合成的虛擬演奏系統
    基於手部動作感應和即時音頻合成的虛擬演奏系統 —— ——2008年英特爾杯大學生電子設計競賽嵌入式系統專題邀請賽作品簡介 作者:杜娟,劉中金,梁琦,賈挺祥 北京理工大學 時間:2008-11-10來源:電子產品世界收藏
  • 訪31會議CEO萬濤:疫情推動會展新舊動能轉換
    在2019年接受《中外會展》的專訪時,萬濤就曾透露31會議已專門就如何提升展覽企業的「數位化收入」做出了重大布局,並推出了會展中臺系統EVENTOS3。「該系統確實在疫情中為我們快速構建線上會展解決方案發揮出了非常重要的作用。」
  • 專訪微軟沈向洋:小冰入駐華為手機只是開始,做 AI 是漫長工程
    2014年人工智慧伴侶虛擬機器人「微軟小冰」誕生於北京的微軟亞太研發集團總部。四年來,微軟研發團隊專注致力於以EQ(情商)為基礎的的AI體系的建設,如今,微軟小冰已從一個有情感的人工智慧對話機器人,發展成為以情感計算為核心的完整人工智慧框架。
  • FATF發布穩定幣、虛擬資產相關的重要指引
    6月30日晚間,金融行動特別工作組(Financial Action Task Force on Money Laundering,以下簡稱FATF)發布第31屆第3次視頻全體會議的系列成果。本次會議由FATF輪值主席、中國人民銀行條法司司長劉向民主持,200多個國家或地區參與。其中,中國代表團由中國人民銀行、外交部組成,中國人民銀行行長易綱出席全會並致辭。