【本翼資本】ToF技術推動3D視覺井噴

2021-01-10 騰訊網

隨著人工智慧科技的快速發展,3D sensing技術將成為新的發展趨勢。ToF技術門檻較低且應用場景多元化,因此ToF方案是目前被業界看好的方案。3D感知攝像頭融合AI、5G和大數據等技術發展,未來在智慧城市、日常生活場景中無縫融入。未來全球 3D感知攝像頭市場規模將不斷擴大。

一、3D感知攝像頭發展趨勢

(一)技術層面

2017 年蘋果發布的 iPhone X 採用結構光 Face ID 用於人臉識別,開啟了3D感知相機在手機的應用先例,以此替代傳統 Home 鍵指紋解鎖,從而提高手機解鎖安全性。3D sensing技術主要解決生物識別與感知,通過人機互動技術計算攝影,實現從2D 向3D 的轉化。

1、3D sensing技術介紹及分析

3D sensing 技術主要分為三種方案,包括結構光、ToF 和立雙目測距法。目前比較成熟的是結構光和ToF技術。

結構光技術:通過近紅外雷射器,將具有一定結構特徵的光線投射到被拍攝物體上,再由專門的紅外攝像頭進行採集。這種具備一定結構的光線,會因被攝物體的不同深度區域,而採集不同的圖像相位信息,然後通過運算單元將這種結構的變化換算成深度信息,以此來獲得三維結構。結構光是基於雷射散斑原理,通過採集物體的三維數據構建 3D 模型,具有成像精度較高、反應速度與成本適中的特點,主要用於近距離 3D 人臉識別,目前在 iPhone X,華為 Nova2s等多款機型的前置攝像頭中均有應用。

TOF 是飛行時間(Time of Flight)技術的縮寫,其原理是:傳感器發出經調製的脈衝紅外光,遇物體後反射,傳感器通過計算光線發射和反射時間差或相位差,來換算被拍攝景物的距離,以產生深度信息,此外再結合傳統的相機拍攝,就能將物體的三維輪廓以不同顏色代表不同距離的地形圖方式呈現出來。飛行時間測距法(ToF)利用反射時間差原理,通過計算探測光飛行時間實現 3D 成像,刷新率較快,能夠覆蓋中遠距離,可廣泛應用在手勢追蹤、手機後置輔助相機等,在 華為 P30 Pro 、華為 Mate 30 Pro等已有應用。

TOF 技術的優點:

(1) 軟體複雜性低,設計與應用簡單;(2) 在暗光與強光環境下表現不錯;(3) 功耗不高;(4) 有較遠的探測距離;(5) 響應速度快。

圖表1.1 三種3D sensing 成像方式

ToF 技術根據發射光的調製形式,分為直接飛行時間測量(Direct-TOF,即dToF)和間接飛行時間測量(Indirect-TOF,即 iToF),直接飛行時間測量採用脈衝調製,而間接飛行時間測量採用連續波調製。dToF 技術要求更高,測量精度更高。dTOF 需要採用高精密時鐘進行測量且需要產生短時間、高頻率、高強度的雷射,對硬體的要求較高。其優點也比較顯著,省電、成像速度高,由於發射端能量較高,所以一定程度上降低了背景光的幹擾,探測更遠的距離。

圖表1.2 ToF技術分類

圖表1.3 dToF和iToF優缺點

2、3D sensing技術發展

ToF具備結構簡單、模組尺寸更小、探測距離更遠、材料成本更低等優勢,在手機的後置場景更有優勢,並在少數安卓旗艦機型獲得應用。2020年3月18日蘋果發布了新的 iPad Pro,搭載 3D dToF 技術(蘋果稱為 LiDAR),在納秒的極短時間內測量室內或室外環境中從最遠五米處反射回來的光子。媒體報導,即將在今年 9 月發布的 iPhone 12 系列手機也有望採用 3D TOF 技術。

圖表1.4 第四代 iPad Pro 搭載了 TOF 相機

相比此前安卓手機廠商採用的 3D iToF 技術,蘋果採用的 3D dToF 技術響應快、功耗低、功能完善。

圖表1.5 ToF技術發展路線

(二)3D感知攝像頭產業層面

1、3D感知攝像頭產業鏈

整個 3D 感測產業鏈包括 3D 攝像頭模組(包括 3D 結構光和 TOF)、軟體算法以及系統整體解決方案提供商 3 個環節。而 3D 結構光和 TOF 模組基本組成相同,都由光源(illuminator)、傳感器陣列(Sensor Array)和光學器件(Optics)等零部件組成。

3D攝像頭產業鏈可以被分為:

上遊:紅外傳感器、紅外光源、光學組件、光學鏡頭以及CMOS圖像傳感器等硬體零件與基礎算法提供商。

中遊:傳感器模組,攝像頭模組,光源代工、光源檢測及圖像算法等供應商,主要從事硬體集成和軟體開發。

下遊:終端廠商及場景應用。

圖表1.6 3D sensing結構光方案產業鏈

ToF 感知相機主要包含方案廠商、發射端、接收端、模組組裝。發射端:通常由 VCSEL 雷射器及光學器件組成。接收端:包括 ToF sensor、濾光片和鏡片。ToF sensor 收集反射回來的經過紅外濾光片過濾的紅外光,測量光線從發射單元到每個像素點的時間,同時記錄被拍物體的 2D 黑白圖像。濾光片僅允許發射端相應波長的紅外光通過,過濾掉其它波長的光學幹擾。模組組裝:將 ToF sensor、VCSEL 雷射器、光學元器件等集成為一個完整的模塊。

圖表1.7 消費電子 TOF 產業鏈結構

2、3D感知攝像頭產業發展

國產機 3D sensing 陣營將由晶片算法+光學方案分成三大陣營:高通+himax;華為海思+AMS+舜宇;MTK+奧比中光。

圖表1.8 搭載 ToF 攝像頭手機與供應商

圖表1.9 蘋果、三星、華為的ToF供應鏈

據 Yole 預測,2023 年整個 3D 攝像頭模組的市場規模可達 155 億美元,其中光源市場佔 14%,傳感器市場佔 17%,光學器件市場佔 28%,模組市場佔 40%。

圖表1.10 3D 攝像頭模組的市場

二、3D感知攝像頭前景分析

(一)3D感知攝像頭市場前景

3D 感知成像應用場景不斷增加,市場規模持續擴大。根據 Yole 預測,2023 年全球 3D 感知成像市場規模將從 2017 年的 19 億美元增加至 180 億美元,對應 2018-2022 年複合增速達到44%。其中增長最快的屬於消費電子,將由 2018 年的 18 億美元增長至 2023 年的 138 億美元,CAGR 超過 50%。

圖表2.1 全球3D感知成像市場規模

據 IHS Markit 報告,2018 年全球 TOF sensor傳感器市場規模為3.7億美元,佔整個3D感知市場的33%,2019年其市場規模同比增長35%,市場份額達到 5 億美金,佔比提高至40%左右。基於TOF方案的多方面優勢,尤其是成本優勢,預計2022 年,TOF sensor 市場規模有望達到 15 億美金。

圖表2.2 ToF sensor 市場規模(億美元)

(二)3D感知攝像頭應用場景

除智慧型手機之外,未來 3D Sensing 將在人機互動、即時通信、智能家居,AR/VR 技術以及機器人、自動駕駛輔助等領域有很廣闊的應用市場。

圖表2.3 ToF 的應用場景

1、手機

智慧型手機的相機創新是消費者選購手機的主要考慮因素之一。根據中關村在線2019Q1發布的報告,在處理器、相機、屏幕、遊戲體驗等諸多方面,相機功能是消費者最為關注和看重的,佔據29%的關注度。各個手機廠商都極為重視相機的創新。

圖表2.4 消費者關注度

智慧型手機的下一階段發展重點方向之一是3D感知攝像頭。3D 感知相機帶來立體視覺,增加了臉部解鎖、支付、測距等功能,提高安全性和效率。蘋果在 2017 年開創了前置 3D 深度相機的先例,各大手機廠商不斷嘗試後置 3D 相機的應用,蘋果新款 iPad Pro 正加速後置 3D 相機的推進。

結構光和 ToF 兩種 3D 視覺方案在智慧型手機領域的應用,此前在業界比較常見的做法是 ToF 後置,結構光前置。前置方案主要應用於解鎖以及安全支付、3D 人臉建模等方面;而 ToF 方案多被用於智慧型手機後置;從應用場景上來說,除了用於後置攝影,ToF 技術還在 AR 等領域(包括 3D 拍照、體感遊戲等)有一定的作用。但華為 Mate 30 Pro,它是業內首款在前置和後置攝像頭模塊都採用 3D 視覺技術的手機,它的前置和後置 3D 深感攝像頭所採用的方案均為 ToF 方案。

圖表2.5 高端機型優先裝載3D感知攝像頭

圖表2.6 2019年4-5月中國4000元以上暢銷機型銷量

據Trend Force 預測,未來幾年3D感知成像市場規模將呈幾何式增長,到2020年,3D感知成像市場規模可達到 108.49 億美元。根據 Yole預測,3D 攝像頭在智慧型手機中的滲透率將在未來幾年大幅上升,2025年將達到 70%,市場空間廣闊。

圖表2.7 全球 3D sensing智慧型手機市場佔比

圖表2.8 3D 攝像頭在智慧型手機的滲透率預測

據 Deutsche Bank 統計,2017年搭載3D Sensing 模組的智慧型手機(僅有 iPhone)數量為3800萬臺,在智慧型手機上搭載率僅為 3%。2018 年隨著 3D Sensing 模組在 Android 手機上進行使用,智慧型手機市場 3D Sensing 模組需求擴大。據預測,2020 年搭載 3D Sensing 模組的 iPhone 手機數量將達 4.4 億臺,搭載 3D Sensing 的 Android 手機數量將達 4.65 億臺,3D Sensing 在智慧型手機上搭載率將達到 38%。

圖表2.9 智慧型手機市場 3D Sensing 模組搭載情況預測

2、AR/VR

TOF技術是 AR 技術實現的基礎,能提供 3D 拍照、3D 識別和 3D 建模等功能。根據 IDC 預測,全球 AR/VR 支出規模在2019年達到168億美元,預測在 2023 年將達到1600億美元,AR/VR 支出規模在2019到2023年間複合年增長率(CAGR)將達78%。IDC 還預測中國市場 AR/VR 支出規模增長更快,2023年,中國 AR/VR 市場支出規模將達到 652.1 億美元,較2019 年的預測(65.3 億美元)有顯著增長。2018-2023年CAGR將達到 85%。

圖表2.10 全球AR/VR支出規模(億美元)

蘋果 ARKit、谷歌 ARCore、華為 Cyberverse 數字平臺的開發,推動了AR生態發展,AR的成長空間已被打開,未來將是一個硬體和內容相互推動升級的過程,ToF 將先在手機、平板等現有硬體上獲得廣泛應用,後續也將在 AR 眼鏡、頭盔等新型硬體上應用。

圖表2.11 AR 生態發展加速 ToF 應用

圖表2.12 全球 AR 軟體情況(個)

隨著AR技術的提升,提高消費者使用AR應用,產業將迎來 AR 眼鏡/頭盔的興起,ToF 的下遊應用從手機拓展至眼鏡等。據 IDC 預測,2023 年全年 AR 眼鏡銷量將達到 3190萬臺,對應 2019-2023年複合增長率高達169%。AR 眼鏡的出貨量增長將快速拉動下遊內容應用製作,以及產品多樣性,進一步刺激 AR 整體市場規模增長。據中國信息通訊研究院預測,2023 年全球 AR 市場規模將達到 416.7 億元,對應 2019-2022 年複合增速達到79%。

圖表2.13 全球AR眼鏡出貨量

圖表2.14 全球AR市場規模

3、無人駕駛

ToF 技術不僅可以用在手機上,還可以用在汽車上。採用了ToF 技術的倒車系統可同時偵測多個不同距離障礙物,當檢測到有行人或者障礙物靠近,透過軟體處理後,能以影像顯影或聲音警示距離,進一步輔助駕駛路況。隨著自動駕駛技術日益成熟,每輛車配置的車載攝像頭數量也呈現上升趨勢。儘管全球汽車出貨量同比下降,但根據 Yole 數據,2018 年平均每輛汽車搭載 1.7 個攝像頭,2023 年將增加至3個;TSR 預計全球車載攝像頭總出貨量將由2018年的1.09億顆增加至 2021 年的1.42億顆,對應2019-2021年CAGR為6.9%。

圖表2.15 29平均每輛汽車搭載攝像頭數量變化

圖表2.16 全球車載攝像頭總出貨量預測

相關焦點

  • 盧偉冰吐槽TOF技術是噱頭,網友笑了:聽聽華為怎麼說
    而且在去年有一個新的名詞逐漸的出現,它就是tof,後來tof技術更是已經成為了智慧型手機旗艦的標配,然而所有人都這麼認為的時候,小米卻不走尋常路。盧偉冰的吐槽大家都知道,盧偉冰算得上是一張大嘴巴,一直以來說話都是肆無忌憚的,什麼話都說得出口。之前盧偉冰在金立做事,後來金立倒了就來到了小米跟著雷軍一起混。
  • 3D視覺成像的下一站 淺析TOF 3D立體攝像頭技術
    然而,如今的人們已經不再滿足於「屏幕內的視界」,除了需要拍攝更具立體感的照片,更安全的面部識別/支付、3D試妝、AR裝潢、AR遊戲、體感遊戲、全息影像交互等需要「3D視覺成像」技術支撐的應用環境(圖1),才是智慧型手機未來的發展趨勢。
  • 【2017歐洲微生物與傳染病年會系列報導】MALDI-TOF MS在ECCMID中...
    2002年,該技術獲得諾貝爾化學獎,評獎委員會認為該技術突破了生物大分子質譜分析的難題,在臨床診斷領域具有巨大的應用潛力。maldi-tof ms技術在eccmid會議上多次被提到,其中在華人會議上,北京協和醫院檢驗科徐英春主任介紹在關於中國侵襲性真菌的流行性及耐藥情況的研究中
  • 盈科資本數千萬元投資恆翼生物
    恆翼生物
  • 福彩3d285期大獎井噴了
    今晚福彩熱門的彩票玩法3d具體開獎信息先出來了,本期3d爆出110475注大獎,具體情況如何我們往下看。我們為了有個比較,首先我們來回顧一下前兩期福彩3d具體開獎信息,本月一號開獎的283期3d開獎號碼為:984,單雙比是1:2,大小比是2:1和值21。
  • 盈科資本持續加碼明星生物醫藥企業恆翼生物
    近日,盈科資本在去年初對恆翼生物數千萬元投資的基礎上又追加了數千萬元的投資,此次投資表明盈科資本對恆翼生物的發展前景充滿信心。恆翼生物成立於2018年,擁有非常優質的研發團隊,其創始人為原豪森藥業資深副總裁,國家頂級計劃專家李元念博士。
  • 生物醫藥技術研發商「恆翼生物」再獲盈科資本數千萬元追加投資
    【獵雲網北京】7月10日報導獵雲網近日獲悉,盈科資本在去年初對恆翼生物數千萬元投資的基礎上又追加了數千萬元的投資,此次投資表明盈科資本對恆翼生物的發展前景充滿信心。盈科資本該項目負責人表示,繼續加碼恆翼生物看中其頂尖的團隊背景,超強的新藥研發能力,以及豐富且具有較大市場潛力的產品管線。完成對恆翼的投資後,盈科資本的生物醫藥資產將更加全面和優質。該負責人同時表示,投資的完成標誌著服務的開始,後續盈科資本將對恆翼開放既有的生物醫藥圈層,在資本、臨床試驗、渠道等方面給予恆翼全方位的支持。
  • 打敗TOF、結構光?國內3D視覺市場添變數
    在3D深度視覺領域,不同於市場主流的結構光、TOF和雙目立體成像方案,全視通科技林志雄博士,根據多年潛心研究,基於模仿人眼的被動式「生物視覺」理論,提出任何環境下只需一個鏡頭就可被動成像的3D技術。  林志雄是來自臺灣科技大學工業管理研究所碩士,也是臺灣科技大學工業管理系博士和逢甲大學電機系博士,他在光學相關技術領域獲得的發明專利已超過100張。
  • 【3D專委會】會員單位第七元素牙齒材料與3D列印技術結合實現產業化落地
    《西部世界》的類人畫面,讓人們忌憚於克隆技術帶來的對人倫的挑戰,但又對克隆技術的新奇充滿遐想,隨著疫情在全球蔓延,生物醫用材料突然被推上舞臺,生物醫用材料將來會是一個巨大的熱點
  • 3D人臉識別智能鎖成新風口 3D結構光、TOF、雙目立體視覺三種技術...
    在人們的印象中,2D人臉識別技術雖然發展比較早,算法也比較多,穩定性也比較好。但由於2D攝像頭平面成像,無法接收姿態、光照等第三位信息,不可避免地存在人臉特徵信息損失,易受姿態、光照、表情等因素影響,識別率不夠理想;特別是在安全性方面也相對差一些,容易受到虛假人臉的攻擊,且很難分清雙胞胎面孔。
  • 奧比中光將通過3D視覺感知創新平臺建設,推動產業鏈上下遊協同發展
    打開APP 奧比中光將通過3D視覺感知創新平臺建設,推動產業鏈上下遊協同發展 MEMS 發表於 2020-12-01 17:24:49
  • 3D列印技術:3D列印珠寶首飾
    3D列印為設計增添了視覺複雜性,已成為創新藝術家和設計師創新性地挑戰傳統珠寶和配飾的推動者。時裝領域多年來一直在應用3D列印技術,以減少產品上市時間和降低成本,但主要是為了開發很難以其他方式製造的產品。對稱性,細節和可用設計的無限結合,為新公司打開了一個完全不同的市場。
  • vivo展示TOF 3D超感應技術
    備受關注的是,vivo還在MWCS現場首次發布了「TOF 3D超感應技術」,這項技術的出現突破了目前手機行業立體成像技術的局限,為未來的影像、人機互動、AR等帶來了無限可能,加速智慧手機時代的到來,引發現場媒體和參展者的熱烈關注。vivo一直遵循以科技時尚創造非凡生活的理念,堅持以技術加速來突破智慧未來。
  • 的盧深視:技術落地的試金石,規模與體驗讓3D視覺成為機器標配的眼睛
    2020第五屆中國人工智慧領袖峰會2020年11月13日在深圳會展中心(福田)桂花廳盛大開展,的盧深視創始人兼CEO戶磊受邀參加,並現場進行了《技術落地的試金石,規模與體驗讓3D視覺成為機器標配的眼睛》的演講分享。
  • CMOS圖像傳感器推動機器視覺技術系統軟體的發展
    17年,Stevie開始以創新的眼光理性布局其GS技術產品研發,並於2018年宣布全球首款商用服務——基於BSI清晰度處理技術的30萬像素級GSCMOS光學鏡頭——sc031GS,成為CIS公司進入「消費機器視覺技術」主要宗旨的第一個巔峰。
  • 結構光、立體視覺、ToF 3D傳感原理是啥?ams 3D傳感助力應用落地
    從目前來看,隨著機器視覺理論的發展,立體視覺在機器視覺研究中發回來看了越來越重要的作用。 Jennifer Zhao表示,「主動立體視覺比較適合覆蓋中等的距離,它的深度圖質量也是比較優良,但是精度沒有結構光好,由於比較簡單,價位比結構光更具有優勢,所以其受到一些客戶的青睞。」
  • 「3d掃描儀結合3d列印技術」學校3d創新教育的一把利器
    國之大計,教育為本,教育大計,要在樹人!解決好如何培養創新型人才這個問題,關乎民族未來,國運興衰,意義重大而深遠。隨著社會的不斷發展,對創新型人才素質提出了更高的要求。3d創新教育是以培養學生創新精神、創新能力、動手實踐能力為價值取向的新型教育。
  • 奧比中光線上workshop:3D視覺賦能動態三維重建技術革新升級
    這也是今年以來,奧比中光Workshop系列沙龍繼機器人、掃描行業、3D人體掃描專場之後又一場3D視覺專項技術研討活動。隨著像奧比中光這樣的3D視覺技術企業的發展,『追光』的性能將越來越完善」。作為全球為數不多對結構光、雙目視覺、iTOF、dTOF、雷射雷達等主流3D視覺感知技術均布局、研發的科技企業,目前,奧比中光量產的3D視覺傳感器已廣泛應用於智慧型手機、刷臉支付、機器人、智能家居、無人駕駛、工業測量等多個領域。
  • 突破立體成像局限:vivo正式發布TOF 3D超感應技術
    2D向3D進化,vivo加速推動行業變革 vivo一直遵循以科技時尚創造非凡生活的理念,堅持以技術加速來突破智慧未來。在去年的MWC大會上,vivo正式發布了屏幕指紋技術,並在後續發布的vivo X20 Plus屏幕指紋版、vivo X21以及最新的AI智慧旗艦vivo NEX上實現量產。
  • 深耕10餘年,專利200多項,這家企業是如何推動高速噴墨在中國井噴的?
    Drupa2008上,高速噴墨印刷技術一鳴驚人,給各國印刷人留下了深刻的印象與希望。此後每一年,高速噴墨印刷技術一直備受關注,但在國內市場叫好不叫座,行業裡率先「吃螃蟹」的企業,引進的大多也是國外品牌。而最近2年,沉寂已久的高速噴墨印刷設備市場突然呈現井噴之勢。