ToF技術推動3D視覺井噴

2020-12-20 36kr

一、3D感知攝像頭發展趨勢

(一)技術層面

2017 年蘋果發布的 iPhone X 採用結構光 Face ID 用於人臉識別,開啟了3D感知相機在手機的應用先例,以此替代傳統 Home 鍵指紋解鎖,從而提高手機解鎖安全性。3D sensing技術主要解決生物識別與感知,通過人機互動技術計算攝影,實現從2D 向3D 的轉化。

1、3D sensing技術介紹及分析

3D sensing 技術主要分為三種方案,包括結構光、ToF 和立雙目測距法。目前比較成熟的是結構光和ToF技術。

結構光技術:通過近紅外雷射器,將具有一定結構特徵的光線投射到被拍攝物體上,再由專門的紅外攝像頭進行採集。這種具備一定結構的光線,會因被攝物體的不同深度區域,而採集不同的圖像相位信息,然後通過運算單元將這種結構的變化換算成深度信息,以此來獲得三維結構。結構光是基於雷射散斑原理,通過採集物體的三維數據構建 3D 模型,具有成像精度較高、反應速度與成本適中的特點,主要用於近距離 3D 人臉識別,目前在 iPhone X,華為 Nova2s等多款機型的前置攝像頭中均有應用。

TOF 是飛行時間(Time of Flight)技術的縮寫,其原理是:傳感器發出經調製的脈衝紅外光,遇物體後反射,傳感器通過計算光線發射和反射時間差或相位差,來換算被拍攝景物的距離,以產生深度信息,此外再結合傳統的相機拍攝,就能將物體的三維輪廓以不同顏色代表不同距離的地形圖方式呈現出來。飛行時間測距法(ToF)利用反射時間差原理,通過計算探測光飛行時間實現 3D 成像,刷新率較快,能夠覆蓋中遠距離,可廣泛應用在手勢追蹤、手機後置輔助相機等,在 華為 P30 Pro 、華為 Mate 30 Pro等已有應用。

TOF 技術的優點:(1) 軟體複雜性低,設計與應用簡單;(2) 在暗光與強光環境下表現不錯;(3) 功耗不高;(4) 有較遠的探測距離;(5) 響應速度快。

圖表1.1三種3D sensing 成像方式

(資料來源:本翼資本整理)

ToF 技術根據發射光的調製形式,分為直接飛行時間測量(Direct-TOF,即 dToF)和間接飛行時間測量(Indirect-TOF,即 iToF),直接飛行時間測量採用脈衝調製,而間接飛行時間測量採用連續波調製。dToF 技術要求更高,測量精度更高。dTOF 需要採用高精密時鐘進行測量且需要產生短時間、高頻率、高強度的雷射,對硬體的要求較高。其優點也比較顯著,省電、成像速度高,由於發射端能量較高,所以一定程度上降低了背景光的幹擾,探測更遠的距離。

圖表1.2ToF技術分類

(資料來源:網際網路,本翼資本整理)

圖表1.3dToF和iToF優缺點

(資料來源:B站,本翼資本整理)

2、3D sensing技術發展

ToF 具備結構簡單、模組尺寸更小、探測距離更遠、材料成本更低等優勢,在手機的後置場景更有優勢,並在少數安卓旗艦機型獲得應用。2020年3月18日蘋果發布了新的 iPad Pro,搭載 3D dToF 技術(蘋果稱為 LiDAR),在納秒的極短時間內測量室內或室外環境中從最遠五米處反射回來的光子。媒體報導,即將在今年 9 月發布的 iPhone 12 系列手機也有望採用 3D TOF 技術。

圖表1.4第四代 iPad Pro 搭載了 TOF 相機

(資料來源:蘋果官網,本翼資本整理)

相比此前安卓手機廠商採用的 3D iToF 技術,蘋果採用的 3D dToF 技術響應快、功耗低、功能完善。

圖表1.5ToF技術發展路線

(資料來源:公司官網,本翼資本整理)

(二)3D感知攝像頭產業層面

1、3D感知攝像頭產業鏈

整個 3D 感測產業鏈包括 3D 攝像頭模組(包括 3D 結構光和 TOF)、軟體算法以及系統整體解決方案提供商 3 個環節。而 3D 結構光和 TOF 模組基本組成相同,都由光源(illuminator)、傳感器陣列(Sensor Array)和光學器件(Optics)等零部件組成。

3D攝像頭產業鏈可以被分為:

  1. 上遊:紅外傳感器、紅外光源、光學組件、光學鏡頭以及CMOS圖像傳感器等硬體零件與基礎算法提供商。

  2. 中遊:傳感器模組,攝像頭模組,光源代工、光源檢測及圖像算法等供應商,主要從事硬體集成和軟體開發。

  3. 下遊:終端廠商及場景應用。

圖表1.63D sensing結構光方案產業鏈

(資料來源:弘則研究,本翼資本整理)

ToF 感知相機主要包含方案廠商、發射端、接收端、模組組裝。發射端:通常由 VCSEL 雷射器及光學器件組成。接收端:包括 ToF sensor、濾光片和鏡片。ToF sensor 收集反射回來的經過紅外濾光片過濾的紅外光,測量光線從發射單元到每個像素點的時間,同時記錄被拍物體的 2D 黑白圖像。濾光片僅允許發射端相應波長的紅外光通過,過濾掉其它波長的光學幹擾。模組組裝:將 ToF sensor、VCSEL 雷射器、光學元器件等集成為一個完整的模塊。

圖表1.7消費電子 TOF 產業鏈結構

(資料來源:弘則研究,本翼資本整理)

2、3D感知攝像頭產業發展

國產機 3D sensing 陣營將由晶片算法+光學方案分成三大陣營:高通+himax;華為海思+AMS+舜宇;MTK+奧比中光。

圖表1.8搭載 ToF 攝像頭手機與供應商

(資料來源:YOLE,本翼資本整理)

圖表1.9蘋果、三星、華為的ToF供應鏈

(資料來源:Isaiah Research,本翼資本整理)

據 Yole 預測,2023 年整個 3D 攝像頭模組的市場規模可達 155 億美元,其中光源市場佔 14%,傳感器市場佔 17%,光學器件市場佔 28%,模組市場佔 40%。

圖表1.103D 攝像頭模組的市場

(資料來源:YOLE,本翼資本整理)

二、3D感知攝像頭前景分析

(一)3D感知攝像頭市場前景

3D 感知成像應用場景不斷增加,市場規模持續擴大。根據 Yole 預測,2023 年全球 3D 感知成像市場規模將從 2017 年的 19 億美元增加至 180 億美元,對應 2018-2022 年複合增速達到44%。其中增長最快的屬於消費電子,將由 2018 年的 18 億美元增長至 2023 年的 138 億美元,CAGR 超過 50%。

圖表2.1全球3D感知成像市場規模

(資料來源:YOLE,本翼資本整理)

據 IHS Markit 報告,2018 年全球 TOF sensor傳感器市場規模為3.7億美元,佔整個3D感知市場的33%,2019年其市場規模同比增長35%,市場份額達到 5 億美金,佔比提高至40%左右。基於TOF方案的多方面優勢,尤其是成本優勢,預計2022 年,TOF sensor 市場規模有望達到 15 億美金。

圖表2.2ToF sensor 市場規模(億美元)

(資料來源:IHS,本翼資本整理)

(二)3D感知攝像頭應用場景

除智慧型手機之外,未來 3D Sensing 將在人機互動、即時通信、智能家居,AR/VR 技術以及機器人、自動駕駛輔助等領域有很廣闊的應用市場。

圖表2.3ToF 的應用場景

(資料來源:網際網路,本翼資本整理)

1、手機

智慧型手機的相機創新是消費者選購手機的主要考慮因素之一。根據中關村在線2019Q1發布的報告,在處理器、相機、屏幕、遊戲體驗等諸多方面,相機功能是消費者最為關注和看重的,佔據29%的關注度。各個手機廠商都極為重視相機的創新。

圖表2.4 消費者關注度

(資料來源:中關村在線,本翼資本整理)

智慧型手機的下一階段發展重點方向之一是3D感知攝像頭。3D 感知相機帶來立體視覺,增加了臉部解鎖、支付、測距等功能,提高安全性和效率。蘋果在 2017 年開創了前置 3D 深度相機的先例,各大手機廠商不斷嘗試後置 3D 相機的應用,蘋果新款 iPad Pro 正加速後置 3D 相機的推進。

結構光和 ToF 兩種 3D 視覺方案在智慧型手機領域的應用,此前在業界比較常見的做法是 ToF 後置,結構光前置。前置方案主要應用於解鎖以及安全支付、3D 人臉建模等方面;而 ToF 方案多被用於智慧型手機後置;從應用場景上來說,除了用於後置攝影,ToF 技術還在 AR 等領域(包括 3D 拍照、體感遊戲等)有一定的作用。但華為 Mate 30 Pro,它是業內首款在前置和後置攝像頭模塊都採用 3D 視覺技術的手機,它的前置和後置 3D 深感攝像頭所採用的方案均為 ToF 方案。

圖表2.5高端機型優先裝載3D感知攝像頭

(資料來源:華為官網、蘋果官網,本翼資本整理)

圖表2.62019年4-5月中國4000元以上暢銷機型銷量

(資料來源:第一手機界研究院 ,本翼資本整理)

據Trend Force 預測,未來幾年3D感知成像市場規模將呈幾何式增長,到2020年,3D感知成像市場規模可達到 108.49 億美元。根據 Yole預測,3D 攝像頭在智慧型手機中的滲透率將在未來幾年大幅上升,2025年將達到 70%,市場空間廣闊。

圖表2.7全球 3D sensing智慧型手機市場佔比

(資料來源:Trend Force,本翼資本整理)

圖表2.83D 攝像頭在智慧型手機的滲透率預測

(資料來源:Yole,本翼資本整理)

據 Deutsche Bank 統計,2017年搭載3D Sensing 模組的智慧型手機(僅有 iPhone)數量為3800萬臺,在智慧型手機上搭載率僅為 3%。2018 年隨著 3D Sensing 模組在 Android 手機上進行使用,智慧型手機市場 3D Sensing 模組需求擴大。據預測,2020 年搭載 3D Sensing 模組的 iPhone 手機數量將達 4.4 億臺,搭載 3D Sensing 的 Android 手機數量將達 4.65 億臺,3D Sensing 在智慧型手機上搭載率將達到 38%。 

圖表2.9智慧型手機市場 3D Sensing 模組搭載情況預測

(資料來源:Deutsche Bank,本翼資本整理)

2、AR/VR

TOF技術是 AR 技術實現的基礎,能提供 3D 拍照、3D 識別和 3D 建模等功能。根據 IDC 預測,全球 AR/VR 支出規模在2019年達到168億美元,預測在 2023 年將達到1600億美元,AR/VR 支出規模在2019到2023年間複合年增長率(CAGR)將達78%。IDC 還預測中國市場 AR/VR 支出規模增長更快,2023年,中國 AR/VR 市場支出規模將達到 652.1 億美元,較2019 年的預測(65.3 億美元)有顯著增長。2018-2023年CAGR將達到 85%。

圖表2.10全球AR/VR支出規模(億美元)

(資料來源:IDC,本翼資本整理)

蘋果 ARKit、谷歌 ARCore、華為 Cyberverse 數字平臺的開發,推動了AR生態發展,AR的成長空間已被打開,未來將是一個硬體和內容相互推動升級的過程,ToF 將先在手機、平板等現有硬體上獲得廣泛應用,後續也將在 AR 眼鏡、頭盔等新型硬體上應用。

圖表2.11AR 生態發展加速 ToF 應用

(資料來源:網際網路,本翼資本整理)

圖表2.12全球 AR 軟體情況(個)

(資料來源:Tractics ,本翼資本整理)

隨著AR技術的提升,提高消費者使用AR應用,產業將迎來 AR 眼鏡/頭盔的興起,ToF 的下遊應用從手機拓展至眼鏡等。據 IDC 預測,2023 年全年 AR 眼鏡銷量將達到 3190萬臺,對應 2019-2023年複合增長率高達169%。AR 眼鏡的出貨量增長將快速拉動下遊內容應用製作,以及產品多樣性,進一步刺激 AR 整體市場規模增長。據中國信息通訊研究院預測,2023 年全球 AR 市場規模將達到 416.7 億元,對應 2019-2022 年複合增速達到79%。 

圖表2.13全球AR眼鏡出貨量

(資料來源:IDC,本翼資本整理)

圖表2.14全球AR市場規模

(資料來源:中國信通院《虛擬(增強)現實白皮書 2018》,本翼資本整理)

3、無人駕駛

ToF 技術不僅可以用在手機上,還可以用在汽車上。採用了ToF 技術的倒車系統可同時偵測多個不同距離障礙物,當檢測到有行人或者障礙物靠近,透過軟體處理後,能以影像顯影或聲音警示距離,進一步輔助駕駛路況。隨著自動駕駛技術日益成熟,每輛車配置的車載攝像頭數量也呈現上升趨勢。儘管全球汽車出貨量同比下降,但根據 Yole 數據,2018 年平均每輛汽車搭載 1.7 個攝像頭,2023 年將增加至3個;TSR 預計全球車載攝像頭總出貨量將由2018年的1.09億顆增加至 2021 年的1.42億顆,對應2019-2021年CAGR為6.9%。

圖表2.1529平均每輛汽車搭載攝像頭數量變化

(資料來源:Yole,本翼資本整理)

圖表2.16全球車載攝像頭總出貨量預測

(資料來源:TSR《2017年鏡頭市場調研報告》,本翼資本整理)

相關焦點

  • 3D成像:飛行時間法(ToF)可望推動CMOS圖像傳感器的發展
    3D成像:飛行時間法(ToF)可望推動CMOS圖像傳感器的發展 伍文輝 發表於 2018-04-02 09:33:40 3D成像(3D imaging)技術問世已有幾十年之久
  • 3D視覺傳感技術
    被動測距法被動測距技術不需要人為地設置輻射源,只利用場景在自然光照下的二維圖像來重建景物的三維信息,具有適應性強、實現手段靈活、造價低的優點。但是這種方法是用低維信號來計算高維信號的,所以其使用的算法複雜。被動測距按照使用的視覺傳感器數量可分為單目視覺、雙目立體視覺和多目視覺三大類。
  • 「雙創」3D感知新浪潮:ToF技術
    炬佑智能 創始人劉洋一路從國際半導體巨頭們的技術和市場管理崗位走來,對於ToF技術,劉洋不僅有著深厚的技術積累,還有著獨樹一幟的想法。2017年借著產業的發展時機,劉洋攜著ToF夢與志同道合的夥伴們一起回到上海,創辦了炬佑智能這家公司。近日,創始人劉洋接受採訪,分享了他的創業故事。
  • CMOS圖像傳感器推動機器視覺技術系統軟體的發展
    答案是要有機器視覺技術的技術支持。根據機器視覺技術的技術性,無人機不僅可以識別障礙物,還可以知道自身與障礙物的距離,從而準確避開障礙物,避開障礙物。 機器視覺技術的定義源於智慧機器人行業,美國機器人行業協會將其定義為:「根據光電設備和非接觸式傳感器,自動接收並求解真實物體的圖像,從而獲得 所需的信息內容或用於控制智慧機器人健身運動的設備。」
  • ToF技術與結構光技術、雙目立體視覺技術有什麼區別?
    作為SLAM(定位與地圖構建)應用的支撐,深度相機小型化必然帶動SLAM技術普及。其中受益最大的當屬手機和AR眼鏡。x0Lednc對於AR眼鏡來說,SLAM是一項必備的底層技術。支撐這項技術的關鍵,就是用深度相機解決定位和建圖。為什麼這麼說?
  • 如何學習3D建模?學習3D建模有哪些方面要注意的?
    第二,一個系統的滿足時下技術需求的課程學習體系。學習與時俱進的技術,而不是過時落後的技術。這一點在網上的免費教程裡要尤其注意甄別。 第三,最重要的一點,你學完了,做完了,你做的東西對不對?好不好?不好的地方如何修改?為什麼這樣修改?學習過程中遇到問題怎麼解決,這些都是你需要一個老師的地方所在。
  • 紐約視覺藝術學院
    紐約視覺藝術學院(school of visual arts),簡稱sva,成立於1947年,位於美國紐約州紐約市曼哈頓,是一所盈利性的藝術設計學院,目前開設有11個本科專業和22個研究生學位項目,那麼紐約視覺藝術學院sva哪些專業還不錯?
  • 3d立體牆貼怎麼樣 3d立體牆貼多少錢一平方 3d立體牆貼多久會掉
    其中3d立體牆貼是近幾年比較流行的一種牆面裝飾材料,與普通的牆貼相比,這種裝飾材料更有立體感,給人的視覺感受更加逼真,所以受到很多業主的喜愛。接下來,我們就一起來了解一下3d立體牆貼怎麼樣,3d立體牆貼多少錢一平方以及3d立體牆貼多久會掉的相關內容,希望可以幫助到大家。
  • 高性能標準CMOS傳感器在3D視覺技術中的應用
    隨著工業4.0變革來臨,面對諸如複雜的物件辨識和尺寸量度任務,以至人機互動所需要的複雜互動,2D視覺在精度和距離測量方面均出現技術限制,市場對3D視覺的需求因而與日俱增。 3D視覺能提高機器人/機器系統在工業自動化應用的自主性和效率,提供2D視覺不能比擬的高精度質量檢測,反向工程和物件度量等關鍵能力。
  • 炬佑智能CEO劉洋20頁PPT深入講解TOF 3D超感知視覺及在機器人上的...
    導讀:本文為上海炬佑智能科技公司CEO劉洋在智東西主辦的「移動機器人3D視覺論壇」的演講內容。劉洋老師的演講主題為《TOF 3D超感知視覺》。在本次演講中,劉洋老師對TOF 3D技術和應用展開簡單介紹,之後對TOF模組進行詳細解讀。
  • SLA 3D印表機進入校園有哪些優勢?
    作為第三次工業革命標誌性的技術,正滲透影響到各個行業,面對3d列印技術,我們的教育決策者在思考什麼?
  • H5和CSS3裡面3D動畫的運用
    現在的H5真是越來越強大 , 2D已經滿足不了網絡的需求 ,越來越多的網站為了享受視覺體驗都開始使用3D效果來做網頁了那麼CSS3給我們提供了哪些3D的屬性效果呢 ?像圖片上的效果應該怎麼來實現呢?下面讓我們來了解一下:3D轉換(變換)3D轉換是改變標籤在3坐標系上的位置和形狀的一種技術 ,它的特點是近大遠小 , 物體後面遮擋不可見 ,所以當我們在網頁上構建3D效果的時候參考這些特點就能產出3D效果。
  • 「預計ToF成本下降空間較大」,「炬佑智能」3D視覺方案三系列晶片...
    圖 | 「炬佑智能」 隨著蘋果iPhone X 3D面部識別的出現,近兩年3D視覺市場受到了較大的重視,各大手機廠商都在推進相關技術。除了手機、電視等消費終端,3D視覺技術在安防監控及智慧零售等眾多領域也有較大應用空間。
  • 立體通三維智慧膜 抓住趨勢做3D視覺創新領跑者
    在短短幾十年時間內,人類視覺體驗在高科技的推動下不斷更新迭代,我們的視覺需求也在不斷升級。如果說科學與藝術聯姻降生的數碼圖像藝術給人們帶來了前所未有、五彩斑斕的視覺體驗,那麼3D電影則將人帶進了一個更為逼真、立體的世界。從黑白到彩色到數碼,從平面到立體,這是世界的發展規律,也是人類對於更佳視覺體驗的不懈追求。
  • vr全景技術講解丨3d全景效果圖製作教學
    如今隨著5G的逐漸普及VR技術又開始頻繁出現在我們的視野當中了,5G的高網速能夠解決VR技術所存在的傳播難和體驗差等問題。就拿體驗來說,以往的vr視頻等被觀看時有時候會容易給人帶來暈眩的感覺,而5G的高網速便能很好的解決這一問題。目前,我們所看到的vr內容還主要是vr全景為主,很多人看到時難免會有疑惑這些3d全景效果圖是如何製作的,這我們就為大家講解一下3d全景效果圖的製作教學。
  • 【大解讀】SLA光固化3d列印技術 從技術到應用市場
    本人用最通俗直觀的理解為一句話就是:一種運用雷射照射液體,並讓液體快速成型為固態物品的3d列印立體印刷技術。SLA 3D列印技術之原理用特定波長與強度的雷射聚焦到光固化材料表面,使之由點到線,由線到面順序凝固,完成一個層面的繪圖作業,然後升降臺在垂直方向移動一個層片的高度,再固化另一個層面。這樣層層疊加構成一個三維實體。
  • ADI ToF技術方案的應用案例解析
    實際上作為一種新型的視覺傳感技術,全球各大應用市場對3D ToF深度視覺技術的需求也日益旺盛,並有不少解決方案實例誕生。 ToF技術解碼 ToF是Time of Flight的縮寫,又稱飛行時間法3D成像。
  • 井噴行情是什麼意思?什麼是井噴行情
    資歷不深的新股民應該沒聽說過井噴行情,那麼炒股常說的井噴行情是什麼意思,到底什麼是井噴行情呢?下文解釋一下井噴行情的含義以及A股市場歷史上最難忘的井噴行情。井噴行情是什麼意思井噴行情是什麼意思?股市長期受某種利空因素的影響,股價低靡或長期非理性地下跌,眾多大小投資者被套或不願介入,一但這種利空因素被去除,被非理性低估股價的股票會被大小投資者在第一時間集中介入,致使股市暴漲——這就是股市井噴。井噴行情是什麼意思?通俗來說,就是股價漲勢兇猛,帶量直線上升。如同井噴一樣。從高位直線下降叫高臺跳水。
  • 華為八大核心能力帶來持續領先,新技術井噴倒逼網絡升級
    華為八大核心能力帶來持續領先,新技術井噴倒逼網絡升級 蔣均牧 發表於 2020-03-16 15:55:42 「當這個時代到來的時候,銳不可當。
  • 高精度3d重建是一個雙機融合模型
    高級別自動駕駛滲透率的逐步提升,對高精度視覺基礎設施的要求也越來越高。自動駕駛的傳感器主要包括雷射雷達、毫米波雷達、麥克風陣列、雷射雷達+imu、陀螺儀和磁慣量傳感器等多種傳感器。其中基礎的傳感器有雷射雷達、毫米波雷達、imu(磁慣量傳感器)等。