手機拍照的TOF景深鏡頭是什麼?原來還有這麼多玩法

2020-12-07 科技一桿槍

大家好,我是科技一桿槍。我們發現,現在推出的具有競爭力的智慧型手機都搭載了一顆3D深感攝像頭,也叫TOF鏡頭、景深鏡頭。這種深感攝像頭不僅用在手機端,同樣在智能汽車的自動駕駛上、需要人臉識別的場景下、以及製作電影特效捕捉等領域發揮著重要作用。那麼什麼是3D深感攝像頭呢?又起到什麼作用呢?

手機後置景深鏡頭(TOF深感鏡頭)

3D深感成像傳感技術

當前主流的3D成像傳感技術主要有三類:雙目立體視覺技術、結構光技術和TOF飛行時間技術,他們有各自的優缺點及適用範圍。

1、雙目立體視覺(Binocular Stereo Vision)

這種技術靈感源自人類的雙眼,是一種利用視差原理來獲取空間深度感知,從而進行3D成像的技術。我們知道人的兩隻眼睛看到的物體是存在一定差別的,假設是兩張圖像,雙目立體視覺就利用這種視差,用兩個攝像機來捕捉圖像,建立特徵點在兩張圖像之間的對應關係,進而繪製出特徵點在三維空間內的位置。見下圖:

雙目立體視覺原理

雙目立體視覺技術原理簡單,成本較低,近些年在機器人視覺系統中應用較為廣泛,同時在測繪、醫療成像和工業檢測等領域中也有著不同程度的應用。但是它的缺點也很明顯,雙目成像無法獲知目標點準確的深度距離,精度較差,所以在智慧型手機端並沒有應用。

2、結構光技術(structured light)

結構光的意思就是將光線結構化,使其具有一定的結構特徵。這裡面需要用到紅外雷射發射器和採集攝像機,雷射器發出的光經過預定的光柵或者其他設備產生出結構特徵的光線,投射向被測向物體表面,再由一組或多組攝像頭採集被測物體的表面獲取圖像信息,由計算機系統對採集的信息進行深入處理成像。

結構光技術原理

相比於雙目視覺技術來講,結構光可以得到準確的距離信息,優勢在於效率高、低能耗、成像解析度高,適合靜態場景的應用,所以廣泛應用在人臉識別和人臉支付等場景。結構光技術的缺點是覆蓋距離太短,識別深度在1.2米以內,故而可以應用在手機前置自拍上,比如iPhone X的攝像就採用了結構光技術。

3、飛行時間技術(Time Of Flight)

飛行時間技術顧名思義就是說測量光在空中飛行的時間的技術,是指由TOF傳感器向目標物體發射經調製的脈衝型近紅外光,在被物體反射後,再由TOF傳感器接收反射回的光線,通過計算光線發射和反射時間差或相位差,來確定被拍攝物體和鏡頭、環境之間的距離,以產生深度信息,再結合計算機處理來呈現三維影像。

飛行時間TOF原理

TOF可能是大眾了解度較高的技術,主要是得益於它在手機攝像頭上的大量應用。TOF技術相對來說,具有測量精度高、刷新率fps高、抗幹擾性強、覆蓋範圍遠等優點,成像識別距離可以達到5米左右,比結構光技術遠得多,並且在捕捉動態成像上表現出色。這也是它在手機攝像矩陣中佔據一席的原因之一,除此以外,TOF技術還應用在掃描成像、VR/AR等領域。

TOF深感鏡頭測距原理

以上三種技術最有前景的當屬TOF技術,很多廠商也在從雙目、結構光技術向TOF技術轉變,下面就以TOF技術展開講解。前面說了飛行時間技術的基本過程,那麼它應用在移動端的3D深感鏡頭又是如何工作的呢?

1、TOF深感鏡頭基本結構

一套TOF深感鏡頭包括光源、光電探測器、脈衝發射單元和邏輯處理器。光源通常採用紅外線,脈衝裝置多用是讓光源可以連續不斷的發射調製的紅外光,照射到目標物體上,並接收源源不斷的反射光線。

TOF鏡頭測距示意圖

2、光的飛行時間如何測量

我們根據速度公式:c=d/t,c為光速,d為距離,t為時間。那麼我們測量出光線在發出及返回之間使用的時間,再乘以光速就是距離。

但是我們知道光的速度是3x10^8m/s,對於這麼快的光速,那麼對時間的測量精度就需要達到皮秒級,這就要求電子計時器要有數百GHz的時鐘頻率。這麼高的頻率和精度使得測量器件製造成本和難度都很大,所以我們尋求了一種低頻率測量的方法。

我們再來看另一個速度公式:c=λ,c仍然是光速,λ是波長,是頻率。現在,我們將光源調製成正弦脈衝波,當光波遇到目標物體後發生反射,再用傳感器來接收反射回來的正弦波,這時正弦波形會產生一定的相位偏移,而這個相位偏移就可以用來計算波形傳播的距離。

光在發射及返回後發生相位移

以上圖來輔助說明,就是調製頻率,藍線表示發出時的光波函數,紅線表示返回時的光波函數,它們之間產生了相位角差值φ,那麼利用相位角配合公式:d=c·φ/4π就可以算出物體和TOF深感鏡頭的距離了。

3、手機端TOF鏡頭實例

根據這個原理,除了拍照,華為手機已經集成了深感鏡頭的測距功能,看下面這個例子,我們通過手機來聚焦一副眼鏡,完成後點擊中間的圓點就可以開始測量,選擇起點和終點,手機就能顯示出被測點之間的長度。

手機TOF鏡頭測距實例

深感攝像頭的應用及前景

根據諮詢機構的統計預測,得益於手機終端等電子設備的科技發展,和數碼消費的火爆市場,可全球3D成像與傳感的市場規模到2022年將達到90億美元,而這一數字在2016年才13億美元。CAGR即複合年均增長率能達到近38%。

全球3D成像與傳感市場增長趨勢

前面說的3種深度感知成像技術在軍事、工業、醫療、汽車、家居等方面都有著大量的應用,下面講解幾個跟大家平時使用較為密切的應用,比如:

1、人臉識別、動作識別

如蘋果公司的產品iPhone X的前置攝像頭就是搭載了結構光技術,可以在近距離下識別手勢動作和人臉,是一種便捷又安全的識別模式,支持用來進行人臉支付或解鎖等操作。

除了識別人臉,還能識別手勢、動態,比如捕捉動作的體感遊戲,還有用手勢控制智能家電的開關、亮度。

2、配合手機相機功能

如今華為、OPPO等手機廠商的相機功能已經越來越「浮誇」,都是高清主攝+超感光+超廣角+長焦+景深鏡頭,這裡的景深鏡頭就是TOF深感攝像頭,得益於集成電路和電子傳感器的突破技術,現在TOF技術也可以做的很小,集成到手機裡,並實現較遠距離的拍攝。

景深鏡頭攝入的景象肯定是比其他鏡頭更準確,但它並不能單獨進行攝像,因為解析度不夠高,所以要搭配一顆或幾顆高清的主攝像頭。

3、AR、體感、全息影像等

TOF技術的景深功能能較好地獲取物體不同部位的具體深度信息,可以用來實現3D方位上的很多不同場景應用,比如配合第三方提供的數據可以實現AR場景展現、虛擬換裝等效果。

TOF在手機上的應用場景

以上就是我對3D深感攝像頭的講解和分享,而TOF技術的優勢使得TOF比結構光和雙目視覺應用場景更寬廣。我們期待未來能有更多更好玩的功能出現在手機上,畢竟科技改變生活嘛。

相關焦點

  • 什麼是TOF鏡頭?原來vivo NEX雙屏版還有這麼牛逼的功能!
    vivo NEX雙屏版發布已經一個多月了,相信不少小夥伴應該都通過不少渠道了解到了這款手機,這不前兩天剛發年終獎,便一咬牙直接剁手了一臺。經過這幾天的體驗,vivo NEX雙屏版的TOF 3D鏡頭給我留下了深刻的印象,下面跟著我的腳步一起來看看這個TOF鏡頭都有哪些玩法吧!
  • TOF鏡頭到底有什麼用?真的只是一個200萬像素的攝像頭嗎?
    TOF鏡頭放在手機後面主要是為了收集一些景深信息。TOF鏡頭放在手機前面,除了收集景深信息以外,它還肩負著人臉解鎖的級別。而因為它的掃描更加精細,可以生成3D立體圖像,所以它的安全級別已經達到了人臉支付的安全級別。TOF鏡頭的大致意思其實和iPhone裡面的3D結構光是差不多的,只不過TOF鏡頭捕捉的信息更多一些。
  • 盧偉冰吐槽TOF技術是噱頭,網友笑了:聽聽華為怎麼說
    去年智慧型手機在發力的時候,大家又開始專注於不同的關鍵點,除了全面屏之外,攝像頭的技術比拼成為了重中之重。而且在去年有一個新的名詞逐漸的出現,它就是tof,後來tof技術更是已經成為了智慧型手機旗艦的標配,然而所有人都這麼認為的時候,小米卻不走尋常路。盧偉冰的吐槽大家都知道,盧偉冰算得上是一張大嘴巴,一直以來說話都是肆無忌憚的,什麼話都說得出口。
  • 放棄TOF 鏡頭!三星 Galaxy Note 20:拍照作用不大
    4月24日消息,據外媒 SamMobile 透露,三星新機 Galaxy Note 20 將考慮放棄 TOF 鏡頭,三星在一份調研中發現,消費者在使用手機拍照時很少啟用或不知道這項功能,TOF 鏡頭在日常拍攝中的作用幾乎被忽略,因此三星考慮取消該鏡頭!
  • 手機上的TOF鏡頭到底有用嗎?看完就有答案了
    最近「TOF鏡頭是否有用?」的話題比較火,我認為答案本身並不重要,存在既合理,說沒用絕對是魯莽且不理性的結論,但我們需要知道它具體的作用是什麼,它在我們拍照或日常使用的時候能有什麼好處,這才是重點。雖然我不是鏡頭相關領域的大神,但我會查資料和找證據,經過對TOF技術的相關信息的了解,下面就從分享個人觀點的角度來和大家聊一聊我對TOF的認識。
  • 手機上不參與成像的TOF鏡頭,到底有什麼用?
    有的手機幾個鏡頭中,你會發現有一個鏡頭非常特殊,它不參與成像,好像沒什麼用,那你就錯了,將來它將大顯身手,構建虛擬3D世界!這個鏡頭就是TOF鏡頭TOF鏡頭的全稱是time of flight,就是通過測量光發射後,經過物體反射回來的時間差,就可以測定出物體的距離。根據測量方法可分為直接測量和間接測量兩種。間接測量光速簡稱iTOF,通常發射紅外光,優點是解析度可以做高。但精度較低,成本便宜目前手機應用廣泛。
  • 華為、vivo和三星這些安卓曾經用過TOF鏡頭,TOF鏡頭是什麼意思?
    在去年的時候,安卓手機廠商曾經用過TOF鏡頭,並且獲得了市場和消費者的認可。當然,在今年的話潛望式鏡頭似乎更加受到歡迎。其實安卓手機廠商中包括華為、vivo和三星曾經用過TOF鏡頭,那你知道TOF鏡頭是什麼意思嗎?TOF鏡頭相比普通手機鏡頭,都有哪些優勢呢?
  • 讓小米和華為爭論不休的TOF鏡頭,其實並不是個鏡頭?
    到如今,紅米的千元機都已經2個攝像頭了,大廠在手機鏡頭上的競爭之慘烈可見一斑。在如今手機背後數不清的攝像頭之中,TOF鏡頭可以說是有名有姓,這主要由於國內的老冤家——小米和華為展開的一場論戰。2月15日,榮耀副總裁「榮耀老熊」發文表示,榮耀V20才是行業標杆。榮耀V20搭載的屏下攝像頭、TOF深感鏡頭、Link Turbo、雲電腦等技術,全面開創技術先河,成為行業標杆線。
  • 蘋果超大杯將新增ToF鏡頭,相機全面升級,拍照穩了
    距離蘋果iPhone12正式發布,還有不到一周的時間了。關於蘋果iPhone12系列的信息,基本得到了確認。剛剛,又有網友曝光了蘋果iPhone12超大杯版本的相關信息,很多用戶看完之後,直呼小米10 Ultra首當其衝,這究竟是為什麼呢?下面我們一起深入地來分析分析。
  • 實例反駁ToF鏡頭無用論,不是誰都能拍出這樣的表現力
    在手機攝影不斷演變的進程中,相對於長焦鏡頭、廣角鏡頭、或是大尺寸傳感器等配置,ToF鏡頭必要性還是頗有一些爭議,那麼ToF鏡頭到底是否雞肋呢?我剛好手頭有一臺華為P30 Pro,我們就從它入手來看一下。
  • 手機上的TOF鏡頭沒有用?僅是一個200萬像素攝像頭?
    18年華為發布榮耀V20的時候,首次將TOF鏡頭帶入了大家的視野。很多人都有一個疑惑:「這個旗艦機怎麼是個單攝?」顯然TOF鏡頭被大家忽略掉了。 然後友商就趁大家還不明白的時候說「這個鏡頭沒什麼用,就是騙人的" 那麼,這個像頭到底有沒有用處呢?
  • 2020年iPhone將使用TOF鏡頭,你知道什麼是TOF鏡頭嗎?
    什麼是TOF鏡頭TOF是Time of Flight的縮寫,字面上是飛行時間的意思,其實它是指的紅外景深傳感器,也叫飛行時間法3D成像,能夠實現遠距離高精度的3D成像。
  • 蘋果、華為重視的ToF鏡頭是什麼?其實它存在於江湖已經很久了
    ToF鏡頭在手機行業算是一個坐過山車的配置。2018年的時候有一個高峰,手機大廠,如三星、華為、OPPO、vivo、小米、LG等也在中高端機型中配置了ToF鏡頭,但是實際效果不佳。而今,ToF捲土重來,這又是為何呢?
  • 宅在家裡漲知識:揭秘手機拍照原理,原來晶片裡的ISP這麼重要
    最近兩個月,全國人民都關上門宅在家,出門放風、拍照凹造型成了現在最"奢侈"的願望。不過,宅在家裡並不能阻擋一顆想要拍照的心,在可以出門之前,讓我們先來研究一下手機的拍照原理,為春暖花開時的拍攝大片提前做好知識儲備。
  • 多鏡頭手機這麼強大,手機玩家還需要外接鏡頭嗎?
    ,各廠商都推出了多鏡頭手機,廣角、長焦、超廣角、微距,那麼,手機攝影愛好者還有必要單獨配置一個外接鏡頭麼?  所以,只要你的手機不是Mate 40 Pro、P40 Pro、Mi 10 Ultra、iPhone 12Pro Max這樣的頂級旗艦拍照機,那麼,外置手機鏡頭的改善效果是比較大的。另外,改善拍攝質量的裝備不僅僅是鏡頭……下面狼族就來推薦一波,都是精中細選,價格也合適,小巧又方便。
  • 雙攝、三攝手機多出來的攝像頭有什麼作用?
    這兩年手機攝像頭的變換實在是太快了,以前的手機是多麼純粹的手機,手機攝像頭就是手機攝像頭,不是雙攝、不是「三筒」,也不是「浴霸」。很多人都還沒了解雙攝,各種多攝就已經呼之欲出。那麼問題來了,現在手機多出的這幾個鏡頭你知道它們的作用是什麼嗎?
  • 極光:2020年中國拍照手機發展趨勢分析
    奠定了智慧型手機拍照時代正式進入了多攝時代。多攝時代帶來的好處就是,智慧型手機已經不僅局限於廣角主攝鏡頭與超廣角輔助鏡頭的拍攝方式,潛望式光學變焦鏡頭、TOF鏡頭、微距鏡頭、黑白單色鏡頭等等,都成為了智慧型手機鏡頭矩陣當中的一員,為用戶提供了更多的拍照方式可選。也正是在這一年,各大手機品牌形成了手機影像技術的發展共識,那就是多攝像頭矩陣實現全焦段覆蓋、多功能拍攝。
  • 【詳細科普】手機鏡頭全是湊數,廠商也有難言之隱……
    主攝是IMX682傳感器,中規中矩;廣角升級到了1300萬像素,但是底太小;微距鏡頭是K30Pro上的500萬像素微距,還算不錯,最後還有一個湊數的200萬像素景深鏡頭。 微距、景深鏡頭 至於微距鏡頭和景深鏡頭,紅米Note9Pro上的都是200萬像素,基本可以當成贈品,更別說成本了。
  • 小米稱TOF 3D鏡頭沒用,榮耀:你搞不定技術而已
    自從蘋果在iPhone X上放棄指紋識別改用Face ID之後,3D感測技術在智慧型手機上就正式商用了,蘋果用的是3D結構光技術,除此之外還有TOF景深3D鏡頭技術,去年Vivo及榮耀都在自己的手機上使用了TOF鏡頭技術。
  • 手機雙攝到底有何作用,現在才知道,原來是還有這麼多種用法!
    導讀:手機雙攝到底有何作用,現在才知道,原來是還有這麼多種用法!如今最熱的產業之一便是手機產業了,誰都能在其中分一杯羹,哪怕你像羅永浩一樣是個英語教師,或者像雷軍一樣是個程式設計師,所以導致越來越多的人湧入這個行業,手機廠家不得不推出各種「黑科技」來挽留用戶的心,最明顯的一個例子就是手機上攝像頭的數量越來越多了,手機攝像頭在不斷地進化,而且大部分手機已經用上了雙鏡頭,可你知道雙攝的效果是什麼嗎?