融昱研究|超級黑馬,ToF鏡頭的崛起!

2020-12-05 投壺網

導讀:ToF在近期被我們越來越熟知,ToF是Time of Flight的縮寫,即飛行時間。簡單來講,就是通過內置在手機或其他設備上的ToF模組,向物體連續發射雷射信號,再用一個傳感器接受反射回來的光,計算與物體之間的距離,從而讓設備形成立體視覺,實現多場景的應用。

因為ToF的綜合性能更加優秀,在現有的手機、平板,到掃地機器人、智能安防設備、醫療器械、工業視覺等領域,ToF都在全面開花,隨著未來AR/VR/MR的場景應用化,未來還有更廣闊的想像空間。

手機、平板和各類智能設備,越來越成為我們生活中不可或缺的物品。在非專業領域的攝影設備中,手機、平板現在已經佔據了97%以上的市場,膠片相機、微單、單反、DV,也都以令人驚嘆的速度消失於我們的視野,而手機的迭代更新和攝像頭的數量的增加,也是超乎人們想像的快。

第一臺前置攝像頭的手機:

京瓷VP-210(1999年)

第一臺後置攝像頭的手機:

夏普J-SH04(2000年)

100萬像素:卡西歐A5401CA(2003年)

自動對焦:松下P505iS(2003年)

光學變焦:夏普V602SH(2004年)

1200萬像素:索尼愛立信Satio(2009年)

第一臺支持雙攝像頭的手機:LG P925(2011年)

雷射對焦:LG G3(2014年)

結構光Face ID:iPhone X(2017年)

首款搭載ToF鏡頭手機:OPPO R17(2018年)

三攝+ToF:VIVO NEX(2018年)

四攝:三星Galaxy A9(2018年)

小米CC9:一億像素(2019年)

五攝ToF:華為P40 PRO+(2020年)

首款搭載ToF鏡頭的平板:iPad Pro(2020年)

還有諾基亞恐怖誇張的七星瓢蟲

對於科技愛好者和數碼愛好者而言,上述裡程碑事件的發生仿佛還歷歷在目,現在手機攝像頭的數量也跟花灑一樣多和密,網友甚至戲稱現在手機攝像頭的排布跟我們的國粹「麻將」的筒牌排列如出一轍,超過9個之後再怎麼辦?

玩笑歸玩笑,現實生活中,手機攝像頭的像素越來越高,鏡頭也從黑白單攝、彩色單攝、高像素、雙攝、三攝、四攝、五攝快速迭代,價格越來越低,用照相機去記錄生活的人也越來越少了。

2017年,蘋果的十年重磅產品iPhone X發布,其中突破性的人臉解鎖和支付的Face ID更是引爆市場。2018年,OPPO R17和VIVO NEX首次搭載TOF攝像頭,將3D成像這一在手機上的應用方式,推上了風口浪尖。

3D成像技術和ToF攝像頭

主流的3D成像技術包括雙目成像測距、結構光和ToF攝像頭。

「奢侈」的雙目測距

雙目測距,顧名思義,通過2個「眼睛」(Stereo Camera)拍攝同一物體,因為攝像頭之間的空隙,理論上就可以構建出一個物體的三維模型。

只要知道兩個攝像頭之間的距離,計算偏角,就可以得出物體到攝像頭的距離。但與此同時,雙目攝像頭帶來的計算量將會陡然升高,並且,兩個攝像頭的間距一定要越大越好,否則達不到最佳效果,至少要與人眼的間距接近。

我們之所以能實現快速準確的對眼前的一切物品實現立體感知,因為人的一雙眼睛就是最經典的雙目成像「產品」。

谷歌對雙目成像及時投入了大量的精力,在2014年啟動的Project Tango作為雙目測距的代表性產品,連歐巴馬都親身代言:

谷歌宣稱,雙目測距在功能上也很強大:支持感知測繪,三維場景建模,運動跟蹤,以及AR技術等。

然而,為了實現「雙目測距」,谷歌的左右攝像頭岔開了一個手機的高度,這在消費級手機上是根本不可能實現的。

上圖為Google Project Tango原型機

雙目測距有還有天生的弊端,兩顆「眼睛」必須保持一定距離,而且需要用到兩個攝像頭模組,一來產品比較厚重,二來成本比較高,目前在一些工業應用和汽車領域有少量使用,真正的消費電子,已經面世的產品銷量平平且很快被遺忘。

LG的Project Tango產品

iPhone的思考:「結構光」

2017年,iPhone十周年,蘋果推出了他們的深度構思:Face ID。

和雙目測距相比,結構光只需要一個雷射發射器和一顆攝像頭進行接收。結構光採用的是「形變」原理,當光打到物體表面時候,勢必會因為物體表面的凹凸不平導致投影偏移。攝像頭可以記錄並進行分析,產生深度圖像。

蘋果將結構光技術用於人臉識別,實現解鎖和支付的功能,由於投放的是點陣,夜間也可以很好地工作,同時距離要求相比雙目攝像低很多。在iPhone X推出的一年後,OPPO Find X,小米8探索版均搭載了結構光模組。

但是為了保證識別精度,點陣投影器和接收器需要保留一定的距離,iPhone X 上的 3D 結構光就需要 25 毫米左右,「大劉海」始終不美觀,在顏值至上的今天,消費者越來越難以接受。其次,結構光不抗強光,白天投射出來的雷射點陣,很容易被強自然光淹沒。

並且,當物體距離相機較遠時,物體上投射到的圖像或光點越大,精度也越差,所以,結構光近距離體驗佔優,但無法在遠距離上發揮優勢(大多在1米內)。目前幾乎所有的廠商(包括蘋果)都放棄了在手機端使用結構光技術。

崛起的ToF

所以在以手機為代表性的行動裝置中,哪一種解決方案最能滿足要求呢?現在看來,ToF技術是行之有效的解決辦法。

ToF有如下優點:

1)模組小,集成度高;

2)未來成本有進一步降低的空間;

3)ToF的測量範圍達數米,並且不容易被強光所影響;

4)可以應用的場景非常豐富。

ToF模組

ToF除了有點陣、線陣方案,更有面陣方案,精度更高。

所以,我們可以看到,部分廠商例如華為的最新旗艦機型,不僅在後置鏡頭上安裝了ToF,前置攝像頭上也上了ToF,作為人臉識別的支持硬體。

一向固執的蘋果也動了心,蘋果已經在前不久發布的最新款iPad Pro上使用了搭載dToF技術的雷射雷達,並且根據目前的情報,今年的新iPhone將會在後置攝像頭上上馬ToF模組。

當然ToF技術也並不是完美無缺,目前ToF最大的問題,一是模組成本較貴,國內的公司產品也還比不上索尼、意法半導體等大廠;二是主流的ToF鏡頭解析度較低,目前還以使用240*180為主,不過例如深圳光微科技有限公司等企業,已經成功的設計出了1280*960解析度的ToF鏡頭,晶片和算法也全部掌握自主智慧財產權,相信不久的將來,能很快打破國外廠家壟斷的格局。

技術講完了,那麼ToF鏡頭和這個技術最終到達消費者身上,能在哪些應用場景給我們的生活帶來哪些改變?

(1)虛擬實境、增強現實

蘋果砸重金,最看重的就是在虛擬實境和增強現實上的應用,包括了AR試裝、虛擬會議、手勢識別、遠程教育、家居家裝、花卉識別等等。

(2)基於人臉識別的應用

人臉識別已經是ToF的最基本功能,基於人臉3D建模產生的應用場景,也可謂豐富多彩,包括行動支付、角色創建、藝術應用(繪畫、雕塑)、智能門鎖、以及軍警用的逃犯追蹤定位、公共安防等。

智能門鎖近幾年可謂大熱門,再也不用帶鑰匙出門。可謂誰試誰知道。除了現有的鑰匙、NFC門禁、藍牙、指紋、虹膜等解鎖技術外,人臉解鎖目前基本都是使用的普通攝像頭通過對比已存儲的照片進行解鎖,理論上用照片就可以打開,十分的不安全,與行動支付的原理一致,使用ToF鏡頭對人臉進行完整的3D建模後解鎖或支付,能極大的提高安全性和可靠性。

在安防領域,還有更有意思的應用。

1)居家安防:基於移動檢測報警,判斷家裡是否有小偷或者不速之客的入侵,相信大家也都有所耳聞,但是家裡的小朋友或者貓貓狗狗如果不小心跑動,也會不斷的報警,有了ToF技術的3D感知,對已有的「安全」目標進行定義後,只對沒有存儲內容的「物體」進行預警,可以大大提高用戶的體驗。

2)軍警監控:藉助天網系統和已經有的公共場所監控系統,增加ToF技術,可以實現對特殊場合精確的「數人頭」和「找人頭」,對公共安全和犯罪偵查也能提供幫助。

(3)掃地機器人

掃地機器人也是近年來火熱的產品,跟洗碗機洗衣機一樣,如果有機器能做,誰還願意自己去掃地。

但是根據市場調研,買完掃地機的消費者的評價並不高,主要原因有2個,一是根本掃不乾淨,二是機器人太傻,不知道規劃路徑,還經常被卡住。

基於這個痛點,掃地機器人的龍頭企業科沃斯、石頭等都已經開始在自己最新一代的產品上布局使用線陣ToF技術,來實現對現有掃地機器人智商的提升。利用ToF攝像頭,機器人在掃地之前,就會對家裡的情況進行3D建模,哪裡有樓梯、哪裡有障礙物,在開始工作之前,可以讓主人先確定例如廚房位置、衛生間位置,定義這些地方需要用去汙能力更強的溼抹布或者增加清潔劑,對於普通位置,掃地機器人有了家庭的3D模型後,可以更加智能的規劃路線和避障,讓掃地機器人更加聰明,掃地更乾淨。

(4)無人駕駛

汽車的未來毫無疑問一定是電動化、智能化、無人化。從特斯拉這個汽車的「攪局者」開始到今年突如其來的疫情,又讓無人駕駛走到人們的視野中。

疫情期間一些物資運輸和物流方已經採用無人車送貨的方式,避免人與人直接接觸的問題;有些醫院採用了無人消毒、清潔車;有些在醫院為患者進行無人送餐等。諸如這些鮮活的事例在這次疫情中可以說是不勝枚舉。據統計 ,我國這次採用自動駕駛的達到十幾個地級市,北上廣都涵蓋在其中,同時此次使用的投入量也達到數百個。不僅在國內,國外也是如此,法國的NAVYA與美國的診所合作,也開始進行無人車配送藥品或者檢測樣本。

「自動駕駛」在這次疫情中實際的投入和使用,雖然是牛刀小試,但足以讓人們對此有了全新的認識。由此我們看到了自動駕駛領域應用的廣泛前景和巨大市場潛力。自動駕駛一直是人類對未來的幻想,而想要實現真正的無人駕駛仍然面臨諸多挑戰。如何快速實現商業化,是現在很多投資自動駕駛的公司所倍加關注的問題。以前更多的聚焦是在無人車是一種交通工具,主要用於解決運輸人的問題;而現在,它更像是可以成為替代簡單重複性工作的「助理」。

ToF和AI在無人駕駛中的應用,可以很好地解決一個無人駕駛的最基本的問題:識別、建模和避障,知道哪條路可以走,哪裡有障礙物。配合其他技術和算法,以及智能道路RSU(Road Side Unit),配上雷射雷達的掃描處理,讓汽車和道路進行信息的即時傳遞,以此大幅提升無人車路徑規劃和決策的準確性。隨著5G的商業化部署和其他新技術引入,勢必也將給無人駕駛汽車行業和各國政府所選擇的技術路線帶來更多新的機遇和挑戰。

(5)工業視覺

機器視覺在工業上應用領域廣闊,核心功能包括:測量、檢測、識別、定位等。產業鏈可以分為上遊部件級市場、中遊系統集成/整機裝備市場和下遊應用市場。機器視覺上遊有光源、鏡頭、工業相機、圖像採集卡、圖像處理軟體等軟硬體提供商,中遊有集成和整機設備提供商,行業下遊應用較廣,主要下遊市場包括電子製造行業、汽車、印刷包裝、菸草、農業、醫藥、紡織和交通等領域。

機器視覺中,缺陷檢測功能,是機器視覺應用得最多的功能之一,主要檢測產品表面的各種信息。在現代工業自動化生產中,連續大批量生產中每個製程都有一定的次品率,單獨看雖然比率很小,但相乘後卻成為企業難以提高良率的瓶頸,並且在經過完整製程後再剔除次品成本會高很多(例如,如果錫膏印刷工序存在定位偏差,且該問題直到晶片貼裝後的在線測試才被發現,那麼返修的成本將會是原成本的100倍以上),因此及時檢測及次品剔除對質量控制和成本控制是非常重要的,也是製造業進一步升級的重要基石。

在檢測行業,與人類視覺相比,機器視覺優勢明顯

1)精確度高:人類視覺是64灰度級,且對微小目標分辨力弱;機器視覺可顯著提高灰度級,同時可觀測微米級的目標;

2)速度快:人類是無法看清快速運動的目標的,機器快門時間則可達微秒級別;

3)穩定性高:機器視覺解決了人類一個非常嚴重的問題,不穩定,人工目檢是勞動非常枯燥和辛苦的行業,無論你設計怎樣的獎懲制度,都會發生比較高的漏檢率。但是機器視覺檢測設備則沒有疲勞問題,沒有情緒波動,只要是你在算法中寫好的東西,每一次都會認真執行。在質控中大大提升效果可控性。

4)信息的集成與留存:機器視覺獲得的信息量是全面且可追溯的,相關信息可以很方便的集成和留存。

ToF在機器視覺成像尤其是3D視覺和深度學習上的應用,可以極大的提升工業行業的效率和品質。

(6)物流倉儲

電商的迅速發展也帶動了物流行業的迅速發展,目前全球的物流行業每年還能保持15%以上的速度發展,中國更是超過30%。迅速發展的背後,每個物流企業都越來越重視成本和效率,ToF在物流行業也有突破性的運用。

搭載工業級ToF攝像頭的機器可以精準快速的掃描出物品的體積,配合稱重設備,配合計算機能快速的計算出貨車、飛機貨倉的最佳配重和裝配方案,以及倉庫的倉儲方案,極大的提高了空間的利用效率。

(7)醫療器械

在醫用領域,ToF也有他能大顯身手的地方。

在已有和在研的產品中,ToF鏡頭已經被設計到了3D牙齒掃描、智能監控陪護、骨畸形矯正治療、運動檢測等,相信不久的未來就有產品面世。

小結:

就像金融賦能產業才能發揮金融工具的作用一樣,作為一項技術手段,一定要落地到場景和產品中,才能發揮其提升產品體驗和效率的目的。

攝影160年,汽車發明150年,智慧型手機20年,在TOF鏡頭進入民用消費領域第3年,已經給了我們無比精彩的產品:商店用ToF技術進行支付、公司門禁用ToF識別打卡、回家掃地機器人利用3D建模清潔、汽車利用機器視覺無人駕駛、老賴和犯罪分子無處可逃,未來還有多少產品可以賦能,讓我們拭目以待。

(本文部分圖片和內容來自網際網路,如有侵權,請及時聯繫)

相關焦點

  • 盧偉冰吐槽TOF技術是噱頭,網友笑了:聽聽華為怎麼說
    而且在去年有一個新的名詞逐漸的出現,它就是tof,後來tof技術更是已經成為了智慧型手機旗艦的標配,然而所有人都這麼認為的時候,小米卻不走尋常路。盧偉冰的吐槽大家都知道,盧偉冰算得上是一張大嘴巴,一直以來說話都是肆無忌憚的,什麼話都說得出口。之前盧偉冰在金立做事,後來金立倒了就來到了小米跟著雷軍一起混。
  • 【2017歐洲微生物與傳染病年會系列報導】MALDI-TOF MS在ECCMID中...
    maldi-tof ms技術在eccmid會議上多次被提到,其中在華人會議上,北京協和醫院檢驗科徐英春主任介紹在關於中國侵襲性真菌的流行性及耐藥情況的研究中maldi-tof ms已經成為了該研究的主要檢測方法,然而,maldi-tof ms不同系統間的鑑定準確率仍存在差異,例如,對於2010-2014年間收集到的26株candida haemulonii ,利用vitek ms 系統鑑定結果正確,而利用bruker biotyper ms 系統鑑定的準確率僅為88.5%
  • 快遞業又一黑馬「巨頭」崛起,速度趕超順豐
    快遞業又一黑馬「巨頭」崛起,速度趕超順豐隨著網際網路的發展,我們的生活也越來越便捷,更多的人實現了自己「足不出戶,便可盡享一切」的夢想。對很多「剁手族」來講,網購絕對是經常要做的事情,尤其是現在諸如淘寶、京東、拼多多等電商平臺給了大家更多的選擇,大家進行網購的時候也更加方便,而下單之後,只需在家坐等快遞送上門即可,簡直不要太方便。
  • 江蘇一黑馬城市崛起,工業產值超過上海,成為「中國第一工業城」
    江蘇現今崛起了一座「黑馬城市」,它的工業產值超過上海,正式晉升為「中國第一大工業城」,它就是蘇州。如果說之前蘇州這座黑馬城市的崛起和其它長三角城市類似,有著明顯的政策支持和時代機遇的因素,那麼在今年上半年蘇州以超過1.55萬億的工業產值超過上海的1.5萬億則有著極其非凡的歷史意義,它代表著我國近百年來的「工業第一城」上海,已經正式讓位於蘇州這一後發城市,蘇州已經是大家公認的全新「中國第一大工業城」。
  • 2020年iPhone將使用TOF鏡頭,你知道什麼是TOF鏡頭嗎?
    什麼是TOF鏡頭TOF是Time of Flight的縮寫,字面上是飛行時間的意思,其實它是指的紅外景深傳感器,也叫飛行時間法3D成像,能夠實現遠距離高精度的3D成像。
  • 華為、vivo和三星這些安卓曾經用過TOF鏡頭,TOF鏡頭是什麼意思?
    在去年的時候,安卓手機廠商曾經用過TOF鏡頭,並且獲得了市場和消費者的認可。當然,在今年的話潛望式鏡頭似乎更加受到歡迎。其實安卓手機廠商中包括華為、vivo和三星曾經用過TOF鏡頭,那你知道TOF鏡頭是什麼意思嗎?TOF鏡頭相比普通手機鏡頭,都有哪些優勢呢?
  • 超級遊戲黑馬【廈門站】 教你如何抓住大佬們的「心」
    由中國遊戲產業網主辦「超級遊戲黑馬——助力中小遊戲CP融資、發行全國巡展路演」系列沙龍活動已在北京、成都、深圳成功舉辦三站。12月3日,超級遊戲黑馬沙龍廈門站將是2015年的收官之站。通過歷時四個月的沙龍路演,中國遊戲產業網加深了與各地中小CP的合作關係,也在早期有機會發現和鎖定優秀產品與團隊,為中國遊戲產業網一貫堅守的原則,尋找精品遊戲戰略打下了堅實基礎。
  • 潛望式鏡頭崛起 這些華為概念股今年已漲瘋
    潛望式鏡頭崛起,這些華為概念股今年已漲瘋 摘要 【先戲蘋果再懟三星 華為這次來「硬」的!潛望式鏡頭崛起 這些華為概念股今年已漲瘋】在蘋果發布會結束後,華為就戲謔了庫克一把。華為在海外社交媒體上發文表示,感謝蘋果CEO庫克暖場,接下來重頭戲開始了。
  • 蘋果超大杯將新增ToF鏡頭,相機全面升級,拍照穩了
    然而,最近這些年,隨著華為和小米等國產手機的崛起,在拍照方面一直霸榜DXO拍照排行榜。尤其剛剛發布不久的小米10 Ultra更是超越了華為P40 Pro取得了第一名的好成績。對於蘋果手機來說,的確倍感壓力。因此,蘋果手機最近這兩年,開始重視拍照體驗。如今,在蘋果iPhone12超大杯上將會搞事情。根據網友的爆料,蘋果iPhone12超大杯將新增ToF鏡頭,超廣角支持防抖。
  • 美風暴追逐者鏡頭捕捉超級雷暴景象
    美風暴追逐者鏡頭捕捉超級雷暴景象 (1/4) "← →"翻頁
  • 日媒:中國崛起為世界數據超級大國
    日經亞洲數據經濟研究團隊利用進出每個國家的大量數據分析主要國家和地區的跨境數據流量。根據該研究結果,中國已超越美國成為新的數據冠軍,「在2019年擁有最多的跨境數據。」研究報告指出,中國內地和香港佔跨境數據流動的23%,美國以12%落在後面。2001年到2019年間變化速度的不同使中國現在走到了美國的前面。在這段時間內,中國的跨境數據增長了7500倍,而美國只增長了219倍。
  • 讓小米和華為爭論不休的TOF鏡頭,其實並不是個鏡頭?
    到如今,紅米的千元機都已經2個攝像頭了,大廠在手機鏡頭上的競爭之慘烈可見一斑。在如今手機背後數不清的攝像頭之中,TOF鏡頭可以說是有名有姓,這主要由於國內的老冤家——小米和華為展開的一場論戰。2月15日,榮耀副總裁「榮耀老熊」發文表示,榮耀V20才是行業標杆。榮耀V20搭載的屏下攝像頭、TOF深感鏡頭、Link Turbo、雲電腦等技術,全面開創技術先河,成為行業標杆線。
  • 女乒又一23歲黑馬崛起,挑戰孫穎莎衝冠
    23歲的陳幸同崛起了,國乒的競爭更加激烈了。    陳幸同世界排名第13,在中國女乒選手中位列第八。  23歲的陳幸同迎來了崛起的大好機會。  她在2018年已經擁有世界冠軍身份,參加女乒世界盃團體賽收穫了冠軍。2019年陳幸同奪得了捷克公開賽和保加利亞公開賽女單冠軍,在這兩項賽事中,陳幸同都擊敗了伊藤美誠。
  • 直降1600,華為最強千元機誕生,8GB+TOF鏡頭!
    蘋果手機的影響力依舊很高,不過iPhone的創新卻不是肉眼可見,iPhone往往在系統軟體層面上有很多創新設計,可在手機外觀和配置上卻「擠牙膏」,反而是國產手機這幾年來進步飛快,紅米K30 5G的出現也是打破沉寂,將廉價雙模5G手機下探到了千元機價位,更是提供到了6GB大內存和6400萬四攝,而讓筆者倍感驚訝的是,當年保值率很高的華為旗艦機大幅降價,直降價1600,華為最強千元機誕生,8GB+TOF鏡頭
  • 《地獄男爵:血皇后崛起》上映首日票房破1400萬
    《地獄男爵:血皇后崛起》上映首日票房破1400萬 地獄男爵憤怒開火1905電影網訊 好萊塢超英特效巨製《地獄男爵:血皇后崛起
  • 聚划算發布黑鑽石新銳品牌榜,揭秘雙11黑馬破億品牌
    本次上榜品牌,相當一部分有望躋身今年雙11億元俱樂部,成為打破品類霸主格局的黑馬。  新銳品牌崛起,以小博大搶佔C位  本次5大新銳最受關注,聚焦Z世代爆發實力:  認養一頭牛作為年度乳製品新銳口碑品牌,實現超150%的高速增長;在9.15聚划算品牌聚星活動中展示超強爆發力,實現乳製品類目第一。
  • 鏡頭下的血月 超級藍月月全食拍攝記
    本周三(2018年1月31日),我們迎來了152年來第一次的超級藍月月全食。而身為攝影愛好者,自然是不會錯過這個難得且頗具紀念意義的拍攝機會。我們也帶上相機,記錄了這次月全食的整個過程。本篇,咱們就來聊一聊這次的月食拍攝吧。
  • ToF鏡頭重回視線,2020旗艦手機必備?
    而在這些轟轟烈烈的參數風暴之外,一個新的技術正在崛起:ToF。ToF究竟是什麼實際上,ToF這個詞我們已經聽了得有兩年。早在2018年,我們就見識到了ToF,OPPO R17 Pro和vivo NEX雙屏版都搭載了ToF影像系統,而到了2019年,華為、三星等旗艦也上馬了ToF。那ToF究竟是什麼?
  • 回顧 | 2017超級全日食的最佳鏡頭!
    2017年最大的天文盛事雖然少了「超級月亮」的捧場,卻在8月21日迎來了1979年以來首次在美國本土能夠觀賞到的全日食。
  • 《權遊》導演打造新作 電影《地獄男爵:血皇后崛起》定檔
    10月22日,好萊塢電影《地獄男爵:血皇后崛起》宣布定檔11月9日,並發布定檔海報、預告。電影由熱門美劇《權力的遊戲》導演尼爾·馬歇爾執導,集結大衛·哈伯、「生化女」米拉·喬沃維奇、丹尼爾·金、薩莎·萊恩等明星主演。