iPad首發DToF技術背後:蘋果AR生態落地前的「小算盤」

2021-01-18 騰訊網

飛象網訊(高靖宇/文)雷射雷達(LiDAR)一向是汽車自動駕駛技術實現的主要部件之一,然而沒有料到的是,它竟被蘋果裝進了新款的iPad Pro 上。

3 月 18 日晚,蘋果官方悄悄上新了 iPad Pro、MacBook Air 和 Mac mini 等數款新品。

其中新款 iPad Pro最主要的硬體升級並非身後的「浴霸雙攝」,而是攝像頭旁搭載的dToF雷射雷達,iPad Pro因此成為了蘋果 ToF技術的首發平臺。

我們都知道,蘋果每一項技術的應用不是隨便搞個噱頭出來,Touch ID、Face ID等新技術都改變了整個行業。那麼,iPad Pro引入的雷射雷達技術到底是什麼?背後又有何玄機?

DTOF雷射雷達到底是啥黑科技?

iPad Pro上所搭載的雷射雷達(Light Detection And Ranging)其實和手機上採用的ToF攝像頭都屬於雷達技術,以飛行時間距離(Time of Flight,飛行時間)捕捉 3D 圖像。主要原理是利用雷達發射光波,光波遇到不可穿透物體會發生反射,通過記錄反射光到達接收器的時間,便能快速計算出光源與物體的距離,由此便得到一張被測物體的 3D 圖像。

但是,不同的雷達發射的光波都不一樣,所獲得的圖像解析度和清晰度也有差別。

手機通常採用的 ToF 技術選用的雷達波長,發射的也屬於紅外面光源,接收到的是深度平面信息,成像精度有限,仍然無法捕捉高精度動 3D 圖像。而iPad Pro 選用的雷射雷達,其發射的是脈衝紅外雷射,接收單點位置,形成點雲圖後再變成三維模型,精度更高。

▲ TOF 相機工作原理

▲通過ToF獲得的物體距離和深度信息圖

此外,雷射雷達發射的光波存在兩種調製方式:直接飛行時間(Direct-ToF)測量和間接飛行時間(Indirect-ToF)測量,直接測距,是通過發射、接收光並測量光子飛行時間,直接計算確定距離,而非直接測距iToF,是通過測量發射波形和接收波形間的相位差來換算,從而確定距離,直接測距擁有響應快、功耗低等優勢。

蘋果iPad Pro用的就是DToF,而華為Mate30、vivo NEX等機型用的是iToF。DToF相比於iToF在性能上要好很多,但在生產工藝上也更複雜。

由於採用DToF方法,iPad Pro背部的雷射雷達將能解決直接測距面臨的低時間解析度難題,達ps(皮秒)級時間解析度,精度也不會隨距離拉遠有大的衰減。換句話說,iPad Pro的ToF相機性能將提升的不是一點半點,它帶來了一顆進化版的ToF鏡頭,AR體驗的精準度、流暢度將大大提高,功耗也會大大降低。

蘋果為AR生態落地打「小算盤」

蘋果引入DTOF雷射雷達技術並非為了拍照,而是有自己的「小算盤」。

蘋果表示,支持 ARKit 的應用程式都將自動獲得 LiDAR 所能提供的特性,並且能極大地縮短 AR 建模的速度,提高測量精度,降低抖動、錯位的情況。

蘋果給出了三個典型場景:AR 量身高、AR 遊戲和宜家的 AR 家庭裝修。

比如 iPad Pro 的雷射雷達掃描儀可以把客廳變成一個現實增強 (AR) 版的《熾熱熔巖 (Hot Lava)》,這是一款電子遊戲,其根據兒童的娛樂活動設計而出,玩具可以跳到家具上以此來避開模擬中的地板熔巖。

此外,通過調用 CAD 應用 Shapr3D,iPad Pro 的雷射雷達可以掃描房間創建該房間的 3D 模型,然後用戶可以對該模型展開編輯、將新對象添加到房間中並使用 AR 查看實際房間中添加的對象。

而解剖學應用 Complete anatomy,通過使用雷射雷達掃描儀實時測量出某人手臂的運動範圍。宜家 Place 應用也可以通過蘋果的這項功能掃描一個房間然後獲得與之匹配的家具推薦,用戶可以在 AR 中查看擺上去的效果。

據媒體透露,蘋果的規劃應該是通過DToF雷射雷達掃描儀和iPadOS軟硬一體,把新iPad Pro打造成集開發AR和體驗AR的工具。以此來吸引那些AR應用開發的程式設計師使用iPad Pro來進行調試和編寫AR應用。

有消息稱,蘋果今年下半年將要推出帶有ToF功能的iPhone12, 蘋果如意算盤應該是將iPad和iPhone組合起來,增強AR硬體和應用,逐步蘋豐富蘋果的AR生態。

AR行業「新風向」來了?

在5G時代到來之際,5G除了會帶來極高的網速之外,還會促進部分生態發展成熟,這其中就包括AR。從技術角度講,AR結合未來體感技術的加持,將為用戶打造「真實的虛擬世界」。而這,很可能將使AR在5G時代煥發出新的活力,成為5G時代的一個全新增長點。

事實上,早於5G商用之前,業界就已經有包括華為、vivo、OPPO、三星、LG、索尼在內的多家手機品牌,已經先後展示或者推出了他們基於ToF技術的機型。

2018年,OPPO在R17 Pro上首次搭載了TOF 3D立體攝像頭。緊接著vivo在vivo NEX雙屏版上搭載了3D TOF攝像頭;榮耀也推出了搭載3D TOF立體攝像頭的V20。

2019年,搭載TOF的新機開始明顯增加。根據統計的數據顯示,華為、三星、LG這幾家手機廠商均有搭載TOF,其中三星在S10 5G版中前後均採用了TOF攝像頭,同時三星在NOTE系列和A系列中也採用了TOF攝像頭。華為Mate 30 Pro也均採用了TOF攝像頭。

進入2020年,TOF鏡頭在手機端的滲透率有望進一步提升。有業內人士預測, 2020年全球TOF手機的出貨量將達到1.5億臺,而2021年預估將達到5億臺。

然而在TOF手機「表面繁榮」的背後,我們不能忽略的是,當前在AR依然缺少「殺手級」的消費應用,成為AR產業發展的一個掣肘。目前,手機廠商正在積極組建自己的AR生態。

早在2017年WWDC上,蘋果就發布了ARKit開發工具,可以讓開發者為iOS設備開發AR應用。蘋果官方表示,已經向開發者釋出 iPad Pro 的 ARKit,並預告在今年稍後帶來對應的 AR 應用,涵蓋生活、醫學、遊戲、建築等不同方向的應用。

華為布局手機AR的核心優勢是軟硬體整合。華為於2018年6月發布AR Engine,並針對麒麟晶片的DSP(數字處理信號)和NPU進行算法加速。在開發者生態層面,華為還牽頭制定了AR/VR的API接口標準,以完善開發者支持。

▲華為Mate30演示AR技術看車

OPPO也在2018年便組建了ARUnit平臺,針對開發者設立的能力引擎,該平臺已經升級至2.0版本,全新加入了空間計算能力、環境理解升級、多人AR雲和手勢骨骼識別功能。OPPO想要做的就是通過開放性的方式整合各方面的力量,讓自身的AR體驗增強,以便於普及手機AR功能。

▲OPPO開發的王者榮耀AR相機

隨著TOF鏡頭的升級優化、AR生態打通以及基於5G確定性網絡的業務體驗保障, 用戶對於AR的需求也會逐漸釋放出來,相信未來手機上的AR體驗能帶來更多的驚喜。

相關焦點

  • 淺談DToF技術原理
    本文由優圖實驗室原創 導語 蘋果公司在3月18日發布新款ipad pro等產品,基於新搭載的DToF雷射雷達,有望將AR應用效果的精確度、流暢性提高到新的級別,同時可以降低設備功耗。
  • 眼睛的革命 蘋果iPad mini 2首發評測(全文)_蘋果 iPad mini 2...
    網絡上後期的消息還沒有跟上,借著餘溫的炒作還沒有推開,蘋果公司昨天下午就宣布了旗下新一代平板電腦中的iPad mini with Retina的預售日期,轉移了話題。這不禁讓筆者想起了前兩天汪峰在演唱會上對章子怡的表白被廣州恆大奪冠佔了頭條的囧境。
  • 蘋果體驗店是介紹錯誤還是有意隱瞞,新款ipad只攜帶A12仿生晶片
    蘋果新款ipad>01輕辦公時代以前由於種種的技術限制,對於複雜和高級的計算機,我們想隨身攜帶並帶走是完全無法實現的,曾經更是不可想像的。然而除了手機意外還有一款也被稱之為輕辦公的產品就是蘋果的ipad產品。
  • 科普蘋果a1474是ipad幾代以及10.2英寸全新iPad體驗如何
    只不過蘋果至今推出過很多款iPad產品,初次接觸iPad肯定會不熟悉。這不,近日我們微信公眾號就有一位粉絲向我們提問:a1474是ipad幾代。小編去網上搜索了一下,發現這樣問的小夥伴還是挺多的,所以今天打算來給大家解答一下。
  • 蘋果手機拍照怎麼顯示時間?蘋果手機和ipad同步怎麼取消
    蘋果手機拍照的功能還是非常強大的,不過一些拍照的小技巧,如果你不仔細研究的話,可能還發現不了。近期有人問蘋果手機拍照顯示時間的問題,我們在這裡統一回答。   蘋果手機自帶相機是沒有把拍攝時間固定在相片上的功能的。   不過相片的屬性裡會記載詳細的信息。
  • 誰是最佳伴侶 10款蘋果iPad保護套橫評_蘋果 The new iPad(16GB/...
    誰是最佳伴侶 10款蘋果iPad保護套橫評行業現狀  目前市場中保護套的品種較多,iPad貼膜、皮套、內膽包都是iPad用戶必備的配件之一。市場上有大量的iPad皮套可以選擇,從5元到500元的iPad保護套比比皆是,真皮皮套、PU皮套、甚至金屬材質的ipad皮套充斥著市場。普通消費者要想在眾多的iPad皮套市場上尋找性價比高、質量好、外觀時尚、符合國際潮流趨勢的皮套還真不是一件容易的事情。由此可見平板電腦保護套格局較為混亂。劣質有害的材質和廉價粗劣的模具,不僅不能保護更有可能損害你的iPad 2,甚至會損害人的健康。
  • 蘋果發布會:iPad Air 4首發A14仿生處理器,有哪些提升?
    蘋果發布會:iPad Air 4首發A14仿生處理器,有哪些提升?   [PConline 資訊]北京時間9月16日凌晨1點,蘋果秋季新品發布會上正式推出Apple Watch Series 6、Apple Watch SE、 iPad Air 4和iPad 8等產品,按照以往慣例,新iPhone首發A14仿生處理器,不過遺憾的是,蘋果沒有這次發布會上推出旗下首款5G蘋果手機iPhone 12系列,而A14仿生處理器則在
  • 買前生產力,買後愛奇藝?ipad的真正用途是啥?
    最近,國外媒體又曝光了新ipad pro的渲染圖,我們可以看到看到信息,比如浴霸式的攝像頭布局,更強大的處理器A13x。如果真的是這樣,新ipad值得購買嗎?我覺得舊的更好。先從升級相機模組來說,蘋果的拍照確實強大,但是你真的有必要拿著那麼大的一塊板子去拍照嗎?
  • 「重男輕女」新面孔,看似對女兒寵愛,背後卻暗藏著父母的小算盤
    前段時間收到一位女孩的私信,她說自己一直以來都覺得父母對她和對弟弟是一樣的,但最近發生的一件事情,讓她覺得父母對她只是表面寵愛,背後卻都是算計。△ 打著寵愛女兒的幌子,背後卻是在為兒子鋪路,精明父母的小算盤在家裡她是姐姐,還有一個相差不大的弟弟。小時候父母一直給她灌輸的思想就是,在咱們家男孩女孩都一樣,不存在重男輕女的情況。
  • 蘋果iPad Pro上用的ToF技術是什麼?
    蘋果的產品總是發布的悄無聲息,受疫情影響,原本計劃好的蘋果春季發布會開不成了,便悄悄在官網上架了iPad Pro、MacBook Air 和 Mac mini 等數款新品。其中最受人關注的當屬iPad Pro,其功能模塊跟大多數iPad產品一樣,真正讓iPad Pro成為黑科技的,不是背後的浴霸雙攝,而是攝像頭旁搭載的dToF雷射雷達。iPad Pro也成為了蘋果首款應用ToF技術的產品。可能很多人並不了解什麼是ToF,ToF是Time of flight的簡寫,直譯為飛行時間的意思。
  • 與華為搶5nm首發!蘋果A14處理器性能一騎絕塵
    不出意外,全球首批5nm晶片有華為海思麒麟9000和蘋果A14,兩家到底誰會首發,引人關注。蘋果從A4蘋果開創自研晶片之路,到即將到來的A14,十年的自研造芯路究竟會帶來怎樣的集大成之作,讓它成為數以億計果粉們的期待。
  • 走在蘋果前面的PITAKA MagSafe磁吸生態的原型3年前就出現了
    【天極網IT新聞頻道】10月14日,蘋果於線上發布會上發布iPhone12系列四款機型:iPhone12、iPhone12 mini、iPhone12 Pro、iPhone12 Pro Max,全系支持5G、20W PD有線快充、全新的MagSafe磁吸充電技術,標誌著iPhone新紀元的開始。
  • 基於三翼鳥大規模落地實踐,海爾智家首發智慧家庭全場景標準!
    經過多年的發展,目前智慧家庭產品已相對成熟、聯通也更加順暢,卻仍未實現大規模落地,很多用戶對「什麼是智慧家庭」也沒有清晰概念。落地難的根本,在於行業還沒形成覆蓋各相關領域的全場景標準體系。  12月18日,在海爾智家北京001體驗中心,海爾智家首發以《智慧家庭空間分類及設計導則》為主的智慧家庭全場景標準,打通了智慧家庭落地入戶的「最後一公裡」。
  • ipad愛奇藝不能全屏
    可能是下錯愛奇藝版本,如果ipad下載安裝手機版的話就會出現畫面無法適配的情況,用戶在下載愛奇藝時要注意下載hd版或pad版。此外,用戶有可能將ipad或者愛奇藝播放界面進行了鎖屏,當屏幕不能旋轉時也會產生不能適配全屏的情況。
  • ipad換電池什麼牌子的好
    蘋果產品系列電池續航問題一直讓人吐槽,特別是手機電池,無法和安卓機子相比,蘋果11系列電池續航相對之前機型來說稍微好一點,蘋果平板的電池問題很少有用戶吐槽,相比手機來說ipad電池更大了,一般使用個幾年都沒問題,但是ipad4,ipadair一代都是五六年前的機子了,就是ipadair2也將近發布已經五年,電池更換的需求量也越來越大,
  • 蘋果「雷射雷達掃描儀」拆解:dToF技術會成為主流嗎?
    眾所周知,雷射雷達(LiDAR)技術是目前自動駕駛汽車領域的關鍵技術。不過,在3月18日,蘋果推出的全新的2019款iPad Pro系列平板電腦上,蘋果稱新款的iPad Pro上配備了「雷射雷達掃描儀」,由此也引發了外界的極大關注。
  • 蘋果發力 AR,網際網路家裝有何機會
    現象級遊戲PokemonGo僅僅只是AR應用的一個特例而已,除了遊戲之外,AR技術還能應用到更加寬闊的領域裡,並由此更加深度地影響和改變我們的生活。儘管蘋果、微軟、騰訊、阿里等網際網路巨頭都開始布局AR,但是AR內容體系和商業模式先天不足的問題依然在困擾著它的發展。
  • 新iPad Pro上的雷射雷達掃描儀,蘋果開啟下一個平臺的秘密武器
    以此為基準,當我們將其與蘋果步步為營的產品策略以及行業發展趨勢叫交叉在一起思考,就能發現,新 iPad Pro的AR功能,背後有著蘋果更深層次的布局。蘋果的AR夢比 iPad系列加入AR硬體功能早得多,2017年的WWDC大會,蘋果就推出ARKit,開始從軟體生態上建設AR內容。
  • 市場分析師郭明錤:蘋果(AAPL.US)可能會在新電腦中首次放棄英特爾...
    美股 市場分析師郭明錤:蘋果(AAPL.US)可能會在新電腦中首次放棄英特爾(INTC.US)晶片 2020年3月1日 12:02:56 智通財經網本文來自 「TechTudo」。市場分析師郭明錤表示,從2021年起,蘋果(AAPL.US)可能會將英特爾(INTC.US)處理器換上自己電腦上的晶片。
  • 被蘋果砸中腦袋的不僅僅只有牛頓,帶你了解不一樣蘋果
    那年,賈伯斯說服百事可樂總裁斯庫利到蘋果,出任CEO,然而加入沒多久,他們就矛盾頻出,董事會卻站在了斯庫利的一邊,賈伯斯被踢出他自己創辦的蘋果公司,因此斯庫利當政,卻昏招頻出,Macintosh的市場佔有率被微軟擠得越來越小,蘋果公司開始虧損,斯庫利不得不下臺,而後蘋果的連續兩個繼任者同樣也是無力回天,13年間蘋果被微軟不斷的按在地上摩擦。