AR的殺手級設備是什麼?蘋果:沒眼鏡啥事 就是iPhone

2020-11-23 中金在線

11 月 22 日,很多傳言宣稱,在不久的將來,蘋果將推出一款增強現實(AR)或混合現實(MR)設備。儘管蘋果還沒有詳細討論過這款設備,但 AR 功能在 iPhone 上已經變得十分活躍,而且正在迅速變得越來越好。

蘋果從 2017 年開始了 AR 之旅,憑藉虛擬宜家家具和外觀逼真的戶外 Pokemon Go 大戰引起轟動。今年,美國資深科技編輯斯科特‧斯泰恩(Scott Stein)利用蘋果新款 iPhone 12 Pro 掃描消防栓、繪製其住宅的內部地圖,並在屋內地板上導航如何渡過熔巖河。在許多方面,蘋果最新款 iPhone 和 iPad 上的深度傳感雷射雷達傳感器,憑藉其先進的 3D 掃描功能,正成為未來蘋果 AR 設備的支柱。

[圖片]

Facebook、微軟和 Magic Leap 已經在探索旨在融合虛擬和現實的護目鏡和眼鏡,未來將有更多使用高通晶片的 VR 設備問世。但蘋果 AR 主管邁克·羅克韋爾(Mike Rockwell)和 AR 高級產品經理阿莉珊德拉·麥金尼斯(Alless Andra McGinnis)表示,蘋果目前的 AR 使命是讓人們口袋裡已有的設備更好地運行。從長遠來看,將 AR 與真實世界的位置分層,自動彈出體驗,同時基於 AR 的能力開發創意工具和開發輔助技術,可能成為最大的殺手級應用。

羅克韋爾說:「AR 技術具有巨大的潛力,可以通過今天已有的設備和未來可能推出的設備來幫助人們,但我們必須確保它的成功。對我們來說,最好的辦法就是塑造我們的設備生態系統,讓人們投入自己的時間和精力,這是個健康而有利可圖的領域。」羅克韋爾和麥金尼斯還談到了現在和三年前有什麼不同,以及為什麼手機對未來如此重要。

蘋果殺手級 AR 應用:智慧型手機

像 Oculus Quest 2 這樣的虛擬實境設備,雖然質量不斷提高,但與智慧型手機相比,仍然沒有多少人使用。Moor Insights 高級消費晶片分析師安謝爾·薩格(Anshel Sag)表示,除了索尼,沒有人真正談論 VR 頭盔的銷量。到目前為止,索尼已經售出了 500 萬臺 PlayStation VR 頭盔,儘管 Oculus Quest 2 很有可能在第一年賣出 500 萬至 600 萬臺。但即便如此,這些 VR 頭盔使用的應用程式通常會讓人感覺與我們日常使用的手機和電腦相去甚遠。即使在 Magic Leap 和微軟 HoloLens 承諾即將呈現 MR 幾年後,AR 設備仍然沒有大量存在。

羅克韋爾指出:「對於那些只使用 VR 技術,或者想要只使用 AR 技術體驗的開發者來說,這是一條非常艱難的道路。市場上並沒有那麼多設備可用。但與此同時,蘋果自 2017 年以來擁有 AR 功能的 iPhone 和 iPad 數量高達數億部。即使你只吸引了相對較小比例的用戶,這仍然是個巨大的數字。」

蘋果表示,已經有來自 7000 名開發者提供的 1 萬款支持 AR 的 iOS 應用程式,其中許多應用程式專注於購物或家居裝修,以此作為在家中實際使用 AR 的一種方式。實用性正是蘋果目前似乎最看重的。羅克韋爾說:「我們想為開發者提供一個平臺和生態系統,他們可以在那裡謀生。」

雖然新冠肺炎疫情已經導致許多實體企業關閉,減緩了大多數人的出行速度,但使用 AR 工具進行家居購物仍是蘋果目前關注的主要問題。就像谷歌和微軟正在尋求的方法一樣,使用基於手機的 AR 工具,你可能會在家裡的手機上以 3D 掃描形式查看你可能想要購買的東西。蘋果與 Safari 瀏覽器的連接使彈出式 AR 購物看起來像是去商店購物的完美替身。

麥金尼斯援引 Shopify and Build.com 的數據指出:「家得寶發現,人們在 AR 上看到某款產品時,改用 AR 的可能性是其他人的兩到三倍。購買的可能性更大(94%),回報率也更低(22%)。」

包括 Adobe 在內的應用開發商似乎對基於手機的 AR 也持同樣的看法。Adobe 為蘋果 iOS 開發了 AR 創意應用 Aero。Adobe AR 主管斯特凡諾·科拉扎(Stefano Corrazza)在談到公司為何除了從 Oculus 收購 Medium 之外還沒有探索頭盔創意工具時說:「頭盔已經在我們的路線圖上了,它們還沒有達到讓我們有理由部署的臨界點。在蘋果或谷歌大規模推出產品之前,我們推出它沒有太大意義。」

與此同時,像售價 999 美元的新款 iPhone 12 Pro 這樣的智慧型手機可以成為主要的創意工具,為未來的 AR 設備添磚加瓦。科拉扎說:「即使有了 AR 頭盔,所有的計算都會在手機上進行,而且也可以流式傳輸的方式連接到眼鏡上。」

這也是高通已經在為未來的 AR/VR 設備打造的相同模式,但這可能需要數年時間。與此同時,智慧型手機將發揮更大作用。科拉扎在談到 iPhone 12 Pro 時說:「在一段時間內,它將是主要的消費設備,但也可以 3D 掃描內容,它是一臺非常強大的機器。」Adobe 還沒有在 Aero 上使用 3D 掃描工具,但未來可能會探索加入這些功能的方法。

雷射雷達作為創意工具向 AR 領域邁進

蘋果進軍 AR 領域的第一步,只是使用手機的運動傳感器、陀螺儀和內置攝像頭來識別樓層,然後它識別牆和人。具備雷射雷達功能的 iPhone 和 iPad 則更進一步,從後置攝像頭附近的一個小黑色圓圈隱形地噴射出一系列紅外雷射,可以快速網格化(以 3D 方式繪製)房間的全景。

這也包括空間中的 3D 掃描對象和人。這是谷歌多年前通過一系列深度感應 Tango 手機探索的技術的演變,但技術更先進、範圍更廣泛。許多早期的雷射雷達應用,如 Polycam、3D 掃描儀和 Record 3D 都非常有創意,以 3D 捕捉為重點,與 2017 年令人驚嘆的、玩遊戲的 AR 應用相比,這是一個巨大的轉變。

羅克韋爾說:「這就是我們在設備上安裝掃描儀的部分原因。我們覺得這是一項關鍵技術,可以開啟 3D 掃描技術的爆炸式增長,可以用於各種用途。它還開啟了以某種方式開始掃描環境的可能性,並且能夠使創建 3D 對象變得更容易。」

網際網路上最大的 3D 對象存儲庫之一 Sketchfab 已經看到了增長,儘管在此之前,它已經在 3D 掃描方面進行了多年的探索。Sketchfab 的訂戶剛剛達到 400 萬,自 2012 年開始提供這項服務以來,它迎來了第一個盈利月份。

但正如 Sketchfab 執行長阿爾班·德諾伊爾(Alban Denoyel)所說的那樣,他已經經歷了之前自己預計 3D 掃描物體會蓬勃發展的時期。2016 年,當 VR 頭盔和幾款谷歌 3D 掃描 Tango 手機首次亮相時,大肆炒作。然而,市場的採用並沒有發生,導致了德諾伊爾所說的「VR 冬天」到來。現在,這種情況可能開始好轉了。

Snapchat 已經在探索使用雷射雷達實現 AR 效果,可以將虛擬物體放入現實世界,甚至還進行了掃描整個城市街區的更大規模實驗。Snapchat 攝像頭平臺副總裁埃坦·皮利普斯基(Eitan Pilipski)表示:「我們認為深度是非常重要的。」

不過,即使有了這些可能性,學習使用這些新工具可能也會令人望而生畏。蘋果自己的 AR 創作工具 Reality Composer 和 Adobe 的 3D AR 創作工具包 Aero,並不一定是人們馬上就能下載的應用,甚至是他們迴避的應用。到目前為止,3D 掃描應用很吸引人,但也是實驗性的,而且並不總是直觀的。蘋果在很大程度上將 3D 掃描應用程式的世界交到了開發者手中,而蘋果日常的核心 iOS 工具完全沒有整合這些功能。

蘋果在 iOS 範圍內對 3D 掃描對象的支持確實表明,3D 掃描對象最終可能會像 PDF 或照片一樣被分享。但在某些方面,未來的創造性工具還沒有完全存在。

拍照效果也可能帶來令人驚嘆的改進,蘋果自己的攝像頭應用程式使用 iPhone 12 Pro 的雷射雷達來提高夜間拍照和肖像的對焦能力。但蘋果目前還沒有將 AR 技術集成到攝像頭應用中,也不允許進行任何 3D 掃描。這些想法留給開發者去探索。有些應用程式,如 DSLR Camera,已經使用 iPhone 的雷射雷達在照片數據上創建自定義的 3D 信息層,將 3D 文本分層到照片中。

DSLR Camera 的創建者弗爾維奧·希基洛內(Fulvio Scichilone)說:「這款應用能夠計算出人和背景物體之間的分割,AR 肖像畫的未來計劃是用陀螺儀或手指移動畫框。」

作為擴展感官的 AR 以及可訪問性工具

蘋果認為 AR 的殺手級應用是可發現性,但在可訪問性方面還有另一個巨大的機遇。AR 可以擴展一個人的感官。在音頻領域,蘋果已經將 AirPods 用作助聽器,Facebook 也在探索用於輔助聽力的空間音頻技術。

同樣的情況也可能發生在輔助視力上。未來的助視產品,如 Mojo Lens 承諾的增強型隱形眼鏡,正致力於成為對視力受損的人有用的工具。蘋果可能會在 iPhone 上的 AR 以及未來的設備作為輔助工具的工作方式上走類似的道路。IOS 14.2 中已經有了新的人類檢測功能,它使用蘋果的 AR 和雷射雷達來識別人與人之間的距離,並在新款 iPhone 上用它來輔助視覺。

這可能只是個開始。羅克韋爾說:「我們可以做的事情還有很多,特別是與我們對周圍環境的理解有關。我們可以辨認人,但如果你想一想,人類對環境的理解程度,沒有理由不能讓一臺設備最終也具備這種程度的理解,並將其提供給開發者。」麥金尼斯補充說:「我們將與盲人和弱視社區合作,特別是在人類的探測方面進行改進。」

AR 未來的殺手級優勢:即時性

儘管有些人始終在使用 AR,但在日常生活中使用 iPhone 或 iPad 時,他們經常會忘記尋找新的 AR 應用。當我們在現實世界中忙碌時,發現虛擬世界中的新事物並不是一個無縫的過程。

羅克韋爾認為 iPhone AR 的未來不是應用程式,而是快速瀏覽功能。他解釋說:「你每天要打開手機多次來做各種事情,這些都是輕量級的體驗。真正的殺手級應用是,它將一直以這些微妙的方式被定期使用,幫助你做你現在做的事情,讓你的工作變得更容易、更快。」

實現這一目標的途徑包括 App Clips,這是蘋果在 iOS 14 中推出小型微應用的新方式,無需下載任何東西就能在 iPhone 上運行。App Clips 可以由現實世界中放置的 NFC 標籤或可掃描代碼觸發,它還涉及蘋果的地圖繪製工作。蘋果新推出的 Location Anchors 意味著虛擬 AR 對象可以存在於現實生活中的地點,比如在時代廣場看到一件虛擬藝術品,並與多人同時共享。

[圖片]

羅克韋爾在談到 Location Anchors 時說:「如果它位於我們擁有高解析度地圖的地區之一,這在美國是相當多的。如果它在一米之內,你就可以體驗到這一點。」他承諾,Location Anchors 的精確度將高於全球定位系統(GPS)。同時,在現實世界中,由特定二維碼或 Location Anchors 觸發的 App Clips 精確度可以達到釐米級。

對於蘋果的 AR 技術來說,這兩項工作仍在進行中:在疫情導致封鎖期間,人們可能不太可能出現這種基於位置的 AR 技術出現在公共場所、商店或博物館。但蘋果認為,對於每天使用 AR 的人來說,它們是至關重要的。羅克韋爾說:「我們知道我們必須解決這些問題,才能讓 AR 成為主流體驗,我認為我們正處在讓 AR 成為人們日常生活一部分的邊緣。」

Acute Art 公司執行長雅各布·德蓋爾(Jacob De Geer)說:「我的看法是,App Clips 和 Location Anchors 將產生巨大的不同。」Acute Art 是一款已經在現實世界舉辦 AR 展覽的應用程式,但目前人們找到這件藝術品的挑戰之一是需要知道它的存在。德蓋爾稱:「現在的主要問題是:你怎麼才能讓人們下載你的應用呢?這不僅是 AR 領域的問題,也是現在所有科技領域的問題。」

麥金尼斯說:「我們經常聽說人們在使用 AR 應用,卻不知道它們是什麼。」他指的是沃比·帕克(Warby Parker)的即時 AR 眼鏡試戴等流行 iPhone 工具。他稱:「隨著 AR 變得越來越主流,你是否知道它是 AR 並不重要。重要的是你在你的設備上有一種令人驚嘆的體驗。」

現在為將來打好基礎

結合蘋果基於雷射雷達的 3D 掃描功能,越來越強大視覺效果的 AR 工具,再加上 AirPod Pro 引入的空間音頻技術(可以讓你正在聽的東西聽起來就像在 3D 空間中移動一樣),不難想像未來蘋果 AR 頭盔的樣子。

蘋果對此不予置評。但與此同時,該公司正在努力鼓勵大批開發者開發支持 AR 的應用程式。無論其 AR 設備是否會在短期內面世,更具空間意識的 iPhone 和 iPad 都將把手機轉變為世界掃描設備。或者甚至可能用於機器人技術,或者在意想不到的地方用作計算機視覺攝像頭。

羅克韋爾說:「這些東西最初是很微妙的,你必須具備所有的元素才能讓它們成功。幾年之後,它將成為一種你會記不起沒有它的生活方式,就像網際網路一樣。你會覺得:『哇,我經常用這個』,它最終將融入我們的生活。」(小小)

上一篇:

相關焦點

  • AR的殺手級設備是什麼?蘋果:沒眼鏡啥事 就是iPhone - Apple...
    但蘋果AR主管邁克·羅克韋爾(Mike Rockwell)和AR高級產品經理阿莉珊德拉·麥金尼斯(Alless Andra McGinnis)表示,蘋果目前的AR使命是讓人們口袋裡已有的設備更好地運行。從長遠來看,將AR與真實世界的位置分層,自動彈出體驗,同時基於AR的能力開發創意工具和開發輔助技術,可能成為最大的殺手級應用。
  • 蘋果殺手級AR應用你知道是什麼嗎?
    Facebook、微軟和Magic Leap已經在探索旨在融合虛擬和現實的護目鏡和眼鏡,未來將有更多使用高通晶片的VR設備問世。但蘋果AR主管邁克·羅克韋爾(Mike Rockwell)和AR高級產品經理阿莉珊德拉·麥金尼斯(Alless Andra McGinnis)表示,蘋果目前的AR使命是讓人們口袋裡已有的設備更好地運行。
  • 蘋果AR眼鏡原型機曝光,虛擬投影與iPhone對接,果粉激動了!
    蘋果公司研發虛擬實境(AR)眼鏡的消息早已在幾年前就傳出,不過多年來一直處於"紙上談兵"階段。直至近日多位行業人士的爆料,才證實蘋果並沒有放棄研發AR眼鏡,而且這款全新的產品即將面世。據介紹,蘋果AR眼鏡Apple Glass設計與一般眼鏡無異,並不是具有未來科幻感的革命性設計。功能性是蘋果的AR眼鏡著重點。其擁有揚聲器和麥克風,可以通過呼喚Siri來撥打電話,以及一些便捷的語音操作。
  • 蘋果AR眼鏡系統曝光:rOS!
    IT之家11月15日消息 有關蘋果AR眼鏡的最新傳聞是來自上周的消息,組裝蘋果手錶和MacBooks的Quanta公司稱,蘋果計劃在2019年提供這樣的產品。Quanta公司副董事長C.C. Leung在最近三個月業績的盈利會議上稱,他認為該設備不遲於2019年推出。
  • 富士康為蘋果試生產AR眼鏡設備 採用半透明鏡片
    據外媒報導,蘋果及其供應商富士康在傳言已久的蘋果AR設備開發過程中達到了一個關鍵裡程碑,該設備的半透明鏡片從原型轉向試生產。據報導,蘋果供應商富士康已經開始試生產「蘋果眼鏡」上使用的偏振和半透明鏡片,這屬於工程驗證測試的重要組成部分。
  • 新專利顯示蘋果眼鏡可以使用來自iPhone的AR 3D地圖數據
    VR和AR頭顯生產者必須面對的問題之一就是需要知道頭顯在環境中的位置。這一點對於增強現實應用尤為重要,因為將數字物體疊加在真實世界場景上的觀看系統必須確保物體在用戶視野中的定位是絕對正確的。頭顯有多種不同的方式來追蹤它們的位置,包括加速度計和指向環境中的攝像頭來追蹤附近的物品。
  • 蘋果眼鏡Apple Glass冒泡:一款可以矯正近視的AR眼鏡
    Apple Glass能做什麼?據目前已有消息掌握情況來看,蘋果公司很有可能讓第一代蘋果眼鏡成為iPhone的附屬產品,這就像Apple Watch一樣,Apple Glass將會是iPhone的另一個屏幕,將手機中的信息傳遞到你的眼前。
  • 如果購買一副蘋果AR眼鏡,會帶來什麼改變?
    圖源:unsplash蘋果公司尚未放出即將發布任何智能或增強現實眼鏡的消息,但可能發布的傳言已然傳開。不過,若蘋果公司不久便發售增強現實眼鏡,它可以將AR Kit、Siri與這款智能眼鏡結合,使視障人士或盲人生活更加便利。閱讀會變得更加容易如果蘋果公司的開發人員將AR Kit和Siri結合,就能儘早幫助視障人士識別文本。目前,蘋果公司在iOS設備上開發出了一項功能:用戶只需在屏幕上向下滑動兩根手指,便可讓Siri朗讀網頁或PDF。
  • 從AR光學開始,了解AR眼鏡
    儘管所有人都認為AR會變成像智慧型手機一樣強大,但是我們至今仍未能夠在市面上看到一款令人滿意的AR眼鏡,這樣龐大的投入和關注都未能帶來一款撐得起口碑的產品,AR眼鏡的難點究竟是什麼?但目前蘋果和谷歌也沒有正式推出(再推出) AR眼鏡的產品,當然也沒有相關的OS。目前除了微軟和Magic Leap有自己AR眼鏡的 OS 外,其他大多 AR眼鏡整機的 OS,也是改自安卓。目前看起來,AR 眼鏡的OS,初創企業很難能和世界科技巨頭競爭。
  • iPhone 12新WiFi標準或將用於蘋果AR眼鏡?
    美股研究社2月27日消息,據TechWeb援引外媒報導,本周早些時候的報導顯示,蘋果即將發布的iPhone 12可能支持新的WiFi標準802.11ay。現在,又有報導稱,iPhone 12採用新的WiFi標準可能是為了與傳言已久的蘋果智能眼鏡兼容。
  • 本周大新聞|輕應用是殺手級AR體驗形態,索尼新PSVR專利曝光
    本周大新聞,AR方面,蘋果AR部門主管Mike Rockwell表示:輕應用將是殺手級的AR體驗形態;OpenBCI將推出AR/VR頭顯專用腦機平臺Galea;Guardhat推出基於Vuzix M400/M4000的AR安全帽方案;松下與Phiar合作,提供AR車載導航方案;手遊版《動物之森Pocket Camp》加入AR玩法
  • iPhone 12:蘋果將集成無延遲的WLAN標準用於AR眼鏡?
    據報導,蘋果的iPhone 12將搭載新的短波WLAN標準802.11ay。其中,據推測這應該用於蘋果即將上市的AR眼鏡進行通訊。日本蘋果博客Macotakara最近報導說,蘋果9月份發布的iPhone 12系列據說已經安裝了新的WLAN標準。美國雜誌Macworld認為,由於其與蘋果首款AR眼鏡進行通信的規範,因此可以使用新的WLAN 802.11ay標準。
  • WWDC 2019上未出現的蘋果AR眼鏡
    雖然曝光的專利文件只是一些細節,但其他信息卻引人注目且不尋常,包括針對商務場合通過Patently Apple新提交的一個應用程式:讓眼鏡佩戴者按照計劃看到秘密文件和輸入設備的真實版本,而外部觀察者則只能看到虛假信息。
  • 蘋果手機 iphone xr、iphone XS Max 怎麼讓屏幕往下拉一半?
    iPhoneXR怎麼讓屏幕往下拉一半想必是很多剛從安卓陣營或者iPhone8以下的蘋果手機設備升級到iphone XR、iphone X、iPhone XS、iphone XS Max的用戶來說容易遇到的問題。
  • 蘋果AR計劃:AR耳機、AR眼鏡都不會少,並將配合rOS新系統
    11月12日,據彭博社消息,蘋果計劃在2021年或2022年發布一款結合VR和AR技術的的頭戴式顯示設備,可用於遊戲、觀看視頻和虛擬會議。此外,蘋果計劃最早將在2023年推出輕量級的AR眼鏡,也就是外界所謂的「Apple Glass」。
  • iPhone被鎖死怎麼辦 蘋果遠程被鎖定敲詐解決方法
    記者看到,範女士的這部蘋果手機開機後提示:「此iphone已丟失並被抹掉,請使用ID登錄激活。」而當範女士重新輸入ID和密碼後,手機卻提示「ID或密碼不正確。」範女士說,在手機被鎖死的前兩天,曾多次跳出對話框,讓她重新輸入ID和密碼,範女士認為,手機被鎖可能和這兒有關。
  • 戴蘋果眼鏡變身柯南?蘋果拿下一專利,靠眼鏡直接解鎖iPhone
    據Appleinsider消息,蘋果目前已經獲得了一項專利:利用「蘋果眼鏡」或類似設備,可能自動解鎖用戶的iPhone、Apple Watch、iPad、Mac等設備。用戶在佩戴「蘋果眼鏡」時拿起iPhone,用戶甚至不一定要看手機,就可以直接使用它,而不是輸入密碼或等待Face ID。
  • 蘋果可摺疊iPhone專利 可提供包含多個部分電子設備
    隨著微軟、三星、華為、小米等也研究和推出自己可摺疊機型,蘋果也在開發自己的摺疊式 iPhone 。現在,外媒 Windowsunited 發現了一項專利,其中描述了蘋果可摺疊設備的不同類型。  據了解,該專利於 2020 年 6 月 18 日提交,2020 年 8 月 10 日公布。
  • iphone離線怎麼定位,iphone離線是什麼意思
    我們知道在我們的蘋果手機丟了以後,我們都會去使用查找我的iphone這一項功能,不過如果當我們丟失的手機沒電關機離線時,我們要怎麼去找回它呢,下面我來說下iphone離線怎麼定位,iphone離線是什麼意思。
  • 蘋果iPhone 12 Pro的LIDAR掃描儀 將為你們帶來什麼功能?
    那就是LIDAR掃描儀,它是一種新型的深度感應,可以在許多有趣的方式上有所作為。如果蘋果採用這種方式,LIDAR掃描儀是一個蘋果的對此項技術的命名,實際上我們可以稱為雷射雷達,您現在將開始聽到很多關於這項技術的用處,所以讓我們分解一下所知道的,蘋果將使用它的用途以及該技術的下一步發展。雷射雷達是什麼意思?