2017回顧:蘋果做AR的這一年,為何值得銘記?

2017是蘋果發力AR的一年，其帶動了2017下半年AR市場的整體發展。

這一年，CEO庫克在各個場合強推AR，在他看來AR對蘋果的重要性，正如iPhone對蘋果的重要性一樣。

蘋果在AR硬體和軟體上都取得了很多突破。 6月蘋果推出ARKit，使得上億的iPhone設備一夜間擁有高品質的AR功能；9月上線搭載ARKit的iOS 11上線至今，App Store中已經有超過1000款AR應用；iPhone X搭載專為AR優化的A11仿生晶片、原深度攝像頭和神經網絡算法；蘋果AR眼鏡將採用獨立晶片、搭載rOS系統，最早2020年發貨。

ARKit改變AR生態

蘋果要做 AR 早就不是什麼新聞，Tim Cook 也多次在公開場合表明看好 AR。WWDC上蘋果公布了自己邁入 AR 領域的第一步——針對 iOS 11 推出 ARKit。

在WWDC上，蘋果演示了宜家用ARKit實現的Ikea Place功能，在你選擇家具的時候，可以直接把虛擬的家具放置在真實的房間中，虛擬家具會按照1：1還原，這樣在購買前就可以很直觀的看到家具的擺放效果。

蘋果還演示了ARKit對Pokémon GO的升級。2016年7月，Pokémon GO火遍全球，上億人加入了這場捕捉虛擬寵物精靈的AR遊戲中，感受到AR的魔力。然而，Pokémon GO只是低端的AR應用，其實現方式只是將虛擬物體疊加在手機相機圖像流之上，虛擬寵物精靈只能漂浮在現實世界中，沒有真實可言。ARKit可以使得寵物小精靈站立在地面上，扔出去的精靈球還可以在地面上彈跳，也就是說虛擬物體與真實世界有了互動。

ARKit是蘋果邁入AR的第一步，使得上億設備瞬間擁有AR功能，也使開發者不需要任何別的工具，可以輕鬆利用ARKit開發AR應用。ARKit的推出直接改變了AR技術的格局，AR市場的生態。

矽谷AR投資人Matt  Miesnieks指出，ARKit的基礎技術是視覺慣性測量（VIO）系統、簡單的2D平面檢測。ARKit可以被看成輕便的SLAM系統，可以將3D虛擬物體放置在真實的平面中，使得虛擬物體在平面上運動，還可以追蹤用戶的相對運動。而ARKit神奇之處和攻破的難點在於其實現了單目3D成像、計量尺度獲取。（延伸閱讀：大神揭秘：蘋果 ARKit 憑什麼碾壓對手？）

ARKit使用的VIO系統其實和市面上已經有的Vuforia 、谷歌Tango、HoloLens等沒有差別。雷鋒網了解到，ARKit的VIO技術來自於其收購的FlyBy公司，而該代碼庫已經授權給Google，成為 Tango 的 VIO 系統。大神Matt認為ARKit的優勢在於蘋果公司可以負擔得起將 VIO 算法緊密耦合到手機傳感器上，並花費很多時間來校準 VIO 系統，以減少計算空間位置時產生的誤差。

谷歌Tango早於ARKit，但是Tango是一套獨立的軟硬體設計參考標準，當時支持Tango的只有聯想的Phab 2 pro和華碩的ZenFone。Google的AR技術積累早於蘋果，但是由於沒有整合好軟硬體，被ARKit搶佔了先機。此時，Google顯得十分尷尬，要麼推出單目AR SDK，要麼強推Tango讓安卓手機硬體升級。

顯然，Google選擇了前者，在8月，Google發布了ARCore，正式與ARKit開戰。ARCore被看作是輕量級的Tango，可以支持Samsung S8和 Pixel系列手機。Matt認為，「作為技術解決方案，ARKit和ARCore的能力非常接近。ARKit 在集成和跟蹤方面具有一定的技術優勢； ARCore 在建圖和重定位方面具有一些優勢。可是這兩個優點大多是專業的計算機視覺工程師才能看到的。」（延伸閱讀：大神解讀：谷歌 ARCore 就是低配版 Tango，它比蘋果 ARKit 好在哪？）

庫克在採訪中也回應了ARKit與ARCore的競爭，他說到：「Android的市場更大，但過於分散以至於谷歌無法確定手機新功能的誕生需要多長時間。儘管蘋果和三星一直在爭奪手機市場的第一把交椅，但蘋果的手機銷量遠高於競爭對手。更重要的是，蘋果公司自己打造手機製造軟體和硬體，這使得它在AR和其他領域都處於獨一無二的優勢地位。谷歌也在對它的Pixel手機系列做同樣的事情，並整合了良好的虛擬實境功能，但這些手機的銷量並不大。」

蘋果發布ARKit支持iPhone 6S及以上機型，瞬間就有上億用戶，而安卓OEM廠商接入ARCore或許還得等上大半年。不難看出，ARKit的推出刺激谷歌發布ARCore，讓安卓市場也接入AR。但ARKit對AR格局的改變還不止於此。

阿里巴巴天貓互動技術專家蔣佳憶曾發文分析ARKit對AR眼鏡廠商、AR SDK公司、AR軟體玩家的影響。在他看來，ARKit首先以手機AR的形式教育大眾，對AR眼鏡未來的普及是鋪墊作用。AR SDK玩家比較慘，近一年幾乎所有SDK公司都在基於單目做SLAM算法的研發，而蘋果解決這個問題後，這些玩家智能轉而在ARKit基礎上做擴展功能。例如，uSens凌感推出可以適配低端安卓機型的AR技術平臺。AR軟體玩家如Snapchat和Facebook受到影響也很大，Snapchat的World LenseAR功能推出時是創新，FaceU，B612這樣的小玩家有了ARKit之後，就可以立馬實現Snapchat的AR功能。（延伸閱讀：如何評價蘋果在 2017 WWDC 上發布的 ARKit？）

此外，值得注意的是，國內BAT在ARKit推出後，紛紛加入搭建AR技術平臺和落地應用。阿里巴巴、百度、騰訊、網易、京東都紛紛開放了自己的AR技術平臺，這些AR技術平臺將幫助開發者、企業更快速地在這些大平臺上實現AR功能。AR能夠真正在落地場景中改變購物、社交和出行。2017年AR的基礎技術和應用生態迅速鋪開。（延伸閱讀：騰訊詳解 QQ-AR 開放平臺，讓全社會參與進來，專訪趙剛 | BAT 之後，京東為何也加入 AR 戰場？）

硬體升級，iPhone X專為AR打造

9月12日，蘋果新品發布會發布了iPhone 8/8 Plus, iPhone X和搭載ARKit的iOS 11以及新的人工智慧仿生晶片A11。

整個發布會，AR佔據了很重要的位置。蘋果營銷副總裁Schiller 稱iPhone X這是「第一款真正為 AR 打造的智慧型手機」。

此前，普通的手機利用一些AR SDK也能實現AR效果，例如去年春晚的AR搶紅包。在AR場景中，攝像頭是AR的入口。Schiller介紹到，新iPhone的攝像頭專門為 AR 而校準，刷新率達到 60fps，全新陀螺儀和加速計，以及準確的動作追蹤。此外，AR算法對GPU、CPU要求非常高，A11仿生晶片讓 iPhone 的 AR 功能可以更好的實現，CPU 可實現較好的追蹤，GPU 能渲染更真實的圖像，以及 ISP 實時光照。

Oglass 蘇波對雷鋒網說：單純從ID（Industrial design）來看，iPhone 8幾乎沒有什麼創新之處。但是有了AR功能的iPhone相當於再一次發明了手機。如同最初，iPhone把功能手機進化為智慧型手機。這一次，智慧型手機又將進化到AR機。

WWDC上ARKit的推出讓大家看到了蘋果在AR技術上的實力，而在此次的新品發布會，蘋果在軟體和硬體兩方面的AR布局更為清晰。很多業內人士相信，蘋果或許會打造出一套新的AR作業系統。（延伸閱讀：蘋果大舉押注AR,或將撬動整個行業？）

ARKit功能簡單，半年來無爆款應用

前面分析的都是硬體、軟體的基礎技術進展，而ARKit給用戶的生活帶來改變還得看內容。發布會上，蘋果展示了四款基於ARKit打造的內容。兩款AR遊戲《The Machines》和《Warhammer 40k：Free Blade》，MLB（美國職棒大聯盟）的《At Bat》，還有一款可以看星星的《Skyguid》。  

（《The Machines》遊戲畫面）

《The Machines》由上海創業團隊Directive Games打造。《The Machines》是一款即時戰略遊戲，可支持兩名玩家在戰場上控制各自的英雄，對抗和消滅對方的基地和防禦塔。這款遊戲在China Joy演示時，一些玩家興奮地圍著桌子跑來跑去。

AR遊戲不僅使得遊戲以3D的方式呈現，最令人著迷的地方就是讓玩家在真實空間中動起來。然而，這依然ARKit能支持的只是放置在2D的平面上的3D遊戲，不是真正的與真實場景相融合的3D。

此後，App Store中的AR應用大幅上升，除了AR遊戲以外，AR小工具，例如AR尺子、AR繪畫等App數量最多。然而到目前為止，AR應用數量高達1000，我們依然沒看到一個能超過《Pokémon GO》的爆款。（延伸閱讀：蘋果第一批AR應用上線，我們幫你試了哪個最好玩！）

體驗過多款ARKit的內容之後，雷鋒網(公眾號：雷鋒網)發現，目前ARKit實現的應用都需要有以下一些基本的操作：用相機掃描一個平面進行定位、將虛擬物體放置於平面、虛擬物體在平面上運動。根據ARKit開發的遊戲讓普通用戶很費解。大多用戶都無法理解在打開AR應用前，為什麼要用相機去掃描平面，而且掃描經常需要20多秒的時間，還時常失敗。

為此，蘋果專門發文解釋ARKit設計過程需要遵從的流程：如何讓用戶快速理解AR操作、AR的人機互動與智慧型手機有何不同等。比起已經有一套統一的規範和標準的手遊，AR遊戲的每一步都還需要開發者去探索，去填坑。(延伸閱讀：蘋果官方給ARKit開發者的22條建議，你家AR應用做到沒？)

在WWDC上，庫克大力讚揚ARKit，他對分析師們說：「這是我們將回顧的重大事件之一，是一個令人驚嘆的開始。」但是在iPhone發布會上，ARKit卻沒有被大力提及。因為其實現在ARKit和ARCore都只是1.0版本。只給開發者提供了三個非常簡單的AR工具：手機的六自由度位置和坐標數據、局部小型的平面、簡單的場景照明。僅僅用這三個工具，你真的無法創造出令人印象深刻的東西。

AR要真的改變遊戲、娛樂、購物等生活場景，需要很強的3D重建能力，也就是說原生AR應用要可以實現數字信息和物理空間或人的交互。例如，當你在桌面放置一個虛擬的水杯，這個水杯能被前面的檯燈遮擋，這樣你會分不清哪些物體是虛擬的，哪些是真實的，有了3D重建能力，這些AR物體還可以長久地停留在真實空間中。只有這樣，我們才能真正實現，虛擬和現實相融合的願景。

此外，AR其實是一種圖像的輸出，而AR要改變人們的生活場景，還需要更多的輸入。這需要與AI的發展相配合。例如，美圖應用將計算機視覺等AI技術與AR技術結合，產生了AR美拍、AR試妝、AR試穿等功能，這些功能將真的改變購物。雷鋒網也了解到，微軟正嘗試將人工智慧聊天機器人微軟小冰與AR相結合，這樣你就會擁有一個有虛擬形象的AI助手。在一些業內人士看來，在未來的人機互動裡，AI是輸入、AR是輸出。

AR要改變大眾的生活，單靠ARKit顯然難以做到。（延伸閱讀：大神揭秘：為什麼ARKit失去了AR雲的支持，就會毫無意義？， 獨家| 阿里機器視覺專家李名楊：AR是AI的一種體現方式）

蘋果AR眼鏡或於2020年上市

2017年，蘋果做AR眼鏡的消息頻出，但是蘋果一直沒有正面回應。

幾年前，蘋果便已經組建團隊，致力於 AR 相關的項目開發。這支團隊由 Mike Rockwell 帶領，工程師已經達到數百人，現在他們進行著一項代號為「T288」的軟硬體項目。該團隊的第一個產品便是 ARKit。顯然，下一步的進展便是AR眼鏡。

關於蘋果為何先推出手機AR，庫克在10月接受《獨立報》採訪中回答到：「AR要理解世界需要大量的技術，目前的技術只能將AR運用於iPhone或iPad之類的先進設備中。如果將AR應用於其他設備上，那麼你永遠不會獲得這樣的商業機會，不會有1500萬個設計者說我想藉助AR釋放我們的設計激情。」

手機AR可以幫助蘋果迅速在AR市場布局，同時，AR眼鏡的技術還需要時間來積累。庫克也說道：「好的視場技術和高質量的顯示器都尚未出現，」他說。像所有產品一樣，蘋果公司只會在保證品質的前提下進軍新的領域。「我們不在乎成為第一，但我們想成為最好，提供一流的用戶體驗，」庫克說：「但現在可以在市場上隨時都會看到的東西並不是令我們滿意的產品，我也不認為絕大多數人會感到滿意。」(延伸閱讀：蘋果CEO蒂姆·庫克：ARKit將和App Store一樣成功）

早在2011年，Google就推出Google Glass消費版本，雖然失敗，但是目前Google Glass企業版本在工業應用上很受歡迎。2012年推出的HoloLens依靠其強大的SLAM技術也已經斬獲不少工業應用合作夥伴。國內外其他小廠也已經發布數款AR眼鏡。蘋果在AR眼鏡上沒有搶到先機，目前似乎只能採取穩妥的布局。

11月彭博社的一篇文章終於讓我們看清楚了蘋果在AR眼鏡上的進展，包括其顯示、晶片、作業系統、應用商店等。最振奮人心的是，彭博社透露蘋果的目標是在2019年儲備好AR眼鏡技術，產品有望最早在2020年發貨。

蘋果做AR眼鏡依然也很蘋果。蘋果正在自己研發 AR 頭顯的晶片。從概念上來說，這款晶片會跟蘋果手錶的晶片一樣，集成度非常高。這樣的晶片能把更多的元器件，比如說圖形處理器、AI 晶片、CPU 等，集中在一小塊區域，耗能也將減少。作業系統方面，蘋果內部將其稱為「rOS」（reality operating system），基於 iOS 系統。如同 Apple TV 的作業系統是 tvOS，Mac 電腦的作業系統是 macOS，Apple Watch 的作業系統是 watchOS 一樣，rOS 將是蘋果 AR 頭顯的作業系統。AR 頭顯也會使用已有的 APP Store，可以像 iPhone、Watch、Apple TV 和 Mac 一樣，用戶能自己下載內容。（延伸閱讀：揭秘蘋果AR眼鏡：獨立晶片、rOS系統，2020年發貨）

蘋果的AR眼鏡令人期待，可惜Magic Leap搶先在2017年底發布了其Magic Leap One創造者版本。這款讓大家等待6年之久的AR眼鏡終於浮出水面。官方介紹Magic Leap One具備數字光場、視覺感知、持久顯示、聲場音效、高性能晶片、下一代交互界面。從Magic Leap One合作的應用我們看到，其AR應用已經開始改變音樂、遊戲、社交等多個領域。Magic Leap的光場顯示和場景理解能力可以說是目前AR技術的前沿，這些技術是否讓庫克滿意，蘋果的AR能超過Magic Leap One嗎？這很值得期待。 （延伸閱讀：耗時6年，總融資近19億美金，外媒《滾石》萬字長文揭秘AR眼鏡 Magic Leap One（上）)

總結

AR/VR被視為是下一代的計算平臺、新的人機互動界面。各大巨頭都在布局VR/AR，在AR上，蘋果並沒有搶佔任何先機。而今年ARKit的推出，著實讓人感到驚豔。憑藉自身閉合的軟體和硬體生產鏈，蘋果讓6億iPhone設備瞬間擁有AR功能，成千上萬開發者利用ARKit可以直接開發AR內容，大眾不用購買任何新的設備就能體驗AR。

ARKit改變了AR基礎技術和AR應用市場的整體格局，刺激了2017年AR的整體發展，使得2017成為AR發展關鍵的一年，也成為蘋果押注AR的關鍵一年。

當AR真正如智慧型手機一般成為我們生活必不可少的一部分，回頭看，2017年會是值得紀念的一年。

雷鋒網原創文章，未經授權禁止轉載。詳情見轉載須知。