Magic Leap第一款AR內容教程,看起來跟ARKit沒什麼兩樣!

2020-12-19 雷鋒網

7月11日,Magic Leap在twitch上進行了第三次直播。雷鋒網編輯看完整個直播發現,這估計是Magic Leap對外公布硬體軟體信息最多的一次!

核心要點如下:

發貨時間:Magic Leap One創造者版本將於這個夏天交付(9月22日前)硬體配置:計算單元Lightpack搭載Nvidia Tegra X2 多核處理器軟體配置:基於Linux作業系統的64位作業系統內容:Magic Kit第一款教程內容Dodge亮相,可同時識別多個平面,放置虛擬內容,創造房間級體驗

槽點:

一個小時的直播,Magic Leap One創造者版本頭顯的佩戴時間不到一分鐘,像個玩具擺設Dodge的演示依然是錄製好的視頻,沒有用頭顯進行實時演示與ARKit的互動設計,看不出大的差別

(Graeme Devine)

4月份,Magic Leap宣布每個月的第一個星期三在twitch上進行直播。由於前兩期直播毫無技術乾貨、產品細節,純談概念畫大餅而被業界嚴重吐槽。

在今天,Magic Leap進行了第三期直播,終於拿出了一點誠意,開始直面硬體核心和軟體操作。

直播一開始,主持人給出了最關鍵的信息,Magic Leap將在這個夏天交付Magic Leap One創造者版本,主持人開玩笑說夏天是正常的夏季時段(6月21-9月22),而不是弗羅裡達州橫跨一年四季的夏天。雷鋒網(公眾號:雷鋒網)編輯扳指頭算了一下,我們最晚還有102天就能看到完整的產品。

直播分了幾個小節,分別介紹了CPU和GPU、開發者社區的動態、全新的內容Dodge。

搭載Nvidia Tegra X2 多核處理器

雷鋒網曾報導,Magic Leap One創造者版本採用了分體式的設計,包含AR眼鏡Lightwear,一個6Dof手柄和一個可以別在腰間的處理器 Lightpack。

Magic Leap一直宣傳空間計算、數字光場等炫酷的AR技術,必定需要強大的晶片計算能力支持。目前,HoloLens為了達到不錯的空間感知和光學顯示效果,幾乎把一個計算機放進了頭顯裡,也造成頭顯重達500多克。Magic Leap採用分體的方式,把計算單元放在Lightpack中,設計成可以別在腰間,一定程度上減輕了頭顯的重量。但是我們此前一直不知道Magic Leap將採用什麼樣的晶片方案。

Magic Leap負責開發人員技術戰略的Alan Kimball解釋說,其計算單元LightPack中採用了 Nvidia Tegra X2,這是一個功能強大的模塊,包含三個處理器:四核ARM A57 CPU,雙核Denver 2 CPU和基於NVIDIA Pascal的GPU,具有256個CUDA核心。他還提到每個內核具有不同的能耗和性能特徵,開發人員可以根據需要在內核之間進行選擇,代碼可以運行在GPU、可以運行在ARM、或者是Denver。

HoloLens當前版本採用的是英特爾的Atom處理器晶片,對比來看,Magic Leap採用的Nvidia Tegra X2性能更強大,但是由於HoloLens還設計了配合Atom使用的HPU(全息圖像處理單元),又增強了其全息顯示的能力。雷鋒網也曾報導,微軟也正在為HoloLens研發專用AI晶片。Magic Leap One的計算能力如何還得看真機效果。

此外,直播還介紹了Magic Leap的底層軟體架構是基於Linux作業系統的64位作業系統,具有統一的內存系統。他們沒有透露該設備將包含多少內存,但暗示沒有人抱怨內存不夠。Magic Leap之前曾承諾過幾個小時的續航時間,具體將取決於所使用的應用程式。

互動設計曝光

從2014年起,Magic Leap就放出了不少展示其AR效果的視頻,有在體育館中濺起水花的大鯊魚、有手心裡的大象、有躲在辦公室桌子腿後面的機器人。這些早期的視頻給人的印象是Magic Leap的AR效果簡直棒呆了,顯示效果十分逼真,還能夠被真實物體遮擋,完全與真實世界相融合。但是,這些物體究竟是如何被放置在現實環境中的呢?

2017年6月,蘋果發布ARKit,定義了AR的基本互動設計:平面識別、運動追蹤和光照估計。

這一次,Magic Leap拿出了第一款給開發者的Demo,我們也終於看到了Magic Leap針對自己的空間計算、數字光場給出的AR互動設計。

Magic Leap首席互動和體驗設計師Colman Bryant介紹了Magic Leap開發者套件的第一個教學內容Dodge,在他看來Dodge代表了Magic Leap上混合現實應用最基本的體驗。

很多人期待著能以Magic Leap頭顯的視角進行現場實時的Demo演示,可惜,被稱為「視頻」公司的Magic Leap這次也還是選擇了錄製好的視頻Demo。Magic Leap的SDK中有視頻錄製的功能,這次的Demo是由Magic Leap的攝像頭錄製,再將AR內容與攝像頭錄製的真實場景相結合。所以我們看到的視頻視角也就是佩戴Magic Leap的人的視角。

從演示來看,MagicLeapOne和蘋果ARKit類似,第一步都是識別房間內的實際表面,支持水平和垂直平面,然後在其之上顯示3D數字對象。

從圖中可以看到,識別平面時會有藍色的網格,然後是更密集的紅色網格 ,當系統判定這是個可用的平面時會變成綠色。

與蘋果ARKit和谷歌ARCore不同的一點是,Magic Leap One可以支持同時識別多個平面地點,使得虛擬內容可以創建在整個房間範圍。

在創建好平面之後,我們看到Dodge會從沙發、地板等不同的點出現,然後,然後向人猛擲石塊,還會砸得地面砰砰作響。由於Magic Leap有3D空間音效,所以即使你眼睛並沒有注視虛擬物體,音效也會指引你去找到虛擬物體出現的方向。Bryant介紹說Dodge這個Demo只是一個「種子」,開發者可以利用Dodge的教學文件,開發出更好玩的遊戲。

Bryant也展示了手勢識別,其手勢和HoloLens唯一的手勢很像,捏住拇指和食指表示點擊。據說Magic Leap的手勢識別SDK還可以跟蹤單個手指和關節,拳頭和其他全手勢,還包括眼動追蹤和頭部追蹤

據了解,要將內容加載到Magic Leap One,可以使用LightPack上的USB-C埠或通過Wi-Fi傳輸文件。由於多個Magic Leap Ones可以加入相同的Wi-Fi網絡,開發人員表示多人遊戲和共享混合現實環境是可能的,而且很有趣。

小結

從Dodge展示出的互動設計來看,Magic Leap與ARKit沒有太大差別,創新之處在於Magic Leap可以同時支持多個平面識別,創建房間級體驗,但是要掃描多個地點也會用用戶感到操作困難吧。雖然公布了硬體和軟體的相關信息,但是Magic Leap最主要的空間計算、數字光場等最核心的技術依然是一個謎,而正是這些技術決定了Magic Leap是否能值得接近10億美元的估值。雷鋒網曾報導,從此前公布的專利文件看來,Magic Leap並沒有採用其宣傳多年的光纖維掃描,而是採用了多層光波導的方式。HoloLens的眼鏡採用的就是全息光波導,而有傳言稱蘋果也將生產光波導方案的眼鏡,雷鋒網編輯不禁為Magic Leap的未來感到擔憂。最後提一下,Magic Leap和AT&T今天宣布,其將成為Magic Leap One設備面向美國消費者的獨家線下分銷商,並且正在向該公司投入未指定的金額。AT&T聲明開發者將比消費者更先拿到設備, AT&T商店將在美國五個城市展開Magic Leap的銷售。

相關焦點

  • AR影視短片《The Last Light》登陸Magic Leap
    但令人感到意外的是,這款體驗於日前獲得了官方的正式發行。在《The Last Light》的故事中,主角凱婭在祖母仙逝後回到家鄉,而在她探索小時候的家園時,舊時的回憶慢慢浮現在眼前。當啟動體驗後,用戶將能在眼前的漂浮平臺見證這一切的發生。
  • Magic Leap的「虛擬夢境」,終於夢碎了
    最近,Magic Leap 終於發布了它至今的第一,也是唯一一款混合現實眼鏡產品 Magic Leap One(以下簡稱 ML1)。http://palmerluckey.com/magic-leap-is-a-tragic-heap/帕爾默·拉奇是誰?
  • 抖音最多人用的蘋果Videoleap視頻剪輯教程!
    手機技巧 | 軟體應用 | 實用乾貨 | 視頻教程 加星標 不斷電手機剪輯的福利來了,這款神軟用蘋果的基本應該都知道!!抖音最多人用的視頻剪輯軟體!各位想學習手機小視頻製作的朋友們大家好,這套課程交大家如何用蘋果手機去製作小視頻,這套課程主要講解蘋果手機端的一個視頻製作軟體,這款軟體簡直就是為蘋果系統手機量身定做的,本軟體的優點就是他的蒙板和調色功能。了解如何輕鬆地製作富有創意的視頻.
  • Magic Leap展示跨平臺AR應用《Pancake Pals》
    《Pancake Pals》是一款翻煎餅遊戲,裡面充滿了愚蠢的煎餅,神奇的平底鍋,以及滿滿的愛與彩虹。這是基於Magicverse技術構建的首批多用戶體驗之一。玩家可以與朋友翻薄煎餅,並製作美味的食品,從而獲得高分。將薄煎餅放在平底鍋的背面,或者將其高高拋向空中,你將能獲得更大的獎勵。保持你的翻轉連續性,並為最終翻轉所獲得的獎勵積分做好準備。
  • 王學兵曬出自己的豪宅,兒童房裝修很有童趣,跟遊樂園沒什麼兩樣
    王學兵曬出自己的豪宅,兒童房裝修很有童趣,跟遊樂園沒什麼兩樣王學兵在我們心目中也是老戲骨了,一直以來都是一個很正能量的人,《不要和陌生人說話》這部劇中有精彩的演繹,而且經常飾演警察這樣的角色顯得演技爆棚。
  • AR電影體驗《The Last Light》已登陸Magic Leap!免費!
    前Magic leap員工Anastasia Devana(德瓦納安娜·斯塔西亞)在LinkedIn上表示:「從本質上來講,這是一個短片,更適合在一個安靜的地方獨自體驗,時長大約35-40分鐘。」
  • Magic Leap的Care Center資源中心公布了更多用法、安全使用、銷售...
    文章相關引用及參考:magic-leap.realityMagic Leap開設了一個全新的Care Center資源頁面(映維網 2018年08月10日)隨著Magic Leap One的正式上市,用戶終於可以開始探索這款設備的工作原理
  • Magic Leap以色列負責人被裁,京東推出AR試鞋玩法|magic leap|虛擬...
    AR|NexTech發布3D掃描應用AR/VR解決方案商NexTech AR推出一款名為ARtize360的3D掃描應用,據悉該應用可幫助你通過手機進行物體的3D掃描,大大降低3D和AR內容創作門檻和過程。
  • Magic Leap請了8家媒體去體驗,他們是怎麼評價這款AR眼鏡的?
    同時公布了Magic Leap One的硬體規格以及5款首發應用。但跟其他媒體一樣,CNBC將Magic Leap One描述成尚未迎來自己的黃金時期。我可以想像,我們離為普羅大眾準備好的Magic Leap尚有多年距離。
  • 其實跟防空洞沒什麼兩樣
    日本是當今世界上唯一一個受到原子彈轟炸過的國家,民眾傷亡慘重,而第一時間跑到防空洞裡日本民眾才得以僥倖活了下來其實完全沒必要擔心,國家修建的地鐵站在戰爭中既安全又可靠,甚至跟防空洞沒什麼兩樣。
  • Magic Leap One將迎首款大型AR偵探遊戲
    和《Acron: Attack of the Squirrels》的Resolution Games日前為Magic Leap One用戶發布了一款AR偵探遊戲《Glimt: The Vanishing at the Grand Starlight Hotel》。
  • 昔日教練:杜蘭特看起來跟以前沒什麼差別
    昔日教練:杜蘭特看起來跟以前沒什麼差別PE賽事勇士主教練史蒂夫-科爾在接受採訪時,談到了明日將客場挑戰籃網之事。最重要的是我看到凱文跟以前沒有什麼差別。」作為昔日的主教練科爾對於杜蘭特非常了解,畢竟他們曾經一起聯手影響了總冠軍。不過如今再一見面就是對手的角色了,我相信科爾肯定會對勇士隊不值,非常有針對性的防守戰術來抵擋杜蘭特的攻擊波。同樣杜蘭特對於勇士隊也非常了解,尤其是他們的核心球員庫裡更是非常要好的朋友。明天的比賽將是兩支球隊成色最好的檢驗,畢竟兩支球隊上個賽季表現都不是非常的理想。
  • Magic Leap最終證明:AR消費級眼鏡是個偽命題
    作者| Decode自從 2017 年底發布第一款產品後,Magic Leap 這家公司的運程就一直不太好。先是產品銷售受阻,接著核心高管離職,並且遭遇財務問題。新型冠狀病毒疫情爆發後,Magic Leap 不得不調整銷售策略,暫時放棄消費者業務,轉向企業市場。
  • Magic Leap_什麼是Magic Leap_Magic Leap的原理_遊俠VR
    2014年10月,Magic Leap獲得由谷歌領投的5.42億美元B輪融資,高通資本、KKR、Vulcan Capital、KPCB、Andreessen Horowitz和Obvious Ventures等大牌投資機構跟投。與此同時,谷歌新任CEO桑達爾·皮猜(Sundar Pinchai)也出任了該公司董事。
  • 蘋果arkit3.5有什麼新功能 新AR框架更新特性功能介紹
    蘋果arkit3.5有什麼新功能 新AR框架更新特性功能介紹  蘋果今天凌晨還發布了 ARKit 3.5,這一新版的AR框架可以使開發者在新 iPad Pro 中使用新的 LiDAR(雷射雷達)掃描儀。據悉,最新的 ARKit 版本具有「幾何場景」,「即時 AR」以及改進的「運動捕捉」和「人物遮擋」功能。
  • 抖音變身火影忍者教程
    很多小夥伴喜歡火影,最近抖音裡也有非常流行火影的拍攝,很多網友都拍攝出了火影動作類型的照片,那麼這個教程是怎麼拍的呢,其實這個教程還算是簡單的吧,下面就和18183小編一起來看下具體的教程吧。很多小夥伴喜歡火影,最近抖音裡也有非常流行火影的拍攝,很多網友都拍攝出了火影動作類型的照片,那麼這個教程是怎麼拍的呢,其實這個教程還算是簡單的吧,下面就和18183小編一起來看下具體的教程吧。
  • 「喜波熱,跟在家沒什麼兩樣」——記堰塞湖險情下的安置點
    「喜波熱(舒服的意思),跟在家沒什麼兩樣。」帳篷裡的一位躺著休息的阿婆笑盈盈地說到。11月3日下午,金沙江堰塞湖原址再次垮塌,造成險情,巴塘縣委、縣政府迅速採取行動,採取投親靠友,集中安置等方式轉移8鄉(鎮)16村共計6173人。400頂棉帳篷、300床棉被、2595套棉衣棉被、25700斤米麵等生活物資已全部送達一線,使集中安置的群眾生活有了保障。
  • Magic Leap以色列負責人被裁,京東推出AR試鞋玩法
    AR/VR解決方案商NexTech AR推出一款名為ARtize360的3D掃描應用,據悉該應用可幫助你通過手機進行物體的3D掃描,大大降低3D和AR內容創作門檻和過程。
  • 抖音拍視頻怎麼卡點 卡點音樂視頻製作教程
    下面小編為您帶來抖音卡點音樂教程。  抖音卡點視頻怎麼做?  1.拍攝素材  首先大家要拍攝合適的長視頻作為素材方便後期剪輯,可以在逛街的時候拍攝一個角度比較好的,或者在列車上的時候拍攝外面的場景,總是越長越好,最好是幾分鐘,這樣在後期剪輯中會有更好的效果。比如上電梯、下電梯就是不錯的素材,很多抖音上的玩家都是這樣拍攝的。
  • Web安全:magic_quotes_runtime的安全特性
    一次性付費進群,長期免費索取教程