谷歌AR新研究:只需陀螺儀的即時運動追蹤

2020-12-05 Yivian虛擬實境

文章相關引用及參考:google

谷歌的即時運動追蹤方法不需要校準,可以支持任何搭配陀螺儀的安卓設備。

映維網 2018年02月07日)谷歌於2017年夏天推出了安卓版Motion Stills,為一大批安卓手機帶來了優秀的視頻捕捉與觀影體驗。谷歌隨後進一步優化了Motion Stills,使其能夠支持Pixel 2中最新的運動圖片功能。

今天,谷歌正式為安卓版Motion Stills帶來了AR模式。藉助這一最新的AR模式,用戶只需輕觸取景器即可在靜態或移動水平表面(例如桌子和地板等等)上放置有趣的虛擬3D對象放置有趣的虛擬3D對象,使其能夠與動態的真實世界環境無縫對接。你同時可以錄製並分享為GIF和視頻格式。

AR模式由即時運動追蹤,一個基於驅動Motion Stills iOS中Motion Text的技術的6自由度追蹤系統,以及YouTube上的隱私模糊提供支持,可以精確追蹤靜態對象和移動對象。谷歌已經對這項技術進行了優化與增強,從而幫助任何搭載陀螺儀的安卓設備運行有趣的AR體驗。

當你輕觸取景器時,Motion Stills AR會把3D虛擬物體「粘到」相應位置,使其看起來像是真實世界場景的一部分。通過假定追蹤表面平行於地平面,並且通過設備的加速度計傳感器來提供智慧型手機相對於地平面的初始定向,系統可以追蹤相機的6個自由度。這可以幫助我們準確地變換和渲染場景中的虛擬對象。

當智慧型手機大致平穩時,加速度計傳感器會提供因地球重力而產生的加速度。對於水平面來說,重力矢量平行於追蹤平面的法線,並且可以精確地提供智慧型手機的初始定向。

谷歌表示:「即時運動追蹤的核心理念是分離相機的平移估計和旋轉估計,並將兩者視為獨立的優化問題。首先,我們只根據相機的視覺信號來確定3D相機的平移。為此,我們觀察目標區域的明顯2D平移和跨幀的相對比例。一個簡單的針孔攝像頭模型可以把圖像平面中方框的平移和縮放與相機的最終3D平移相關聯。

谷歌表示,系統可以通過圖像平面中方框的平移和大小(相對比例)變化來確定兩個相機位置(C1和C2)之間的3D平移。但由於相機模型並不假定相機透鏡的焦距,我們無法知曉追蹤平面的真實距離/深度。

為了解決這個問題,谷歌為現有的追蹤器(用於Motion Text的追蹤器)增加了比例估計,並在相機的視場之外追加了區域追蹤。當靠近追蹤表面時,虛擬內容可以精確地縮放,而這與真實世界對象的感知一致。當你在目標區域的視場之外平移時,虛擬對象將重新出現在大致相同的位置。

在這之後,系統將通過智慧型手機的內置陀螺儀來獲取設備的3D旋轉(縱搖,橫搖和艏搖)。結合估計的3D平移與3D旋轉使得系統能夠在取景器中正確渲染虛擬內容。由於系統單獨處理旋轉和平臺,谷歌的即時運動追蹤方法不需要校準,可以支持任何搭配陀螺儀的安卓設備。

谷歌表示,他們十分興奮為安卓設備上的Motion Stills帶來這一最新的模式,並且希望用戶會喜歡。最新版本的Motion Stills請映維網原文點擊這裡下載。

相關焦點

  • 谷歌推僅陀螺儀便可實現的AR應用
    【PConline 資訊】聽說谷歌推出的ARCore非常厲害,於是你想要用你的安卓手機來嘗鮮AR?首先一個非常嚴重的問題就擺在了你的面前:你的安卓手機更新了Android 8.0了嗎?老鐵扎心了!好消息是,谷歌為這些安卓老版本機型推出了能玩AR的福利。谷歌宣布為Motion Stills 應用安卓版本新增了AR貼紙功能。這款Motion Stills應用的AR貼紙功能無須調用ARCore內核,僅僅藉助現有設備的加速計和陀螺儀,就可以根據算法實現非常穩定的AR表面跟蹤,能夠把3D模型(例如雞、機器人以及恐龍)固定在現實環境當中。
  • 2020谷歌開發者大會:AR軟體工程總監介紹ARCore最新動態
    Google 開發者大會 (Google Developer Summit) 是谷歌面向開發者展示最新產品和平臺的年度盛會。2020 Google 開發者大會於 11 月 16 日 至 21 日舉行,這是谷歌首次以全線上大會的形式與中國開發者相聚。
  • 谷歌表示新的AI模型可以實現「近乎即時」的天氣預報
    谷歌是最新涉足的公司,本周在博客中分享了一項新研究,稱可以實現「近乎即時」的天氣預報。這項工作尚處於早期階段,尚未集成到任何商業系統中,但早期結果似乎很有希望。在未經同行評議的論文中,谷歌的研究人員描述了他們如何能夠以僅數分鐘的計算,以1公裡的解析度提前六小時生成準確的降雨預測。
  • 谷歌詳細介紹MediaPipe對象檢測與追蹤系統
    自那以後,谷歌陸續發布了一系列的ML管道示例。日前,谷歌撰文介紹了又一個MediaPipe示例:Object Detection and Tracking。谷歌首次描述了新發布的Box Tracking解決方案,並解釋了它是如何與Object Detection結合併提供一個對象檢測與追蹤系統。
  • 谷歌AI模型在即時預報降水的使用
    打開APP 谷歌AI模型在即時預報降水的使用 cnBeta 發表於 2020-01-15 15:40:26 據外媒報導,幾周前,谷歌人工智慧(AI)使用了一個機器學習模型來改進對乳腺癌的篩查工作。
  • 大疆無人機:MEMS陀螺儀技術完美結合
    率先為汽車市場推出了 MEMS加速儀和陀螺儀,並且成為了輪胎壓力傳感器的領先供應商。1月21日,挪威Sensonor公司官網也對外發布公告稱,Sensonor和北鬥星 通已經達成協議,將通過緊密合作開展慣性導航傳感器在中國市場的應用。  日本EPSON公司:2013年11月開始發售新XV4001系列高精度陀螺儀傳感器產品樣品。
  • 谷歌研發新AI模型:可以實現即時天氣預報 預測未來六小時天氣
    近日,據外媒報導,Google AI發布一項新研究,稱可以「近乎即時」地預報天氣。谷歌的研究人員描述了如何能夠以僅數分鐘的計算,以1公裡的解析度提前六小時生成準確的降雨預測。
  • 受昆蟲啟發的運動感應——研究人員創造了小型機械陀螺儀
    橡樹嶺國家實驗室(Oak Ridge National Laboratory)和國家可再生能源實驗室(National Renewable Energy Laboratory)的研究人員從飛行昆蟲中獲得靈感
  • 大疆Phantom 3無人機發布 陀螺儀技術功不可沒
    率先為汽車市場推出了MEMS加速儀和陀螺儀,並且成為了輪胎壓力傳感器的領先供應商。1月21日,挪威Sensonor公司官網也對外發布公告稱,Sensonor和北鬥星通已經達成協議,將通過緊密合作開展慣性導航傳感器在中國市場的應用。日本EPSON公司:2013年11月開始發售新XV4001系列高精度陀螺儀傳感器產品樣品。
  • 通過引入 ML,谷歌 ARCore 實時自拍 AR 的逼真效果更進一步
    不到一個月前,谷歌正式推出 ARCore 1.7 版本,為其添加了前置攝像頭 AR 自拍能力以及動畫效果支持;而日前,谷歌又為其引入了機器學習技術,使其實時自拍 AR 的逼真效果更進一步,該技術相關的文章發布在谷歌 AI 的官方博客上,雷鋒網(公眾號:雷鋒網) AI 科技評論編譯如下。增強現實(AR)通過將數字內容與信息疊加到物質世界的真實場景中,來讓人類實現超越現實的感官體驗。例
  • 谷歌上線新網站以追蹤社交距離相關信息
    來源:新浪科技新浪科技訊 北京時間4月4日早間消息,谷歌上線名為「COVID-19 Community Mobility Reports」的新網站,利用從谷歌產品和服務用戶那裡收集的匿名定位數據來顯示不同地點的「社交距離」(social distancing
  • 「谷歌」一下癌症診斷新利器,AI顯微鏡開掛,AR瞬間識別癌細胞
    更重要的是,只需使用低成本、現成的組件,就可以將ARM安裝到普通的光學顯微鏡中,無需對數字系統進行全面升級就可使用。 谷歌推出名為DeepVariant的程序,幫助基因組數據解讀谷歌推出一款名為DeepVariant的程序,可以通過深度學習來拼湊一個人的基因組並且更準確地識別出DNA序列中的突變。
  • 利用加速度計和陀螺儀測量車輛運動
    然而當進行傾斜測量時,我們只需要得到重力加速度;當進行車輛動力測量時,卻又只想得到運動加速度。有運動加速度時,傾斜傳感器將得到一個不準確的傾角。也就是說,在車輛傾斜時只通過加速度計將無法得到準確的傾角。通過測量繞車輛重心的旋轉,陀螺儀有助於糾正車倆向前傾斜帶來的不利影響。不幸的是,陀螺儀有其自身的缺陷。
  • 雙軸微機械陀螺儀的移動機器人運動檢測系統
    目前,對移動機器人運動控制研究多集中在前向通道的算法研究,有關狀態信息檢測、傳輸反饋環節的研究相對較少。 雙軸微機械陀螺儀傳感器可以測量機器人的俯仰與翻轉,但微機械陀螺儀有隨機漂移性,無法直接應用,需要對輸出值作算法處理。參考文獻中的微機械陀螺儀隨機漂移的算法,可以在一定程度上解決漂移方面的問題,但仍有改進的空間,濾波性能有待進一步優化提高。
  • 科學家打造高科技眼罩,可追蹤睡眠中佩戴者的眼球運動情況
    據外媒New Atlas報導,在追蹤睡眠中的人的眼球運動時,通常必須將硬接線的電極貼在他們的臉上。然而,很快一個不顯眼的柔性眼罩就能完成這項工作--同時還能測量他們的心率。傳統上,一種被稱為電圖的技術被用來追蹤夜間眼球運動。它涉及將成對的電極粘在病人眼睛上方和下方或兩側的皮膚上。
  • 紐約司法部長致信蘋果谷歌:望屏蔽非官方新冠接觸者追蹤應用
    據外媒報導,紐約司法部長希望蘋果和谷歌對除公共衛生機構開發的新冠病毒接觸者追蹤應用以外的所有該類型應用進行限制。紐約司法部長Letitia James致信蘋果和谷歌表達了她對非官方新冠病毒追蹤應用數量的持續擔憂,這些應用現在在App Store和Google Play中都能找到。在致蘋果高級副總裁兼總法律顧問Katherine L. Adams的中信函,James對該公司努力解決隱私和執行方面的擔憂表示歡迎。
  • 糾纏光子陀螺儀克服了光纖陀螺儀經典極限!
    光纖陀螺儀測量飛機和其他運動物體的旋轉和方向,在使用普通的經典光時,其精度受到固有的限制。在一項新的研究中,物理學家首次通過實驗證明,使用糾纏光子克服了這個經典極限,即所謂的「發射噪聲極限」,並達到了經典光無法達到的精確度。
  • 陀螺儀傳感器工作原理_陀螺儀傳感器的應用
    陀螺儀的原理就是,一個旋轉物體的旋轉軸所指的方向在不受外力影響時,是不會改變的。人們根據這個道理,用它來保持方向。然後用多種方法讀取軸所指示的方向,並自動將數據信號傳給控制系統。我們騎自行車其實也是利用了這個原理。輪子轉得越快越不容易倒,因為車軸有一股保持水平的力量。現代陀螺儀可以精確地確定運動物體的方位的儀器,它在現代航空,航海,航天和國防工業中廣泛使用的一種慣性導航儀器。
  • 詳解冷門但很重要的手機陀螺儀
    上述傳感器大多從命名中就能知曉大概作用,只有陀螺儀較難讓人理解,但它幾乎又是當下手機的標配,那陀螺儀到底是什麼玩意兒呢?而陀螺儀就是為了幫助了計算機重構空間上的動作模型。  陀螺儀的前世今生  陀螺儀由1850年法國物理學家萊昂·傅科在研究地球自傳中獲得靈感而發明出來的,類似像是把一個高速旋轉的陀螺放到一個萬向支架上,靠陀螺的方向來計算角速度,和現在小巧的晶片造型大相逕庭。
  • 陀螺儀未來有哪些新應用?
    陀螺儀是一種既古老而又很有生命力的儀器,從第一臺真正實用的陀螺儀器問世以來已有大半個世紀,但直到現在,陀螺儀仍在吸引著人們對它進行研究,這是由於它本身具有的特性所決定的。陀螺儀最主要的基本特性是它的穩定性和進動性。人們從兒童玩的地陀螺中早就發現高速旋轉的陀螺可以豎直不倒而保持與地面垂直,這就反映了陀螺的穩定性。