認識動作捕捉系統 淺談三種主流解決方案

2021-01-08 17173遊戲網

2016年,全球範圍內VR商業化、普及化的浪潮正在向我們走來。VR是一場交互方式的新革命,人們正在實現由界面到空間的交互方式變遷,這樣的交互極其強調沉浸感,而用戶想要獲得完全的沉浸感,真正「進入」虛擬世界,動作捕捉系統是必須的,可以說動作捕捉技術是VR產業隱形鑰匙。

目前動作捕捉系統有慣性式和光學式兩大主流技術路線,而光學式又分為標定和非標定兩種。那麼我們可以將動作捕捉系統分為以下三大主類:基於計算機視覺的動作捕捉系統(光學式非標定)、基於馬克點的光學動作捕捉系統(光學式標定)和基於慣性傳感器的動作捕捉系統(慣性式)。接下來我們對這三種形式的動作捕捉系統進行簡單的解析。

1. 基於計算機視覺的動作捕捉系統

該類動捕系統比較有代表性的產品分別有捕捉身體動作的Kinect,捕捉手勢的Leap Motion和識別表情及手勢的RealSense實感。

該類動捕系統基於計算機視覺原理,由多個高速相機從不同角度對目標特徵點的監視和跟蹤來進行動作捕捉的技術。理論上對於空間中的任意一個點,只要它能同時為兩部相機所見,就可以確定這一時刻該點在空間中的位置。當相機以足夠高的速率連續拍攝時,從圖像序列中就可以得到該點的運動軌跡。這類系統採集傳感器通常都是光學相機,基於二維圖像特徵或三維形狀特徵提取的關節信息作為探測目標。

基於計算機視覺的動作捕捉系統進行人體動作捕捉和識別,可以利用少量的攝像機對監測區域的多目標進行監控,精度較高;同時,被監測對象不需要穿戴任何設備,約束性小。

然而,採用視覺進行人體姿態捕捉會受到外界環境很大的影響,比如光照條件、背景、遮擋物和攝像機質量等,在火災現場、礦井內等非可視環境中該方法則完全失效。另外,由於視覺域的限制,使用者的運動空間被限制在攝像機的視覺範圍內,降低了實用性。

2. 基於馬克點的光學動作捕捉系統

具有代表性的是美國的Motion Analysis。

該類系統的原理是在運動物體關鍵部位(如人體的關節處等)粘貼Marker點,多個動作捕捉相機從不同角度實時探測Marker點,數據實時傳輸至數據處理工作站,根據三角測量原理精確額計算Marker點的空間坐標,再從生物運動學原理出發解算出骨骼的6自由度運動。根據標記點發光技術不同還分為主動式和被動式光學動作捕捉系統。

基於馬克點的光學動作捕捉系統採集的信號量大,空間解算算法複雜,其實時性與數據處理單元的運算速度和解算算法的複雜度有關。且該系統在捕捉對象運動時,肢體會遮擋標記點,另外對光學裝置的標定工作程序複雜,這些因素都導致精度變低,價格也相對昂貴。

基於馬克點的光學動作捕捉系統可以實現同時捕捉多目標。但在捕捉多目標時,目標間若產生遮擋,將影響捕捉系統精度甚至會丟失捕捉目標。

3. 基於慣性傳感器的動作捕捉系統

代表性的產品有諾亦騰開發的Perception Neuron。

基於慣性傳感器的動捕系統需要在身體的重要節點佩戴集成加速度計,陀螺儀和磁力計等慣性傳感器設備,然後通過算法實現動作的捕捉。該系統由慣性器件和數據處理單元組成,數據處理單元利用慣性器件採集到的運動學信息,通過慣性導航原理即可完成運動目標的姿態角度測量。

基於慣性傳感器的動捕系統採集到的信號量少,便於實時完成姿態跟蹤任務,解算得到的姿態信息範圍大、靈敏度高、動態性能好,且慣性傳感器體積小、便於佩戴、價格低廉。相比於上面提到的兩種動作捕捉系統,基於慣性傳感器的動作捕捉系統不會受到光照、背景等外界環境的幹擾,又克服了攝像機監測區域受限的缺點,並可以實現多目標捕捉。

但是由於測量噪聲和遊走誤差等因素的影響,慣性傳感器無法長時間地對人體姿態進行精確的跟蹤。

除了慣性式和光學式這兩條主線外,還有機械電動式、聲學式、電磁式等形式的動作捕捉系統。

來源:yivian

【來源:】

相關焦點

  • 動作捕捉面部表情系統方案
    只有真實、流暢的肢體動作配上逼真、生動的面部表情,二者有機結合,才能呈現出更完美的虛擬角色,實現現代角色動畫製作的最高水準。在當今角色動畫發展的主流趨勢下,搭載一套面部表情捕捉系統配合動作捕捉系統使用,從而製作出一個面部表情與肢體動作協調一致、生動、完整的高水準三維角色是十分必要和有益的。
  • 動作捕捉系統發展與應用
    動作捕捉將演員的運動傳遞給數字角色。使用跟蹤攝像機(有無跟蹤點均可)的系統可稱為「光學動作捕捉」,而基於測量慣性和機械運動的系統則是「非光學動作捕捉」。後者的一個例子是XSens MVN慣性動作捕捉服,Seth Rogan藉此表演《保羅》中的外星人。最近又出現了一些新技術,例如Leap Motion的手指跟蹤深度攝像機系統和MYO的腕帶,可以識別手臂和手腕的肌肉活動。
  • VR利器慣性動作捕捉系統原理及優缺點解析
    目前動作捕捉系統有慣性式和光學式兩大主流技術路線,慣性式雖然後於光學式出現,但以其超低廉成本和簡便成熟的處理流程,以及完全實時的數據計算和回傳機制,成為了更加炙手可熱的技術。目前國際上最富代表性的產品是荷蘭Xsens公司研發的Xsens MVN慣性式動作捕捉系統以及美國Innalabs公司研發的3DSuit慣性式動作捕捉系統,國內則有諾亦騰、國承萬通等公司。  那麼慣性式動作捕捉系統是如何正確運用在虛擬實境中的呢?本文將對慣性動捕的工作原理、優勢,及其存在的缺點進行解析,希望能與業內人士共同探討。
  • VR裡的慣性式動作捕捉系統究竟是什麼?
    VR是一場交互方式的新革命,人們正在實現由界面到空間的交互方式變遷,這樣的交互極其強調沉浸感,而用戶想要獲得完全的沉浸感,真正「進入」虛擬世界,動作捕捉系統是必須的,可以說動作捕捉技術是VR產業隱形鑰匙。 目前動作捕捉系統有慣性式和光學式兩大主流技術路線,慣性式雖然後於光學式出現,但以其超低廉成本和簡便成熟的處理流程,以及完全實時的數據計算和回傳機制,成為了更加炙手可熱的技術。
  • 科普——光學動作捕捉系統到底有何作用?
    光學動作捕捉系統依靠一整套精密而複雜的光學攝像頭來實現,它通過計算機視覺原理,由多個高速攝像機從不同角度對目標特徵點進行跟蹤,以完成全身的動作的捕捉。光學動作捕捉系統是一種用於準確測量物體(剛體)在室內三維空間運動信息的設備。具有高精度的室內定位能力,能夠給室內小車、無人機、機器人、機械手臂等智能體提供高精度的空間位置信息。
  • 淺談創新的毫米波交通雷達監測解決方案
    打開APP 淺談創新的毫米波交通雷達監測解決方案 lct19820824 發表於 2021-01-14 17:05:53 創新的毫米波交通雷達監測解決方案
  • 一款基於傳感器的動作捕捉系統
    打開APP 一款基於傳感器的動作捕捉系統 李倩 發表於 2018-09-21 09:06:19 Rokoko製作了一個SmartSuit
  • 不同原理動作捕捉類型與應用現狀
    光學動作捕捉系統對人體動作進行捕捉慣性動作捕捉則是採用慣性導航傳感器AHRS(航姿參考系統)、IMU(慣性測量單元慣性動作捕捉需要各類無線控制項,電池組,傳感器等一些配件。類似一個整裝衣服穿在身上,通過各個部位的傳感器來捕捉人體或物體的數據。機械式動作捕捉系統依靠機械裝置來跟蹤和測量運動軌跡。典型的系統由多個關節和剛性連杆組成,在可轉動的關節中裝有角度傳感器,可以測得關節轉動角度的變化情況。
  • 光學動作捕捉系統是什麼?它能在自動駕駛、無人機、機器人中起什麼...
    在智能體算法層面,動作捕捉是自動駕駛、無人機、機器人、安防等涉及電子運動學中最重要的技術和算法,而光學動作捕捉處於這門算法學科的最前端。那麼光學動作捕捉系統到底能做哪些事情呢?gwMednc本文由柒DoF原創發表在EDN電子技術設計,通過通俗易懂的方式介紹了光學動作捕捉系統的原理、應用場景和基本算法等。
  • 動作捕捉系統在裝配機器人(即機械臂)方向中的應用
    對於哈爾濱工業大學深圳機電工程與自動化專業的研究團隊,演示編程(PbD)是解決上述問題的最佳方法。什麼是演示編程?演示編程是由機器人系統從人的操作演示中提取理解有效信息,進而將該信息轉化為機器人的程序和參數,使機器人完成相應操作。由於3C組裝過程的組裝動作具有工作空間相對較小,精度高,運動複雜的特點,此外,3C裝配線上的大多數工人都是非專業操作員,他們對工業機器人知之甚少。
  • Perception Neuron系統,讓動作捕捉技術不再高冷
    動作捕捉技術的出現,大大豐富了動畫、遊戲等的視覺效果。特別是在《阿凡達》等眾多電影中的應用,更是帶來了酷炫的視覺狂潮。無論是細微的面部表情,還是複雜的肢體動作,都能表現的淋漓盡致。不過,儘管有這些震撼效果的誘惑,但面對每套設備動輒上百萬的費用,大多的開發者也只能望而興嘆。
  • 慣性動作捕捉系統FOHEART·X全新亮相
    【編者按】孚心科技今日推出全新慣性動作捕捉系統FOHEART·X全新亮相的動捕">慣性動捕FOHEART·X硬體具有以下幾大特性:·支持跑動 跳躍·高 精 度 孚心科技今日推出全新慣性動作捕捉系統FOHEART·X全新亮相的動捕">慣性動捕FOHEART
  • 新式無痕動作捕捉系統:無需穿特製衣服
    Organic Motion今天發布了新一代的動作捕捉系統「OpenStage」來獲取人類在運動中精準的三維數字表現。這項新技術將會創建一個多人實時表現的精確的數字克隆,可在遊戲和電腦動畫中使用曾經演員需要穿著黑色的帶白球的衣服這樣相機才好抓拍到他們在舞臺上的動作,而有了無痕跡動作捕捉之後,演員們不需要再穿著那些該死的衣服。
  • 淺談802.11ac解決方案的現在與未來
    很多初始的802.11ac網絡解決方案都以3x3進行,以提供高達1.3Gbps的傳輸帶寬。  通過生態系統推動802.11ac解決方案  當前整個業界已有不少晶片廠商積極投入802.11ac相關技術的開發,部分腳步較快的原始設備製造商(OEM)或原始品牌製造商(OBM)已經開始測試開發中的相關產品。
  • 天美是如何將動作捕捉運用到遊戲中的?
    光學動作捕捉發展時間比較久,已經廣泛應用於電影行業,達到了非常高的精度。而慣性動作捕捉發展還處在比較早期的階段。目前慣性動作捕捉主要的劣勢在於,推算誤差會被積累,捕捉一定時間後容易出現動作姿態偏斜,同時它的優勢是比光學動作捕捉系統便宜,對捕捉場地要求低。效果上相對可以信任的慣性動作捕捉系統是Xsens。
  • 寬動態範圍的高端電流檢測的三種解決方案(3)
    寬動態範圍的高端電流檢測的三種解決方案(3) 佚名 發表於 2017-02-10 07:50:11 在電機控制、電磁閥控制、通信基礎設施和電源管理等諸多應 用中,電流檢測是精密閉環控制所必需的關鍵功能。
  • 國產作業系統麒麟——文檔列印 解決方案
    麒麟軟體推出的「麒麟雲列印」是一套創新的印表機利舊解決方案,可以在不改變用戶現有使用習慣的前提下實現對存量印表機充分利舊。「麒麟雲列印」方案由客戶端和服務端兩部分組成,不改變用戶當前使用印表機的習慣,只需在原有的Windows系統上安裝雲列印服務端軟體,在國產終端上安裝「麒麟雲列印」客戶端軟體,國產終端即可有效使用原Windows桌面系統上接入的印表機。
  • OmniVision和富瀚聯合發布汽車駕艙監控系統,推出RGB-IR解決方案
    打開APP OmniVision和富瀚聯合發布汽車駕艙監控系統,推出RGB-IR解決方案 廠商供稿 發表於 2019-06-11 09:48:28
  • 《猩球崛起3》上映 揭秘影片動作捕捉拍攝奧秘
    採寫/新京報記者 周慧曉婉  歷史  第一次動作捕捉出現在27年前  上世紀70年代,心理學家詹森提出了動作捕捉技術,起初這項技術運用在醫療事業,後來進入了影視領域。簡單來說,就是把真人表演和計算機技術結合起來,藉助技術把表演者的動作表情記錄下來,然後將其作為電腦中虛擬角色的運動依據,讓虛擬角色的動作和表情都能像真人一般自然逼真。
  • 從咕嚕到隔空取物 動作捕捉技術讓遊戲超乎想像
    安迪-瑟金斯真人出鏡扮演尤利西斯-克勞,有望引出「黑豹」漫威宇宙浩瀚,不認識尤利西斯-克勞不足為奇。我們不妨一起走進動作捕捉技術的世界,來看看它到底是如何做到以假亂真的吧!圖為《阿凡達》中的動作捕捉拍攝和最終效果對比那麼到底什麼是動作捕捉技術呢?