把VR 控制器變成魔法棒,AirSig 讓玩家定義交互姿勢

2021-01-19 雷鋒網

不久前 HTC Vive 的開發者大會上，官方宣布推出 Vive Wave 移動開放平臺，有一項功能是可接入各式各樣的控制器，現場 PPT 上我們能看到，有如 Finch、Ximmerse 的 6 DoF 手柄控制器，七鑫易維的眼動控制，還有以 Leap Motion 和 uSens 為代表的手勢識別。

不同的交互方式，給予了開發者對內容更大的想像空間。除了 PPT 提到的廠家外，當天在 Vive Focus 體驗區，雷鋒網還發現了其他有意思的交互玩法。

在一款 VR Demo 中，雷鋒網(公眾號：雷鋒網)編輯通過控制器比劃出閃電的手勢，即可「一招制敵「；比劃愛心的手勢，馬上恢復「滿血」狀態。 在多數 VR 內容中，我們常常會通過按動控制器的按鍵，選擇觸發相應的功能，該體驗則是根據一定的手部姿勢實現。但，這跟我們目前熟知的手勢識別有著根本的區別。

帶來這個展示的是一家名為 AirSig 的臺灣公司，他們成立於 2014 年 6 月曾獲得鴻海科技集團（富士康）的 200 萬美元投資。此前，他們專門研發了一種名為空中簽名的技術，用戶握著手機，在空中完成籤字，即可完成 APP 應用登陸，甚至是電子支付，也曾被一些金融機構使用。

不過，三年過去了，空中簽名並沒有得到大範圍地推廣和普及。AirSig 公司的創始人兼 CEO 陳柏愷告訴雷鋒網，「主要的問題是智慧型手機體驗方面沒有做好，大家對手機屏幕滑動已經很習慣了」。

今年年初，他們看到了 VR/AR 領域在人機互動上的新需求，認為這是新機會。

AirSig 主要是基於手柄上的 IMU（慣性測量單元）來理解用戶的手勢，它包括兩大功能：

3D 手勢識別

開發者可以在應用/內容當中，直接使用 AirSig 內建手勢

開發者可以自定義手勢，例如開發一個釣魚遊戲，開發者可以創建幾個釣魚動作，增加遊戲的互動性跟沉浸感 

玩家可以自定義手勢，比如在魔法遊戲中，當玩家升級到一定等級時，可以自己創建自己喜歡的魔法手勢

3D 籤名認證

玩家可以事先定義好籤名，當需要登入或支付等場景時，不需要敲密碼，只要在空中做個籤名，即可完成身份認證。

從空中簽名，到 VR 中對手勢操作的理解，陳柏愷說「有新的門檻需要突破」。籤名更注重「嚴謹性和安全性」，手勢注重通用性，相對較為簡單。

而 3D 籤名認證與此前的空中簽名很類似，只不過從手機變成了 VR/AR 控制器，場景從 2D  變成了 3D，「背後的算法都是一樣的，變動的是體驗、畫面、視覺上的設計」。

AirSig 讓人很容易想起當前跟手有關的交互方式——手勢識別。

目前，像 Leap Motion、uSens 為代表的廠商，多是採用雙目攝像頭的方案，在 VR 頭顯上安裝額外的組件，對整個手部動作進行識別和追蹤。陳柏愷稱，「這些方案只是獲取手的樣子和移動軌跡，當捕捉到手的運動軌跡後，AirSig 就用來判斷手勢的意義。例如，手在空中畫一個愛心，系統能理解這個愛心是什麼意思。」

雷鋒網記得 HoloLens 的交互部分，也採用了手部操作，其中主要有三種手勢操作：食指點擊為確認；食指和拇指捏在一起，對像視頻框等拖動；手掌朝上，五指綻放，可打開開始菜單。HoloLens 依靠深度攝像頭獲取手部信息。

就實用性和準確度而言，陳柏愷覺得，AirSig 更有優勢。一是普及性很高，任意手柄控制器即可接入 SDK，二是準確度達到 98%，同時，開發者可以自行定義 VR 中的操作手勢。

開發者想要針對 VR 內容，設計專門的手勢操作，需要找 10 個人，每個人對同樣的動作重複 33 次，完成樣本收集。陳柏愷介紹說，儘管大家做出同一個手勢，例如愛心，但每個人的動作都存在差異，那麼如何在解鎖所有人的同一動作，是較難的部分。除了樣本收集外，他們自己研發的算法也十分關鍵。

現在 AirSig SDK 可支持 Google Daydream、HTC Vive，也可移植到 Oculus、索尼 PSVR 等其他平臺。

陳柏愷認為，現在像 Leap Motion 對手部識別精準度還不夠，未來，當手部識別足夠準確，他們希望可以把 AirSig SDK 加入，不再需要控制器操作，而是真正使用雙手。

雷鋒網原創文章，未經授權禁止轉載。詳情見轉載須知。

相關焦點

  • vr是什麼
    vr是什麼?　　對於vr很多人還感覺到比較陌生，並不知道這是什麼意思，代表著什麼技術，其實vr也就是虛擬實境，下面我們具體介紹一下vr是什麼，它有哪些特徵，具體應用領域在哪些地方等等，我們全方位了解一下。vr是什麼技術?
  • 或因在線玩家太少,《星際迷航:艦橋船員》將不再VR獨佔
    這款遊戲支持PC和PS4平臺，它將玩家置身於星際艦隊飛船的艦橋上，一起面對外太空未知的挑戰。然而，對於許多粉絲來說，這款遊戲唯一的缺點就是需要一個價格昂貴的VR頭顯，比如PS VR、HTC Vive或者Oculus Rift。但是遊戲最近發布了一次更新，將改變現在這種情況了。此次更新可以讓你在電視或其它顯示器上玩遊戲。
  • VR解謎遊戲《Mare》將於1月7日登陸Quest平臺
    在遊戲中，玩家將控制一隻機械鳥，它需要保護和引導無助的人類女孩穿越支離破碎的大陸，將其安全護送到目的地。正如最新預告片所展示的那樣，遊戲以第三人稱視角呈現史詩級視覺特效。當機械鳥不在天空飛翔時，會棲息在高處並激活交互功能與遠程對象進行交互，以便為女孩指引前行的方向。 遊戲共有8個章節，所有的章節都包含了丟失的文物，以尋找幫助解鎖最終秘密。這一切都是通過你的操控來完成的，你可以再天空中翱翔，也可以在山谷中俯衝，只要你朝自己想去的方向揮動控制器就可以了。這對大多數玩家來說應該是一種舒適的坐式體驗。
  • vr眼鏡多少錢vr眼鏡有哪些品牌
    現在vr行業發展越來越快速了，憑藉著相對真實的遊戲體感，這也成了很多遊戲玩家的喜愛，VR眼鏡作為新興的科技設備是必不可少的，那麼vr眼鏡多少錢呢？還有vr眼鏡有哪些品牌？vr眼鏡有哪些虛擬實境眼鏡VR頭顯設備是一個跨時代的產品，是藉助計算機及最新傳感器技術創造的一種嶄新的人機互動手段，不僅讓每一個愛好者帶著驚奇和欣喜去體驗，更因為對它誕生與前景的未知而深深著迷，那麼vr眼鏡多少錢一個呢？
  • 【VR/AR】DaydreamVR入門系列教程
    這篇文章是一個全面的教程，介紹從頭開始創建基於交互式Daydream控制器的應用程式的步驟。到最後，我們將有一個工作的VR應用程式，圍繞場一個場景，有控制器肘模型，身體模型和基於控制器交互和傳播。讓我們在場景中添加一個對象，我們可以通過點擊和懸停來與之交互。我將儘可能多地重用Daydream SDK提供的代碼，這將包括演示場景中的一些腳本，即Teleport腳本。要使控制器與場景中的對象進行交互，你需要設置三件事：1）  事件系統。
  • 第五人格:靈動可愛卻「恐怖如斯」,「兔美的魔法棒」太詭異
    「魔法少女兔美」相信關注第五人格的玩家非常清楚，「魔法少女兔美」包含了求生者通用奇珍隨從「黑白美」以及機械師稀世隨身物品「兔美的魔法棒」。「黑白美」的存在就像是對莊園的一個點綴，可愛的造型以及與黑白熊的瓜葛非常適合聯動，而且也很難讓求生者玩家拒絕，畢竟3188碎片就能夠將其擁有還是非常值得的。
  • 高端訪談:重新定義硬體交互
    在主題為「重新定義硬體交互」的高端訪談環節，Leap Motion CEO Michael Buckwald與Yolu創始人Richard Robinson展開了對話。接下來的發言人會給大家介紹一下和設備溝通和互動的狀況，他是Michael Buckwald，他來自Leap Motian的CEO，還有Richard Robinson，是來自Yolu的創始人，他們會給大家介紹一下「重新定義硬體交互，下面有請Richard Robinson和Michael Buckwald。
  • 深度 探索實物與VR間重量轉換的方法
    對於間接接觸，將控制器與物體的聯繫可視化成一根「弦」更有效，當張力增加時這根「弦」會從綠色變成紅色。而對於觸覺反饋，我們採用和視覺反饋中「進度條」的同樣邏輯，並將其運用到控制器的振動效果上。當用戶接近拉力閾限時，控制器會以更高的頻率振動。雖然這很直接，但是卻很有效。
  • 利用Vive控制器 微軟為視障者設計VR手杖控制器
    儘管虛擬實境似乎能夠為視障人士創造一個全新的界面來與虛擬空間進行交互和實現導航，但新技術使得視障者更難以將他們已經在日常生活中熟悉的技能轉移到虛擬實境。為此，微軟研究院發明了一種新穎的手杖型控制器（把Vive追蹤器安裝在手杖型設備上），其能夠模擬盲人所使用真實的手杖，從而為視障者打開了一扇新的大門。這種杖控制器採用了一系列不同的觸覺反饋路線來模擬虛擬表面的觸感，紋理和聲音。
  • 微軟演示觸覺反饋控制器PIVOT,VR中摘蘋果更逼真
    但為了在虛擬環境中實現與虛擬蘋果的完全交互，我們必須同時考慮對象的空間動態。現在，微軟提出了一種全新的控制器Haptic PIVOT，把力的物理性質帶到虛擬實境控制器。PIVOT屬於腕戴設備，是一種包含觸覺手柄的可攜式組件，可根據需要在手上來回移動。
  • Nat Martin希望改變人類與AR環境的交互方式
    自那段視頻以來，馬丁的Scroll ring經歷了幾次迭代，並逐漸演變成不再像戒指的東西； 相 反，它已經變成了一個看起來很有趣的互動式可穿戴設備LITHO，它可以提供更加動態，直觀 和精確的移動增強現實體驗。
  • vr全景技術是指什麼看了就知道
    打開APP vr全景技術是指什麼看了就知道 酷雷曼VR全景 發表於 2020-12-01 11:07:14 　　很多朋友剛接觸到vr全景時都會非常疑惑vr全景技術是指什麼，對於小白而言的確很難能夠搞明白。
  • vr又稱靈境技術,是模擬虛擬環境中角色的真實表現
    vr在虛擬環境中構建交互虛擬世界，運用真實的人機互動手段，創造和構建具有真實感和臨場感的虛擬世界。vr裝置類產品目前主要涉及電商，醫療健康，新零售，廣告，旅遊，房產等行業領域。通過vr設備獲取用戶的真實信息，並通過ar立體化技術將用戶的信息3d化，再根據需要列印成vr產品，產品可擺放在用戶面前就可以直接觀看和使用，用戶可根據需要進行身體和頭部的轉動和旋轉，且隨時可以攜帶。主要用戶可以在遊戲中打怪，聽音樂，與虛擬世界中的人進行交互，獲取虛擬世界的信息反饋等等。通過「vr+ar」這一創新營銷模式，可以實現消費者體驗到ar應用的內容，ar應用可使消費者感受到真實的虛擬的感覺。
  • 揮動5G「魔法棒」,會把醫療健康變成什麼樣?
    讀創/深圳商報首席記者吳吉揮動5G這根「魔法棒」，未來的醫療健康會變成什麼樣子？
  • vr稱靈境技術,是模擬虛擬環境
    vr是以視覺、聽覺、觸覺、嗅覺等感官為依託，全方位立體地感受虛擬世界，從而達到愉悅身心、增強記憶、放鬆思考、增強娛樂和行動等目的。vr遊戲，是利用3d成像技術、計算機生成技術、傳感器技術和網絡通信技術將虛擬世界無縫轉換為現實的過程。
  • VR和AR的未來發展
    vr/ar的應用什麼是虛擬實境？虛擬實境技術（vr）是一種能夠創造和體驗虛擬世界的計算機仿真系統，它使用計算機生成一個模擬環境，它是多源信息融合、交互式三維動態場景和實體行為的系統仿真，使用戶能夠沉浸在環境中，什麼是AR？
  • 這項新技術讓VR控制器長出幻肢
    使用手持控制器的VR遊戲玩家都知道它會使你看到的遊戲畫面和你用雙手所做的動作產生違和感，從而產生從遊戲體驗中剝離出來的錯覺。於是在由東京大學Eisuke Fujinawa領導的一項研究中，一支學生團隊創建的程序希望用於設計物理感覺體積更大的緊湊型VR控制器，來模擬更加逼真的觸感，提出了「觸覺形狀幻覺」這個概念。
  • 《鋼鐵俠VR》評測7.5分 可能是最契合VR的超級英雄
    但另一方面，PSVR（PS4）孱弱的畫面表現和操控較為局限的控制器，也讓我們的遊戲體驗會打上不小的折扣。此外，我們還可以按住拳擊鍵向前揮動控制器，鋼鐵俠便會緊握鐵拳砸向敵人——這一擊會讓玩家快速衝向目標，頗有視覺衝擊力。
  • 義烏2元的塑料棍在迪士尼可以變成160元的哈利波特魔法棒
    雲南,彝人古鎮上海迪斯尼「愛麗絲夢遊仙境迷宮」之紅皇后御花園義烏2元的塑料棍在迪士尼可以變成160元的哈利波特魔法棒。好萊塢的漫威體系可以讓電影行業突破百億。
  • Valve宣布Index VR套件將於太平洋時間3月9日上午10點開放售賣
    Valve Index的控制器是與備受期待的VR遊戲《Half-Life：Alyx》一起開發的，該遊戲將於3月23日發布。Index控制器具有手指追蹤的優勢，還可以與HTC的SteamVR追蹤系統（例如原始Vive和Vive Pro）配合使用。Valve發表的聲明如下：Valve Index VR套件將於本周一（3月9日）太平洋標準時間上午10點開放購買。