專訪HTC鮑永哲:Vive Pro變AR?兩個前置攝像頭的真正作用 | VR陀螺

2021-02-14 VR陀螺

文/VR陀螺 朱瑾

隨著技術的發展,VR、AR、MR的界限也越來越模糊。就在本月17號,HTC發布了一款Vive SRWorks SDK,讓開發者可以利用Vive Pro的前置攝像頭實現AR功能。而這款SDK一經推出就引起了人們的廣泛注意,因為它的開放極大地拓寬了開發者的想像力,並為內容開發提供了無限可能性。

借著香港環球資源電子展的機會,陀螺君對HTC北亞區總經理鮑永哲進行了專訪。而對於HTC此次推出的SDK,鮑永哲也表示:「5G時代已經來臨,VR與AR的界限也很難再劃分得很清楚。」 

 SRWorks SDK是什麼? 

據HTC Vive的官方解釋,SR指的是「See through Reality」。這款SRWorks SDK是通過Vive Pro的兩個前置攝像頭,為開發者提供一個可以創建AR體驗的工具。開發人員現在可以使用立體聲前置攝像頭創造新的體驗,將透視立體相機視圖與虛擬世界混合在一起,並利用立體聲RGB傳感器執行3D感知和深度感應。


開發者可以完全控制pro的前置相機以開發自己的混合現實體驗。該SDK包括三個模塊:深度模塊、透視模塊和三維重建模塊。這是一套基礎工具,通過前置攝像頭,允許開發人員使用該數據創建有趣體驗,而這些體驗可以是純粹的AR或VR體驗,也可以是兩者的組合。

HTC還表示,SRWorks SDK包含對Unity和Unreal插件的本地開發支持,並且可以實現以下功能:

深度

空間映射(靜態和動態網格)

將虛擬對象放置在前景或背景中

與虛擬對象進行實時以及簡單的手勢交互

在視頻中,我們可以看到用戶能夠抓起虛擬道具丟到真實世界的場景中,且道具的物理反饋相當不錯。除此之外,用戶還可以拉出一個連接虛擬世界的傳送門,可進行場景的無縫切換。除此之外,還能看到Vive Pro可以通過攝像頭對場景進行識別,這展示了空間映射模塊如何創建房間內幾何圖形的模型以供應用程式使用。

除了SDK外,團隊還更新了OpenVR相機API。目前Vive SRWorks SDK可通過HTC的開發人員門戶網站下載測試版。

 

採用新工具,Vive Pro的前置立體相機可以有效模擬AR眼鏡將在未來實現的理想體驗,即具有精確跟蹤且身臨其境的寬視場和環境映射。這將可能成為開發人員構建未來XR硬體所需的優秀開發工具包。

對於那些希望能夠開發將現實與虛擬結合在一起的內容的開發者們來說,Vive Pro提供了新的選擇。相比起註冊Magic Leap SDK,並嘗試從該公司獲取難以獲得的硬體,同時還要嚴守保密協議來說,選擇Vive Pro來開發MR內容要容易得多。這可以幫助開發者們在一個更加開放的環境中快速實現他們的想法。

Project Ghost Studios是受邀利用這款SRWorks SDK進行內容開發的早期合作夥伴,他們通過這款SDK開發出了一款新遊戲。

在這款演示視頻中,我們可以看到用戶頭戴Vive Pro,透過攝像頭看到真實世界的場景,並可以在真實場景用手柄擊打虛擬小怪獸。同時,虛擬場景和現實場景還可以快速切換。

Project Ghost Studios的董事長Gaspar Ferreiro解釋道:「我們在今年年初有幸受到了HTC的邀請,成為小部分特邀開發者之一來研發涉及Vive Pro雙攝像頭的新SDK。我們最終得以揭曉這項研究成果。我們希望這個視頻能夠向你展示Vive Pro可以實現的部分新功能,以及這為故事敘述與沉浸式內容提供的全新可能性。」

  兩個前置攝像頭的真正作用  

Vive Pro是HTC Vive推出的專門針對高端市場的VR頭顯,自公布以來就備受矚目。但其前置攝像頭在之前並未過多引起人們的注意。

「我們最初的雙鏡頭設計是為了更好的安全性,用戶在使用時可以設置把攝像頭打開,其實對於第一代vive,有一些用戶反饋表示覺得攝像頭不夠真實或開的時間點不對。所以我們在設計產品的時候希望能夠對新產品的安全性做得更好,」鮑永哲說道。「到中後期時,發現雙鏡頭可以做see-through,還能提供深度信息,所以工程師內部產生一些比較開放的想法,覺得可以利用雙鏡頭做更多事情。」 

有了深度信息之後,設備就可以實現一些簡單的slam、see-through、overlay的功能。所以HTC Vive選擇對開發者開放新SDK,從而更好地利用雙鏡頭。

鮑永哲透露,Vive團隊有試著把自己的遊戲和實際環境做結合,但由於內部的studio只有兩三個團隊,在創意上無法和瘋狂的遊戲開發者們相比,而團隊認為這項功能應該可以開發出更多的用途,所以希望開放SDK讓大家使用,並在未來做更多不同的嘗試。

「看你們怎麼用,我們也可以互相借鑑。以後未來的某一代鏡頭可能做得很好,就可以做成see-through的VR,」鮑永哲笑言。

他還補充道:「我在自己公司內部負責策略和產品。AR對消費端市場來說應用的方向是什麼還沒有看的很清楚。但通過這一樣一步一步積累很多開發者的開發和創意,也可以幫助我去找到一些方向。」 

對於Vive Pro這項新功能,目前HTC Vive也還處於嘗試的階段。「我們希望用雙鏡頭做更多不同的事情,不管是一些物體辨識還是更多功能,我們都願意跟所有的partner合作。」

眾所周知,VR頭顯的Inside-out定位追蹤正是通過攝像頭來實現的,但目前HTC Vive並不考慮改變設備的追蹤方式。鮑永哲表示,「有別的公司用自己的算法做我們也歡迎,但我們自己不做。至少自己沒有往這個方向考慮。」

而對於這項新功能是否會對電腦運行產生壓力的問題,鮑永哲稱由於Vive Pro主要還是靠燈塔定位,因此深度信息的處理任務並不重。而背景貼合是由相機直接收錄,且精度並不算高,因此對電腦CPU和GPU的壓力並不會很大。

雖然這款SDK極大開拓了Vive Pro的可能性,但對於我們所期待的「VR當成AR用」的場景,Vive Pro暫時還無法實現。鮑永哲解釋道:「AR的應用場景主要還是在室外,而不是固定的房間。但我們的產品還是要依靠電腦和lighthouse,變成AR設備的可能性不高,因為用途不對。」

但同時他也表示,隨著技術的發展,未來有產品能夠走出室外,那麼實現這個場景也不是不可能。

我們的聯繫方式:

商務合作 | 採訪 | 投稿 :

西瓜(微信號 18659030320)

文靜(微信 mutou_kiki)

交流分享 | 爆料:案山子 (微信 shimotsuki_jun)

投稿郵箱:tougao@youxituoluo.com


推薦閱讀


相關焦點

  • 「Vive 1.5」亮相CES 2018,不止屏幕解析度將有大提升!
    編譯/VR陀螺 雲吞 HTC近日表示,一個全新版本的HTC Vive即將和公眾見面,屏幕的解析度將會有很大的提升。
  • HTC鮑永哲:VR只能用來看電影打遊戲?這是我們對它最大的誤解| 一刻 ·演講
    這是講者鮑永哲在一刻talks的演講。這是我們對它最大的誤解鮑永哲我想VR自從我們在2015、2016年開始上市以後,那包含Oculus 包括Pico VR,其實不可否認,就是遊戲一直是VR裡面現在一個最大的應用之一,那大部分的開發者第一個開發的內容也都是跟遊戲相關的。不過我們其實在最近也看到,有各式各樣不同的應用,在不同的行業裡面發生。
  • HTC Vive鮑永哲:每個人都值得擁有「蒙娜麗莎」
    以下為HTC Vive全球戰略資深副總裁鮑永哲演講實錄(有刪減):
  • HTC Vive前置攝像頭到底能讓你看到什麼?請看八分鐘實戰測評視頻
    HTC Vive開發者版的最新迭代Pre在今年1月的CES上首次亮相,並增加了幾個重要功能,其中最為明顯的便是一個有著寬廣視野的前置攝像頭
  • 在沉默中爆發,HTC發布新機HTC Desire 10 pro
    ,雖然從之前爆料的消息了解到會有兩款手機HTC Desire 10 pro和HTC Desire 10 lifestyle面世,但是從HTC官網和官方微博看,HTC方面只對HTC Desire 10 pro做了詳細介紹,而HTC Desire 10 lifestyle甚至隻字未提,這就很讓人摸不著頭腦了。
  • 時代變了,現在前置攝像頭不再礙眼
    而中興A20的出現,得益於屏下攝像技術,礙眼的前攝終於「消失」,實現了真正的全面屏,使其在外觀上更具一體化,且更加順眼。 其實,「消失的攝像頭」,並不是真正意義上的消失,只是通過屏下技術將前置攝像頭隱藏於屏幕之下。從表面上,我們看不到前置攝像頭的存在,但當您調用相機中的前置自拍,您會為之驚嘆。
  • 無處安放的手機前置攝像頭將會何去何從?
    在手機全面屏推進的過程中,前置攝像頭是最後一個障礙。這些年來手機前置攝像頭都經歷了什麼樣的變化?未來前置攝像頭可能會以一種什麼樣的形態存在?這篇文章帶你一起了解下。 根據資料記錄,第一款配備攝像頭的手機是2000年11月份推出的夏普J-SH04,後面配備了一顆11W像素的攝像頭。
  • 【VR陀螺】Gear VR國行售價或高達1500元 VR動畫工具Tvori登陸Steam
    文/VR陀螺 杏仁【8月29日 VR陀螺日報】三星Gear VR真的來了,但是它的國行價格相比國際價格,貴了很多。
  • 花幾個月工資怒入HTC Vive開箱
    包裝整體為黑色硬紙盒,正面印有帶反光處理的Vive頭顯示意圖,旁邊有顯眼的亮藍色點綴的「htc」字樣和白色「vive」字樣以及它的logo。或者這是HTC想我們真正關注的,是它的內涵。  平放包裝盒以後,可以輕鬆地抽取上蓋,首先看到的是HTC Vive的用戶說明書和搭建指引。細心的你會發現,在上蓋內側有一層波浪形的減震棉,這是防止HTC Vive在運輸過程中避免損壞。
  • 今日起,有關AI/AR/VR/MR的知識你一定要知道
    ar 其次,AR。Augmented Reality:增強現實的簡稱。它將計算機生成的虛擬物體或關於真實物體的非幾何信息疊加到真實世界的場景之上,實現了對真實世界的增強。
  • 玩了一個星期 HTC Vive Pre,第一手完整細節告訴你!
    當然,看一場華麗的演示可以讓大家熱血沸騰,但是真正買一套回家玩耍又是另外一回事了。在正式面對消費者發售之前,我拿到了一個最接近最終版的 HTC Vive Pre 樣機。我大概花了一個星期在這個虛擬世界裡盡情玩耍(雖然中間撞過幾次牆)。那麼,在4月9日正式開賣之前,跟我一起來全面體驗一下這款神奇的產品吧!超多你們很想知道的細節哦!
  • OPPO Reno5Pro+和vivo x50pro相比較有哪些區別?
    vivox 50pro這款手機將採用6.56英寸AMOLED材質的全面屏,屏幕解析度為2376x1080像素,支持90Hz刷新頻率,屏佔比為92.6%。小結:就屏幕質量而言,OPPOreno5Pro+這款手機是優於vivox 50pro這款手機的。
  • 小米平板攝像頭怎麼樣?小米平板有前置攝像頭嗎?
    小米平板攝像頭怎麼樣  小米平板採用800萬像素索尼背照式攝像頭,前置OV 500萬像素攝像頭,配合F2.0大光圈,支持1080p(1920x1080)高清攝像。   小米平板攝像頭怎麼樣?小米平板採用的是基於Android 4.4.2底層定製的MIUI系統,延續了MIUI手機版快速迭代風格,開發板每周都有新的系統更新,前往「設置」,選擇「系統更新」即可使用新功能與優化。
  • Pro級攝像頭 蘋果iPhone 12 Pro浙江特惠
    WiFi6(IEEE 802.11 a/b/g/n/ac/ax,具備2x2 MIMO技術)導航GPS導航,GLONASS導航,Galileo,北鬥導航,QZSS連接與共享WLAN熱點,VoLTE藍牙支持藍牙5.0NFC支持讀卡器模式的NFC,可通過備用電量使用的快捷交通卡功能機身接口Lightning數據接口其他網絡參數雙模5G,千兆LTE,具備4x4MIMO和LAA技術,可用於空間感知的超寬頻晶片攝像頭總數四攝像頭
  • 從11 萬像素到 4000 萬像素,手機前置攝像頭二十年進化史
    上至一萬塊的機皇,下到幾百塊的入門機,現在智慧型手機的前置攝像頭基本都是 500 萬像素起步,剛剛發布的三星 Galaxy S20 Ultra甚至用上了 4000 萬像素前置。而即使是最頂級的筆記本電腦,攝像頭也只有 100 萬像素,更別說那些使用臺式機,外接攝像頭的用戶。
  • iqoo7pro和小米11哪個性能好iqoo7pro詳細對比
    iQOO7pro是一款即將正式發布的新款機型,大家對於iQOO7pro都非常的關注,那麼iQOO7pro怎麼樣?iQOO7pro和小米11相比究竟哪個性能好?小編為大家精心整理了iQOO7pro和小米11的詳細對比,感興趣的歡迎前來參考一下。
  • 小米新機10pro攝像頭真的比華為mate30pro的徠卡好嗎?
    小米新機小米10pro攝像頭真的比華為萊卡好嗎?前兩天看了一個自媒體的視頻的測評,我覺得說得很有道理,當然說的是麒麟990和高通驍龍865處理器這兩個方面,的確這次麒麟990稍微弱一點,但是這幾年麒麟系列處理器和高通驍龍的處理器本身就是你追我趕的遊戲,所以總有人暫時領先,也有後來者也會馬上超越,這個是必然的一種現象!
  • 最新iphone12min,iphone12,iphone12pro,iphone12proMax價格參數
    日開始預約)iphone12:64G:6299,128G:6799,256G:7599(10月16日開始預約)配置參數如下:iphone 12 mini屏幕:5.4英寸iphone12屏幕:6.1英寸兩個機型顏色都一樣
  • VR日報:get這五點 買個放心款的二手VR設備不用愁
    有消息稱,1月19日htc vive在瑞士達沃斯宣布,將啟動VR For impact項目,建立1000萬美元的VR基金,以推動VR內容在全球的發展,以及相關技術的研發,促進聯合國在2030年實現「可持續發展目標
  • HTC Vive Comos VR套裝評測:最佳家用VR設備再升級
    其中精英版的頭顯可直接兼容舊版的定位基站和手柄,提供單獨出售版本,可視為Vive Pro的頭顯升級版;而尚未正式上市的VIVE Cosmos XR版則在標準版的基礎上將前面板的黑白透視攝像頭升級為了高清XR立體透視攝像頭,擁有更清晰的混合現實(MR)顯示效果;而同樣未上市的VIVE Cosmos基礎版則是將定位攝像頭精簡為兩個的版本,預計售價會大幅降低,主打入門級市場,這幾個版本的發布讓這一代產品擁有更廣闊的應用場景和覆蓋市場