Vol.2 影見AR實驗室|張墨:尋求最自然有效的信息互動方式

2020-12-06 易現EZXR

Hello 大家好~又到#影見AR實驗室專欄時間,本期我們特別邀請到資深人機互動設計師張墨,聊一聊影見AR的誕生史。

張墨 影見AR產品總監

從0到1,尋求突破

張墨畢業於美國卡內基梅隆大學,就讀全球排名前三的產品與服務整合創新(Master of Integrated Innovation for Products and Services)專業。畢業後,她在2016年加入網易人工智慧事業部,一路參與和見證了網易洞見和網易影見兩大重要產品的誕生與成長。

在洞見的誕生之初,張墨從0到1梳理手機 AR 基礎交互框架,負責APP的設計,與團隊成功地打造了全球領先的人工智慧加持增強現實技術創新平臺。此後,她加入影見AR項目,帶領團隊完成影見外觀設計與項目硬體功能定義、系統OS設計,制定AR交互和視覺設計規範,並策劃製作多款爆款AR內容。

秉承著「技術升華生活」的理念,張墨和她的團隊致力於為用戶帶來不同以往的體驗。

張墨 畢業設計作品
張墨 畢業設計作品

Q&A

Q:你認為工作中的你和生活中的你最大的不同是什麼?

A:生活中,我一定會做我喜歡做的。比如有一段時間喜歡吃火鍋,我連著好幾個周末都在吃;我喜歡唱歌,專門學習了編曲,每周至少2個小時純粹的唱歌時間。但工作中,面臨各種各樣的需求,需要評估不同的創意和方案,我需要選擇最合適的,而不是最喜歡的。

Q:在易現工作了這麼長時間,你最喜歡易現的地方是什麼?

A:今年是我在易現團隊工作的第四個年頭,我最喜歡的還是影見團隊的向心性,從0到1做一個智能硬體特別不容易,中間我們遇到了很多的困難,但是我們團隊有很多特別優秀的小夥伴,大家都一起為了影見努力,才有今天影見的各種成果。

通過投影而看見

AR技術的實現方式有很多,手機、AR眼鏡相較而言更廣為人知,影見選擇的是通過投影將虛擬信息投射到現實世界裡這種方式。事實上,投影AR 技術的研究已經有近三十年的歷史了,這項技術相對成熟,在使用上也已經達到了很自然的狀態,真正做到了看得見、摸得著

對於一些特殊的用戶群體或行業場景,比如兒童教育場景,投影AR技術因其安全護眼、呈現形態、感官反饋、動手參與等特點會更有優勢。我們是希望通過投影建立真實與虛擬之間的這種強關聯感,光影重疊、虛實交錯的效果,同時能夠解決一些行業的問題或者帶來新的可能性。

瀏覽器版本過低,暫不支持視頻播放

追求自然、有效的信息互動形式

AR技術的研究一直追求將虛擬信息與真實世界進行無縫融合,從交互的角度來說其實是在探索如何以更加自然有效的方式來進行信息互動。張墨向我們分享了影見AR團隊在信息互動方面兼容並包的各種探索。

1. 影見AR+實體互動

在影見AR互動投影方案的研究中,實體交互(Tangible Interaction)和實物互動(Object Interaction)是影見AR信息互動的重要特點。前者意味著影見AR打破了傳統圖像界面設計(GUI)將信息平面化、集中顯示在一塊屏幕上的呈現方式。在後者的思考上,我們的設計師通過分析,把影見實物互動的基礎狀態歸納為檢測到(detected)、被按壓(press)、經過上方(hover)、被抓握(hold)四個狀態,使用戶可以把實際物體(比如說孩子的玩教具、實驗室的化學儀器、科技館的展品等)放到影見系統下,進行真實地抓握、拍打等互動,並根據用戶的互動給予圖像或聲音等形式的信息反饋。

2. 影見AR+光雕投影

拋開AR技術而言,投影本身也有很多有意思的玩法,我們也一直在探索和挖掘投影技術本身的應用。影見AR在內容表現中採用了光雕投影(Projection Mapping)的形式,將畫面通過投影貼合在立體物體的不同表面,並且進行視覺矯正,從而使整體呈現立體投影的效果。目前,影見AR在科技館、博物館、沙盤等展示類的項目中,運用了光雕投影的技術,進行實體物體/場景的視覺增強。

From 張墨

將影見定位為AR互動投影,是源於影見「投影+強互動」的產品特性,這也是從用戶角度思考信息互動和使用體驗的結果。作為一款增強現實硬體產品,用戶的體驗感沒有最好只有更好,我們一直在路上。

關於易現EZXR (ezxr_hz)

孵化於網易的易現EZXR在人工智慧領域耕耘已久,團隊自2011年起即開始了AI領域的探索與沉澱,以AI服務支持網易內部,並經由網易系APP觸達近10億用戶,峰值期間覆蓋8000萬人/天;於2015年起進入增強現實領域;2016年推出了增強現實的平臺和產品,通過不斷的技術迭代,已在國內該領域中躋身前列;2019年完成首輪逾億元人民幣融資,成立易現EZXR並聚焦人工智慧加持的增強現實行業賽道;2020年,深度布局以AR Cloud技術為基礎的大空間AR業務商業化落地,並獲評「準獨角獸企業」稱號。

相關焦點

  • 易現「影見AR互動投影」榮獲2019中國設計智造大獎
    易現影見AR互動投影是經過多年自主研發、探索實踐的創新成果,填補了國內增強現實投影設備的空白。 易現參加2019中國設計智造大獎舉行頒獎典禮本次DIA大獎賽,吸引了眾多優秀參賽作品,易現影見AR互動投影憑藉其創新的用戶交互體驗設計、對教育智慧化轉型的突出貢獻,經過初評、複評成功入圍,最終摘獲佳作獎。
  • 影見AR實驗室|周志敏:深耕觸控投影算法,開創新型交互應用
    本期#影見AR實驗室邀請到的是資深人機互動算法工程師周志敏,抱著對AI技術的熱愛。他與團隊一步一步攻克難關,持續為影見AR提供強大的算法支持。03桌面觸控算法的突破如果問影見AR算法的研發過程中最具有挑戰的關卡是什麼,桌面觸控當仁不讓。算法團隊不斷深入探索如何利用深度相機識別手指以及判斷手指與物體的接觸情況,在迭代多個版本後,成功讓觸控投影的算法得到成熟應用,並得到了上下遊合作夥伴的一致認可。
  • 棒棒英語自然拼讀 簡單有效快捷學英語
    Phonics is the fastest, the easiest and most effective process to teach any students of any age how to read American English…自然拼讀英語教學法是教任何年齡的學生讀英語最快、最簡單、最有效的方法。
  • 數碼互動實驗室在初中生物教學中的應用
    2.交流與反饋不夠教師與學生之間以及學生與學生之間的交流與互動受到時間、空間的限制。學生在傳統實驗課上往往只能觀察到自己顯微鏡下的圖像,無法同時觀察到其他同學的實驗成果和進展狀況。學生有疑問時,經常排隊等教師回答問題,致使部分學生不能有效及時得到教師的指導與反饋,教學效率較低。
  • 北京中關村中學生物互動實驗室案例介紹
    用戶名稱:北京中關村中學   公司名稱: 深圳市愛科學教育科技有限公司   用戶需求 :   高效便捷、易操作,能與學生輕鬆互動的生物實驗室解 決方案。   目前在我國眾多的生物實驗室中,都是採用傳統顯微鏡 進行教學。由於普通顯微鏡功能的限制,教師在使用傳統生物 實驗室進行生物教學的時候存在著諸多的不便,例如:教師要 觀察學生的顯微鏡,才能知道學生是否掌握實驗內容;教師無 法清除地了解每一個學生的觀察情況;長時間使用目鏡觀察讓 師生感到視覺疲勞......
  • Spark AR 統整特效發布
    我們已做出各種改進,從審核策略更新【1】和特效提交指引【2】,到新的成效洞察【3】幫助您了解特效表現。 我們仍致力於改善您的發布體驗,Spark AR Hub【4】中推出的一些新功能都旨在幫助你簡化發布、管理和分析AR特效效果的方式。
  • 印尼自然採光實驗性住宅
    受到如何在後現代城市擴張中適應熱帶氣候這一問題的啟發,來自RAD+ar的建築師著眼於基本自然採光手段的非常規設計,並用自然採光實驗室住宅項目作為試驗田展開實踐和討論。自然採光實驗室住宅可以看作一個空間原型,它體現了設計師對環境問題的基本想法,同時也簡述建築的空間布置。
  • 《靈魂戰紀》全新ar卡效果是什麼?
    《靈魂戰紀》全新ar卡效果是什麼?近日,《靈魂戰紀》1月18日更新了10張最新的ar卡亮相,隨著ar的技能描述信息也在卡池中描述出來。下面是10張AR卡的介紹靈魂戰紀 五星ar卡五星卡【折鳶少女 哈露μ】淬火
  • Nat Martin希望改變人類與AR環境的交互方式
    Nat Martin在2017年受到了很多關注,Tech Insider發布了一段視頻,展示了馬丁如何通過 一款他稱之為Scroll ring的設備,重新設想了與AR互動的方式。這款設備是他在英國皇家藝 術學院(Royal College of Arts)讀書時發明的。
  • 互動投影的三種交互方式
    如今的展館中互動投影是必不可少的,但是想要讓互動投影能夠吸引到更多的用戶,那就需要更多的創意,讓用戶能夠在看到互動裝置時產生眼前一亮的感覺,這樣才能有效地吸引用戶前來了解產品。互動投影技術實現交互功能有三種方式,其一,運用交互技術以及互動投影軟體來做到人和投影界面的交互效果;其二,使用攝像頭捕捉光源轉變,計算機設備分析,操縱投影信息界面來做到交互效果;其三,利用感應開關設施,來感應人體的轉變來做到交互的效果。因此當用戶在觸碰到感應點時,就會觸發某種效果,能夠讓用戶了解到其中蘊含的產品信息。
  • AR物理仿真實驗室 助力學府中學初三學生中考複習
    如何更全面地幫助學生複習實驗,如何更有效地提高學生複習效率,如何更好地開展實驗教學,相信很多理化生老師都在思考著這些問題。為解決這個問題,深圳市學府中學的領導和老師率先引入了雲幻科教的AR物理實驗室,用科技手段幫助學生備考。  4月12日,深圳市學府中學邀請雲幻科教顧老師為本校老師開展了一場初中AR物理實驗室使用培訓。
  • 影譜科技攜手中科院,玩轉人工智慧黑科技
    向未來》是一檔由中央電視臺推出的科學實驗節目,通過腦洞大開的實驗,將當下最頂尖的「黑科技」展現給觀眾,讓觀眾感受到好玩的、友善的科學。在新一期的節目中,人工智慧機器人「小加」面對現場18條體型顏色一致、長相堪稱「複製粘貼」的比熊犬,應對自如,一邊和主持人撒貝寧「尬聊」逗樂全場,一邊輕鬆完成「狗臉識別」的挑戰,從18隻比熊犬中迅速識別出三隻目標犬。
  • AR互動投影——創意動畫
    智立方運用AR影像辨識、虛擬成像及3D多媒體互動系統等多項技術,打造一個全新的美術創作空間。在這裡,小朋友可以發揮想像,繪畫出他們心中的圖像,互動系統將他們的平面圖像進行辨識,進而在一個大屏幕場景裡動起來,小朋友的作品注入了新的生命,從而體驗到畫魚魚會遊,畫鳥鳥會飛的神奇美術創作歷程。
  • 外媒以科學方式評選影史最恐怖電影前十,溫子仁佔三部
    因為好奇或者是尋求驚嚇的刺激,總會忍不住去看,但是又不敢仔細地看,有的從指縫中只看一些虛影,有的則開著燈抱著枕頭蜷縮在角落裡。 不敢看又非常想看,這就是恐怖電影的魅力。它能夠讓人心跳加速,產生驚怕的感覺,這種感覺是那些喜劇片、愛情片、動作片所給不了的。
  • 總被系統推薦雷同信息?騰訊天衍實驗室糾偏算法攻克難題
    究其原因,主要是目前主流的推薦系統採用的都是大數據模型篩查方式,會產生較大的路徑依賴。   對此,騰訊天衍實驗室近期另闢蹊徑推出推薦系統糾偏方法,與傳統方法相比,該方法無需執行隨機流量實驗以進行無偏估計,大大減小了無偏推薦算法的訓練成本,降低了系統的路徑依賴。
  • 【討論】AR你懂我的意思吧 一起來捉妖
    而在pokemon go遊戲熱爆全球的時候,ar遊戲也開始進入新的紀元,開發這個遊戲的公司也因此賺得滿盆頗豐,ar遊戲市場還是很有潛力的。接下來小編就來給大家盤點ar遊戲,好玩又有趣。Pokemon Go:點開手機上的《Pokemon Go》,手機攝像頭實時拍攝的現實畫面中,便會出現皮卡丘、小火龍、比比鳥、傑尼龜等寵物小精靈形象。
  • 藍港互動攜手福斯數字娛樂 開發《獨立日2》手遊
    原標題:藍港互動攜手福斯數字娛樂 開發《獨立日2》手遊   中國知名互動娛樂內容平臺藍港互動集團日前宣布,正式與福斯數字娛樂(Fox Digital Entertainment,簡稱FDE)宣布攜手發布一款基於好萊塢科幻災難大片《獨立日:捲土重來》的手遊 。
  • 【互動裝置】以水見聲,聲音和水組成的互動裝置
    德國CYMATICS實驗室做的互動裝置實驗,研究聲音的可視化與震動。
  • 實驗室的魔法日常 第二季 互動附加集
    當然,新的劇集我們也一直在拍,在這一季的互動附加集中,網友腦洞大開,拋出各種問題:明明是Mac機為啥要裝Windows系統?背景音樂不是要版權麼,為啥又可以加了?實驗室是在家裡麼?試劑有多少種?B站大會員一上線你就買了一年,還敢說不是壕?狗吠實驗的管子為什麼不能洗?福馬林時鐘最後顏色變回去了嗎?
  • 盤點7種最常見的AR表現方式:與VR結合最神奇
    今天總結下AR技術最常見的7種表現方式。今天總結下AR技術最常見的7種表現方式。第一:基礎3D模型AR技術最基本的展現形式就是:3D模型(靜態或動態),如動漫人物、建築、展品、家具等。國內AR行業屬於前期發展,該表現形式主要應用於AR初級移動app類產品,其中代表產品有:「二次元」類型的AR閃卡、教育卡片類的《魔法百科》AR早教卡、宜家的AR家具APP等。