【設計分享】人機互動的未來:語音交互和觸控交互

2021-02-08 上海設計中心

2011年10月4日,蘋果在新品發布會上開創性地宣布Siri語音控制功能率先在iphone4s機型上投入使用,又在2012年完成其對中文語音識別和互動的支持,語音助手浪潮首先在手機端應用掀起。


經過五年的發展,原本通過手動的人機互動模式已衍生出許多口令式應用場景,與此同時,在炙手可熱的智能家居市場中,以語音交互為基礎的人機互動模式也逐步成為標準性功能配置。



雖然,語音交互領域儼然被吹捧為又一智能藍海、智能領域的入口之一,國內外科技大佬也因此沒少在其投錢。


然而,回到現實應用場景裡,我們當中有多少人真的像手動觸屏操作那樣信任語音助手?一天中有多少次開啟過語音互動功能?從我們身邊的用戶和自身的使用習慣看,用戶對語音操控仍然極度缺乏信任。



當今語音技術格局


從語音智能生態系統來看,主要有基於Nuance的蘋果Siri與三星S-Voice、谷歌Android的Google Now、微軟Windows Phone的Cortana三大版圖。


專注於中文語音智能領域而言,以傳統的語音技術提供商科大訊飛為首,無論在技術還是市場者佔有領先地位,已知的合作廠商如京東微聯、錘子科技、長虹、創維、三星等家電廠商;騰訊,百度兩大科技巨頭也通過其團隊實力的優越性展現了後來者居上的姿態;蘇州思必馳,捷通華聲,雲知聲等相對較年輕的技術服務商在整體識別率十分搶眼;以及一些背靠其他學術或技術團隊的小公司也正在積聚力量。


基礎:手機使用場景


從iPhone的Siri開始,通過語音助手在手機上實現讀簡訊、介紹餐廳、詢問天氣、設置鬧鐘、自然語言輸入、調用天氣預報、日程安排、搜索資料等功能已不再新鮮,通過後期的技術迭代,學習新的聲音和語調,提供對話式的應答等能力也不在話下。


同時,在應用類層面,如微信、新浪微博、語音搜索、365日曆、掌閱、91熊貓看書以及各大導航類應用也全面引入了語音識別、語義理解等功能。


潛力:家居物聯網



隨著物聯時代的興起,家居物聯這塊藍海市場也吸引了眾多科技公司的押注,而其最基本的接入方式。


在國外,三大科技大佬已開始布局,蘋果就在今年6月初的蘋果全球開發者大會(WWDC)上,推出了自家首個智能家居平臺Homekit,其亮點也正是整合了Siri——具有語音控制功能,對於借用第三方應用或其它硬體而實現智能操控的國內智能家居系統無疑更容易打動用戶。與此同時,微軟近日也宣布將把微軟語音助手Cortana引入家庭自動化設備製造商Insteon在Windows Phone的應用程式中。而谷歌早在去年也通過收購收購Nest Labs成功進軍智能家居市場,並在今年5月份的谷歌I/O開發者大會上推出了以Android為核心的Brillo系統,以及Google Now新的智能應用功能。


國內市場方面,京東藉由DingDong音響的語音交互功能作為物聯家居的入口、以及通過類似布丁機器人等家庭機器人的人機語音互動入駐智能家居等模式也屢見不鮮。


目前語音交互在國內智能電視上已經有一定程度的應用,比如樂視超級電視、微鯨電視、長虹智能電視等,主要是與語音領域的專業公司科大訊飛合作。不過語音交互在智能電視上的應用主要還集中在對傳統遙控器和鍵鼠操控的有限替代上,尚未深入到各種應用服務中。


實際上,在人機互動的各類技術中,觸控是應用最廣泛的技術,這個技術自從被蘋果發揚光大後,讓下至一歲的寶寶上至80歲的老人都可以應用嫻熟,這個技術也會逐漸和顯示融合、和壓力感應融合、和指紋識別融合,並衍生出側邊觸控、觸控筆等新應用,近日,Synaptics公司智能顯示事業部高級主管 Srinivas Pattamatta在接受電子創新網專訪時詳細介紹了觸控技術的新發展。


觸控筆,帶來高端體驗



自從蘋果iPad Proi發布後,觸控筆一下成為一個新的焦點,有人說庫克打了賈伯斯的臉,因為2007 年在蘋果發布第一款iPhone的時候賈伯斯曾說:「誰會想要一支觸控筆?」



但是實際情況是2007年的時候市場對觸控筆沒有需求,而且觸控筆因為處理器的 技術也不會有流暢隨心的體驗, 現在市場開始有了觸控筆需求。對繪圖製圖有需求的那部分消費者已經出現了,可是市場上的產品並沒有讓他們滿意,所以蘋果出手了,另外很多商務人士也有觸控筆的需求。不過蘋果觸控筆售價要近800元RMB,幾乎是一部入門級4G手機的價格,這價格讓很多人望而卻步了。



現在,Synaptics帶來觸控筆方案可以讓觸控筆的成本大幅度降低!「現在市場上流行的一些非常多功能的觸控筆,必須自身有電池、需要內置ASIC晶片。但是我們的這款成本優化、高性能的觸控筆是無需ASIC晶片和內置電池的!」Pattamatta表示,「我們的這款多功能筆本身也帶一個鍵,可以通過編程的方式來定製它的功能。比如你可以點一下這個鍵,它畫出來的線條粗細是可以調節的。而且我們可以讓只支持觸控筆觸控,或者同時支持手的觸控和觸控筆的觸控。」


例如商務人士可以定義這個筆畫出線條或者是紅色或者黑色高光顯亮,但是一個藝術家可以用的筆更強調筆觸,需要畫出來的線條粗細是能夠控制的。就可以通過這個鍵實現定製。


據介紹該觸控筆最細支持1.5mm線條有256級的筆觸層級。可以應用在大屏手機、平板和二合一筆記本上,未來還會擴展到更多應用領域。「對於Synaptics而言,我們絕對不會把技術放在一種類型的設備上,絕對都是設備組合的。不光是電子設備,汽車也是在我們整個組合裡面的。只不過我們一開始正好進入的市場,先是筆記本、PC、平板、手機這些市場。現在我們也進入了一些全新的市場,像汽車、可穿戴設備等等。」他表示。


未來,已經採用Synaptics觸控方案的手機貌似可以通過手機軟體升級支持觸控筆,當然需要一些支持觸控筆的應用來支持才可以。這是個挺有意思的技術,是不是一些廠商可以考慮單獨生產觸控筆呢?


Pattamatta透露Synaptics已經加入了一個叫做普遍觸控筆(USI)的業界聯盟推進觸控筆技術的普及。


壓力觸控,把觸控引到Z軸



傳統的觸控這是在二維平面上操作,隨著蘋果把壓力觸控引入,觸控可以向3維Z軸發展了,而且這將帶來更簡便的操作。這是壓力觸控的原理示意圖。


「Synaptics的壓力技術方案叫ClearForce。是把壓力觸控和顯示集成,通過ClearForce技術,我們可以更好的完善智慧型手機的人機界面。同時,能夠為手機應用提供新的模式和功能。讓消費者的使用更隨心所欲。」Pattamatta指出,「Synaptics希望把ClearForce這項技術用到所有的產品上PC、智慧型手機、可穿戴設備和汽車。」


一般來說觸控技術就是終端用戶用手指點擊屏幕。而現在如果用戶手指向下壓的力度加強的話,通過感知壓力,就可以更快速的讓用戶去訪問想看的內容。如用戶用力按屏幕,設備就能夠向下快速的翻郵件,點擊一下,就能翻出一個菜單。再用力按壓,就能彈出更多的功能菜單。



實際上,壓力觸控的應用除了按壓還有更多,Pattamatta表示通過側面的壓力感應,其實是側邊觸控技術,可以實現單手操作,以前沒法單手操作。ClearForce直接用力點擊屏幕,就可以直接啟動照相功能。所以ClearForce能夠給用戶更好的與機器互動的能力。



通過這個功能可以把未來的很多體驗改進,例如輸入字體的時候再不用去來回切換大小寫和字符,只要按下屏幕,力度不同會切換到不同的輸入模式,據介紹可以實現256個層級的按壓,關鍵看手機製造商如何實現更酷的體驗。


雖然目前一些廠商如敦泰、奇景光電等也號稱實現了這樣的功能但是Pattamatta強調Synaptics是在三年前就開始做壓力感應技術並在1996年就獲得了第一項有關壓力感應的技術專利。而且截止現在已經擁有超過60項壓力感應方面的專利。


未來手機、可穿戴設備、汽車、印表機和任何設備都可以應用這個技術, 「因為Synaptics在觸控技術上就已經擁有了30年的豐富經驗,再把我們的壓力感應的技術加進來,這就是我們獨一無二的地方。」他強調。


側邊觸控,帶來單手操作的驚喜


Synaptics的另一項創新的觸控技術就是SideTouch,也叫側邊觸控技術。這個技術把手機的側框也利用起來了,使用SideTouch技術讓用戶通過觸控手機的邊框位置,來實現人機互動。



用手機正面玻璃蓋板無需額外的硬體就可以實現手機邊框觸控,「我們覺得手機側面觸控是非常符合人機工程的理論的,有了SideTouch技術,機器能夠識別人是用左手還是右手著手機。我們非常驕傲的告訴大家,在小米的Mi4C的型號手機上,已經率先採用了SideTouch的技術。 」Pattamatta指出。


SideTouch更適合手機邊框操作,但對於筆記本和平板電腦也是適合的。「這也是我們Synaptics獨一無二的一個技術,我們很多競爭對手,他們也想使用同樣的正面的觸控控制器,來實現前端和側端觸控,但是他們都沒有在技術上成功,只有Synaptics是做到了。」Pattamatta指出,「部分金屬邊框可以實現,如果是全金屬外殼還需重新設計,對於塑料機身是沒有問題的。這個功能還可以用在照相功能上。」


TDDI——觸控與顯示集成,激發無限人機互動想像力


Pattamatta表示Synaptics最近幾年非常重要的一個技術就是觸控顯示集成一體化。全稱是TDDI,TDDI第一個T代表的是Touch觸控,第一個D是Display代表顯示,第二個D代表的是Driver,就是驅動程序,I是Integration一體化、集成的意思。


把觸控和顯示驅動集成顯示面板上,這樣做的好處是實現了集成之後手機能夠做到更加輕薄。其次功耗進一步降低。第三可以實現成本優化。「我們有專門的一個技術叫做先進矩陣板(AMP)。它實現整個架構最簡單同時成本最低。但帶來的卻是高性能觸控感應,非常適合LTPS還有非對稱矽晶板。」Pattamatta指出。「現在大家都追求窄邊框設計,通過TDDI可以更好地適用ClearForce和SideTouch兩個技術。」他表示類似穿戴設備就特別適合採用AMP技術。



Pattamatta表示TDDI未來還將和ClearForce和SideTouch兩個技術進行融合帶來更好的人機互動體驗,他說已經有將這個技術用在辦公室玻璃上,例如通過觸摸把辦公室的格擋玻璃可以從透明變成完全不透明,以保護隱私,在CES上會有展示。未來這些觸控技術還會和生物識別技術進行融合,如本文開頭的視頻演示那樣,觸控和指紋識別進行融合。


Pattamatta特別指出觸控技術在汽車電子領域的應用會越來越多,下面是1996年款寶馬7和最新2016款寶馬7內飾的對比,可以看出觸控技術的應用大大增加了。



目前的人機語音及觸控操作仍面臨很多亟待解決的問題,用戶實際應用情況並不像其產品覆蓋面那樣廣泛,即所謂的交互智能還並不能稱之為真正的標配。


但不可否認,它們作為人機互動發展的重要方向,正逐步滲入到我們的日常生活與應用當中,引起了智能硬體行業的變革。


而誰能率先為交互創造更人性化的操作體驗,在其算法的準確率、反應時間以及處理性能進行實質性的突破,定將為智能領域的發展創造豐厚的附加值。







相關焦點

  • 【交互】談談我所理解的汽車人機互動設計
    再說「信息流動」,這種信息可以有很多種形式,可以是圖文(圖片、消息、界面),可以是聲音(語音識別),也可以是味道(香氛反饋)、動作(手勢識別,眼動識別)甚至是知覺(觸控,腦電,情緒識別)。信息的傳播媒介可以是有形的也可以是無形的,比如人點擊手機屏幕操作就是有形的,而寶馬的手勢識別就是無形的。
  • 區別人機互動 (HCI) 和互動設計 (IXD)
    ),這就要從人機互動(HCI)和互動設計(IXD)的區別說起。一、從屬領域人機互動 (HCI)從屬於計算機領域,是計算機的一個分支學科,關注計算機和心理學的交叉。它研究人與機器之間進行信息傳遞的理論、技術和設備,既包括技術研究(包括算法、硬體技術等),也包括心理學研究。
  • Synaptics引領人機互動的四大浪潮
    2015年4月29日,北京,全球人機互動解決方案的領先開發商Synaptics公司 (NASDAQ:SYNA) 今天宣布,面向即將到來的萬物互聯時代,率先發起一場用戶體驗完美化的革命,加速變革人與智能設備之間的交互體驗,全面引領人機互動領域的四次浪潮。
  • Bixby的AI語音,能否推進人機互動進程?
    根據負責人介紹,Bixby與目前市場中所了解看到的語音助手截然不同,而是一款切切實實的人工智慧平臺產品,其完全依靠三星在自然語言處理和人機互動上的全面探索經驗,同時藉助三星手機、物聯網、穿戴式設備等領域的技術優勢打造而成的一款人工智慧產品。在產品特點上,Bixby最大的特色是摒棄了傳統語音交互助手「你問我答」的生硬模式,而是予更貼近人類思維和習慣的互動方式。
  • 從語音到人工智慧 Bixby如何改寫人機互動方式
    Bixby雖然姍姍來遲,其定位乃是人工智慧平臺,而非語音助手,這種全新定位的背後正是三星在自然語言處理和人機互動上的全面布局。換言之,Bixby具有人工智慧的理解、學習和會話能力,是有「大腦」並且會「動腦筋」。而語音助手則是無腦的命令派,只能根據有限的命令條去對話而非會話,相對於Bixby的「動腦筋」,語音助手們則可以稱之為「死腦筋」。
  • 微軟Torque人機互動:揮揮手臂,說說話
    但若仔細細想,從功能機時代的拇指族到觸屏時代的低頭族,人們把玩手機時都需要雙眼和雙手的全情投入,而在搜索信息前,還需經過解鎖、離開當前界面、尋找並開啟搜索應用等複雜環節——你很難想像,在傳說中即將來臨的可穿戴時代,這樣的人機互動體驗有什麼優勢可言,畢竟誰都希望,移動搜索可以像舉手提問一樣簡捷自然。嗯,微軟也這麼認為。
  • 當滑鼠消失,人機互動方式能否走進時代舞臺?
    人機互動技術是指通過計算機輸入、輸出設備,以有效的方式實現人與計算機對話的技術。其中包括機器通過輸出或顯示設備給人提供大量有關信息及提示請示等,人通過輸入設備給機器輸入有關信息,回答問題及提示請示等。人機互動技術是計算機用戶界面設計中的重要內容之一。
  • 2018,語音交互何去何從?
    分享結束後的互動時間,人們的提問繞來繞去,終究繞不過那個如金蘋果般、讓所有人著迷的問題:中國的現象級語音交互產品應該是什麼樣子?「和家中的任何設備都能交互,形成一個整體,」張逸嘉的回答與 Google Home 的思路一致,同時他也清楚的了解中國現狀,「不過在中國很難實現。」
  • 智慧語音,交互更自在 —— 為什麼要用語音操控手機
  • 大會 | CHI 2018:體驗未來的人機互動
    每年CHI上展示的各種新奇的交互設備和技術都會讓我們恍若置身未來。今天我們特別邀請微軟亞洲研究院軟體分析組實習生王韻與大家分享她此次參會的體驗,以及會上展示的人機互動領域的最新研究進展。無獨有偶,來自Swansea University和University of Sussex的研究人員也展示了用液滴來進行交互的系統,該系統實現了可以讓液滴移動、震動、分開、融合等的功能。這些與液滴有關的交互的研究讓人非常期待未來能通過小水滴進行信息的傳遞與表達,乃至更廣泛的交互技術的應用。
  • 【報告】2019年AI人機互動趨勢研究報告(附全文下載)
    人工智慧已經成為新一輪科技革命和產業變革的核心驅動力,正在對世界經濟、社會進步和人類生活產生極其深刻的影響。其中,普羅大眾對人工智慧感知最為深切的當屬人機互動。語音交互、人臉識別等人工智慧技術已經化為應用產品走進了我們的生活。近日,百度人工智慧互動設計院發布了一份聚焦於未來3年內的AI人機互動趨勢研究報告(以下簡稱「《報告》」)。
  • 滑鼠終將消失,未來我們有哪些人機互動方式?
    他帶領的研究小組是人機互動的先鋒,是開發超文本系統、網絡計算機以及圖形用戶界面的先驅。科技變革從不止步。半個世紀以來,我們雖然還在依賴滑鼠和鍵盤進行計算機交互,但隨著觸控螢幕技術、人工智慧、語音技術、AR/VR、腦科學的發展,我們與計算機的交互方式也正在慢慢地發生改變。目前,語音技術已經植入了我們的手機、音箱等消費電子產品中。
  • 互動設計?交互藝術?
    很多人對互動設計的概念一直很「虛」,導致被誤認為交互本就是一個「很虛」的專業。而在當大家還沒有真正搞清楚「交互本質」的時候,更多的「宏觀交互」不斷湧現。如今交互形式又滲透到了一些新的層面與高度,除了解決問題與承載更多功能之外,不知不覺讓更多人群沉浸於某件交互行為當中,比如AR/VR技術的出現,人機互動從平面向空間的跨越等。所以真的忍不住想問:互動設計是什麼?
  • 陸奇:Chatbot將成為未來的基礎設施和重要的人機互動窗口
    在序言中,陸奇博士以資深對話式交互專家和投資人的視角,以面向未來的視野,展望了聊天機器人(Chatbot)行業和技術的發展。其中提到:Chatbot將成為大量自然語言處理算法最好的落地場景之一。Chatbot將成為未來的基礎設施。除此之外,陸奇博士也提到了更多有關聊天機器人(Chatbot)行業和技術的細節,現編輯後全文摘錄如下。
  • 語音交互註定是巨頭遊戲 Echo和DingDong必有一戰
    很早以前,比爾·蓋茨在美國卡內基-梅隆大學發表演講時表示,語音技術等自然交互技術在不久的將來會成為智能硬體的重要功能。他認為,未來幾年,網際網路搜索將更多通過語音命令來完成,而不僅僅是語音識別。從簡單的語音識別到智能化的人機語音交互,是語音技術未來發展的關鍵。這也許就是微軟之所以會投入「小冰」的最初背景。
  • 無「觸」不在——人機互動大拿Synaptics的奧秘
    是的,我們和多種終端設備之間的交互,已經太多太多轉變成為「觸」這個行為。但是,隨著技術的發展,第一代iPhone發布時,賈伯斯所定義的手指觸控交互,早因為技術的發展,內涵變得越來越豐富。觸控技術進步到現在,已經不僅僅是在改變我們的使用與交互習慣,它已經在視覺體驗、終端設計、應用等各個層面,深入的影響著我們的生活。
  • 迪文多功能蒸烤箱人機互動解決方案
    迪文為用戶提供全方位、靈活的人機互動解決方案,通過語音交互等智能操控方式,在實現多功能蒸烤箱烹飪的同時,提升產品的人機互動性能,讓操作變得更簡單、更智能。方案整體示意圖屏幕接口示例· 單晶片完成液晶驅動與外設控制的功能,集成度高,可提供硬體設計參考。
  • TicWatch Pro 3背後,雙驅動下重塑「人機互動」
    在科技與需求的驅動下,人機互動實現了多次革命,發展迅猛,人機互動設計已成為打通車家生活的核心要素。
  • 淺談主流的車載交互系統(一)
    今天聊哥就先和大家一起來淺談這幾款車企自研的車載系統。I-Drive系統是BMW公司特有的智能駕駛控制系統「intelligent-Drive system」的縮寫,它是一種全新的、簡單、安全和方便的未來駕駛概念。發展到現在I-Drive已經升級到第四代系統,在功能上、實用性上較前幾代產品已有明顯提升。
  • 摺疊屏時代的人機互動:華為MateXs的破題之作
    但是要理解這件事情,我們得先從人機互動的最開始講起。施樂實驗室的探索,蘋果 Macintosh的發布和微軟 windows 作業系統的普及,讓GUI和PC的交互邏輯得以進一步成熟,而這段發生在80年代的充滿戲劇性的故事,直到今天依然是科技界裡為人津津樂道的一段歷史。至此,在經歷了長時間的摸索後,人們才將人機互動發展帶到了快車道上。