當觸控螢幕靠近「 Apple Glass 」之類的東西時,觸控螢幕變得不切實際,因此,Apple正在研究如何在現實世界中操縱虛擬控制項。
「 Apple Glass」可以將任何表面變成帶有觸摸控制的顯示屏
最近披露的一項專利申請顯示,蘋果公司提出了一種使用蘋果公司AR的方法,以將空白信息顯示給所有人。現在,在一個單獨的應用程式中,它正在考慮使「 Apple Glass」佩戴者將任何表面都顯示為帶有按鈕和顯示屏的控制面板。
2016年就已提交,但直到本周才披露的「用於檢測第一對象和第二對象之間的觸摸的方法和設備」指出,這種呈現疊加在現實對象上的控制項的方式將是必需的。
專利文件顯示,人類與(真實)物體進行交互的一種自然方式就是用手觸摸它們。允許在其表面上檢測和定位觸摸的[屏幕]通常被稱為觸控螢幕,並且如今是例如智慧型手機和平板電腦的常見部分。
但是,目前的趨勢是,AR顯示器越來越小,或它們越來越靠近用戶的眼睛視網膜。例如,在頭戴式顯示器上就是這種情況,這使得使用觸控螢幕變得困難甚至不可行。
如此,「 Apple Glass」可能會向用戶顯示信息,但是除非用戶將眼鏡摘下並用手指戳一下鏡頭,否則用戶將無法做很多事情。但是,由於AR已經將虛擬對象映射到用戶周圍的現實世界中,因此,可以對其進行擴展以使其看起來好像在用戶可以觸摸或輕按它們的位置處方便地存在按鈕和控制項。
專利中的細節顯示了如何將平坦的方形物體製成計算器
通過遮擋,相機可以觀看用戶手指點擊的位置。尤其是在AR中,這很有用,因為系統將繪製整個環境的地圖,並且知道例如用戶的手指下有一個桌面表面。
因此,它可以將按鈕映射到該表面上。但是,該專利申請有效地指出,它們必須是相當大的按鈕。根據蘋果專利申請的發明人丹尼爾·庫茲(Daniel Kurz)所說,問題是遮擋不可能永遠是精確的。
使用虛擬按鈕不可能觸發一個按鈕,例如數字鍵盤上相鄰按鈕陣列中的5號,而不先觸發其他任何按鈕,因為沒有5號按鈕就無法到達遮擋周圍的任何按鈕。
用戶可以通過設置更大或更小的按鈕來繞開它,但是即使那樣,此類系統真正檢測到的還是遮擋。他們檢測手指是否已經穿過「按鈕」,而不是實際上是否已按下該按鈕。
蘋果公司提出的解決方案是加熱。如果兩個處於不同溫度的物體接觸,它們接觸的區域將改變溫度,然後像接觸之前一樣緩慢收斂回到初始溫度。
因此,對於與最近發生觸摸的環境中的點相對應的像素,這顯示出緩慢但明顯可測量的溫度降低或升高。
因此,無論用戶的手指觸摸到哪,都會有熱傳遞。它很小,但是肯定在那裡。該專利表示:「溫度的平穩變化可以表明最近在採樣位置發生的兩個物體之間的接觸。」
該應用討論了檢測熱變化的不同方法,例如通過熱成像,但主要涉及可以實現的精度。
它可以區分人為(故意發生的)觸摸或阻塞與其他任何東西(可能偶然發生的)的觸摸或阻塞。它能夠精確定位觸摸,並能夠在觸摸事件發生後對其進行識別(即使在觸摸時沒有相機、計算機或任何東西)。
最後取決於檢測在觸摸後迅速進行的檢測,但是例如,可能是用戶輕敲了表面,並且當他們將手指移開時會發生熱成像。該應用程式包括示例照片,顯示了最近在表面上的指尖輕拍。
虛擬實境技術(AR)
與僅向「 Apple Glass」佩戴者顯示數據的相關想法一起,這都是Apple在AR方面廣泛研究的全部內容。它顯示了該公司在增強現實的實際應用中,而不僅僅是在視覺方面,在很長一段時間內(很長時間以來,正如該專利申請是在四年前提交的那樣)。
在蘋果公司在AR領域的許多相關專利中,丹尼爾·庫茲(Daniel Kurz)擁有另一項專利,可以一起準確地處理真實和虛擬對象。