研究人員發明了一種戴著口罩也能跟蹤面部表情的耳機

2020-12-12 站長之家

站長之家(ChinaZ.com) 10月13日 消息:康奈爾大學的研究人員發明了一種耳機系統——C-Face,即使戴著口罩也可以追蹤佩戴者的面部表情。

據介紹,C-Face可以監測耳機佩戴者的臉頰輪廓,並將佩戴者的表情轉換成表情符號。例如,這可以讓人們在群組通話無需打開網絡攝像頭就能表達自己的情緒。

康奈爾大學科學實驗室主任Cheng Zhang在一份聲明中說:「與現有的任何一種追蹤面部表情的耳戴式可穿戴技術相比,這種設備更簡單,不那麼顯眼,功能也更強大。」「在之前識別面部表情的可穿戴技術中,大多數解決方案都需要在臉上安裝傳感器,並且只能識別有限的面部表情。」

C-Face耳機使用兩個RGB攝像頭,位於每隻耳朵的下方。它們可以記錄佩戴者面部肌肉運動時臉頰輪廓的變化。

一旦使用計算機視覺和深度學習模型重建圖像,卷積神經網絡就會分析2D圖像。該技術可以將這些信息轉換為 42 個面部特徵點,代表佩戴者的嘴巴、眼睛和眉毛的位置和形狀。

C-Face可以將這些表情轉換成 8 個表情,包括中性表情和憤怒表情。該系統還可以通過面部提示來控制音樂應用程式的播放選項。

其他可能的用途還包括,在遊戲中使用化身來表達人的真實情感。教師也可以追蹤學生在遠程課堂上的參與度。

研究人員只能對 9 名參與者對C-Face系統測試。儘管如此,表情符號的識別準確率還是超過了88%,面部表情的識別準確率也超過了85%。

一旦這項技術投入到實際應用,那麼帶著口罩也可以很高的進項表情交流了。

相關焦點

  • 戴上口罩也能人臉識別了!科學家發明耳機追蹤面部表情,準確率還不錯
    康奈爾大學的研究人員發明了一種耳機,可以通過觀察臉頰的輪廓來連續跟蹤完整的面部表情,然後可以將表情轉換成表情符號或無聲的語音命令。「這種設備比任何現有的可佩戴在耳朵上的跟蹤面部表情的技術更簡單、更不顯眼,也更有能力,」康奈爾大學科幻實驗室(Cornell's SciFi Lab)主任張成表示,他也是這項研究成果的作者之一。
  • 戴口罩也能識別面部表情?康奈爾研發耳機表情識別系統
    而在VR中,實時面部表情追蹤也會需要多顆攝像頭,缺點是硬體成本高、體積大。近期,康奈爾大學的科研人員發明了一種利用耳機來實時追蹤面部表情的方案C-Face,它的特點是通過追蹤臉部輪廓來識別表情,並轉化成emoji表情符號或無聲指令,用於輸入或控制電子設備。
  • 研究表明,狗進化出了面部結構,能表達與人相似的情感表情!
    在一項新的研究表明,這種友誼可能是由一些情感操縱所推動的。在6月17日公布在《美國國家科學院院刊》的一項研究上,研究人員觀察了進化後的「小狗的眼睛」。在研究中發現,任何一隻狗都擁有將眉毛抬起的悲傷表情來逃避幾乎任何責任與後果。而這種表情的來源,與人類相處的無數個日日夜夜中,狗將一種強大的眼部肌肉進化了,並且專門用來模仿人類的情感 。
  • AI耳機看穿你所有情緒?C-Face偵測用戶表情戴口罩也擋不住!
    人的喜怒哀樂時常是透過臉部表情變化被他人注意,不過現代人使用即時通訊軟體時,卻因為看不見對方的表情,常常不確定對方的情緒是真心的?還是只是隨口應付?進來一款有康乃爾大學研究團隊開發的耳機C-Face,竟然可以利用使用者的臉部肌肉輪廓描繪出你的表情,即便戴上口罩也無法隱藏你的情緒!
  • 人臉識別技術升級 戴著口罩也能刷臉打卡
    研發人員戴口罩進行人臉識別檢測。受訪者供圖3月6日,在中國中鐵科學研究院門禁口,員工們戴著口罩和安全帽,排隊陸陸續續「刷臉打卡」。他們沒有摘下口罩或帽子,僅在屏幕前簡短停留,員工信息及體溫狀況就出現在了屏幕上,工作人員也實現了安全、快速入場。
  • 情緒心理學:為什麼「面部表情管理」這麼難?!
    今天,我們要講的是美國認知心理學家保羅艾克曼(Paul Ekman)對於「情緒」和「面部表情」的研究。一、「情緒」研究不受重視在艾克曼之前,幾乎沒有心理學家單獨研究過「情緒」這個課題。雖然「情緒障礙」在心理治療過程中,也算是一個比較常見的問題。但是,心理治療師們卻只是把「情緒障礙」看作是一種症狀,而不是一個需要獨立研究的問題。
  • 戴著口罩也能喝飲料,美國一藝術家發明開孔口罩,網上受熱捧
    據美國媒體5月13日報導,美國紐奧良的藝術家兼設計師艾倫·麥康伯大膽設計、發明了一款不同尋常的口罩。該款口罩上有一個專門為吸管設計的洞口,這樣佩戴者就可以在戴著口罩的情況下,方便地喝上飲料了。艾倫·麥康伯解釋,這是因為在紐奧良,人們都喜歡喝點東西。
  • 和人類一樣,這種小動物也能用面部表情表達情緒
    德國馬克斯·普朗克神經生物學研究所的科學家近日在小鼠身上進行的一項研究表明:和人類類似,小鼠也有面部表情。當它們品嘗甜或苦的食物,又或者感到焦慮時,都會表現出面部表情的變化。小鼠的六種基本情緒:厭惡、愉悅、疼痛、害怕、噁心和逃離。
  • 老外發明的「透明口罩」, 一個三百元, 顛覆口罩行業
    但戴著口罩的時候,為了保證它的防疫效果肯定是要做的沒有那麼透氣的,並且還會遮住大半張臉,對於那些愛美的女孩子來說,簡直就是天大的壞處,因此很多人都說為什麼不找點特殊材料製作透明的口罩呢?    其實老外就已經發明了不少種透明口罩,比較高科技的是將整個空氣過濾裝置集成在一個防毒面具一樣的設備上面。
  • 迪士尼研究中心開發新技術:讓3D面部表情擺脫詭異
    迪士尼研究中心開發新技術:讓3D面部表情擺脫詭異2020-11-26 20:27出處/作者:cnBeta.COM整合編輯:佚名責任編輯:zhaoyongyu1   這種技術已經從早期的木製表達和有限的細節發展了有很長的一段時間。
  • 迪士尼研發深度語義面部模型,讓表情更豐富
    近期,迪士尼和麻省理工學院的研究人員合作研發了一種基於深度神經網絡的語義面部模型,用於快速製造多個具有細節特徵的人物頭像,該論文《深度語義面部模型(Semantic Deep Face Models)》發表至3D視覺國際會議。
  • 超越地域和文化,AI識別出全人類共同的16種面部表情
    一項新的研究在這個清單上又增加了我們存在的另一個重要部分:我們的面部表情。來自加州大學伯克利分校和谷歌的研究人員使用機器學習和 YouTube 視頻,對常見的面部表情和引發表情的情境進行了比較。結果發現,無論是在巴西的生日派對上,還是在肯亞的葬禮上,還是在中國公園裡的廣場舞中,人類在類似的社會環境中都會使用相同的面部表情,比如微笑、皺眉、苦臉。
  • Nature:超越地域和文化,AI識別出全人類共同的16種面部表情
    一項新的研究在這個清單上又增加了我們存在的另一個重要部分:我們的面部表情。來自加州大學伯克利分校和谷歌的研究人員使用機器學習和 YouTube 視頻,對常見的面部表情和引發表情的情境進行了比較。為了進一步探究這個問題,加州大學伯克利分校和谷歌的研究人員使用被稱為 「深度神經網絡」 的機器學習技術,分析了上傳到 YouTube 上的約 600 萬個視頻片段中的面部表情,這些視頻來自北美、中美、南美、非洲、歐洲、中東和亞洲的 144 個國家。
  • 今日Paper|PolarMask;時間序列;面部表情編輯;ELECTRA 等
    from=leiphonecolumn_paperreview0325推薦原因本文的研究意義:在本文中,作者介紹了一種新的單實例分割方法——PolarMask,該方法完全卷積且網絡結構簡單,可以最大限度的將其嵌入到大多數現成的檢測方法中使用。通過PolarMask方法可以將實例分割問題轉化為研究中心分類和極坐標距離回歸的輪廓預測問題。
  • 知人知面不知心:為什麼面部表情不能真實反映情緒?
    許多研究人員認為,現實圖景比描述的要複雜得多,而且面部表情在不同的語境和文化之間存在很大差異。例如,Jack的研究發現,儘管西方人和東亞人對臉部如何表現痛苦有相似的概念,但他們對快樂的表達有不同的看法。研究人員對埃克曼的結論有效性的分歧越來越大,但這場辯論並沒有阻止公司和政府接受他的說法,即面部表情是情緒的預言。
  • 普渡大學研究人員發明了一種可以檢測細胞硬度的裝置
    【來源:cnBeta.COM】普渡大學研究人員在實驗室裡發明了一種新設備,可以幫助診斷侵入身體組織的癌症。癌症正在侵襲人體組織的一個跡象來自於人體細胞周圍結構的硬化。監測這種結構的變化,即細胞外基質,可以給研究人員提供另一種方法,來研究癌症。 科學家面臨的挑戰是在不損害細胞的情況下很難檢測細胞外基質的變化。普渡大學的研究人員創建了一種設備,使醫生和研究人員可以將細胞外基質樣品加載到平臺上,並使用聲波檢測其剛度。研究小組說,這與檢查飛機機翼是否損壞的概念相同。
  • 這是什麼沙雕發明?國外設計師研發麵部識別口罩!
    在日常生活當中總會有一些時候需要一直帶著口罩,但是這樣就無法使用手機的面部識別功能進行解鎖屏幕。國外創業者Danielle Baskin介紹了一款帶有面部信息的口罩。簡言之,先是提取用戶被口罩遮擋部分的面部信息,然後印制到口罩外側,戴上後即拼湊成完整的臉部。
  • 新發明:口罩裝上「機械嘴」吃飯時不用摘
    當地時間5月18日,以色列耶胡達的一家專利發明實驗室,開發者戴著一副口罩吃飯。以色列發明家發明了一種預防新型冠狀病毒的口罩,這種口罩有一個可以遠程控制的開口,可以讓用餐者不用取下口罩就能用餐。發明者說,這種口罩可以降低去餐廳就餐的風險。
  • 為啥面部表情的管理對於一個偶像明星很重要?
    文/蝸牛娛樂話韓一(歡迎點擊關注優質原創號「蝸牛娛樂話」,精彩內容等你來讀)很多網友都知道,作為明星尤其是偶像明星,「面目表情管理」是一門很值得研究的學問。以目前比較有關注度的網綜《創造營2019》為例。
  • 逼真面部搞怪表情!Facebook升級VR化身技術Modular Codec Avatars
    研究人員主要是訓練系統理解一張人臉,然後再根據頭顯攝像頭的輸入來重現表情。這個項目已經展示過令人印象非常深刻的結果。 Facebook的研究人員指出,最大的挑戰是「對所有潛在(面部)表情制定一個統一的樣本是不切實際的事情」,因為人臉變化有太多不同的方式。最終,這意味著系統的樣本數據將存在一個缺口,這樣它在看到新的面容時就會感到困惑。 2.