視覺感知堪比人眼!這款突破性傳感器模仿人類視網膜,有望帶來 AI...

2020-12-28 雷鋒網

視覺、聽覺、嗅覺、味覺、觸覺是人類最基本的五種感覺,其中視覺極為關鍵,畢竟隨著物種進化,眼睛作為人類最為精細、複雜的器官,感知能力無與倫比。

曾有神經科學、認知心理學研究表明,80% 以上的外界信息都是通過視覺進入了我們的大腦。

技術代代革新之下,仿人眼的嘗試不斷湧現。

2015 年,美國明尼蘇達州一位名為 Allen Zderad 的 68 歲男子在失明 10 年之後,憑藉一雙「仿生眼」重見光明。

2020 年 5 月,香港科技大學範智勇團隊聯合加州大學伯克利分校、美國勞倫斯伯克利國家實驗室的一組研究人員,就視網膜問題提出了最新方案,甚至打造出了多項性能超越人眼的仿生眼。

而就在近日,美國公立研究型大學俄勒岡州立大學(Oregon State University)在光學傳感器領域有了重大進展,更接近於人眼感知視野變化能力的傳感器終於來了。

俄勒岡州立大學表示:

該傳感器是圖像識別、機器人和人工智慧等領域的重大突破,突破性的仿人眼光學傳感器是人工智慧發展的關鍵一步。

打造新型視網膜傳感器

2020 年 12 月 8 日,相關研究成果正式發表於《應用物理快報》,題為 A perovskite retinomorphic sensor(一種鈣鈦礦型視網膜傳感器),論文作者為俄勒岡州立大學工程學院研究員、電氣與計算機工程助理教授 John Labram 和研究生 Cinthya Trujillo Herrera。


哪怕最先進的超級計算機,複雜程度也無法與人腦相媲美。

最早,基於這一事實,神經形態計算領域的研究開始興起,其設計目的是在執行機器學習任務時優於傳統計算機,原理可以簡要概括為一句話:將人腦(的一些方面)複製到硬體中。

論文介紹,雖然近年來這一領域取得了很大的進展,但幾乎所有提供給神經形態處理器的輸入信號仍然是為傳統的 von Neumann 計算機體系結構設計的。 

研究團隊設計了一個簡單的光敏電容器,並描述了它對光刺激的反應。

如下圖 a 所示,該結構基於雙層電介質:

電極方面:

John Labram 表示:

以前嘗試製造仿人眼設備(視網膜視覺傳感器)都是依靠軟體或較為複雜的硬體。但我們設計的這種新型傳感器,其操作包括在基礎設計中,涉及了鈣鈦礦半導體的超薄層。當置於光下時,鈣鈦礦會從堅固的電絕緣體變為導體,它具有發展太陽能的潛力,近年來對於鈣鈦礦,學界也有著廣泛的研究。

基於上述結構,當與外部電阻器串聯時,電阻器兩端的電壓降(又稱電位差)將在電容器充電/放電時暫時出現尖峰,然後恢復到其平衡值。也就是說,傳感器會在照度變化時出現尖峰,在其他時候輸出零電壓(如上圖 d 所示)。

研究團隊設計的光敏電容器在設計和預期的用途上,都與別的科學團隊以前研製的光電電容器不同——光電電容器被設計用來儲存來自太陽輻射的能量,而上述傳感器被設計用來檢測神經形態計算中光學刺激的變化。

模仿人眼感知更加逼真

那麼上述傳感器實際的仿人眼效果如何呢?

首先,研究人員通過播放視頻作為施加給傳感器的光學刺激,模擬大型陣列。

結果表明:

可見,傳感器對於動態圖像有著很明顯的反應。

隨後,研究人員向傳感器施加了以特定角度排列的光刺激,作為另一種檢驗。

這一實驗受到了 20 世紀 50、60 年代一項發現的啟發——科學家們注意到貓的某些神經元對以特定角度排列的光刺激有強烈的反應。科學家們認為,這是視網膜中一些細胞的特定排列導致了超極化、去極化,它們對光學刺激會產生反應。

因此,研究人員選擇測量兩個值:電容器兩端的電壓降(C 傳感器)和電阻器兩端的電壓降(R 傳感器)。

結果如上圖所示,這種傳感器的確會對某個方向的刺激做出更強烈的反應。

上述兩項實驗表明,這一傳感器的人眼感知模仿能力的確較強。

不僅如此,研究人員還認為,由於這是一種傳感器,它不需要任何複雜的讀出算法或後處理,它可直接輸出電壓,電壓取決於傳感器所瞄準的物體的方向。

John Labram 表示:

新型傳感器將與神經形態計算機完美匹配,將為下一代人工智慧的應用提供動力,如自動駕駛汽車、機器人技術和先進的圖像識別。

引用來源:

https://aip.scitation.org/doi/full/10.1063/5.0030097

https://today.oregonstate.edu/news/breakthrough-optical-sensor-mimics-human-eye-key-step-toward-better-artificial-intelligence

雷鋒網雷鋒網雷鋒網(公眾號:雷鋒網)

雷鋒網原創文章,未經授權禁止轉載。詳情見轉載須知。

相關焦點

  • 美國科學家成功研發新型光學傳感器 可模仿人眼感知
    美國俄勒岡州立大學在新型光學傳感器研發上取得重大進展。他們開發出一種新型光學傳感器,可更逼真地模仿人眼感知物體變化的能力。這一成果有望帶來圖像識別、機器人技術和人工智慧等領域的重大突破。
  • 南京大學繆峰團隊在「垂直結構」新型類腦視覺系統方面取得重要進展
    基於這系列工作打下的基礎,該團隊近日提出,通過將視網膜形態傳感器陣列與憶阻交叉陣列結合在一起,可以模擬人類視覺系統的「垂直分層」架構,從而同步實現對視覺信息的感知和預處理,並高效執行較複雜的包括圖像識別、物體追蹤、運動軌跡預測等在內的任務。該工作為未來開發三維垂直集成的新型類腦視覺系統奠定了科學與技術基礎。
  • 科研前線:人工視網膜組裝的EC-EYE仿生眼
    在科幻電影裡經常出現這樣的場景:擁有仿生眼的智慧機器人可以實現對目標的遠距離精準打擊;視覺受損的盲人,通過植入仿生眼就能完全恢復視力……不要以為這只是編劇天馬行空的想像,實際上,科學家們一直致力於打造如電影中那樣理想化的仿生視覺裝置,並且已經取得了一些進展。
  • 安森美半導體全系列智能感知方案推動AI發展
    汽車是非常傳統的行業,最近幾年,電力化和智能化的發展為這個行業帶來了新的動力,各種感知產品的應用使汽車變得更安全、更舒適。 機器視覺同樣是一個歷史很悠久的行業,其應用廣泛且多樣化,涵蓋了包括電子製造、平板檢測、機器人、物流等在內的多個細分市場。 目前,中國已成為全球機器視覺市場增長最快的國家。
  • 港科大開發高密度人工視網膜,科幻人造眼成現實
    人眼具有視場寬、解析度高以及對光高度敏感的特點,這一切都源於半球形的視網膜和大量的視細胞——每平方釐米約 1000 萬個。模仿這些特點來創造人工仿生眼是機器人領域的一個焦點,對於開發視覺假體裝置具有重要意義。但是,視網膜的形狀和構成使人工視網膜的製造頗具挑戰性。
  • 人類對色彩的感知原理,世界上存在未知顏色嗎?
    顏色感知 生物要想看到顏色,就需要對電磁波有感知能力,於是生物進化出了重要的器官——眼睛,外界光線經過折射後投影到視網膜上。 人類視網膜上有視杆細胞和視錐細胞,其中視杆細胞對光的強度很靈敏,對顏色不靈敏;而視錐細胞又有三種,分別對紅、綠、藍三種顏色的光靈敏;當視覺細胞接受到外界光源的刺激時,就會把信號傳遞給大腦
  • 薛天/吳倩/王曉群合作首次解析人類與非人靈長類恆河猴視網膜衰老...
    ,至少有80%的外界信息經由視覺系統接收、處理和感知。光線作用於視網膜中的感光細胞,這些細胞將光信號轉換為電信號,經過多級神經元傳遞,最後視覺信號通過視神經傳輸到大腦中,使得人和動物能夠感知外界物體的大小、明暗、顏色、動靜,對機體生存至關重要。然而,隨著年齡增長,視網膜功能會逐漸發生退化,同時各種年齡相關性視網膜疾病風險也相應增加。因此,了解視網膜衰老進程中細胞組成及其內在基因調控網絡變化對治療和預防年齡性相關視網膜疾病有著不可忽視的推動作用。
  • 光敏納米線、半球形視網膜:特別像人眼的仿生眼
    原文作者:Hongrui Jiang最新報導的人造眼擁有一個仿生視網膜的半球形組件,上面密集排布了納米級光傳感器。這個人造眼的部分感覺能力可與生物眼睛相媲美。科幻小說中經常出現擁有人造眼的機器人,還有能與人腦結合的仿生眼,給盲人帶來光明。
  • 科學家研發高仿真機械義眼 視覺功能直逼人眼
    【環球網科技綜合報導 記者 樊俊卿】多年來,科學家一直致力於研發具有可視功能的機械義眼,希望能以此為視覺受損的病患帶來重見光明的機會。海外科技資訊網站「Engadget」報導稱,近日,這項技術取得了實用性突破。
  • 安森美半導體最新的智能感知發展策略,以及全方位智能感知技術和方案
    汽車是非常傳統的行業,最近幾年,電力化和智能化的發展為這個行業帶來了新的動力,各種感知產品的應用使汽車變得更安全、更舒適。 機器視覺同樣是一個歷史很悠久的行業,其應用廣泛且多樣化,涵蓋了包括電子製造、平板檢測、機器人、物流等在內的多個細分市場。 目前,中國已成為全球機器視覺市場增長最快的國家。
  • AI技術加持色彩還原,揭秘紫光展銳圖像算法
    人類進入智慧型手機時代後,攝影方式也發生了巨大變化:用來拍照的不再只是鏡頭和傳感器了,背後還加載著一系列的圖像算法,它可以用更快的速度處理圖像,並獲得更好的拍攝效果。  好作品只能依賴專業攝影師的時代過去了,圖像算法引入到手機拍照應用後,讓人人拍出好照片成為可能。
  • 華為P40「全時超清」超越人類感知極限
    而近日發布的華為P40系列,更是超越了人類的感知極限,以全時超清的影像能力,再次樹立影像新標杆,吸引了無數用戶們的關注。那麼,對於大部分用戶們而言,華為P40系列的「全時超清」又有什麼樣的含義呢?今天我們就來聊一聊華為P40系列全時超清背後的秘密。
  • 2020年中國人工智慧手機白皮書—AI重新定義光感知
    > 智慧型手機光感知系統升級,切合當下消費者需求偏好,有望帶動智慧型手機市場走出瓶頸期。智慧型手機光感知系統主要由晶片、屏幕、算法及鏡頭組構成,鏡頭組組具體包含:鏡頭、音圈馬達、傳感器、模組、紅外濾光片。在智慧型手機光感知系統中,消費者體驗較為直觀的屏幕與鏡頭組在光感知系統中價值佔比約為34%和26%。全面屏以及後置多攝的應用,推動光感知系統價值升級,也為光感知系統體驗的優化和功能的豐富奠定堅實的硬體基礎。而為光感知系統提供穩健算力保障的晶片部分,價值佔比約為40%。
  • AI視頻已成為了物聯網前端感知的關鍵
    這是一臺可以監測出機器內可樂是否有貨,溫度是否夠冰涼,並且能夠聯網的販賣機。物聯網技術分為四個層次:感知技術、傳輸技術、支撐技術、應用技術。物聯網結構層次分為三層,自下向上依次是感知層、網絡層、應用層。感知層是信息採集的關鍵部分,是物聯網的核心,是物物相連的基礎,其主要功能是識別物體,採集信息。
  • 專訪藍芯科技|視覺感知維度下,移動機器人的大方向
    在國內移動機器人廠家將目光投向下遊的時候,藍芯科技始終沒有離開上遊最核心的移動機器人視覺感知技術。圍繞自己的核心技術——移動機器人深度視覺系統MRDVS,藍芯科技的產品已經從移動機器人產品往深度視覺產品延伸。
  • 視覺系統CCD和CMOS傳感器的特點與應用
    打開APP 視覺系統CCD和CMOS傳感器的特點與應用 電子發燒友網 發表於 2020-12-25 13:48:09 目前,CCD圖像傳感器和CMOS圖像傳感器(CIS)是被普遍採用的兩種圖像傳感器。今天,我們就來了解下這兩種傳感器的特點、應用等。 CMOS圖像傳感器產業鏈主要由上遊的晶片設計企業,中遊的晶圓代工廠、封裝企業和下遊的模組廠商及終端客戶組成。CMOS對供應鏈的拉動,在上、下、中遊都有體現。
  • 當滑雪這項世界最古老的運動遇上AI
    2015年,以色列創業團隊推出了一款帶有視頻聊天功能的RideOn滑雪護目鏡和頭盔,讓人們在滑雪的時候也能和親友實時分享。這款售價為599美元(約等於3800元人民幣)的滑雪護目鏡除了防刮、防水、除霧等基本功能,還配備了高像素的攝影機。
  • 科學家造出全球首個3D仿生眼:視覺和夜視能力甩人眼幾條街
    跟使用像相機一樣的二維圖像傳感器不同的是,EC-Eye是仿照具有凹曲線的真實視網膜建模的。這個表面布滿了一排微型光傳感器,它們則用來模仿人類視網膜上的光感受器。然後這些傳感器被連接到一束由液態金屬製成的電線上,這些電線起到視神經的作用。研究小組對EC-Eye進行了測試,結果顯示它已經能夠相對清晰地捕捉圖像。
  • AI發展熱點透視:《2019人工智慧發展報告》出爐
    圖靈測試認為,如果一臺機器能夠與人類展開對話而不能被辨別出其機器身份,那麼稱這臺機器具有智能。這一簡化使得圖靈能夠令人信服地說明「思考的機器」是可能的。後來,IBM科學家亞瑟·塞繆爾開發的跳棋程序,駁倒了普羅維登斯提出的機器無法超越人類的論斷,像人類一樣寫代碼和學習的模式,他創造了「機器學習」這一術語。