受跳蛛啟發,哈佛大學開發緊湊高效的深度傳感器

2021-01-09 砍柴網

來源:映維網 作者 吳羽樺

跳蛛進化出了一種有效的深度感知系統,這使得它們能夠精確地突擊毫無戒心的獵物。

生物進化是一個令人沉醉的領域,而這方面的研究同時啟發了一系列的科技進步。以跳蛛為例,儘管大腦細小,但其依然具備令人印象深刻的深度感知能力,這使得它們能夠精確地突擊毫無戒心的獵物。受其啟發,哈佛大學約翰·保爾森工程與應用科學學院的研究人員開發了一種緊湊而高效的深度傳感器,並可用於微型機器人,小型可穿戴設備,或輕型虛擬實境/增強現實頭顯。這款組件將多功能扁超透鏡與超高效算法結合在了一起,只需單次捕獲即可測量深度。

論文第一作者、物理系博士後Zhujun Shi表示:「生物進化產生了各種各樣的光學配置和視覺系統,而它們都是針對不同的目的量身定製。光學設計和納米技術終於允許我們探索具有類似多樣性和效能的人造深度傳感器和其他視覺系統。」

完整論文已發布在《Proceedings of the National Academy of Sciences》。

當今大多數深度傳感器都使用集成光源和多個攝像頭來測量距離。例如,智慧型手機的面容ID利用數千個雷射點來映射人臉輪廓。這適用於搭載電池組件和快速計算組件的大型設備,但是對於功率和計算量有限的小型設備(如智能手錶或微型機器人)呢?

結果表明,生物進化提供了大量的選擇。

人類通過立體視覺來測量深度,這意味著當我們看著一個對象時,兩隻眼睛正在採集略有不同的圖像。請嘗試如下操作:將手指直接放在眼前,然後睜開和閉合雙眼。這時請留意手指位置的微妙變化?大腦會對兩個圖像進行逐像素檢查,然後根據像素的移動方式計算手指的距離。

電氣工程和計算機科學教授Todd Zickler和Ami Kuan Danoff指出:「這種匹配計算需要大量的計算負擔。人類擁有一個優秀的巨大腦袋來應付這種計算,但蜘蛛沒有。」

左側的兩個圖像是攝像頭傳感器捕獲的原始圖像。它們由超透鏡形成,並且模糊程度略有不同。研究人員從這兩幅圖像中實時計算出對象的深度,如右圖所示。

跳蛛進化出出一種更為有效的深度測量系統。每隻主眼都具有一些分層排列的半透明視網膜,它們可以測量具有不同模糊量的多個圖像。例如,如果一隻跳蛛用一隻主眼看著一隻果蠅,一個視網膜的果蠅會顯得更清晰,而另一個視網膜的果蠅則會變得模糊。這種模糊變化能夠編碼有關跳躍距離的信息。

在計算機視覺中,這種距離計算稱為離焦深度。但要復刻大自然,你需要搭載電動組件,並且可以隨時間變化捕獲不同焦點圖像的大型攝像頭。這限制了傳感器的速度和實際應用。

這時,超透鏡派上了用場。

應用物理學教授Federico Capasso及其實驗室已經證明,超透鏡可以同時產生包含不同信息的多個圖像。以這項研究作為基礎,Zhujun Shi團隊設計了可以同時產生兩個具有不同模糊度的圖像的超透鏡。

超透鏡(中間)捕獲3D場景的圖像,如放置在不同位置的蠟燭火焰(左),並利用受跳蛛眼睛啟發的高效計算機視覺算法來生成深度圖(右)。深度圖的顏色表示對象距離。較近和較遠的對象分別著色為紅和藍。

同屬於Capasso實驗室的Zhujun Shi表示:「不是像跳蛛那樣使用分層的視網膜來捕獲多個同時的圖像,超透鏡將光線分開,並在一個光電傳感器上並排形成兩個散焦不同的圖像。」

然後,Zickler小組開發的超高效算法將解釋這兩個圖像並構建一個用來表示對象距離的深度圖。

同屬於Zickler實驗室的博士後Qi Guo指出:「能夠一起設計超表面和計算算法令人感到非常興奮。這是創建計算傳感器的新方法,它為許多可能性打開了大門。」

Capasso解釋說:「超透鏡是一種顛覆性的技術,因為它們能夠更有效,更快速地實現現有和全新的光學功能,而且體積和複雜性要小得多。融合光學設計和計算成像方面的突破,我們開發出了這款新型深度攝像頭,而它將為科學和技術領域帶來廣泛的機遇。」

值得一提的是,這份研究得到了美國空軍科學研究所和美國國家科學基金會的支持。

原文連結:https://yivian.com/news/68373.html

相關焦點

  • 研究人員受跳蛛啟發研發超透鏡 結合高效算法可測量深度距離
    以跳蛛為例,儘管它們的大腦很小,卻有著令人震驚的深度感知能力,從而可讓它們從遠於身體長度幾倍的距離精確地撲向毫無戒心的目標物。受此種蜘蛛的啟發,美國哈佛大學約翰·保爾森工程與應用科學學院(Harvard John A.
  • 跳蛛眼睛啟發未來科技:讓納米機器人擁有更優秀光學能力
    跳蛛的這一能力給了哈佛大學科研人員以啟發,他們為微型機器人以及其他微型技術開發了一種精密的新透鏡或稱為「金屬透鏡(metalens)」。
  • 以蜘蛛的眼睛為靈感的緊湊型深度傳感器
    圖片了來源:哈佛大學上圖所示為深度傳感器實時工作的情形,它能夠捕捉半透明蠟燭火焰的深度。
  • 來自跳蛛的機器人靈感!
    來自南非開普敦大學的三名研究人員展示了他們的研究成果,「一種受蜘蛛啟發的牽引線使移動機器人能夠進行空中俯仰矯正。」   Stacey Shield、Callen Fisher和Amir Patel在研究一種新的方法來實現移動機器人的「空中俯傾斜扶正」方面做出了重大貢獻。
  • 【前沿】來自跳蛛的機器人靈感!
    來自南非開普敦大學的三名研究人員展示了他們的研究成果,「一種受蜘蛛啟發的牽引線使移動機器人能夠進行空中俯仰矯正。」Stacey Shield、Callen Fisher和Amir Patel在研究一種新的方法來實現移動機器人的「空中俯傾斜扶正」方面做出了重大貢獻。
  • 受摺紙啟發,哈佛大學團隊打造微型外科機器人:可進行精密手術
    哈佛大學團隊新近開發出一種微型外科機器人,它只有網球大小,僅有 1 枚硬幣的重量,但是它成功地完成了一項困難的模擬手術任務。哈佛大學維斯研究所教授 Robert Wood 和索尼公司的機器人工程師 Hiroyuki Suzuki 合作,他們受摺紙啟發,創造了一種新的微型運動中心遙控機械手,名為「mini-RCM」。這項研究極大地縮小了外科手術機器人的尺寸。
  • 哈佛大學研發受章魚啟發的觸手機器人 能輕鬆抓住活螃蟹
    受此啟發,哈佛大學約翰·保爾森工程與應用科學學院(SEAS)和北京航空航天大學的研究人員開發了一種帶有吸盤的軟機器人觸手,該觸手可以適應許多不同的情況。哈佛大學發布了一段視頻,顯示它處理從胡桃木到健身球的所有事情。論文的主要作者、哈佛大學博士August Domel說道:「我們的研究是第一個量化臂的錐角以及彎曲和抽吸的組合功能的研究,這使得單個小型抓具可用於多種物體,否則將需要使用多個抓具。」 有關觸手機器人的論文本周發表在《 Soft Robotics》上。
  • 科學家闡釋安德遜跳蛛八隻眼的獨特視覺
    圖片來源:Science/AAAS  敏銳的視覺加上致命而精準的突襲,跳蛛可謂是無脊椎動物世界中的貓。幾十年來,科學家一直糾結於跳蛛微小的神經系統如何掌控如此複雜的感知及捕獵行為。對安德遜氏跳蛛(Hasarius adansoni)進行的一項新研究終於抓住了最關鍵的一環——一種與眾不同的深度知覺形式。
  • 微觀世界 跳蛛
    跳蛛因為喜歡捕食蒼蠅,又叫蠅虎,在浙江的衢州及奉化一帶叫做「蒼蠅老虎」。跳蛛的體色絢麗多彩,在陽光下常呈現金屬光澤。雌、雄蛛的體形和大小差別不大,但色彩和斑紋常有明顯的差異。雄蛛遇雌蛛時,揮舞其豔麗的第 1足,體左右搖晃,向雌蛛求偶。如雌蛛為同種,則用足作出回答的訊號。
  • 跳蛛眼神好辨色有絕活
    ZUREK 這隻Habronattus pyrrithrix雄性跳蛛利用鮮豔的色彩和引人注目的舞蹈吸引雌性同伴。 一些雄性跳蛛豔麗的色彩和炫麗的舞技旨在吸引雌性,這同時意味著,這個物種須得具備識別火警紅和亮綠色的能力。然而,它們的眼睛如何感知某種特定顏色卻一直是個謎。
  • 跳蛛作戰有「伎倆」
    圖片來源:Cynthia Tedore 雄性跳蛛不能只靠「打情罵俏」獲得配偶
  • 受章魚啟發的可穿戴式傳感器
    粘附在皮膚上的可穿戴電子設備是健康傳感器技術的新興趨勢,因為它們具有監視各種人類活動(從心率到步數)的能力。但是,找到將設備粘貼到身體上的最佳方法一直是一個挑戰。現在,一組研究人員報告了受章魚「吸盤」啟發的基於石墨烯的粘合劑生物傳感器的開發中國化工網okmart.com。
  • 闢謠:跳蛛的飼養方法跟捕鳥蛛一樣?不,跳蛛通常更適合新手飼養
    而遊獵型的蜘蛛一般沒有固定狩獵區域,而是會四處遊走主動尋找獵物,跳蛛就是後面這種。跳蛛無論是在鄉村還是城市中都頗為常見,特別是綠化帶、牆壁上和磚瓦縫隙附近,只要留心去找,總能發現跳蛛忙碌的小小身影。另外,跳蛛最引人注目的大概要數它bulingbuling的大眼睛了。跳蛛一共有八隻眼睛,四隻在頭胸部的正前方,四隻在頭胸部的側方和側後方。
  • 潮科技 | 哈佛大學開發出一種具有生物相容性的柔性可穿戴傳感器
    據麥姆斯諮詢報導,美國哈佛大學工程學院的研究人員開發出了一種安全、精確的力和應變傳感器,可以直接連接到手指上進行監測。這種傳感器可以長時間連續工作,幾乎沒有延時地測量力和應變。這是一項可喜的研究成果,因為之前開發的類似器件響應緩慢,並且輸出跟施加的力不能成比例地線性變化。此外,此前採用的導電液如果發生洩漏,並不完全安全。
  • 「大眼萌」小跳蛛 不足豆粒兒大卻視力超群
    幼年跳蛛的頭部更小,不及它們父母的百分之一,但視力似乎也一樣好。研究人員試圖解釋剛出生的跳蛛為什麼會擁有這種非凡的能力。「即使那些害怕蜘蛛的人也會覺得小跳蛛很有趣——它們會跳舞,還會吟唱動作感很強的歌,」內森·莫爾豪斯(Nathan Morehouse)說道。作為共同作者,莫爾豪斯在的《視覺研究》(Vision Research)上發表了一項研究成果。剛開展這項研究時,莫爾豪斯就職於美國匹茲堡大學,研究結束時,他已經前往美國辛辛那提大學了。
  • 澳大利亞孔雀跳蛛
    近來,他開始對另一種小的節肢動物著迷,這是一種澳大利亞特有的色彩斑斕又靈巧的微小蜘蛛——孔雀跳蛛。孔雀跳蛛僅在澳大利亞出沒,身長只有3毫米。雄性孔雀跳蛛能用鮮亮的色彩和迷人的舞姿來吸引雌性。這種多毛的小昆蟲如此可愛,甚至能贏得那些害怕蜘蛛的人們的芳心。奧拓每周大約花費40個小時去尋找觀察並給這種蜘蛛拍照。
  • 當孔雀跳蛛拿起光劍……
    之前在imgur上看到的一個很有趣的改圖,搭著舊文一起發了_(:з」∠)_給萌萌的孔雀跳蛛p上光劍,感覺太逗了……
  • 跳蛛有強大的「感覺」能力
    你可能從沒注意到一隻跳蛛穿過起居室,但它卻注意到了你。
  • 跳蛛具有360度視野 主眼有「手電筒」功能
    ,都會避開人們,而跳蛛則表現出無所畏懼。如果你在跳蛛面前晃動一個螺絲,它一定會攻擊,這就像小貓攻擊線繩一樣。」據悉,伊莉莎白是美國麻薩諸塞州大學安默斯特分校心理學系教授,是生物和進化生物學領域一位資深研究員。  她強調稱,網絡上大量錯誤信息顯示跳蛛的蜇咬具有很大的危險性,事實上跳蛛很少蜇咬人類,即使出現這種情況也是極個別現象,被跳蛛蜇咬後出現的紅斑會很快消失。
  • 紫外線求偶:驚現跳蛛奇妙「情愛」世界(圖)(1)
    承擔該項課題的主要負責人李代芹教授告訴記者,他們發現,經陽光或紫外線照射的跳蛛能吸引異性跳蛛,缺乏紫外線照射的跳蛛就會被忽略。      因此,紫外線在異性蜘蛛之間的求偶過程中扮演重要角色。跳蛛的前中眼有著銳利的視覺,能夠分辨敵人、配偶和捕食它的動物,並能區分顏色。  ———實驗對象———為什麼選擇跳蛛?