來源:映維網 作者 吳羽樺
跳蛛進化出了一種有效的深度感知系統,這使得它們能夠精確地突擊毫無戒心的獵物。
生物進化是一個令人沉醉的領域,而這方面的研究同時啟發了一系列的科技進步。以跳蛛為例,儘管大腦細小,但其依然具備令人印象深刻的深度感知能力,這使得它們能夠精確地突擊毫無戒心的獵物。受其啟發,哈佛大學約翰·保爾森工程與應用科學學院的研究人員開發了一種緊湊而高效的深度傳感器,並可用於微型機器人,小型可穿戴設備,或輕型虛擬實境/增強現實頭顯。這款組件將多功能扁超透鏡與超高效算法結合在了一起,只需單次捕獲即可測量深度。
論文第一作者、物理系博士後Zhujun Shi表示:「生物進化產生了各種各樣的光學配置和視覺系統,而它們都是針對不同的目的量身定製。光學設計和納米技術終於允許我們探索具有類似多樣性和效能的人造深度傳感器和其他視覺系統。」
完整論文已發布在《Proceedings of the National Academy of Sciences》。
當今大多數深度傳感器都使用集成光源和多個攝像頭來測量距離。例如,智慧型手機的面容ID利用數千個雷射點來映射人臉輪廓。這適用於搭載電池組件和快速計算組件的大型設備,但是對於功率和計算量有限的小型設備(如智能手錶或微型機器人)呢?
結果表明,生物進化提供了大量的選擇。
人類通過立體視覺來測量深度,這意味著當我們看著一個對象時,兩隻眼睛正在採集略有不同的圖像。請嘗試如下操作:將手指直接放在眼前,然後睜開和閉合雙眼。這時請留意手指位置的微妙變化?大腦會對兩個圖像進行逐像素檢查,然後根據像素的移動方式計算手指的距離。
電氣工程和計算機科學教授Todd Zickler和Ami Kuan Danoff指出:「這種匹配計算需要大量的計算負擔。人類擁有一個優秀的巨大腦袋來應付這種計算,但蜘蛛沒有。」
左側的兩個圖像是攝像頭傳感器捕獲的原始圖像。它們由超透鏡形成,並且模糊程度略有不同。研究人員從這兩幅圖像中實時計算出對象的深度,如右圖所示。
跳蛛進化出出一種更為有效的深度測量系統。每隻主眼都具有一些分層排列的半透明視網膜,它們可以測量具有不同模糊量的多個圖像。例如,如果一隻跳蛛用一隻主眼看著一隻果蠅,一個視網膜的果蠅會顯得更清晰,而另一個視網膜的果蠅則會變得模糊。這種模糊變化能夠編碼有關跳躍距離的信息。
在計算機視覺中,這種距離計算稱為離焦深度。但要復刻大自然,你需要搭載電動組件,並且可以隨時間變化捕獲不同焦點圖像的大型攝像頭。這限制了傳感器的速度和實際應用。
這時,超透鏡派上了用場。
應用物理學教授Federico Capasso及其實驗室已經證明,超透鏡可以同時產生包含不同信息的多個圖像。以這項研究作為基礎,Zhujun Shi團隊設計了可以同時產生兩個具有不同模糊度的圖像的超透鏡。
超透鏡(中間)捕獲3D場景的圖像,如放置在不同位置的蠟燭火焰(左),並利用受跳蛛眼睛啟發的高效計算機視覺算法來生成深度圖(右)。深度圖的顏色表示對象距離。較近和較遠的對象分別著色為紅和藍。
同屬於Capasso實驗室的Zhujun Shi表示:「不是像跳蛛那樣使用分層的視網膜來捕獲多個同時的圖像,超透鏡將光線分開,並在一個光電傳感器上並排形成兩個散焦不同的圖像。」
然後,Zickler小組開發的超高效算法將解釋這兩個圖像並構建一個用來表示對象距離的深度圖。
同屬於Zickler實驗室的博士後Qi Guo指出:「能夠一起設計超表面和計算算法令人感到非常興奮。這是創建計算傳感器的新方法,它為許多可能性打開了大門。」
Capasso解釋說:「超透鏡是一種顛覆性的技術,因為它們能夠更有效,更快速地實現現有和全新的光學功能,而且體積和複雜性要小得多。融合光學設計和計算成像方面的突破,我們開發出了這款新型深度攝像頭,而它將為科學和技術領域帶來廣泛的機遇。」
值得一提的是,這份研究得到了美國空軍科學研究所和美國國家科學基金會的支持。
原文連結:https://yivian.com/news/68373.html