最小無線可操控攝像機問世:可裝在甲蟲頭部,向手機實時傳輸視頻

2020-12-22 DeepTech深科技

華盛頓大學的工程師們設計了一種小巧、高效的機器人視覺系統,該系統總重量只有 250mg,相當於一張卡片重量的 1/10。研究人員將其固定在活甲蟲的身上,並能夠以 1-5 幀 / 秒的速度向智慧型手機實時傳輸視頻。

這項研究成果發表在最新一期的 Science Robotics 上。

在電影《蟻人》中,主人公通過縮小身體尺寸,可以隨意穿梭於各種巖石縫隙。更為震撼的是,通過昆蟲第一視角看到的景象,和我們的認知大為不同。

現在,華盛頓大學的科研人員讓電影情節變成了現實。副教授 Shyam Gollakota 帶領他的團隊,在微軟獎學金和美國自然科學基金會的資助下,設計了一款小到可以安裝在甲蟲背部的視覺系統,該系統可以通過藍牙裝置實時傳輸甲蟲第一視角畫面,通信範圍比足球場略大,為 120 米。

為什麼會選擇甲蟲?是什麼啟發了工程師將機械裝置和活體生物聯繫起來?這項研究始於對這樣一個問題的探索——如何實現微型機器人視覺功能?

長久以來,複雜的視覺系統必然伴隨大尺寸、高能耗,也就是說,只有大型機器人才配擁有視覺系統。而微型機器人,要麼無法安裝視覺裝置(尺寸過大),要麼必須帶一根長長的線——用來通信和供電,否則續航能力堪憂。

因此,如何給微型機器人設計一款低能耗、高續航、無線的視覺系統,成為機器人領域工程師們的重大挑戰。

為了解決這個難題,Gollakota 和他的團隊拋開工程領域,到生物學領域尋求答案。通過對一系列生物視覺系統的研究,工程師們發現了有意思的現象。

從低級物種到高級物種,生物體為視覺系統供給的能量是不一樣的。比如浮遊生物,雖然低級,但通過長期的進化,它們真正做到了視覺系統的「高性價比」,這恰恰是研究人員想在機器人身上實現的。

「高性價比」有兩個特徵:能省就省,夠用就好。

華盛頓大學的工程師們發現,人類作為最高等的生物,我們的眼睛和視覺皮質佔人體總重量的 0.6%,而昆蟲類,比如蒼蠅,該比例卻高達 2.5%-13%。

質量佔比越高,意味著能耗越大。

拿蒼蠅種族中的綠頭蒼蠅為例,且不說整個視覺系統,單單一個視網膜,就消耗了其代謝能量的 8%。

如此高的能耗,是自然界所無法接受的。因此在漫長的進化中,昆蟲 「學會」 了一整套節約能耗的辦法。

第一招,只在視網膜的一小片區域發展視覺功能。這有點 「集中優勢兵力打擊敵人」 的意味,既然視網膜耗能太高,昆蟲就縮小視網膜的視覺能力範圍。

第二招,多轉頭,少動身體。如果昆蟲想要獲得其他方位的畫面信息,不需要移動身體,它們的頭部可以獨立於身體轉動。轉動頭部顯然比移動身體更節約能量。更有甚者,頭也不轉,可以轉眼睛。

用工程師的話來說,這一招實現了「高效能收集視覺信息」。

了解到這些關鍵點,Gollakota 團隊嘗試將其應用在機器人視覺系統的設計中。

他們的規劃是,首先把設計的裝置固定在活體甲蟲背面,以測試其效果,然後用甲蟲大小的機器人替換甲蟲,最終實現帶有視覺系統的微型機器人設計。

Gollakota 等人設計的這一套機器視覺系統,可以說是昆蟲視覺系統的人工版本。

在解析度上,該系統採用的圖像傳感器精度和昆蟲相當,較低的解析度意味著更輕、更節約電量。最終的設計也體現了這一點,整套視覺系統總重 250mg,相當於一張卡片的 1/10 重量。

此外,工程人員把攝像頭安裝在了一個可以旋轉的機械裝置上,該機械裝置通過機載驅動器控制,可以轉動 60 度,並且能夠左右平移。此舉模擬了昆蟲的頭部功能,即在不移動身體的情況下獲得更大的視覺範圍。而平移功能允許攝像頭捕捉運動物體,甚至能夠拍攝全景照片。

最後,工程人員創造性地在視覺系統中添加一個特殊裝置——加速計,加速計可以檢測甲蟲是否處在運動狀態。只有當甲蟲處在運動狀態時,才觸發視覺系統的拍攝功能。

用參與項目的該校博士生 Vikram Iyer 的話說,「如果攝像頭一直工作,那整個視覺系統只能續航 1-2 小時。安裝加速計之後,續航提高到 6 小時」。

加入這一系列仿生設計,機器視覺系統的能耗比傳統方式低 24-86 倍。

最終的實驗結果令人滿意。由於整個裝置足夠輕便,甲蟲甚至可以背著 「設備」 爬樹。而通過智慧型手機操縱可旋轉的攝像頭,實現了全景拍攝。

機器視覺系統在甲蟲身上獲得了成功,團隊進而設計了一款甲蟲大小的微型機器人,搭載該視覺系統,取得了同樣好的實驗結果。

Gollakota 認為,通過大幅度降低傳統視覺系統的尺寸、功率與重量,將攝像頭的使用拓展到了以前不可能的新領域。

「視覺對溝通和導航都非常重要。當昆蟲四處移動時,捕捉和傳輸實時數據對農業產業、工業物聯網的發展非常有益,」 Gollakota 說。

同時,該團隊準備公開該項目的代碼,和所有研究人員共享。

在未來,他們計劃在 「低能耗」 上更進一步——徹底擺脫電池的限制,此舉可以通過利用太陽能實現。

相關焦點

  • 美科研人員研發新款微型攝像機 可裝在甲蟲背部
    研究人員將其固定在活甲蟲的身上,能夠以 1-5 幀 / 秒的速度向智慧型手機實時傳輸視頻。該系統可以通過藍牙裝置實時傳輸甲蟲第一視角畫面,通信範圍比足球場略大,為120米。華盛頓大學的研究人員開發了一種小巧、高效的機器人視覺系統,總重量只有 250mg,相當於一張卡片重量的 1/10。研究人員將其固定在活甲蟲的身上,能夠以 1-5 幀 / 秒的速度向智慧型手機實時傳輸視頻。
  • 美大學研發出可由甲蟲搭載的微型攝像機,可運作6小時!
    美國華盛頓大學研發出微型攝像機,搭載在甲蟲上可將其拍攝的畫面傳送到智慧型手機裡。(網絡圖片)用昆蟲機器人監控敵方行動不再是電影畫面了!美國華盛頓大學研發出微型攝像機,搭載在甲蟲上可將其拍攝的畫面傳送到智慧型手機裡,相關研究已刊載在Science Robotics期刊上。據報導,這款微型攝像機能以每秒5幀的速度傳輸黑白畫面,整個裝置的重量只有250毫克,是紙牌重量的10%左右。
  • 重量僅250毫克的微型攝像機有望用於生物學和探索領域
    幾十年來,許多人都對昆蟲和小生物的視角感到好奇,這種視角常常在電影中被描繪出來。然而最近,華盛頓大學研究人員發明的一種可無線操控的攝像頭,能安裝在昆蟲的背上,將這種視角帶給全世界。昆蟲攝像機這種可安裝在昆蟲背部的攝像頭能以每秒1到5幀的速度向智慧型手機傳輸視頻,並可以安裝在機械臂上進行60度的旋轉,提供高解析度的全景照片以及跟蹤移動物體的可能性。整個系統的重量約為250毫克。
  • 可手機掃碼上傳圖片!Switch版本更新:支持二維碼無線傳輸
    這次更新不僅增加了圖片視頻的無線傳輸功能,還添加了雲存檔的自動下載功能。「熱門」:可以看到好友玩過的遊戲和最近遊玩的遊戲;4、主機相冊內容可無線傳輸到手機上:手機掃描Switch二維碼就可開啟傳輸文件的功能,玩家可以使用這個功能把Switch的圖片和視頻上傳到手機。
  • 家裡安裝監控裝哪種攝像機好?
    經常有人問我:家裡裝監控,安裝哪種攝像機好?對於這個問題,我們先來了解下監控系統有哪幾種。監控系統大致分為2種,一種是無線看家寶(快閃記憶體卡錄像或雲存儲),一種是傳統的有線監控(硬碟錄像機)。無線監控(看家寶)系統組成:前端:無線攝像機、內存卡傳輸端:無線路由器(開通寬帶)預覽和回放: 手機
  • 研究人員為甲蟲創造了微型相機背包
    研究人員為甲蟲創造了微型相機背包 每年,像GoPro這樣的公司都設法將越來越多的功能集成到越來越不易磨損的越來越小的運動相機中。但是華盛頓大學的一組研究人員設法製造了一個實時流式無線攝像頭,這種攝像頭是如此之小,即使昆蟲可以戴上它。
  • 來感受蟻人視角:裝在昆蟲背上的GoPro,僅重0.25克
    而現在,華盛頓大學的研究人員開發了一種微型無線可操控攝像機,它也可以搭載在昆蟲身上,讓每個人都有機會看到蟻人眼中的世界。這個攝像頭安裝在一個可以旋轉 60 度的機械臂上,以每秒 1 到 5 幀的速度向智慧型手機傳輸視頻,允許觀看者捕獲高解析度圖像、全景拍攝或跟蹤移動的對象,且消耗最小的能量。
  • 美研發出可由甲蟲搭載的微型攝影機
    美國華盛頓大學研發出微型攝影機,搭載在甲蟲上可將其拍攝的畫面傳送到智慧型手機裡,相關研究已刊載在Science Robotics期刊上。 據報導,這款微型攝影機能以每秒5幀的速度傳輸黑白畫面,整個裝置的重量只有250毫克,是紙牌重量的10%左右。
  • 模擬攝像機和網絡攝像機網絡視頻監控方案
    由中山庫爾光電技術有限公司研發的庫爾網絡攝像機視頻監控系統,為遠程監控提供了全新的概念和更廣闊的空間,實現了基於流媒體的遠程實時監控、遠程遙控攝像機的功能,還擁有強大的用戶管理功能、良好的兼容性、方便的可擴展性、分布式管理等眾多優點,完全能夠替代傳統的模擬
  • 索尼發布兩款Handycam 4K攝像機新品
    它與前代產品相比,新品機身上均新增了快捷編輯按鈕,無需將視頻素材導入電腦剪輯,便可以生成影片,支持無線傳輸分享到手機平板設備。此外,FDR-AX60還搭載了電子取景器和手動對焦環,以方便手動對焦。,可直接進入快捷編輯菜單,無需其他硬體設備,機內附帶轉場效果和音樂,製作時可以選擇視頻時長,選用片段和背景配樂等。
  • 聯發科WiFi路由模塊MT76X8無線AP方案在物聯網行業中的應用
    集成了MT7688系列和MT7628系列的bojingnet_L107繼聯發科MTK整合了802.11 b/g/n 無線傳輸功能,採用MIPS24KEc/580MHz中央處理器(CPU)、5埠高速乙太網絡交換器或是單埠超高速乙太網絡PHY,以及USB 2.0主控制器、PCIe、SD-XC、I2S/PCM和多種適用慢速的I/O裝設備接口。
  • 電力無線網絡視頻監控系統的功能特點及應用方案
    通過網絡視頻監控系統,電站管理部門可隨時掌握實時的安全運行情況,便於做出正確的決策;也可實現非現場了解電站的安全運行情況,便於人員調配、減少人員冗餘、減輕人員勞動強度、提高工作效率;電站的工作人員以及外來人員也因為有視頻監控系統而主動或被動地遵守電站的生產秩序,從而達到防止各種事故發生的目的。
  • 科大訊飛推送真無線耳機新功能 為電影生成實時字幕
    科大訊飛推送真無線耳機新功能 為電影生成實時字幕時間:2020-12-10 16:44   來源:搜狐   責任編輯:青青 川北在線核心提示:原標題:科大訊飛推送真無線耳機新功能 為電影生成實時字幕 真無線耳機得益於其極高的便攜性和無拘束的佩戴感,無疑是未來可穿戴設備的行業趨勢。
  • PEAKDO 毫米波 HDMI無線擴展塢:一次解決N種辦公煩惱
    因此可以分辨相距更近的小目標或者更為清晰地觀察目標的細節。與雷射相比,毫米波的傳播受氣候的影響要小得多,可以認為具有全天候特性。和微波相比,毫米波元器件的尺寸要小得多。因此毫米波系統更容易小型化。毫米波的缺點大氣中傳播衰減嚴重。只適合短距離可視距離傳輸器件加工精度要求高。
  • 快捷編輯即時分享 索尼4K攝像機AX60評測
    在這個快眼球時代,照片已經不能迅速博得觀眾的眼球,所以越來越多的人們把視覺呈現從靜態照片轉移到影像視頻,這也正是現在VLOG盛行的原因之一。現如今手機都已經具備不錯的拍攝能力,前不久使用iPhone X拍攝的短片《三分鐘》,顛覆了大家對於手機拍攝視頻的印象,形成現象級的刷屏。確實,手機拍攝簡單且上傳快速,這些特點都是傳統攝像機所不具備的。
  • MAMAN發布影視專業無線麥克風WMIC-MATE2
    UHF雙通道,信號穩定輸出 WMIC-MATE2採用高配的UHF無線傳輸技術,優點就是穩定,抗幹擾強。
  • 小米米家智能攝像機雲臺版,在實時監控清晰度上有不俗的表現
    身在外地,也能查看家裡的實時畫面,智能攝像機的出現也將其變為現實。家庭智能攝像機會是相當一部分人的需求,通過對小米米家智能攝像機這款無線網絡攝像機的產品使用體會,讓大家對其有一個深入的了解,也為選擇合適的家用智能攝像頭提供一些參考。
  • 4K HDR視頻直播神器 索尼AX700攝像機
    尤其還要應對像實時企業活動視頻直播等沒有後期修改餘地的拍攝項目,但好在索尼 AX700攝像機的橫空出世就為我們了一個面相於個人用戶、視頻工作室的專業級視頻錄製以及直播拍攝解決辦法方案。它是目前索尼HandyCam中唯一支持4K HDR與S-log伽馬的攝像機,這些專業級的配置往往只會在廣播級攝像機中出現,可見索尼AX700的拍攝實力不容小覷。
  • 磁耦合諧振式無線電能傳輸技術的應用現狀
    無線電能傳輸技術因其獨特的傳輸優勢成為當下國內外研究的熱點課題,磁耦合諧振式無線電能傳輸(Magnetic Coupling Resonant Wireless Power Transfer, MCRWPT)技術以其在近場區傳輸的自身優勢成為當前最為熱門的無線電能傳輸方式之一。