AEye iDar融合雷射雷達及攝像頭數據 創建動態點雲方案

2020-12-24 蓋世汽車資訊

蓋世汽車訊 據外媒報導,AEye的iDar傳感器的探測距離為300米,可將360度深度數據與攝像頭數據相結合,旨在創建一款動態、可操控的點雲,AEye將其取名為全彩雷射雷達(True Color Lidar)。

iDar雷射雷達及攝像頭的數據採集量大,使系統的感知能力遠超傳統型傳感器。該傳感器可識別目標物,區分兩個同色目標物並感知環境的背景變化,如:小孩子在進入道路前會的轉頭動作。

iDar系統可承擔環境製圖的靈活性。利用軟體應用程式接口(API),車企可在傳感器內定製數千種機器學習算法,旨在調節點雲的解析度,但要視傳感器探查範圍內的目標物而定。該設備不僅能降低天空的解析度,還能提升行人或騎行者的動態像素數(dynamic pixel count)。例如,隨著車輛的接近,該設備將焦點鎖定在建築物上。

AEye宣稱,相較於競爭類產品,iDar系統的探測覆蓋率提升了16倍、幀頻提速10倍、節能表現提升了8-10倍,該系統還採用了模塊化設計。儘管iDar採用了定製設計的固態雷射雷達系統,該系統的其他組件都是現成的,且具有成本效益。

AEye於2013年展示其雷射雷達技術,該公司於2017年6月從Kleiner Perkins、空客集團風投公司(Airbus Ventures)、英特爾投資(Intel Capital)等公司募得1600萬美元的資金。今年初,AEye主導了與大學及車企共同開展的iDAR研發夥伴項目。(本文圖片選自venturebeat.com)

相關焦點

  • 深度學習基於攝像頭和雷射雷達融合的3-D目標檢測
    單目攝像頭充當2D目標提議和初始3D邊框預測的基本傳感器,而立體相機和雷射雷達視為自適應插入式傳感器,改善3D邊框的定位性能。對於原始觀測的每個觀察元素(例如,立體視覺的像素,雷射雷達的3D點),該方法將局部幾何模型建模為實例向量(instance vector)表示,代表每個元素相對於目標幀的3D坐標。
  • MLOD:基於魯棒特徵雷射雷達和攝像頭數據融合的多視點三維目標檢測
    註:這是一篇2019年9月發表在arXiv【1】雷射雷達和攝像頭數據融合的目標檢測論文。摘要本文介紹了一個多視圖標記的目標檢測器(MLOD)。檢測器將RGB圖像和雷射雷達點雲作為輸入,並遵循兩步目標檢測框架。區域提議網絡(RPN)在點雲的鳥瞰視圖(BEV)投影中生成3D提議。第二步將3D提議邊框投影到圖像和BEV特徵圖,並將相應的圖截取發送到檢測頭(detector head)以進行分類和邊界框回歸。
  • 高光譜&雷射雷達&傾斜攝影融合
    8月12日,北京安洲科技有限公司對中國林業科學研究院的410-Shark機載高光譜、Lidar50機載雷射雷達以及AZ3D-2機載傾斜攝影進行了設備驗收,在同一地塊分別進行了不同傳感器的影像數據飛行實驗,並進行了高光譜與雷射雷達的數據融合處理,實驗結果得到了用戶的一致好評。
  • 融合攝像頭+雷射:禾賽科技與百度Apollo發布自動駕駛研發套件Pandora
    這款自動駕駛開發者套件由一臺Pandar40雷射雷達、5個環視攝像頭(4個黑白,1個彩色)組成的視覺感知模組組成,搭載了由Apollo提供的多傳感器融合與感知識別算法。(搭載了Pandora套件的百度Apollo自動駕駛測試車)他表示,Pandora的推出是旨在解決自動駕駛技術研發企業在感知系統調校、傳感器選型、標定方面存在的痛點。
  • 攝像頭、毫米波雷達、雷射雷達誰會來投資
    C-V2X路側設施部署是車路協同場景中的核心組成部分,而其中路側環境感知設備視頻攝像頭、毫米波雷達和雷射雷達的布設被認為是交通環境感知的重要手段,是車路協同未來市場投資的重要方向。車載端環境感知設備由於存在感知盲區以及安裝成本過高,因此需要路側環境感知設備在交叉口、盲區、彎道、匝道等位置布設,以提升自動駕駛交通安全和效率。
  • 沒有雷射雷達,特斯拉能否在這場無人駕駛的進化中存活下來?
    雷射雷達 接下來就要說說雷射雷達這個最大的爭議了。 雷射雷達發射雷射束掃描目標的位置、速度。掃描的數據為,xyz為空間坐標,h是強度,還有一些其他信息。雷射雷達掃描的數據,叫點雲數據,點雲數據可以通過軟體可視化。
  • 離開百度自動駕駛事業部後,鮑君威要做300線雷射雷達
    自動駕駛汽車常見的傳感器中,有機會做到這兩點的是雷射雷達和攝像頭。對於行車比較重要的距離及物體識別信息,攝像頭一直在用深度學習的方法估算,但目前識別算法還不能做到和人一樣智能。而且分析單純的圖像數據需要耗費大量的計算資源,對嵌入式平臺的性能要求很高。雷射雷達是主動探測型傳感器,測距精度和準確度都優於攝像頭,分析三維點雲進行物體識別及測距所需的運算量也小於圖像。
  • iPhone12系列的相機亮點——雷射雷達攝像頭+Sensor-Shift技術
    LiDAR是一枚雷射雷達攝像頭,在它的支持下手機不僅可以實現AR測量功能,同時也提高了手機在暗光環境下的自動對焦能力(提升了6倍)。LiDAR功能可以在低光環境下自動對焦,同時適用於視頻和拍照,還可以做物體探測、房間掃描,同時也支持專業攝像系統,在夜景人像的拍攝上得到較大的提升。
  • 華為全球首發車規雷射雷達:12個攝像頭+13個雷達
    近日,華為在中國汽車工業協會主辦的T10 ICV CTO峰會上正式發布了車規級高性能雷射雷達產品和解決方案。  華為表示已經建立了第一條車規級雷射雷達的第一條Pilot產線,按照年產10萬套/線在推進。而這款雷射雷達將首先被應用在華為與ARCFOX極狐聯合打造的極狐HBT車型上。據悉,這款車將會在2021年投放。
  • 大陸集團投資機器人視覺和感知先鋒公司 AEye 以增強雷射雷達技術...
    科技公司大陸集團通過投資雷射雷達先鋒公司 AEye,進一步增強了其雷射雷達傳感器產品組合。除了攝像頭和雷達之外,雷射雷達傳感器也屬於自動駕駛的關鍵技術。大陸集團在雷射雷達傳感器方面積累了 20 餘年的專業知識和經驗。位於美國加利福尼亞州都柏林的 AEye 公司開發了一項長距雷射雷達技術,該技術結合了可放大的 1550nm 雷射器與擁有專利的反饋控制微機電系統(MEMS)掃描儀。
  • 汽車自動駕駛之雷射雷達行業深度報告
    雷射雷達:三維點雲建模構建傳感基石 路徑之爭:雷射雷達為什麼是 L4 自動駕駛不可或缺的傳感器? 自動駕駛的環境監測傳感器主要包括攝像頭和雷達兩類:1)攝像頭通過圖像識別技 術實現距離測量、目標識別等功能;2)雷達利用發射波和反射波之間的時間差、相位差 獲得目標物體的位置和速度等數據,按所使用的不同類型的波,雷達可以分為毫米波雷達、 雷射雷達、超聲波雷達三類。
  • 華為、小鵬爭相入局,雷達概念美股大漲, 雷射雷達成汽車行業下一...
    與此同時,在國內,小鵬汽車近日宣布將量產搭載雷射雷達的智能汽車;華為也於12月21日發布了其車規級雷射雷達產品和解決方案,而北汽旗下高端智電子品牌ARCFOX極狐同日宣布,ARCFOX極狐HBT將搭載華為96線中長距雷射雷達。在以攝像頭主導+毫米波雷達等配合的自動駕駛路線先聲奪人之後,雷射雷達主導的自動駕駛路線也迎來了全新商用風口。
  • 實現高級自動駕駛,雷射雷達是關鍵一步嗎?
    雷射雷達之所以能夠得到這一殊榮,關鍵在於超高的解析度、精度和強抗幹擾能力的優勢。具體來說,雷射雷達(LiDAR)是通過發射雷射束來測量視場中物體輪廓邊沿與設備間的相對距離,從而準確捕捉這些輪廓信息組成點雲,並繪製出3D環境地圖,測量精度可達到釐米級別。
  • 華為發布車規級雷射雷達,年產10萬套/線
    12月21日,華為首次面向行業正式發布車規級高性能雷射雷達產品和解決方案。 華為融合感知產品部總經理段忠毅介紹,雷射雷達是解決連續自動駕駛體驗的關鍵傳感器,其帶來的智能駕駛體驗將遠超任何一個已商用的智能駕駛系統。
  • 2020年汽車用雷射雷達行業研究報告
    自動駕駛的環境監測傳感器主要包括攝像頭和雷達兩類:1)攝像頭通過圖像識別技 術實現距離測量、目標識別等功能;2)雷達利用發射波和反射波之間的時間差、相位差 獲得目標物體的位置和速度等數據,按所使用的不同類型的波,雷達可以分為毫米波雷達、 雷射雷達、超聲波雷達三類。
  • 華為雷射雷達 上車!
    「華為有信心成為全球第一個真正車規的高線束雷射雷達的供應商」。這是華為在車載雷射雷達領域立下的目標。雖是豪言,但似乎所言非虛。12月22日,在中國汽車工業協會主辦的T10 ICV CTO峰會上,華為首次面向行業正式發布車規級高性能雷射雷達產品和解決方案。
  • 華為、小鵬爭相入局,雷達概念美股大漲,雷射雷達成汽車行業下一風口?
    此外,國內另一家自動駕駛初創企業Auto X則在布局以雷射雷達融合攝像頭的無人駕駛解決方案。「我們是以攝像頭和雷射雷達融合為主,還有加上毫米波雷達,3種進行融合。」12月23日,Auto X創始人肖健雄告訴時代財經,我們做的是無人駕駛,他們做的是有人的輔助駕駛,二者還是有所區別的。
  • 特斯拉:我為雷射雷達代言
    據一位前特斯拉工程師的說法,特斯拉採購 Luminar 的雷射雷達由來已久,在攝像頭做深度感知的時候,特斯拉會用雷射雷達輸出的點雲數據做 ground truth 進行比對。什麼是 ground truth? 知乎上有這樣一個問題:機器學習裡經常出現 ground truth 這個詞,能否準確解釋一下?
  • 遙感地球所雷射點雲數據處理免費軟體對外發布
    由遙感地球所數字地球重點實驗室王成研究團隊開發的「點雲魔方」(Point Cloud Magic,PCM)雷射雷達點雲數據處理與應用軟體正式對外發布。這是目前國內第一套專注於點雲數據處理及行業應用的免費軟體,該軟體可獨立運行於Windows 平臺,軟體已經過殺毒處理,用戶可通過網站(http://lidar.radi.ac.cn)免費下載並永久使用。
  • 官宣:極狐HBT量產搭載華為雷射雷達方案第一車
    來源:新浪財經12月21日,華為首次面向公眾正式發布車規級高性能雷射雷達產品和解決方案。同一天, ARCFOX極狐HBT諜照曝光,顯示該車型成為首個搭載了華為三個雷射雷達方案的智能電動車。極狐HBT是ARCFOX極狐聯合華為打造的全新高性能智能電動汽車,將搭載3顆96線車規級雷射雷達,6個毫米波雷達,12個攝像頭,13個超聲波雷達,同時搭載算力可達352Tops的華為晶片,該車型將於明年亮相發布!