自動駕駛新驅動力:點雲算法如何釋放雷射雷達威力?

2020-11-26 中國測繪網

測繪網訊 2015 年,當時業界還在爭論:無人駕駛是該用雷射雷達還是用攝像頭。到 2016 年,事情發生很大的轉變,尤其某汽車公司 Autopilot 致死事故之後,業內漸漸覺得雷射雷達是非常重要的。

雷射雷達是自動駕駛不可或缺的傳感器

下圖是無人駕駛的偏算法層的系統框架。從左邊看,這是一個傳感器的輸入,如雷射雷達、攝像頭、毫米波、GPS、編碼器和 IMU。這些傳感器的數據輸入到系統的感知算法裡,對於這個感知算法,我們會將這些數據進行處理分析,如何將靜態的物體分離出來,並如何識別、分類與跟蹤動態物體。

 

無人駕駛的偏算法層的系統框架

高精度地圖的獲取很大程度依賴雷射雷達以及攝像頭。我們獲取高精度地圖後,結合 GPS 和 IMU、編碼器、實時感知環境的特徵,進行地圖匹配進行定位。對於路徑規劃和運動控制,最終是結合車輛的 CAN 總線,對車進行控制。

在感知方面,我們普遍使用的是雷射雷達、攝像頭、毫米波雷達三個是作為感知外界物體的傳感器。其中,雷射雷達可以做物體的識別、分類、跟蹤,攝像頭也可以做物體的分類和跟蹤。毫米波雷達主要用於對物體障礙物識別。

毫米波雷達、攝像頭和雷射雷達這三個傳感器,有一些重合點。這是由傳感器本身的性質決定,他們有各自不可或缺的功能。

毫米波雷達主要用還是在障礙物檢測;攝像頭很難得到三維物體的模型,包括它對於環境的幹擾也比較依賴這個光照的影響,但攝像頭對物體分類和跟蹤是非常好的;雷射雷達普遍用於定位、障礙物檢測、物體分類、動態物體跟蹤等應用。

其實在 2016 年之前,雷射雷達行業的發展還是比較緩慢的。但現在來看,包括上遊供應商和下遊客戶的緊迫需求,我們極力希望推動實現雷射雷達降成本化、可量產化。

我把雷射雷達目前分成兩類:掃描式雷射雷達和非掃描式雷射雷達。

1、掃描式雷射雷達

機械式旋轉雷射雷達(發射、接收、共軸旋轉的雷射雷達),這是目前比較成熟的,在下遊無人駕駛使用比較多的方案。比較有代表性的有 Velodyen、Ibeo,包括我們現在在量產的也是這種機械式的雷射雷達。混合固態也是機械式旋轉類的雷射雷達。

另外一種是 MEMS。基於 MEMS 的掃描式雷達目前屬於在研狀態,它的原理是通過 MEMS 掃描鏡來改變光路。

還有一種是相控陣雷射雷達(OPA),其實也屬於掃描式雷射雷達,因為它是通過逐點掃描的方式,即多個小天線之間發射的雷射的發射相位來改變光路而實現的。

2、非掃描式雷射雷達

Flash LiDAR 是發掃描式雷射雷達,發射的就是一個面陣的光,如瑞士的 Ledder Tech 研發就是 Flash liDAR 這類產品。

目前來看,其實行業現在的推動力挺大的,包括我們自己,主要的研發精力也放在固態雷射雷達上。我相信很快大家能看到這種低成本的雷射雷達,從研發、樣品到商用,可能會比原來預想的周期更快。因為不是一家雷射雷達公司在努力,而是整個產業鏈都在努力。

點雲是在同一空間倡導系下表達目標空間分布和目標表面特性的海量點雲數據。

點雲數據生成設備可以由雷射雷達或者深度相機產生。根據雷射雷達得到的點雲,包括三維坐標(XYZ)和雷射反射強度(Intensity)。

雷射雷達在自動駕駛中的應用:定位

雷射雷達在自動駕駛中的應用,最重要部分還是定位:位置確定了,無人車才知道要去哪裡、以及怎麼去。所以,確定「我在哪裡」是第一步,也是非常關鍵的一步。

現在定位用 RTK,差分 GPS ,也有用雷射雷達或者視覺去做。但 RTK 還是會受信號的幹擾。特別是在一些城市、建築和樹比較多的地方,以及進隧道、出隧道,它的信號容易中斷。

還有一個是基於視覺定位,它其實對於跟他視覺本身的特性有關,對環境的依賴比較強,比如逆光或雨雪天氣下,這種定位容易失效。

雷射雷達的定位,我們通過 IMU、慣性導航系統、編碼器和 GPS,得到一個預測的全局位置。當雷射雷達實時掃描單次的點雲數據後,我們會去結合單次的點雲數據進行匹配,並進行特徵提取。

這些特徵包括路沿、車道線等周圍點線面的特徵。對於高精度地圖,提取過特徵與實時提取的特徵進行匹配,最終得到精準的車本體速度,這是雷射雷達的定位過程。

雷射雷達的第二個應用:障礙物的檢測和分類。

對於障礙物檢測和分類來講,目前有應用視覺和雷射雷達,這兩者並沒有衝突。雷射雷達不依賴光照,它的視角是 360 度,計算量比較小,可以實時掃描,目前普遍用的是 100 毫秒以內的。雷射雷達在掃描的過程中,先識別障礙物,知道這個障礙物在空間中的位置,再根據存在的障礙物做分類。

如上圖,我們先拿到一個原始點雲數據,對地面點進行提取,對非地面點進行障礙物分割。

比如車、人,我們將這些障礙物分割成為獨立的個體,通過分割出來獨立的個體再去匹配,從而進行障礙物的分類和物體的跟蹤。

簡單言之,我們先去除地面點,得到障礙物,分割出障礙物,然後把障礙物分割出來從而進行分類跟蹤。

而跟蹤的過程,首先是分割點雲,通過點雲做關聯目標,我們知道上一楨和下一楨是否屬於同一個物體,再進行目標跟蹤,輸出目標跟蹤信息。

雷射雷達的應用現狀

今年 4 月份我們開始供貨,目前也了解到行業雷射雷達在應用上現狀。

首先就是傳感器缺乏,一方面是現在的雷射雷達比較貴,供貨周期也非常長,能夠普遍用起雷射雷達的公司並不多。而傳感器的缺乏,解決方案的不成熟、點雲算法人才積累太少,雷射雷達無法發揮最大威力。

對於無人駕駛團隊,他們可能除了雷射雷達的點雲算法以外,還做攝像頭算法、毫米波雷達算法以及多傳感器的融合,包括定位、路徑規劃、決策控制和改車等等。他們做的技術點非常多,無法聚焦,這導致他們被迫拉長戰線。

所以在今年 4 月,我們針對雷射雷達的解決方案提出了普爾米修斯計劃。我們希望這個計劃的本質是一個負責開放共享的態度,加快整個無人駕駛商業化落地。

整個普羅米修斯計劃的模塊還是基於雷射雷達能夠做什麼事來進行的,包括:定位、車道線檢測、路沿檢測、障礙物識別、障礙物分類與跟蹤的算法模塊。

不管是低速車,園區車還是物流車或是在高速公路上行駛的車輛,我們都希望自己能夠貢獻出一份力量。

上圖是基於雷射雷達車道線檢測和路沿檢測。基於雷射雷達的車道線檢測還是比較不錯的,路面上車道線一般是白色和黃色兩種,所以我們提前把反射強度的方式先做出來,這樣雷射雷達就很容易將提取車道線出來,不會因為白天和晚上受到幹擾。

而路沿檢測可以根據路沿的幾何形狀來做一些訓練,現在路沿十幾釐米的高度都能夠提取出來。

我們可以看上圖的有半部分:紅色表示提取的車道線,淺色是提取的路沿,中間是虛線,兩邊是實線。這個準確性還是不錯的,包括路面的左轉、右轉這些指示也能做出來。如果後續有多幀迭代的話,其實效果會更好。

雷射雷達做物體的跟蹤,相當於對每一個識別到的物體,都會計算,並且分割到底是自行車、卡車、行人還是私家車。

識別之後,除了我們知道自動駕駛本體車的速度以外,也可以跟蹤出前車的速度,以及前車距離本車的橫向和縱向距離。雷射雷達輸出的已經不是原始點雲數據,還有每個障礙物空間的位置和分類,到底是哪種類型,以及速度信息。

雷射雷達能做的事情有很多,包括定位、障礙物的檢測、分類和跟蹤、車道線的檢測、路沿檢測等等。在感知的工作裡,雷射雷達扮演了非常重要的角色。(測繪網 小會)

相關焦點

  • 雷射雷達加速自動駕駛汽車發展
    作為人工智慧的重要應用方向之一,近年來自動駕駛汽車的遠距離深度相機雷射雷達作為汽車理解三維空間的主流方案備受認可,不過雷射雷達目前大且貴,這使得該技術的進一步普及充滿挑戰。那麼,如何才能破解這些難題,從而讓雷射雷達更進一步推動汽車與人工智慧之間的結合與發展呢?
  • 智能駕駛車載雷射雷達關鍵技術與應用算法
    車載雷射雷達(laserdetectionandranging,LiDAR)因其具有可準確獲取目標的三維信息、解析度高、抗幹擾能力強、探測範圍廣、近全天候工作等優點,在智能駕駛環境感知系統中佔據了重要地位。智能駕駛這一特定情境對車載雷射雷達的硬體技術與應用算法的性能均提出了很高的要求,如應用於Level3由SAE提出的智能駕駛自動等級。
  • 汽車自動駕駛之雷射雷達行業深度報告
    雷射雷達:三維點雲建模構建傳感基石 路徑之爭:雷射雷達為什麼是 L4 自動駕駛不可或缺的傳感器? 工作原理:「發射-反饋」系統如何形成三維點雲信息截至 2019 年底,全國共有 25 個城市出臺自動駕駛測試政策;2020 年 2 月,中國國家發展改革委牽頭髮布《智能汽車創新發展戰略》,這是繼《中國製造 2025》 之後又一個重磅的戰略發布;2020 年,國家發改委首次官方明確「新基建」七大板塊, 雷射雷達作為終端傳感器設備,在自動駕駛、車路協同等智能交通、智慧城市領域的作用 不斷凸顯。
  • 雷射雷達vs純計算機視覺 自動駕駛的兩大流派
    雷射雷達流派和純計算機視覺流派一直在自動駕駛技術中的感知層解決方案上喋喋不休。雷射雷達派認為純視覺算法在數據形式和精度上的不足;純視覺流派則認為雷射雷達不必要且過於昂貴。本文將對雷射雷達、攝像頭以及毫米波雷達等主流傳感器、各自動駕駛公司的解決方案以及傳感器市場格局作介紹。
  • 自動駕駛系列課 | 雷射雷達功能拆解 看看為啥這麼重要!【附PPT】
    第二個考慮的維度是定位和地圖構建的精度,從維度上來看,雷射雷達遠遠優於這個基於視覺的方式。從第三維度(計算量需求)來看,雷射雷達的輸出是點雲。點雲這個詞給人感覺數據量很大,但是事實並不是。在這方面上目前有三個問題,第一個問題是傳感器缺失,速騰希望自己能夠在量產上,成本上,產品上更加給力,進而給大家提供穩定性和性價比更高的雷達。第二個問題是雷達還沒有充分發揮威力,我們在和很多客戶的溝通過程中發現了這點,最後是我們希望拋磚引玉,貢獻出自己的積累,讓大家加速整個自動駕駛落地。
  • 自動駕駛的寵兒!雷射雷達如何降價百倍走向普及【附PPT】
    導語:汽車產業經歷劇變,自動駕駛浪潮來襲。是被浪潮吞沒,還是屹立於浪潮之巔?如何摘得「人工智慧項目之母」桂冠,用智能代替雙手掌控車輛?從9月14日起,智東西重磅推出9堂自動駕駛系列課。
  • 雷射雷達疊加雷達,解決霧天自動駕駛
    雷射雷達疊加雷達,解決霧天自動駕駛 2020-11-20 10:52 來源:澎湃新聞·澎湃號·湃客
  • 雷射雷達廠商開啟自動駕駛激戰
    而在融合AI技術後,有了算法加持的雷射雷達,開始有了「思考能力」能夠真正解讀場景,並幫助汽車做出智能決策,這使其在自動駕駛領域的應用日益廣泛。從市場情況來看,雷射雷達產品正在從「看見」向「看懂」的方向發展。這種來自技術的變化,為下遊產業鏈自動駕駛行業的發展,帶來了諸多利好。首先,這種轉變對自動駕駛、機器人行業的智能化發展大有裨益。
  • 自動駕駛的眼睛 細述單線雷射雷達的作用
    實際上,目前我們提到的,包括自動駕駛、機器人、測繪用到的雷射雷達,基本上屬於這種直接探測類型的雷射雷達。有比較特殊的,比如測風、測速之類的雷達,一般會採用相干體制。  按應用分類,我們可以分得更多,比如:雷射測距儀、雷射三維成像雷達、雷射測速雷達、雷射大氣探測雷達,等等。
  • 深度解析自動駕駛雷射雷達技術原理、感知系統的發展趨勢
    PandarXT 基於整合了 Hesai 自主開發的 LiDAR ASIC 的新系統架構,是一種經濟高效的解決方案,專為多種應用而設計,包括無人物流,機器人,測量,安全,製圖和中低速自動駕駛。   在自主駕駛的環境中,雷射雷達是一種主動傳感器,通過發射雷射照亮周圍環境。通過處理從反射面接收到的雷射回波,可以精確測量距離。另一方面,基於雷射雷達的算法也進入了快車道。
  • 實現高級自動駕駛,一定要用雷射雷達嗎?
    用沃爾沃集團CTO的話來說就是,雷射雷達的應用是汽車邁向全自動駕駛的關鍵一步。既然雷射雷達是實現全自動駕駛的「關鍵一步」,那就是必不可少的一步。這一說法想必一定會得到國內外數十家雷射雷達廠商的紛紛點讚。所以,現在還來討論高級自動駕駛要不要配備雷射雷達的話題,似乎已經有些「不合時宜」了。對於自動駕駛來說,估計再也沒有比安全更重要的事情了。
  • 在自動駕駛中,單線雷射雷達能幹什麼?|雷鋒網公開課
    實際上,目前我們提到的,包括自動駕駛、機器人、測繪用到的雷射雷達,基本上屬於這種直接探測類型的雷射雷達。有比較特殊的,比如測風、測速之類的雷達,一般會採用相干體制。按應用分類,我們可以分得更多,比如:雷射測距儀、雷射三維成像雷達、雷射測速雷達、雷射大氣探測雷達,等等。不管是單線雷射雷達、多線雷射雷達或測繪雷射雷達,我們基本上可以將其劃分到雷射三維成像雷達的範疇。
  • 在自動駕駛中,單線雷射雷達能幹什麼?硬創公開課
    但是雷射雷達最大的缺點——容易受到大氣條件以及工作環境的煙塵的影響,要實現全天候的工作環境是非常困難的事情。雷射雷達分類雷射雷達的分類,如果從體制上劃分,主要有直接探測雷射雷達和相干探測雷射雷達。實際上,目前我們提到的,包括自動駕駛、機器人、測繪用到的雷射雷達,基本上屬於這種直接探測類型的雷射雷達。
  • 無人駕駛之雷射雷達深度剖析
    無人駕駛汽車怎麼實現自動駕駛呢?這背後一個關鍵技術就是LiDAR,即雷射雷達傳感器,俗稱光達,它也被稱為無人駕駛汽車的眼睛。雷射雷達是自動駕駛的關鍵技術Lidar大致分為機載和地面兩大類應用,其中機載雷射雷達是一種安裝在飛機上的機載雷射探測和測距系統,可以量測地面物體的三維坐標。早在上世紀七十年代,由美國航天局研發,LIDAR測繪技術空載雷射掃瞄技術開始了發展,並且速度飛快,約在1995年開始商業化。除了軍事領域的應用,雷射雷達也迅速向民用市場擴展。
  • 自動駕駛科普之雷射雷達的工作原理
    它是將雷射傳感器、GNSS、IMU和相機集成在一起的一個系統,通過各個傳感器的參數標定,可以精確計算出傳感器之間的位置偏差,以及不同坐標系間轉換所用到的旋轉角,從而將獲取的點雲數據的相對坐標轉換成大地坐標。總之可以邊走邊掃,而且掃出來的點全是大地坐標!
  • 自動駕駛的未來,是雷射雷達還是視覺識別?
    除此之外,調查顯示特斯拉Model 3的視覺算法訓練數據存在局限性。 一般自動駕駛的視覺訓練邏輯只能識別到車輛後部、側面 和 頭部,顯然特斯拉的工程師沒有想到有一天系統需要識別貨車車箱的頂部。
  • 雷射雷達:從光電技術角度看自動駕駛
    通過傳感器融合實現這些系統的同步運行,可以讓完全自動駕駛的車輛監視周圍環境,並警告駕駛員潛在的道路危險,甚至採取獨立於駕駛員的躲避行動以防止碰撞。  自動駕駛汽車還必須在高速狀態下區分和識別前方的物體。通過測距技術,這些自動駕駛汽車必須快速構建一張約100m距離內的三維(3D)地圖,並在高達250m距離範圍內創建高角解析度的圖像。如果駕駛員不在場,車輛的人工智慧必須做出最佳決策。
  • 弗勞恩霍研究所開發出新型微掃描鏡配合雷射雷達助力自動駕駛
    江蘇雷射聯盟導讀:據悉,來自弗勞恩霍夫光子微系統研究所IPMS的研究人員開發出新型微掃描鏡可對車輛周圍環境進行範圍超過200米3D掃描,這將對自動駕駛的安全性做出重要貢獻。在自動駕駛汽車中,先進的技術帶動了車輪,使乘客可以坐下來欣賞旅程。
  • 雷射雷達:智能汽車的下一仗
    去年馬斯克還吐槽「雷射雷達就像人身上長了一堆闌尾,闌尾本身的存在基本是無意義的」,「任何依賴雷射雷達的公司都可能無疾而終」。按理說,雷射雷達已經不在馬斯克的視野範圍內了,為何卻在這個時候因為雷射雷達而親自上陣懟小鵬汽車呢?有趣的是,在汽車圈子之外的華為也開始密集釋放關於量產車規級雷射雷達的消息。
  • 自動駕駛的眼睛:雷射、毫米波雷達&攝像頭三種技術產品之比較
    」的觀點後,在自動駕駛領域引起軒然大波。 qT1EETC-電子工程專輯目前無人駕駛汽車上主流的「眼睛」有四種:毫米波雷達、雷射雷達、超聲波雷達、攝像頭。雷射雷達的工作原理是通過雷射發生器向目標發射雷射束,然後根據從目標反射回來的波束與發射波束時間差比較,通過一系列數學算法和運算,可以得到目標的距離、方位、高度、速度、姿態、形狀等參數,從而構建3D環境感知圖(點雲圖)。