分享(二)丨LiDAR點雲數據

2021-02-24 遙感學報


圖片來源於網絡

雷射雷達技術(「光探測和測距」)在遙感界蓬勃發展,應用已較為廣泛。例如空中雷射掃描(ALS),可用於大規模建築、道路和森林測量;地面雷射掃描(TLS),可用於室內外環境中更詳細但速度較慢的城市測量;移動雷射掃描(MLS)精度比TLS低,但由於傳感器安裝在同一輛車上而具有更高的效率。

圖片來源於網絡

隨著這些技術發展,近年來可用的三維地理數據和處理技術數量激增。針對三維城市點雲的分析,已有許多半自動和自動的方法。這是一個有著良好發展前景的研究領域。然而,對於最佳的檢測、分割和分類方法還沒有達成共識。因此,小編推薦8個LiDAR數據集供大家使用,希望不斷提出新的檢測、分割和分類方法。

本期分享的LiDAR數據集如下:

1.     WHU-TLS點雲數據集

2.    Oakland 3-D點雲數據集

3.    Paris-rue-Madame數據集

4.    IQmulus & TerraMobilita數據集

5.    District of Columbia數據集

6.    semantic3d數據集

7.    Paris-Lille-3D數據集

8.    DublinCity數據集

武漢大學空間智能研究所課題組結合近十年來的數據積累,聯合慕尼黑工業大學、芬蘭大地所、挪威科技大學、代爾夫特理工大學發布全球最大規模和最多樣化場景類型的TLS點雲配準基準數據集。

本次公開的WHU-TLS基準數據集涵蓋了地鐵站、高鐵站、山地、森林、公園、校園、住宅、河岸、文化遺產建築、地下礦道、隧道等11種不同的環境,共包含115個測站、17.4億個三維點以及點雲之間的真實轉換矩陣。此外,該基準數據集也為鐵路安全運營、河流勘測和治理、森林結構評估、文化遺產保護、滑坡監測和地下資產管理等應用提供了典型有效數據。

圖1  WHU-TLS基準數據集

參考文獻:

Dong Z., Liang F., Yang B., Xu Y., Zang Y., Li J., Wang Y., Dai W., Fan H., Liang X., Stilla U., 2020. Registration of large-scale TLS Point Clouds: A Review and Benchmark. ISPRS J. Photogramm. Remote Sens. (In press)

Oakland 3-D數據是使用Navlab11和側視的LMS雷射掃描儀收集的。數據採集點位於賓夕法尼亞州匹茲堡奧克蘭市的芝加哥大學校園。數據以ascii格式提供:x, y, z標籤置信度,每行一點,空格作為分隔符。還提供了相應的vrml文件(.wrl)和標籤計數文件(.stats)。數據集由兩個子集(part2,part3)組成,每個子集有自己的本地參考幀,其中每個文件包含10萬個三維點。對訓練集/驗證集和測試集進行了篩選,並將其從44個標籤重新映射到5個標籤中。

參考文獻:Daniel Munoz, J. Andrew (Drew) Bagnell, Nicolas Vandapel and Martial HebertConference Paper, Proceedings of IEEE Computer Society Conference on Computer Vision and Pattern Recognition (CVPR), June, 2009

Paris-rue-Madame數據集由三維移動雷射掃描儀收集得到。數據收集於法國巴黎第六區的一個街道rue Madame,試驗區包含從rue Mézières至rue Vaugirard的160 m長的街道;數據獲取時間為2013年2月8日13:30。

該數據集是在TerraMobilita項目的框架下開發的。它是由位於法國普裡斯帕裡斯蒂奇礦山的機器人實驗室(CAOR)的LARA2-3D三維雷射掃描儀獲得的。數據標註是由法國楓丹白露礦業中心(MINES ParisTech)的數學形態學中心(CMM)以人工輔助的方式進行的。

數據集包含兩個ply文件,每個ply文件包含有1000萬個點。每個文件包含一個點列表(x, y, z, reflective, label, class),其中x, y, z對應於Lambert 93和altitude IGN1969(grid RAF09)參考坐標系中的地理參考坐標(E, N, U),reflective是雷射強度,label是分割後獲得的對象標籤,class是對象類別。

圖3 GT_Madame1_2.ply文件點雲的快照,由Z坐標值、反射率、對象標籤和對象類著色。

參考文獻:A. Serna, B. Marcotegui, F. Goulette and J.-E. Deschaud "Paris-rue-Madame database: a 3D mobile laser scanner dataset for benchmarking urban detection, segmentation and classification methods". ICPRAM 2014.

IQmulus & TerraMobilita數據集

IQmulus & TerraMobilita數據集是一個比賽數據集,數據包含由3億個三維點組成的點雲數據,數據於2013年1月在法國的一個城市密集區域獲取。該數據集是在iQmulus和TerraMobilita項目的框架下生成的。它由法國國家測繪局(IGN)開發的MLS系統Stereopolis II獲取。數據標註由IGN的MATIS實驗室以手動方式進行。

在這個數據集中,數據存儲為ply文件格式,整個三維點雲被分割和分類,即每個點包含一個標籤和一個類。因此,檢測分割分類方法的逐點評價成為可能。

所有坐標對應於Lambert 93和altitude IGN1969(grid RAF09)參考系統中的地理參考坐標(E, N, U),反射率為雷射強度。已從XY坐標中減去偏移量,目的是提高數據精度。每個文件包含以下屬性:

(float32) X, Y, Z:Lambert 93系統中的笛卡爾地理參考坐標

(float32) X, Y, Z:原始坐標

(float32) reflectance:後向散射強度校正距離

(uint8) num_echo:回聲的數量(處理多個回聲)

每個參與者提供的每個經過處理的文件一定是包含原始點的PLY文件(順序相同),它們的原始屬性和兩個附加屬性如下:

由於數據集的每個點都包含一個id和一個類,因此將以逐點的方式執行計算。

圖4 數據標籤(左)和類別(右)示例

參考文獻:Bruno Vallet, Mathieu Brédif, Andrés Serna, Beatriz Marcotegui, Nicolas Paparoditis. TerraMobilita/IQmulus urban point cloud analysis benchmark. Computers and Graphics, Elsevier, 2015, Computers and Graphics, 49, pp.126-133. 

https://hal.archives-ouvertes.fr/hal-01167995v1

華盛頓的LiDAR點雲數據可供任何人在Amazon S3上使用。該數據集由首席技術官辦公室(OCTO)通過哥倫比亞特區地理信息系統計劃管理,包含整個特區的平鋪點雲數據以及相關元數據。點雲中的每個點都已根據以下模式進行了分類。

semantic3d提供一個帶有大標籤自然場景的3D點雲數據集,總計超過40億個點。它還涵蓋了多種多樣的城市場景:churches, streets, railroad tracks, squares, villages, soccer fields, castles等。semantic3d提供的點雲已使用最先進的設備進行靜態掃描,包含非常精細的細節。

semantic3d數據集三維場景中的語義分割評估有一個框架,該框架提供:

參考文獻:Hackel T, Savinov N, Ladicky L, et al. Semantic3d. net: A new large-scale point cloud classification benchmark[J]. arXiv preprint arXiv:1704.03847, 2017.

Paris-Lille-3D是點雲分類的基準數據集。數據由法國兩個不同城市(巴黎和裡爾)的移動雷射系統(MLS)產生。點雲已完全被手工標記為50種不同的類別,以幫助對社區進行自動點雲分割和分類算法的研究。數據的每個文件均以單獨的ply文件存儲。數據的匯總見表1,每個ply點雲文件均包含10個屬性:

x, y, z (float) : 點的位置

x_origin, y_origin, z_origin (float) : LiDAR位置

GPS_time (double) : 點雲獲取時間

reflectance (uint8) : 反射率

label (uint32) : 點雲所屬標籤

class (uint32) : 點雲所屬類別

表1 Paris-Lille-3D數據集匯總

參考文獻:Roynard X, Deschaud J E, Goulette F. Paris-Lille-3D: A Point Cloud Dataset for Urban Scene Segmentation and Classification[C]//Proceedings of the IEEE Conference on Computer Vision and Pattern Recognition Workshops. 2018: 2027-2030.

DublinCity數據集是都柏林大學學院(UCD)的城市建模小組通過ALS設備掃描都柏林市中心的主要區域(大約5.6 km²)獲得的。在總共的14億個點雲中包含大約2.6億個標記點。標記區域位於點雲的最密集採樣部分,並且被航空影像完全覆蓋。

數據集被標註為3個級別共13個類(圖7):

Level 1:此級別包含粗略的標籤,包括4個類別:(a)Building;(b)Ground;(c)Vegetation;(d)Undefined。建築物都是可居住的城市結構(例如房屋,辦公室,學校和圖書館)。地面主要包含位於地形高程的點。植被類別包括所有類型的植物。未定義的點是那些不太受歡迎的點,可包含在城市元素中(例如垃圾桶,裝飾雕塑,汽車,長凳,電線桿,郵政信箱和非靜態物體)。大約10%的被標記為未定義的點主要是河流,鐵路和建築工地。

Level 2:在此級別中,級別1的前三個類別進一步精細分類。建築物被標記為屋頂和外牆;植被被分為不同的植物(例如喬木和灌木叢);地面點分為街道,人行道和草地。

Level 3:包括屋頂(例如屋頂窗和天窗)和外牆上的任何類型的門窗。

參考文獻:S M Iman Zolanvari, Susana Ruano, Aakanksha Rana, Alan Cummins, Rogerio Eduardo da Silva, Morteza Rahbar, Aljosa Smolic. 2019 DublinCity: Annotated LiDAR Point Cloud and its Applications. 30th BMVC, September 2019.

申明:本期發布的網站內容均不代表本號觀點,本號旨在提供參考素材以便學習交流。

圖片來源於網絡

雷射雷達(雷射探測及測距)主要用雷射器作為發射光源,由發射系統、接收系統 、信息處理等部分組成。它利用雷射對地球表面進行密集採樣,以產生高精度的 x,y,z 測量值。

雷射雷達系統發射的雷射脈衝會從地表面和地表上的物體(植被、建築物和橋梁等)反射,發射出一個雷射脈衝可能會以一個或多個回波的形式返回到雷射雷達傳感器。任何發射出的雷射脈衝在向地面傳播時,如果遇到多個反射表面則會被分割成與反射表面一樣多的回波。

圖片來源於網絡

最先返回的雷射脈衝是最重要的回波,它與地表最高的要素相關聯,如樹頂或建築物頂部。多個回波可以檢測向外發射雷射脈衝的雷射腳點內的多個對象高程。中間的回波通常對應於植被結構,最後的回波常對應於裸露地表。

經過後處理,從空間上進行組織的雷射雷達數據被稱為點雲數據。初始點雲是 3D 高程點的大集合,其包括 x 、y 、z 值以及 GPS 時間等屬性。在初始雷射雷達點雲經過後處理後,可對雷射遇到的特定表面要素進行分類。任何雷射束在測量過程中遇到的物體(如地面、建築物、森林冠層、高速公路)構成了雷射點雲數據。

編輯:薇薇

審校:雪兒

指導:梧桐君

聲明

歡迎轉載、轉發本號原創內容,轉載信息請與本號聯繫授權,標註原作者和信息來源為《遙感學報》。

本號轉載信息旨在傳播交流,其內容由作者負責,不代表本號觀點。文中部分資料來源於網絡,如涉及作品文字、圖片等內容、版權和其他問題請在20日內與本號聯繫,我們將在第一時間處理。《遙感學報》擁有最終解釋權。

微信加群

為便於學術交流,提供優質服務,《遙感學報》建立了微信群。需要加群的小夥伴,請加小編個人微信入群,並備註:姓名+單位。營銷廣告者勿擾。

微推轉載、合作聯繫:

E-mail:jrs@radi.ac.cn  或  微信後臺留言。

相關焦點

  • 移動端三維重建APP匯總LiDAR掃描技巧
    來三次方哇,三次方提供體系化、結構化的AR/VR課程,這裡不僅有ARVR,還有遊戲開發、AI、CV、大數據等。唯有愛、用戶與學習不可辜負~哈嘍艾薇巴蒂,我是範特西。首先祝大家新年快樂哇,牛年牛氣沖天,「 🐂 」轉乾坤。
  • ICCV 2021 | PMF: 基於視覺感知的多傳感器融合點雲語義分割方法
    /p/419187044目錄2.模塊一:Perspective projection3.模塊二:Two stream network with residual-based fusion modules4.模塊三:Perception-aware loss今天,我將分享一個 ICCV 2021 中的工作,基於視覺感知的多傳感器融合點雲語義分割方法
  • 喪鐘已鳴,AI將點雲模型BIM化可取代BIM翻模員
    今年初,美國老牌的GIS技術公司Geo+在科羅拉多州丹佛的一個團隊負責的點雲處理軟體visionlidar新版本中,已經可以利用人工智慧技術,將掃描後的點雲模型進行智能的構件化
  • SLAMer ,深度學習,軍用專用無線發展史,蘋果LiDAR,華為LiDAR,銅線/光纖,驍龍480 5G,陸奇講話,
    語義分析是將通過傳感器接收到的信息與預先映射的感官數據資料庫和知識庫進行合併。結果,它被表示為語義描述符,我們通過匹配描述符提出並執行數據關聯,然後最終識別對象。卡耐基梅隆大學博士後Judy、上海交通大學電院繆瑞航博士分別分享了語義SLAM在無人系統中的應用、語義在SLAM中的應用。
  • 《導航與控制》2020年第一期文章摘要【量子成像與數據處理】
    ,對Walsh基和二值離散餘弦基單像素成像進行了對比研究。 李凱1,張永生2,童曉衝2,楊偉銘1 ,董鵬3(1.軍事科學院系統工程研究院後勤科學與技術研究所,北京 100071;2.戰略支援部隊信息工程大學地理空間信息學院,鄭州 450001;3.北京航天控制儀器研究所,北京 100039)摘要:單光子雷射雷達獲取的點雲數據存在大量噪聲,
  • 直播回顧丨Apollo 6.0系列公開課②雷射雷達感知技術解析
    雷射雷達感知的流程,從拿到點雲數據開始,先是對點雲做一些必要的預處理,比如去掉一些異常值的點,只截取一定範圍內的點雲。就是左邊這張點雲,通過對其進行編碼,轉換成算法更能理解更抽象的特徵數據,然後提取出關鍵特徵解碼成我們需要的障礙物的包圍框,就是右圖中那些綠色的框。雷射雷達感知模塊使用的核心算法--PointPillars模型。PointPillars模型是一種3D障礙物檢測算法,只用點雲數據,不用圖像等其他傳感器的數據,就能又快又好地得到最終檢測結果。
  • 基於深度學習的三維點雲綜述part2-3D物體檢測與跟蹤
    ,包含點雲形狀分類,點雲檢測和跟蹤,點雲分割,以及部分相關的數據集。此外,他們將一個二進位道路mask與沿著通道維度的BEV表示串聯起來,以聚焦於移動物體。由於高清地圖並不是隨處可見,他們還提出了一個在線地圖預測模塊來估計單個雷射雷達點雲的地圖先驗信息。這種地圖感知方法在TOR4D和KITTI數據集上性能優於PIXOR和Fast and furious的方法。但其對不同密度點雲的泛化性能較差。
  • 好課分享:極簡英語課程丨百度網盤雲學習高清完整
    今日百度雲好課分享:好課分享:極簡英語課程丨百度網盤雲學習高清完整高清完整,對好課分享:極簡英語課程丨百度網盤雲學習高清完整 高清完整 感興趣的朋友可以學習參考此課程可以在線觀看,百度網盤分享給你1080P高清完整版!
  • 自動駕駛中車輛的如何使用點雲定位?
    Kim, 「Deeplo: Geometry-aware deep lidar odometry,」 arXiv preprint arXiv:1902.10562, 2019. [19] K. Ji, H. Chen, H. Di, J. Gong, G. Xiong, J. Qi, and T.
  • Apollo問答丨三個16線雷射雷達如何在本地做標定融合?
    讓我們一起看看本周的精選問答吧~~若你有更好的回答或建議,歡迎留言或加入開發者交流社群一起討論分享!各位技術大牛也可以到小程序回答問題獲得相應積分,參加社區布道師評選。   ENJOY THE FOLLOWING
  • Optech Announces New Airborne Lidar Sensor: Orion H300
    Coupled with its OmniSTAR™-capable GPS receiver, the new Optech Orion H300 is also the first commercial airborne lidar sensor to produce high-resolution, real-time, point cloud files in LAS format
  • ICCV 2021 | PMF:基於視覺感知的多傳感器融合點雲語義分割方法
    Motivation已有基於多傳感器數據的語義分割方法,比如RGBAL[3]和PointPainting[4],採用球面投影的方式將點雲投影到圖像上,獲取相關的像素信息,然後將相關的圖像像素投影回點雲空間,在點雲空間上進行多傳感器融合。然而這種方式會導致相機傳感器中的數據損失嚴重,如圖1左邊所示,汽車和摩託車在投影之後紋理、形狀等視覺感知信息都嚴重丟失。
  • 【泡泡點雲時空】PointMixup:點雲數據增強
    Snoek來源:ECCV 2020編譯:張金來審核:Lionheart歡迎個人轉發朋友圈;其他機構或自媒體如需轉載,後臺留言申請授權      本文通過點雲樣本之間的插值介紹了點雲的數據增強。在圖像域中,通過插值進行的數據增強已被證明是一種簡單有效的方法。
  • 三維雷射點雲數據建模
    常見的建模軟體有3Dmax、cad、草圖大師、revit等,在規則模型建模中,我們常會用到3Dmax建模,在這裡就以3Dmax為例來說明其在點雲建模應用的經驗
  • 打造江西智慧消防龍頭企業丨江西朵朵雲網絡科技有限公司成立
    6月18日,上饒市大數據產業投資發展有限公司參股子公司江西朵朵雲網絡科技有限公司成立大會及揭牌儀式在華為雲數據中心隆重舉行。集團公司黨委書記、董事長胡保才,黨委副書記、總經理黃海親臨現場並為公司隆重揭牌。會議由集團公司黨委委員、副總經理、大數據公司董事長李連輝主持,江西朵朵雲公司全體員工出席。
  • 如何用NumPy讀取和保存點雲數據
    前言最近在學習點雲處理的時候用到了Modelnet40數據集,該數據集總共有40個類別,每個樣本的點雲數據存放在一個TXT文件中,每行的前3個數據代表一個點的xyz坐標。我需要把TXT文件中的每個點讀取出來,然後用Open3D進行顯示。怎麼把數據從TXT文件中讀取出來呢?
  • R系列丨基於可視化的描述數據分布(二)
    今天我們繼續學習一下,使用R中的ggplot2包進行數據的可視化描述吧。散點圖是研究兩個連續變量之間關係的有力工具,現在我們用ggplot2包繪製散點圖,數據為自帶數據mpg(看到代碼,非常希望您可以親自動手實踐)。
  • 專題丨家庭影音中心:打造私有雲(二)
    其它的家庭私有雲服務提供商還包括了WD/威騰電子、D-Link/友訊、Seagate/希捷、ThinkPadStack、ORICO等等,他們主要還是採用NAs、路由器、硬碟盒等方式結合而成,從而實現個人云盤的功能
  • 關於TopoDOT點雲數據處理軟體
    TopoDOT是一套成熟的點雲數據處理及應用系統,全面具備點雲數據的存儲管理、精度檢核、點雲分類、特徵自動提取、智能分析、高效建模
  • PDPS-3D點雲數據應用(上)
    PointCloud點雲是表示3D系統的一組數據點,通常由3D掃描儀創建。點雲中的點表示掃描的三維物體的外表面,如圖1。