無人機傾斜影像三維建模中的模型精細化

2021-03-06 GIS前沿

摘要:無人機傾斜影像製作三維模型,速度快、成本低,成為城市三維建模的首選。 而無人機傾斜影像三維建模中,數據冗餘、模型 變形、影像缺失等多種問題常常會影響建模效果。本文針對無人機傾斜影像三維建模中的問題,提出了一系列相應的模型精細化 處理技術,使三維模型更加形象、逼真。

 關鍵詞:無人機傾斜影像  三維建模  模型變形  影像缺失  模型精細化 

傾斜影像是同時從多個角度採集的影像數據, 利用傾斜影像製作三維模型,不僅使高昂的三維建 模成本大大降低,而且有效提升了三維建模的速度 和效率。 

目前,無人機傾斜影像構建的三維模型,為智慧城市建設及地形複雜的地質災害監測等提供了 全面、準確、詳細的三維地理信息,廣泛應用於多個領域。 然而,無人機傾斜影像三維建模實踐中, 在影像預處理、空中三角測量、模型建立後等各技術 環節,還存在數據冗餘、模型變形、影像缺失等多種 問題。

筆者針對這些問題,提出了一系列相應的技術措施,使無人機傾斜影像三維建模實現了模型精細化。

無人機傾斜影像三維建模的關鍵技術包括數據 預處理、空中三角測量、多視影像密集匹配、紋理映 射等[2]。 

傾斜影像數據預處理主要為格式轉換、旋 轉影像、畸變差改正和增強處理。空中三角測量是以航空像片上量測的像點坐標為依據,採用嚴密的 數學模型,按最小二乘法原理,採用少量地面控制點 為平差條件,快速求解影像的定向及地面點加密問 題[3]。

 傾斜影像的空三解算是將傾斜影像轉換為正射影像的過程,包括影像預處理、影像聯合平差、 基於特徵點的影像匹配和正射影像的生成等步驟。 

通常所用的影像匹配方法有基於像方灰度的匹配算 法,如相關函數法、協方差函數法、相關係數法、差平 方和法、差絕對值法、最小二乘影像匹配法等,還有一種影像匹配方法是基於像方特徵的匹配算法,如 金字塔多級影像匹配算法、SIFT算法等[4]。 

SIFT算 法在特徵點提取的數量上有明顯的優勢,是從一幅 圖像中根據設定的閾值找到一個局部特徵向量集, 可以很好地進行局部目標的識別與匹配存在較大變 形如旋轉、縮放、尺度改變的影像。 

紋理映射是三維 模型製作流程的最後一步,也是增強模型視覺效果 的關鍵。 通俗地講,紋理映射就是二維到三維的映 射關係。 

將紋理空間中的紋理像素映射到屏幕空間中的像素的過程,其實質是建立從屏幕空間到紋理 空間及紋理空間到景物空間的兩個映射關係[5]。 

複雜的三維模型具有複雜的表面,需要多幅來自不 同視點的影像作為紋理圖,才能為整個模型進行紋理映射。 

2.1  影像預處理 


2.1.1  影像畸變差校正

由於相機中心投影的特性,焦平面上不同區域 對影像的放大率不同而造成像片中心至像片邊緣的 變形依次增大。一般情況下,輕微的畸變對像片質 量影響不大,但是如果建築物畸變太嚴重會歪曲拍 攝實物的幾何特徵,需要對像片進行畸變校正。 影像畸變差校正的方法是:打開MapMatrix 軟 件—工具—數位相機影像校正,然後打開去畸變工 具—添加影像—填寫校正參數—校正。校正界面如圖1所示

參數設置包括:坐標及單位定義、解析度、成像 中心、校正參數、添加影像、網格大小、畸變去除。 設置好上述參數並檢查無誤後,點擊「校正」按 鈕,即可進行畸變差去除,完成後可在輸出文件夾生 成校正好的TIF和TFW文件。 

(1) 用相機檢校參數填寫見表1。 

(2) 用Pix4D自檢校參數填寫見表2。 

2.1.2  數據冗餘與數據篩選方案

由於傾斜影像建模需要獲取側面紋理信息,且 實際地物情況複雜,因此,航攝重疊度設計偏高,採 集的影像數據量龐大,存在很大數據冗餘[6]。 為了高效、快速建模就必須對影像進行篩選。 

數據篩選具體方法為:首先對研究區域獲取的 POS數據進行編輯(POS數據編輯器),然後保存並 生成 KML 文件,其次將 KML 文件導入到 GoogleEarth中編輯屬性,更改圖標、顏色(如圖2 所示), 並把航線和影像設置為「貼於地面」(如圖3所示), 以便挑選。

挑選原則主要是將航線與影像高度設置為「貼 於地面」,根據所需區域判斷該區域上方有哪幾張 影像,然後選擇離它最近的影像。 如圖3橢圓區域, 可以在保證重疊度的前提下選擇 DSC50214.jpg、 DSC50173.jpg、DSC50215. jpg、DSC50213. jpg 和 DSC50250.jpg這5張影像。 


2.2  空中三角測量 


2.2.1  模型變形及模型精細化處理 

空中三角測量像片缺失是由於像片及POS參 數質量問題,匹配時出現錯誤,導致建模後期存在空 洞或模型變形。 像片缺失如圖4所示,圖中用圈圈 起來的是缺失的像片,模型變形如圖5所示。

針對空中三角測量時出現的模型變形,模型精 細化的處理方法有兩種。 第一種方法為:

 (1) 將像控點刺於相應像片中,同一地物至少 出現在3張像片上,像片控制點的目標影像應清晰, 易於判刺和立體量測。 像控點點位如圖6所示。

(2) 區域網布點方案為:對於兩條和兩條以上 的平行航線採用區域網布點時,要求如下: a. 航向相鄰平面控制點間隔基線數可參照 式(1)進行估算[7] 

式中,ms 為連接點(空三加密點)的平面中誤差,單 位為毫米);K 為像片放大成圖的倍數);mq 為視差量 測的單位權中誤差,單位為毫米);n 為航線方向相鄰 平面控制點的間隔基線數。 b. 旁向相鄰平面控制點的航線跨度見表3。 

c. 航向相鄰高程控制點間隔基線數可參照 式(2)進行估算[8] 

 式中,mh 為連接點(空三加密點)的高程中誤差,單位為米(m);H 為相對航高,單位為米(m));b 為像片 基線長度,單位為毫米(mm));n 為航線方向相鄰平 面控制點的間隔基線數。 通過對航片刺入控制點,保證一個控制點至少 出現在3張像片上,像片刺控制點如圖7所示。 然 後進行空中三角測量計算像片的位置姿態參數,找 回丟失的航片,對於邊緣丟失的航片,選擇繼續通過 刺入控制點找回航片或將航片刪除,完成空中三角 測量航片缺失及模型變形問題的處理,處理好的模 型如圖8所示。

第二種方法為:對於帶狀測區,可以採用分區建模的方法進行空中三角測量,然後進行三維重建,最 後利用相鄰區域公共點對各區域的模型進行接邊, 可防止模型變形。 圖9為分區域建模的結果,圖10 為分區建模合成的結果。 

2.2.2  不同建模方法比較 

方法1:已經過畸變的像片加原始POS數據(經 緯度數據+HPR角元素系統)。 

方法2:未經過畸變的像片加原始POS數據(經 緯度數據+HPR角元素系統)加畸變參數。 

方法3:已經過畸變的像片加像片外方位元素 (XYZ+DPK角元素系統),然後在Smart三維中進行 空三加密,空三Setting步,選擇「adjust」。 

方法4:已經過畸變的像片加像片外方位元素, 然後在Smart三維中進行空三加密,空三Setting步, 選擇「compute」。 

試驗1:利用同一測區的數據,運用方法1、方 法3、方法4在Smart三維軟體中分別進行空中三角 測量。 方法1用時最長,為5.5h,且空三加密成果變形,像片丟失 4 張,如圖 11 所示。方法 3 用時 1h,空三加密成果無變形,像片丟失2 張,如圖12 所示。 方法4用時2.5h,空三加密成果無變形,像 片丟失11張。 通過對3種方法的比較,方法3效果 最好,因此在有外方位元素的前提下,可以直接利用 方法3進行三維建模。

試驗2:利用同一測區的數據,運用方法1、方 法2在Smart三維軟體中分別進行空中三角測量。 利用方法1進行空三的過程中用時6.5h,像片丟失 15張,而且丟失的像片全部為航線拐角處,如圖13 中用圓圈標出來的地方。 因為拐角處的像片畸變比 較大,因此應該刪除拐角處的像片,然後再進行空中 三角測量。 利用方法 2 進行空三的過程中用時 8.5h,像片丟失19張,而且模型變形嚴重,如圖14 所示。 通過比較,方法1效果較好,因此在進行三維 建模時,可以首先對像片進行畸變校正。

利用Smart三維進行三維建模,各種數據來源 主要包括相機(單鏡頭、五鏡頭)、像片(經過畸變的 像片、未經過畸變的像片)、POS數據(經緯度+HPR 角元素系統、差分POS、經過空三加密獲取的外方位 元素)、像控點(GoogleEarth、RTK)。 

通過對試驗1、試驗2的對比,得出五鏡頭相機 獲取的數據+經過畸變校正的像片+經過空三加密得出的外方位元素+使用RTK測得的像控點方法, 三維建模精度最高且用時最短。 

2.3  模型變形與紋理缺失的模型精細化處理 


2.3.1  模型變形與紋理缺失 

傾斜影像獲取數據的死角或數據點關聯不足的 地方,在模型匹配時會造成模型扭曲變形,主要是建 築物或地物的底腳部位[9]。 房屋結構變形如圖15 所示。 水面、玻璃等表面無或少紋理,匹配不到特徵 點而產生漏洞,如圖16所示。 旗杆、鐵塔、路燈、小 於一定厚度的廣告牌等,由於匹配截面過小,不能產 生足夠多的特徵點,從而造成模型缺失,路燈變形如 圖17所示。

2.3.2  模型精細化處理 

使用DPModeler軟體採用高解析度的航空影像 通過透視成像原理,快速提取建築物輪廓,自動紋理 映射,完成建模[10 ̄11]。 其中通過傾斜影像多角度觀 測建模,模型和影像完全套合,模型具有精確的三維 坐標信息,實現了模型貼圖自動從影像中採集,一鍵 完成模型貼圖[12]。 通過創建多級金字塔的影像結 構,支持超過一億像素的影像無縫調度,可以自動生 成真正射影像,修正建築物的投影差,消除遮擋陰影 的問題,實現了對Smart三維自動建模中模型變形 的精細化處理。 

(1)Smart三維輸出的數據格式為OSGB格式, DPModeler無法直接讀取 OSGB 格式的數據,因此 需要通過osgConv軟體將OSGB格式的數據轉化為 DPModeler可以識別的OSGB格式。

(2) 將數據導入DPModeler中進行模型精細化 處理。 對於模型不精細或變形的地方,通過「平面 選擇」工具,選擇需要修飾的模型範圍,然後通過重 建工具,進行模型重建,設置內收值,完成地面的 縫補。 

(3) 在三維視圖中,顯示刪除的Mesh,根據顯 示的Mesh在三維自由視圖中,通過製作模型、自動 紋理映射步驟完成模型的重建,如圖18所示。

圖18中,最左邊為相機布局視圖,其中不同灰 度的點分別代表垂直影像、該範圍內的傾斜影像、計 算機優先選擇的影像。 

(4) 在紋理自動映射步驟,若紋理不清晰或不 完整,可以將該影像直接導入PS中進行處理,處理 完後,再導入DPModeler中進行紋理映射。 房屋精 細化處理結果如圖19所示,水面精細化處理結果如 圖20所示。

(5) 對於鐵塔、路燈、旗杆、小於一定厚度的廣 告牌,處理方法為在Smart三維中導出為OBJ格式 的數據,然後導入3dsMax中進行模型精細化處理, 完成製作模型與紋理映射步驟,最後再導入 Smart 三維中。 路燈精細化處理結果如圖21所示。

2.4  模型側面缺失紋理信息的處理方法 

若測區四面環山,會造成測區高差較大,無人機 拍攝影像具有一定難度,因此只能用單鏡頭的相機 俯視拍攝。 由於影像數據是從空中俯視拍攝的,模 型缺少側面紋理信息,導致地面低處模型不完整。為彌補這一不足,可以利用地面拍攝影像與俯視拍 攝結合進行影像的獲取。 

針對模型側面缺失紋理信息處理方法有兩種: 

(1) 利用地面拍攝的影像進行三維建模,然後 替換單鏡頭俯視拍攝的建模成果,進行空地融合。 

(2) 在低空對模型欠佳的地區進行無人機傾斜 影像採集,對於植被覆蓋區,進行正射影像採集,由 於高差較大,可對有房子的地區進行低空傾斜影像 的採集,確保地物紋理完整。 

利用無人機傾斜影像進行三維模型製作是目前 廣泛採用的三維建模方式,本文通過對無人機傾斜 影像三維建模實踐中經常遇到的問題進行分析,提出了一系列的三維模型精細化處理方法,以期對無人機傾斜影像三維建模實踐有一定的參考和借鑑的價值。 

來源:《測繪通報》

作者:邱春霞 董乾坤 劉榮華 雷蕾

—版權歸原作者所有,如有侵權請立即聯繫

這樣使用地形圖就會洩密,你知道嗎?

無人機傾斜攝影技術在農村不動產確權中的應用

無人機實景三維建模在水利BIM中的應用

用手機玩轉Smart3D驚豔三維建模

五鏡頭傾斜相機即將被淘汰....

相關焦點

  • 三維模型重建與航線規劃(傾斜攝影)
    我們的"三維模型重建"是什麼?
  • 三維地圖:精雕細琢還原真實世界
    國家政策為突破技術壁壘,使三維技術真正走向大眾提供了有力支撐。如今,「飛入尋常百姓家」的三維技術對現實世界的虛擬化、智慧化、可視化模擬,摒棄了二維空間體驗差,識圖難等缺點,「三維場景+影像」通過還原真實世界,讓人們能夠身臨其境,體驗更加直觀,為政府決策提供了科學的依據。
  • 傾斜影像密集匹配三維點雲自動識別分類研究
    實景三維具有直觀性、真實性和可量測的優點,是目前測繪地理信息支撐新型智慧城市建設、新型基礎設施建設的重要手段。其中,利用傾斜攝影方式進行mesh模型生產是一個主要的技術方法,在實景三維建設中承擔了主力軍的角色。但mesh模型是非結構化數據,僅僅是「一張皮」,不容易被計算機識別、理解和分析,例如難以進行自動化地物分類、信息提取等,這在很大程度上影響了對實景三維成果的深度利用和價值挖掘。
  • 開啟平民化航測新時代,大疆行業應用助力測繪地理信息產業發展
    在「現代工程測量技術及發展」分論壇上,中國工程院院士張祖勳將貼近攝影測量定位為繼垂直攝影、傾斜攝影之外的第三種攝影方式,他特別肯定了以航測無人機為代表的先進手段對地理信息數據化生產的積極作用。  在DJI 大疆創新協辦的無人機與自然資源智能感知分論壇上,自然資源部經濟管理科學研究所所長黃楊發表了《面向國土空間規劃的實景三維技術應用探索》的報告,自然資源部經濟管理科學研究所黃楊所長表示:無人機技術的快速發展、5G 時代的來臨,為自然資源監測手段帶來革命性突破。
  • BIM與GIS集成的三維建模講解
    本文概述了多種集成方法,主要介紹了基於SuperMap 軟體平臺實現兩者集成的方法應用,其中,精細模型數據由Revit 軟體構建,使用JavaScript 語言進行開發,並通過iServer 向網絡發布三維地圖服務。
  • 傾斜攝影相機雙鏡頭和五鏡頭到底那個好?
    傾斜攝影技術作為一項已經成熟應用的新興測繪技術,被越來越多的測繪人和行業應用者所接收和使用,傾斜攝影技術搭配無人機系統更是讓這種技術在輕便化、經濟化、實用化、高效化的方面上不斷取得突破。鏡頭焦距——用於無人機航測的相機焦距一般是調焦到無窮遠,鏡頭長焦距,保證無人機掛載下幾百米航高下仍然能夠獲取高解析度地面影像。
  • Wit3D軟體輕鬆實現手機攝影三維建模
    利用Wit3D全自動實景三維建模軟體,可以輕鬆實現手機攝影三維建模。Wit3D全自動實景三維建模軟體作為一款國產實景三維建模軟體功能十分強大,不單單只應用於傾斜攝影,同時還可以針對於文物保護以及小物體建模。今天小編就帶大家來了解一下如何用手機玩轉Wit3D建模。1.
  • AIRLOOK發布超算平臺,用AI實現建模語義化和自動修模
    以「還原世界的樣子」為發展願景,國內空間高精度數據運營商AIRLOOK正式發布面向實景三維數據生產和雲端數據服務的超算平臺DataMaker。市場中,無論在專業測繪地理信息行業,還是以地理信息為底層數據支持的眾多行業領域,對於三維地理信息建模的直接痛點無外乎以更高的精細度,或能夠以更高的生產、迭代效率支撐相關業務的需求。
  • 來賓合山供電局:無人機智能建模加快推進智能巡檢常態化
    近日,來賓合山供電局黨員突擊隊成員陳秋達操控無人機對10千伏裡仰線開展智能建模工作,至此,該局31條無人機智能巡檢試點線路全部完成建模。「以往線路發生故障,我們都是以「人工巡檢」的方式進行查找,現在引進無人機智能巡檢,不僅節省了人力物力,縮短巡視時間,還極大地減少了傳統人工巡檢的安全風險。」
  • 無人機航測在測繪數據獲取等方面具有廣闊前景
    ,具有機動靈活、高效快速、精細準確、作業成本低、適用範圍廣、生產周期短等特點,在小區域和飛行困難地區高解析度影像快速獲取方面具有顯優勢,隨著無人機與數位相機技術的發展,基於無人機平臺的數字航攝技術已顯示出其獨特的優勢,無人機與航空攝影測量相結合使得「無人機數字低空遙感」成為航空遙感領域的一個嶄新發展方向,無人機航拍可廣泛應用於國家重大工程建設、災害應急與處理、國土監察、資源開發、新農村和小城鎮建設等方面
  • 傾斜攝影兩座山:城市高樓區與高落差山地區域數據採集難點分析
    02 城市高樓區域數據採集 隨著實景三維中國項目即將開展,智慧城市建設項目也將迎來增長,城市區百米以上高樓的建模任務是繞不開的話題。傾斜攝影技術雖然在建築普遍低矮的農村地籍測量項目中應用良好,但是在高樓區域的運用上卻存在較大問題。
  • 三維數位化三維雷射掃描技術是連接BIM模型和工程現場的有效紐帶
    劇院三維數位化三維雷射掃描技術是連接BIM模型和工程現場的有效紐帶 三維雷射掃描技術是整個三維數據獲取和重構技術體系中的最新技術,其實現了直接從實體進行快速逆向獲取三維數據及模型的重新構建。
  • 數據採集難度大,城市級實景三維遭遇卡脖子問題
    說回到城市級三維,其實是源自於「實景三維中國」三個層級劃分(城市級、地形級、部件級)中的一項內容,其主要目標是對全國地級以上城市完成實景三維模型的構建。 今年10月,剛剛完成昆明城區實景三維無人機航測項目的常雨(化名)告訴泰伯網,目前絕大多數的測繪企業,其實都缺乏這種大規模城市級實景三維建設的項目經驗。任務面積大、工期緊、安全性要求高、有高層建築物以及電磁幹擾強,這都是城市級三維數據採集中常見的幾個問題。從常規實景三維項目中積累下的工作流程和產品方案,往往在城市級三維中就行不通。
  • 三維模型精度要求及製作質量控制要點
    0.5倍,兩倍中誤差值為最大誤差。0.5倍;兩倍中誤差值為最大誤差。精細模型建築要求:需精細建模,外形、紋理與實際建築相同,建築細部(如:屋頂結構,建築轉折面,建築與地面交界的鋪地、臺階、柱子、出入口等),以及建築的附屬元素(門廳、大門、圍牆、花壇等)需做出;精細模型建築應與照片保持一致,應避免整個牆面一張貼圖,損失了模型的立體效果;需注意接地處理,例如玻璃不可直接戳在地上;該有的臺階、圍牆(含柵欄、大門)、花壇必須做出;建築的體量應與照片一致
  • 無人機空地一體三維雷射掃描技術應用研究
    經過實地操作,基於無人機的空地一體三維掃描技術可以有效克服傳統掃描方式弊端,實現高精度立體監測網絡( 空中-地面-地下監測) ,完成多載荷數據獲取平臺: 機載-車載-室內、機載-車載-室內智慧財產權系列產品等。
  • 一語道破,城市級實景三維究竟有何不同?
    說回到城市級三維,其實是源自於「實景三維中國」三個層級劃分(城市級、地形級、部件級)中的一項內容,其主要目標是對全國地級以上城市完成實景三維模型的構建。並且根據實景三維中國建設的「兩步走戰略」,這項工作要在「十四五」期間完成。相較於地形級三維來說,城市級三維建設要求的精度更高、展示內容更豐富、總體工作量也更大。
  • 創想三維:史上最全的三維建模軟體應用分類-創想三維 CR-5_深圳3D...
    三維建模軟體的種類如今已非常豐富,除了傳統的工業CAD和三維設計軟體,也有很多專門面向各領域的專業設計軟體,以及適合各階段愛好者的軟體,甚至還有很多的在線建模平臺。本期小編將給大家分析一下業界最好用、最全面的建模軟體,給大家介紹不同行業正在使用的軟體。    小編主要劃分建模的幾個領域,初級建模、製圖軟體、工業設計、藝術設計、動畫軟體、室內外建築。
  • 傾斜攝影相機雙鏡頭和五鏡頭到底哪個好?
    傾斜攝影技術作為一項已經成熟應用的新興測繪技術,被越來越多的測繪人和行業應用者所接收和使用,傾斜攝影技術搭配無人機系統更是讓這種技術在輕便化、經濟化、實用化、高效化的方面上不斷取得突破。然而,我們一旦去了解傾斜攝影的硬體產品,就會發現傾斜攝影相機的鏡頭數千奇百怪,單鏡頭、雙鏡頭、三鏡頭、四鏡頭、五鏡頭,甚至是九鏡頭都能找到相關的產品,多鏡頭相機的數據採集辦法也是各不相同,旋轉式、搖擺式、一次曝光式,多鏡頭相機所做出來的模型效果和質量也是參差不齊。
  • 《疊影入境》導演專訪丨搜狐無人機影像大賽「最佳創意航拍」獎
    這部作品使用航拍影像、傾斜攝影圖像建立三維場景,並使用編程動態圖形技術對重慶的化龍橋片區進行數位化解析。這部短片在現場引發來賓的讚嘆。短片背後是什麼故事?近期,我們對本片的導演陳輝進行了專訪。陳輝在採訪中表示,這個作品呈現的區域為重慶的化龍橋片區,它具有悠久的歷史,有非常豐富的素材和講述維度。