摘要:三維激光掃描直接對地球表面進行三維密集采樣,可快速獲取具有三維坐標(X,Y,Z)和一定屬性(反射強度等)的海量、不規則空間分布三維點云,成為數字化時代下刻畫復雜現實世界最為直接和重要的三維地理空間數據獲取手段,在全球變化、智慧城市、全球制圖等國家重大需求和地球系統科學研究中起到十分重要的作用。目前,在傳感器技術和國家需求的雙重驅動下,三維激光掃描在硬件裝備、三維點云數據處理以及應用3個方面取得了巨大的進步,同時也面臨新的挑戰。本文以三維激光掃描的發展歷史為線索,總結了三維激光掃描系統的現狀、三維點云數據處理的關鍵進展以及在測繪地理信息等領域的典型應用,并分析了三維點云數據處理面臨的挑戰,最后展望了三維激光掃描與點云處理的發展趨勢。
關鍵詞:三維激光掃描 點云 點云融合 目標提取 三維表達 廣義點云模型
Progress, Challenges and Perspectives of 3D LiDAR Point Cloud Processing
YANG Bisheng, LIANG Fuxun, HUANG Ronggang
添加微信好友, 獲取更多信息
復制微信號
Abstract: 3D LiDAR can perform an intensive sampling of the earth surface in a direct way, and yield the 3D point cloud that contains numerous and scattered points with the coordinates (X, Y, Z) and attributes (e.g., intensity). As the vital 3D geospatial data for description of the world in the digital era, 3D point cloud plays an important role not only in earth science researches but also in national requirements (e.g., global change *** ysis, global mapping, and *** art city). Inspired by sensor technologies and national requirements, 3D LiDAR has got great progresses in hardware, data processing and applications, and is facing new challenges. Following the history of 3D LiDAR, this paper first reviews the status of 3D LiDAR system, and introduces the development of key technologies in data processing. Then the typical applications of 3D LiDAR in surveying and other related fields are listed, and current challenges in point cloud processing are concluded. Finally, some future perspectives are presented.
Key words: 3D LiDAR point cloud point cloud fusion object extraction 3D representation ubiquitous point cloud
激光掃描/激光雷達(light detection and ranging,LiDAR)是一種非接觸主動式快速獲取物體表面三維密集點云的技術,已成為高時空分辨率三維對地觀測的一種主要手段[1]。該技術可直接獲取具有三維坐標(X, Y, Z)和一定屬性(反射強度等)的海量、不規則空間分布的三維點云,而且受天氣影響小,同時具有一定的穿透性,在全球變化、智慧城市、資源調查、環境監測、基礎測繪等領域發揮越來越重要的作用[2]。
經過20多年的發展,三維激光掃描硬件在穩定性、精度、易操作性等方面取得了長足的進步,尤其是在機載/車載/地面三維激光掃描方面進展顯著,其中具有代表性的三維激光掃描硬件研制廠商包括:Riegl、Leica、Optech、Velodyne、北科天繪、海達數云等。此外還有美國NASA的ICESat和中國資源三號02星搭載的激光雷達。
在三維點云數據處理軟件方面,商業化的軟件主要有TerraSolid公司的TerraSolid、Trimble公司的RealWorks、Leica公司的Cyclone、Bentley公司的Pointools、Orbit GT公司的Orbit Mobile Mapping等,以及國內科研院所和公司開發的一些工具軟件。其重點主要集中在點云數據的管理、面向DEM生產的濾波[3-4]、三維建筑物提取及重建[5-6]、森林垂直結構參數提取[7]等方面。相對三維激光掃描硬件設備的快速發展而言,三維點云的智能化處理發展較為落后,點云處理的智能化水平、軟件界面友好性、專業化應用數據接口等方面還有待提高。
在回顧三維激光掃描發展歷史的基礎上,本文分析總結了三維激光掃描硬件裝備、三維點云數據處理以及工程化實踐方面取得的成就和面臨的挑戰,最后展望三維激光掃描與點云處理的發展趨勢。
1 三維激光掃描硬件系統的現狀
近20多年來,國內外廠商在三維激光掃描硬件系統方面進行了各種努力和創新。表 1列舉了目前以星/機/車/地為搭載平臺的幾類典型激光掃描硬件系統及其參數指標。從技術發展趨勢來看,三維激光掃描正在從低精度(厘米級)獲取向高精度(毫米級)獲取,從幾何與強度的采集走向幾何與多/高光譜協同采集。相比國外,國內激光掃描硬件起步晚且仍有較大差距。此外,便攜式/背包式/無人機為平臺的輕小型三維激光掃描裝備正蓬勃發展。例如:Riegl公司研制的集成VUX的低空無人旋翼機激光掃描系統,武漢大學測繪遙感信息工程國家重點實驗室研制的低空無人直升機激光掃描系統Heli-Mapping,北京拓維思科技有限公司研制的“巡線鷹”等。隨著SLAM(simultaneous location and mapping)等技術的發展,三維激光掃描通過與機器人等平臺集成,可實現自主測量[8]。
表 1 各類平臺激光掃描系統參數指標
Tab. 1 Parameters of laser scanning systems of various platforms
平臺 | 激光掃描系統 | 波長/nm | 更大測距 | 更大掃描頻率 | 視場角 | 重量/kg | 用途 | ||
| |||||||||
衛星平臺 | ICESat/GLAS1 | 532 1064 | 600 km | 40 Hz | — | — | 532 nm:云高、大氣氣溶膠測量;1064 nm:冰蓋監測、全球森林生物量估算、陸地高程測量 | ||
ZY3-02[9] | 1064 | 520 km | 2 Hz | — | 40 | 地表高程控制點測量,輔助衛星影像無控立體測圖 | |||
機載平臺 | Riegl2 | VQ-1560i | 1064 | 5800 m | 1.33 MHz | 58° | 60 | 面向中小型區域陸地地形、植被、建筑物以及水下地形等三維數據獲取 | |
MiniVUX-1UAV | 1064 | 250 m | 0.1 MHz | 360° | 1.55 | ||||
Leica3(ALS80-UP) | 1064 | 5000 m | 1.0 MHz | 72° | — | ||||
532 | |||||||||
Optech4(Titan) | 1064 | 2000 m | 0.9 MHz | 60° | 71 | ||||
1550 | |||||||||
北科天繪5(AP-3500) | 1064 | 3500 m | 0.6 MHz | 70° | 20 | ||||
車載平臺 | Riegl (VMX-1HA) | 1064 | 420 m | 0.6 MHz | 360° | 28 | 獲取道路及周邊地物的三維數據 | ||
Leica (Pegasus) | 1064 | 119 m | 1.0 MHz | 360° | 13.5 | ||||
Optech (Lynx HS-600) | 1064 | 130 m | 0.8 MHz | 360° | — | ||||
北科天繪(RA-0600) | 1064 | 300 m | 0.3 MHz | 360° | 15 | ||||
海達數云6(HiScan-C Su 2) | 1064 | 650 m | 0.1 MHz | 360° | 25 | ||||
地面站平臺 | Riegl (VZ-6000) | 1064 | 6000 m | 0.3 MHz | H:360° V:60° | 14.5 | 特定目標區域精細數據獲取,但受遮擋影響嚴重 | ||
Leica(P40) | 1064 | 270 m | 1 MHz | H:360° V:— | — | ||||
Optech(TLS-250) | 1550 | 1600 m | 0.5 MHz | H:360° V:120° | — | ||||
北科天繪(UA-1500) | 1064 | 3600 m | 0.6 MHz | H:360° V:150° | 10 | ||||
海達數云(HS450) | 1064 | 450 m | 500 KHz | H:360° V:100° | 11 |
1 http://www.csr.utexas.edu/glas/
2 http://www.riegl.com/
3 http://digital-imaging.leica-geosystems.com/en/index.htm
4 http://www.teledyneoptech.com/
5 http://www.isurestar.com/
6 http://www.hi-cloud.com.cn/s
三維激光掃描系統的幾何測量原理基本相同,通過激光發射點與目標之間的距離結合激光發射器的位置和姿態信息進行聯合解算,得到目標區域的三維點云(x,y,z)。其中,距離的觀測方式主要采用脈沖式測距。根據觀測目標的幾何結構不同,單條激光束可能有多個回波[10],準確分離和探測每個回波是距離觀測的基礎。對于多回波和全波形兩種回波記錄方式,其回波探測 *** 有所不同。多回波方式在數據獲取過程中利用簡單的回波探測 *** (constant fraction discriminator,CFD)實時檢測回波[11],但存在一些問題:算法對用戶保密;算法過于簡單,對復雜波形處理效果較差,容易造成部分回波漏提取。全波形方式則以一定間隔不斷記錄后向散射信號,并提供給用戶進行后續波形處理,以得到回波的位置及形狀參數,常用的處理 *** 有:高斯分解[12]、去卷積 *** [13]等。
2 三維點云數據處理的重要進展
與傳統的測量方式相比,三維激光掃描數據采集速度快、采樣頻率高等優勢,導致點云數據具有高冗余、誤差分布非線性、不完整等特點,給海量三維點云的智能化處理帶來了極大的困難:① 多視角、多平臺、多源的點云數據難以有效整合,限制了數據間的優勢互補,導致復雜場景描述不完整;② 復雜對象模型結構和語義特征表達困難,模型可用性嚴重受限,極大地限制了復雜場景的準確感知與認知。近年來,國內外學者在點云處理理論以及數據質量改善、自動化融合、點云分類和目標提取、按需多層次表達等 *** 方面進行了深入研究,取得的主要進展如下。
2.1 廣義點云模型理論 ***
針對多源多平臺點云數據的融合難、目標提取難和三維自適應表達難的嚴重缺陷,文獻[14]提出了廣義點云的科學概念與理論研究框架體系。廣義點云是指匯集激光掃描、攝影測量、眾源采集等多源多平臺空間數據,通過清洗、配準與集成,實現從多角度、視相關到全方位、視無關,建立以點云為基礎,基準統一,且數據、結構、功能為一體的復合模型(如圖 1)。.
圖 1 廣義點云數據模型 Fig. 1 Ubiquitous point cloud model
2.2 三維點云數據質量改善
點云數據質量改善包括幾何改正和強度校正。一方面,由于測距系統、環境及定位定姿等因素的影響,點云的幾何位置存在誤差,且其分布存在不確定性。利用標定場、已知控制點進行點云幾何位置改正,能夠提高掃描點云的位置精度和可用性。另一方面,激光點云的反射強度一定程度上反映了地物的物理特性,對于地物的精細分類起到關鍵支撐作用,然而點云的反射強度不僅與地物表面的物理特性有關,還受到掃描距離、入射角度等因素的影響。因此,需要建立點云強度校正模型進行校正,以修正激光入射角度、地物距離激光掃描儀的距離等因素對點云反射強度的影響[10, 15]。
2.3 多源、多平臺三維點云融合
由于單一視角、單一平臺的觀測范圍有限且空間基準不一致,為了獲取目標區域全方位的空間信息,不僅需要進行站間/條帶間的點云融合,還需要進行多平臺(如機載、車載、地面站等)的點云融合,以彌補單一視角、單一平臺帶來的數據缺失,實現大范圍場景完整、精細的數字現實描述[16-18]。此外,由于激光點云及其強度信息對目標的刻畫能力有限,需要將激光點云和影像數據進行融合,使得點云不僅有高精度的三維坐標信息,也具有了更加豐富的光譜信息[19-20]。
不同數據(如不同站點/條帶的激光點云、不同平臺激光點云、激光點云與影像)之間的融合,需要同名特征進行關聯。針對傳統人工配準法效率低、成本高的缺陷,國內外學者研究基于幾何或紋理特征相關性的統計分析 *** [21-22],但是由于不同平臺、不同傳感器數據之間的成像機理、維數、尺度、精度、視角等各有不同,其普適性和穩健性還存在問題,還需要突破以下瓶頸:魯棒、區分性強的同名特征提取,全局優化配準模型的建立及抗差求解。
2.4 三維點云的精細分類與目標提取
三維點云的精細分類是從雜亂無序的點云中識別與提取人工與自然地物要素的過程[4, 23-26],是數字地面模型生成、復雜場景三維重建等后續應用的基礎。然而,不同平臺激光點云分類關注的主題有所不同。機載激光點云分類主要關注大范圍地面、建筑物頂面、植被、道路等目標[3-4, 23, 27-29],車載激光點云分類關注道路及兩側道路設施、植被、建筑物立面等目標[25, 30-32],而地面站激光點云分類則側重特定目標區域的精細化解譯[33]。其中,點云場景存在目標多樣、形態結構復雜、目標遮擋和重疊以及空間密度差別迥異等現象,是三維點云自動精細分類的共同難題。據此,國內外許多學者進行了深入研究并取得了一定的進展,在特征計算基礎上,利用逐點分類 *** [34-35]或分割聚類分類 *** [25, 30-31]對點云標識,并對目標進行提取。但是由于特征描述能力不足,分類和目標提取質量無法滿足應用需求,極大地限制了三維點云的使用價值。目前,模擬人腦的深度學習 *** 突破了傳統分類 *** 中過度依賴人工定義特征的困難,已在二維場景分類解譯方面表現出極大潛力[36],但是在三維點云場景的精細分類方面,還面臨許多難題:海量三維數據集樣本庫的建立,適用于三維結構特征學習的神經 *** 模型的構建及其在大場景三維數據解譯中的應用。綜上,顧及目標及其結構的語義理解,三維目標多尺度全局與局部特征的學習,先驗知識或第三方輔助數據引導下的多目標分類與提取 *** ,是未來的重要研究方向。
2.5 三維場景的按需多層次表達
在大范圍點云場景分類和目標提取后,目標點云依然離散無序且高度冗余,不能顯式地表達目標結構以及結構之間的空間拓撲關系,難以有效滿足三維場景的應用需求。因此,需要通過場景三維表達,將離散無序的點云轉換成具有拓撲關系的幾何基元組合模型,常用的有數據驅動和模型驅動兩類 *** [5-6],其中存在的主要問題和挑戰包括:三維模型的自動修復,以克服局部數據缺失對模型不完整的影響[37];形狀、結構復雜地物目標的自動化穩健重構;從可視化為主的三維重建發展到可計算分析為核心的三維重建,以提高結果的可用性和好用性。此外,不同的應用主題對場景內不同類型目標的細節層次要求不同[38],場景三維表達需要加強各類三維目標自適應的多尺度三維重建 *** [23, 39-40],建立語義與結構正確映射的場景—目標—要素多級表達模型。
2.6 典型行業和重大工程應用
三維激光掃描已在許多重大工程和典型領域里得到了廣泛的應用。從深空到地球表面,從全球范圍制圖到小區域監測,從基礎科學研究到大眾服務,三維激光掃描都展現出了與眾不同的優勢。
2.6.1 深空探測
深空探測的目的是促進人類對月球以及更遠天體的科學認識,而距離測量是其中的關鍵技術,許多國家采用激光測高儀進行星體地形表面的測量,如1971年美國阿波羅-15首次進行的月球形狀測量等[41]。
2.6.2 地球科學應用研究
數字地面模型是各種地學過程研究的基礎,利用三維激光掃描系統觀測地表形態及其變化,已被廣泛用于各類地學應用,例如:全球冰川物質平衡[42-43],地質災害區域時空變化監測[44-45],海岸線提取和海岸侵蝕監測[46-47],海底測繪及水下目標探測[48]等。
2.6.3 森林資源調查
及時準確了解林區的植被動態變化是林業科學研究的基礎。相比光學遙感,激光雷達能夠獲取植被冠層的三維結構:地面激光雷達用于精細地獲取單株樹木的垂直結構[7],機載激光雷達用于大范圍森林的蓄積量和生物量等生態參數的反演[49-51],星載激光雷達還可以進行全球植被覆蓋及其生態參數制圖[52-53]。
2.6.4 城市形態分析
城市形態分析對城市規劃設計與管理具有重要意義,傳統手段難以監測城市形態的垂直結構及其演化,激光雷達可以快速獲取城市三維形態,為更精細的城市形態分析提供基礎,滿足基于城市形態的各種應用需求,如基礎設施管理、太陽能潛力估計等[54-55]。
2.6.5 無人駕駛高精度地圖
高精度地圖是實現自動化駕駛的關鍵因素[25],車載三維激光掃描系統可以高效、快速的獲得道路以及周邊高精度、高密度的三維幾何信息和紋理信息,為高精度地圖的自動化生產提供高質量的數據支撐[56]。
2.6.6 電力走廊安全巡檢
我國電力資源分布和經濟建設中心不一致,高壓輸電線路區域地理環境復雜,傳統的人工巡檢手段難以適應。機載三維激光掃描可以直接獲取電力線及其附屬設備的幾何形態參數[57],為電力巡檢提供了新的手段[58]。
2.6.7 海島礁測繪
精確的海島礁基礎地理空間信息是海洋管理、經濟開發、海防安全的重要依據,傳統測繪手段作業周期長、成本高,三維激光掃描可以直接觀測目標的三維空間信息,直接生產數字測繪產品,是島礁高精度測圖的重要手段。
2.6.8 文化遺產數字化保護
文化遺產數字化保護是人類共同的歷史責任。三維激光掃描可以快速繪制物質文化遺產的結構圖和精細的三維模型,大幅提高文化遺產保護的工作效率,并豐富文化遺產成果表現形式[59-60]。
3 點云處理面臨的挑戰
近年來,星、空、地掃描以及便攜式泛在傳感器(如:RGB-D深度相機)廣泛運用,不但提高了點云獲取的時效性、顆粒度和覆蓋面,而且帶來了點云的多時相、流形(streaming)和多樣屬性的新特性,從而產生了多維點云數據。多維點云本質上是對物理世界中地理對象/現象的三維幾何、物理乃至生化特性的多維密集采樣,其不但記錄了地物的三維空間結構特征,同時也記錄了地物目標的物理特性(如波形、反射強度等)。深入挖掘多維點云的內在特征對提升多維點云處理的智能化程度,揭示復雜動態三維場景的變化規律至關重要。盡管點云處理方面已經取得了較好的研究成果,但是多維點云的智能化處理方面仍然面臨如下的巨大挑戰:
3.1 多維點云幾何與屬性協同的尺度轉換
探索不同平臺獲取點云的誤差分布規律,建立比例尺依賴的特征點質量評估模型;研究融合點云物理特性的特征點簇聚合與分層 *** ;建立基于特征分層的多維點云多尺度整合 *** ,實現多維點云的時空基準自動統一。
3.2 多維點云變化發現與分類
建立統一時空參考框架下多維點云的變化發現與提取 *** ,研究基于時間窗口的多維點云與地物三維模型的關聯 *** ,提取地物空間要素的幾何和屬性變化,研究面向地物空間結構變化的可視化分析 *** ,為揭示空間要素的變化規律提供科學工具。
3.3 復雜三維動態場景的精準理解
基于機器學習、人工智能等先進理論 *** 探索多維點云結構化建模與分析的理論與 *** ,研究建立復雜三維動態場景中多態目標的準確定位、分類以及語義化模型的建立,建立面向多維點云的三維動態場景中各類要素的特征描述、分類與建模 *** ,架設多維點云與地理計算模型的橋梁。
上述關鍵挑戰問題的突破將形成完備的廣義點云全三維(覆蓋全、要素全、關系全)建模的理論與 *** 體系,從而實現點云處理由“靜態、可視、量算”到“動態、模擬、分析”的跨越。
4 三維激光掃描與點云處理發展趨勢與展望
近年來,傳感器、通信和定位定姿技術的發展,人工智能、深度學習、虛擬/增強現實等領域先進技術的重要進展有力推動了數字現實(digital reality)時代的來臨。激光掃描與點云智能化處理將順應數字現實時代的需求朝以下幾個方面發展。
(1) 三維激光掃描裝備將由現在的單波形、多波形走向單光子乃至量子雷達,在數據的采集方面由現在已幾何數據為主走向幾何、物理,乃至生化特性的集成化采集。
(2) 三維激光掃描的搭載平臺也將以單一平臺為主轉變為以多源化、眾包式為主的空地柔性平臺,從而對目標進行全方位數據獲取,當前國家重點研發計劃重點專項項目:國產空地全息三維遙感系統及產業化(編號:2016YFF0103500) 已支持相關研究。
(3) 點云的特征描述、語義理解、關系表達、目標語義模型、多維可視化等關鍵問題將在人工智能、深度學習等先進技術的驅動下朝著自動化、智能化的方向快速發展,點云將成為測繪地理信息中繼傳統矢量模型、柵格模型之后的一類新型模型,將有力提升地物目標認知與提取自動化程度和知識化服務的能力。
(4) 虛擬/增強現實、互/物聯網+的發展將促使三維激光掃描產品由專業化應用擴展到大眾化、消費級應用,滿足 *** 化多維動態地理信息服務的需求。
【引文格式】楊必勝,梁福遜,黃榮剛。三維激光掃描點云數據處理研究進展、挑戰與趨勢[J]. 測繪學報,2017,46(10):1509-1516. DOI: 10.11947/j.AGCS.2017.20170351