Road Curbs Extraction from Mobile Laser Scanning Point Clouds with Multidimensional Rotation‐Invariant Version of the Local Binary Pattern Features

Xinjiang Ma,Dongjie Yue,Rufei Liu,Ruisheng Wang,Shaolin Zhu,Minye Wang,Jiayong Yu

DOI: https://doi.org/10.1111/phor.12431

2022-11-11

The Photogrammetric Record

Abstract:The features of road curbs, including 3D shape, spatial distribution and the "unilateral continuity", have been fully studied and analyzed. Three improved LBPROT operators are proposed to quantitatively express the road curbs in three dimensions based on the "unilateral continuity". Then road curb points are extracted by a multi‐dimensional LBPROT features semantic recognition model, and the vectorized road curb polylines are connected by accurate road curbs points. Road curb is one of the important components of road information, and its high‐precision information is significant for the development of autonomous driving, intelligent transportation and smart cities. A mobile laser scanning (MLS) system can acquire high‐precision and high‐density road three‐dimensional (3D) point clouds data, which has the advantages of high efficiency, low cost and non‐contact. However, how to extract accurate road information from the massive and disordered point clouds is one of the current research priorities and difficulties. This paper presents a new method to extract the road curbs from the MLS point clouds. The proposed method mainly includes three steps: pre‐processing, road curbs extraction and vectorisation. Pre‐processing obtains the ground, including road subsection and ground identification. Road curbs are first quantitatively represented by the rotation‐invariant version of the local binary pattern (LBPROT) values in three dimensions, including spatial elevation mode, spatial dispersion mode and spatial shape mode, and then they are extracted by a multidimensional LBPROT features semantic recognition model. Vectorised road curb polylines are connected by accurate road curbs points, which are obtained through simplification and denoising. The proposed method was tested on two large‐scale datasets collected from arterial roads and expressways, respectively. The precision of the results was > 95%, recall was > 90% and the F1 score was > 0.93. The experimental results show that the proposed method can effectively extract road curbs in different environments and has robust adaptability. Résumé La bordure de la route est l'une des composantes importantes de l'information routière, requise avec une haute précision pour le développement de la conduite autonome, du transport intelligent et des villes intelligentes. Le système de balayage laser mobile (MLS) peut acquérir des nuages de points tridimensionnels (3D) de haute précision et de haute densité, ce qui présente les avantages d'une grande efficacité, d'un faible coût et de l'absence de contact. Cependant, l'extraction d'informations routières précises à partir de nuages de points volumineux et désordonnés est l'une des défis de la recherche actuelle. Cet article présente une nouvelle méthode pour l ́extraction des bordures de route dans des nuages de points MLS. La méthode proposée comprend trois étapes principales : le prétraitement, l'extraction des bordures de route et la vectorisation. 1) Le prétraitement consiste à délimiter la route et identifier le sol. 2) Les bordures de route sont d'abord représentées quantitativement par la version invariante par rotation des valeurs du motif binaire local (LBPROT) en trois dimensions, y compris le mode d'élévation spatiale, le mode de dispersion spatiale et le mode de forme spatiale, puis elles sont extraites par un modèle de reconnaissance sémantique multidimensionnel des caractéristiques du LBPROT. 3) Les polylignes de bordures de route vectorisées sont connectées par des points de bordures de route précis, qui sont obtenus par simplification et débruitage. La méthode proposée a été testée sur deux ensembles de données à grande échelle collectés respectivement sur des routes artérielles et des voies rapides. La précision des résultats est supérieure à 95 %, le rappel est supérieur à 90 % et le F1‐score est supérieur à 0,93. Les résultats expérimentaux montrent que la méthode proposée permet d'extraire efficacement les bordures de route dans différents environnements et qu'elle possède une capacité d'adaptation robuste. Zusammenfassung Bordsteinkanten sind eine der wichtigsten Komponenten von Straßeninformationen, und ihre hochpräzisen Informationen sind für die Entwicklung von autonomem Fahren, intelligentem Transport und intelligenten Städten von Bedeutung. Das mobile Laserscanning‐System (MLS) kann hochpräzise und hochdichte dreidimensionale (3D) Punktwolkendaten von Straßen erfassen, was die Vorteile hoher Effizienz, geringer Kosten und berührungsloser Nutzung bietet. Wie man genaue Straßeninformationen aus den massiven und ungeordneten Punktwolken extrahiert, ist jedoch eine der aktuellen Forschungsprioritäten und ‐schwierigkeiten. Dieses Papier stellt eine neue Methode vor, um die Straßenbordsteine aus den MLS‐Punktwolken zu extrahieren. Das vorgeschlagene Verfahren umfasst hauptsächlich drei Schritte: Vorverarbeitung, Extraktion von Straßenbordsteinen -Abstract Truncated-

geosciences, multidisciplinary,geography, physical,remote sensing,imaging science & photographic technology