1. 中国科学院遥感与数字地球研究所 中国科学院数字地球重点实验室, 北京 100094;
2. 中国科学院大学资源与环境学院, 北京 100049
2017年7月24日 收稿; 2017年9月30日 收修改稿
基金项目: 国家科技部重大科学仪器设备开发专项(2013YQ120343)资助
通信作者: 习晓环,E-mail:xixh@radi.ac.cn
摘要: 提取准确的道路信息对城市规划和数字城市制图具有重要意义。利用高密度车载激光扫描数据,针对无法以路沿作为道路边界的情况,提出一种基于边缘线检测的道路自动提取方法。先利用平面检测算法对分段后的路面完成粗提取,在此基础上,分析道路边缘线与相邻两侧路面在激光反射强度与几何性质上的差异,通过设定合理阈值提取边缘线上的点云,最后对离散边缘点进行曲线拟合完成道路精提取。利用实际获取的城区车载点云数据验证表明,该方法提取道路的正确度、完整度和提取质量等均高于90%,特别是对无明显路沿的道路,可有效识别出道路边缘线。
关键词: 车载激光扫描道路提取点云反射强度
Automatic extraction of urban road information based on mobile laser scanning data
ZHAO Haipeng1,2, XI Xiaohuan1, WANG Cheng1, LEI Zhao1,2
1. Key Laboratory of Digital Earth Science of CAS, Institute of Remote Sensing and Digital Earth, Chinese Academy of Sciences, Beijing 100094, China;
2. College of Resources and Environment, University of Chinese Academy of Sciences, Beijing 100049, China
Abstract: Extracting accurate road information is of vital importance in urban planning and digital city mapping. We used high-density point clouds collected by mobile laser scanning(MLS) systems, and proposed a novel approach based on road boundary detection in curb missing areas. First, the road was roughly extracted by using plane detection algorithm. Next, we analyzed the difference in laser reflection intensity and geometry attribution between road boundary and two sides of surface and retrieved the point clouds of boundary by setting reasonable threshold. Finally, the road surface was accurately extracted based on curve fitting of discrete points. To evaluate the performance of the proposed method, experiments were conducted using urban point clouds data. The extraction method achieves correctness, completeness, and quality rates of above 90%, which indicates that the proposed method effectively detects road boundary and extracts road surface accurately in curb missing urban areas.
Keywords: mobile laser scanningroad extractionpoint cloudsreflected intensity
道路信息在城市精细制图、基础设施管理、道路安全监测和无人驾驶技术应用中具有重要作用。传统的测量手段或人工检测道路、路沿、路灯、交通指示牌及人行道等设施,人力财力消耗大,精度和效率有待提高。激光雷达系统集成激光扫描仪、IMU、GNSS和CCD相机,能够快速、直接获取目标表面的精细几何信息,为提取道路及道路两旁细小地物提供了新途径[1],如车载激光扫描系统(mobile laser scanning,MLS)更靠近地物,能够采集物体表面垂直方向的信息,并且可在平台移动的同时记录4 000点/m2密度的点云数据[2]。尤其在城市地区,地物类型复杂多样,往往包含大量不同类型的地物,如建筑、绿地、道路、路灯、指示牌、人行道、车辆等,其中道路点占原始数据的比例通常大于50%[3]。有效分离出路面点,不仅可以减少数据量,还能提高路面标识线提取与地物分割的效率,因此从原始点云数据中快速、准确地提取道路点云是车载数据处理的关键环节。
国内外****在利用车载点云数据提取道路方面开展了很多研究,如利用点云数据的高程差提取路沿作为道路边界,进而提取出道路点,其提取结果的精度较高[2, 4-5],前提是要求原始点云中存在与路面具有明显高差的路沿,设置的高差阈值难以自适应有一定高低起伏的路面环境,算法鲁棒性较弱。另外在乡镇道路或公路桥梁等路沿相对较矮甚至没有路沿的情况下难以应用。一些****将原始点云生成二维特征图像,利用传统的图像分割算法提取路面[6-8]。由于转化二维图像的过程中会丢失点云垂直方向的信息,被车辆或行道树遮盖的部分路面无法得到有效提取,破坏了路面提取的完整性,且对道路边界的识别度较低,无法实现道路精提取。还有****基于地形拟合的方法,在路面平整的假设下,利用RANSAC(random sample consensus)和3D Hough变化检测目标平面,再计算所有点到该平面的距离,把距离阈值内的点归为路面点[9-10]。该方法在空间和时间上开销较大,并且容易将道路两旁与路面高程相近的地物点错分为地面点。Kumar等[11]以及Boyko与Funkhouser[12]利用参数化活动轮廓模型(snake),结合影像地图、点云的反射强度、脉冲宽度以及平台的导航信息等辅助数据,提取道路两侧的边缘线,不同的道路环境具有较强的适应性,但较依赖于外部数据,而且需要先验知识以确定初始参数,可操作性较低。可以看出,MLS数据提取道路特征存在以下几个难点:1)点云分布不均匀、无组织、数据量大;2)缺少辅助数据,由于车载平台的移动,激光会从不同方向、不同角度被接收,因此如RGB色彩信息和强度信息在未经校正的情况下并不稳定;3)除道路及邻近区域外,还包含大量不同类型的地物,如建筑、植被、车辆等,增加了道路边界准确识别的难度。
本文针对无明显路沿的道路环境,提出一种基于道路边缘线检测的城区道路点云提取方法,即在对路面进行分段预处理后,通过分析边缘线与两侧路面存在的反射强度梯度与点云密度分布特点,提取特征点,再拟合生成边缘线从而提取路面,最后利用车载扫描数据验证算法的有效性。
1 方法1.1 基本原理为了剔除车载激光扫描数据中非道路点云,本文首先根据路面平均高程设定阈值,对原始数据进行高程滤波,再利用行车轨迹数据完成道路分段。单段路面可近似为平面,因此利用RANSAC平面拟合算法对路面建模,实现路面点粗提取,再利用道路边缘线的反射强度梯度与密度分布特征提取边缘线点,最后拟合生成边缘线完成道路精提取,具体流程如图 1所示。
Fig. 1
Download: JPG larger image | |
图 1 基于边缘线的道路点云提取流程 Fig. 1 Flow chart of road surface extraction based on road boundary 图 1 基于边缘线的道路点云提取流程 Fig. 1 Flow chart of road surface extraction based on road boundary --> |
1.2 高程阈值滤波与道路分段为减少数据处理时间、提高算法运行效率,首先以路面平均高程Z作为参数,提取原始数据中所有满足|z-Z|<ε的点云,其中z为点云高程值,ε为阈值,此阈值可根据车载平台采集的辅助数据得到道路的高程范围,以先验知识的形式确定。通过高程滤波可以剔除大部分非路面点。由于道路环境复杂,道路边缘线无固定形态,且路面本身存在一定起伏,不同路段的特征差异较大,无法建立统一模型,因此可对路面进行分段处理。利用行车轨迹数据,以间隔d确定路面分割点,过分割点作垂直于该段道路方向的垂直剖面,根据垂直剖面的位置实现道路分段。
1.3 道路粗提取经过高程滤波后的单个路段点云数据具有如下特点:1)路面点占数据总体的比例大于50%;2)分段后的路面近似为平面。利用RANSAC算法,首先随机选取3个种子点,计算拟合平面参数,再统计点云中到该平面距离在阈值内的点数,迭代取点数最多的平面为最终结果。在道路坐标系中,Z坐标方向与路面法向量方向一致。因此,在每次迭代中,如果α>ε,则该平面一定不是路面,直接进入下次迭代,α为拟合平面法向量与坐标Z轴的夹角,ε为阈值。计算满足条件的拟合平面方差,取其中点数最多、方差最小的平面为路面。
1.4 道路边缘线提取城市地区一般以路沿作为道路边界,但在乡镇或桥梁公路等道路环境中,往往无可识别的路沿。道路边缘通常是指位于路面与人行道之间的连接区域,边缘线的材质区别于两侧表面,因此对激光具有不同的反射特性。为了获取无明显高差特征的道路边缘线,本文通过分析边缘线的形状特征与反射强度特性提取特征点。以每个点pi为中心,通过邻域搜索计算局部区域内点云的平均强度值与密度值。
1.4.1 边缘线点云提取本文基于点云的反射强度和密度分布特征提取边缘线点云。
1) 反射强度特征
与相邻两侧的路面和人行道表面相比,道路边缘线一般由反射率较高的材质组成,因此可以利用反射强度值的变化识别边缘线上的点云。以某一点pi为中心,搜索半径r范围内的所有近邻点,再从pi出发沿垂直道路方向两侧分别移动一个距离
${{\nabla }_{{{p}_{i}}}}=\left\{ \begin{align} & {{\overline{I}}_{{{p}_{i}}}}-{{\overline{I}}_{{{p}_{i-1}}}}, \text{位于道路方向右侧, } \\ & {{\overline{I}}_{{{p}_{i}}}}-{{\overline{I}}_{{{p}_{i+1}}}}, \text{位于道路方向左侧}\text{.} \\ \end{align} \right.$ | (1) |
对每个点计算其所在邻域与垂直道路方向两侧邻域内的强度平均值,边缘线上的点云将满足以下约束条件:
$\left| {{\nabla }_{{{p}_{i}}}} \right| < {{\nabla }_{\text{H}}}, {{P}_{i}}\in {{S}_{\text{Edge}}}.$ | (2) |
2) 密度分布特征
车载激光扫描仪在随平台移动的同时会沿垂直公路方向采集数据,对于每条扫描线,距扫描仪中心越远,采集到的地面点个数越少,因此路面点云的密度会不断变化。与此相比,由于沿道路走向延伸的边缘线特性较一致,在形状上具有突出的线性特征,能够与扫描仪保持相对固定的距离,使每条扫描线中落在边缘线位置上的点分布较均匀,因此在沿道路方向的边缘线点密度变化梯度?D将小于其他区域。
统计以pi为中心、r为半径的体元素vi内所含的点云个数,记为DoVP(density of voxel points)[13],再从pi出发沿道路方向分别移动一个距离di,以r为半径统计各体元素内的点数,点云密度梯度可表示为:
$\left\{ \begin{align} & \text{DoV}{{\text{P}}_{{{p}_{i}}}}-\text{DoV}{{\text{P}}_{\text{upon}}}, \text{位于点}{{p}_{i}}\text{前侧, } \\ & \text{DoV}{{\text{P}}_{{{p}_{i}}}}-\text{DoV}{{\text{P}}_{\text{bot}}}, \text{位于点}{{p}_{i}}\text{后侧}\text{.} \\ \end{align} \right.$ | (3) |
$\left| {{\nabla }_{\text{DoVP}}} \right| < \sigma , {{p}_{i}}\in {{S}_{\text{Edge}}}.$ | (4) |
2 结果与分析2.1 实验数据实验数据为某一城市大桥周边两部分道路区域,每部分覆盖道路长约400 m,数据1为直线道路,路面起伏较小,路宽较一致,共有5 000 520个点;数据2在道路中央存在岔口,其余为直线路段,共有5 000 037个点。两段数据均包含大量路灯、交通指示牌、行道树、灌木、防护栏等地物;另有一段山区道路数据用以验证算法在道路具有较大起伏情况下的有效性,图 2为山区道路按高程显示下的效果。
Fig. 2
Download: JPG larger image | |
图 2 山区道路激光点云数据 Fig. 2 LiDAR data of road in mountain area 图 2 山区道路激光点云数据 Fig. 2 LiDAR data of road in mountain area --> |
2.2 实验结果根据最小间隔应大于岔路口宽度且相对平整的路面可适当增加间隔大小的原则,本文先对两份数据分别以30和20 m间隔进行分段,再利用不同路段的路面高程信息设置最小和最大高程阈值,完成高程滤波预处理。
RANSAC道路粗提取的目的是保留完整路面的同时剔除道路两旁的细小物体,如低矮围栏和植被等。路面点数最大值和点到平面的距离阈值是粗提取中的两个关键参数,前者决定算法的迭代次数,次数越多,获得目标平面的概率越大,后者过小会影响路面点提取的完整性。通过对单个路段数据进行实验,确定路面最大点数为总点数的0.6倍,距离阈值为0.22 m。
在提取边界点之前,首先需要确定邻域搜索的最佳半径r,r过大容易引入非边界点,这里根据边缘线的宽度范围取0.15~0.2 m。确定强度梯度阈值和密度梯度阈值需要考虑不同的扫描仪、采集方式以及激光入射角和路面材质等因素。本文通过对单段数据进行试验,确定边缘线与两侧路面的强度梯度和密度梯度范围分别为10~15和5~10,最终分别取10和5作为参数阈值。由于两组数据由相同仪器采集,采集方法相同,且路面状况相似,因此该参数阈值对于两份数据均适用。城区道路与山区道路的边缘线提取结果见图 3。
Fig. 3
Download: JPG larger image | |
图 3 道路边缘线提取结果 Fig. 3 Results of road boundary extraction 图 3 道路边缘线提取结果 Fig. 3 Results of road boundary extraction --> |
最后根据道路的分段数均匀划分B-spline曲线的参数域,对边缘点进行3次B-spline曲线拟合。
综合上述实验参数对两组数据进行处理后,最终得到的路面提取结果如图 4所示。
Fig. 4
Download: JPG larger image | |
图 4 道路提取结果 Fig. 4 Results of road surface extraction 图 4 道路提取结果 Fig. 4 Results of road surface extraction --> |
为了对实验结果进行评估,通过手工选取实验数据中的路面点作为参考数据,再根据Wang等[14]提出的方法计算完整度p、准确度r与提取质量q,进行算法的定量评估,如下:
$\left\{ \begin{align} & p=TP/(TP+FP) \\ & r=TP/(TP+FN) \\ & q=TP/(TP+FP+FN) \\ \end{align} \right..$ | (5) |
表 1为本文方法的精度评价指标,可知算法对路面的提取结果较好,其中完整度、准确度与提取质量均超过90%,证明绝大部分的路面点均得到有效提取。
Table 1
表 1 道路提取结果精度分析Table 1 Accuracy analysis of road extraction results
| 表 1 道路提取结果精度分析Table 1 Accuracy analysis of road extraction results |
2.3 分析与讨论当道路面存在起伏时会降低分段的准确度,影响算法有效性,尤其在山区等地势变化较大的地区。通过山区道路的实验结果,如图 4,大部分道路边缘点得到有效提取,可见算法在路面具有较大高程起伏的环境下仍然有效。
与高差阈值法[2]和特征图像法[6]在无路沿环境下的道路边缘检测效果相比,由于道路边界与路面不存在明显高差,且路面不平整的特点容易造成路面点被检测为边缘点,因此高差阈值法对道路边缘的检测几近失效。而特征图像法通过将三维点云转换到二维平面,极大提高了算法的时间效率,在3类方法中处于最优。但应用二维图像的边缘检测方法容易将草坪边缘、人行道等物理边缘作为道路边界,且容易将路面上方的地物归为路面,因此在准确率方面较低。本文提出的算法则具有较高的准确性和稳定性。
路面粗提取采用具有迭代过程的方法,是算法预处理部分中的主体,其运行时间大约为每段20.6 s。道路边缘提取作为算法流程中的主要步骤,要求通过遍历所有点以求得最终结果,其在实验中的运行时间大约为3.5 min。
在边缘线提取部分,算法需要遍历输入点搜索出满足条件的特征点,因此需要较大的时间开销。通过建立kd树索引以及引入多线程并行编码可在数据量较大的情况下有效提高搜索效率,降低运行时间。
3 结束语本文以车载激光点云数据为研究对象,提出一种基于道路边缘线识别的路面提取方法,并利用实际获取的城区车载激光扫描数据验证方法的有效性,特别是在无明显路沿存在的道路环境下,本文方法也可以精确识别出道路边缘线,为复杂道路环境中的道路提取问题提供了一个新的解决思路。同时本文方法充分利用点云数据固有的三维信息,流程简单,无需辅助数据的支持。
由于城区道路的复杂性,加上本文方法涉及的参数较多,其中阈值参数无法在不同的道路环境中实现自适应,特别是复杂的道路环境提取道路边缘点精度有待提高,如对具有岔口的道路边缘线拟合效果较差,降低了路面提取的质量。针对本文方法的不足之处,今后将在以下几个方面展开进一步研究:1)根据不同的道路环境,设计具有自适应能力的阈值;2)优化搜索半径,提高边缘点的识别准确率;3)探索新的道路线拟合方法,提高复杂道路环境的边缘线拟合质量。
本文所用的车载激光扫描点云数据由易图通科技(北京)有限公司提供,作者在此表示感谢。
参考文献
[1] | 熊伟成, 杨必胜, 董震. 面向车载激光扫描数据的道路目标精细化鲁棒提取[J]. 地球信息科学学报, 2016, 18(3): 376-385. |
[2] | Yu Y, Li J, Guan H, et al. Semiautomated extraction of street light poles from mobile LiDAR point-clouds[J]. IEEE Transaction on Geoscience and Remote Sensing, 2015, 53(3): 1374-1386. DOI:10.1109/TGRS.2014.2338915 |
[3] | Zhang H, Li J, Cheng M, et al. Rapid inspection of pavement markings using mobile LiDAR point clouds[J]. International Archives of Photogrammetry, Remote Sensing and Spatial Information Sciences, 2016, XLI-B1: 717-723. DOI:10.5194/isprsarchives-XLI-B1-717-2016 |
[4] | Zhou L, Vosselman G. Mapping curbstones in airborne and mobile laser scanning data[J]. International Journal of Applied Earth Observation and Geoinformation, 2012, 18(1): 293-304. |
[5] | Hata A, Osoria F, Wolf D. Robust curb detection and vehicle localization in urban environments[C]//2014 IEEE Intelligent Vehicles Symposium Proceedings, Dearborn, Michigan, USA. 2014: 1257-1262. https://www.researchgate.net/publication/265125821_Robust_curb_detection_and_vehicle_localization_in_urban_environments |
[6] | 杨必胜, 魏征, 李清泉, 等. 面向车载激光扫描点云快速分类的点云特征图像生成方法[J]. 测绘学报, 2010, 39(5): 540-545. |
[7] | Yang B, Fang L, Li Q, et al. Automated extraction of road markings from mobile LiDAR point clouds[J]. Photogrammetric Engineering & Remote Sensing, 2012, 78(4): 331-338. |
[8] | 张达, 李霖, 李游. 基于车载激光扫描的城市道路提取方法[J]. 测绘通报, 2016(7): 30-34. |
[9] | Pu S, Rutzinger M, Vosselman G, et al. Recognizing basic structures from mobile laser scanning for road inventory studies[J]. ISPRS Journal of Photogrammetry and Remote Sensing, 2011, 66(6): S28-S39. DOI:10.1016/j.isprsjprs.2011.08.006 |
[10] | Zhou Y, Yu Y, Lu G, et al. Super-segments based classification of 3D urban street scenes[J]. International Journal of Advanced Robotic Systems, 2012, 9(6): 248-255. DOI:10.5772/54715 |
[11] | Kumar P, McElhinney C, Lewis P, et al. An automated algorithm for extracting road edges from terrestrial mobile LiDAR data[J]. ISPRS Journal of Photogrammetry and Remote Sensing, 2013, 85(11): 44-45. |
[12] | Boyko A, Funkhouser T. Extracting roads from dense point clouds in large scale urban environment[J]. ISPRS Journal of Photogrammetry and Remote Sensing, 2011, 66(6): S2-S12. |
[13] | Xu S, Wang R, Zheng H. Road curb extraction from mobile LiDAR point clouds[J]. IEEE Transaction on Geoscience and Remote Sensing, 2017, 55(2): 996-1009. DOI:10.1109/TGRS.2016.2617819 |
[14] | Wang H, Wang C, Chen Y. Extracting road surface from mobile laser scanning point clouds in large scale urban environment[C]//2014 17th International IEEE Conference on Intelligent Transportation Systems(ITSC), Qingdao. https://www.researchgate.net/publication/286569878_Extracting_road_surface_from_mobile_laser_scanning_point_clouds_in_large_scale_urban_environment |