摘要
拥包、沉陷等路面变形是常见的病害类型,但传统基于二维图像的判断方法无法获取深度信息,线性激光扫描的方法精度较高但是单次扫描范围有限,难以短时获取全局状况,导致大尺度变形类病害识别困难。利用车载移动激光雷达系统获取三维点云数据,解决了变形类病害检测的难点,并可提取其三维特征。实测数据验证了方法的可靠性和有效性,可实现拥包、沉陷和坑槽等变形病害的自动化检测,有效提高了检测效率。与全站仪测量结果对比,该方法三维特征提取信息完整且准确率达84.662%。
沥青路面由于受到车辆荷载和自然环境因素作用,在服役过程中会产生路表集料的水平和竖向位移,进而形成大范围的表面变
针对变形类病害,传统的检测和三维特征提取的研究主要聚焦在人工检
车载激光雷达(LiDAR)移动测绘系统为大范围、高精度的信息采集提供了可
因此,本文充分调研目前路面表观病害三维特征检测手段上存在的不足,研判路面病害三维检测需求,针对路面病害中的拥包、沉陷、坑槽等病害的特征差异,利用车载LiDAR移动检测手段获取三维点云数据,从复杂环境点云数据中切割出路面区域;通过挖掘路面高程偏离程度信息,实现病害快速自动检测;基于区域语义搜索方法,提取三维特征评价指标,重构变形类病害三维信息,有效弥补现有技术手段中对上述大规模的变形类病害三维特征检测的局限性。
本文利用LiMobile 400车载激光雷达移动测绘系统采集点云数据。该系统集成了Riegel VUX-1HA激光扫描仪、Ladybug5 PLUS全景数码相机、惯性测量单元(IMU)、多频GPS接收器和其他必要的感应仪
LiDAR设备架设在距离地面垂直高度1.83 m处,单向行驶可以同时采集双向道路数据。实验时间选在晴天的早间时分,避免因雨天、积水、车辆遮挡等问题造成的数据误差,实验中车速控制在40 km·
LiDAR设备输出点云数据包括每个采样点的位置及其反射强度、调整后时间戳;轨迹数据包括采样点的位置、经纬度坐标、时间戳。原始点云数据基于相对坐标系构建,具有稀疏性、无序性和无方向性的特征,且整体数据量较大,无效数据较多,轨迹数据近似于道路延伸方向但不平行于车道线,虽然有高度值但与点云高度无法直接匹配。
由于实验采集的点云数据中包含多种环境要素,需要从复杂环境点云数据中切割出路面区域;并且利用病害的数据特征,准确地从路面点中提取病害区域;最后对标《公路技术状况评定标准》规定,得到各类病害的三维指标。因此,基于实验采集的点云数据,结合点云数据特征,本文提出一种基于海量点云数据的自动化变形类病害检测方法,具体流程如

图1 路面变形类病害检测方法流程
Fig.1 Flowchart of pavement deformation distress detection method
利用移动激光雷达点云数据提取变形类病害的方法主要包括以下3个步骤:
(1)基于车辆轨迹和特征聚类的路面提取和分割算法:利用车载LiDAR移动检测手段获取三维点云数据,通过车辆轨迹和特征聚类,从复杂环境点云数据中切割出完整路面区域。
(2)基于特征分析的路面变形类病害检测方法:通过挖掘路面高程偏离程度,消除纵向坡度、横向坡度和道路线形的影响,利用箱形图分布提取异常点,实现病害快速自动检测和准确定位。
(3)基于区域语义搜索的变形类病害三维特征提取方法:针对提取出的所有病害点,基于区域搜索和聚类方法划分为单一个体,并提取长度、宽度、最小外接矩形面积、水平投影面积、修复体积、近似实际体积、最大高度等三维特征评价指标。
由于点云数据十分庞大,计算机无法一次性处理全部点云数据,本文提出基于点云稠度的自适应区段划分方法,采用均值漂移(mean-shift)算
(1) |
式中:为偏移均值;为簇阶段下中心点集合;为包含在内的点集合;为包含在内的点云数;为点云标签;为对核函数的导数求负。
提取的区段中,点云数据反映了地面以上区域的数据元素,包含了大量道路、树木、沿途构筑物及建筑物等无关要素,需要进行剔除。
(1)地面点提取:利用时间戳匹配轨迹数据与点云数据,先计算轨迹数据点与邻域内数据点的欧式距离剔除异常值,再以每个轨迹点的平面坐标邻域内最高轴数值为地面点的最大高度,筛选高度位于该阈值下的所有点为地面点。地面点提取方法如下:
(2) |
式中:为地面点云的高度范围;为车辆轨迹数据中的Height字段;为检测车辆GPS定位点距地面的高度;为地面点云高度分布的容许范围。
由于提取的区段内包含有多种道路线形和复杂路况信息,且不同行驶阶段内车辆姿态存在差异,在使用基于特征聚类的路面点分割算法时,按照原世界坐标系直接进行处理特征差异较大,导致分割结果存在误差。为消除其影响,将区段内点云进一步划分为区块,并将该区块内的所有点云数据投影在该处车辆轨迹的法平面上,最终可以得到投影换算后的新的局部点云坐标,缩小单次处理数据的范围,同时降低由于环境和车辆因素导致的特征差异,便于通过特征聚类分割路面点。
(2)拟合轨迹切线:为了减小路面纵坡的影响,设置平行于经度或纬度方向的直线沿双轴方向平移,记录其与点云数据的最大最小交点,计算每一对最大最小值的间距并求其中位数,剔除偏离中位数一定阈值外的异常最大最小值对。在计算交点均值后采用自适应迭代的RANSAC算
(3) |
式中:为求解的迭代抽样次数;为先验值,初始设置为,之后动态调整为当前次迭代中有效点在总数据点中占比;为每次计算模型使用的最小量数据点数;为能采样到正确的个点去计算出正确模型的概率。
在初始样本中随机选取和两个点配对,拟合中线方程,将所有数据代入该方程计算欧式距离,小于距离阈值的为有效点,记录有效点比例并不断迭代,记录迭代抽样次数内最大有效点比例对应的中线方程参数,最终拟合得到的道路中线方程。结合车辆轨迹数据,可确定车辆行驶方向,近似取平行于道路中线方程、经过车辆轨迹点的直线为车辆轨迹切线,取与车辆行驶方向同向的有向射线方向为车辆轨迹切线方向。
(3)坐标投影换算至轨迹法平面:沿车辆轨迹切线方向将区段划分为沿道路延伸方向的0.5~5.0 m取值范围的区块,并将该区块内所有点云数据投影在该处车辆轨迹的法平面上。在投影图中,以车辆轨迹与法平面的交线为中心、车辆轨迹在道路平面内的法线方向为横轴、点云数据高度方向为纵轴,换算点云数据坐标至投影面,结果如

图2 坐标投影换算至轨迹法平面示意图
Fig.2 Schematic diagram of coordinates to trajectory normal plane transformed by projection
(4)基于特征聚类的路面点分割:由于路面点在空间分布上具有很强的连续性,且路面的反射强度明显区别于其他区域,选取投影换算后的点云数据的坐标(X、Y、Z)和反射强度(I)4个参数作为聚类的特征值,采用K-means、mean-shift、Gaussian-mixture和DBSCAN聚类方

图3 路面点提取结果
Fig.3 Extraction results of pavement points
K-means方法计算速度非常快,但需人为确立类别的个数,并且对于初始中心点比较敏感,受异常数据的影响相对较大,分割效果不好。Mean-shift方法不需要选择聚类的数量,类别数在运算过程中自动产生,但滑动窗口的半径需要人为设定,窗口半径过大分割结果中包含过多无效点。Gaussian-mixture聚类方法是对K-means方法的改进,优势在于计算时无需预设类别,而是给出点属于每一类的概率,在提取路面的效果上有较明显的提升。DBSCAN方法是基于密度的的聚类方法,优势在于不需要预设聚类数量,还能将异常值识别为噪声而非强制划分进某一类中,DBSCAN聚类方法在选用X、Y和I作为特征值时,聚类的效果最优,几乎与真实路面保持一致。综上所述,通过比较各种聚类方法的聚类效果和运算耗时,本文最终选用Gaussian-mixture聚类方法作为路面分割自动化算法。针对30 km的道路环境点云数据进行自动化操作,统计总点云数据为113 646 670个,经过自动化分割后,区分路面点数45 713 416个、非路面点数67 933 254个。
(1)道路纵向坡度、横向坡度影响消除。首先,在分割得到路面点后,为了消除路面纵向坡度的影响,计算沿道路延伸方向所划分的每个区块内各点高程的最小值作为该区块内的高程基准值,其他各点相对于该高程基准值的高差作为相对高程,用每个区块内的局部相对高程代替整体世界坐标系下的相对高程。其次,为了消除路面横向坡度的影响,取区块内点云数据投影换算至轨迹法平面上的横轴坐标,即垂直于道路延伸方向的投影坐标,和各点的相对高程为参数,采用2次抛物线形式,分段进行道路横坡线形的拟合,计算垂直道路延伸方向每个区块内拟合横坡线形方程上的各点高程为二次高程基准值,其他各点相对于该高程基准值的高差作为相对高程。
(2)道路线形影响消除。为消除道路平面线形对于病害检测的影响,将道路矫正为直线。以道路中线方程为基准,计算区段内每一点至中线方程的距离作为坐标,计算至与中线垂直的区段边界直线的距离作为坐标,变换到新的坐标系下,矫正结果如

图4 道路线形消除结果
Fig.4 Road alignment elimination results
(3)基于偏离程度的病害检测。计算各点偏离横坡抛物线的相对高程,利用四分位距判断数据的分布特性,并采用箱型图寻找异常值,异常值即变形类病害所在区域。拥包或沉陷等变形类病害会导致病害区域的路面与原路面严重分离,采用箱型图的异常值来判断是合理的,部分识别结果如图

图5 拥包病害点提取结果
Fig.5 Extraction results of shoving distress points

图6 沉陷病害点提取结果
Fig.6 Extraction results of subsidence distress points
本文以《公路技术状况评定标准》(JTG 5210—2018)中对各类路面病害的特征描述为提取病害的三维特征的依据。最终确定主要特征参数为病害的长度、宽度、最小外接矩形面积、水平投影面积、修复体积及其近似实际体积。
采用均值漂移聚类方法将全部病害数据进行分割,方便以病害个体为单位计算三维特征。对于给定数量样本,任选一点为中心点划定一个圆形区域,求取该圆形区域内样本的质心,即密度最大处的点,再以该点为中心继续执行上述迭代过程,直至最终收敛。
(1)最小外接矩形面积、长度和宽度,采用Graham扫描
(2)水平投影面积为所有病害区域点在水平面上投影的凸包的面积,与最小外接矩形相比,显示了更真实的区域。
(3)修复体积。病害的体积也是重要的特征,在工程上代表着变形类病害的挖方量或填方量。采用病害最小外接矩形面积与最大最小高程差乘积计算得到。
(4)近似实际体积是指病害区域点云数据的凸壳进行体积分后的体积。利用卷包裹(gift wrapping)算
本文以30 km的道路环境点云数据集进行实测验证,该数据集涵盖各种类型的道路,分别对路面提取和分割结果、变形类病害检测结果和病害区域三维特征提取结果进行分析,验证方法的可靠性。选取包含变形类病害的典型路段区域,其中路段一包含一处拥包、一处沉陷,路段二包含两处坑槽。
为了消除纵向和横向坡度的影响,将路段划分为间距为0.5 m的100个区块。

图7 坡度影响消除前后结果对比
Fig.7 Comparison of results before and after elimination of slope influence

图8 路段一路面变形类病害检测结果
Fig.8 Detection results of pavement deformation distresses in section Ⅰ

图9 路段二路面变形类病害检测结果
Fig.9 Detection results of pavement deformation distresses in section Ⅱ
对比图
为探究点云提取算法的精度与三维特征指标计算方法的科学性,采用全站仪对部分指标进行采集,作为点云数据精度判别的标准,可反映道路变形类病害真值,提取病害的三维特征结果如
由于缺少针对沉陷、拥包、坑槽等大尺度病害的有效检测手段,本文设计了车载LiDAR移动测绘系统采集实验,获取全面、完整、高精度的道路环境点云数据;结合点云数据特征,提出一种基于海量点云数据的自动化变形类病害检测方法,给出了基于车辆轨迹和特征聚类的路面提取和分割算法、基于特征分析的路面变形类病害检测方法以及基于区域语义搜索的变形类病害三维特征提取方法。利用超过30 km的道路实测数据验证方法的可靠性,结果表明,本文方法可以有效检测出包括拥包、沉陷和坑槽在内的变形类病害,并计算出其三维特征指标。利用全站仪数据评估方法的准确性,结果表明,基于点云数据的病害三维特征检测方法具有较高的检测精度,综合准确率为84.662%。本文为道路病害检测提供了新的手段和自动化数据分析途径,与传统的变形类病害检测方法相比,该方法具有高效、自动化程度高的优势。
作者贡献声明
潘 宁:设计实验,处理数据,撰写文稿。
杜豫川:修改文稿,确定文稿。
岳劲松:设计实验,处理数据。
魏斯瑀:设计实验,处理数据。
刘成龙:修改文稿。
吴荻非:修改文稿。
参考文献
朱洪涛, 李田雨. 沥青路面病害的成因及处置方案[J]. 交通世界, 2018(31): 66. DOI: 10.16248/j.cnki.11-3723/u.2018.31.029. [百度学术]
ZHU Hongtao, LI Tianyu. Causes and treatment of asphalt pavement diseases [J]. Transpo World, 2018(31): 66. DOI: 10.16248/j.cnki.11-3723/u.2018.31.029. [百度学术]
COENEN T B J, GOLROO A. A review on automated pavement distress detection methods [J]. Cogent Engineering, 2017, 4(1):1374822. DOI: 10.1080/23311916.2017.1374822. [百度学术]
王应齐. 沥青路面的病害检测与养护[J]. 交通世界, 2019(20): 49. DOI: 10.16248/j.cnki.11-3723/u.2019.20.020. [百度学术]
WANG Yingqi. Disease detection and maintenance of asphalt pavement [J]. Transpo World, 2019(20): 49. DOI: 10.16248/j.cnki.11-3723/u.2019.20.020. [百度学术]
杨静, 李孝兵. 路面检测技术现状及未来发展趋势[J]. 公路交通科技(应用技术版), 2012, 8(1): 104. DOI: CNKI:SUN:GLJJ.0.2012-01-030. [百度学术]
YANG Jing, LI Xiaobing. Current situation and future development trend of pavement detection technology [J]. Highway Transportation Technology (Application Technology), 2012, 8(1): 104. DOI: CNKI:SUN:GLJJ.0.2012-01-030. [百度学术]
GOPALAKRISHNAN K, KHAITAN S K, CHOUDHARY A, et al. Deep convolutional neural networks with transfer learning for computer vision-based data-driven pavement distress detection [J]. Construction and Building Materials, 2017, 157: 322. DOI: 10.1016/j.conbuildmat.2017.09.110. [百度学术]
白志辉. 激光扫描在沥青路面平整度检测中的应用研究[J]. 价值工程, 2018, 37(35): 272. DOI: 10.14018/j.cnki.cn13-1085/n.2018.35.108. [百度学术]
BAI Zhihui. Application research of laser scanning in asphalt pavement flatness detection [J].Value Engineering, 2018, 37(35): 272. DOI: 10.14018/j.cnki.cn13-1085/n.2018.35.108. [百度学术]
DU Y C, CHEN J, ZHAO C, et al. Comfortable and energy-efficient speed control of autonomous vehicles on rough pavements using deep reinforcement learning[J]. Transportation Research Part C: Emerging Technologies, 2022, 134: 103489. DOI: 10.1016/j.trc.2021.103489. [百度学术]
啜二勇. 国外路面自动检测系统发展综述[J]. 交通标准化, 2009(17): 96. DOI: CNKI:SUN:JTBH.0.2009-17-028. [百度学术]
CHUAI Eryong. Development summary of international pavement surface distress automatic survey system [J]. Communications Standardization, 2009(17): 96. DOI: CNKI:SUN:JTBH.0.2009-17-028. [百度学术]
ZHOU S Q, BI Y F, WEI X, et al. Automated detection and classification of spilled loads on freeways based on improved YOLO network[J]. Machine Vision and Applications, 2021, 32(2): 1. DOI: 10.1007/s00138-021-01171-z. [百度学术]
TEDESCHI A, BENEDETTO F. A real-time automatic pavement crack and pothole recognition system for mobile android-based devices [J]. Advanced Engineering Informatics, 2017, 32:11. DOI: 10.1016/j.aei.2016.12.004. [百度学术]
沈照庆, 彭余华, 舒宁. 一种基于SVM的路面影像损伤跨尺度识别方法[J] .武汉大学学报(信息科学版), 2013, 38(8): 993. DOI: 10.13203/j.whugis2013.08.004. [百度学术]
SHEN Zhaoqing, PENG Yuhua, SHU Ning. A road damage identification method based on scale-span image and SVM [J]. Geomatics & Information Science of Wuhan University, 2013, 38(8): 993. DOI: 10.13203/j.whugis2013.08.004. [百度学术]
DU Y C, PAN N, XU Z H, et al. Pavement distress detection and classification based on YOLO network[J]. International Journal of Pavement Engineering, 2021, 22(13): 1659. DOI: 10.1080/10298436.2020.1714047. [百度学术]
惠冰, 郭牧, 王洲, 等. 基于三维激光技术的路面坑槽多维度指标检测[J]. 同济大学学报(自然科学版), 2018, 46(1): 60. DOI: 10.11908/j.issn.0253-374x.2018.01.009. [百度学术]
HUI Bing, GUO Mu, WANG Zhou, et al. Multi-dimensional index detection of potholes based on 3D laser technology [J]. Journal of Tongji University(Natural Science), 2018, 46(1): 60. DOI: 10.11908/j.issn.0253-374x.2018.01.009. [百度学术]
MATHAVAN S, RAHMAN M M, STONECLIFFE-JONES M, et al. Pavement raveling detection and measurement from synchronized intensity and range images [J]. Transportation Research Record, 2014, 2457: 3. DOI: 10.3141/2457-01. [百度学术]
KAMAL K, MATHAVAN S, ZAFAR T, et al. Performance assessment of Kinect as a sensor for pothole imaging and metrology [J]. International Journal of Pavement Engineering, 2018, 19(7): 565. DOI: 10.1080/10298436.2016.1187730. [百度学术]
LI F, ABLAT G, ZHOU S Q, et al. 2D-wavelet based micro and macro texture analysis for asphalt pavement under snow or ice condition[J]. Journal of Infrastructure Preservation and Resilience, 2021, 2(1): 1. DOI: 10.1186/s43065-021-00029-y. [百度学术]
王建锋. 激光路面三维检测专用车技术与理论研究[D]. 西安:长安大学, 2010. [百度学术]
WANG Jianfeng. Research on vehicle technology on road three-dimension measurement [D]. Xi’an: Chang’an University, 2010. [百度学术]
陈琦, 曾妮红, 王留召. 基于车载LiDAR点云的道路建模研究[J]. 北京测绘, 2018, 32(9): 1015. DOI: 10.19580/j.cnki.1007-3000.2018.09.002. [百度学术]
CHEN Qi, ZENG Nihong, WANG Liuzhao. Road modeling research based on vehicle LiDAR point cloud [J]. Beijing Surveying and Mapping, 2018, 32(9): 1015. DOI: 10.19580/j.cnki.1007-3000.2018.09.002. [百度学术]
YADAV M, LOHANI B, SINGH A K. Road surface detection from mobile LiDAR data [J]. ISPRS Annals of Photogrammetry, Remote Sensing and Spatial Information Sciences, 2018, 4(5): 95. DOI: 10.5194/isprs-annals-IV-5-95-2018. [百度学术]
JUNG J, CHE E, OLSEN M J, et al. Efficient and robust lane marking extraction from mobile lidar point clouds [J]. ISPRS Journal of Photogrammetry and Remote Sensing, 2019, 147: 1. DOI: 10.1016/j.isprsjprs.2018.11.012. [百度学术]
郭峰, 潘永祥, 邹友峰, 等. 车载LiDAR系统在井盖病害监测中的应用研究[J]. 能源与环保, 2017, 39(4): 64. DOI: 10.19389/j.cnki.1003-0506.2017.04.013. [百度学术]
GUO Feng, PAN Yongxiang, ZOU Youfeng, et al. Application study on vehicle-mounted LiDAR system in disease detection of manhole cover [J]. China Energy and Environmental Protection, 2017, 39(4): 64. DOI: 10.19389/j.cnki.1003-0506.2017.04.013. [百度学术]
成斌, 管海燕, 季秋菊,等. 车载LiDAR数据的道路裂缝信息自动提取[J]. 测绘科学, 2018, 43(08): 130. DOI: 10.16251/j.cnki.1009-2307.2018.08.021. [百度学术]
CHENG Bin. GUAN Haiyan. JI Qiuju,et al. Automatic extraction of pavement cracks information using mobile LiDAR data [J]. Science of Surveying and Mapping, 2018, 43(8):130. DOI: 10.16251/j.cnki.1009-2307.2018.08.021. [百度学术]
LI Z Q, CHENG C Q, KWAN M P, et al. Identifying asphalt pavement distress using UAV LiDAR point cloud data and random forest classification [J]. ISPRS International Journal of Geo-Information, 2019, 8(1):39. DOI: 10.3390/ijgi8010039. [百度学术]
YU Y T, LI J, GUAN H Y, et al. 3D crack skeleton extraction from mobile LiDAR point clouds [C]// 2014 IEEE International Geoscience and Remote Sensing Symposium (IGARSS).Quebec :IEEE, 2014: 914-917. DOI: 10.1109/IGARSS.2014.6946574. [百度学术]
ZHAO J X, XU H, LIU H C, et al. Detection and tracking of pedestrians and vehicles using roadside LiDAR sensors [J]. Transportation Research Part C Emerging Technologies, 2019, 100: 68. DOI: 10.1016/j.trc.2019.01.007. [百度学术]
COMANICIU D, MEER P. Mean shift: a robust approach toward feature space analysis [J]. IEEE Transactions on Pattern Analysis and Machine Intelligence, 2002, 24(5): 603. DOI: 10.1109/34.1000236. [百度学术]
SCHNABEL R, WAHL R, KLEIN R. Efficient RANSAC for point-cloud shape detection [J]. Computer Graphics Forum, 2007, 26(2): 214. DOI: 10.1111/j.1467-8659.2007.01016.x. [百度学术]
PANCHAM A, WITHEY D, BRIGHT G. Comparison of clustering methods for tracking features in RGB-D images [C]// Proceedings of the IECON 2016-42nd Annual Conference of the IEEE Industrial Electronics Society. Florence: IEEE, 2016: 871-876. [百度学术]
GOMES A J P. A total order heuristic-based convex hull algorithm for points in the plane [J]. Computer-aided Design, 2016(70): 153. DOI: 10.1016/j.cad.2015.07.013. [百度学术]
张传帅, 焦利国. 基于车载LiDAR系统的路面高程测量研究[J]. 中州煤炭, 2013(5): 20. DOI: CNKI:SUN:ZZMT.0.2013-05-008. [百度学术]
ZHANG Chuanshuai, JIAO Liguo. Research on road height measurement based on mobile LiDAR system [J]. Zhongzhou Coal, 2013(5): 20. DOI: CNKI:SUN:ZZMT.0.2013-05-008. [百度学术]