网刊加载中。。。

使用Chrome浏览器效果最佳,继续浏览,你可能不会看到最佳的展示效果,

确定继续浏览么?

复制成功,请在其他浏览器进行阅读

基于激光反射强度特征的智能汽车路面估计方法  PDF

  • 侯欣辰 1
  • 冷搏 1
  • 曾德全 1,2,3
  • 熊璐 1
  • 傅直全 4
  • 胡斐 4
1. 同济大学 汽车学院, 上海 201804; 2. 南昌智能新能源汽车研究院,江西 南昌 330052; 3. 华东交通大学 机电与车辆工程学院, 江西 南昌 330013; 4. 浙江万安科技股份有限公司,浙江 绍兴 311800

中图分类号: U461.91

最近更新:2022-08-11

DOI:10.11908/j.issn.0253-374x.22760

  • 全文
  • 图表
  • 参考文献
  • 作者
  • 出版信息
EN
目录contents

摘要

为了提升智能汽车行驶安全性,适应高速、大侧偏等极限工况应用场景,轮胎-路面附着系数峰值估计技术越来越受到汽车主动安全控制领域研究的关注。提出了一种基于激光雷达的路面估计方法:基于极大似然估计方法求解了结构化道路常见类型路面的激光雷达反射强度分布模型参数,并依此建立典型路面数据库;利用Kullback⁃Leibler散度表征反射强度分布相似度,结合所建立的路面数据库辨识路面类型,然后映射出对应的峰值附着系数估计值。试验结果表明,提出的轮胎-路面附着系数峰值估计方法的准确率达到90%以上,能够灵敏地检测出路面突变现象,且对白天和夜晚不同的光照条件具有鲁棒性。

随着主动安全控制技术在智能汽车上的广泛应

1,轮胎-路面峰值附着系数(以下简称“峰值附着系数”)作为智能汽车主动安全控制过程中的关键参数,其估计技术逐渐受到关注。目前的峰值附着系数估计方法主要分为两2。一类方法是基于轮胎动力学响应的估计方法,即通过轮胎动力学模型构建轮胎-路面峰值附着系数观测器,从而进行路面估计。昆明理工大学的杨秀建3在魔术公式轮胎模型的基础上,利用递推最小二乘的方法估计峰值附着系数。奥地利格拉茨工业大学的SHAO4基于TMsimple轮胎模型,通过轮胎侧向力和回正力矩,实现在大小侧向工况下的轮胎-路面峰值附着系数估计(以下简称“路面估计”)。总体而言,此类方法不用增加额外的传感器,实现条件较为简单,但必须在轮胎处于足够大的激励之下才能获得较精确的估计值,这时车轮的滑动率较高,车辆可能已经处于不稳定的状态。此外,此类方法只能估计车辆已驶过的路面,而不能预测前方路面的情况,因此估计结果对主动安全控制系统的参考价值不够大。

另一类方法是利用智能汽车搭载的传感器对路面特性进行感知,首先对路面状态进行分类,再根据建立的典型路面类型与峰值附着系数的映射关系,得出路面的峰值附着系数估计值,其中最常见的方法是利用路面图像进行路面辨识。德国布伦瑞克工业大学的NOLTE

5收集了各种状态的路面图像,将图像分别输入基于InceptionV3和ResNet50卷积神经网络的分类器中,实现路面类型的辨识。同济大学的DU6通过路面图像的灰度直方图、局部二值模型和灰度共生矩阵来描述其纹理特征,基于VGGNet深度神经网络实现路面辨识。总体而言,基于神经网络等模型的分类器对路面图像分类的准确率较高,且可以预先估计前方路面,以便主动安全控制系统根据估计结果及时调整控制策略。然而,车载摄像头获取图像的质量容易受到光照条件变化的不利影响(如白天与夜晚有显著光照差异7-8

激光雷达对不同光照条件的鲁棒性较高,在智能汽车环境感知方面逐渐得到应

9,这也为路面估计方法提供了新的可能性。本文提出了一种基于激光雷达的路面估计方法。利用极大似然估计方法求解出结构化道路常见类型路面的激光雷达反射强度分布模型参数,并基于此建立了典型路面数据库。本文基于KL散度(Kullback-Leibler divergence, KLD)分析了白天和夜晚不同光照条件对路面反射强度分布的影响,利用反射强度分布相似度进行路面类型辨识,进而映射出峰值附着系数估计值,并通过试验验证了提出的路面估计方法的有效性。

1 典型路面数据库

本文主要研究以沥青或混凝土为主要材质的常见结构化道路,并将路面类型分为干沥青、干混凝土、湿沥青、湿混凝土等4类。由于不同材质表面对激光束的反射率不

10,激光雷达探测到各种路面的反射强度分布有一定的差异。因此,可将反射强度分布模型参数作为路面特征进行提取,建立典型路面数据库,为路面估计算法的设计做准备。

激光扫描均质表面时得到的反射强度值服从高斯分

9-10。然而实际的路面上存在少量交通标识、局部填料等结构,它们的材质与路面不同,反射强度分布特征也不同。因此,激光雷达扫描实际道路时得到的反射强度分布是路面反射强度分布与噪声分布的混合体,其概率密度函数如式(1)所示。

f(I;θ)=i=12αiϕ(I;μi,σi) (1)

式中:f为混合高斯模型的概率密度函数;I为反射强度;θ为模型参数;αi为第i个高斯分布的混合系数,表示各高斯分量在混合模型中的权值,0αi1ϕ为高斯分布的概率密度函数;μi为第i个高斯分布的均值;σi为第i个高斯分布的标准差。

利用极大似然的估计方法求解出路面反射强度分布模型参数。设观测到的反射强度数据为I=(I1,I2,...,Ij)T,按式(2)式(3)定义第j个观测到的数据Ij对第i个高斯模型的响应度Γ

Γ=γ11γ21γj1γ12γ22γj2T (2)
γji=1,  ji0,   (3)

Ijγji合并后称为完全数据X=(Ij,γji)。在算法迭代至第k次时,X的对数似然函数logP(I,Γ|θ)在给定了Ij和当前参数估计值θ̂k时,对γji的条件概率分布f(γ|I;θ̂k)的期望Q(θ;θ̂k)如式(4)、(5)所示。

Q(θ;θ̂k)=ElogP(I,Γ;θ);I,θ̂k=Elogj=1nP(Ij,γj1,γj2;θ);I,θ̂k=i=12j=1nγ̂jilogαi+j=1nγ̂jilog12π-logσi-12σi2Ij-μi2 (4)
γ̂ji=Eγji,I;θ=αiϕIj;θi/i=12αiϕIj;θi (5)

新一轮迭代中模型参数的更新需令Q(θ;θ̂k)取极大值。利用式(4)分别对μiσiαi求偏导并令之为0,以及令约束αi=1,则可得到新一轮迭代中的模型参数,如式(6)‒(8)所示。

μ̂i,k+1=j=1nγ̂jiIj/j=1nγ̂ji,  i=1,2 (6)
σ̂i,k+12=j=1nγ̂jiIj-μk2/j=1nγ̂ji,  i=1,2 (7)
α̂i,k+1=j=1nγ̂ji/n,  i=1,2 (8)

式中:i表示第i个分模型;k+1表示第k+1次迭代。

不断迭代上述过程,直至结果收敛或达到最大迭代次数限制,即可最终求得各分模型的模型参数(αiμiσi),从而解出混合高斯模型。

激光雷达数据采集车辆配备一台128 线的RoboSense激光雷达,帧率为10 Hz。考虑到数据的采集和算法的应用可能在时间和空间上具有较大差异,最有可能对车载环境感知传感器产生不利影响的环境因素就是光照条件。常见驾驶场景中,白天和夜晚的光照条件对比最显著,故以此分析其对路面反射强度分布的影响,以确定是否需针对不同光照条件建立不同的数据库。分别在白天10:00和夜晚21:00采集各种路面的点云数据,并利用上述方法求解得到4种路面的反射强度分布模型,如图1所示。

图1  不同光照条件下的路面反射强度分布

Fig.1  Laser intensity distribution of road surfaces under different illumination conditions

式(9)所示,采用KLD值DKL(ϕ1,ϕ2)来表征两个高斯分布模型ϕa(I)ϕb(I)之间的差异性, KLD值越大表明模型之间差异越大。不同光照条件下的各种路面反射强度分布之间的KLD值如表1所示。

DKL(ϕa,ϕb)=ϕa(I)log(ϕa(I))-ϕa(I)log(ϕb(I))dI=logσbσa+σa2+(μa-μb)22σb2-12 (9)
表1  不同光照条件下的路面反射强度分布KLD值
Tab.1  KLD value of laser intensity distribution of road surfaces under different illumination conditions
路面类型2路面类型1/KLD

干沥青/

白天

干沥青/

夜晚

干混凝土/

白天

干混凝土/

夜晚

湿沥青/

白天

湿沥青/

夜晚

湿混凝土/

白天

湿混凝土/

夜晚

干沥青/白天 0 0.0164 2.3901 2.5093 46.6679 55.7618 19.3558 18.9484
干沥青/夜晚 0.0196 0 2.2137 2.3314 47.7211 56.9805 19.8778 19.4352
干混凝土/白天 6.3794 4.6811 0 0.0150 96.3251 112.4273 46.5045 44.5600
干混凝土/夜晚 7.4604 5.4985 0.0167 0 101.0429 117.7815 49.1756 47.0676
湿沥青/白天 32.3582 25.9497 24.5855 23.0553 0 0.0851 1.3710 1.0234
湿沥青/夜晚 35.0166 28.0655 26.0005 24.3524 0.0772 0 1.9527 1.5114
湿混凝土/白天 20.2832 16.3296 17.9045 16.9207 2.0650 3.2445 0 0.0170
湿混凝土/夜晚 21.4959 17.2840 18.5616 17.5196 1.6618 2.7075 0.0183 0

表1可以看出,相比于不同类型路面反射强度分布之间的KLD值,不同光照条件下同种路面反射强度分布之间的KLD值要小2~4个数量级。考虑到激光雷达的测量误差等扰动因素,可以认为不同光照条件下路面反射强度分布的区别对路面类型辨识的影响可以忽略,即可以对不同光照条件建立统一的路面反射强度数据库。干沥青、干混凝土、湿沥青和湿混凝土的反射强度分布模型的均值分别为9.47、11.96、3.48和4.77;标准差分别为0.72、1.20、0.57和0.76。

2 基于分布相似度的路面估计

利用激光雷达信息进行路面估计的关键在于根据实测路面的反射强度分布进行路面类型辨识,即采用考察分布相似度的方法来辨识路面类型。在测试工况中,激光雷达获取的路面点云信息会实时发送,因此可以根据式(2)~(8)获得实测路面的反射强度频率分布,设为ϕtest(I),其对应的路面类别设为ctest。所建立的路面反射强度数据库中,各类路面的反射强度分布可以看作实例ϕtest(I)对应的先验模型,设为ϕi(I),其对应路面类别设为ci,其中i=1,2,3,4。采用KLD值表征分布模型之间的差异,可以按照式(9)得出ϕtest(I)ϕi(I)之间的KLD值,记为DKL(ϕtest,ϕi)。考虑到KLD的无界性,为便于后续计算,设计映射f:xe-x以定义ϕtest(I)ϕi(I)之间的相似度S(ϕtest,ϕi),结合式(9)化简得到S(ϕtest,ϕi)式(10)所示。

S(ϕtest,ϕi)=1.65 σtestσie-σtest2+(μtest-μi)22σi2 (10)

实例ϕtest(I)属于先验模型,ϕi(I)的对应路面类别ci的概率P(ctest=ci)可以采用式(11)求解。

P(ctest=ci)=S(ϕtest,ϕi)+λi=14S(ϕtest,ϕi)+λ (11)

式中λ为平滑算子,λ=1×10-4。根据最小错误率分类准则,将P(ctest=ci)最大的路面类别ci作为实例ϕtest(I)的分类结果,如式(12)所示。

ctest=argmaxP(ctest=ci) (12)

在得出分类结果后,可以将路面材质映射至峰值附着系数的统计数据经验值。依据文献[

11]、[12],设定干沥青路面的峰值附着系数为1.0,干混凝土路面的峰值附着系数为0.9,湿沥青路面的峰值附着系数为0.7,湿混凝土路面的峰值附着系数为0.6。路面估计算法如图2所示。

图2  路面估计算法示意图

Fig.2  Diagram of road estimation algorithm

3 试验验证

为验证提出的路面估计器的有效性,在不同路面上采集多段激光雷达数据,采用文献[

13]的方法提取出路面点云后按时间戳依次输入估计算法中,观察估计结果。

数据采集设备与第1部分所述相同。为保证试验结果真实性,用于验证的激光点云数据与构建数据库时的数据不重合。试验数据采集场景图像及三维点云图样张如图3所示。

  

  

  

  

a  干沥青路面

b  干混凝土路面

c  湿沥青路面

d  湿混凝土路面

图3  试验数据采集场景图像及三维点云图(样张)

Fig.3  Image and 3-dimensional point cloud of test data acquisition scene (sample)

试验设置的目的是验证所提出的路面估计方法的有效性,其具体包括:在较长一段时间的运行过程中能否稳定地得出准确的估计结果;能否及时地检测路面突变现象。因此,所设置的试验工况包括单一路面的长期运行工况和路面突变工况两类。长期运行工况的路面类型包括干沥青、干混凝土、湿沥青和湿混凝土,并包含白天和夜晚的试验结果以验证估计方法对白天和夜晚不同光照条件的鲁棒性;路面突变工况的路面类型包括干沥青到干混凝土、干混凝土到干沥青、湿沥青到湿混凝土、湿混凝土到湿沥青、干沥青到湿沥青、湿沥青到干沥青。

3.1 长期运行工况验证

不同路面和光照条件下长期运行工况估计结果如图4所示。定义准确率A为正确得出峰值附着系数估计值的点云帧数占总帧数的百分比,如式(13)所示。各工况下准确率的计算结果如表2所示。

a  干沥青路面,白天

b  干沥青路面,夜晚

c  干混凝土路面,白天

d  干混凝土路面,夜晚

e  湿沥青路面,白天

f  湿沥青路面,夜晚

g  湿混凝土路面,白天 h 湿混凝土路面,夜晚

图4  长期运行工况估计结果

Fig.4  Estimation results under long-term operating conditions

表2  长期运行工况下的路面估计准确率
Tab.2  Road estimation accuracy under long-term operating condition
光照条件准确率/%
干沥青干混凝土湿沥青湿混凝土
白天 98.28 98.34 96.35 94.35
夜晚 96.91 95.35 98.01 92.69
A=ncorrectn×100% (13)

可以看出,在单一路面工况中,提出的路面估计方法可以在较长时间内稳定地得出准确的估计结果,准确率均达到90%以上。

偶尔出现的误识别现象主要发生在同种干湿状态的沥青和混凝土路面之间,其原因是这两种材质的微观结构特性存在一定的相似性,使激光反射强度的分布相对比较接近,也可能与激光雷达的测量误差有关。此外,白天和夜晚的不同光照条件下同种路面的估计准确率均较高且非常接近,证明该估计方法对不同光照条件的鲁棒性较好。

3.2 路面突变工况验证

路面突变工况的估计结果如图5所示。

  

a  干沥青到干混凝土路面

  

b  干混凝土到干沥青路面

  

c  湿沥青到湿混凝土路面

  

d  湿混凝土到湿沥青路面

  

e  干沥青到湿沥青路面

  

f  湿沥青到干沥青路面

图5  路面突变工况估计结果

Fig.5  Estimation results under sudden change of road conditions

可以看出,提出的路面估计方法在各种路面突变工况下均能有效地估计出峰值附着系数的改变。在路面发生突变时,估计结果有比较灵敏的反应,反应时间约0.2 s,不同工况中的这个值可能会因为突变前后路面反射强度分布的相似程度不同而有所波动。在路面突变前后的约3 s之内,路面估计的结果均是准确的,并没有出现在突变前后的两种路面之间反复跳跃的现象,也说明了估计算法可以根据不同路面的反射强度特征准确地进行估计。

4 结语

本文提出了一种基于激光雷达的路面估计方法。利用极大似然的思想估计出结构化道路常见类型路面的激光雷达反射强度分布模型参数,利用KL散度分析得出白天和夜晚不同光照条件对路面反射强度分布的影响对于路面类型辨识可以忽略,并在此基础上建立了典型路面数据库。提出了基于分布相似度的路面估计方法,利用KL散度表征反射强度分布的相似度,辨识出实际路面的类型后映射出峰值附着系数估计值。

长期运行工况和路面突变工况下的试验结果表明,所提出的路面估计方法的估计准确度达到90%以上,对于白天和夜晚的不同光照条件具有鲁棒性,且能够灵敏地检测出路面突变现象。在未来的研究工作中,将考虑更全面的光照条件变化(如清晨和黄昏等),丰富数据采集和试验场景,进一步验证和提升路面估计方法的适用范围。

参考文献

1

王震坡丁晓林张雷. 四轮轮毂电机驱动电动汽车驱动防滑控制关键技术综述[J]. 机械工程学报20195512): 99. DOI: 10.3901/JME.2019.12.099. [百度学术] 

WANG ZhenpoDING XiaolinZHANG Lei. Summary of key technologies for driving anti-skid control of four-wheel hub motor driven by electric vehicle[J]. Journal of Mechanical Engineering20195512): 99. DOI: 10.3901/JME.2019.12.099. [百度学术] 

2

袁朝春张龙飞陈龙. 路面附着系数识别方法发展现状综述及展望[J]. 机械制造与自动化20182): 1. DOI: 10.19344/j.cnki.issn1671-5276.2018.02.001. [百度学术] 

YUAN ChaochunZHANG LongfeiCHEN Long. Summary and prospect of development of road coefficient identification methods[J]. Machine Building and Automation20182): 1. DOI: 10.19344/j.cnki.issn1671-5276.2018.02.001. [百度学术] 

3

杨秀建李金雨张昆. 基于路面附着系数估计的车辆自适应巡航控制研究[J]. 南京理工大学学报2018424): 466. DOI: 10.14177/j.cnki.32-1397n.2018.42.04.012. [百度学术] 

YANG XiujianLI JinyuZHANG Kunet al. Vehicular adaptive cruise control based on road adhesive coefficient estimation[J]. Journal of Nanjing University of Science and Technology2018424): 466. DOI: 10.14177/j.cnki.32-1397n.2018.42.04.012. [百度学术] 

4

SHAO LJIN CLEX Cet al. Robust road friction estimation during vehicle steering[J]. Vehicle System Dynamics2019574): 493. DOI: 10.1080/00423114.2018.1475678. [百度学术] 

5

NOLTE MKISTER NMAURER M. Assessment of deep convolutional neural networks for road surface classification[C]// 2018 21st International Conference on Intelligent Transportation Systems (ITSC)Maui HawaiiIEEE2018381. DOI: 10.1109/ITSC.2018.8569396. [百度学术] 

6

DU Y CLIU C LSONG Yet al. Rapid estimation of road friction for anti-skid autonomous driving[J]. IEEE Transactions on Intelligent Transportation Systems2020216): 2461. DOI: 10.1109/TITS.2019.2918567. [百度学术] 

7

CHENG L SZHANG XSHEN J. Road surface condition classification using deep learning[J]. Journal of Visual Communication and Image Representation201924205. DOI: 10.1016/j.jvcir.2019.102638. [百度学术] 

8

SUN LWANG K WYANG K Let al. See clearer at night: Towards robust night-time semantic segmentation through day-night image conversion[C]// Proceedings of SPIE. Strasbourg: EPIE, 2019. 11169. https://doi.org/10.1117/12.2532477. [百度学术] 

9

韩栋斌徐友春李华. 无人车三维激光雷达反射强度校准[J]. 军事交通学院学报20171910): 85. DOI: 10.16807/j.cnki.12-1372/e.2017.10.020. [百度学术] 

HAN DongbinXU YouchunLI Huaet al. Reflection intensity calibration of three-dimensional lidar on unmanned vehicle[J]. Journal of Military Transportation University20171910): 85. DOI: 10.16807/j.cnki.12-1372/e.2017.10.020. [百度学术] 

10

KASHANI A GOLSEN M JPARRISH C Eet al. A review of lidar radiometric processing: from ad hoc intensity correction to rigorous radiometric calibration[J]. Sensors20151511): 28099. DOI: 10.3390/s151128099. [百度学术] 

11

喻凡林逸. 汽车系统动力学[M]. 2版. 北京机械工业出版社2017. [百度学术] 

YU FanLIN Yi. Automotive system dynamics[M]. 2nd ed. BeijingMechanical Industry Press2017. [百度学术] 

12

康渴楠. 基于视觉的智能车辆行驶道路附着状态判断研究[D]. 重庆重庆交通大学2019. [百度学术] 

KANG Kenan. Research on vision-based judgement of road adhesion state for intelligent vehicle[D]. ChongqingChongqing Jiaotong University2019. [百度学术] 

13

谢宏全汪秋玲蔡东健. 利用车载LiDAR点云数据提取城市道路边界[J]. 测绘通报20212): 64. DOI: 10.13474/j.cnki.11-2246.2021.0045. [百度学术] 

XIE HongquanWANG QiulingCAI Dongjianet al. Extraction of urban road boundary based on vehicle-mounted LiDAR point cloud data[J]. Bulletin of Surveying and Mapping20212): 64. DOI: 10.13474/j.cnki.11-2246.2021.0045. [百度学术]