基于复合传感实现路情实时识别和危险判断的方法及其系统的利记博彩app
【专利摘要】本发明涉及一种基于复合传感实现路情实时识别和危险判断的方法及其系统，属于智能汽车技术领域。该方法包括汽车智能控制系统：该控制系统包括汽车中央控制器、车辆周围障碍物检测系统、驾驶员状态检测系统、车道偏离预警系统和车辆运动控制与通信系统，所述汽车中央控制器通过CAN总线分别和车辆周围障碍物检测系统、驾驶员状态检测系统、车道偏离预警系统、车辆运动控制与通信系统相连接，本发明解决了路情的实时自动识别，行车过程中障碍物检测，驾驶员驾驶状态检测以及车道偏离预警，可以广泛应用于汽车智能驾驶和智能交通领域。
【专利说明】
基于复合传感实现路情实时识别和危险判断的方法及其系统
技术领域
[0001] 本发明涉及一种基于复合传感实现路情实时识别和危险判断的方法及其系统，属 于智能汽车技术领域。
【背景技术】
[0002] 伴随着我国高速公路的迅猛发展和人民生活水平的提高，机动车保有量呈现出井 喷式增加，与此同时，道路交通事故也居高不下，给人民群众的生命财产造成了巨大的损 失。根据交警部门对多年来的交通事故调查分析表明，我国大多数交通事故的主要直接原 因是驾驶人的疲劳驾驶或违章驾驶，主要包括车辆驾驶人行驶过程中的非正常驾驶行为， 如疲劳驾驶、越线行驶、超速行驶、长时间占道行驶、压线行驶和安全车距不足等行为。因 此，如何有效的监控、约束和规范车辆驾驶人操纵行为已成为保障道路交通安全的核心问 题。
[0003] 对路情实时识别和危险判断以及及时的提示危险信息，对于预防交通事故的发生 具有重要的意义。目前，交通事故的预防主要依靠驾驶员的驾驶经验，通过驾驶员对路情进 行实时识别和危险判断，这种方法严重依赖于驾驶员的主观人为因素，容易出现交通事故。 驾驶辅助系统是一项重要的汽车主动安全技术，运用目标检测和跟踪技术对车辆前方危险 目标进行识别，并判断其风险等级，可以实现路情实时识别和车辆前方危险目标识别，很大 程度的降低交通事故，提高车辆行驶的安全性，是智能交通和智能车辆的重点研究方向。
【发明内容】
[0004] 本发明的目的是解决驾驶过程中路情智能识别和危险的准确判断问题，提出了一 种基于复合传感实现路情实时识别和危险判断的方法及其系统。
[0005] 本发明为了实现上述目的，采用如下技术方案：
[0006] -种基于复合传感实现路情实时识别和危险判断的方法，其特征在于：
[0007] 该方法包括汽车智能控制系统：该控制系统包括汽车中央控制器、车辆周围障碍 物检测系统、驾驶员状态检测系统、车道偏离预警系统和车辆运动控制与通信系统，所述汽 车中央控制器通过CAN总线分别和车辆周围障碍物检测系统、驾驶员状态检测系统、车道偏 离预警系统、车辆运动控制与通信系统相连接，实现对车辆周围障碍物检测系统、驾驶员状 态检测系统、车道偏离预警系统、车辆运动控制与通信系统信息融合和决策；
[0008] 车辆周围障碍物检测系统检测车辆左右两侧的障碍物以及接近车身的行人、车 辆，判断障碍物与车辆的距离是否小于安全车距，并给出报警信息；
[0009] 驾驶员状态检测系统通过分析驾驶员的面部表情判断驾驶员是否处于疲劳驾驶 状态，当驾驶员处在疲劳驾驶状态或酒驾状态时，给出驾驶员声音报警提示信息；
[0010] 车道偏离预警系统通过车道识别算法检测车道线，并计算出车辆在车道中的具体 位置和偏离角度，根据偏离报警模型判断车辆是否偏离了原有车道，根据阈值判断车辆是 否处于安全行车状态，当车辆不是处在安全行车状态时，给出报警信息；
[0011] 车辆运动控制与通信系统根据车道偏离预警系统、驾驶员状态检测系统和车辆周 围障碍物检测系统的状态信息对车辆进行智能控制，并将汽车行驶的状态信息发送给其它 车辆。
[0012] 进一步的，
[0013] 车辆周围障碍物检测系统检测车辆左右两侧的障碍物以及接近车身的行人、车 辆，判断障碍物与车辆的距离是否小于安全车距，安全车距s的计算公式为：
，其中P表示路面的附着系数，Vb表示本车车速，V r表示相对 车速，当障碍物与车辆的距离小于安全车距时将给出报警信息。
[0014] 进一步的，
[0015] 车道偏离预警系统包括如下步骤：
[0016] a、对车载摄像机采集的道路图像进行逆透视变换，图像缓存坐标系到车体坐标系 之间的逆透视变换公式如下：
[0020] 式中车载摄像机安装在车体中的位置对应车体坐标系下的坐标为(d，l，h)，y是 摄像机光轴在zv = 〇平面的投影与yv轴之间的夹角，9是摄像机光轴偏离zv=〇平面的角度，2 a是车载摄像机的是角范围，Rx是摄像机的水平分辨率，Ry是摄像机的垂直分辨率；
[0021] b、对逆透视变换后的道路图像进行预处理，预处理过程包括道路图像的车道线的 边缘提取，具体过程如下：
[0022] 使用Robert算子提取图像中的单边缘信息，具体计算方法如下：
.， 用R(i，代j)替原图像像素点（i，j)的灰度值，得到车道标志线的边缘图像；
[0024] c、采用阈值分割算法对二值化的图像进行处理，增强车道标志线的边缘信息，具 体计算方法如下：
[0025] (1)选择初始阈值 ，其中gmax，gmin是车道标志线的边缘图像中灰度 值的最大值和最小值；
[0026] (2)根据初始阈值Mo将车道标志线的边缘图像分为两个区域，求取两个区域的平 均灰度如下：
[0028] (3)更新阈值过程，求取新的阈值为
[0029 ] (4)重复步骤(2)和(3)过程，直到Mk+i =Mk时算法停止，得到最佳阈值为Mk+i;
[0030] d、在二值化图像中进行标志线起始点检测、跟踪与拟合，获取道路模型，完成车道 标志线提取，具体计算方法如下：
[0031 ] (1)车道标志线起始点检测、跟踪；
[0032] 根据摄像机在车体中的安装位置，在逆透视投影变换后的道路图像中，车辆的位 置应该位于图像底部的中间位置附近;首先，采用Hough变换计算得到车道标志线的斜率k; 具体过程如下:选取图像底部WXO. 1H的区域作为Hough变换的搜索区域，W是图像的宽度，H 是图像的高度;假设Ap为1像素，A0为1°，为每一个小单元（Ap，A0)设置累加器Abuej)， _ li「) 了-1 其中/ = U = 〇，l，2，...，179,5(^)= [ 3(只為)]，然后搜索 i^-0 出B(0j)最大数组元素对应的0〇，可以求出车道标志线的斜率k = tan(0Q-9O);
[0033] 其次，判断出车辆所在车道的左右标志线对应白点分布情况统计图中的哪两条尖 峰，求出两条尖峰在投影轴Xv上的位置坐标为t，Xj ;
[0034] 最后，根据尖峰对应的投影轴坐标计算出车道标志线起始点的坐标为（Xl，0)和 (Xj，0)，其中：
[0036] 检测得到车道标志线的起始点坐标后，可以从起始点开始，沿着起始方向逐段跟 踪检测车道标志线，并用多条首尾相连的直线段近似表示车道标志线；
[0037] (2)车道标志线拟合;假设车道标志线模型为Y = X(i)+e，巾为求的车道标志线模型 参数，X，Y是第跟踪检测得到的车道标志线信息点，e是随机噪声，采用最小二乘法求出车道 标志线模型参数为=(乂1广1巧；
[0038] e、采用基于AR模型的时间序列预测方法估计车辆的行驶轨迹；
[0039] f、根据检测的道路模型与估计的车辆行驶轨迹求取车道偏离点的位置坐标，并计 算相应的车道偏离时间M;
[0040] 假设预测得到的相对于车道中线的侧向偏移量序列为{ A U，i = l，2, . . .，20,左 右车道标志线的参数方程为:yi (X) = blQ+bllX+bl2X2和yr ( X ) = brQ+brlX+br2X2，算出20个预测 点的坐标为(Xi，yi)分别为yi = 50i-49，Xi = Xmi+ a i，其中Xmi可以通过联立以下方程求得：
[0042] 算出20个预测点的位置坐标后，将其依次连接起来得到的预测的车辆行驶轨迹曲 线，与左右车道标志线的参数方程联立可以求出当前时刻到车道偏离时刻车辆将行驶的距 离D，假设车辆的速度为v，求得M=D/v;
[0043] g、根据设置的阈值判断车辆是否存在偏离车道的危险，在系统中设定一个阈值 Mt，gM<Mt，则认为车辆存在车道偏离的危险，系统对驾驶员发出告警;反之则认为暂时不 存在车道偏离的危险。
[0044] -种基于复合传感实现路情实时识别和危险判断的系统，该系统包括汽车中央控 制器、车辆周围障碍物检测系统、驾驶员状态检测系统、车道偏离预警系统和车辆运动控制 与通信系统，所述汽车中央控制器通过CAN总线分别和车辆周围障碍物检测系统、驾驶员状 态检测系统、车道偏离预警系统、车辆运动控制与通信系统相连接，实现对车辆周围障碍物 检测系统、驾驶员状态检测系统、车道偏离预警系统、车辆运动控制与通信系统信息融合和 决策。
[0045] 进一步的，
[0046] 所述车辆运动控制与通信系统:包括控制器DSP四、电子制动器、车轮、执行器、方 向盘、无线通信系统、电子点火器、发动机，所述控制器DSP四通过电子制动器和车轮相连 接，所述控制器DSP四通过执行器和方向盘相连接，所述控制器DSP四通过电子点火器和发 动机相连接，所述控制器DSP四和无线通信系统相连接。
[0047]进一步的，
[0048]所述车道偏离预警系统:车道偏离预警系统包括控制器DSP三、CCD摄像头、视频解 码芯片、车轮转速传感器、存储器、显示器、加速度传感器、报警系统，CCD摄像头采集道路原 始模拟视频信息，经过视频解码芯片转换为数字视频后输入给控制器DSP三，通过车道识别 算法检测车道线，并计算出车辆在车道中的具体位置和偏离角度，根据偏离报警模型判断 车辆是否偏离了原有车道，根据阈值判断车辆是否处于安全行车状态，当车辆不是处在安 全行车状态时，给出报警信息。
[0049] 进一步的，
[0050] 驾驶员状态检测系统：驾驶员状态检测系统包括CMOS摄像头、AD转换器、电子断路 开关、控制器DSP二、酒精传感器和声音报警器，所述CMOS摄像头通过AD转换器和控制器DSP 二相连接，所述控制器DSP二分别和电子断路开关、酒精传感器以及声音报警器相连接， CMOS摄像头采集车辆驾驶员行车过程中的视频图像信息，经AD转换器后输入给控制器DSP 二，控制器DSP二通过处理并分析数字视频信息，判断驾驶员是否处于疲劳驾驶状态，酒精 传感器检测驾驶员是否处于酒驾，当驾驶员处于疲劳驾驶状态或酒驾状态时，控制器DSP二 通过声音报警器给出报警提示信息；当驾驶员开始启动车辆时，如果酒精传感器检测驾驶 员呼气中酒精含量超标，将通过电子断路开关断开发动机电源。
[0051 ]进一步的，
[0052] 车辆周围障碍物检测系统:车辆周围障碍物检测系统包括控制器DSP -、近距离超 声波传感器、雷达传感器、温度传感器和报警器，所述控制器DSP-分别和近距离超声波传 感器、雷达传感器、温度传感器和报警器相连接。
[0053] 本发明的有益效果:本发明解决了路情的实时自动识别，行车过程中障碍物检测， 驾驶员驾驶状态检测以及车道偏离预警，可以广泛应用于汽车智能驾驶和智能交通领域。
【附图说明】
[0054]图1是本发明的基于复合传感实现路情实时识别和危险判断的汽车智能系统原理 示意图；
[0055] 图1中：1-汽车中央控制器;2-车辆周围障碍物检测系统;3-驾驶员状态检测系统； 4-车道偏离预警系统;5-车辆运动控制与通信系统结构。
[0056] 图2是本发明的基于复合传感实现路情实时识别和危险判断的汽车智能系统中车 辆周围障碍物检测系统结构示意图。
[0057] 图3是本发明的基于复合传感实现路情实时识别和危险判断的汽车智能系统中驾 驶员状态检测系统结构示意图。
[0058] 图4是本发明的基于复合传感实现路情实时识别和危险判断的汽车智能系统中车 道偏离预警系统结构示意图。
[0059] 图5是本发明的基于复合传感实现路情实时识别和危险判断的汽车智能系统中车 辆运动控制与通信系统结构示意图。
[0060] 图6是本发明的车道偏离预警系统中算法实现流程图。
【具体实施方式】
[0061] 下面结合附图和【具体实施方式】对本发明作进一步详细的说明。
[0062] 图1是本发明的基于复合传感实现路情实时识别和危险判断的汽车智能系统原理 示意图。基于复合传感实现路情实时识别和危险判断的汽车智能系统包括:汽车中央控制 器、车辆周围障碍物检测系统、驾驶员状态检测系统、车道偏离预警系统和车辆运动控制与 通信系统，所述汽车中央控制器通过CAN总线分别和车辆周围障碍物检测系统、驾驶员状态 检测系统、车道偏离预警系统、车辆运动控制与通信系统相连接，实现对车辆周围障碍物检 测系统、驾驶员状态检测系统、车道偏离预警系统、车辆运动控制与通信系统信息融合和决 策。
[0063] 图2是本发明的基于复合传感实现路情实时识别和危险判断的汽车智能系统中车 辆周围障碍物检测系统结构示意图，车辆周围障碍物检测系统包括控制器DSP -、近距离超 声波传感器、雷达传感器、温度传感器和报警器，所述控制器DSP-分别和近距离超声波传 感器、雷达传感器、温度传感器和报警器相连接。近距离超声波传感器使用超声波进行测距 测速，超声波的速度c与温度t之间的关系如下：
，其中CQ = 331.4m/s，温度传感器测量的温度值用于对近距 离超声波传感器和雷达传感器的测量精度进行温度补偿。
[0065]在车辆周围障碍物检测系统中安全车距s的计算公式如下：
，其中P表示路面的附着系数，Vb表示本车车速，Vr 表示相对车速。
[0067] 图3是本发明的基于复合传感实现路情实时识别和危险判断的汽车智能系统中驾 驶员状态检测系统结构示意图，驾驶员状态检测系统包括CMOS摄像头、AD转换器、电子断路 开关、控制器DSP二、酒精传感器和声音报警器，所述CMOS摄像头通过AD转换器和控制器DSP 二相连接，所述控制器DSP二分别和电子断路开关、酒精传感器以及声音报警器相连接， CMOS摄像头采集车辆驾驶员行车过程中的视频图像信息，经AD转换器后输入给控制器DSP 二，控制器DSP二通过处理并分析数字视频信息，判断驾驶员是否处于疲劳驾驶状态，酒精 传感器检测驾驶员是否处于酒驾，当驾驶员处于疲劳驾驶状态或酒驾状态时，控制器DSP二 通过声音报警器给出报警提示信息。当驾驶员开始启动车辆时，如果酒精传感器检测驾驶 员呼气中酒精含量超标，将通过电子断路开关断开发动机电源。
[0068] 图4是本发明的基于复合传感实现路情实时识别和危险判断的汽车智能系统中车 道偏离预警系统结构示意图，车道偏离预警系统包括控制器DSP三、CCD摄像头、视频解码芯 片、车轮转速传感器、存储器、显示器、加速度传感器、报警系统，CCD摄像头采集道路原始模 拟视频信息，经过视频解码芯片转换为数字视频后输入给控制器DSP三，通过车道识别算法 检测车道线，并计算出车辆在车道中的具体位置和偏离角度，根据偏离报警模型判断车辆 是否偏离了原有车道，根据阈值判断车辆是否处于安全行车状态，当车辆不是处在安全行 车状态时，给出报警信息。具体包括如下步骤：
[0069] 1、对车载摄像机采集的道路图像进行逆透视变换，图像缓存坐标系到车体坐标系 之间的逆透视变换公式如下：
[0073]式中车载摄像机安装在车体中的位置对应车体坐标系下的坐标为(d，l，h)，Y是 摄像机光轴在zv = 〇平面的投影与yv轴之间的夹角，9是摄像机光轴偏离zv=〇平面的角度，2 a是车载摄像机的是角范围，Rx是摄像机的水平分辨率，Ry是摄像机的垂直分辨率。
[0074] 2、对逆透视变换后的道路图像进行预处理，预处理过程包括道路图像的车道线的 边缘提取，具体过程如下：
[0075]使用Robert算子提取图像中的单边缘信息，具体计算方法如下：
，. 用R(i，代j)替原图像像素点（i，j)的灰度值，得到车道标志线的边缘图像。
[0077] 3、采用阈值分割算法对二值化的图像进行处理，增强车道标志线的边缘信息，具 体计算方法如下：
[0078] (1)选择初始阈值，其中gmax，gmin是车道标志线的边缘图像中灰度 值的最大值和最小值；
[0079] (2)根据初始阈值Mo将车道标志线的边缘图像分为两个区域，求取两个区域的平 均灰度如下：
[0081] (3)更新阈值过程，求取新的阈值为」
[0082] (4)重复步骤⑵和（3)过程，直到Mk+i =Mk町算'/云1爭止，得到最佳阈值为Mk+i。
[0083] 4、在二值化图像中进行标志线起始点检测、跟踪与拟合，获取道路模型，完成车道 标志线提取，具体计算方法如下：
[0084 ] (1)车道标志线起始点检测、跟踪。
[0085] 根据摄像机在车体中的安装位置，在逆透视投影变换后的道路图像中，车辆的位 置应该位于图像底部的中间位置附近。首先，采用Hough变换计算得到车道标志线的斜率k。 具体过程如下:选取图像底部WXO. 1H的区域作为Hough变换的搜索区域，W是图像的宽度，H 是图像的高度。假设Ap为1像素，A0为1°，为每一个小单元（Ap，A0)设置累加器Abuej)， _ slwz+(i) UD：-1 其中/ = +(()? UK)2 - U = 〇，1，2，? ? ?，179，饵<9,)=[次p, ，然后搜索 i 二Q 出B( 0j)最大数组元素对应的00，可以求出车道标志线的斜率k = tan(00-90)。
[0086] 其次，判断出车辆所在车道的左右标志线对应白点分布情况统计图中的哪两条尖 峰，求出两条尖峰在投影轴Xv上的位置坐标为&，Xj。
[0087] 最后，根据尖峰对应的投影轴坐标计算出车道标志线起始点的坐标为（Xl，0)和 (Xj，0)，其中：
[0089] 检测得到车道标志线的起始点坐标后，可以从起始点开始，沿着起始方向逐段跟 踪检测车道标志线，并用多条首尾相连的直线段近似表示车道标志线。
[0090] (2)车道标志线拟合。假设车道标志线模型为Y = X(i)+e，巾为求的车道标志线模型 参数，X，Y是第跟踪检测得到的车道标志线信息点，e是随机噪声，采用最小二乘法求出车道 标志线模型参数为= (xTxrixTY。
[0091 ] 5、采用基于AR模型的时间序列预测方法估计车辆的行驶轨迹。
[0092] 6、根据检测的道路模型与估计的车辆行驶轨迹求取车道偏离点的位置坐标，并计 算相应的车道偏离时间M。
[0093] 假设预测得到的相对于车道中线的侧向偏移量序列为{ A U，i = l，2, . . .，20,左 右车道标志线的参数方程为:yi (X) = blQ+bllX+bl2X2和yr ( X ) = brQ+brlX+br2X2，算出20个预测 点的坐标为(Xi，yi)分别为yi = 50i-49，Xi = Xmi+ a i，其中Xmi可以通过联立以下方程求得：
[0095] 算出20个预测点的位置坐标后，将其依次连接起来得到的预测的车辆行驶轨迹曲 线，与左右车道标志线的参数方程联立可以求出当前时刻到车道偏离时刻车辆将行驶的距 离D，假设车辆的速度为V，求得M=D/v。
[0096] 7、根据设置的阈值判断车辆是否存在偏离车道的危险，在系统中设定一个阈值 Mt，gM<Mt，则认为车辆存在车道偏离的危险，系统对驾驶员发出告警;反之则认为暂时不 存在车道偏离的危险。
[0097] 图5是本发明的基于复合传感实现路情实时识别和危险判断的汽车智能系统中车 辆运动控制与通信系统结构示意图，包括控制器DSP四、电子制动器、车轮、执行器、方向盘、 无线通信系统、电子点火器、发动机，所述控制器DSP四通过电子制动器和车轮相连接，所述 控制器DSP四通过执行器和方向盘相连接，所述控制器DSP四通过电子点火器和发动机相连 接，所述控制器DSP四和无线通信系统相连接。车辆运动控制与通信系统根据车道偏离预警 系统、驾驶员状态检测系统和车辆周围障碍物检测系统的状态信息通过执行器控制车辆的 行驶方向，通过电子制动器控制汽车的车速，并可以通过无线通信系统将汽车行驶的状态 信息发送给其它车辆。
[0098] 本发明的有益效果:解决了路情的实时自动识别，行车过程中障碍物检测，驾驶员 驾驶状态检测以及车道偏离预警，可以广泛应用于汽车智能驾驶和智能交通领域。
[0099]本领域的普通技术人员将会意识到，这里所述的实施例是为了帮助读者理解本发 明的实施方法，应被理解为本发明的保护范围并不局限于这样的特别陈述和实施例。本领 域的普通技术人员可以根据本发明公开的这些技术启示做出各种不脱离本发明实质的其 它各种具体变形和组合，这些变形和组合仍然在本发明的保护范围内。
【主权项】
1. 一种基于复合传感实现路情实时识别和危险判断的方法，其特征在于： 该方法包括汽车智能控制系统：该控制系统包括汽车中央控制器、车辆周围障碍物检 测系统、驾驶员状态检测系统、车道偏离预警系统和车辆运动控制与通信系统，所述汽车中 央控制器通过CAN总线分别和车辆周围障碍物检测系统、驾驶员状态检测系统、车道偏离预 警系统、车辆运动控制与通信系统相连接，实现对车辆周围障碍物检测系统、驾驶员状态检 测系统、车道偏离预警系统、车辆运动控制与通信系统信息融合和决策； 车辆周围障碍物检测系统检测车辆左右两侧的障碍物以及接近车身的行人、车辆，判 断障碍物与车辆的距离是否小于安全车距，并给出报警信息； 驾驶员状态检测系统通过分析驾驶员的面部表情判断驾驶员是否处于疲劳驾驶状态， 当驾驶员处在疲劳驾驶状态或酒驾状态时，给出驾驶员声音报警提示信息； 车道偏离预警系统通过车道识别算法检测车道线，并计算出车辆在车道中的具体位置 和偏离角度，根据偏离报警模型判断车辆是否偏离了原有车道，根据阈值判断车辆是否处 于安全行车状态，当车辆不是处在安全行车状态时，给出报警信息； 车辆运动控制与通信系统根据车道偏离预警系统、驾驶员状态检测系统和车辆周围障 碍物检测系统的状态信息对车辆进行智能控制，并将汽车行驶的状态信息发送给其它车 辆。2. 根据权利要求1所述的基于复合传感实现路情实时识别和危险判断的方法，其特征 在于： 车辆周围障碍物检测系统检测车辆左右两侧的障碍物以及接近车身的行人、车辆，判断障碍 物与车辆的距离是否小于安全车距，安全车距s的计算公式为4 = η- ;， 其中口表示路面的附着系数，Vb表示本车车速，Vr表示相对车速，当障碍物与车辆的距离小 于安全车距时将给出报警信息。3. 根据权利要求1所述的基于复合传感实现路情实时识别和危险判断的法，其特征在 于： 车道偏离预警系统包括如下步骤： a、 对车载摄像机采集的道路图像进行逆透视变换，图像缓存坐标系到车体坐标系之间 的逆透视变换公式如下：式中车载摄像机安装在车体中的位置对应车体坐标系下的坐标为(d，I，h)，γ是摄像 机光轴在Zv = O平面的投影与yv轴之间的夹角，Θ是摄像机光轴偏离Ζν = 〇平面的角度，2α是 车载摄像机的是角范围，Rx是摄像机的水平分辨率，Ry是摄像机的垂直分辨率； b、 对逆透视变换后的道路图像进行预处理，预处理过程包括道路图像的车道线的边缘 提取，具体过程如下： 使用Robert算子提取图像中的单边缘信息，具体计算方法如下：用R(i，代j)替原图像像素点（i，j)的灰度值，得到车道标志线的边缘图像； c、 采用阈值分割算法对二值化的图像进行处理，增强车道标志线的边缘信息，具体计 算方法如下： (1) 选择初始阈彳*其中&ax，gmin是车道标志线的边缘图像中灰度值的 最大值和最小值； (2) 根据初始阈值Mo将车道标志线的边缘图像分为两个区域，求取两个区域的平均灰度 如下：(3) 更新阈值过程，求取新的阈值为紙=; (4) 重复步骤(2)和(3)过程，直到Mw=Mk时算法停止，得到最佳阈值为Mk+1; d、 在二值化图像中进行标志线起始点检测、跟踪与拟合，获取道路模型，完成车道标志 线提取，具体计算方法如下： (1)车道标志线起始点检测、跟踪； 根据摄像机在车体中的安装位置，在逆透视投影变换后的道路图像中，车辆的位置应 该位于图像底部的中间位置附近;首先，采用Hough变换计算得到车道标志线的斜率k;具体 过程如下:选取图像底部W X 0.1H的区域作为Hough变换的搜索区域，W是图像的宽度，H是图 像的高度;假设Ap为1像素 ，Δ Θ为1°，为每一个小单元（Δρ，Δ Θ)设置累加器A(P1Jj),其中，然后搜索出Β(θ」） 最大数组元素对应的θ〇，可以求出车道标志线的斜率k = tan(θ〇-90); 其次，判断出车辆所在车道的左右标志线对应白点分布情况统计图中的哪两条尖峰， 求出两条尖峰在投影轴Xv上的位置坐标为X1 ,Xj ; 最后，根据尖峰对应的投影轴坐标计算出车道标志线起始点的坐标为(Xl，〇)和(Xj，〇)， 其中：检测得到车道标志线的起始点坐标后，可以从起始点开始，沿着起始方向逐段跟踪检 测车道标志线，并用多条首尾相连的直线段近似表示车道标志线； (2)车道标志线拟合;假设车道标志线模型为Υ = ΧΦ+ε，Φ为求的车道标志线模型参 数，Χ，Υ是第跟踪检测得到的车道标志线信息点，ε是随机噪声，采用最小二乘法求出车道标 志线模型参数为Φ =(XtX)^1XtY; e、 采用基于AR模型的时间序列预测方法估计车辆的行驶轨迹； f、 根据检测的道路模型与估计的车辆行驶轨迹求取车道偏离点的位置坐标，并计算相 应的车道偏离时间M; 假设预测得到的相对于车道中线的侧向偏移量序列为{ A1)，i = 1，2, ...，20,左右车道 标志线的参数方程为:yi (X) = bi〇+bnx+bi2X2和yr (X) = br〇+brix+br2X2，算出20个预测点的坐 标为(xi，yi)分别为yi = 50i-49，xi = xmi+ A i，其中xmi可以通过联立以下方程求得：算出20个预测点的位置坐标后，将其依次连接起来得到的预测的车辆行驶轨迹曲线， 与左右车道标志线的参数方程联立可以求出当前时刻到车道偏离时刻车辆将行驶的距离 D，假设车辆的速度为V，求得M=D/v; g、 根据设置的阈值判断车辆是否存在偏离车道的危险，在系统中设定一个阈值Mt，若M <Mt，则认为车辆存在车道偏离的危险，系统对驾驶员发出告警;反之则认为暂时不存在车 道偏离的危险。4. 一种基于复合传感实现路情实时识别和危险判断的系统，其特征在于：该系统包括 汽车中央控制器、车辆周围障碍物检测系统、驾驶员状态检测系统、车道偏离预警系统和车 辆运动控制与通信系统，所述汽车中央控制器通过CAN总线分别和车辆周围障碍物检测系 统、驾驶员状态检测系统、车道偏离预警系统、车辆运动控制与通信系统相连接，实现对车 辆周围障碍物检测系统、驾驶员状态检测系统、车道偏离预警系统、车辆运动控制与通信系 统信息融合和决策。5. 根据权利要求4所述的基于复合传感实现路情实时识别和危险判断的系统，其特征 在于： 所述车辆运动控制与通信系统:包括控制器DSP四、电子制动器、车轮、执行器、方向盘、 无线通信系统、电子点火器、发动机，所述控制器DSP四通过电子制动器和车轮相连接，所述 控制器DSP四通过执行器和方向盘相连接，所述控制器DSP四通过电子点火器和发动机相连 接，所述控制器DSP四和无线通信系统相连接。6. 根据权利要求4所述的基于复合传感实现路情实时识别和危险判断的系统，其特征 在于： 所述车道偏离预警系统：车道偏离预警系统包括控制器DSP三、CCD摄像头、视频解码芯 片、车轮转速传感器、存储器、显示器、加速度传感器、报警系统，CCD摄像头采集道路原始模 拟视频信息，经过视频解码芯片转换为数字视频后输入给控制器DSP三，通过车道识别算法 检测车道线，并计算出车辆在车道中的具体位置和偏离角度，根据偏离报警模型判断车辆 是否偏离了原有车道，根据阈值判断车辆是否处于安全行车状态，当车辆不是处在安全行 车状态时，给出报警信息。7. 根据权利要求4所述的基于复合传感实现路情实时识别和危险判断的系统，其特征 在于： 驾驶员状态检测系统：驾驶员状态检测系统包括CMOS摄像头、AD转换器、电子断路开 关、控制器DSP二、酒精传感器和声音报警器，所述CMOS摄像头通过AD转换器和控制器DSP二 相连接，所述控制器DSP二分别和电子断路开关、酒精传感器以及声音报警器相连接，CMOS 摄像头采集车辆驾驶员行车过程中的视频图像信息，经AD转换器后输入给控制器DSP二，控 制器DSP二通过处理并分析数字视频信息，判断驾驶员是否处于疲劳驾驶状态，酒精传感器 检测驾驶员是否处于酒驾，当驾驶员处于疲劳驾驶状态或酒驾状态时，控制器DSP二通过声 音报警器给出报警提示信息；当驾驶员开始启动车辆时，如果酒精传感器检测驾驶员呼气 中酒精含量超标，将通过电子断路开关断开发动机电源。8. 根据权利要求4所述的基于复合传感实现路情实时识别和危险判断的系统，其特征 在于： 车辆周围障碍物检测系统:车辆周围障碍物检测系统包括控制器DSP-、近距离超声波 传感器、雷达传感器、温度传感器和报警器，所述控制器DSP-分别和近距离超声波传感器、 雷达传感器、温度传感器和报警器相连接。
【文档编号】B60W50/14GK106004884SQ201610541189
【公开日】2016年10月12日
【申请日】2016年7月11日
【发明人】邹水龙, 郭松, 何员子, 周小宾, 李永, 李天宝, 陈振宇
【申请人】南昌工学院