一实施例中的示意图。
[0047]本实施例中的基于抬头显示器的智能车载安全驾驶辅助方法,包括如下步骤:
[0048]步骤SlOl获取驾驶员行车状态信息,可以通过图像采集的方式、声音采集的方式,所述图像采集的方式为视频帧或者照片,声音采集的方式为车内去噪后的声音、环境声音或者消除噪音的声音,具体地可采用双麦克风降噪,楼氏高信噪比硅麦。
[0049]其中所述声音采集的方式可以采用下述的方式进行校正后识别:
[0050]首先建立标准发音语音库,训练声调模型和音素模型,得到标准上下文相关的三元声调模型和语谱音素模型;从驾驶者的语音中提取声学特征,包括语音频谱特征和声调特征,并对声调特征进行后处理;根据标准声调模型和音素模型,利用基于隐马尔可夫模型(Hidden Markov Model,HMM)的上下文相关的三元声调模型计算反映声调质量的评分参数,得到声调评价得分、声调后验概率;基于源-滤波器模型合成具有标准目标声调和驾驶者语音频谱特征的新语音,并反馈给驾驶者;采用声调后验概率加权平均的二次函数绘制声调曲线,并将标准声调曲线和实际发音的声调曲线反馈给驾驶者。所述图像采集的方式可以采用CN201110238773.X,呈现车内图像的方法,进行实现。同时采用CN201510202036.2,一种基于CAN控制的无线通信实时监控车载安防系统,进行辅助显示。本领域技术人员能够明了,其中所述图像采集的方式可以采用下述的方式进行识别:按照图像输入、预处理、特征提取、分类和匹配等图像采集。其中预处理还可以包括:图像分割、图像增强、二值化和细化等几个部分。解码器处理符合NTSC(Nat1naI Televis1nStandards Committee,(美国)国家电视标准委员会标准)的录像信号并且分别提取包括在该录像信号中的多个信号分量(Y、Cb、Cr)并且进行A/D转换并生成可用于图像处理的数字图像信号。
[0051]作为本实施例中的优选,所述图像采集的方式可以采用摄像机,所述摄像机布置在诸如汽车的车辆的例如车内驾驶员座位附近,并且对穿过前挡风玻璃可视的行驶方向前方的预定区域进行摄像。当车辆行进的行驶方向前方的行进路径、车辆的车身的一部分、前方车辆、对向车辆等都作为主题而被主摄像机摄像。并且实际上是在特定的帧周期(例如,每秒20帧)内重复地捕捉图像并持续地输出捕捉到的图像。所述摄像机还可以布置在例如车内驾驶员座位附近,更进一步而言可以是汽车仪表台附近,当驾驶员进入车内后,对驾驶员的人脸、虹膜等进行识别。另外摄像机还可以布置在例如车内后排座位附近,并且对穿过后挡风玻璃可视的行驶方向后方的预定区域进行摄像。行驶方向后方的行进路径、车辆的车身的一部分、后方车辆、对向车辆等都作为主题而被后视摄像机摄像。设置在HUD中的图像识别MCU具有执行诸如图案识别的预定的图像处理的功能。在基于从摄像机输出的被捕捉的图像而判断路面标识的候选项的情况下,在路面标识的候选项满足预定标准的情况下,图像识别MCU将候选项识别为路面标识。
[0052]步骤S102获取车辆周围的状态信息,可以包括后视镜的状态信息、车载导航仪器记录的行车信息以及倒车时的防撞雷达,这些信息通过车内CAN通信总线在HUD上进行显不O
[0053]步骤S103将上述的状态信息发送至本地服务器进行处理。所述的本地服务器即为HUD的内存单元,用以缓存数据并进行处理,处理器:ARM4核CPU,内存IG RAM,所述的处理器通过执行预先储存在内部的预先设定程序,控制HUD执行各种必要的功能。具体地,当处理器的控制接口读取通过各种接口输入的信息时,处理器的记录作为预先设定的交通信息的信息,或者将车辆的状态与图像识别识别的路面标识进行比较以记录其比较结果而作为交通信息。例如,处理器读取每一特定时间(例如,0.5秒)获得的速度、发动机转数等,并且生成对应于诸如车辆行驶时间、行驶距离、最高速度、平均速度、超速时间、超速次数、发动机转数超过时间、转数超过次数、急启动、急加速、急减速、和空闲时间等的交通信息的文件,并且将该文件储存在存储器中。
[0054]所述的存储器是由ROM构造的存储器,包括但不限于:由SDRAM构造的存储器和由EEPROM构造的存储器连接到处理器。存储器预先储存例如由执行的程序或各种被控制单元使用的常数数据。SDRAM构造的存储器用于储存诸如处理中的数据的临时数据。EEPROM构造的存储器存储处理器中参考的各种常数的数据。由于EEPROM构造的存储器是非易失性存储器,即使在其处于电源的供电停止的状态下,也能保存数据。如果需要,储存在EEPROM构造的存储器中的数据的内容能够改写。
[0055]在本实施例中HUD还可以包括与下述的信号接口进行连接:
[0056]车辆信号接口(I/F)执行例如输入各种从车辆侧输出的信号和将该信号转换为能够被处理器处理的信号的处理。由车辆信号接口处理的信号包括触发输出、点火(IGN)、手动开关(Sff)、刹车、左侧信号灯、右侧信号灯、车速脉冲等。
[0057]GPS接口(I/F)执行例如输入来自GPS定位信息和将该信息转换为信号能够被处理器处理的信号的处理。GPS接收器是用于接收来自多个GPS(全球位置系统)卫星的传入无线电波以及获得接收点的当前位置,即,通过基于该无线电波之间的时间差计算车辆的当前位置(玮度/经度)。因此,处理器能够从GPS接收器获得车辆的当前位置。
[0058]CAN接口(I/F)执行例如输入来自其他安装在车辆中的设备的信息和将该信息转换为信号能够被处理器处理的信号的处理。
[0059]声音接口(I/F)连接到诸如扬声器(未示出)的声音输出部分,并且执行例如将来自处理器的声音信号输入并且将根据来自声音输出部分的声音信号的声音输出的处理。
[0060]记录载体接口(I/F)具有诸如存储卡的预定的记录载体能够附接到的插槽,并且包括处理器存取记录载体所必需的信号处理功能。控制系统处理CPU20能够通过记录载体接口将交通信息的文件储存在记录载体中。另外,通过管理员PC等,管理关于车辆的交通信息的管理者能够获取由处理器通过记录载体累积的交通信息的文件。
[0061 ] PC设定接口(I/F)是用于连接将诸如个人电脑的主机装置连接到HUD的接口。通过将主机装置连接到PC设定接口,例如,违反判定的条件和处理器参考的各种阈值能够被来自主机装置的指示改变。
[0062]振动器输出部分包括小型马达等,并且根据来处理器的信号产生机械振动以提醒乘客注意。
[0063]图2是图1中的一种【具体实施方式】示意图。
[0064]其中201包括红外摄像头、网络摄像头,所述网络摄像头和红外摄像头车内驾驶员座位附近,并且对穿过前挡风玻璃可视的行驶方向前方的预定区域进行摄像。红外摄像头用以在夜间或者光线较差的情况下,对人脸或者虹膜直接进行识别。前置摄像头,红外夜视摄像头,可用以捕捉用户手势。
[0065]步骤S201采用第一摄像装置进行获取,进入S101。
[0066]步骤S202采用第二摄像装置进行获取,进入S102。
[0067]图3是图1中的获取驾驶员行车状态信息的一种【具体实施方式】示意图。
[0068]步骤SlOl获取驾驶员行车状态信息,进入到步骤S301 ;
[0069]步骤S301监测驾驶员是否疲劳驾驶,在本发明中首先对摄像机采集的面部图像信息进行二值化处理,再将二值化亮度分量的数字矩阵分别进行水平、垂直累加,截取脸部像素,画出脸部定位框;进行水平复杂度计算,画出眼部定位框;通过对复杂度第一、二峰值的比值,第一峰值与脸部定位框的水平宽度的比值,第一峰值的水平位置是否在阈值范围内的判断得出驾驶员眼睛的睁闭状态;从而确定驾驶员是否处于疲劳驾驶状态;若判断得出驾驶员正处于疲劳驾驶状态,则自动启动报警。
[0070]步骤S302获取驾驶员的手势识别指令,将手势识别指令作为二维手型识别为例,所述二维手型识别是基于二维层面的,在处理过程中需要将不含深度信息的二维信息作为输入即可。就像平时拍照所得的相片就包含了二维信息一样,只需要使用单个摄像头捕捉到的二维图像作为输入,然后通过计算机视觉技术对输入的二维图像进行分析,获取信息,从而实现手势识别。本领域技术人员能够明了,计算机视觉(Computer Vi