车辆周围监测装置、车辆、车辆周围监测程序及车辆周围监测方法

文档序号:7942578阅读:151来源:国知局
专利名称:车辆周围监测装置、车辆、车辆周围监测程序及车辆周围监测方法
技术领域
本发明涉及一种利用车载摄像头拍到的车辆周围的图像来检测车辆周围的被监 测对象,从而对车辆周围的情况进行监测的车辆周围监测装置、车辆、车辆周围监测程序及 车辆周围监测方法。
背景技术
在现有技术中,人们公知如下一种车辆周围监测装置,S卩,利用车载摄像头拍到车 辆周围的图像来检测车辆周围的被监测对象,从而求出实际空间中的被监测对象和车辆的 相对位置和相对速度,并且判断在规定时间内车辆和被监测对象触碰可能性的大小(例如 参照日本发明专利公开公报特开2001-6096号)。另外,为了判别被监测对象的种类(人、车辆、大型动物等),对摄像头所拍到的 多值图像进行二值转换处理,并且对二值图像中的影像部分的形状(面积、轮廓线、长宽比 等)进行筛选处理(例如参照日本发明专利公开公报特开平8-313632号)。在日本发明专利公开公报特开平8-313632号所述的装置中,对二值图像中包含 影像部分的窗口而言,求出水平方向上的端缘坐标最小值和最大值之间的差值,以及垂直 方向上的端缘坐标最小值和最大值之间的差值,以其比值作为长宽比R,根据长宽比R判断 在实际空间中与该影像部分所对应的被监测对象是不是人。但是,采用上述方法根据端缘之间的差值判断被监测对象是不是人时,如果上述 窗口中有多个被监测对象的影像部分出现,有时会出现无法正确求出被监测对象的影像部 分的宽度的问题。这样一来,就会导致判别被监测对象的种类的准确度下降。

发明内容
鉴于上述情况,本发明的目的是提供一种能够解决上述技术问题的车辆周围监测 装置、车辆、车辆周围监测程序及车辆周围监测方法,利用从摄像头拍到的图像中筛选出的 被监测对象的影像部分的轮廓线形状,就可以精准地判别该被监测对象的种类。为了实现上述目的,本发明所述的车辆周围监测装置利用车载摄像头拍到的显示 车辆周围情况的图像来监测该车辆的周围情况。上述车辆周围监测装置包括距离检测机构,用于测定上述摄像头到被监测对象 的距离;被监测对象影像抽取机构,用于从上述摄像头拍到的图像中抽取与被监测对象对 应的第一影像部分;筛选机构,用盖博滤波器对上述图像进行筛选处理,其中,盖博滤波器 按以下方式设定根据特定种类被监测对象在规定方向上的宽度的推定数值,和由上述距 离检测机构测得、上述第一影像部分在实际空间中所对应的被监测对象到上述摄像头之间 的距离,并按上述宽度的推定数值越小或测得的距离越长时,筛选对象的端缘宽度较窄的 原则进行设定,并且筛选对象的端缘方向设定为与上述规定方向垂直相交的方向;被监测 对象种类判别机构,根据上述筛选处理筛选出的第二影像部分的形状,对该第二影像部分在实际空间中所对应的被监测对象的种类进行判别,判别它是否是上述特定种类。另外,本发明所述的车辆具有对其周围情况进行拍摄的摄像头,该车辆具有利用 上述摄像头拍到的图像来监测其周围情况的功能。还有,本发明所述的车辆包括如下机构距离检测机构,用于测定上述摄像头到 被监测对象的距离;被监测对象影像抽取机构,用于从上述摄像头拍到的图像中抽取与被 监测对象对应的第一影像部分;筛选机构,用盖博滤波器对上述图像进行筛选处理,其中, 盖博滤波器按以下方式设定根据特定种类被监测对象在规定方向上的宽度的推定数值, 和由上述距离检测机构测得、上述第一影像部分在实际空间中所对应的被监测对象到上述 摄像头之间的距离,并按上述宽度的推定数值越小或测得的距离越长时,筛选对象的端缘 宽度较窄的原则进行设定,并且筛选对象的端缘方向设定为与上述规定方向垂直相交的方 向;被监测对象种类判别机构,根据上述筛选处理筛选出的第二影像部分的形状,对该第 二影像部分在实际空间中所对应的被监测对象的种类进行判别,判别它是否是上述特定种 类。在本发明所述的车辆周围监测装置和车辆中,由于对上述摄像头拍到的图像中被 监测对象的影像部分的大小而言,被监测对象越小时其影像部分越小,另外,上述摄像头到 被监测对象的距离越远时其影像部分也越小。因此,由上述筛选机构通过盖博滤波器进行 筛选处理时,可以只将上述特定种类的被监测对象的影像部分中,预想的与上述筛选对象 端缘的宽度上的上述规定方向垂直相交方向上的端缘区域进行强调后,再筛选出上述第二 影像部分。接下来可根据通 过上述方法筛选出的第二影像部分的形状,精准地判别与该第 二影像部分在实际空间中所对应的被监测对象的种类。其中,盖博滤波器按以下方式设定 根据特定种类被监测对象在规定方向上的宽度的推定数值,和由上述距离检测机构测得、 上述第一影像部分在实际空间中所对应的被监测对象到上述摄像头之间的距离,并按上述 宽度的推定数值越小或测得的距离越长时,筛选对象的端缘宽度较窄的原则进行设定,并 且筛选对象的端缘方向设定为与上述规定方向垂直相交的方向。另外,本发明所述的车辆周围监测装置和车辆中还包括局部处理区域设定机构, 根据上述特定种类的被监测对象的大小的推定数值,和由上述距离检测机构测得、第一影 像部分在实际空间中所对应的被监测对象到上述摄像头之间的距离,将包含上述第一影像 部分和周围范围在内的范围设定为局部处理区域,上述筛选机构在设定的上述局部处理区 域内进行上述筛选处理,上述被监测对象种类判别机构,根据对上述局部处理区域进行筛 选处理而筛选的上述第二影像部分的形状,对上述第二影像部分在实际空间中所对应的被 监测对象的种类进行判别,判别它是否是上述特定种类。采用本发明时,由于可在由上述局部处理区域设定机构所设定、范围被限定在上 述第一影像部分周围的上述局部处理区域内进行上述筛选处理,所以可减少上述筛选处理 中的运算量,从而可以更加有效地筛选第二影像部分。另外,上述特定种类是行人,上述规定方向是水平方向,和上述规定方向垂直相交 的方向是与上述水平方向垂直相交的方向,上述被监测对象种类判别机构,对上述局部处 理区域中,由上述筛选处理筛选的上述第二影像部分的下端包含在该局部处理区域的下半 部分时,将上述第二影像部分在实际空间中所对应的被监测对象判别为行人。采用本发明时,由于可以用上述筛选处理的方法,从上述摄像头拍到的图像中,筛选具有对应于行人在水平方向上的宽度的推定数值距离的水平方向上的端缘宽度,并且端 缘方向为垂直方向的上述第二影像部分,上述第二影像部分的下端包含在上述局部处理区 域的下半部分时,判断为上述第二影像部分中包括行人的脚的影像部分,从而可以将上述 第二影像部分在实际空间中所对应的被监测对象判别为行人。接下来,本发明所述的车辆周围监测程序可以使具有访问数据功能的电脑起到监 测该车辆的周围情况的作用,该电脑可访问搭载在车辆上并拍摄该车辆周围情况的摄像头 拍到的图像数据。车辆周围监测程序可以使具有访问数据功能的电脑起到监测该车辆的周 围情况的作用,该电脑可访问搭载在车辆上并拍摄该车辆周围情况的摄像头拍到的图像数 据。本发明可以使上述电脑起到如下机构的功能,S卩,距离检测机构,用于测定上述摄 像头到被监测对象的距离;被监测对象影像抽取机构,用于从上述摄像头拍到的图像中抽 取与被监测对象对应的第一影像部分;筛选机构,用盖博滤波器对上述图像进行筛选处理, 其中,盖博滤波器按以下方式设定根据特定种类被监测对象在规定方向上的宽度的推定 数值,和由上述距离检测机构测得、上述第一影像部分在实际空间中所对应的被监测对象 到上述摄像头之间的距离,并按上述宽度的推定数值越小或测得的距离越长时,筛选对象 的端缘宽度较窄的原则进行设定,并且筛选对象的端缘方向设定为与上述规定方向垂直相 交的方向;被监测对象种类判别机构,根据上述筛选处理筛选出的第二影像部分的形状,对 该第二影像部分在实际空间中所对应的被监测对象的种类进行判别,判别它是否是上述特 定种类。将本发明所述的车辆周围监测程序应用于上述电脑时,可以使上述本发明所述的 车辆周围监测装置和本发明所述的车辆包括上述距离检测机构、被监测对象影像筛选机 构、筛选机构和被监测对象种类判别机构。本发明所述的车辆周围监测方法是可以使具有访问数据功能的电脑利用拍到的 图像来监测该车辆周围情况的方法,该电脑可访问搭载在车辆上并拍摄该车辆周围情况的 摄像头拍到的图像数据。该电脑中包括以下步骤距离检测步骤,此时由上述电脑测定上述摄像头到被监 测对象的距离;被监测对象影像抽取步骤,此时由上述电脑从上述摄像头拍到的图像中抽 取与被监测对象对应的第一图影像像部分;筛选步骤,此时由上述电脑用盖博滤波器对上 述图像进行筛选处理,其中,盖博滤波器按以下方式设定根据特定种类被监测对象在规定 方向上的宽度的推定数值,和由上述距离检测步骤测得、上述第一影像部分在实际空间中 所对应的被监测对象到上述摄像头之间的距离,并按上述宽度的推定数值越小或测得的距 离越长时,筛选对象的端缘宽度较窄的原则进行设定,并且筛选对象的端缘方向设定为与 上述规定方向垂直相交的方向;被监测对象种类判别步骤,根据上述筛选处理筛选的第二 影像部分的形状,对该第二影像部分在实际空间中所对应的被监测对象的种类进行判别, 判别它是否是上述特定种类。在本发明中,由于对上述摄像头拍到的图像中被监测对象的影像部分的大小而 言,被监测对象越小时其影像部分就越小,另外,上述摄像头到被监测对象的距离越远时其 影像部分业越小。因此,由上述筛选步骤通过盖博滤波器进行筛选处理时,可以只将上述特 定种类的被监测对象的影像部分中,预想的与上述筛选对象端缘的宽度上的上述规定方向
6垂直相交方向上的端缘区域进行强调后,再筛选出上述第二影像部分。接下来通过被监测 对象种类判别步骤,根据所筛选出的第二影像部分的形状,对该第二影像部分在实际空间 中所对应的被监测对象的种类进行判别,这样能够精准地判别与该第二影像部分在实际空 间中所对应的被监测对象的种类。其中,盖博滤波器按以下方式设定根据特定种类被监测 对象在规定方向上的宽度的推定数值,和由上述距离检测机构测得、上述第一影像部分在 实际空间中所对应的被监测对象到上述摄像头之间的距离,并按上述宽度的推定数值越小 或测得的距离越长时,筛选对象的端缘宽度较窄的原则进行设定,并且筛选对象的端缘方 向设定为与上述规定方向垂直相交的方向。


图1是本发明中车辆周围监测装置的结构图。图2是说明将图1所示车辆周围监测装置安装到车辆中的状态下的示意图。图3是表示图1所示的图像处理单元中对被监测对象的种类进行判别处理的流程 图。图4是说明用盖博滤波器进行筛选处理的示意图。图5是说明用盖博滤波器进行筛选处理的示意图。图6是说明被监测对象宽度的推定数值的示意图。图7是说明对应于被监测对象的距离设定盖博滤波器的被监测对象端缘宽度的 示意图。图8是说明行人判别方法和设定影像部分宽度的示意图。
具体实施例方式下面,参照图1 图8说明本发明的实施方式。图1是本发明中车辆周围监测装置的结构图。本发明的车辆周围监测装置包括图 像处理单元1、可测到远红外线的红外线摄像头(相对于本发明的摄像头)2R和2L、用来检 测车辆的偏航角速度的偏航角速度传感器13、用来检测车速的车速传感器4、用声音进行 提醒的扬声器6、用来将被监测对象显示给驾驶员的平视显示器(以下称为HUD) 7和用来检 测摄像头2R、2L到被监测对象的距离的毫米波雷达装置8。参照图2可知,红外线摄像头2R、2L设置在车辆10的前部,位于车辆10的车宽方 向的中心部的大致对象位置。另外,红外线摄像头2R、2L以光轴相互平行且与路面的距离 相等的方式固定。还有,红外线摄像头2R、2L具有如下特性,S卩,被拍摄对象的温度越高其 输出值越高(辉度变大)。另外,显示装置7设置成在车辆10的前车窗一侧的前方位置有 显示屏7a。另外,毫米波雷达装置8安装在车辆10的前部,其位于红外线摄像头2R、2L的上 侧。毫米波雷达装置8向车辆10的前方发射毫米波并接收该毫米波的反射波(由在车辆 10前方的物体反射的毫米波)。毫米波雷达装置8发出的射线的扫描范围设定为包含红外 线摄像头2R、2L的拍摄范围(视角范围)。毫米波雷达装置8根据所接收的反射波中强度大于规定数值以上的反射波,检测 在发出信号方向上的被监测对象。另外,毫米波雷达装置8根据发出信号和接收信号的时间差检测对该毫米波产生反射的被监测对象到摄像头2R、2L的距离。参照图1可知,图像处理单元1是由微电脑(未图示,相当于本发明的电脑)等构 成的电子单元,其将红外线摄像头2R、2L输出的模拟图像信号转换为数字信号,并存储在 图像存储器(未图示)中,上述微电脑可通过接口回路(未图示,相对于本发明的用来访问 图像的机构)对存储在上述图像存储器中的车辆前方的图像进行各种运算处理。将本发明所述的车辆监测程序应用于上述微电脑时,该微电脑会起到如下机构的 作用,即,距离检测机构20,由其测定包含在摄像头2R、2L的拍摄范围内拍到的图像中、影 像部分在实际空间中所对应的被监测对象到摄像头2R、2L的距离(实际空间距离);被监 测对象影像抽取机构21,由其从摄像头2R拍到的图像中抽取被监测对象的影像部分;局部 处理区域设定机构22,由其将包含被监测对象的影像部分在内的周围区域设定为局部处理 区域;筛选机构23,其通过盖博滤波器对上述局部处理区域进行筛选处理;被监测对象种 类判别机构24,由其判别对应于上述筛选处理筛选出的影像部分在实际空间中所对应的被 监测对象的种类。另外,通过上述微电脑中的运行本发明所述的车辆周围监测方法中的各步骤得以 实现。红外线摄像头2R、2L输出的、显示车辆周围情况的红外线图像的模拟信号会输入 图像处理单元1中,该模拟信号经A/D (模拟/数字)处理转换为数字信号的多值(灰色) 图像并存储在图像存储器(未图示)中。接下来由图像处理单元1判别对应于包含在右侧图像中的影像部分在实际空间 中所对应的被监测对象的种类。下面根据图3所示的流程图说明该处理过程。图3中的STEP(步骤。下同)1表示由距离检测机构20所做的处理。距离检测机 构20根据从毫米波雷达装置8输出的被扫描物的测距数据,来测定车辆周围的被监测对象 到摄像头2R、2L的距离Z。另外,通过距离检测机构20所做的测定被监测对象到摄像头2R、 2L的距离Z的处理,相当于本发明所述的车辆周围监测方法中的距离检测步骤。下一个STEP2表示由被监测对象影像抽取机构21和局部处理区域设定机构22所 做的处理。被监测对象影像抽取机构21以右侧图像作为基准图像进行二值转换处理(将 辉度在规定的二值阈值以上的像素当作“1”(白),而将辉度在上述二值阈值以下的像素当 作“0”(黑)的处理)而形成二值图像。接下来,再由被监测对象影像抽取机构21将包含 在二值图像中的高辉度(空白区域)中的影像部分中,筛选出第一影像部分,该第一影像部 分是在步骤STEPl中已由距离检测机构20在实际空间中距离已测出的被监测对象所对应 的部分。另外,通过被监测对象影像抽取机构21所做的筛选被监测对象的第一影像部分 的处理,相当于本发明所述的车辆周围监测方法中的被监测对象影像筛选步骤。接下来参照图4,由局部处理区域设定机构22将在右侧图像50中筛选的被监测对 象的第一影像部分51,设定以行人为判别对象的局部处理区域52。另外,即使对其他被监 测对象的第一影像部分53也设定以行人为判别对象的局部处理区域54。具体地讲,根据行人身高的推定数值GH(例如为170cm,相当于本发明的被监测对 象在实际空间中的大小的推定数值)和行人宽度的推定数值GW(例如为60cm,相当于本发 明的被监测对象在实际空间中的大小的推定数值),以及测得的被监测对象到摄像头2R、2L的距离Z,由局部处理区域设定机构22按照以下公式(1)和公式(2)求出局部处理区域 52和54的高度gh和宽度gw。公式1gh = (f/p) X (GH/Z)......(1)公式2gw = (f/p) X (Gff/Z)......(2)其中,f为红外线摄像头2R、2L的焦距,ρ为红外线摄像头2R、2L的受光元件的像 素间隔,GH为行人身高的推定数值,GW为行人宽度的推定数值,Z为红外线摄像头2R、2L到 被监测对象的距离。如上所述,通过确定局部处理区域52和54的高度gh和宽度gw,如果第一影像部 分51和53是行人的影像部分时,可将包含整个行人的影像部分附近范围的区域设定为局 部处理区域52、54。另外,对于局部处理区域54而言,由于行人呈并排状态,所以局部处理 区域54的宽度较宽。接下来的STEP3 STEP4表示由筛选机构23所做的处理。首先,由筛选机构23 将行人作为判别对象,设定具有对应于被监测对象到摄像头2R、2L的距离的对象端缘宽度 和对象端缘方向的盖博滤波器。其中,该盖博滤波器是具有类似于人类的感受野特性的滤波器,能对特定方向上 的特定宽度的端缘(轮廓线)进行抽取。如图4所示,当右侧图像50中包含距离红外线摄 像头2R、2L较近的行人的影像部分51和距离较远的行人的影像部分53时,以距离较近的 行人的影像部分的宽度的推定数值wl为抽取对象端缘的宽度,垂直方向(行人的身高方 向)为筛选对象端缘方向的方式设定盖博滤波器60。接下来在用盖博滤波器对右侧图像50进行筛选处理时,在经过筛选处理后的图 像55中会出现影像部分56,在影像部分56中距离较近的行人的图像部分51的纵向端缘 得到强调。而对于距离较远的行人的影像部分53而言,则会出现纵向端缘模糊的影像部分 57。另外,图5表示使用以距离较远的行人的影像部分的宽度的推定数值为筛选对象 端缘的宽度,垂直方向为筛选对象端缘方向设定的盖博滤波器61,对图像50进行筛选处理 的状态。此时,在经过筛选处理后的图像70中会出现影像部分72,影像部分72中距离较远 的行人的影像部分53的纵向端缘得到强调。而对于距离较近的行人的影像部分51而言, 则会出现纵向端缘模糊的影像部分71。如上所述,根据红外线摄像头2R、2L到被监测对象的距离设定的筛选对象端缘的 宽度,用这样设定的盖博滤波器进行筛选处理,可使离开特定距离的行人的图像部分的纵 向端缘得到强调。因此,如图6中(a)所示,在筛选机构23中,根据影像部分在实际空间中所对应的 被监测对象到摄像头2R、2L的距离Z,将行人宽度的推定数值Wp (例如50cm,Wp数据预先 存储在存储器中)按照以下公式(3)确定筛选对象端缘的宽度Wt。公式3Wt = (f/p) X (ffp/Z)......(1)其中,Wt为盖博滤波器的筛选对象端缘的宽度,f为红外线摄像头2R、2L的焦距,P为红外线摄像头2R、2L的受光元件的像素间隔,Wp为行人宽度的推定数值,Z为被监测对 象到红外线摄像头2R、2L的距离。当判别被监测对象的种类是不是车辆时,如图6中(b)所示,只需根据车宽的推定 数值Wc和被监测对象到摄像头2R、2L的距离Z,按照上述公式(3),用Wc替换Wp而求出盖 博滤波器的筛选对象端缘的宽度Wt即可。在下一个STEP4中,由筛选机构23利用如上所述对筛选对象端缘宽度进行设定的 并且筛选对象端缘方向为垂直方向的盖博滤波器,对局部处理区域进行筛选处理。另外,由 筛选机构23通过盖博滤波器进行的筛选处理,相当于本发明所述的车辆周围监测方法中 的筛选步骤。接下来的STEP5 STEP6表示由被监测对象种类判别机构24所做的处理。被监 测对象种类判别机构24会对已经用盖博滤波器进行过筛选处理后的局部处理区域中的图 像进行二值转换处理。图7表示当图像90中包含距离摄像头2R、2L较近的行人的图像部 分91、距离摄像头2R、2L中等的行人的图像部分92和距离摄像头2R、2L较远的行人的图像 部分93时,用盖博滤波器对图像90进行筛选处理并进行二值转换处理时的二值图像100、 110、120(相当于本发明的第二图像部分)。二值图像100是对右侧图像90用对应于图像部分93的远距离用盖博滤波器进行 筛选处理后进行二值转换处理后的二值图像,其中的具有对应于图像部分93的纵向端缘 的空白区域101被筛选出。另外,二值图像110是对右侧图像90用对应于图像部分92的 中距离用盖博滤波器进行筛选处理后进行二值转换处理后的二值图像,其中的具有对应于 图像部分92的纵向端缘的空白区域111被筛选出。另外,二值图像120是对右侧图像90用对应于图像部分91的近距离用盖博滤波 器进行筛选处理后进行二值转换处理后的二值图像,其中的具有对应于图像部分91的纵 向端缘的空白区域121被筛选出。如上所述,用对应于被监测对象的距离Z的盖博滤波器 进行筛选处理后再对其进行二值转换处理,就可以明确地筛选被监测对象的端缘的形状。在下一个STEP6中,由被监测对象种类判别机构25判别通过STEP5中的二值转换 处理而筛选的具有纵向端缘的空白区域的形状中,对应于该空白区域的实际空间中的被监 测对象是否是行人。参照图8可知,当包含在局部处理区域130中的空白区域131的下端处于局部处 理区域130的下半部分时(假设行人的脚的影像部分被筛选),由被监测对象种类判别机构 25将对应于空白区域131的实际空间中的被监测对象的种类判别为行人。另外,根据通过盖博滤波器进行筛选处理而筛选的影像部分(第二影像部分)的 形状,由被监测对象种类判别机构25判别对应于该影像部分在实际空间中所对应的被监 测对象的种类的处理,相当于本发明所述的车辆周围监测方法中的被监测对象种类判别步 马聚ο另外,当根据空白区域131的形状进行是不是行人的判别时,也可以根据其他基 准进行。例如,该判别基准可以是空白区域131的垂直方向上的宽度(高度)、或水平方向 上的宽度相对于局部处理区域130的高度gh的空白区域131的高度比例等基准。图像处理单元1通过被监测对象种类判别机构24判别为被监测对象的种类是行 人时,会通过扬声器6输出声音和在HUD上进行显示等方法提醒驾驶员以使其引起注意。
另外,在本实施方式中,以被监测对象的影像部分的周围区域作为局部处理区域, 并限定在该局部区域内用盖博滤波器进行筛选处理后再进行二值转换处理。但是也可以不 设定局部处理区域,而在整个图像范围内用盖博滤波器进行筛选处理后再进行二值转换处理。另外,在本实施方式中,用毫米波雷达装置8测定被监测对象到摄像头2R、2L的距 离。但是也可以使用激光雷达等其他测距装置。或者也可通过2台摄像头2R、2L拍到的同 一被监测对象的图像部分在水平方向上的错位(视差),测定实际空间中的被监测对象到 红外线摄像头2R、2L的距离。此时,也可以读取由车速传感器4测得的车速(VCAR)和由倾 角变化量传感器3测得的倾角变化量(YR),以时间为变量对倾角变化量(YR)进行积分运算 求出车辆10的倾角,通过修正倾角而修正实际空间位置(图2中的X、Y、Z的坐标值)。另外,也可用1台摄像头在不同时刻拍到的图像中的同一被监测对象的图像部分 的尺寸变化,测定被监测对象到摄像头2R、2L的距离。另外,在本实施方式中举了拍摄车辆前方的例子,但也可以采用拍摄车辆的后方 或侧部等其他方向而监测车辆的周围情况的结构。另外,在本实施方式中将红外线摄像头2R、2L用作本发明的摄像头,但是也可以 用拍摄可见光图像的可见光摄像头。还有,在本实施方式中将2台红外线摄像头2R、2L用作本发明的摄像头,但是也可 以使用1台。工业实用性如上所述,采用本发明的车辆周围监测装置、车辆、车辆周围监测程序及车辆周围 监测方法时,由于可以根据从摄像头拍到的图像中筛选的被监测对象的影像部分的轮廓线 的形状精准地判别所述被监测对象的种类,所以本发明有助于监测车辆周围的情况。
权利要求
一种车辆周围监测装置,利用车载摄像头拍到的显示该车辆周围情况的图像来监测该车辆的周围情况,其特征在于,包括距离检测机构,用于测定所述摄像头到被监测对象的距离;被监测对象影像抽取机构,用于从所述摄像头拍到的图像中抽取与被监测对象对应的第一影像部分;筛选机构,用盖博滤波器对所述图像进行筛选处理,其中,盖博滤波器按以下方式设定根据特定种类被监测对象在规定方向上的宽度的推定数值,和由所述距离检测机构测得、所述第一影像部分在实际空间中所对应的被监测对象到所述摄像头之间的距离,并按所述宽度的推定数值越小或测得的距离越长时,筛选对象的端缘宽度较窄的原则进行设定,并且筛选对象的端缘方向设定为与所述规定方向垂直相交的方向;被监测对象种类判别机构,根据所述筛选处理筛选出的第二影像部分的形状,对该第二影像部分在实际空间中所对应的被监测对象的种类进行判别,判别它是否是所述特定种类。
2.根据权利要求1所述的车辆周围监测装置,其特征在于,还包括局部处理区域设定机构,根据所述特定种类的被监测对象的大小的推定数值, 和由所述距离检测机构测得、第一影像部分在实际空间中所对应的被监测对象到所述摄像 头之间的距离,将包含所述第一影像部分在内的周围范围设定为局部处理区域,所述筛选机构在设定的所述局部处理区域内进行所述筛选处理,所述被监测对象种类判别机构,根据对所述局部处理区域进行筛选处理而筛选的所述 第二影像部分的形状,对所述第二影像部分在实际空间中所对应的被监测对象的种类进行 判别,判别它是否是所述特定种类。
3.根据权利要求2所述的车辆周围监测装置,其特征在于,所述特定种类是行人,所述规定方向是水平方向,和所述规定方向垂直相交的方向是与所述水平方向垂直相交的方向,所述被监测对象种类判别机构,对所述局部处理区域中,由所述筛选处理筛选的所述 第二影像部分的下端包含在所述局部处理区域的下半部分时,将所述第二影像部分在实际 空间中所对应的被监测对象判别为行人。
4.一种车辆,具有对其周围情况进行拍摄的摄像头,并且具有利用上述摄像头拍到的 图像来监测其周围情况的功能,其特征在于,包括距离检测机构,用于测定所述摄像头到被监测对象的距离;被监测对象影像抽取机构,用于从所述摄像头拍到的图像中抽取与被监测对象对应的 第一影像部分;筛选机构,用盖博滤波器对所述图像进行筛选处理,其中,盖博滤波器按以下方式设 定根据特定种类被监测对象在规定方向上的宽度的推定数值,和由所述距离检测机构测 得、所述第一影像部分在实际空间中所对应的被监测对象到所述摄像头之间的距离,并按 所述宽度的推定数值越小或测得的距离越长时,筛选对象的端缘宽度较窄的原则进行设 定,并且筛选对象的端缘方向设定为与所述规定方向垂直相交的方向;被监测对象种类判别机构,根据所述筛选处理筛选出的第二影像部分的形状,对该第二影像部分在实际空间中所对应的被监测对象的种类进行判别,判别它是否是所述特定种类。
5.一种车辆周围监测程序,可使具有访问功能的电脑起到监测该车辆的周围情况的作 用,该电脑可访问搭载在车辆上并拍摄该车辆周围情况的摄像头拍到的图像数据,其特征 在于,可使所述电脑具有如下机构的功能,即,距离检测机构,用于测定所述摄像头到被监测对象的距离;被监测对象影像抽取机构,用于从所述摄像头拍到的图像中抽取与被监测对象对应的 第一影像部分;筛选机构,用盖博滤波器对所述图像进行筛选处理,其中,盖博滤波器按以下方式设 定根据特定种类被监测对象在规定方向上的宽度的推定数值,和由所述距离检测机构测 得、所述第一影像部分在实际空间中所对应的被监测对象部到所述摄像头之间的距离,并 按所述宽度的推定数值越小或测得的距离越长时,筛选对象的端缘宽度较窄的原则进行设 定,并且筛选对象的端缘方向设定为与所述规定方向垂直相交的方向;被监测对象种类判别机构,根据所述筛选处理筛选出的第二影像部分的形状,对该第 二影像部分在实际空间中所对应的被监测对象的种类进行判别,判别它是否是所述特定种 类。
6.一种车辆周围监测方法,可使具有访问功能的电脑起到监测该车辆的周围情况的作 用,该电脑可访问搭载在车辆上并拍摄该车辆周围情况的摄像头拍到的图像数据,其特征 在于,包括以下步骤距离检测步骤,此时由所述电脑测定所述摄像头到被监测对象的距离;被监测对象影像抽取步骤,此时由所述电脑从所述摄像头拍到的图像中抽取与被监测 对象对应的第一影像像部分;筛选步骤,此时由所述电脑用盖博滤波器对所述图像进行筛选处理,其中,盖博滤波器 按以下方式设定根据特定种类被监测对象在规定方向上的宽度的推定数值,和由所述距 离检测步骤测得、所述第一影像部分在实际空间中所对应的被监测对象部到所述摄像头之 间的距离,并按所述宽度的推定数值越小或测得的距离越长时,筛选对象的端缘宽度较窄 的原则进行设定,并且筛选对象的端缘方向设定为与所述规定方向垂直相交的方向;被监测对象种类判别步骤,根据所述筛选处理筛选的第二影像部分的形状,对该第二 影像部分在实际空间中所对应的被监测对象的种类进行判别,判别它是否是所述特定种 类。
全文摘要
本发明提供一种车辆周围监测装置、车辆、车辆周围监测程序及车辆周围监测方法,包括距离检测机构(20),由其测定摄像头(2R、2L)到被监测对象的距离;被监测对象影像抽取机构(21),由其从摄像头拍到的图像中筛选被监测对象的第一影像部分;筛选机构(23),用盖博滤波器对上述图像进行筛选处理,其中,盖博滤波器的设定状态为根据行人在水平方向上的宽度的推定数值,和摄像头到对应于所述第一影像部分的被监测对象的距离,当该宽度的推定数值越小、该距离越长时,将筛选对象端缘的宽度设定得较窄,同时将筛选对象端缘方向设定为垂直方向;被监测对象种类判别机构(24),根据上述筛选处理筛选的影像部分的形状,判别对应于该影像部分的实际空间中的被监测对象的种类是否是行人。采用本发明时,根据从摄像头拍到的图像中筛选的被监测对象的影像部分的轮廓线的形状,可以精准地判别该被监测对象的种类。
文档编号H04N7/18GK101933065SQ20088012615
公开日2010年12月29日 申请日期2008年11月18日 优先权日2008年2月4日
发明者横地裕次, 谷口文则, 长冈伸治 申请人:本田技研工业株式会社
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1