电子装置、电子装置的控制方法_3

文档序号:9885453阅读:来源:国知局
ediaBroadcasting Terrestrial)、数字多媒体卫星广播(DMBS ,Digital MultimediaBroadcasting Satellite)、高通提出的移动电视标准(MediaFL0,Media Forward LinkOnly)、手持数字视频广播(DVBH,Digital Video Broadcast Handheld)、日本数字音频广播方案(ISDBT,Integrated Services Digital Broadcast Tereestrial)等。通过广播收发部185收发的广播信号可包括交通数据、生活数据等。
[0080]移动通信部186可根据第三代移动通信技术(3G,3rd Generat1n)、第三代合作伙伴计划(3GPP,3rd Generat1n Partnership Pro ject)、长期演进计划(LTE,Long TermEvolut1n)等多种移动通信规格与移动通信网相连接并进行通信。
[0081]近距离通信部187为用于进行近距离通信的装置。如上所述,近距离通信部187可通过蓝牙(Bluetooth)、射频识别(RFID,Rad1 Frequency Identificat1n)、红外数据组织(IrDA、Infrared Data Associat1n)、超宽带(UWB,Ultra WideBand)、紫蜂协议(ZigBee)、近场通信(NFC,Near Field Communicat1n)、无线保真(W1-Fi)等来进行通信。
[0082]有线通信部189为可以以有线方式使电子装置100与其他设备相连接的接口装置。有线通信部189可以为可通过通用串行总线端口(USB Port)来进行通信的通用串行总线模块。
[0083]这种通信部180可利用位置数据部181、无线互联网部183、广播收发部185、移动通信部186、近距离通信部187、有线通信部189中的至少一个来与其他设备通信。
[0084]作为一例,在电子装置100不包括摄像功能的情况下,可利用近距离通信部187、有线通信部189中的至少一个来接收黑匣子等车辆用摄像头拍摄的影像。
[0085]作为另一例,在与多个设备通信的情况下,也可由一个设备通过近距离通信部187来通信,另一个设备通过有线通信部189通信。
[0086]检测部190为可检测电子装置100的当前状态的装置。检测部部190可包括动作检测部191、光检测部193中的全部或一部分。
[0087]动作传感部191可检测电子装置100的三维空间上的运动。动作传感部191可包括三轴地磁传感器及三轴加速度传感器。可将通过动作传感部191获得的运动数据和通过位置数据部191获得的位置数据相结合,来计算出附着有电子装置100的车辆的更加准确的轨迹。
[0088]光检测部193为测定电子装置100的周边照度(illuminance)的装置。利用通过光检测部193获得的照度数据,可使显示部195的亮度与周边亮度相对应地发生变化。
[0089]电源部195为用于供给电子装置100的工作或与电子装置100相连接的其他设备的工作所需的电源的装置。电源部195可以为从内置于电子装置100的电池或车辆等外部电源处接收电源的装置。并且,根据接收电源的形态,电源部195可体现为有线通信模块119或体现为以无线的方式接收电源的装置。
[0090]地形高度处理部140可确定地形高度。具体地,地形高度处理部140可利用数字高程模型或数字表面模型来确定车辆位置的地形高度和与车辆的位置相距规定距离以内的区域的地形高度,上述数字高程模型为在现实世界地形信息中表现除建筑物、树木、人工结构物等之外的地形部分的数字模型,而数字表面模型为表现现实世界的所有信息的模型,即,表现地形、树木、建筑物、人工结构物等的模型。其中,数字高程模型数据或数字表面模型数据可从电子装置100内的存储部110获得,或者可从电子装置100之外的单独的外部数据库中获得,或者可从其他电子装置100获得。
[0091 ]在此情况下,地形高度处理部140可确定从位置数据部181获得的车辆的位置的地形高度及与车辆的位置相距规定距离以内的区域的地形高度。其中,为了提高电子装置100的数据处理速度,与车辆的位置相距规定距离以内的区域可被设定成与车辆的位置相距最佳的距离。作为一例,在电子装置100根据使用人员的导航请求来执行目的地为止的导航的情况下,可确定目的地为止的所有路径中的与车辆的位置相距规定距离的前方的路径(例如,车辆将要行驶的道路)的地形高度。
[0092]而且,地形高度处理部140可通过比较车辆的位置的地形高度和与车辆的距离相距规定距离以内的区域的地形高度来计算出地形高度差。具体地,地形高度处理部140可利用以下数学式I来计算出车辆的位置的地形高度和与车辆的位置相距规定距离以内的区域的地形高度的相对差。
[0093]数学式I
[0094]H=PO-Pl
[0095]其中,H可以为地形高度差,PO可以为车辆的当前位置的地形高度,Pl可以为与车辆的当前位置相距规定距离的地点的地形高度。
[0096]另一方面,摄像头旋转角度计算部150可在车辆的位置计算出设于车辆的摄像头的旋转角度。对此,参照图2进行具体说明。
[0097]参照图2,可将车辆以X轴为中心进行的旋转运动定义为roll,可将车辆以y轴为中心进行的旋转运动定义为pitch,可将车辆以z轴为中心进行的旋转运动定义为yaw。
[0098]参照上述内容,本发明一实施例的摄像头旋转角度计算部150可在车辆的位置计算出设于车辆的摄像头的roll方向旋转角度、pitch方向旋转角度、yaw方向旋转角度。
[0099]尤其,摄像头旋转角度计算部150可计算出pitch方向旋转角度(以下,称为上下方向旋转角度)。其中,上下方向旋转角度可以为摄像头的光学轴与水平线形成的角度。
[0100]在此情况下,作为一例,摄像头旋转角度计算部150基于由检测部190的倾斜传感器检测到的信号来计算出摄像头的上下方向旋转角度。并且,作为另一例,摄像头旋转角度计算部150可基于延长线和水平线形成的角度来计算出摄像头的上下方向旋转角度,上述延长线为延长车辆的当前位置的高度和与当前位置相距规定距离的前方地点的高度的线。
[0101]另一方面,本发明一实施例的电子装置100可包括提供增强现实视图模式的增强现实提供部160。其中,增强现实可为在显示使用人员实际看到的现实世界的画面上视觉性地重叠表示附加信息(例如,关注地点(Point Of Interest:Ρ0Ι)的图形要素、用于表示目的地为止的路径的图形要素、如使用人员附加信息的车辆运行所需的信息、建筑物等)来提供的方法。在本发明的一实施例中,将在增强现实视图模式中以与实际影像重叠的方式显示的车辆的运行所需的信息、车辆状态信息、驾驶人员所需信息等的附加信息、用于表示建筑物的信息、关注地点等称为信息对象,此外,将为了提供驾驶人员所需的信息而在增强现实视图模式中显现的对象称为信息对象。对此,参照图3进行具体说明。
[0102]图3为具体表示本发明一实施例的增强现实提供部160的框图。参照图3,增强显示提供部160可包括校准部161、三维空间生成部162、对象生成部163、映射部164的全部或一部分。
[0103]校准部161可执行用于从由摄像头拍摄的拍摄影像推定与摄像头相对应的摄像头参数的校准。其中,摄像头参数为构成摄像头矩阵的参数,上述摄像头矩阵为表示真实空间映射在照片的关系的信息,上述摄像头参数可包括:摄像头外部参数(extrinsicparameters)和摄像头内部参数(intrinsic parameters)。对此,参照图4的(a)部分进行具体地说明。
[0104]参照图4的(a)部分,摄像头参数可包括摄像头外部参数6 O I ( e X t r i n s i cparameters)、摄像头内部参数602(intrinsic parameters)。其中,摄像头内部参数602的fx、fy可以为焦点距离(focal length)、cx、cy可以为主点(principal point)、skew_c =tana可以为偏斜系数(skew coefficient)。并且,摄像头外部参数601可以为用于将世界坐标系605(world coordinate system)上的三维点的坐标(X,Y,Z)变换为摄像头坐标系604(Camera Coordinate System)上的三维点的坐标(Xe,Yc,Zc)的旋转/移动变换矩阵。像这样,由于摄像头外部参数并非为摄像头固有的参数,因此,上述摄像头外部参数可根据摄像头的设置位置和设置方向而不同,并且,也可根据怎样定义世界坐标系而不同。
[0105]三维空间生成部162可基于由摄像头拍摄的拍摄影像来生成虚拟三维空间。具体地,三维空间生成部162可将由校准部161所推定的摄像头参数适用于二维的拍摄影像来生成虚拟三维空间。对此,参照图4的(b)部分进行具体说明。
[0106]参照图4的(b)部分,摄像头拍摄影像可通过将世界坐标系605的三维空间上的点透视投影(perspective project1n)在二维图像平面来获得。因此,电子装置100的三维空间生成部162可通过基于摄像头参数来执行上述工作的逆过程,从而生成摄像头的拍摄影像的世界坐标系605的虚拟三维空间。
[0107]对象生成部163可生成在增强现实上用于引导的信息对象,例如,在目的地为止的导航中所使用的导航对象、车行道变更引导对象、车道线脱离引导对象、使用人员所需信息对象等。其中,对象可体现为三维对象、图像或艺术线条等。
[0108]映射部164可在由三维空间生成部162生成的虚拟三维空间映射由对象生成部163生成的对象。具体地,映射部164可确定由对象生成部163生成的对象在虚拟三维空间中的映射位置,并在所确定的位置映射对象。在此情况下,映射部164可以以反映由地形高度处理部140计算出的地形高度差和/或摄像头旋转角度计算部150计算出的摄像头上下旋转角度来确定对象的映射位置。
[0109]另一方面,控制部170控制电子装置100的整体工作。具体地,控制部170可控制存储部110、输入部120、输出部130、地形高度处理部140、摄像头旋转角度计算部150、增强现实提供部160、通信部180、检测部190、电源部195中的全部或一部分。
[0110]尤其,控制部170可控制显示部以反映由地形高度处理部140计算出的地形高度差和/或由摄像头旋转角度计算部150计算出的摄像头上下旋转角度的方式通过增强现实来显示用于引导车辆的信息对象。对此,参照图5进行具体说明。
[0111]图5为表示本发明一实施例的车辆在行驶中所处的道路的图。为了便于说明本发明的实施例,在图5中分别假设车辆行驶在向上倾斜道路上的情况、车辆行驶在无倾斜水平道路上的情况、车辆
当前第3页1 2 3 4 5 
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1