体感识别装置及通过其控制鼠标键盘操作的人机交互系统的利记博彩app

文档序号:6641466阅读:886来源:国知局
体感识别装置及通过其控制鼠标键盘操作的人机交互系统的利记博彩app
【专利摘要】本实用新型公开了一种体感识别装置,包括主控模块、深度成像模块、彩色摄像头、运动跟随模块以及通信模块,所述深度成像模块与主控模块相连,用于采集深度图像数据并将采集得到的深度图像数据交由主控模块处理;所述运动跟随模块与主控模块相连,运动跟随模块调整整个体感识别装置的角度,实现人体跟随功能;所述彩色摄像头与主控模块相连,彩色摄像头用于采集物体色彩数据;所述通信模块与主控模块相连,用于与电脑进行通信。一种通过体感识别装置控制鼠标与键盘操作的人机交互系统,包括体感识别装置、计算机,所述的体感识别装置通过USB数据线与计算机相连。
【专利说明】体感识别装置及通过其控制鼠标键盘操作的人机交互系统

【技术领域】
[0001]本实用新型涉及计算机领域,特别涉及一种体感识别装置通过该装置控制鼠标与键盘操作的人机交互系统。

【背景技术】
[0002]操作计算机时常用的人机交互模式是计算机用户通过操作键盘与鼠标来与计算机进行互动。这种方式要求计算机用户通过双手进行操作,将用户“绑定”在了计算机前。这种人机交互方式的缺点是当用户不在计算机前时就难以对计算机进行控制,而且用户长期采用相同的姿势操作计算机容易引发颈椎病、腱鞘炎等各种疾病。例如教师在上课时经常使用PowerPoint软件播放演示文稿;为了加强授课效果,教师经常需要离开电脑走到投影幕布前进行指点或在黑板上板书;每当需要切换演示文稿时,教师又不得不回到电脑前进行操作。又例如医生在进行手术时有时需要查看患者的相关病情资料,但是操作电脑又会对已消毒的手套产生污染。
[0003]目前已出现了多种不通过鼠标或键盘操作计算机的方式,例如通过语音识别技术对计算机进行控制(实用新型专利申请号201110061361.3)、通过佩戴特定设备对计算机进行控制(实用新型专利申请号201210347942.8)等。这些方式能够采集用户的特定语音或动作信息并转换为操作计算机的对应指令,但是仍然有一定的限制,例如用户不能离开麦克风或需要佩戴专用设备。
实用新型内容
[0004]为解决上述问题,本实用新型公开了一种体感识别装置通过该装置控制鼠标与键盘操作的人机交互系统。
[0005]为了达到上述目的,本实用新型提供如下技术方案:一种体感识别装置,包括主控模块、深度成像模块、彩色摄像头、运动跟随模块以及通信模块,所述深度成像模块与主控模块相连,用于采集深度图像数据并将采集得到的深度图像数据交由主控模块处理;所述运动跟随模块与主控模块相连,运动跟随模块调整整个体感识别装置的角度,实现人体跟随功能;所述彩色摄像头与主控模块相连,彩色摄像头用于采集物体色彩数据;所述通信模块与主控模块相连,用于与电脑进行通信。
[0006]作为本实用新型的一种改进,所述的深度成像模块包括红外发射器和红外摄像头,红外发射器用于发射红外线覆盖体感识别装置的可视范围,所述的主控模块控制红外发射器工作,调整红外发射器光源。
[0007]作为本实用新型的一种改进,所述运动跟随模块包括步进电机和步进电机驱动电路。
[0008]作为本实用新型的一种改进,所述的通信模块采用USB接口的通信方式。
[0009]作为本实用新型的一种改进,所述的步进电机采用24BYJ48,所述的步进电机驱动电路包括大功率复合管ULI2003。
[0010]一种通过体感识别装置控制鼠标与键盘操作的人机交互系统,包括体感识别装置、计算机,所述的体感识别装置通过USB数据线与计算机相连。
[0011]本实用新型的有益效果:
[0012]本实用新型的体感识别装置结构简单,使用方便,准且度以及灵敏度高,同时成本低,具有广泛的应用价值。同时通过本实用新型的体感识别装置控制鼠标与键盘操作的人机交互系统,改善现有的人机交互模式,使得用户能够在不接触计算机的情况下通过自身的手势和动作对计算机进行控制;用户可以自行配置人体动作与鼠标、键盘操作之间的对应关系,从而适应不同软件的操作区别。

【专利附图】

【附图说明】
[0013]图1为本实用新型的人机交互系统的结构示意图。
[0014]图2为本实用新型的体感识别装置的结构示意图。
[0015]图3为本实用新型的人机交互系统的软件模块图。

【具体实施方式】
[0016]以下将结合具体实施例对本实用新型提供的技术方案进行详细说明,应理解下述【具体实施方式】仅用于说明本实用新型而不用于限制本实用新型的范围。
[0017]如图2所示为本实用新型的体感识别装置的结构示意图包括主控模块、深度成像模块、彩色摄像头、运动跟随模块和通信模块。
[0018]所述主控模块采用DSP芯片,选用TI公司的TMS320C6713DSK作为硬件开发平台。该芯片的工作频率可达到225MHZ。该模块分别于深度成像模块、彩色摄像头、运动跟随模块和通信模块相连。
[0019]所述深度成像模块与主控模块相连,主控模块向深度成像模块发送控制命令,并通过该模块采集深度图像数据。深度成像模块包括红外发射器和红外摄像头。
[0020]红外发射器用于发射红外线覆盖体感识别装置的可视范围了,主控模块控制红外发射器工作,调整红外发射器光源。
[0021]本实用新型选用具有CMOS感光器件,800万像素的红外摄像头模块。红外摄像头将采集得到的深度图像数据交由主控模块处理。
[0022]所述运动跟随模块与主控模块相连,主控模块向运动跟随模块发送控制命令,运动跟随模块用于调整整个体感识别装置的角度,实现人体跟随功能。该模块包括步进电机和步进电机专门的驱动电路,步进电机采用24BYJ48,由于步进电机的驱动电流较大,采用大功率复合管ULI2003作为步进电机驱动器。
[0023]所述彩色摄像头与主控模块相连,彩色摄像头用于采集物体色彩数据,主控模块将色彩图像数据和深度图像数据进行对应,即色彩图像中的每个像素分别与深度图像中的一个像素对应,从而产生像素相互对应的图像。
[0024]所述通信模块与主控模块相连,USB使用方便,即插即用,传输速率快。本实用新型采用的是USB与电脑实现通信。
[0025]如图1所示为本实用新型的一种通过体感识别装置控制鼠标与键盘操作的人机交互系统的结构示意图,包括上述的体感识别装置2、计算机1,所述的体感识别装置2通过USB数据线与计算机I相连。
[0026]电脑I使用一般商用计算机,安装Windows 7操作系统。体感识别装置2与电脑I通过USB数据线相连,安放位置以能采集到用户上半身正面图像为佳。
[0027]本实施例中,主控程序为电脑I上安装的基于体感识别装置的人机交互系统,其软件部分采用现有技术中的软件,包括动作采集模块3、动作识别模块4、指令映射模块5、命令发生模块6。
[0028]此人机交互系统的使用方式如下:
[0029](I)用户启动人机交互系统软件。
[0030](2)打开动作映射设置页面,设置动作与鼠标、键盘事件之间的对应关系。系统支持多组对应关系设置。此步骤通常可以跳过,只在用户需要修改指令映射关系时执行。系统默认的动作映射有:
[0031]
用户动作I键盘动作I鼠标动作左手向上举起方向键上无_
左手向左伸出方向键左无_
左手向右伸出方向键右无_
左手向下放置方向键下无_
右手握拳_^_鼠标左键点击右手手腕关节移动无_鼠标移动_
[0032](3)用户面对体感识别装置2做出动作,人机交互系统识别用户动作并转换为对应的鼠标、键盘事件,发送给操作系统,模拟鼠标、键盘动作。
[0033]本实施例中人机交互系统的具体工作步骤如下:
[0034](I)体感识别装置2采集用户人体轮廓与深度图像,通过USB数据线传输到电脑
1
[0035](2)动作采集模块3接收用户动作数据,识别出用户主要关节的三维坐标。
[0036](3)动作识别模块4记录用户主要关节在最近一秒内的运动轨迹,使用多线程方式与指令映射模块5中预先定义的多个动作模式进行比对,计算出用户动作与预定义动作模式的相似度,若相似度超过特定阈值则判定用户做出了特定动作。
[0037](4)若用户做出了特定动作,查找指令映射模块5中存储的映射表,将用户动作转变为相应的鼠标与键盘动作,并其作为参数调用命令发生模块6 ;
[0038](5)命令发生模块6根据接收到的参数发送相应的鼠标与键盘事件给电脑操作系统,达到模拟鼠标与键盘操作的效果。
[0039]本实用新型方案所公开的技术手段不仅限于上述实施方式所公开的技术手段,还包括由以上技术特征任意组合所组成的技术方案。
【权利要求】
1.一种体感识别装置,其特征在于:包括主控模块、深度成像模块、彩色摄像头、运动跟随模块以及通信模块,所述深度成像模块与主控模块相连,用于采集深度图像数据并将采集得到的深度图像数据交由主控模块处理;所述运动跟随模块与主控模块相连,运动跟随模块调整整个体感识别装置的角度,实现人体跟随功能;所述彩色摄像头与主控模块相连,彩色摄像头用于采集物体色彩数据;所述通信模块与主控模块相连,用于与电脑进行通?目。
2.根据权利要求1所述一种体感识别装置,其特征在于:所述的深度成像模块包括红外发射器和红外摄像头,红外发射器用于发射红外线覆盖体感识别装置的可视范围,所述的主控模块控制红外发射器工作,调整红外发射器光源。
3.根据权利要求1所述一种体感识别装置,其特征在于:所述运动跟随模块包括步进电机和步进电机驱动电路。
4.根据权利要求1所述一种体感识别装置,其特征在于:所述的通信模块采用USB接口的通信方式。
5.根据权利要求3所述一种体感识别装置,其特征在于:所述的步进电机采用24BYJ48,所述的步进电机驱动电路包括大功率复合管ULI2003。
6.一种通过体感识别装置控制鼠标与键盘操作的人机交互系统,其特征在于:包括权利要求I所述的体感识别装置、计算机,所述的体感识别装置通过USB数据线与计算机相连。
【文档编号】G06F3/01GK203950270SQ201420038465
【公开日】2014年11月19日 申请日期:2014年1月22日 优先权日:2014年1月22日
【发明者】高超, 祖洋洋, 罗长法, 杨乐 申请人:南京信息工程大学
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1