基于投影显示的虚拟触控交互方法、装置及机器人的利记博彩app
【专利摘要】本发明涉及基于投影显示的虚拟触控交互方法、装置及机器人，设置微控制器、数据处理模块、投影模块、投影菜单显示模块、图像采集模块，本发明根据接收到的指示物触碰到目标设备在界面表面上的投影图像确定指示物触碰的状态、位置信息，并根据指示物触碰的投影的位置信息确定对应的目标设备中的位置信息；根据目标设备中的位置信息投影控制装置操作，从而实现通过虚拟触控方式对设备进行操作，节省了物理空间，提高了设备操作的快捷性也灵活性；图像识别过程中根据指示物的阴影状态判断指示物是/否进行触碰操作，提高了识别与控制的准确度，降低了误操作发生的概率。
【专利说明】
基于投影显示的虚拟触控交互方法、装置及机器人
技术领域
[0001]本发明涉及虚拟触控技术领域，具体地说，涉及基于投影显示的虚拟触控交互方法、装置及机器人。
【背景技术】
[0002]目前的电子设备越来越注重人机交互的方便、快捷，传统的电脑的输入装置是用键盘来进行文字输入的。实体的键盘占据很大一部分物理空间，无线技术的成熟使得无线键盘成为了可能，无线键盘给电脑操作者带来了更多的自由空间和操作舒适感，然而无线键盘仍然要使用实体的键盘，最新发展的触屏技术的出现使得摆脱实体的键盘成为了可能，用显示屏中的模拟软键盘进行文字的输入，利用对显示屏的直接触控实现控制对电脑显示屏中的内容进行操作，比如，银行排队机、取款机、智能手机、平板电脑等，上述都是通过对实体的设备进行操作以实现控制对电脑的操作。
[0003]上述少实体按键产品以外表精致美观，操作简洁方便而明显受到市场追捧，但是，受制于触屏大小的限制，在一些场合，在实体触屏上进行人机交互式触控操作稍显狭窄，不够灵活。
[0004]基于以上原因，本发是提出一种新的人机界面交互式方案，设计出一种投影式虚拟触控菜单控制装置，可广泛适用于多种场合，安装、携带简单方便、操作快捷、准确率高，大大提高了用户体验。
【发明内容】
[0005]本发明提出基于投影显示的虚拟触控交互方法、装置及机器人，用于实现通过虚拟触控方式对设备进行操作，其具体的技术方案如下:
一种基于投影显示的虚拟触控交互方法，该方法包括:
根据对接收到的指示物触碰到设备在特定界面上投影的图像分析，识别指示物是/否进行触碰操作的动作状态，及触碰的位置信息，并根据所述位置信息确定对应的目标设备中的位置信息进而运行菜单指令。
[0006]进一步地，还包括根据对指示物的阴影状态的图像识别，确定指示物是/否进行触碰操作的方法；即根据指示物悬空状态、触碰状态所产生的阴影的不同图像特征对其是/否进行触碰操作进行识别。
[0007]一种基于投影显示的虚拟触控交互装置，该装置包括:
微控制器、数据处理模块、投影模块、投影菜单显示模块、图像采集模块，所述投影模块、投影菜单显示模块、图像采集模块分别与微控制器连接，其中，
所述投影模块，受控于微控制器，用于将目标设备的菜单投影至界面表面上；
投影菜单显示模块，用于产生界面菜单的光线；
图像采集模块，用于采集指示物触碰到目标设备在界面表面上的投影的图像，并传输至数据处理模块； 数据处理模块用于对指示物是/否进行触碰操作进行识别、确定指示物触碰投影的位置，并根据所述位置信息确定对应的目标设备菜单的位置信息，并传输至微控制器；
微控制器，所述微控制器分别与所述键盘投影单元、图像采集单元、数据处理单元连接，用于协调和控制所述触控系统的运行。
[0008]包含投影显示的虚拟触控交互装置的虚拟触控自助点餐机器人，
进一步地，投影模块、投影菜单显示模块、图像采集模块设置于机器人手掌中，投影界面为桌面。
[0009]更进一步地，所述目标设备的菜单包含菜系选择、详细介绍、翻页、确认选项。
[0010]本发明所提供的基于投影显示的虚拟触控交互方法、装置及机器人，具有以下优占.V.根据接收到的指示物触碰到目标设备在界面表面上的投影图像确定指示物触碰的位置信息，并根据指示物触碰的投影的位置信息确定对应的目标设备中的位置信息；根据目标设备中的位置信息投影控制装置操作，从而实现通过虚拟触控方式对设备进行操作，节省了物理空间，提高了设备操作的快捷性也灵活性；图像识别过程中根据指示物的阴影状态判断指示物是/否进行触碰操作，提高了识别与控制的准确度，降低了误操作发生的概率。
【附图说明】
[0011]图1为本发明基于投影显示的虚拟触控交互装置的结构意框图；
图2、3为本发明实施例1中基于投影显示的虚拟触控交互装置的指示物是/否进行触碰操作示意图；
图4为本发明实施例2中含有基于投影显示的虚拟触控交互装置的自助点餐机器人的结构示意图。
【具体实施方式】
[0012]下面结合附图及实施例对本发明基于投影显示的虚拟触控交互方法、装置及机器人作进一步详细的说明。
[0013]参照图1 一种基于投影显示的虚拟触控交互装置，该装置包括:微控制器、数据处理模块、投影模块、投影菜单显示模块、图像采集模块，所述投影模块、投影菜单显示模块、图像采集模块分别与微控制器连接，其中，所述投影模块，受控于微控制器，用于将目标设备的菜单投影至界面表面上；投影菜单显示模块，用于产生界面菜单的光线；图像采集模块，用于采集指示物触碰到目标设备在界面表面上的投影的图像，并传输至数据处理模块；数据处理模块用于对指示物是/否进行触碰操作进行识别、确定指示物触碰投影的位置，并根据所述位置信息确定对应的目标设备菜单的位置信息，并传输至微控制器；微控制器，所述微控制器分别与所述键盘投影单元、图像采集单元、数据处理单元连接，用于协调和控制所述触控系统的运行。
[0014]实施例1，基于投影显示的虚拟触控交互装置的人机交互过程:
投影模块将目标设备人机交互界面实体菜单以一定放大倍数投射在特定界面，指示物(如手指)在投影区域内进行触碰操作； 图像采集模块采集投影的整个虚拟菜单影像区域包括指示物的图像，并传输至数据处理模块；
数据处理模块将信号经过光电转换为特定图像编码格式数据流，进行触碰操作识别，指示物状态分为悬空状态与触碰状态，具有不同的阴影状态，见图2与图3所示，处理运算模块根据图像形态算法对指示物阴影进行分析，识别提示物是/否进行触碰操作；如果否，继续进行图像采集分析，如果是，分析提取出指示物在投影出的虚拟菜单图像上触碰的位置所对应于设备实体菜单的位置，将信号传输至微控制器从而运行对应的操作行为。
[0015]实施例2，含有基于投影显示的虚拟触控交互装置的自助点餐机器人:
如图4所示，含有基于投影显示的虚拟触控交互装置的自助点餐机器人，设备实体菜单装置、投影模块、投影菜单显示模块、图像采集模块设置于机器人手掌中，微控制器、数据处理模块设置于机器人机身中，机器人行至待服务餐桌前，客有需点菜时，机器人伸出手掌，投影模块将手掌中的菜单以一定放大倍数投射在桌面，在本实施例中，界面菜单包含菜系选择、详细介绍，可选择包含视频、音频介绍等，及翻页、确认选项，用户根据需要进行选择操作。指示物状态分为悬空状态与触碰状态，具有不同的阴影状态，处理运算模块根据图像形态算法对指示物阴影进行分析，识别提示物是/否进行触碰操作；如果否，继续进行图像采集分析，如果是，分析提取出指示物在投影出的虚拟菜单图像上触碰的位置所对应于设备实体菜单的位置，将信号传输至微控制器，微控制器通过有线/无线通讯模块将客人的指令发送至厨房的显示设备，服务人员根据客人的点菜行为执行相关操作。
[0016]以上所述者，仅为本发明的较佳实施例而已，不能以此限定本发明实施的范围，SP但凡依本发明申请专利范围及发明说明内容所作的简单的等效变化与修饰，皆仍属本发明专利涵盖的范围内。
【主权项】
1.一种基于投影显示的虚拟触控交互方法，其特征在于，该方法包括: 根据对接收到的指示物触碰到设备在特定界面上投影的图像分析，识别指示物是/否进行触碰操作的动作状态，及触碰的位置信息，并根据所述位置信息确定对应的目标设备中的位置信息进而运行菜单指令。2.根据权利要求1所述一种基于投影显示的虚拟触控交互方法，其特征在于:包括根据对指示物的阴影状态的图像识别，确定指示物是/否进行触碰操作的方法；即根据指示物悬空状态、触碰状态所产生的阴影的不同图像特征对其是/否进行触碰操作进行识别。3.—种基于投影显示的虚拟触控交互装置，其特征在于，该装置包括: 微控制器、数据处理模块、投影模块、投影菜单显示模块、图像采集模块，所述投影模块、投影菜单显示模块、图像采集模块分别与微控制器连接，其中， 所述投影模块，受控于微控制器，用于将目标设备的菜单投影至界面表面上； 投影菜单显示模块，用于产生界面菜单的光线； 图像采集模块，用于采集指示物触碰到目标设备在界面表面上的投影的图像，并传输至数据处理模块； 数据处理模块用于对指示物是/否进行触碰操作进行识别、确定指示物触碰投影的位置，并根据所述位置信息确定对应的目标设备菜单的位置信息，并传输至微控制器； 微控制器，所述微控制器分别与所述键盘投影单元、图像采集单元、数据处理单元连接，用于协调和控制所述触控系统的运行。4.一种虚拟触控自助点餐机器人，其特征在于:包含如权利要求3所述的基于投影显示的虚拟触控交互装置。5.根据权利要求4所述的一种虚拟触控自助点餐机器人，其特征在于:所述投影模块、投影菜单显示模块、图像采集模块设置于机器人手掌中，投影界面为桌面。6.根据权利要求4所述的一种虚拟触控自助点餐机器人，其特征在于:所述目标设备的菜单包含菜系选择、详细介绍、翻页、确认选项。
【文档编号】G06Q50/12GK106033286SQ201510100189
【公开日】2016年10月19日
【申请日】2015年3月8日
【发明人】郭杰
【申请人】青岛通产软件科技有限公司