输入设备、输入方法以及记录介质的制作方法

xiaoxiao2020-7-22  11

输入设备、输入方法以及记录介质的制作方法
【专利摘要】在本发明中,获取单元(1)获取指示显示单元(130)与被相机单元(120)摄取的用户之间的距离的信息。显示控制单元(2)在显示单元(130)的显示屏中显示操作屏幕,所述操作屏幕的大小在由所述获取单元(1)所获取的信息的基础上得以设定。确定单元(3)在由所述相机单元(120)摄取的用户的运动和/或形状的基础上确定来自用户的操作指令。执行单元(4)执行与由确定单元(3)确定的操作指令对应的处理。
【专利说明】输入设备、输入方法以及记录介质
【技术领域】
[0001]本发明涉及输入设备、输入方法以及记录介质。
【背景技术】
[0002]所谓的手势设备是已知的,其基于用户的手的运动来确定来自该用户的操作指令。例如,专利文献I公开了一种输入设备,其在被显示在电视机上的操作屏幕中合成由相机摄取(pick up)的用户图像,并且使得该用户能够在该操作屏幕中基于对象的运动来选择,例如菜单项。
[0003]引用列表
[0004]专利文献
[0005]专利文献1:未经审查的日本专利申请特开N0.2010-257093。

【发明内容】

[0006]技术问题
[0007]在专利文献I中公开的输入设备的情形中,由于操作屏幕的大小总是保持相同,因此当用户尝试在远离电视机的情况下给出操作时,用户不易查看该操作屏幕,并因此对于用户而言难以给出操作。
[0008]本发明是在考虑到上面所解释的情况下做出的,本发明的目标在于提供一种当以远离屏幕的方式给出操作时使得该操作便于进行的输入设备、输入方法以及记录介质。
[0009]问题的解决方案
[0010]根据本发明第一方面的输入设备,包括:获取器,该获取器获取指示显示器或相机与由所述相机摄取的对象之间的距离的信息;显示控制器,该显示控制器在所述显示器的显示屏幕上显示操作屏幕,所述操作屏幕具有根据由所述获取器获取的信息而设定的大小;以及确定器,该确定器基于由所述相机摄取的对象的运动及其形状中的至少一项来确定来自所述对象的操作指令。
[0011]根据本发明第二方面的输入方法,包括:获取步骤,用于获取指示显示器或相机与由所述相机摄取的对象之间的距离的信息;显示控制步骤,用于在所述显示器的显示屏幕上显示操作屏幕,所述操作屏幕具有根据通过所述获取步骤获取的信息而设定的大小;以及确定步骤,用于基于由所述相机摄取的所述对象的运动及其形状中的至少一项来确定来自所述对象的操作指令。
[0012]根据本发明第三方面的程序允许计算机起如下作用:获取器,该获取器获取指示显示器或相机与由所述相机摄取的对象之间的距离的信息;显示控制器,该显示控制器在所述显示器的显示屏幕上显示操作屏幕,所述操作屏幕具有根据由所述获取器获取的信息而设定的大小;以及确定器,该确定器基于由所述相机摄取的对象的运动及其形状中的至少一项来确定来自所述对象的操作指令。
[0013]发明的有益效果[0014]根据本发明,即使操作是以远离屏幕的方式给出,也能容易地给出该操作。
【专利附图】

【附图说明】
[0015]图1是图示了根据本发明的实施例的输入设备的透视图;
[0016]图2是图1中所图示的输入设备的功能框图;
[0017]图3(A)是图示了如何在显示屏幕上显示小的操作屏幕的图;
[0018]图3(B)是图示了如何在显示屏幕上显示大的操作屏幕的图;
[0019]图4是图示了示例性命令表的图,该命令表使用户的手的运动与操作命令相关联;
[0020]图5(A)是图示了如何显示在近距离摄取的手的图像的图;
[0021]图5(B)是图示了如何显示在远距离摄取的手的图像的图;
[0022]图6(A)是图示了在小的操作屏幕上显示的手的运动的图;
[0023]图6(B)是图示了在大的操作屏幕上显示的手的运动的图;
[0024]图7是用于解释根据实施例的输入过程的流程图;
[0025]图8(A)是图示了当手与相机之间的距离短时的可识别方向的图;
[0026]图8(B)是图示了当手与相机之间的距离长时的可识别方向的图;
[0027]图9是图示了图形如何与手的运动同步改变的图;以及
[0028]图10是图示了图形如何与手的运动同步移动的图。
【具体实施方式】
[0029]现在将参照附图给出对根据实施例的输入设备100的说明。
[0030]输入设备100具有基于用户的手的运动来确定来自用户的操作指令的功能。示例性输入设备100为个人计算机。图1图不了输入设备100的外部视图。如图1所不,输入设备100包括操作设备110、相机120、显示器130、主体140以及声音输出器150。
[0031]操作设备110包括诸如键盘这样的输入设备。操作设备110接受操作输入,诸如来自用户的过程启动指令,并将所接受的指令输出给主体140。
[0032]相机120例如包括具有CXD (电荷耦合设备)图像传感器的相机或者具有CMOS (互补金属氧化物半导体)的相机。相机120被设置在显示器130的上部中心处。相机120以一定方式设置以便摄取面向显示器130的方向上的图像。因此,相机120摄取操作输入设备100并且正在观看显示器130的用户的图像。
[0033]显示器130包括诸如液晶显示器这样的显示设备。显示器130在显示设备的显示屏幕上显示各种图像。显示器130所显示的各种图像包括操作屏幕。“操作屏幕”是作为用来在显示屏幕上操作输入设备100的用户接口的图像或类似事物。例如,操作屏幕是显示由相机120所摄取的用户自己或者菜单项等的窗口。
[0034]主体140是输入设备100的主要单元。主体140根据来自用户的诸如过程启动指令的操作输入来执行各种过程。
[0035]声音输出器150包括扬声器等。声音输出器150根据由主体140所执行的过程来
输出声音等。
[0036]接下来,将参照图2给出对主体140的功能结构的说明。如图2所示,主体140包括图像存储器141、存储器142以及控制器143。
[0037]图像存储器141例如包括诸如RAM (随机存取存储器)的视频存储器,并存储由相机120输出的图像数据。图像数据例如包括与由相机120所摄取的用户的图像等对应的图像数据。
[0038]存储器142包括诸如RAM和硬盘的存储器设备。存储器142存储诸如操作屏幕信息142a和命令表142b等的各种数据。
[0039]操作屏幕信息142a例如是关于操作屏幕位置及其大小的信息。图3 (A)示出了作为操作屏幕131的、设置在大体上占据显示屏幕20%的矩形区域中的操作屏幕131a。在这种情况下,与操作屏幕131a相关的操作屏幕信息142a例如是矩形的一个顶点的坐标(XI,Yl)以及在起自该矩形的前一顶点的对角线上的顶点的坐标(X2,Y2)。操作屏幕的位置及其大小可以基于坐标(XI,Yl)和坐标(Χ2,Υ2)进行设置。图3(B)示出了作为操作屏幕131的、设置在大体上占据显示屏幕80%的矩形区域中的操作屏幕131b。在这种情况下,与操作屏幕131b相关的操作屏幕信息142a例如是矩形的一个顶点的坐标(XI,Yl)以及在起自该矩形的前一顶点的对角线上的顶点的坐标(X3,Y3)。操作屏幕信息142a并不限于顶点的坐标,而是可以是被设置为操作屏幕的区域的重心的坐标以及该重心与区域一端(end)的距离。
[0040]如图4所示,命令表142b包括具有彼此关联的用户的“手的运动”和“操作命令”的信息。“操作命令”是通过软件之间的接口(在下文中称为“软件接口 ”)输出至操作系统或者诸如音乐播放器软件等的应用软件的信息。操作命令例如是与提供给操作系统的操作有关的信息,以及与提供给音乐播放器软件等的操作有关的信息,该操作诸如播放、停止、快进以及跳过。
[0041]在图4中,操作命令与手的运动相关联。例如,作为与提供给操作系统的操作有关的信息,“操作开始”与“手的快速水平运动”相关联。此外,作为与提供给音乐播放器软件的操作有关的信息,“增加音量”与“手的向上运动”相关联。另外,“播放”与“手的向右运动”相关联。
[0042]控制器143包括处理器等,与存储在存储器142中的程序相关联地操作,并且根据来自用户的诸如过程开始指令的操作输入执行各种过程。当操作设备110输出过程开始指令时,控制器143指示相机120开始图像摄取。基于该指令,相机120连续地输出所摄取的图像至图像存储器141。控制器143控制显示器130来显示各个图像。
[0043]此外,当操作设备110输出过程开始指令时,控制器143执行诸如音乐播放器软件的应用软件,并启动用于通过软件接口将操作命令输入到该应用软件的输入过程。
[0044]控制器143用作获取器1、显示控制器2、确定器3以及执行器4。获取器I获取与显示器130 (显示设备)或相机120与由相机120所摄取的用户(对象)之间的距离有关的信息。相机120被布置在显示器130的上部中心处,因此可以认为显示器130与用户之间的距离和相机120与用户之间的距离基本相同。因此认为,获取器I获取与显示器130与用户之间的距离有关的信息。例如,作为和与用户的距离有关的信息,获取器I获取手的图像的面积相对于与图像数据对应的整个图像的面积的比率R。显示器130与由相机120所摄取的用户的手之间的距离与手的图像的面积相对于与图像数据对应的整个图像的面积的比率R成比例。也就是说,手的图像的面积相对于与图像数据对应的整个图像的面积的比率R越大,显示器130与用户的手之间的距离越短。
[0045]显示控制器2在显示器130上显示操作屏幕131,该操作屏幕具有基于由获取器I所获取的比率R而设定的大小。例如,在设置操作屏幕131的大小时,显示控制器2基于获取器I所获取的比率R来检测显示器130与用户之间的距离。例如,当手的图像的面积相对于与图像数据对应的整个图像的面积的比率R为5%时,显示控制器2检测出显示器130与手之间的距离,其为3m。而且,当手的图像的面积相对于与图像数据对应的整个图像的面积的比率R为10%时,显示控制器2获取显示器130与手之间的距离,其为lm。
[0046]随着由获取器I所获取的比率R所表示的距离变大,显示控制器2增大操作屏幕131。例如,当检测出的距离小于预先确定的阈值时,显示控制器2设置小的操作屏幕131a。相反,当检测出的距离大于预先确定的阈值时,显示控制器2设置大的操作屏幕131b。与由显示控制器2设置的操作屏幕131对应的数据被输出至显示器130,并在显示设备的显示屏
[0047]显示控制器2获取将要在操作屏幕131上显示的图像数据作为来自图像存储器141的最新的图像数据。显示控制器2处理根据操作屏幕131的大小所获取的图像数据,并且设置操作屏幕。例如,作为手的图像数据,与下述范围内的图像对应的图像数据被从所获取的图像数据中切出(cut out):在该范围中,在包围手的最小矩形的四个边中的每个边上添加了预先确定的宽度。根据操作屏幕131的大小,被切出的图像数据被放大或缩小,并且由显示控制器2设置为将要在操作屏幕131上显示的图像。因此,当操作屏幕131a被设置为操作屏幕131时,如图5(A)所示,手的图像被显示在操作屏幕131a中。此外,当操作屏幕131b被设置为操作屏幕131时,如图5(B)所示,手的图像被显示在操作屏幕131b中。
[0048]显示控制器2根 据需要更新操作屏幕131。例如,显示控制器2根据相机120所摄取的用户的手势(运动和形状中的至少一项)来改变操作屏幕131。显示控制器2根据需要从图像数据中切出手的图像数据,并且将与所设置的图像对应的图像数据输出至显示器130,由此改变操作屏幕131。
[0049]确定器3基于由相机120摄取的用户的手势来确定来自用户的操作指令。首先,确定器3确定图像数据中是否包括人手的图像。例如,存储器142预先存储提取人手的图像的特征的模式数据。确定器3利用该模式数据来检查图像数据,由此确定图像数据中是否包括人手的图像。
[0050]接下来,确定器3确定相机120所摄取的用户的手势是否与和操作指令相关联的手势匹配。例如,确定器3确定作为用户的手势、由相机120摄取的用户的手的手势是否与和操作指令关联的手势匹配。例如,确定器3识别手的图像的运动以便确定手的手势。在这种情况下,作为图像数据中的手的重心,确定器3根据需要计算与图像数据中的手的图像对应的所有像素的位置坐标的平均值。当该重心在一定时间内在水平方向上移动超过预先确定的宽度时,确定器3确定手在水平方向上快速移动。来自对象的操作指令基于由相机摄取的对象的手的运动得以确定。
[0051]此外,确定器3可以被配置为计算手的重心与图像的中心之间的距离以根据需要识别用户的手的图像的运动,该图像的中心是图像数据中所有像素的位置坐标的平均值。例如,当计算出的距离等于或者大于预先确定的阈值时,确定器3识别出用户的手在移动。此时,如图6 (A)所示,当互连手的重心与图像的中心的直线在从向左下倾斜45度到向左上倾斜45度的范围内时,确定器3识别出手向左移动。而且,如图6(B)所示,当互连手的重心与图像的中心的直线在从向左上倾斜45度到向右上倾斜45度的范围内时,确定器3确定手向上移动。同样地,当互连手的重心与图像的中心的直线在从向右上倾斜45度到向右下倾斜45度的范围内时,确定器3确定手向右移动。当互连手的重心与图像的中心的直线在从向右下倾斜45度到向左下倾斜45度的范围内时,确定器3识别出手向下移动。
[0052]当用户的手的运动通过这种方式得以识别时,确定器3查找命令表142b,并将与识别出的手的运动对应的操作命令确定为来自用户的操作指令。例如,当识别出手水平地快速移动时,确定器3将与“手的快速水平运动”相关联的操作命令“操作开始”确定为来自用户的操作指令。此外,当识别出手向右移动时,确定器3将与“手的向右运动”相关联的操作命令“播放”确定为来自用户的操作指令。而且,当识别出手向上移动时,确定器3将与“手的向上运动”相关联的操作命令“增大音量”确定为来自用户的操作指令。
[0053]当已经确定了来自用户的操作指令时,控制器143在显示器130上显示例如图解(i 11 u s trat i on )或消息,作为指示从用户接收到操作指令的信息。
[0054]执行器4根据由确定器3确定的操作指令来执行过程。执行器4通过软件接口将操作命令输出至诸如音乐播放器软件的应用软件。例如,当操作命令为“播放”时,执行器4通过诸如音乐播放器软件的应用软件来播放预先确定的声音数据等。相应地,声音输出器150输出与该声音数据对应的声音。而且,当操作命令为“增大音量”时,执行器4通过诸如音乐播放器软件的应用软件来增加音量。因此,声音输出器150增加输出声音的音量。
[0055]接下来,将给出对输入设备100的操作的解释。下面将参照图7的流程图对输入过程进行解释。
[0056]控制器143从图像存储器141获取最新的图像数据(步骤S101)。
[0057]确定器3确定图像数据是否包含人手的图像(步骤S102)。当在图像数据中不包含人手的图像时(步骤S102:否),控制器143将过程返回到步骤S101。
[0058]当图像数据中包含人手的图像时(步骤S102:是),获取器I获取手的图像的面积相对于与图像数据对应的整个图像的面积的比率R (步骤S103)。接下来,显示控制器2基于由获取器I获取的手的图像的面积相对于与图像数据对应的整个图像的面积的比率R检测显示器130与所摄取的手之间的距离(步骤S104)。
[0059]接下来,显示控制器2基于检测到的距离设置操作屏幕的大小(步骤S105)。显示控制器2通过显示器130在显示器130上显示具有设定大小的操作屏幕131 (步骤S106)。
[0060]显示控制器2从图像存储器141获取最新的图像数据,并且,如图5所示,在操作屏幕131上显示与所获取的图像数据对应的手的图像(步骤S107)。
[0061]接下来,确定器3识别用户的手势,并确定是否指令操作开始(步骤S108)。
[0062]控制器143待命,直到指令操作开始(步骤S108:否)。当指令操作开始(步骤S108:是)时,控制器143通过显示器130显示指示操作开始的图像、诸如图解或消息,作为指示从用户接收到操作开始指令的信息(步骤S109)。
[0063]确定器3待命,直到与图像数据对应的手的图像移动(步骤SllO:否)。当手的图像移动时(步骤SllO:是),确定器3根据与识别出的手的图像移动的方向相关联的操作命令执行过程(步骤S111)。
[0064]根据该实施例,当用户在远离输入设备100的位置时,输入设备100在显示器130上显示大的操作屏幕131b,因此用户能够从远离的位置确切地检查用户自己的运动。因此,用户能够在检查用户自己的运动时容易地操作应用软件等。
[0065]此外,当用户在靠近输入设备100的位置处时,输入设备100在显示器130上显示小的操作屏幕131a,因此用户能够在向应用软件等给出操作时有效地利用屏幕,而不会被操作屏幕131干扰。
[0066]确定器3可以基于由相机120摄取的用户的手势的差异确定多个操作指令。此时,由于显示控制器2检测到的距离变得更短,确定器3可以确定更大数量的操作指令。例如,当由显示控制器2检测到的距离小于预先确定的阈值时,如图8(A)所示,确定器3从图像的中心以径向方式将操作屏幕131a分成八片,并且在八个方向上识别手的运动,该八个方向即垂直和水平方向以及倾斜方向。相反,当由显示控制器2检测到的距离大于预先确定的阈值时,如图8(B)所示,确定器3在四个方向上识别手的运动,该四个方向即垂直和水平方向。相应地,当手位于相机120附近时,相机120有可能捕获精细的运动,与更大数量的运动相关联的操作命令是可确定的。这使得能够输入更大数量的操作。而且,当手远离相机120时,相机120难以捕获精细运动,与更少数量的运动相关联的操作命令可以被确定。这限制了要被识别的手的目标运动,因此可以减少误操作输入。
[0067]此外,根据该实施例,显示控制器2在操作屏幕131中显示由相机120摄取的用户的图像。这使得输入设备100有可能将用户自己的运动反馈给该用户,并且用户能够在检查用户自己的运动时输入操作。在操作屏幕131中显示的图像并不局限于由相机120摄取的图像。显示控制器2可以在操作屏幕131中显示图形(figure),并且可以与由相机120摄取到的手的运动同步地改变图形的形状。例如,如图9所示,显示控制器2可以在操作屏幕131a中显示与手的图像的移动方向对应的八种箭头。在这种情况下,例如,当用户的手移动为向左上倾斜时,向左上倾斜箭头的颜色或色调可以改变。此外,例如,如图10所示,显示控制器2可以在操作屏幕131a中显示黑点来代替用户的手。在这种情况下,例如,当用户的手移动为向右下倾斜时,该黑点可以被移动为向右下倾斜。此外,根据手的运动,该黑点可以被变为三角形或矩形以便将用户自己的运动反馈给该用户。这允许用户根据简化的图形的运动来捕获用户自己的运动,这增加了可视性。
[0068]此外,根据该实施例,确定器3基于相机120所摄取的用户的手的运动来确定来自用户的操作指令。本发明并不局限于这种情况,并且确定器3可以基于用户的手的形状来确定来自用户的操作指令。
[0069]例如,存储器142存储张开的手的形状的模式数据,握紧的手的形状的模式数据以及只有食指和中指竖起的手的形状的模式数据,并且确定器3基于这些模式数据在图像数据中识别手的形状。接下来,基于所识别的手的形状,确定器3在手为张开的形状时确定“播放”命令,在手为握紧形状时确定“停止”命令,并且在手为只有食指和中指竖起的形状时确定“跳过”命令,作为操作指令。这允许基于手的形状进行操作的输入,因此操作输入的变化增加。
[0070]作为手势,确定器3可以确定用户除了手之外的其它部分的运动是否和与操作指令相关联的手势匹配。例如,确定器3可以确定用户在一定时间内眨眼睛的数量是否和与操作指令相关联的手势匹配,并且可以确定身体的运动是否和与操作指令相关联的手势匹配。示例性的身体的运动是站、坐以及举手。[0071]此外,显示控制器2基于手的图像的面积相对于与获取器I所获取的图像数据对应的整个图像的面积的比率R来检测显示器130与用户之间的距离,但是显示控制器2可以通过其它技术来检测该距离。例如,获取器I在图像数据中识别用户的脸,并通过识别出的脸获取眼睛之间的距离(下文中称为“眼间距”)。此时,显示控制器2可以基于获取器I所获取的眼间距来检测显示器130与用户之间的距离。此外,当显示器130附加有诸如红外传感器或超声传感器的用来测量距离的传感器并且获取器I通过用来测量距离的传感器获取测量值时,显示控制器2可以基于测距传感器的测量值来检测显示器130与用户之间的距离。此外,输入设备100可以包括两个相机,并且显示控制器2可以例如基于获取器I所获取的两个相机的图像的差异通过三角测量(trigonometric)技术来检测显示器130与用户之间的距离。
[0072]保留在操作屏幕信息142a中的操作屏幕131的大小并不局限于两种:小的操作屏幕131a ;和大的操作屏幕131b,并且可以例如存储等于或多于三种具有不同大小的操作屏幕131。此外,显示控制器2可以根据需要检测显示器130与用户之间的距离,并根据检测到的距离而放大或缩小操作屏幕131,例如通过将检测到的距离转换为操作屏幕131的垂直长度或其水平长度。
[0073]该实施例的输入设备100可以通过专门的系统实现或者可以通过通常的计算机系统来实现。例如,存储于计算机可读记录介质中的用于执行上述操作的程序被分发并安装到计算机上,由此配置成执行上述过程的输入设备100。而且,这样的程序可以被存储在诸如因特网这样的网络上的服务设备的硬盘设备中,并例如被下载到计算机中。上面描述的功能可以通过OS (操作系统)与应用软件的协同工作而实现。在这种情况下,只有除了OS之外的部分可以被存储在介质中用于分发,并且例如可以被下载到计算机上。
[0074]适于记录上述程序的示例性记录介质为USB存储器、软盘、⑶、DVD、蓝光光盘(注册商标)、MO、SD卡、记忆棒(注册商标)和其他计算机可读记录介质,诸如磁盘、光盘、磁光盘、半导体存储器、或者磁带。此外,在系统或设备中通常固定的记录介质同样可适用,诸如硬盘或SSD (固态驱动器)。
[0075]在不背离本发明最宽的范围以及精神实质的前提下,本发明允许各种实施例和修改。上面描述的实施例是用来解释本发明,而并非对其范围和精神实质的限制。也就是说,本发明的范围和精神实质是由所附的权利要求限定的,而并非上述实施例来限定。本发明的权利要求及其等同范围内的各种修改同样落入本发明的范围和精神实质之内。
[0076]上述实施例的一部分或全部可以被描述为如下的附加注释(note),但是本发明并不局限于下面的附加注释。
[0077](附加注释I)
[0078]获取器,所述获取器获取指示显示器或相机与所述相机所摄取的对象之间的距离的信息;
[0079]显示控制器,所述显示控制器在所述显示器的显示屏幕中显示操作屏幕,所述操作屏幕具有根据所述获取器所获取的所述信息而设定的大小;以及
[0080]确定器,所述确定器基于所述相机所摄取的所述对象的运动及其形状中的至少一项,来确定来自所述对象的操作指令。
[0081](附加注释2)[0082]记载在附加注释I中的输入设备,其中所述显示控制器根据所述相机所摄取的所述对象的运动及其形状中的至少一项,来改变所述操作屏幕。
[0083](附加注释3)
[0084]记载在附加注释I或2中的输入设备,其中所述显示控制器随着由所述获取器获取的所述信息所指示的所述距离的增加而增大所述操作屏幕。
[0085](附加注释4)
[0086]记载在附加注释I至3中任意一项中的输入设备,其中所述确定器:
[0087]基于所述相机所摄取的所述对象的运动及其形状中的至少一项的差异,来确定多个操作指令;以及
[0088]随着由所述获取器获取的所述信息所指示的所述距离变短,而确定更大数量的操作指令。
[0089](附加注释5)
[0090]记载在附加注释I至4中任意一项中的输入设备,其中所述显示控制器:
[0091]在所述操作屏幕中显示图形;以及
[0092]与所述相机所摄取的所述对象的运动同步地改变所述图形。
[0093](附加注释6)
[0094]记载在附加注释I至5中任意一项中的输入设备,其中:
[0095]所述显示控制器检测所述显示器或所述相机与所述相机所摄取的所述对象的手之间的距离;并且
[0096]所述确定器基于所述相机所摄取的所述对象的所述手的运动,来确定来自所述对象的所述操作指令。
[0097](附加注释7)
[0098]记载在附加注释6中的输入设备,其中所述确定器基于所述相机所摄取的所述对象的所述手的形状,来确定来自所述对象的所述操作指令。
[0099](附加注释8)
[0100]—种输入方法,包括:
[0101]获取步骤,用于获取指示显示器或相机与所述相机所摄取的对象之间的距离的信息;
[0102]显示控制步骤,用于在所述显示器的显示屏幕中显示操作屏幕,所述操作屏幕具有根据通过所述获取步骤获取的所述信息而设定的大小;以及
[0103]确定步骤,用于基于所述相机所摄取的所述对象的运动及其形状中的至少一项,来确定来自所述对象的操作指令。
[0104](附加注释9)
[0105]一种在其中存储程序的记录介质,其中所述程序允许计算机充当:
[0106]获取器,所述获取器获取指示显示器或相机与所述相机所摄取的对象之间的距离的信息;
[0107]显示控制器,所述显示控制器在所述显示器的显示屏幕中显示操作屏幕,所述操作屏幕具有根据所述获取器所获取的所述信息而设定的大小;以及
[0108]确定器,所述确定器基于所述相机所摄取的所述对象的运动及其形状中的至少一项,来确定来自所述对象的操作指令。
[0109]本发明基于2011年4月27日提交的日本专利申请N0.2011-100216。日本专利申请2011-100216的整个说明书、权利要求以及附图在此通过引用合并于本说明书中。
[0110]工业实用性
[0111]本发明可适当地应用于基于用户的手势来输入数据的输入设备、输入方法以及记录介质。
[0112]附图标记列表
[0113]I 获取器
[0114]2 显示控制器
[0115]3 确定器
[0116]4 执行器
[0117]100输入设备
[0118]110操作设备
[0119]120 相机
[0120]130 显示器
[0121]140 主体
[0122]141图像存储器
[0123]142存储器
[0124]143控制器
[0125]142a操作屏幕信息
[0126]142b 命令表
[0127]150声音输出器
【权利要求】
1.一种输入设备,包括: 获取器,所述获取器获取指示显示器或相机与所述相机所摄取的对象之间的距离的信息; 显示控制器,所述显示控制器在所述显示器的显示屏幕中显示操作屏幕,所述操作屏幕具有根据所述获取器所获取的所述信息而设定的大小;以及 确定器,所述确定器基于所述相机所摄取的所述对象的运动及其形状中的至少一项,来确定来自所述对象的操作指令。
2.根据权利要求1所述的输入设备,其中所述显示控制器根据所述相机所摄取的所述对象的运动及其形状中的至少一项,来改变所述操作屏幕。
3.根据权利要求1或2所述的输入设备,其中所述显示控制器随着由所述获取器获取的所述信息所指示的所述距离的增加而增大所述操作屏幕。
4.根据权利要求1至3中任意一项所述的输入设备,其中所述确定器: 基于所述相机所摄取的所述对象的运动及其形状中的至少一项的差异,来确定多个操作指令;以及 随着由所述获取器获取的所述信息所指示的所述距离变短,而确定更大数量的操作指令。
5.根据权利要求1至4中任意一项所述的输入设备,其中所述显示控制器: 在所述操作屏幕中显示图形;以及 与所述相机所摄取的所述对象的运动同步地改变所述图形。
6.根据权利要求1至5中任意一项所述的输入设备,其中: 所述显示控制器检测所述显示器或所述相机与所述相机所摄取的所述对象的手之间的距离;并且 所述确定器基于所述相机所摄取的所述对象的所述手的运动,来确定来自所述对象的所述操作指令。
7.根据权利要求6所述的输入设备,其中所述确定器基于所述相机所摄取的所述对象的所述手的形状,来确定来自所述对象的所述操作指令。
8.一种输入方法,包括: 获取步骤,用于获取指示显示器或相机与所述相机所摄取的对象之间的距离的信息;显示控制步骤,用于在所述显示器的显示屏幕中显示操作屏幕,所述操作屏幕具有根据通过所述获取步骤获取的所述信息而设定的大小;以及 确定步骤,用于基于所述相机所摄取的所述对象的运动及其形状中的至少一项,来确定来自所述对象的操作指令。
9.一种在其中存储程序的记录介质,所述程序允许计算机充当: 获取器,所述获取器获取指示显示器或相机与所述相机所摄取的对象之间的距离的信息; 显示控制器,所述显示控制器在所述显示器的显示屏幕中显示操作屏幕,所述操作屏幕具有根据所述获取器所获取的所述信息而设定的大小;以及 确定器,所述确定器基于所述相机所摄取的所述对象的运动及其形状中的至少一项,来确定来自所述对象的操作指令。
【文档编号】G06F3/0487GK103608761SQ201280020412
【公开日】2014年2月26日 申请日期:2012年4月27日 优先权日:2011年4月27日
【发明者】玉井润一 申请人:Nec软件系统科技有限公司

最新回复(0)