专利名称:信息显示装置以及信息显示方法
技术领域:
本发明涉及显示内容的信息显示装置,尤其涉及根据用户的状态进行显示控制的 信息显示装置。
背景技术:
近些年,在街头等设置大画面的显示器,在该显示器显示广告的电子广告系统已 被实用化。通过在繁华街、站前的建筑物的墙壁、或公共交通工具的车站内等设置显示器, 从而能够向不确定多数用户提供信息。然而,在以往的电子广告系统中存在的问题是,步行人在路过时仅看显示在显示 器的广告而已,而不能给看广告的人留下深刻印象。并且,还存在的问题是,在显示器反复 显示同一影像(广告),因此,为了等人等而滞留的人,即使看显示在显示器的广告,也马上 就会看腻。进而,虽然有为了引人注目而具备商品信息等的检索功能的交互式电子广告系 统,但是,对于路过的人而言,利用检索功能是麻烦的。如此,以往的电子广告系统,与通常 的广告板或海报等相比,虽然更能够引人注目,但是,存在使广告效果更提高的余地。而且,提出了按照输入装置接受的来自用户的请求阶段性地显示信息的信息显示 装置(例如,参照专利文献1)。并且,还提出了按照用户和信息显示装置之间的距离出示除 了不能识别的信息以外的细节的信息显示装置(例如,参照专利文献2)。进而,也提出了按照用户的内容的视听状态,正在再生时以更适当的定时来显示 内容信息的信息显示装置(例如,参照专利文献3)。专利文献3记载的信息显示装置,按照 用户看内容的时间生成关心度,在生成的关心度下降时,推荐其它的内容的再生等。如此,根据这些专利文献1至3所述的信息显示装置,用户能够高效率地获得信 肩、ο专利文献1 (日本)特开平11-296542号公报专利文献2 (日本)特开2003-271283号公报专利文献3 (日本)特开2005-250322号公报然而,所述以往的信息显示装置,虽然能够提高与信息获得有关的用户的效率,但 是不能期待得到因显示的内容而吸引用户的效果。也就是说,以往的信息显示装置,不能高 效率地提高用户的关心。
发明内容
于是,为了解决所述以往的问题,本发明的目的在于提供一种信息显示装置等,能 够高效率地提高用户对显示的内容的关心。为了实现所述目的,本发明的实施方案之一中的信息显示装置,显示部,在画面显 示第一内容;用户状态检测部,检测用户状态,该用户状态是位于所述画面的前面的用户 的物理状态;关心度推定部,根据由所述用户状态检测部检测出的用户状态,推定关心度, 该关心度表示用户对由所述显示部显示在画面的第一内容的关心程度;以及显示控制部,在由所述关心度推定部推定的关心度的变化率的大小不足于第一阈值的情况下,以至少一 部分的鲜明度或公开度低于预先规定的鲜明度或公开度的状态,使所述显示部显示第二内容。据此,按照用户状态,以至少一部分的鲜明度或公开度低于预先规定的鲜明度或 公开度的状态,能够显示内容,并且,根据焦急效果,能够高效率地提高用户的关心。在此,焦急效果是指,通过将内容的至少一部分所示的信息不给用户明显,从而能 够吸引用户的注意的效果。也就是说,焦急效果是指,通过令用户焦急,从而提高关心的效^ ο并且,优选的是,所述显示控制部,进一步,在由所述关心度推定部推定的关心度 的变化率的大小超过第二阈值的情况下,提高显示在所述画面的第二内容的鲜明度或公开度。据此,按照用户的关心度的变化率的大小,能够动态地提高鲜明度或公开度已降 低的内容的鲜明度或公开度,因此,以用户的关心将要提高的状态,能够给用户公开内容所 示的信息。其结果为,能够更高效率地提高用户的关心,并且,能够使内容所示的信息给用 户留下深刻印象。并且,优选的是,所述显示控制部,进一步,在由所述关心度推定部推定的关心度 超过第三阈值的情况下,提高显示在所述画面的第二内容的鲜明度或公开度。据此,按照用户的关心度的大小,能够动态地提高鲜明度或公开度已降低的内容 的鲜明度或公开度,因此,在用户的关心高时,能够给用户公开内容所示的信息。其结果为, 能够更高效率地提高用户的关心,并且,能够使内容所示的信息给用户留下深刻印象。并且,优选的是,所述显示控制部,在由所述关心度推定部推定的关心度的变化率 的大小不足于所述第一阈值的情况下,并且,在由所述关心度推定部推定的关心度的变化 率的大小不足于所述第一阈值的状态持续了规定时间的情况下,使所述显示部显示所述第 二内容。据此,反应于用户的关心度的变化率的大小暂时变小,能够减少必要以上的内容 的鲜明度或公开度的变更。并且,优选的是,所述用户状态检测部检测所述用户的移动方向,以作为所述用户 状态,所述关心度推定部,由所述用户状态检测部检测出的用户的移动方向越接近从该用 户向代表所述画面的位置的方向、或从该用户向正在显示所述第一内容的位置的方向,就 推定关心度越高。据此,按照用户的移动方向,能够高精度地推定关心度。并且,优选的是,所述用户状态检测部检测所述用户的移动速度,以作为所述用户 状态,所述关心度推定部,由所述用户状态检测部检测出的用户的移动速度越小,就推定关
心度越高。据此,按照用户的移动速度,能够高精度地推定关心度。并且,优选的是,所述用户状态检测部检测所述用户的位置,以作为所述用户状 态,所述关心度推定部,由所述用户状态检测部检测出的用户的位置与正在显示所述第一 内容的位置之间的距离越小,就推定关心度越高。据此,按照用户的位置,能够高精度地推定关心度。
5
并且,优选的是,所述用户状态检测部检测用户的视线方向,以作为所述用户状 态,所述关心度推定部,由所述用户状态检测部检测出的用户的视线方向越接近从该用户 向代表所述画面的位置的方向、或从该用户向正在显示所述第一内容的位置的方向,就推 定关心度越高。据此,按照用户的视线方向,能够高精度地推定关心度。并且,优选的是,还包括目标用户选定部,从位于所述画面的前面的用户中选定目 标用户,所述显示控制部,在由所述目标用户选定部选定的目标用户的关心度的变化率的 大小不足于所述第一阈值的情况下,使所述显示部显示所述第二内容。据此,按照从位于画面的前面的用户中选定的目标用户状态,能够变更内容的鲜 明度或公开度,且能够高效率地提高选定的用户的关心。并且,优选的是,所述目标用户选定部,在由所述关心度推定部推定的关心度为第 四阈值以上的情况下,将与该关心度相对应的用户选定为目标用户。据此,能够将根据焦急效果能够提高关心的可能性高的用户选定为目标用户,能 够更高效率地提高用户的关心。并且,优选的是,所述目标用户选定部,在正在显示所述第一内容的位置与用户的 位置之间的距离不足于第五阈值的情况下,将该用户选定为目标用户。据此,能够将根据焦急效果能够提高关心的可能性高的用户选定为目标用户,能 够更高效率地提高用户的关心。并且,优选的是,还包括内容数据库,至少记忆适用区域,该适用区域表示所述第 二内容的一部分且表示作为将要给用户看的信息的本质信息的部分的位置,所述显示控制 部,以所述内容数据库所记忆的所述第二内容的适用区域的鲜明度或公开度低于预先规定 的鲜明度或公开度的状态,使所述显示部显示所述第二内容。据此,能够降低显示本质信息的区域的鲜明度或公开度,能够提高吸引用户的注 目的效果。其结果为,能够更高效率地提高用户的关心,并且,能够提高将要给用户看的信 息的印象。并且,优选的是,所述预先规定的鲜明度或公开度是所述第一内容的鲜明度或公 开度,所述显示控制部,使所述显示部将所述第一内容显示为所述第二内容。据此,按照用户状态,能够降低已显示的内容的鲜明度或公开度。并且,本发明的实施方案之一中的信息显示方法,第一显示步骤,在画面显示第一 内容;用户状态检测步骤,检测用户状态,该用户状态是位于所述画面的前面的用户的物理 状态;关心度推定步骤,根据在所述用户状态检测步骤检测出的用户状态,推定关心度,该 关心度表示用户对在所述显示步骤显示在画面的第一内容的关心程度;以及第二显示步 骤,在所述关心度推定步骤推定的关心度的变化率的大小不足于第一阈值的情况下,以至 少一部分的鲜明度或公开度低于预先规定的鲜明度或公开度的状态,显示第二内容。据此,能够得到与所述信息显示装置相同的效果。而且,本发明也可以实现为用于使计算机执行所述的信息显示方法的程序。而且, 当然,也可以将这些程序经由⑶-ROM(Compact Disc Read Only Memory)等的计算机可读 的记录介质、或互联网等的传输介质来分发。根据本发明的实施方案之一中的信息显示装置,按照用户对显示的内容的关心度的变化率的大小,以至少一部分的鲜明度或公开度低于预先规定的鲜明度或公开度的状 态,能够显示内容。其结果为,根据焦急效果,能够吸引用户的注目,因此,能够高效率地提 高用户的关心。
图1是本发明的实施例1中的信息显示装置的外观图。图2是示出本发明的实施例1中的信息显示装置的功能结构的方框图。图3是用于说明鲜明度的图。图4是用于说明公开度的图。图5是示出本发明的实施例1中的信息显示装置执行的处理的流程的流程图。图6是示出本发明的实施例1的变形例1中的信息显示装置执行的处理的流程的 流程图。图7是示出本发明的实施例1的变形例2中的信息显示装置执行的处理的流程的 流程图。图8是示出本发明的实施例2中的信息显示装置的功能结构的方框图。图9A是用于说明本发明的实施例2中的用户位置计算方法的图。图9B是用于说明本发明的实施例2中的用户位置计算方法的图。图10是示出本发明的实施例2中的内容数据库的一个例子的图。图11是用于说明适用区域的图。图12是示出本发明的实施例2中的信息显示装置执行的处理的流程的流程图。图13是用于说明本发明的实施例2中的关心度的计算方法的图。图14A是用于说明本发明的实施例2中的目标用户的选定方法的图。图14B是用于说明本发明的实施例2中的目标用户的选定方法的图。图15是用于说明本发明的实施例2中的关心度的变化率的计算处理的图。图16是示出本发明的实施例2中的信息显示装置的工作的具体例的图。图17A是示出本发明的实施例2中的内容的显示方法的另一个例子的图。图17B是示出本发明的实施例2中的内容的显示方法的另一个例子的图。图18是示出本发明的实施例2的变形例中的与视线方向的检测有关的处理的流 程的流程图。图19是用于说明本发明的实施例2的变形例中的检测用户的脸的朝向的处理的 图。图20是用于说明视线方向基准面的图。图2IA是用于说明黑眼珠中心的检测的图。图2IB是用于说明黑眼珠中心的检测的图。
具体实施例方式以下,参照
本发明的实施例。(实施例1)本发明的实施例1中的信息显示装置10是在画面显示内容的装置,其中,按照用户对显示在画面的内容(以下,简称为“显示内容”)的关心度,使显示内容的鲜明度或公开 度发生变化。图1是本发明的实施例1中的信息显示装置的外观图。并且,图2是示出本发明 的实施例1中的信息显示装置的功能结构的方框图。信息显示装置10包括用户状态检测部11、关心度推定部12、显示控制部13、以及 显示部14。用户状态检测部11,检测用户状态,该用户状态是位于画面的前面的用户的物理 状态的用户状态。具体而言,用户状态检测部11,例如,检测脑波等的生物信号、用户的位 置、速度、脸或身体的朝向、视线方向、表情、发言内容、发言量、或声音的大小等,以作为用 户状态。关心度推定部12,根据由用户状态检测部11检测出的用户状态,推定关心度,该 关心度表示用户对由显示部14显示在画面的内容的关心程度。具体而言,例如,关心度推定部12,检测出的用户的移动方向越接近从用户向代表 画面的位置的方向、或从用户向正在显示内容的位置的方向,就推定关心度越高。也就是 说,关心度推定部12,若用户向画面或显示内容移动,则推定关心度高。在此,代表画面的位置是指,画面上的位置、且例如画面的中心位置(以下,简称 为“画面的中心”)或重心位置等。并且,正在显示内容的位置是指,正在显示内容的画面上 的位置、且代表该内容的位置。具体而言,例如,正在显示内容的位置是,正在显示内容的区 域的中心位置(以下,简称为“内容的中心”)或重心位置等。并且,例如,正在显示内容的 位置也可以是,正在显示内容的一部分表示的图像(例如,广告对象商品的图像)的区域的 中心位置或重心位置。并且,例如,关心度推定部12,检测出的用户的移动速度越小,就推定关心度越高。 也就是说,若用户在画面的前面缓慢移动,则推定关心度高。并且,例如,关心度推定部12,检测出的用户的位置与正在显示内容的位置之间的 距离越小,就推定关心度越高。并且,例如,关心度推定部12,检测出的用户的视线方向越接近从用户向代表画面 的位置的方向、或从用户向正在显示内容的位置的方向,就推定关心度越高。也就是说,关 心度推定部12,若用户看画面或显示内容的方向,则推定关心度高。并且,关心度推定部12也可以,根据检测出的生物信号、表情、发言内容、发言量、 或声音的大小信息等,推定关心度。显示控制部13,在由关心度推定部12推定的关心度的变化率的大小不足于第一 阈值的情况下,以至少一部分的鲜明度或公开度低于预先规定的鲜明度或公开度的状态, 使显示部14显示内容。具体而言,显示控制部13,根据公式(1),计算表示关心度的时间上的变化程度的 变化率的大小a(t)。k(t)是在时刻t的关心度。进而,显示控制部13,判断如此计算出的 变化率的大小a(t)是否不足于第一阈值。在此,在变化率的大小a(t)不足于第一阈值的情况下,显示控制部13,以一部分 或全部的鲜明度或公开度低于正在显示在画面的内容的鲜明度或公开度的状态,使显示部 14显示该内容。也就是说,显示控制部13,例如,按照规定的时间,降低正在显示在画面的内容的至少一部分的鲜明度或公开度。(公式1)
,、k{t) - k(t - At)...a{t) = /---"'(I)
At在此,鲜明度表示内容的鲜明程度。也就是说,鲜明度表示内容所示的信息的鲜明 程度。例如,在模糊效果或马赛克效果等的影像效果适用于内容的情况下,内容的鲜明度降 低。并且,公开度表示内容的公开程度。也就是说,公开度表示公开内容所示的信息的 程度。例如,若与内容中包含的图像不同的图像被重叠并配置在内容中包含的图像的一部 分或全部,则内容的公开度降低。第一阈值是表示以下的情况的值,S卩,例如因用户对显示内容的兴趣降低等的理 由,而用户对内容的关心度的变化变小了。显示部14,例如具有等离子显示面板(PDP =Plasma Display Panel)或液晶面板 (Liquid Crystal Panel)等的画面,在该画面显示内容。图3是用于说明鲜明度的图。并且,图4是用于说明公开度的图。在图3以及图 4中,将宣传销售单位“XXX Corporation”销售的品牌名“AB⑶”的商品“电视机”的图像作 为显示在画面的内容的一个例子,来进行说明。图3(a)示出鲜明度降低之前的内容。并且,图3(b)示出对作为内容的一部分的 表示商品的外观的区域执行马赛克处理后的内容。也就是说,图3(b)示出,以低于图3(a) 的内容的鲜明度的状态来显示的内容。如此,显示控制部13,在画面显示对内容的一部分适用了模糊效果或马赛克效果 等的影像效果的内容,从而降低内容的一部分的鲜明度。图4(a)示出公开度降低之前的内容。并且,图4(b)示出在作为内容的一部分的 表示商品的外观的区域重叠与商品不同的图像的内容。也就是说,图4(b)示出,以低于图 4(a)的内容的公开度的状态显示的内容。如此,显示控制部13,在内容的一部分的区域重叠并显示与原来的图像不同的图 像,从而降低内容的一部分的公开度。而且,显示控制部13也可以,通过将原来的图像自然地变化为与该图像不同的图 像的变形(morphing),降低内容的一部分的公开度。并且,在图3以及图4中,说明了针对内容的一部分降低鲜明度或公开度,但也可 以,显示控制部13,针对内容的全部降低鲜明度或公开度。而且,优选的是,显示控制部13,降低表示作为将要给用户看的信息的本质信息的 部分的鲜明度或公开度。据此,信息显示装置10,能够降低显示本质信息的区域的鲜明度或 公开度,根据焦急效果,更能够吸引用户的注目。其结果为,信息显示装置10,能够高效率地 提高用户的关心,并且,能够使将要给用户看的信息给用户留下深刻印象。其次,说明如上构成的信息显示装置10的各种工作。图5是示出本发明的实施例1中的信息显示装置执行的处理的流程的流程图。首先,显示部14,在画面显示内容(S100)。其次,用户状态检测部11,检测用户状 态(SlOl)。接着,关心度推定部12,根据检测出的用户状态推定关心度(S102)。进而,显示控制部13,计算关心度的变化率的大小(S104)。而且,显示控制部13,判断关心度的变化率 的大小是否不足于第一阈值(S106)。在此,在关心度的变化率的大小不足于第一阈值的情况下(S106的“是”),显示控 制部13,降低显示在画面的内容的至少一部分的的鲜明度或公开度(S108),结束处理。也 就是说,显示控制部13,按照用户的关心度,以至少一部分的鲜明度或公开度低于显示在画 面的内容的鲜明度或公开度的状态,在画面显示内容。另一方面,在关心度的变化率的大小 在第一阈值以上的情况下(S106的“否”),结束处理。通过执行所述步骤SlOO至步骤S108的处理,信息显示装置10,按照用户的关心 度,以至少一部分的鲜明度或公开度低于预先规定的鲜明度或公开度的状态,在画面能够 显示内容。而且,信息显示装置10也可以,反复执行步骤SlOO至步骤S108的处理。如上所述,本实施例中的信息显示装置10,按照用户对显示的内容的关心度的变 化率的大小,以至少一部分的鲜明度或公开度低于预先规定的鲜明度或公开度的状态,能 够显示内容。其结果为,信息显示装置10,根据焦急效果,能够吸引用户的注目,因此,能够 高效率地提高用户的关心。而且,在本实施例中,显示控制部13,在关心度的变化率的大小单纯地不足于第一 阈值的情况下,以鲜明度或公开度低的状态,使显示部14显示内容,但也可以是,与此不同 的情况。例如,显示控制部13也可以,在关心度的变化率的大小不足于第一阈值的状态持 续了规定时间的情况下,以至少一部分的鲜明度或公开度低于预先规定的鲜明度或公开度 的状态,使显示部14显示内容。据此,信息显示装置10,反应于用户的关心度的变化率的大 小暂时变小,能够减少必要以上的内容的鲜明度或公开度的变更。(实施例1的变形例1)实施例1的变形例1中的信息显示装置10,与实施例1中的信息显示装置10不同 之处是,在用户的关心度的变化率的大小为小时,在画面显示与正在显示在画面的内容不 同的内容。以下,以与实施例1不同之处为中心,参照
本变形例。与图2示出的实施例1中的信息显示装置10相同,本变形例中的信息显示装置10 也包括用户状态检测部11、关心度推定部12、显示控制部13、以及显示部14。而且,对于用 户状态检测部11、关心度推定部12以及显示部14,与实施例1相同,因此省略说明。本变形例中的显示控制部13,在由关心度推定部12推定的关心度的变化率的大 小不足于第一阈值的情况下,以至少一部分的鲜明度或公开度低于预先规定的鲜明度或公 开度的状态,使显示部14显示与正在显示在画面的内容不同的内容。在此,预先规定的鲜明度或公开度是,例如内容的原来的鲜明度或公开度。也就 是说,典型而言,预先规定的鲜明度或公开度是,未适用用于降低鲜明度或公开度的影像效 果、或未执行用于降低鲜明度或公开度的图像处理的内容的鲜明度或公开度。其次,说明如上构成的本变形例中的信息显示装置10的各种工作。图6是示出本发明的实施例1的变形例1中的信息显示装置执行的处理的流程的 流程图。而且,在图6中,对于与图5相同的处理,附上相同的符号,省略说明。在关心度的变化率的大小不足于第一阈值的情况下(S106的“是”),显示控制部 13,以至少一部分的鲜明度或公开度低于预先规定的鲜明度或公开度的状态,使显示部14 显示与正在显示在画面的内容不同的内容(S112),结束处理。也就是说,显示控制部13,使
10显示部14显示预先降低了至少一部分的鲜明度或公开度且与正在显示在画面的内容不同 的内容。如上所述,本变形例中的信息显示装置10,在重新显示内容时,以降低了鲜明度或 公开度的状态能够进行显示,因此,根据焦急效果,能够高效率地提高用户的关心。(实施例1的变形例2)在规定的期间一律地降低鲜明度或公开度的情况下,存在的问题是,令用户焦急 的期间过长,反而降低用户的关心。于是,实施例1的变形例2中的信息显示装置10,其中, 按照用户的关心度,动态地决定提高内容的鲜明度或公开度的定时。下,以与实施例1不同 之处为中心,参照
本变形例。与图2示出的实施例1中的信息显示装置10相同,本变形例中的信息显示装置10 也包括用户状态检测部11、关心度推定部12、显示控制部13、以及显示部14。而且,对于用 户状态检测部11、关心度推定部12以及显示部14,与实施例1相同,因此省略说明。本变形例中的显示控制部13,根据用户的关心度,提高显示在画面的内容的鲜明 度或公开度。具体而言,显示控制部13,例如,在由关心度推定部12推定的关心度的变化率的 大小超过第二阈值时,提高显示在画面的内容的鲜明度或公开度。第二阈值是表示以下的 情况的值,即,因降低内容的鲜明度或公开度,而用户的关心度的变化率变大了。而且,优选 的是,第二阈值在第一阈值以上。并且,例如,显示控制部13也可以,在由关心度推定部12推定的关心度超过第三 阈值时,提高显示在画面的内容的鲜明度或公开度。第三阈值是表示以下的情况的值,即, 因降低内容的鲜明度或公开度,而用户的关心度提高了。其次,说明如上构成的本变形例中的信息显示装置10的各种工作。图7是示出本发明的实施例1的变形例2中的信息显示装置执行的处理的流程的 流程图。而且,在图7中,对于与图5相同的处理,附上相同的符号,省略说明。在计算关心度的变化率的大小后,显示控制部13,判断是否已经降低正在显示在 画面的内容的鲜明度或公开度(S122)。也就是说,显示控制部13,判断正在显示在画面的 内容是否为以鲜明度或公开度低于预先规定的鲜明度或公开度的状态来正在显示在画面 的内容。在此,在还未降低鲜明度或公开度的情况下(S122的“否”),信息显示装置10,执 行步骤S106至步骤S108的处理,返回到步骤SlOl的处理。另一方面,在降低了鲜明度或公开度的情况下(S122的“是”),显示控制部13,根 据用户的关心度,判断是否提高内容的鲜明度或公开度(S124)。在此,在判断为提高内容的鲜明度或公开度的情况下(S124的“是”),显示控制部 13,提高显示在画面的内容的鲜明度或公开度(S126),返回到步骤SlOl的处理。另一方面, 在判断为不提高内容的鲜明度或公开度的情况下(S124的“否”),返回到步骤SlOl的处理。如上所述,本变形例中的信息显示装置10,按照用户的关心度的变化率的大小或 关心度的大小等,能够动态地提高显示在画面的内容的鲜明度或公开度。因此,信息显示 装置10,能够按照用户状态,向用户动态地公开内容表示的信息。其结果为,信息显示装置 10,能够更高效率地提高用户的关心,并且,能够使内容表示的信息给用户留下深刻印象。
11
(实施例2)其次,对于本发明的实施例2,利用附图进行详细说明。本发明的实施例2中的信息显示装置20,与实施例1中的信息显示装置10主要不 同之处是,从位于画面的前面的用户中选定目标用户。图8是示出本发明的实施例2中的信息显示装置的功能结构的方框图。如图8示出,信息显示装置20包括用户识别部21,从用户检测摄像机60获得图 像信息;用户状态检测部22 ;关心度推定部23 ;目标用户选定部24 ;内容数据库25 ;显示控 制部26 ;以及显示部27。在显示部27的画面的周围设置至少两台用户检测摄像机60。也就是说,用户检测 摄像机60包括第一用户检测摄像机60a和第二用户检测摄像机60b。而且,用户检测摄像 机 60 包括,CCD (Charge Coupled Device 电荷耦合器件)或 CMOS (Complementary Metal Oxide Semiconductor 互补金属氧化半导体)等的图像传感器和光学系统。并且,第一用户检测摄像机60a和第二用户检测摄像机60b同时拍摄存在于画面 的前面的用户。而且,第一用户检测摄像机60a和第二用户检测摄像机60b将表示拍摄的 图像的图像信息输出到用户识别部21以及用户状态检测部22。用户识别部21,在从用户检测摄像机60得到的图像信息表示的图像中提取脸区 域。而且,用户识别部21,按照提取的每个脸区域,输出用户识别信息,该用户识别信息是表 示该脸区域的特征的信息,也是用于确定用户的信息。用户状态检测部22,检测用户状态,该用户状态是位于画面的前面的用户的物理 状态。具体而言,用户状态检测部22,利用由第一用户检测摄像机60a以及第二用户检 测摄像机60b拍摄的图像之间的拍摄了用户的区域(以下,简称为“用户区域”)的对应关 系,按每个用户计算用户和画面的相对位置,以作为用户状态。也就是说,用户状态检测部 22,利用由立体视的视差,按每个用户检测用户的位置,以作为用户状态。进而,用户状态检 测部22,根据检测出的用户的位置的时间变化,检测用户的移动矢量(用户的移动方向以 及用户的移动速度)。图9A以及图9B是用于说明本发明的实施例2中的用户位置计算方法的图。如图9A示出,第一用户检测摄像机60a和第二用户检测摄像机60b被设置,以便 按照间隔B相隔、且平行于信息显示装置20的画面。具体而言,第一用户检测摄像机60a 和第二用户检测摄像机60b被设置,以便各个用户检测摄像机的光轴相互平行、按照间隔B 相隔、垂直于画面,并且,各个用户检测摄像机的光学中心被配置在包含画面的平面上。而且,用户状态检测部22,提取由各个用户检测摄像机60拍摄的图像内的用户区 域。而且,用户状态检测部22,根据图像间的对应的用户区域的位置的偏差,计算用户和信 息显示装置20之间的距离D。具体而言,例如,用户状态检测部22,预先保存以用户不在的 状态而由各个用户检测摄像机60拍摄的图像,求出用户出现在摄像范围(用户检测可能区 域)时所拍摄的图像和保存的图像之间的差分,从而提取用户区域。并且,用户状态检测部 22也可以,提取通过脸图像的检测以及脸图像的核对而得到的用户的脸区域,以作为用户 区域。图9B是示出用于根据两个图像上的对应的用户区域的位置关系求出用户和摄像机设置面(信息显示装置20的画面)之间的距离D的、由立体视的测距原理的图。如图9B 示出,作为位置测量对象的用户的像被投影在第一用户检测摄像机60a以及第二用户检测 摄像机60b的各个图像传感器的拍摄面。在将如此投影的位置测量对象的用户的像的图像 上的偏差作为Z时,用户状态检测部22,如公式(2),利用摄像机的焦点距离f和摄像机的 光轴间的距离B,能够计算用户和信息显示装置20的画面之间的距离D。(公式2)D = f^…(2)并且,用户状态检测部22,根据图像中的用户区域的位置和由公式(2)计算出的 距离D,能够求出平行于信息显示装置20的画面的方向上的用户位置。用户状态检测部22, 如此计算并输出对信息显示装置20的用户的相对位置。进而,用户状态检测部22,根据如此计算出的位置的时间上的变化,计算用户的移 动矢量。具体而言,用户状态检测部22,按每个用户保持计算出的用户的位置,利用保持的 用户的位置,按每个用户计算用户的移动矢量。而且,用户状态检测部22,并不需要根据立体视差计算用户的位置。例如,用户状 态检测部22也可以,根据由光波测距(Time of Flight)的原理得到的距离信息,计算用户 和信息显示装置20之间的相对位置。在此情况下,用户检测摄像机60包括利用光波测距 的原理输出距离信息的距离图像传感器,且设置至少一台用户检测摄像机60。并且,用户状态检测部22也可以,通过设置在信息显示装置20的画面的前面的地 板面的地板压力传感器,获得对信息显示装置20的用户的相对位置。在此情况下,不需要 设置用户检测摄像机60。关心度推定部23,根据用户状态检测部22输出的用户的位置等,按由用户识别信 息确定的每个用户,推定用户对显示内容的关心度。对于关心度的计算方法,在后面进行说 明。目标用户选定部24,根据关心度推定部23输出的各个用户的关心度,选定目标用 户。例如,目标用户选定部24,在对显示内容的关心度在按每个显示内容预先规定的第四阈 值以上的情况下,将与该关心度相对应的用户选定为目标用户。第四阈值是表示用户对显 示内容表示某种程度的关心的值。也就是说,第四阈值是用于选定通过降低内容的鲜明度 或公开度而更能够期待提高关心度的用户的值。而且,目标用户选定部24也可以,用户的位置和显示内容的中心之间的距离不足 于按每个显示内容预先规定的第五阈值的情况下,将该用户选定为目标用户。第五阈值是 表示用户对显示内容表示某种程度的关心的距离。也就是说,第五四阈值是用于选定能够 期待通过降低内容的鲜明度或公开度而更提高关心度的用户的距离。内容数据库25是,按表示用户的关心度的水准的每个关心度级,记忆有内容、和 适用于该内容的影像效果的种类以及适用区域的数据库。图10是示出本发明的实施例2中的内容数据库的一个例子的图。如图10示出, 在内容数据库25,按每个关心度级,将内容和影像效果以及适用区域相关联来存储。而且, 在图10中,将内容数据库25所存储的内容是与商品名或品牌名“ABCD”的商品“电视机”的 广告有关的内容的情况为一个例子,来进行说明。
关心度级“ 1”的内容是,商品“电视机,,的印象人物被描述大的内容。并且,关心 度级“2”的内容是,与比关心度级“ 1”相比,印象人物被描述略小,却在左上方描述有商品 的图像的内容。并且,关心度级“3”的内容是,示出商品的阵容的内容。如此,存储用户的 关心度越高就越出示商品的详细的信息的内容,信息显示装置20,用户的关心度越高,就越 表示更详细的信息,从而能够使广告吸引用户的关心。影像效果是,为了降低内容的鲜明度或公开度而适用于内容的效果。例如,影像效 果是将内容掩盖“hiding”、或将内容模糊“blur”等的效果。“blur (30)”表示,模糊效果的 强度为“30”。也就是说,"blur (75),,表示比"blur (30),,更强的模糊效果。如此,优选的 是,在内容数据库25,除了存储影像效果的种类以外,还存储影像效果的强度。适用区域,可以是内容的整体“all”,也可以是内容的一部分的区域。例如, "rectangle (20,50,500,300) ” 表示,坐标(20,50)是一个顶点、坐标(500,300)是位于该 一个顶点的对角的顶点的长方形区域。具体而言,如图11示出,“rectangle (20,50,500, 300)”表示,在以显示内容的左上为坐标原点的坐标系中,以坐标值χ = 20,y = 50的点为 左上的顶点、以χ = 500,y = 300的点为右下的顶点的长方形区域。在显示内容是商品的广告的情况下,若适用用于降低鲜明度或公开度的影像效果 的适用区域是,表示商品名或商品的印象人物等对使商品吸引买主重要的信息的区域,则 能够期待对用户的一种焦急效果,信息显示装置20,能够吸引用户的注意。也就是说,若适 用区域是表示本质信息的区域,则根据焦急效果能够提高用户的关心。反而,即使适用用于 降低鲜明度或公开度的适用影像效果的适用区域是表示重要的信息的区域以外的区域,信 息显示装置20也能够,仅使重要的信息看清楚,而使整体不懂,从而能够吸引用户的注意。显示控制部26,在由关心度推定部23推定的关心度的变化率的大小不足于第一 阈值的情况下,以至少一部分的鲜明度或公开度低于预先规定的鲜明度或公开度的状态, 使显示部14显示与正在显示的内容不同的内容。并且,显示控制部26具有应用程序控制 部26a和画面描绘部26b。应用程序控制部26a,在更新显示部27的画面的描绘细节时,将作为与该描绘细 节的更新有关的信息的更新信息输出到画面描绘部26b。画面描绘部26b,根据更新信息,描绘显示在显示部27的内容,将描绘了的内容输 出到显示部27。显示部27,具有画面,在画面显示由画面描绘部26b描绘的内容。其次,说明如上构成的信息显示装置20的各种工作。特别是,以多个用户位于信 息显示装置20的前面的状况为例子,说明信息显示装置20的各种工作。图12是示出本发明的实施例2中的信息显示装置执行的处理的流程的流程图。图 13是用于说明本发明的实施例2中的关心度的计算方法的图。图14A以及图14B是用于说 明本发明的实施例2中的目标用户的选定方法的图。首先,用户识别部21,通过从由用户检测摄像机60拍摄的图像中提取脸区域,从 而生成用于确定用户的用户识别信息(S202)。而且,用户状态检测部22,从由用户检测摄像机60拍摄的图像中提取用户区域, 按提取的每个用户区域检测用户状态(S204)。具体而言,用户状态检测部22,按每个用户 区域计算用户的位置。进而,用户状态检测部22,根据计算出的用户的位置的时间上的变化,计算用户的移动矢量。而且,关心度推定部23,根据公式(3),利用用户的移动矢量;;、从 用户的移动矢量;;和画面的交点到显示内容的中心为止的距离S、用户的位置和显示内容的 中心的距离d,计算用户对显示内容的关心度k(S206)。(公式3)+…⑶
IwI在此,gl、g2以及g3是增益,也是0以上的实数。公式(3)的右边的第一项是与用户的移动方向有关的项,也是用于用户移动来越 接近显示内容,使关心度就越大的项。在图13中以实线表示的移位矢量表示,若在移动方向使该移位矢量延伸,则与画 面或延长画面的面交叉的矢量。另一方面,在图13中以虚线表示的移位矢量表示,即使在 移动方向使该移位矢量延伸,也不会与画面以及画面延伸的面交叉的矢量。从用户的移动矢量1;和画面的交点到显示内容的中心为止的距离S,用户向显示内 容越移动,就越成为小的值,从而第一项成为大的值。因此,根据该第一项,用户的移动方向 越朝向显示内容的中心,关心度就越大。而且,对于从用户的移动矢量 和画面的交点到显 示内容的中心为止的距离s,虽然在图13中仅示出用户A以及用户C,但是,其它用户的距 离s也是与用户A以及用户C相同计算的。并且,如用户B,即使在移动方向使移位矢量延 伸,也不会与画面以及画面延伸的面交叉的用户的距离s成为无限大(⑴),并且,与gl的 值无关,而第一项成为0。并且,在图13中,距离s是从用户的移动矢量和画面的交点到显示内容的中心为 止的距离,但也可以是从用户的移动矢量和画面的交点到画面的中心为止的距离。在此情 况下,用户移动来越接近画面的中心,关心度就越大。并且,距离s也可以是,从用户的移动 矢量和画面的交点到显示内容的一部分表示的图像的中心为止的距离。在此情况下,用户 移动来越接近显示内容的一部分表示的图像的中心,关心度就越大。公式(3)的右边的第二项是与用户的速度有关的项,也是用于用户的移动越缓 慢,使关心度就越大的项。公式(3)的右边的第三项是与用户的位置和显示内容的中心的距离有关的项,也 是用于用户的位置越接近显示内容的位置,使关心度就越大的项。其次,目标用户选定部24,选定目标用户(S208)。具体而言,目标用户选定部24, 例如,将关心度k在预先规定的第四阈值kTH以上的用户选定为目标用户。例如,在图14A 中,在第四阈值kTH被设定为“0.4”的情况下,目标用户选定部24,将关心度为“0.7”的“用 户A”和关心度为“0. 4”的“用户D”设定为目标用户。而且,目标用户选定部24也可以,将从显示内容的中心的距离d不足于预先规定 的第五阈值的用户选定为目标用户。在此情况下,例如,在图14B中,目标用户选定部24,将 从显示内容的中心的距离d不足于第五阈值dt的“用户A”和“用户B”选定为目标用户。其次,显示控制部26,针对目标用户,计算关心度的变化率的大小的平均值 (S210)。具体而言,显示控制部26,在当前时刻t,计算在规定的时间间隔At的各个目标 用户的关心度的变化率的大小。例如,在步骤S208 “用户A”和“用户B”被选定为目标用户的情况下,显示控制部26,如图15以及公式(4)示出,利用计算出的“用户A”的关心度 k_a和“用户B”的关心度k_b,计算“用户A”的关心度的变化率的大小a_A(t)和“用户B” 的关心度的变化率的大小a_B(t)。(公式4)
权利要求
一种信息显示装置,包括显示部,在画面显示第一内容;用户状态检测部,检测用户状态,该用户状态是位于所述画面的前面的用户的物理状态;关心度推定部,根据由所述用户状态检测部检测出的用户状态,推定关心度,该关心度表示用户对由所述显示部显示在画面的第一内容的关心程度;以及显示控制部,在由所述关心度推定部推定的关心度的变化率的大小不足于第一阈值的情况下,以至少一部分的鲜明度或公开度低于预先规定的鲜明度或公开度的状态,使所述显示部显示第二内容。
2.如权利要求1所述的信息显示装置,所述显示控制部,进一步,在由所述关心度推定部推定的关心度的变化率的大小超过 第二阈值的情况下,提高显示在所述画面的第二内容的鲜明度或公开度。
3.如权利要求1所述的信息显示装置,所述显示控制部,进一步,在由所述关心度推定部推定的关心度超过第三阈值的情况 下,提高显示在所述画面的第二内容的鲜明度或公开度。
4.如权利要求1所述的信息显示装置,所述显示控制部,在由所述关心度推定部推定的关心度的变化率的大小不足于所述第 一阈值的情况下,并且,在由所述关心度推定部推定的关心度的变化率的大小不足于所述 第一阈值的状态持续了规定时间的情况下,使所述显示部显示所述第二内容。
5.如权利要求1所述的信息显示装置,所述用户状态检测部检测所述用户的移动方向,以作为所述用户状态,所述关心度推定部,由所述用户状态检测部检测出的用户的移动方向越接近从该用户 向代表所述画面的位置的方向、或从该用户向正在显示所述第一内容的位置的方向,就推 定关心度越高。
6.如权利要求1所述的信息显示装置,所述用户状态检测部检测所述用户的移动速度,以作为所述用户状态,所述关心度推定部,由所述用户状态检测部检测出的用户的移动速度越小,就推定关 心度越高。
7.如权利要求1所述的信息显示装置,所述用户状态检测部检测所述用户的位置,以作为所述用户状态,所述关心度推定部,由所述用户状态检测部检测出的用户的位置与正在显示所述第一 内容的位置之间的距离越小,就推定关心度越高。
8.如权利要求1所述的信息显示装置,所述用户状态检测部检测用户的视线方向,以作为所述用户状态,所述关心度推定部,由所述用户状态检测部检测出的用户的视线方向越接近从该用户 向代表所述画面的位置的方向、或从该用户向正在显示所述第一内容的位置的方向,就推 定关心度越高。
9.如权利要求1所述的信息显示装置,还包括目标用户选定部,从位于所述画面的前 面的用户中选定目标用户,所述显示控制部,在由所述目标用户选定部选定的目标用户的关心度的变化率的大小 不足于所述第一阈值的情况下,使所述显示部显示所述第二内容。
10.如权利要求9所述的信息显示装置,所述目标用户选定部,在由所述关心度推定部推定的关心度为第四阈值以上的情况 下,将与该关心度相对应的用户选定为目标用户。
11.如权利要求9所述的信息显示装置,所述目标用户选定部,在正在显示所述第一内容的位置与用户的位置之间的距离不足 于第五阈值的情况下,将该用户选定为目标用户。
12.如权利要求1所述的信息显示装置,还包括内容数据库,至少记忆适用区域,该适 用区域表示所述第二内容的一部分且表示作为将要给用户看的信息的本质信息的部分的 位置,所述显示控制部,以所述内容数据库所记忆的所述第二内容的适用区域的鲜明度或公 开度低于预先规定的鲜明度或公开度的状态,使所述显示部显示所述第二内容。
13.如权利要求1所述的信息显示装置,所述预先规定的鲜明度或公开度是所述第一内容的鲜明度或公开度,所述显示控制部,使所述显示部将所述第一内容显示为所述第二内容。
14.一种信息显示方法,包括第一显示步骤,在画面显示第一内容;用户状态检测步骤,检测用户状态,该用户状态是位于所述画面的前面的用户的物理 状态;关心度推定步骤,根据在所述用户状态检测步骤检测出的用户状态,推定关心度,该关 心度表示用户对在所述显示步骤显示在画面的第一内容的关心程度;以及第二显示步骤,在所述关心度推定步骤推定的关心度的变化率的大小不足于第一阈值 的情况下,以至少一部分的鲜明度或公开度低于预先规定的鲜明度或公开度的状态,显示 第二内容。
15.一种计算机可读的记录介质,记录有用于使计算机执行权利要求14所述的信息显示方法的程序。
全文摘要
提供一种信息显示装置,高效率地提高用户对显示的内容的关心。信息显示装置(10)包括显示部(14),在画面显示第一内容;用户状态检测部(11),检测用户状态,该用户状态是位于画面的前面的用户的物理状态;关心度推定部(12),根据由用户状态检测部(11)检测出的用户状态,推定关心度,该关心度表示用户对由显示部(14)显示在画面的第一内容的关心程度;以及显示控制部(13),在由关心度推定部(12)推定的关心度的变化率的大小不足于第一阈值的情况下,以至少一部分的鲜明度或公开度低于预先规定的鲜明度或公开度的状态,使显示部显示第二内容。
文档编号G09F19/00GK101946274SQ20098010536
公开日2011年1月12日 申请日期2009年12月15日 优先权日2008年12月16日
发明者前田茂则, 坂田幸太郎 申请人:松下电器产业株式会社