对自助结账终端处的欺诈活动的验证的制作方法
对自助结账终端处的欺诈活动的验证的制作方法
【专利说明】对自助结账终端处的欺诈活动的验证
[0001]相关申请的交叉引用
[0002]本申请是要求2012年12月21日提交的美国临时申请号61/740，858的利益的非临时申请。本申请通过引用结合了所发布的美国专利号7，631，808，该美国专利于2009年12月15日发布。
技术领域
[0003]本发明总体上涉及一种防止在自助结账终端发生欺诈活动的安全系统和方法。更具体地，一种用于对自助结账单元处的欺诈活动进行验证的方法和系统。
【背景技术】
[0004]自助结账正快速成为顾客对零售商品进行支付的既定方法。其对更短的线路、更快的销售以及增加的隐私的承诺正吸引着顾客。此外，不必为人工操作结账配备工作人员以及与减少的薪资费用相关联的财政节省正吸引着零售商。
[0005]另一方面，自助结账呈现出多个问题。可否认性的机会、简易和可能性允许某些顾客通过简单地不扫描物品或通过假装扫描物品困难来盗窃物品。因此，发生在自助结账的盗窃或欺诈活动经常会是人工操作的结账的盗窃和欺诈活动的若干倍。
[0006]相应地，自助结账经常采用各种防盗措施，这些措施利用在装袋区对输出的重量进行测量的重量传感器或称。如果在装袋区重量的增加不与物品的已知重量相当，则系统举起标记，并且交易停止。自助结账经常出错并且引起太多“误报”。此外，自助结账的防盗不足够全面，这允许顾客可以从自助结账进行盗窃的额外方式。
[0007]因此，需要一种可以减少可能在自助结账时发生的盗窃活动和对欺诈活动的误报警报的系统和验证过程。
【发明内容】
[0008]本申请的主题在某些情况下可能涉及互相关产品、特定问题的替代解决方案、和/或单个系统或物品的多次不同使用。
[0009]一方面，提供了一种对自助结账终端处的可能的相关活动进行验证的方法。该方法是通过计算机处理单元操作的。获得从在交易区在交易时间的至少一部分期间对物品进行监控的视频源生成的视频馈送。该计算机处理单元从数据源获得数据馈送，通过在该交易区在该交易时间的至少一部分期间监控该物品在该数据源生成该数据馈送。然后，对该视频馈送和该数据馈送进行分析以标识该可能的相关活动。然后，当所分析的视频馈送和所分析的数据馈送两者确认了该可能的相关活动时，发出警报。
[0010]另一方面，提供了一种对自助结账终端处的可能的欺诈活动进行验证的方法。计算机处理单元从该自助结账终端接收物品的意外重量数据，在该自助结账终端，重量传感器与该自助结账终端联接以获得放置在装袋区上的该物品的该意外重量数据。接下来，基于该意外重量数据标识该可能的欺诈活动。获得该意外重量数据以标识来自该重量传感器的该物品是否符合预期重量公差。该计算机处理单元进一步基于数据馈送标识该可能的欺诈活动，其中，该数据馈送是从对交易区处的该物品进行监控的数据源中生成的。
[0011]在又另一方面，提供了一种用于对自助结账终端处的可能的欺诈活动进行验证的系统。该系统包括计算机处理单元，该计算机处理单元可操作用于对在交易时间的至少一部分期间生成的多项数据馈送进行分析。该多项数据馈送是通过对在该自助结账终端交易的物品进行监控而生成的，并且该计算机处理单元能够使该多项数据馈送中的每项数据馈送与和该物品相关联的预设数据关联以标识该可能的欺诈活动。进一步地，该计算机处理单元被配置成用于当该多项数据馈送中的至少两项数据馈送确认了所标识的可能的欺诈活动时发出警报。该多项数据馈送包括视频馈送、交易数据、以及意外重量数据。该系统进一步包括与该计算机处理单元通信地联接的视频源，该视频源生成该视频馈送。重量传感器与该自助结账终端联接，该重量传感器将该意外重量数据传送至该计算机处理单元。该自助结账终端通信地联接到该计算机处理单元上。
[0012]在进一步的方面，提供了一种对自助结账终端处的丢失事故进行标识的方法。计算机处理单元获得视频馈送，其中，该视频馈送是从对在交易区的物品进行监控的视频源生成的。该视频馈送是在交易时间的至少一部分期间生成的。该计算机处理单元基于所获得的视频馈送通过视频分析来标识丢失事故，并且然后对该视频馈送进行修改以简化该视频馈送。经修改的视频馈送被传送至人工确认终端以执行人工确认。然后，接收人工确认响应以基于该人工确认来标识该丢失事故。基于该视频分析和该人工确认响应发出警报。
【附图说明】
[0013]图1提供了对自助结账终端处的可能的欺诈活动进行验证的方法的实施例。
[0014]图2提供了对自助结账终端处的丢失事故进行标识的方法的实施例。
[0015]图3提供了被发送以供进行人工确认的视频馈送修改的实施例。
[0016]图4提供了人工确认过程的实施例。
[0017]图5提供了用于对自助结账终端处的可能的欺诈活动进行验证的系统的实施例。
【具体实施方式】
[0018]以下结合附图给出的详细描述旨在作为对本发明的目前优选的实施例的描述并且不代表本发明可以被构造和/或利用的仅有形式。该描述结合所展示的实施例阐述了用于构造和操作本发明的功能和步骤的顺序。
[0019]所发布的美国专利7，631，808详细描述了视频分析和交易数据分析的过程。如此，所发布的美国专利7，631，808通过引用结合于此。邀请审查员提供前述所发布的专利的电子副本。
[0020]在其本质上，美国专利7，631，808描述了用于检测交易结果(如与顾客在交易终端进行的物品的交易(例如，购买、退款、无效等等)有关的可疑活动)的方法和设备。该系统获得与交易数据相关联的视频数据。可以例如从聚焦于超市或其他零售店中的现金出纳机结账或其他交易区的高架摄像机获得视频数据。该系统应用被披露作为该系统的一部分的自动化机器视频分析算法以分析视频数据的至少一部分，从而获得在与交易区相关联的交易的至少一部分有关的至少一个视频参数。举例来讲，该系统可以对视频数据进行分析以追踪在交易区中的交易时所涉及到的物品(例如，标识其存在)。本过程可以从视频数据分析中自动地标识交易时所涉及到的物品的存在。这可以例如如下来完成:自动地检测交易区中的物品活动和/或检测交易区中的操作员活动。对物品存在的检测可以包括检测物品从交易区中的相关区域被移除和/或检测物品被引入到交易区中的相关区域中。
[0021]与交易数据相比较，使用视频分析的组合，该系统可以确定在视频数据的分析时所标识的物品的存在在交易数据中是否具有相应的存在，并且如果不存在，则标识可疑活动。举例来讲，对于每个检测器而言，该系统可以将那个检测器的检测事件集合与交易数据的至少一部分相比较以标识那个检测器从该交易数据部分中所指示的多个物品中检测的多个物品的至少一处明显的差异。如交易计数(例如，扫描计数)等交易数据或交易物品身份因此表示物品的存在或(针对整个交易)所扫描的物品的数量，而来自视频分析的检测事件数据或视频计数表示操作员引起其移动通过交易区的物品的存在(或数量)。在此披露了许多其他实施例，在详细描述章节中提供了这些实施例的细节。
[0022]总体上，本发明涉及一种对在自助结账交易期间顾客可能进行的可能的欺诈活动进行验证的方法。本发明通过将自助结账操作与用于确认自助结账终端所标识的可能的欺诈活动的附加验证措施整合增强了自助结账操作的操作。通过将以下数据馈送中的一项或多项数据馈送组合促进了该增强:视频分析、交易数据整合、重量整合、和可选的人工确认过程。该组合保证了自助结账终端最初标识的可能的欺诈活动并且验证了可能的欺诈活动的合法性。进而，本发明减少了给予可能的欺诈活动的误报警报，其中，警报仅基于单次验证而被发出。
[0023]可能的欺诈活动的示例可以包括但不限于当在自助结账终端处的顾客将没有交易的物品放置在装袋区中时；代替正在购买的物品将另一个物品放置在装袋区中；在没有将物品交易通过自助结账终端的情况下，将物品放置在装袋区之外，如放置在地板、输入区、或不是特定指定用于收集购买的物品的其他区上；以及在交易结束后拿走未购买的物口口 ；寺寺O
[0024]误报的欺诈活动的示例可以包括但不限于:当非商品物品(如钱包、手机、雨伞、外套等)放置在 装袋区中时；免费商品(如促销物品)放置在装袋区；商品物品与当前交易无关联，如之前从同一商店或从另一商店购买的物品放置在装袋区中；部分消耗物品、其重量随老化而变化的商品物品、或其他类型的正确扫描引起的重量差异的触发；斜靠或坐在装袋区/输出区称上引起意外重量增加；可重复使用的袋的使用；物品从输出区掉落等等。
[0025]在此设想的视频源可以包括但不限于视频摄像机，如模拟摄像机和IP摄像机等等；可以提供任何时长的视频馈送的装置，如DVR ;具有摄像机的便携式计算装置，如平板计算机、膝上型计算机；等等。
[0026]在此设想的数据馈送可以用以下格式，包括但不限于:XML、JSON、CSV、二进制；通过任何连接类型:串行、以太网等；通过任何协议:UDP、TCP等等。
[0027]在一个实施例中，可以验证在自助结账终端的可能的相关活动。在此披露的方法和系统可以不局限于标识和验证可能的欺诈活动。可能的相关活动可以是在自助结账终端处的不是欺诈活动的活动。可能的相关活动可以包括但不限于:穿过自助结账终端的多个物品之间的延时、自助结账终端发生的机械误差、在自助结账终端收据打印卡纸、顾客求救呼号等等。不是可能的欺诈活动的可能的相关活动的示例可能不需要干预或警报，因此可以实现验证过程而不发出干预或警报。
[0028]提供了一种用于实现所披露的对自助结账终端处的可能的欺诈活动进行验证的系统。该系统可以包括计算机处理单元(如数字视频分析仪(DVA))、视频源、重量传感器、以及自助结账终端。
[0029]该计算机处理单元可以可操作用于对通过监控在该自助结账终端被扫描的物品而生成的数据馈送进行分析。该数据馈送可以包括视频馈送、交易数据、以及意外重量数据。该数据馈送可以由该计算机处理单元获得以标识该可能的欺诈活动。可以基于通过该数据馈送的另一种类型进行的分析来进一步验证所标识的可能的欺诈活动。可以从对放置在交易区的物品进行监控的该视频源获得该视频馈送。该意外重量数据可以是对从该重量传感器测量的总量进行分析的结果。该重量传感器测量放置在装袋区的该物品的重量。当该物品的重量不符合预期重量公差时，可以获得该意外重量数据。
[0030]在一个实施例中，该预期重量公差可以是分配给该物品的可接受的重量范围。例如，可以基于苹果的平均重量给苹果分配该预期重量公差。
[0031 ] 在另一个实施例中，该意外重量数据可以指示该物品的重量在该预期重量公差所指定的可接受的重量范围之外。如果该物品的重量在该预期重量公差之外，则该意外重量数据可以标识该可能的欺诈活动。
[0032]在又另一个实施例中，该意外重量数据可以指示该物品的重量在该预期重量公差之内，从而否认该可能的欺诈活动。
[0033]在又另一个实施例中，可以不给该物品分配该预期重量公差。在本实施例中，该意外重量数据可以通过指示该物品没有现有的重量公差来标识该可能的欺诈活动，因此，该物品的重量不符合该预期重量公差。
[0034]在进一步的实施例中，该意外重量数据可以指示从该重量传感器测量的该物品的重量与该预期重量公差之间的差值。例如，如果该物品的重量较重并且在该预期重量公差之外，则该意外重量数据可以指示这种差值。该预期重量公差还可以是单个数字，并且该意外重量数据可以用类似的方式指示该差值。
[0035]用于实现所披露的对自助结账终端处的可能的欺诈活动进行验证的方法的系统可以进一步包括用于执行人工确认的人工确认终端。该人工确认终端可以对该视频馈送的一部分进行分析以标识该可能的欺诈活动。
[0036]在一个实施例中，该计算机处理单元可以可操作用于对该视频馈送进行修改，其中，该视频馈送可以被简化。对该视频的修改简化了该视频馈送，这样使得由视频分析师所操作的该人工确认终端可以通过人工确认实时处理经修改的视频馈送。本披露中进一步披露了详细的人工确认过程。
[0037]简化该视频馈送可以和将该视频馈送剪辑成短时片段一样简单，以便仅审查该视频馈送的一部分。它还可以涉及到图像处理以便促进人工确认。它还可以涉及到从该视频馈送中拍摄快照。为了审查目的的一致性，它还可以包括对该视频馈送进行旋转、缩放、以及执行其他仿射变换以便调整该视频的外观。所有这些有待被理解成对该视频馈送的简化。
[0038]每个在自助结账终端被交易的物品可以生成多项数据馈送。该可能的欺诈活动可以首先被该多项数据馈送之一触发，然后被验证。典型地，该自助结账终端具有可以初始地标记该可能的欺诈活动的内置机构。为了保证所初始标记的可能的欺诈活动需要警报或干预，该多项数据馈送中的不止一项数据馈送可以用于验证该可能的欺诈活动、确认或否认该可能的欺诈活动。该多项数据馈送中的每项数据馈送可以被传送至与该自助结账终端进行电子通信的计算机处理单元。可以与预设数据相比较来分析该多项数据馈送中的每项数据馈送。
[0039]该预设数据是指分配给在商店销售的每个物品的预期数据馈送。该预设数据的示例可以包括但不限于该预期重量公差、该物品的预期形状、该物品的预期计数次数等等。
[0040]在一个实施例中，可以利用重量传感器验证该可能的欺诈活动。该重量传感器可以电联接到该自助结账终端的装袋区，从而提供放置在该装袋区中的物品的重量。所提供的该物品的重量可以与该物品的该预期重量公差进行比较。
[0041]该预期重量公差可以被分配给在商店销售的每个物品，从而设置可以接受的公差水平。当该物品的重量超过或下降到该物品的该预期重量公差以下时，可以将该物品标记为该可能的欺诈活动。可以给物品分配不止一个预期重量公差。例如，在买一送一活动期间，该物品可能伴随有派送物品。
[0042]该预期重量公差可以用于捕获放置在该装袋区中的物品，在该装袋区，该物品不是在商店中分类的物品。在这种情况下，该预期重量公差可以被设置成零作为默认，以标记具有重量、不是商店中分类的物品的物品。
[0043]可以相应地如在此披露那样生成该意外重量数据。可以基于该意外重量数据标识该可能的欺诈活动，其中，当来自该重量传感器的物品的重量不符合该预期重量公差时，获得该意外重量数据。
[0044]在另一个实施例中，视频分析可以用于验证该可能的欺诈活动。视频馈送可以由对交易区处的活动进行监控的视频源生成。该交易区不局限于该自助结账终端的某一区段，而是可以包括该自助结账终端的周围区。可以通过该计算机处理单元进行该视频分析，其中，逐帧分析该视频馈送以标识该可能的欺诈活动。逐帧分析可以标识没有在商店销售的物品，在这种情况下，这种活动可能不是该可能的欺诈活动。在被放置在该装袋区之前和之后的该物品的该数据馈送可以被分析以验证该可能的欺诈活动。不同的视频分析技术是可供使用的并且与本发明有关的视频分析方法和过程通过引用结合于此。
[0045]在又另一个实施例中，交易数据可以与该视频分析关联以便验证该可能的欺诈活动。通过前述通过引入的结合，还在此提供了这种方法和过程。
[0046]可以对在自助结账终端发生的可能的欺诈活动进行验证以确定是否需要干预。干预可以是以电子方式给予该自助结账终端的警报的形式，如使该自助结账终端停止。可以给予自助结账服务员警报，其中，该自助结账服务员可以继续进行干预。
[0047]在一个实施例中，如果基于该多项数据馈送中的两项数据馈送确认了该可能的欺诈活动，则可以发出该警报。
[0048]在另一个实施例中，如果该多项数据馈送之一所标识的该可能的欺诈活动指示误报情况，则可以拒绝发出该警报。
[0049]在又另一个实施例中，即使该多项数据馈送中的每项数据馈送指示不同的结果，则可以发出该警报。在本实施例中，可以进行人工确认以进一步验证该可能的欺诈活动。举例来讲，基于该视频馈送可以将一捆香蕉作为单个香蕉来验证，但取决于该捆香蕉中的香蕉的数量，该捆香蕉可能在该预期重量公差之外。在这种情况下，在发出该警报之前，人工确认可以进一步验证该可能的欺诈活动。
[0050]人工确认可以进一步验证该可能的欺诈活动。人工确认可以利用该视频源所产生的该视频馈送。可以对该视频馈送进行修改，其中，该视频馈送被简化，然后，经修改的视频馈送可以从该计算机处理单元被发送至人工确认终端，接下来验证经修改的视频是 否确认该可能的欺诈活动。在其他机器支持的验证装置验证该可能的欺诈活动是困难和/或困惑的情况下，可能发现人工确认是有用的。人工确认终端可以由视频分析师来操作。
[0051]在一个实施例中，可以作为最后的步骤来进行人工确认以确认正在被该多项数据馈送验证的该可能的欺诈活动。
[0052]在此披露的对该视频馈送的修改可以包括可以用于促进人工确认的图像分析和处理方法。举非限制性示例来讲，这种修改可以包括但不限于突出一张或多张图像之间的差别以显示差异区域；对影像进行剪切或屏蔽以消除令人分心的细节和将注意力聚焦在场景的相关区；旋转影像并使其经历变形(仿射和非线性两种，例如，旋转、拉伸、剪切、镜像、消除畸变等)以将影像放到一致的规范视野中；突出图像中的物品被引入、移除、操纵或移动的区域；突出光流；突出运动轨迹；突出之前确认的商品物品；覆盖交易日志和自助结账事件信息(例如，重量传感器信息、扫描仪信息、跳跃装袋按钮、顾客存在检测信息、电子物品安全标签解除激活、标签移除等)；突出针对特定活动指定的特定图像区域(例如，输入区、输出区等)；等。
[0053]可以用人工确认实时进行该可能的欺诈活动的验证。
[0054]人工确认可以被考虑用于弥补该可能的欺诈活动的非人工支持验证方法的不足。例如，调谐自动化验证系统中的自动化参数将给予该系统特定的误报率和正确率。例如，如果这种系统被调谐而产生50%的正确率，则误报率会太高。在这种情况下，将自动化方法与特定的人工确认组合可以产生能够保持所期望的正确率同时将误报率降低到更可管理的点的复合系统。
[0055]在一个实施例中，可以利用web服务来处理人工确认。经修改的视频馈送可以利用可以接入互联网连接的web服务通过网络浏览器被传达。进行人工确认的分析师可以利用web应用来审查和验证从该计算机处理单元被发送出来的该警报。web应用可以通过长轮询机制请求web服务以便创建用于验证/确认的事件驱动界面。如果web服务中没有确认工作，则长轮询机制最终会超时并且立即被web应用重新建立。如果工作是可供使用的，则长轮询调用带着工作细节而返回。web应用可以对支持该工作的web服务做出后续web调用。同时，当DVA具有需要人工确认的工作时，它将对web服务调用工作细节。本调用可能不立即返回。
[0056]在一个实施例中，该工作可以转到web服务工作队列，该工作队列将会将该作业赋予等待web应用客户端。一旦完成了该工作，于是人工确认结果将被传递到等待计算机处理单元/DVA调用。
[0057]丢失事故可以通过视频分析来验证。在此设想的丢失事故可以包括但不限于当顾客忽略了购物车中的物品时、盗窃活动等等。当该物品没有被放置在该装袋区时，丢失事故可能发生，从而使该重量传感器不能够执行其功能。丢失事故可以经历人工确认以验证丢失事故是否真地发生。
[0058]在一个实施例中，可以通过获得从对交易区处的物品进行监控的该视频源生成的视频馈送来验证在自助结账终端处的丢失事故。该视频馈送可以是在交易时间期间该物品的部分视频馈送。该交易时间指示从该物品被引入到该自助结账终端到成功交易的支付的一段时间。可以通过在该人工确认终端执行的人工确认来验证该计算机处理单元进行的该视频馈送的视频分析。如果确认了丢失事故，则可以发出警报或干预。
[0059]现在转至图1，描述了对自助结账终端处的可能的欺诈活动进行验证的方法的实施例。首先，该自助结账终端标记可能的干预101;如果该自助结账终端处的事故是欺诈活动，则可能需要干预或警报。该自助结账终端可以最初从该自助结账终端获得通过监控正在被交易的物品而生成的数据馈送，并且标识该可能的欺诈活动。该自助结账终端请求所标识的可能的欺诈活动的确认102。中央处理单元可以利用多项数据馈送来处理103该事故并且确定是否需要干预。可以分析该多项数据以验证该可能的欺诈活动被确认还是被否认。可以可选地应用人工确认以便确认或否认该可能的欺诈活动108。
[0060]如果对该多项数据中的一项或多项的分析确认104该可能的欺诈活动的确是欺诈，则该自助结账终端可以请求干预106，其中，可以用出现在该自助结账单元上的警报或被发送至自助结账服务员的警报的形式给予该干预，通知对在该自助结账终端处处理的交易进行干预。
[0061]如果对该多项数据中的一项或多项的分析否认105该可能的欺诈活动，则可以忽视该事故并且将不进行107干预。
[0062]图2示出了对自助结账终端处的丢失事故进行标识的方法的实施例。当在该自助结账终端发生该丢失事故201时，该中央处理单元进行视觉分析202以验证该丢失事故被确认还是错误的。该中央处理单元从该视觉分析中标识该丢失事故203并且对该自助结账单元发出警报204，由此请求干预。可以可选地应用人工确认206以便确认或否认针对该丢失事故进行的视觉分析。一旦确认了该丢失事故就向该自助结账单元给予警报，接下来可以请求干预205。
[0063]图3示出了被发送以供视频分析师进行人工确认的视频馈送修改的实施例。图3示出了被扫描的物品的经修改的视频馈送。首先，该图示出了在扫描时间拍摄的快照，接下来是在装袋时间拍摄的快照。通过使快照差别化来应用突出以修改该视频馈送，其中，突出指示该装袋区中的相关变化。然后，通过阈值化(thresholding)来获得所突出的视频馈送的轮廓，接下来是形态学操作和基于二进制大对象的连接分量分析以简化该视频馈送，从而显示被添加到该装袋区的单个物品。
[0064]图4提供了人工确认的实施例。可以首先如下进行人工确认:接收人工确认请求402。在发送出干预警报之前，可以由DVA 400或该中央处理单元发起401人工确认。来自该视频源的视频馈送可以被修改和发送至web服务404。然后，工作创建器403将经修改的视频馈送(图像T-L0G)排队在工作队列406。一旦人工确认工作被发送407以便被处理，视频分析师就使用人工确认终端408或web应用(WA)来进行对经修改的视频馈送的人工确认。一旦完成了 405人工确认工作，人工确认的响应409被发送回到DVA。
[0065]图5示出了用于对自助结账终端处的可能的欺诈活动进行验证的系统的实施例。计算机处理单元509与自助结账终端508进行通信。自助结账终端508连接性地联接到对放置在装袋区505中的多个物品的重量进行测量的重量传感器506上。与计算机处理单元509进行电子通信的视频摄像机507可以监控交易区501、504上的活动，该视频摄像机还可以监控购物车502和顾客503 ο在本实施例中，视频馈送是由该视频摄像机生成的并且被传送至该中央处理单元。该中央处理单元可以基于该视频馈送标识该可能的欺诈活动。重量传感器还可以用于本系统中以验证该可能的欺诈活动。意外重量数据可以基于该多个物品中的每个物品的重量以及与该多个物品中的每个物品相对应的预期重量公差来标识该可能的欺诈活动。该计算机处理单元可以基于该意外重量数据授权给予警报/干预。
[0066]虽然在优选或具体实施例中以示例方式展示了本发明的若干变化，但明显的是，在本发明的精神和范围、或其创造性概念内可以发展进一步的实施例。然而，应明确理解的是，这种修改和改编在本发明的精神和范围内，并且是包容性的，而不局限于以下如所阐述的所附权利要求书。
【主权项】
1.一种对自助结账终端处的可能的相关活动进行验证的方法，该方法是通过一个计算机处理单元操作的，该方法包括以下步骤: 获得从一个视频源生成的一项视频馈送，其中，该视频馈送是通过在交易时间的至少一部分期间监控一个物品而生成的，该物品位于一个交易区处； 从一个数据源获得一项数据馈送，其中，该数据馈送是通过在该交易时间的至少一部分期间监控该物品而生成的，该物品位于该交易区处； 对该视频馈送进行分析以标识该可能的相关活动； 对该数据馈送进行分析以标识该可能的相关活动；以及 如果所分析的视频馈送和所分析的数据馈送两者确认该可能的相关活动，则发出一个警报。2.如权利要求1所述的方法，其中，该可能的相关活动是一项可能的欺诈活动。3.如权利要求2所述的方法，进一步包括以下步骤: 对该视频馈送进行修改，其中，该视频馈送被简化； 将该经修改的视频馈送传送至一个人工确认终端以执行人 工确认；以及 从该人工确认终端接收一个人工确认响应以验证该警报。4.如权利要求2所述的方法，其中，所述从一个数据源获得一项数据馈送的步骤包括以下各项中的至少一项: 从一项交易数据中获得该数据馈送，其中，该交易数据是从该自助结账终端生成的；以及 从一个重量传感器获得该数据馈送，其中，该重量传感器检测放置在一个装袋区上的该物品的重量。5.如权利要求4所述的方法，其中，所述通过从一个重量传感器获得该数据馈送对该数据馈送进行分析以标识该可能的欺诈活动的步骤包括: 从该自助结账终端接收该物品的一项意外重量数据，该重量传感器与该自助结账终端通信地联接，其中，该自助结账终端获得正放置在一个装袋区上的该物品的该意外重量数据；以及 基于该意外重量数据标识该可能的欺诈活动，其中，获得该意外重量数据以标识来自该重量传感器的该物品的重量是否符合一个预期重量公差。6.一种对自助结账终端处的可能的欺诈活动进行验证的方法，该方法是通过一个计算机处理单元操作的，该方法包括以下步骤: 从该自助结账终端接收一个物品的一项意外重量数据，该重量传感器与该自助结账终端通信地联接，其中，该自助结账终端获得正放置在一个装袋区上的该物品的该意外重量数据； 基于该意外重量数据标识该可能的欺诈活动，其中，获得该意外重量数据以标识来自该重量传感器的该物品是否符合一个预期重量公差；以及 基于一项数据馈送标识该可能的欺诈活动，其中，该数据馈送是从对在一个交易区处的该物品进行监控的一个数据源中生成的，该数据馈送是在交易时间的至少一部分期间生成的。7.如权利要求6所述的方法，进一步包括以下步骤:使基于该数据馈送的所标识的可能的欺诈行为与基于该意外重量数据的所标识的可能的欺诈活动相关联以验证该可能的欺诈活动。8.如权利要求6所述的方法，进一步包括以下步骤: 对一项视频馈送进行修改，其中，该视频馈送被简化，其中，该视频馈送是从在该交易时间的至少一部分期间对该物品进行监控的一个视频源生成的，该物品位于该交易区处； 将该经修改的视频馈送传送至一个人工确认终端以执行人工确认；以及 从该人工确认终端接收一个人工确认响应以验证该可能的欺诈活动。9.如权利要求7所述的方法，其中，所述基于一项数据馈送标识该可能的欺诈活动的步骤包括以下各项中的至少一项: 基于视频分析标识该可能的欺诈活动，该视频分析是通过对一项视频馈送进行分析的该计算机处理单元执行的，其中，该视频馈送是从一个对该物品进行监控的视频源生成的；以及 基于一项交易数据标识该可能的欺诈活动，其中，该交易数据是从该自助结账终端生成的。10.如权利要求7所述的方法，进一步包括以下步骤: 如果基于该数据馈送的所标识的可能的欺诈活动和基于该意外重量数据的所标识的可能的欺诈活动两者确认该可能的欺诈活动，则发出一个警报。11.如权利要求7所述的方法，进一步包括以下步骤: 如果基于该数据馈送的所标识的可能的欺诈活动和基于该意外重量数据的所标识的可能的欺诈活动中的至少一个欺诈活动没有确认该可能的欺诈活动，则拒绝发出一个警报。12.如权利要求8所述的方法，进一步包括以下步骤: 如果该可能的欺诈活动通过以下各项中的至少一项被确认，则发出一个警报: 该人工确认响应； 基于该数据馈送的所标识的可能的欺诈活动；以及 基于该意外重量差的所标识的可能的欺诈活动。13.如权利要求8所述的方法，进一步包括以下步骤:如果对基于该数据馈送、该意外重量差、以及该人工确认响应的所标识的可能的欺诈活动的组合分析确认该可能的欺诈活动，则发出一个警报。14.一种对自助结账终端处的可能的欺诈活动进行验证的系统，该系统包括: 一个计算机处理单元，该计算机处理单元可操作用于对在交易时间的至少一部分期间生成的多项数据馈送进行分析，该多项数据馈送是通过监控在该自助结账终端处交易的一个物品生成的，该计算机处理单元可操作用于使该多项数据馈送中的每项数据馈送与一项和该物品相关联的预设数据关联以标识该可能的欺诈活动，该计算机处理单元被配置成用于当该多项数据馈送中的至少两项数据馈送确认所标识的可能的欺诈活动时发出一个警报，其中，该多项数据馈送包括: 一项视频馈送、一项交易数据、以及一项意外重量数据； 一个与该计算机处理单元通信地联接的视频源，该视频源可操作用于生成放置在一个交易区的该物品的该视频馈送； 一个与该自助结账终端通信地联接的重量传感器，其中，该意外重量数据从该自助结账终端被传送至该计算机处理单元，获得该意外重量数据以标识从该重量传感器测量的该物品的重量是否符合一个预期重量公差；以及 通信地联接到该计算机处理单元上的该自助结账终端。15.如权利要求14所述的系统，进一步包括: 一个与该计算机处理单元通信地联接的人工确认终端，其中，该人工确认终端利用该视频馈送的至少一部分来验证该可能的欺诈活动。16.—种对自助结账终端处的丢失事故进行标识的方法，该方法是通过一个计算机处理单元操作的，该方法包括以下步骤: 获得一项视频馈送，其中，该视频馈送是从对在一个交易区处的一个物品进行监控的一个视频源中生成的，该视频馈送是在交易时间的至少一部分期间生成的； 基于所获得的该视频馈送通过由该计算机处理单元执行的视频分析来标识该丢失事故； 对该视频馈送进行修改，其中，该视频馈送被简化； 将该经修改的视频馈送传送至一个人工确认终端以执行人工确认； 从该人工确认终端接收一个人工确认响应； 基于该人工确认标识该丢失事故；以及 基于该视频分析和该人工确认响应发出一个警报。17.如权利要求16所述的方法，其中，所述获得一项视频馈送的步骤包括将该视频馈送的至少一部分存储到该计算机处理单元。18.一种对自助结账终端处的可能的欺诈活动进行验证的方法，该方法是通过一个计算机处理单元操作的，该方法包括以下步骤: 获得一项视频馈送，其中，该视频馈送是从在交易时间的至少一部分期间对一个物品进行监控的一个视频源生成的，该物品位于一个交易区处； 从该自助结账终端获得该物品的一项意外重量数据，一个重量传感器与该自助结账终端通信地联接，其中，该自助结账终端获得放置在一个装袋区上的该物品的该意外重量数据，获得该意外重量数据以标识从该重量传感器测量的该物品的重量是否符合一个预期重量公差； 对该视频馈送进行分析以通过执行视频分析来标识该可能的欺诈活动； 对该视频馈送进行修改，其中，该视频馈送被简化； 将该经修改的视频馈送传送至一个人工确认终端以执行人工确认； 从该人工确认终端接收一个人工确认响应； 基于该人工确认标识该可能的欺诈活动；以及 如果所分析的视频馈送、该意外重量数据、以及该人工确认响应中的所有确认该可能的欺诈活动，则发出一个警报。19.一种对自助结账终端处的可能的欺诈活动进行验证的方法，该方法是通过一个计算机处理单元操作的，该方法包括以下步骤: 从该自助结账终端接收一个物品的一项意外重量数据，重量传感器与该自助结账终端通信地联接，其中，该自助结账终端获得正放置在一个装袋区上的该物品的该意外重量数据； 基于该意外重量数据标识该可能的欺诈活动，其中，获得该意外重量数据以标识来自该重量传感器的该物品的重量是否符合一个预期重量公差； 对一项视频馈送进行修改，其中，该视频馈送被简化，其中，该视频馈送是从在该交易时间的至少一部分期间对该物品进行监控的一个视频源生成的，该物品位于该交易区处；将该经修改的视频馈送传送至一个人工确认终端以执行人工确认； 从该人工确认终端接收一个人工确认响应；以及 基于该人工确认验证该可能的欺诈活动。
【专利摘要】在此披露了一种在自助结账终端处发生的欺诈活动的验证方法。该方法通过用多项数据确认欺诈活动事故来对欺诈活动进行验证，该多项数据是通过监控自助结账终端的交易区和装袋区而生成的。可选地执行人工确认以验证机器标识的事故。
【IPC分类】G07G1/00, G07G3/00
【公开号】CN104885130
【申请号】CN201380067289
【发明人】乔舒亚·米格代尔, 马休·法罗, 玛莱·库杜
【申请人】乔舒亚·米格代尔, 马休·法罗, 玛莱·库杜
【公开日】2015年9月2日
【申请日】2013年12月23日
【公告号】EP2936461A1, US20140176719, WO2014100827A1
【专利说明】对自助结账终端处的欺诈活动的验证
[0001]相关申请的交叉引用
[0002]本申请是要求2012年12月21日提交的美国临时申请号61/740，858的利益的非临时申请。本申请通过引用结合了所发布的美国专利号7，631，808，该美国专利于2009年12月15日发布。
技术领域
[0003]本发明总体上涉及一种防止在自助结账终端发生欺诈活动的安全系统和方法。更具体地，一种用于对自助结账单元处的欺诈活动进行验证的方法和系统。
【背景技术】
[0004]自助结账正快速成为顾客对零售商品进行支付的既定方法。其对更短的线路、更快的销售以及增加的隐私的承诺正吸引着顾客。此外，不必为人工操作结账配备工作人员以及与减少的薪资费用相关联的财政节省正吸引着零售商。
[0005]另一方面，自助结账呈现出多个问题。可否认性的机会、简易和可能性允许某些顾客通过简单地不扫描物品或通过假装扫描物品困难来盗窃物品。因此，发生在自助结账的盗窃或欺诈活动经常会是人工操作的结账的盗窃和欺诈活动的若干倍。
[0006]相应地，自助结账经常采用各种防盗措施，这些措施利用在装袋区对输出的重量进行测量的重量传感器或称。如果在装袋区重量的增加不与物品的已知重量相当，则系统举起标记，并且交易停止。自助结账经常出错并且引起太多“误报”。此外，自助结账的防盗不足够全面，这允许顾客可以从自助结账进行盗窃的额外方式。
[0007]因此，需要一种可以减少可能在自助结账时发生的盗窃活动和对欺诈活动的误报警报的系统和验证过程。
【发明内容】
[0008]本申请的主题在某些情况下可能涉及互相关产品、特定问题的替代解决方案、和/或单个系统或物品的多次不同使用。
[0009]一方面，提供了一种对自助结账终端处的可能的相关活动进行验证的方法。该方法是通过计算机处理单元操作的。获得从在交易区在交易时间的至少一部分期间对物品进行监控的视频源生成的视频馈送。该计算机处理单元从数据源获得数据馈送，通过在该交易区在该交易时间的至少一部分期间监控该物品在该数据源生成该数据馈送。然后，对该视频馈送和该数据馈送进行分析以标识该可能的相关活动。然后，当所分析的视频馈送和所分析的数据馈送两者确认了该可能的相关活动时，发出警报。
[0010]另一方面，提供了一种对自助结账终端处的可能的欺诈活动进行验证的方法。计算机处理单元从该自助结账终端接收物品的意外重量数据，在该自助结账终端，重量传感器与该自助结账终端联接以获得放置在装袋区上的该物品的该意外重量数据。接下来，基于该意外重量数据标识该可能的欺诈活动。获得该意外重量数据以标识来自该重量传感器的该物品是否符合预期重量公差。该计算机处理单元进一步基于数据馈送标识该可能的欺诈活动，其中，该数据馈送是从对交易区处的该物品进行监控的数据源中生成的。
[0011]在又另一方面，提供了一种用于对自助结账终端处的可能的欺诈活动进行验证的系统。该系统包括计算机处理单元，该计算机处理单元可操作用于对在交易时间的至少一部分期间生成的多项数据馈送进行分析。该多项数据馈送是通过对在该自助结账终端交易的物品进行监控而生成的，并且该计算机处理单元能够使该多项数据馈送中的每项数据馈送与和该物品相关联的预设数据关联以标识该可能的欺诈活动。进一步地，该计算机处理单元被配置成用于当该多项数据馈送中的至少两项数据馈送确认了所标识的可能的欺诈活动时发出警报。该多项数据馈送包括视频馈送、交易数据、以及意外重量数据。该系统进一步包括与该计算机处理单元通信地联接的视频源，该视频源生成该视频馈送。重量传感器与该自助结账终端联接，该重量传感器将该意外重量数据传送至该计算机处理单元。该自助结账终端通信地联接到该计算机处理单元上。
[0012]在进一步的方面，提供了一种对自助结账终端处的丢失事故进行标识的方法。计算机处理单元获得视频馈送，其中，该视频馈送是从对在交易区的物品进行监控的视频源生成的。该视频馈送是在交易时间的至少一部分期间生成的。该计算机处理单元基于所获得的视频馈送通过视频分析来标识丢失事故，并且然后对该视频馈送进行修改以简化该视频馈送。经修改的视频馈送被传送至人工确认终端以执行人工确认。然后，接收人工确认响应以基于该人工确认来标识该丢失事故。基于该视频分析和该人工确认响应发出警报。
【附图说明】
[0013]图1提供了对自助结账终端处的可能的欺诈活动进行验证的方法的实施例。
[0014]图2提供了对自助结账终端处的丢失事故进行标识的方法的实施例。
[0015]图3提供了被发送以供进行人工确认的视频馈送修改的实施例。
[0016]图4提供了人工确认过程的实施例。
[0017]图5提供了用于对自助结账终端处的可能的欺诈活动进行验证的系统的实施例。
【具体实施方式】
[0018]以下结合附图给出的详细描述旨在作为对本发明的目前优选的实施例的描述并且不代表本发明可以被构造和/或利用的仅有形式。该描述结合所展示的实施例阐述了用于构造和操作本发明的功能和步骤的顺序。
[0019]所发布的美国专利7，631，808详细描述了视频分析和交易数据分析的过程。如此，所发布的美国专利7，631，808通过引用结合于此。邀请审查员提供前述所发布的专利的电子副本。
[0020]在其本质上，美国专利7，631，808描述了用于检测交易结果(如与顾客在交易终端进行的物品的交易(例如，购买、退款、无效等等)有关的可疑活动)的方法和设备。该系统获得与交易数据相关联的视频数据。可以例如从聚焦于超市或其他零售店中的现金出纳机结账或其他交易区的高架摄像机获得视频数据。该系统应用被披露作为该系统的一部分的自动化机器视频分析算法以分析视频数据的至少一部分，从而获得在与交易区相关联的交易的至少一部分有关的至少一个视频参数。举例来讲，该系统可以对视频数据进行分析以追踪在交易区中的交易时所涉及到的物品(例如，标识其存在)。本过程可以从视频数据分析中自动地标识交易时所涉及到的物品的存在。这可以例如如下来完成:自动地检测交易区中的物品活动和/或检测交易区中的操作员活动。对物品存在的检测可以包括检测物品从交易区中的相关区域被移除和/或检测物品被引入到交易区中的相关区域中。
[0021]与交易数据相比较，使用视频分析的组合，该系统可以确定在视频数据的分析时所标识的物品的存在在交易数据中是否具有相应的存在，并且如果不存在，则标识可疑活动。举例来讲，对于每个检测器而言，该系统可以将那个检测器的检测事件集合与交易数据的至少一部分相比较以标识那个检测器从该交易数据部分中所指示的多个物品中检测的多个物品的至少一处明显的差异。如交易计数(例如，扫描计数)等交易数据或交易物品身份因此表示物品的存在或(针对整个交易)所扫描的物品的数量，而来自视频分析的检测事件数据或视频计数表示操作员引起其移动通过交易区的物品的存在(或数量)。在此披露了许多其他实施例，在详细描述章节中提供了这些实施例的细节。
[0022]总体上，本发明涉及一种对在自助结账交易期间顾客可能进行的可能的欺诈活动进行验证的方法。本发明通过将自助结账操作与用于确认自助结账终端所标识的可能的欺诈活动的附加验证措施整合增强了自助结账操作的操作。通过将以下数据馈送中的一项或多项数据馈送组合促进了该增强:视频分析、交易数据整合、重量整合、和可选的人工确认过程。该组合保证了自助结账终端最初标识的可能的欺诈活动并且验证了可能的欺诈活动的合法性。进而，本发明减少了给予可能的欺诈活动的误报警报，其中，警报仅基于单次验证而被发出。
[0023]可能的欺诈活动的示例可以包括但不限于当在自助结账终端处的顾客将没有交易的物品放置在装袋区中时；代替正在购买的物品将另一个物品放置在装袋区中；在没有将物品交易通过自助结账终端的情况下，将物品放置在装袋区之外，如放置在地板、输入区、或不是特定指定用于收集购买的物品的其他区上；以及在交易结束后拿走未购买的物口口 ；寺寺O
[0024]误报的欺诈活动的示例可以包括但不限于:当非商品物品(如钱包、手机、雨伞、外套等)放置在 装袋区中时；免费商品(如促销物品)放置在装袋区；商品物品与当前交易无关联，如之前从同一商店或从另一商店购买的物品放置在装袋区中；部分消耗物品、其重量随老化而变化的商品物品、或其他类型的正确扫描引起的重量差异的触发；斜靠或坐在装袋区/输出区称上引起意外重量增加；可重复使用的袋的使用；物品从输出区掉落等等。
[0025]在此设想的视频源可以包括但不限于视频摄像机，如模拟摄像机和IP摄像机等等；可以提供任何时长的视频馈送的装置，如DVR ;具有摄像机的便携式计算装置，如平板计算机、膝上型计算机；等等。
[0026]在此设想的数据馈送可以用以下格式，包括但不限于:XML、JSON、CSV、二进制；通过任何连接类型:串行、以太网等；通过任何协议:UDP、TCP等等。
[0027]在一个实施例中，可以验证在自助结账终端的可能的相关活动。在此披露的方法和系统可以不局限于标识和验证可能的欺诈活动。可能的相关活动可以是在自助结账终端处的不是欺诈活动的活动。可能的相关活动可以包括但不限于:穿过自助结账终端的多个物品之间的延时、自助结账终端发生的机械误差、在自助结账终端收据打印卡纸、顾客求救呼号等等。不是可能的欺诈活动的可能的相关活动的示例可能不需要干预或警报，因此可以实现验证过程而不发出干预或警报。
[0028]提供了一种用于实现所披露的对自助结账终端处的可能的欺诈活动进行验证的系统。该系统可以包括计算机处理单元(如数字视频分析仪(DVA))、视频源、重量传感器、以及自助结账终端。
[0029]该计算机处理单元可以可操作用于对通过监控在该自助结账终端被扫描的物品而生成的数据馈送进行分析。该数据馈送可以包括视频馈送、交易数据、以及意外重量数据。该数据馈送可以由该计算机处理单元获得以标识该可能的欺诈活动。可以基于通过该数据馈送的另一种类型进行的分析来进一步验证所标识的可能的欺诈活动。可以从对放置在交易区的物品进行监控的该视频源获得该视频馈送。该意外重量数据可以是对从该重量传感器测量的总量进行分析的结果。该重量传感器测量放置在装袋区的该物品的重量。当该物品的重量不符合预期重量公差时，可以获得该意外重量数据。
[0030]在一个实施例中，该预期重量公差可以是分配给该物品的可接受的重量范围。例如，可以基于苹果的平均重量给苹果分配该预期重量公差。
[0031 ] 在另一个实施例中，该意外重量数据可以指示该物品的重量在该预期重量公差所指定的可接受的重量范围之外。如果该物品的重量在该预期重量公差之外，则该意外重量数据可以标识该可能的欺诈活动。
[0032]在又另一个实施例中，该意外重量数据可以指示该物品的重量在该预期重量公差之内，从而否认该可能的欺诈活动。
[0033]在又另一个实施例中，可以不给该物品分配该预期重量公差。在本实施例中，该意外重量数据可以通过指示该物品没有现有的重量公差来标识该可能的欺诈活动，因此，该物品的重量不符合该预期重量公差。
[0034]在进一步的实施例中，该意外重量数据可以指示从该重量传感器测量的该物品的重量与该预期重量公差之间的差值。例如，如果该物品的重量较重并且在该预期重量公差之外，则该意外重量数据可以指示这种差值。该预期重量公差还可以是单个数字，并且该意外重量数据可以用类似的方式指示该差值。
[0035]用于实现所披露的对自助结账终端处的可能的欺诈活动进行验证的方法的系统可以进一步包括用于执行人工确认的人工确认终端。该人工确认终端可以对该视频馈送的一部分进行分析以标识该可能的欺诈活动。
[0036]在一个实施例中，该计算机处理单元可以可操作用于对该视频馈送进行修改，其中，该视频馈送可以被简化。对该视频的修改简化了该视频馈送，这样使得由视频分析师所操作的该人工确认终端可以通过人工确认实时处理经修改的视频馈送。本披露中进一步披露了详细的人工确认过程。
[0037]简化该视频馈送可以和将该视频馈送剪辑成短时片段一样简单，以便仅审查该视频馈送的一部分。它还可以涉及到图像处理以便促进人工确认。它还可以涉及到从该视频馈送中拍摄快照。为了审查目的的一致性，它还可以包括对该视频馈送进行旋转、缩放、以及执行其他仿射变换以便调整该视频的外观。所有这些有待被理解成对该视频馈送的简化。
[0038]每个在自助结账终端被交易的物品可以生成多项数据馈送。该可能的欺诈活动可以首先被该多项数据馈送之一触发，然后被验证。典型地，该自助结账终端具有可以初始地标记该可能的欺诈活动的内置机构。为了保证所初始标记的可能的欺诈活动需要警报或干预，该多项数据馈送中的不止一项数据馈送可以用于验证该可能的欺诈活动、确认或否认该可能的欺诈活动。该多项数据馈送中的每项数据馈送可以被传送至与该自助结账终端进行电子通信的计算机处理单元。可以与预设数据相比较来分析该多项数据馈送中的每项数据馈送。
[0039]该预设数据是指分配给在商店销售的每个物品的预期数据馈送。该预设数据的示例可以包括但不限于该预期重量公差、该物品的预期形状、该物品的预期计数次数等等。
[0040]在一个实施例中，可以利用重量传感器验证该可能的欺诈活动。该重量传感器可以电联接到该自助结账终端的装袋区，从而提供放置在该装袋区中的物品的重量。所提供的该物品的重量可以与该物品的该预期重量公差进行比较。
[0041]该预期重量公差可以被分配给在商店销售的每个物品，从而设置可以接受的公差水平。当该物品的重量超过或下降到该物品的该预期重量公差以下时，可以将该物品标记为该可能的欺诈活动。可以给物品分配不止一个预期重量公差。例如，在买一送一活动期间，该物品可能伴随有派送物品。
[0042]该预期重量公差可以用于捕获放置在该装袋区中的物品，在该装袋区，该物品不是在商店中分类的物品。在这种情况下，该预期重量公差可以被设置成零作为默认，以标记具有重量、不是商店中分类的物品的物品。
[0043]可以相应地如在此披露那样生成该意外重量数据。可以基于该意外重量数据标识该可能的欺诈活动，其中，当来自该重量传感器的物品的重量不符合该预期重量公差时，获得该意外重量数据。
[0044]在另一个实施例中，视频分析可以用于验证该可能的欺诈活动。视频馈送可以由对交易区处的活动进行监控的视频源生成。该交易区不局限于该自助结账终端的某一区段，而是可以包括该自助结账终端的周围区。可以通过该计算机处理单元进行该视频分析，其中，逐帧分析该视频馈送以标识该可能的欺诈活动。逐帧分析可以标识没有在商店销售的物品，在这种情况下，这种活动可能不是该可能的欺诈活动。在被放置在该装袋区之前和之后的该物品的该数据馈送可以被分析以验证该可能的欺诈活动。不同的视频分析技术是可供使用的并且与本发明有关的视频分析方法和过程通过引用结合于此。
[0045]在又另一个实施例中，交易数据可以与该视频分析关联以便验证该可能的欺诈活动。通过前述通过引入的结合，还在此提供了这种方法和过程。
[0046]可以对在自助结账终端发生的可能的欺诈活动进行验证以确定是否需要干预。干预可以是以电子方式给予该自助结账终端的警报的形式，如使该自助结账终端停止。可以给予自助结账服务员警报，其中，该自助结账服务员可以继续进行干预。
[0047]在一个实施例中，如果基于该多项数据馈送中的两项数据馈送确认了该可能的欺诈活动，则可以发出该警报。
[0048]在另一个实施例中，如果该多项数据馈送之一所标识的该可能的欺诈活动指示误报情况，则可以拒绝发出该警报。
[0049]在又另一个实施例中，即使该多项数据馈送中的每项数据馈送指示不同的结果，则可以发出该警报。在本实施例中，可以进行人工确认以进一步验证该可能的欺诈活动。举例来讲，基于该视频馈送可以将一捆香蕉作为单个香蕉来验证，但取决于该捆香蕉中的香蕉的数量，该捆香蕉可能在该预期重量公差之外。在这种情况下，在发出该警报之前，人工确认可以进一步验证该可能的欺诈活动。
[0050]人工确认可以进一步验证该可能的欺诈活动。人工确认可以利用该视频源所产生的该视频馈送。可以对该视频馈送进行修改，其中，该视频馈送被简化，然后，经修改的视频馈送可以从该计算机处理单元被发送至人工确认终端，接下来验证经修改的视频是 否确认该可能的欺诈活动。在其他机器支持的验证装置验证该可能的欺诈活动是困难和/或困惑的情况下，可能发现人工确认是有用的。人工确认终端可以由视频分析师来操作。
[0051]在一个实施例中，可以作为最后的步骤来进行人工确认以确认正在被该多项数据馈送验证的该可能的欺诈活动。
[0052]在此披露的对该视频馈送的修改可以包括可以用于促进人工确认的图像分析和处理方法。举非限制性示例来讲，这种修改可以包括但不限于突出一张或多张图像之间的差别以显示差异区域；对影像进行剪切或屏蔽以消除令人分心的细节和将注意力聚焦在场景的相关区；旋转影像并使其经历变形(仿射和非线性两种，例如，旋转、拉伸、剪切、镜像、消除畸变等)以将影像放到一致的规范视野中；突出图像中的物品被引入、移除、操纵或移动的区域；突出光流；突出运动轨迹；突出之前确认的商品物品；覆盖交易日志和自助结账事件信息(例如，重量传感器信息、扫描仪信息、跳跃装袋按钮、顾客存在检测信息、电子物品安全标签解除激活、标签移除等)；突出针对特定活动指定的特定图像区域(例如，输入区、输出区等)；等。
[0053]可以用人工确认实时进行该可能的欺诈活动的验证。
[0054]人工确认可以被考虑用于弥补该可能的欺诈活动的非人工支持验证方法的不足。例如，调谐自动化验证系统中的自动化参数将给予该系统特定的误报率和正确率。例如，如果这种系统被调谐而产生50%的正确率，则误报率会太高。在这种情况下，将自动化方法与特定的人工确认组合可以产生能够保持所期望的正确率同时将误报率降低到更可管理的点的复合系统。
[0055]在一个实施例中，可以利用web服务来处理人工确认。经修改的视频馈送可以利用可以接入互联网连接的web服务通过网络浏览器被传达。进行人工确认的分析师可以利用web应用来审查和验证从该计算机处理单元被发送出来的该警报。web应用可以通过长轮询机制请求web服务以便创建用于验证/确认的事件驱动界面。如果web服务中没有确认工作，则长轮询机制最终会超时并且立即被web应用重新建立。如果工作是可供使用的，则长轮询调用带着工作细节而返回。web应用可以对支持该工作的web服务做出后续web调用。同时，当DVA具有需要人工确认的工作时，它将对web服务调用工作细节。本调用可能不立即返回。
[0056]在一个实施例中，该工作可以转到web服务工作队列，该工作队列将会将该作业赋予等待web应用客户端。一旦完成了该工作，于是人工确认结果将被传递到等待计算机处理单元/DVA调用。
[0057]丢失事故可以通过视频分析来验证。在此设想的丢失事故可以包括但不限于当顾客忽略了购物车中的物品时、盗窃活动等等。当该物品没有被放置在该装袋区时，丢失事故可能发生，从而使该重量传感器不能够执行其功能。丢失事故可以经历人工确认以验证丢失事故是否真地发生。
[0058]在一个实施例中，可以通过获得从对交易区处的物品进行监控的该视频源生成的视频馈送来验证在自助结账终端处的丢失事故。该视频馈送可以是在交易时间期间该物品的部分视频馈送。该交易时间指示从该物品被引入到该自助结账终端到成功交易的支付的一段时间。可以通过在该人工确认终端执行的人工确认来验证该计算机处理单元进行的该视频馈送的视频分析。如果确认了丢失事故，则可以发出警报或干预。
[0059]现在转至图1，描述了对自助结账终端处的可能的欺诈活动进行验证的方法的实施例。首先，该自助结账终端标记可能的干预101;如果该自助结账终端处的事故是欺诈活动，则可能需要干预或警报。该自助结账终端可以最初从该自助结账终端获得通过监控正在被交易的物品而生成的数据馈送，并且标识该可能的欺诈活动。该自助结账终端请求所标识的可能的欺诈活动的确认102。中央处理单元可以利用多项数据馈送来处理103该事故并且确定是否需要干预。可以分析该多项数据以验证该可能的欺诈活动被确认还是被否认。可以可选地应用人工确认以便确认或否认该可能的欺诈活动108。
[0060]如果对该多项数据中的一项或多项的分析确认104该可能的欺诈活动的确是欺诈，则该自助结账终端可以请求干预106，其中，可以用出现在该自助结账单元上的警报或被发送至自助结账服务员的警报的形式给予该干预，通知对在该自助结账终端处处理的交易进行干预。
[0061]如果对该多项数据中的一项或多项的分析否认105该可能的欺诈活动，则可以忽视该事故并且将不进行107干预。
[0062]图2示出了对自助结账终端处的丢失事故进行标识的方法的实施例。当在该自助结账终端发生该丢失事故201时，该中央处理单元进行视觉分析202以验证该丢失事故被确认还是错误的。该中央处理单元从该视觉分析中标识该丢失事故203并且对该自助结账单元发出警报204，由此请求干预。可以可选地应用人工确认206以便确认或否认针对该丢失事故进行的视觉分析。一旦确认了该丢失事故就向该自助结账单元给予警报，接下来可以请求干预205。
[0063]图3示出了被发送以供视频分析师进行人工确认的视频馈送修改的实施例。图3示出了被扫描的物品的经修改的视频馈送。首先，该图示出了在扫描时间拍摄的快照，接下来是在装袋时间拍摄的快照。通过使快照差别化来应用突出以修改该视频馈送，其中，突出指示该装袋区中的相关变化。然后，通过阈值化(thresholding)来获得所突出的视频馈送的轮廓，接下来是形态学操作和基于二进制大对象的连接分量分析以简化该视频馈送，从而显示被添加到该装袋区的单个物品。
[0064]图4提供了人工确认的实施例。可以首先如下进行人工确认:接收人工确认请求402。在发送出干预警报之前，可以由DVA 400或该中央处理单元发起401人工确认。来自该视频源的视频馈送可以被修改和发送至web服务404。然后，工作创建器403将经修改的视频馈送(图像T-L0G)排队在工作队列406。一旦人工确认工作被发送407以便被处理，视频分析师就使用人工确认终端408或web应用(WA)来进行对经修改的视频馈送的人工确认。一旦完成了 405人工确认工作，人工确认的响应409被发送回到DVA。
[0065]图5示出了用于对自助结账终端处的可能的欺诈活动进行验证的系统的实施例。计算机处理单元509与自助结账终端508进行通信。自助结账终端508连接性地联接到对放置在装袋区505中的多个物品的重量进行测量的重量传感器506上。与计算机处理单元509进行电子通信的视频摄像机507可以监控交易区501、504上的活动，该视频摄像机还可以监控购物车502和顾客503 ο在本实施例中，视频馈送是由该视频摄像机生成的并且被传送至该中央处理单元。该中央处理单元可以基于该视频馈送标识该可能的欺诈活动。重量传感器还可以用于本系统中以验证该可能的欺诈活动。意外重量数据可以基于该多个物品中的每个物品的重量以及与该多个物品中的每个物品相对应的预期重量公差来标识该可能的欺诈活动。该计算机处理单元可以基于该意外重量数据授权给予警报/干预。
[0066]虽然在优选或具体实施例中以示例方式展示了本发明的若干变化，但明显的是，在本发明的精神和范围、或其创造性概念内可以发展进一步的实施例。然而，应明确理解的是，这种修改和改编在本发明的精神和范围内，并且是包容性的，而不局限于以下如所阐述的所附权利要求书。
【主权项】
1.一种对自助结账终端处的可能的相关活动进行验证的方法，该方法是通过一个计算机处理单元操作的，该方法包括以下步骤: 获得从一个视频源生成的一项视频馈送，其中，该视频馈送是通过在交易时间的至少一部分期间监控一个物品而生成的，该物品位于一个交易区处； 从一个数据源获得一项数据馈送，其中，该数据馈送是通过在该交易时间的至少一部分期间监控该物品而生成的，该物品位于该交易区处； 对该视频馈送进行分析以标识该可能的相关活动； 对该数据馈送进行分析以标识该可能的相关活动；以及 如果所分析的视频馈送和所分析的数据馈送两者确认该可能的相关活动，则发出一个警报。2.如权利要求1所述的方法，其中，该可能的相关活动是一项可能的欺诈活动。3.如权利要求2所述的方法，进一步包括以下步骤: 对该视频馈送进行修改，其中，该视频馈送被简化； 将该经修改的视频馈送传送至一个人工确认终端以执行人 工确认；以及 从该人工确认终端接收一个人工确认响应以验证该警报。4.如权利要求2所述的方法，其中，所述从一个数据源获得一项数据馈送的步骤包括以下各项中的至少一项: 从一项交易数据中获得该数据馈送，其中，该交易数据是从该自助结账终端生成的；以及 从一个重量传感器获得该数据馈送，其中，该重量传感器检测放置在一个装袋区上的该物品的重量。5.如权利要求4所述的方法，其中，所述通过从一个重量传感器获得该数据馈送对该数据馈送进行分析以标识该可能的欺诈活动的步骤包括: 从该自助结账终端接收该物品的一项意外重量数据，该重量传感器与该自助结账终端通信地联接，其中，该自助结账终端获得正放置在一个装袋区上的该物品的该意外重量数据；以及 基于该意外重量数据标识该可能的欺诈活动，其中，获得该意外重量数据以标识来自该重量传感器的该物品的重量是否符合一个预期重量公差。6.一种对自助结账终端处的可能的欺诈活动进行验证的方法，该方法是通过一个计算机处理单元操作的，该方法包括以下步骤: 从该自助结账终端接收一个物品的一项意外重量数据，该重量传感器与该自助结账终端通信地联接，其中，该自助结账终端获得正放置在一个装袋区上的该物品的该意外重量数据； 基于该意外重量数据标识该可能的欺诈活动，其中，获得该意外重量数据以标识来自该重量传感器的该物品是否符合一个预期重量公差；以及 基于一项数据馈送标识该可能的欺诈活动，其中，该数据馈送是从对在一个交易区处的该物品进行监控的一个数据源中生成的，该数据馈送是在交易时间的至少一部分期间生成的。7.如权利要求6所述的方法，进一步包括以下步骤:使基于该数据馈送的所标识的可能的欺诈行为与基于该意外重量数据的所标识的可能的欺诈活动相关联以验证该可能的欺诈活动。8.如权利要求6所述的方法，进一步包括以下步骤: 对一项视频馈送进行修改，其中，该视频馈送被简化，其中，该视频馈送是从在该交易时间的至少一部分期间对该物品进行监控的一个视频源生成的，该物品位于该交易区处； 将该经修改的视频馈送传送至一个人工确认终端以执行人工确认；以及 从该人工确认终端接收一个人工确认响应以验证该可能的欺诈活动。9.如权利要求7所述的方法，其中，所述基于一项数据馈送标识该可能的欺诈活动的步骤包括以下各项中的至少一项: 基于视频分析标识该可能的欺诈活动，该视频分析是通过对一项视频馈送进行分析的该计算机处理单元执行的，其中，该视频馈送是从一个对该物品进行监控的视频源生成的；以及 基于一项交易数据标识该可能的欺诈活动，其中，该交易数据是从该自助结账终端生成的。10.如权利要求7所述的方法，进一步包括以下步骤: 如果基于该数据馈送的所标识的可能的欺诈活动和基于该意外重量数据的所标识的可能的欺诈活动两者确认该可能的欺诈活动，则发出一个警报。11.如权利要求7所述的方法，进一步包括以下步骤: 如果基于该数据馈送的所标识的可能的欺诈活动和基于该意外重量数据的所标识的可能的欺诈活动中的至少一个欺诈活动没有确认该可能的欺诈活动，则拒绝发出一个警报。12.如权利要求8所述的方法，进一步包括以下步骤: 如果该可能的欺诈活动通过以下各项中的至少一项被确认，则发出一个警报: 该人工确认响应； 基于该数据馈送的所标识的可能的欺诈活动；以及 基于该意外重量差的所标识的可能的欺诈活动。13.如权利要求8所述的方法，进一步包括以下步骤:如果对基于该数据馈送、该意外重量差、以及该人工确认响应的所标识的可能的欺诈活动的组合分析确认该可能的欺诈活动，则发出一个警报。14.一种对自助结账终端处的可能的欺诈活动进行验证的系统，该系统包括: 一个计算机处理单元，该计算机处理单元可操作用于对在交易时间的至少一部分期间生成的多项数据馈送进行分析，该多项数据馈送是通过监控在该自助结账终端处交易的一个物品生成的，该计算机处理单元可操作用于使该多项数据馈送中的每项数据馈送与一项和该物品相关联的预设数据关联以标识该可能的欺诈活动，该计算机处理单元被配置成用于当该多项数据馈送中的至少两项数据馈送确认所标识的可能的欺诈活动时发出一个警报，其中，该多项数据馈送包括: 一项视频馈送、一项交易数据、以及一项意外重量数据； 一个与该计算机处理单元通信地联接的视频源，该视频源可操作用于生成放置在一个交易区的该物品的该视频馈送； 一个与该自助结账终端通信地联接的重量传感器，其中，该意外重量数据从该自助结账终端被传送至该计算机处理单元，获得该意外重量数据以标识从该重量传感器测量的该物品的重量是否符合一个预期重量公差；以及 通信地联接到该计算机处理单元上的该自助结账终端。15.如权利要求14所述的系统，进一步包括: 一个与该计算机处理单元通信地联接的人工确认终端，其中，该人工确认终端利用该视频馈送的至少一部分来验证该可能的欺诈活动。16.—种对自助结账终端处的丢失事故进行标识的方法，该方法是通过一个计算机处理单元操作的，该方法包括以下步骤: 获得一项视频馈送，其中，该视频馈送是从对在一个交易区处的一个物品进行监控的一个视频源中生成的，该视频馈送是在交易时间的至少一部分期间生成的； 基于所获得的该视频馈送通过由该计算机处理单元执行的视频分析来标识该丢失事故； 对该视频馈送进行修改，其中，该视频馈送被简化； 将该经修改的视频馈送传送至一个人工确认终端以执行人工确认； 从该人工确认终端接收一个人工确认响应； 基于该人工确认标识该丢失事故；以及 基于该视频分析和该人工确认响应发出一个警报。17.如权利要求16所述的方法，其中，所述获得一项视频馈送的步骤包括将该视频馈送的至少一部分存储到该计算机处理单元。18.一种对自助结账终端处的可能的欺诈活动进行验证的方法，该方法是通过一个计算机处理单元操作的，该方法包括以下步骤: 获得一项视频馈送，其中，该视频馈送是从在交易时间的至少一部分期间对一个物品进行监控的一个视频源生成的，该物品位于一个交易区处； 从该自助结账终端获得该物品的一项意外重量数据，一个重量传感器与该自助结账终端通信地联接，其中，该自助结账终端获得放置在一个装袋区上的该物品的该意外重量数据，获得该意外重量数据以标识从该重量传感器测量的该物品的重量是否符合一个预期重量公差； 对该视频馈送进行分析以通过执行视频分析来标识该可能的欺诈活动； 对该视频馈送进行修改，其中，该视频馈送被简化； 将该经修改的视频馈送传送至一个人工确认终端以执行人工确认； 从该人工确认终端接收一个人工确认响应； 基于该人工确认标识该可能的欺诈活动；以及 如果所分析的视频馈送、该意外重量数据、以及该人工确认响应中的所有确认该可能的欺诈活动，则发出一个警报。19.一种对自助结账终端处的可能的欺诈活动进行验证的方法，该方法是通过一个计算机处理单元操作的，该方法包括以下步骤: 从该自助结账终端接收一个物品的一项意外重量数据，重量传感器与该自助结账终端通信地联接，其中，该自助结账终端获得正放置在一个装袋区上的该物品的该意外重量数据； 基于该意外重量数据标识该可能的欺诈活动，其中，获得该意外重量数据以标识来自该重量传感器的该物品的重量是否符合一个预期重量公差； 对一项视频馈送进行修改，其中，该视频馈送被简化，其中，该视频馈送是从在该交易时间的至少一部分期间对该物品进行监控的一个视频源生成的，该物品位于该交易区处；将该经修改的视频馈送传送至一个人工确认终端以执行人工确认； 从该人工确认终端接收一个人工确认响应；以及 基于该人工确认验证该可能的欺诈活动。
【专利摘要】在此披露了一种在自助结账终端处发生的欺诈活动的验证方法。该方法通过用多项数据确认欺诈活动事故来对欺诈活动进行验证，该多项数据是通过监控自助结账终端的交易区和装袋区而生成的。可选地执行人工确认以验证机器标识的事故。
【IPC分类】G07G1/00, G07G3/00
【公开号】CN104885130
【申请号】CN201380067289
【发明人】乔舒亚·米格代尔, 马休·法罗, 玛莱·库杜
【申请人】乔舒亚·米格代尔, 马休·法罗, 玛莱·库杜
【公开日】2015年9月2日
【申请日】2013年12月23日
【公告号】EP2936461A1, US20140176719, WO2014100827A1
最新回复(0)