邮递物分拣处理系统的制作方法
【专利说明】邮递物分拣处理系统
[0001]本申请以2014年3月6日提出的在先日本专利申请第2014-044298号作为基础并享有优先权,并且以引用方式将优先权文件的所有内容包含在本申请中。
技术领域
[0002]本发明的实施方式涉及邮递物分拣处理系统。
【背景技术】
[0003]以往,所利用的邮递物分拣处理系统,从拍摄邮递物而获得的图像识别文字,从识别出的文字来确定邮递目的地的地址,并基于确定的地址自动分拣邮递物。但是,当系统调整不足时,文字识别处理不适当,从而有所确定的地址不符合邮递目的地地址的情况。
【发明内容】
[0004]本发明的目的在于提供一种可计算出用于调整自动识别邮递目的地的系统所需的信息的邮递物分拣处理系统。
[0005]实施方式的邮递物分拣处理系统包括图像取得部、输入部、识别部、图像处理部、关联处理部以及判断部。图像取得部取得已拍摄的邮递物的拍摄图像。输入部接收操作者的操作输入。识别部基于由图像取得部取得的拍摄图像识别拍摄图像中所含有的可识别的表意信息。图像处理部基于由识别部识别的表意信息提取候选邮递目的地区域,并按照符合邮递目的地区域的可能性确定优先顺序。当满足规定条件时,关联处理部基于最优先顺序的候选邮递目的地区域中所含有的信息来处理邮递物,当不满足规定条件时,关联处理部基于由输入部所接收的通过操作者的操作输入而被选择的候选邮递目的地区域中所含有的信息,进行确定邮递物的邮递目的地的处理,同时,使被图像处理部确定为高优先顺序的候选邮递目的地区域与输入部所接收的通过操作者的操作输入而被选择的候选邮递目的地区域相关联地存储在存储部中。判断部参照存储部判断存储在存储部中的、被图像处理部确定为高优先顺序的候选邮递目的地区域与通过操作者的操作输入而被选择的候选邮递目的地区域是否一致,并输出判断结果。
[0006]根据上述结构的邮递物分拣处理系统,能够计算出用于调整自动识别邮递目的地的系统所需的信息。
【附图说明】
[0007]图1是示出实施方式的邮递物分拣处理系统的功能结构的示例的示意图。
[0008]图2是示出实施方式涉及的分拣处理的一示例的流程图。
[0009]图3是用于说明存储在存储部中的信息的示意图。
[0010]图4是示出无法确定分拣目的地时显示在图像显示部上的界面显示画面的一示例的示意图。
[0011]图5是示出区域A2被操作者选择从而放大显示区域A2的界面显示画面的一示例的示意图。
[0012]图6是对应于由操作者选择的候选邮递目的地区域且存储在区域选择信息存储部中的信息的一示例的示意图。
[0013]图7是示出实施方式涉及的诊断处理的一示例的流程图。
[0014]图8是示出显示在警告显示终端的警告显示部上的、表示判断部的判断结果的界面显示画面的一示例的示意图。
[0015]图9是示出邮递物分拣处理系统的其他构成例的示意图。
[0016]图10是示出变形例涉及的处理步骤的一示例的流程图。
【具体实施方式】
[0017]下面,参照【附图说明】实施方式的邮递物分拣处理系统。图1是示出实施方式的邮递物分拣处理系统10的功能结构的示例的示意图。图1所示的邮递物分拣处理系统10是将邮递物21按照邮递目的地进行分拣的系统。例如,邮递物21是以送货上门的方式配送的邮递物。邮递物21经过由寄件人带来邮递物的初次接收地点后收集到邮递物分拣中心。在邮递物分拣中心,邮递人员将邮递物21装载于输送机、辊子等搬运机构上,邮递物21被搬运至对应于邮递目的地的分拣箱中。将邮递物21搬运至对应于邮递目的地的分拣箱中的过程称为分拣处理。
[0018]在图1所示的示例中,分别贴有记载着邮递目的地信息的票单20-1、20-2、20-3的邮递物21-1、21-2、21-3通过传送带70被搬运至对应于各自邮递目的地的分拣箱中。下面将票单20-1、20-2、20-3统称为票单20,并且,将邮递物21-1、21_2、21_3统称为邮递物21。在以下的说明中,有时将分拣箱称为分拣目的地。
[0019]图1示出在邮递物21上贴有记载着邮递目的地信息的票单20的示例,但是也可以在邮递物21上粘附记载着邮递目的地信息的标签,也可以在邮递物21上直接记载或打印邮递目的地信息。即、邮递目的地信息作为表示在邮递物21上的表意信息,只要与作为处理对象物的邮递物21相对应即可。此外,记载在票单20上的邮递目的地信息,也可以是表示地址等的文字信息,也可以是将用于表示邮递目的地的识别信息(例如数字串)进行编码化而获得的符号信息。符号信息例如是条形码等。
[0020]邮递物分拣处理系统10例如具备多个扫描仪50、读取处理部300、判断处理部400、图像显示终端100、警告显示终端500、存储部200以及搬运部60。
[0021]多个扫描仪50拍摄到达至规定拍摄位置的邮递物21上贴有的票单20,并输出图像(图像数据)。扫描仪50例如是能够以高分辨率进行拍摄的线性扫描方式的扫描仪。多个扫描仪50设置在能够从彼此不同的角度对邮递物21进行拍摄的位置上。例如,多个扫描仪50分别设置在能够拍摄邮递物21的上表面、四个侧面的位置上。此外,扫描仪50例如也可以是一次能够拍摄规定平面区域的摄像机。
[0022]搬运部60具备传送带70以及用于驱动传送带70的搬运控制部80。在搬运部60中,基于搬运控制部80输出的信号驱动传送带70。由此,传送带70移动装载于其上的邮递物21。搬运部60将邮递物21搬运至多个分拣箱中对应于读取处理部300或判断处理部400的处理结果的分拣箱中。搬运控制部80控制搬运部60的搬运状态。例如,搬运控制部80控制传送带70的速度以及邮递物21搬运至分拣箱中的路径等。
[0023]图像显示终端100具备图像显示部110与第一输入部120。第一输入部120是输入部。图像显示部110基于读取处理部300输出的信号,显示由读取处理部300从扫描仪50读取的信息。此外,第一输入部120是用于接收操作输入的装置,该操作输入是对显示在图像显示部110上的信息的一部分进行选择、对所显示信息的一部分指示规定处理。第一输入部120将对应于所接收的操作输入的信息输出至读取处理部300。
[0024]邮递物分拣处理系统10的读取处理部300以及判断处理部400具备中央处理器(CPU:Central Processing Unit)等处理器。此外,邮递物分拣处理系统10具备由只读存储器(ROM:Read-OnIy Memory)或随机存取存储器(RAM:random access memory)、HDD、闪存等构成的存储部200。此外,邮递物分拣处理系统10作为通过处理器执行存储在存储部200中的程序而发挥功能的软件功能部,具备图像取得部310、识别部320、图像处理部330、关联处理部340、判断部410以及区域设定参数计算部420。此外,这些软件功能部中的一部分或全部也可以是大规模集成电路(LSI:Large Scale Integrat1n)或特定用途集成电路(ASIC 〖Applicat1n Specific Integrated Circuit)等硬件功能部。
[0025]存储部200具备区域提取信息存储部210以及区域选择信息存储部220。在区域提取信息存储部210中存储有对应于后述的候选邮递目的地区域的信息。此外,在区域选择信息存储部220中相关联地存储有通过后述的操作者的操作输入而被选择的候选邮递目的地区域与最优先顺序的候选邮递目的地区域。
[0026]读取处理部300具备图像取得部310、识别部320、图像处理部330以及关联处理部 340。
[0027]图像取得部310取得由扫描仪50拍摄的邮递物21的拍摄图像。
[0028]识别部320从由图像取得部310取得的拍摄图像识别出可识别的、包含邮递目的地信息的表意信息。即、识别部320对表示在贴于邮递物21的票单20或邮递物21上的表意信息进行识别。例如,识别部320通过光学字符识别(OCR:0ptical CharacterRecognit1n)技术从由扫描仪50拍摄而获得的拍摄图像识别文字信息,进一步也可以基于通过OCR技术识别的文字信息来识别邮递目的地信息。此外,识别部320也可以从由扫描仪50拍摄而获得的拍摄图像识别符号信息(例如条形码)。此时,识别部320解码符号信息后识别识别信息。此外,也可以在邮递物分拣处理系统10配置从各方向朝邮递物21照射激光的多个激光装置(未图示),识别部320基于反射光,测出邮递物21的形状,并利用根据该测量结果进行校正的图像
来识别表意信息。由此,由于识别部320能够取得根据邮递物21的形状进行校正的图像,因此能够以更高的精度识别表意信息。
[0029]图像处理部330从由识别部320识别的表意信息,识别记载于邮递物21上的信息或记载于票单20上的信息。即、图像处理部330识别作为邮递目的地信息的邮编号码、地址以及姓名等。此外,基于由识别部320识别的表意信息,图像处理部330从拍摄图像提取成为记载有邮递目的地信息的区域的候选区域。在此,将基于表意信息并通过图像处理部330提取的候选邮递目的地区域称为“邮递目的地候选区域”。
[0030]此外,对提取的各个邮递目的地候选区域,图像处理部330按照符合邮递目的地区域的可能性确定邮递物21的优先顺序。下面,将邮递目的地区域的可能性最高的邮递目的地候选区域称为“最优先顺序的邮递目的地候选区域”。
[0031]此外,图像处理部330判断在最优先顺序的邮递目的地候选区域是否能够确定对应于邮递目的地的分拣目的地(即、是否满足规定条件)。
[0032]在此,无法确定分拣目的地的情况是指如下情况:例如,最优先顺序的邮递目的地候选区域的信息的全部或一部分不明确,且图像处理部330无法正确地识别作为邮递目的地信息的邮编号码、地址以及姓名等。此外,例如图像处理部330无法从图像提取邮递目的地候选区域,或者通过识别部320获得的表意信息来确定分拣目的地时信息不够充分,这些都属于无法确定分拣目的地的情况。此外,例如,虽然图像处理部330能够提取邮递目的地候选区域,但是无法确定最优先顺序的邮递目的地候选区域时,这也属于无法确定分拣目的地的情况。此外,可以适当地设定无法确定分拣目的地的情况的条件。
[0033]当满足规定条件时,即、图像处理部330参照邮递目的地信息与分拣目的地相关联的表,从邮递目的地信息能够确定分拣目的地时,图像处理部330向关联处理部340输出所确定的分拣目的地。
[0034]当不满足规定条件时,图像处理部330向关联处理部340输出不满足规定条件的旨意,之后,如后所述,从图像显示终端100的第一输入部120取得分拣信息以确定对应于邮递目的地的分拣目的地。之后,图像处理部330向关联处理部340输出所确定的分拣目的地。
[0035]当满足规定条件时,关联处理部340基于从图像处理部330所确定的分拣目的地处理邮递物21。S卩、关联处理部340基于记载于最优先顺序的邮递目的地候选区域的信息来处理邮递物21。处理邮递物21是指,例如向搬运控制部80发出指示,以便向对应于收件地址(即、邮递物目的地)的分拣箱(即、分拣目的地)搬运邮递物21。此外,关联处理部340将与基于满足规定条件时记载在最优先顺序的邮递目的地候选区域的信息而对邮递物进行处理的结果相对应的信息存储在存储部200中。
[0036]此外,当不满足规定条件时,关联处理部340向图像显示终端100的图像显示部110输出由图像处理部330提取的邮递目的地候选区域,之后,基于从图像处理部330所确定的分拣目的地处理邮递物21。S卩、关联处理部340基于通过操作者的操作输入而被选择的邮递目的地候选区域中所记载的信息,并基于通过操作者的操作输入而被输入的分拣信息,处理邮递物21。
[0037]进一步,关联处理部340使确定为高优先顺序的邮递目的地候选区域与通过操作者对第一输入部120的操作输入而作为邮递目的地区域被选择的邮递目的地候选区域相关联地存储在区域提取信息存储部210中。此外,关联处理部340也可以将由识别部320识别的表意信息存储在存储部200中。此外,关联处理部340也可以使由识别部320识别的表意信息与由图像处理部330提取的各候选邮递目的地区域以及按照符合由图像处理部330所确定的邮递目的地区域的可能性来确定的优先顺序相关联地存储在存储部200中。
[0038]判断处理部400具备判断部410与区域设定参数计算部420。判断部410参照区域提取信息存储部210与区域选择信息存储部220,判断由图像处理部330所确定为高优先顺序的邮递目的地区域(最优先顺序的邮递目的地候选区域)与通过操作者的操作输入而作为邮递目的地区域被选择的邮递目的地候选区域是否一致。此外,判断部410将是否一致的判断结果输出至警告显示终端500上。
[0039]警告显示终端500具备警告显示部510与第二输入部520。警告显示部510显示由判断部410判断的判断结果、或由区域设定参数计算部420处理的结果以及计算的结果。第二输入部520是用于接收对判断部410以及区域设定参数计算部420进行的操作输入的
目.0
[0040]基于存储在区域提取信息存储部210与区域选择信息存储部220中的信息,区域设定参数计算部420计算提取成为邮递目的地候选区域的区域的所需的参数。进一步,基于存储在区域提取信息存储部210与区域选择信息存储部220中的信息,区域设定参数计算部420计算确定最优先顺序的邮递目的地候选区域所需的参数。
[0041]区域设定参数计算部420向读取处理部300输出计算出的参数。读取处理部300将由区域设定参数计算部420计算出的参数输出至图像处理部330。图像处理部330利用被输入的参数进行处理。
[0042]区域设定参数计算部420利用表示存储在区域提取信息存储部210中的邮递目的地候选区域的信息以及表示存储在区域提取信息存储部210中的邮递目的地候选区域的优先顺序的信息,计算提取邮递目的地候选区域所需的参数以及确定邮递目的地候选区域的最优先顺序所需的参数。可以预先准备多个性能差分确认用测试图像,邮递物分拣处理系统通过将由区域设定参数计算部420计算出的参数应用于测试图像中,能够判断区域设定参数计算部420计算出的参数的适当性以及参数的不利影响等。
[0043](分拣处理操作)
[0044]下面,参照图2说明在实施方式的邮递物分拣处理系统10中所进行的分拣处理操作。图2是示出实施方式的分拣处理的一示例的流程图。该流程图示出在图1所示的邮递物分拣处理系统10中将邮递物21分拣到对应于邮递目的地的分拣箱中的处理过程的基本步骤。例如,若经过初次接收地点后所收集的邮递物21装载于传送带70,则开始进行分拣处理。
[0045]首先,扫描仪50拍摄装载在传送带70上而被搬运的邮递物21,并输出拍摄图像。图像取得部310取得由扫描仪50输出的拍摄图像,并将拍摄图像输出至识别部320 (步骤S300)。
[0046]识别部320进行如下处理:从图像取得部310接收拍摄图像,并从拍摄图像识别出贴在邮递物21上的票单20中所记载的表意信息(步骤S302)。
[0047]基于由识别部320识别的表意信息,图像处理部330从拍摄图像提取成为记载有邮递目的地信息的候选邮递目的地区域的区域(邮递目的地候选区域)(步骤S304)。此夕卜,对于邮递目的地候选区域的提取方法,在后文中详述。
[0048]接着,图像处理部330对提取的邮递目的地候选区域,按照符合邮递目的地区域的可能性确定优先顺序(步骤S306)。此外,对于按照符合邮递目的地区域的可能性的优先顺序的确定方法,在后文中详述。
[0049]关联处理部340使邮递目的地候选区域与按照符合邮递目的地区域的可能性的优先顺序相关联地存储在区域提取信息存储部210中(步骤S308)。
[0050]在此,对存储在区域提取信息存储部210中的信息进行说明。由识别部320识别出表意信息的拍摄图像上附有用于表示图像上的对象物位置的坐标值以及规定的识别信息。图3是用于说明存储在区域提取信息存储部210中的信息的示意图。图3的上图示出图像中的区域以及文字列,图3的下图例示出存储于区域提取信息存储部210中的信息格式。图3的上图示出在邮递物21中提取三个区域(区域I至区域3)的示例。
[0051]被决定为,区域I的优先顺序最高,区域2的优先度为其次高,区域3的优先度为最低。区域I包含文字列11、12、13,区域2包含文字列21、22、23。区域3包含文字列31。
[0052]图像上的坐标值与图像的像素位置相对应,其表示图像中的纵向第几像素格点上、横向第几像素格点上是否存在特定像素。例如,如图3的下图所示,在区域提取信息存储部210中设定有自动分配给每个图像的图像识别符(“20140116152134T”)、用于表示拍摄图像内的对象物(邮递物21)的位置范围的对象坐标(“msx”、“msy”、“mex”、“mey”)、用于表示从下一个项目开始区域信息的情况的标记、即区域开始记号(“S”)、用于表示识别出的邮递目的地候选区域的优先顺序的区域序号码、区域坐标(“aSX”、“aSy”、“aeX”、“aey”)以及各文字列(行)的序号
或画面上的坐标值(“lsx”、“lsy”、“lex”、“ley”)等。这些信息通过关联处理部340存储在区域提取信息存储部210中。
[0053]此外,在区域提取信息存储部210也可以存储例如根据由图像处理部330提取的各文字行坐标的位置关系所取得的、对应于包含多个文字行的区域的坐标值、有关由图像处理部330所确定的优先顺序与对应于优先顺序的邮递目的地候选区域的信息以及被识别部320识别的各邮递目的地候选区域的表意信息等。此外,关联处理部340也可以将由图像取得部310取得的图像存储在区域提取信息存储部210中。
[0054]关联处理部也可以使由图像取得部取得的拍摄图像、对应于邮递物的拍摄图像的坐标值、对应于邮递物的各候选邮递目的地区域的坐标值、对应于各邮递目的地区域的各文字行的坐标值、对应于根据由图像处理部提取的各文字行的位置关系汇集多个行而构成的区域的坐标值、与由图像处理部所确定的优先顺序和对应于优先顺序的候选邮递目的地区域相关的信息、以及被识别部识别的各候选邮递目的地区域的表意信息中的任一个,与被图像处理部确定为高优先顺序的候选邮递目的地区域以及输入部所接收的通过操作者的操作输入而被选择的候选邮递目的地区域相关联地存储在存储部中。
[0055]返回到图2中,继续对流程图进行说明。图像处理部330判断通过在步骤S306中作为最优先顺序的区域而被确定的邮递目的地候选区域中能否确定邮递物目的地的分拣目的地(是否满足规定条件)(步骤S310)。即、图像处理部330判断能否确定对应于邮递物21的邮递目的地的分拣目的地。
[0056]在步骤S310的处理中,图像处理部330判断为能够确定对应于邮递目的地的分拣目的地时,图像处理部330输出已确定的分拣目的地并结束分拣处理(步骤S320)。如果无法确定对应于邮递目的地的分拣目的地,则图像处理部330进入步骤S312的处理。
[0057]在步骤S310的处理中,图像处理部330判断为无法确定分拣目的地时,关联处理部340将图像显示在图像显示部110上(步骤S312)。图4是图像处理部330无法确定分拣目的地时显示在图像显示部110上的界面显示画面的一示例。图4中示出的区域Al是,在步骤S306的处理中,通过图像处理部330被确定为最优先顺序的邮递目的地候选区域。此外,图4中示出的区域A2是,在步骤S306中,通过图像处理部330被确定为第二优先顺序的邮递目的地候选区域。同样地,图4中示出的区域A3是,在步骤S306中,通过图像处理部330被确定为第三优先顺序的邮递目的地候选区域。如图4所示,图像显示部110将表示由图像处理部330所确定的优先顺序的数字(图4的“1”、“2”、“3”)与各区域相对应地显示在各区域的左端。例如,图像显示部110根据来自关联处理部340的输出,在区域Al的附近显示“I”。此外,图像显示部110根据来自关联处理部340的输出,在区域A2的附近显示“2”,在区域A3的附近显示“3”。
[0058]之后,邮递物分拣处理系统10的操作者通过第一输入部120从步骤S312中显示在图像显示部110上的画面选择作为邮递目的地区域的邮递目的地候选区域(步骤S314)。第一输入部120例如通过借助鼠标进行的操作输入、借助键盘进行的操作输入或借助触摸板进行的操作输入,接收所需要的邮递目的地候选区域的选择。图像显示终端100也可以放大显示被选择的邮递目的地候选区域。
[0059]若操作者选择某个区域,则放大显示该区域。图5是操作者选择区域A2,从而放大显示区域A2的界面显示画面的一示例。如上所述,图4中所示的情况,图像处理部330决定将区域Al作为最优先顺序的邮递目的地候选区域。但是,记载在区域Al中的表意信息是未被图像处理部330识别的信息。因此,图像处理部330判断为无法确定邮递目的地的分拣目的地。在图5的示例中,操作者通过第一输入部120将认为符合邮递目的地候选区域的可能性最高而选择的邮递目的地候选区域与由图像处理部330所确定的最优先顺序的邮递目的地候选区域不同。
[0060]图像处理部330通过图像显示终端100的第一输入部120取得通过操作者的操作输入而被输入的分拣信息(步骤S316)。图像显示部110在图5所示的界面显示画面接收分拣信息的输入。分拣信息是为了分拣邮递物而在邮递目的地信息中被邮递物分拣处理系统所利用的信息。图像处理部330基于分拣信息决定对应于分拣信息的分拣目的地。如图5所示,例如,显示在图像显示部110上的界面显示画面中设有输入栏B1、B2,这些输入栏B1、B2分别用于输入作为图像处理部330无法识别出的表意信息的分拣代码以及姓名。操作者通过操作第一输入部120输入作为邮递目的地信息的分拣码以及姓名。S卩、操作者从显示在图像显示部110上的图像识别出记载在区域A2上的文字信息后,在输入栏上输入所识别的信息(文字)。此外,图像显示部110除了显示分拣代码、姓名以外,也可以显示邮编号码、地址、街区、建筑物名称以及电话号码等,以作为操作者输入图像处理部330无法识别的文字信息的输入栏。
[0061]关联处理部340使由操作者选择的邮递目的地候选区域的信息与由操作者输入的分拣信息以及姓名等邮递目的地信息相关联地写入区域选择信息存储部220 (步骤S318)中。图6示出对应于由操作者选择的邮递目的地候选区域的信息且存储在区域选择信息存储部220中的信息的一示例。例如,如图6所示,区域Cl、区域C2以及区域C3作为邮递目的地候选区域被图像处理部330提取,但是,图像处理部330无法正确识别邮递目的地信息时,向操作者提示图像,从而由操作者以手动方式选择邮递目的地候选区域。当操作者从作为邮递目的地候选区域的区域Cl至区域C3中选择任一个区域时,关联处理部340作为被选择的邮递目的地候选区域的信息保存以下信息。关联处理部340例如将作为由图像取得部310取得的图像的ID号的图像ID、表示由操作者选择的邮递目的地候选区域的选择区域序号、由操作者输入的输入邮编号码(附有街区编号)、输入电话号码、输入姓名等写入区域选择信息存储部220中。图像ID是自动分配给每个图像的图像识别符(例如为“20140116152134T”)。
[0062]之后,读取处理部300将由操作者选择的邮递目的地候选区域的信息与由操作者输入的分拣信息相关联的信息作为分拣目的地信息输入于图像显示终端100或警告显示终端500 (步骤S320)。此外,读取处理部300也可以将由操作者选择的邮递目的地候选区域的信息与由操作者输入的分拣信息相关联的信息作为分拣目的地信息显示在单独设置的显示器、独立设置在远程位置的画面显示部等显示画面上。
[0063]然后,说明对应于上述步骤S304的邮递目的地候选区域的提取方法。例如有如下方法:图像处理部330对取得的图像创建相邻像素的浓度差为规定以上的部分作为“I”而其他部分作为“O”的微分图像,并对由“I”连结的部分进行标记。对于该标记,图像处理部330将在纵向或横向上位于附近位置的标记进行级联连接的标记,作为候选文字行。图像处理部330将位于附近位置的相同方向的候选文字行汇集作为邮递目的地候选区域。
[0064]此外,例如有如下方法:图像处理部330通过将邮递物图像的各像素的像素值(亮度、色彩)与阀值进行比较,以将图像转换成黑色像素与白色像素的二值图像。图像处理部330根据该转换结果检测与黑色像素连结的区域,并根据黑色像素的连结区域,寻求外接于黑色像素的连结区域的矩形的信息。该信息称为矩形信息。之后,图像处理部330也可以将矩形信息与预先准备的基准信息进行比较,并根据相似度的大小来检测邮递目的地候选区域。进一步,图像处理部330将矩形信息中所包含的矩形区域的形状、邮递物上的矩形区域的位置等与预先准备的基准信息进行比较,并基于该比较结果,提取一处或多处的邮递目的地候选区域。
[0065]接着,说明对应于所述步骤306的、按照符合邮递目的地区域的可能性来确定优先顺序的方法。例如有如下方法:图像处理部330对以下内容进行评价:在邮递目的地候选区域中,包括几个行、或行数比规定数η多还是少、被检测的行的平均宽度比规定尺寸大还是小、或被检测的行的宽度分布如何、或被检测的行的位置分布如何等。图像处理部330将被评价的邮递目的地候选区域中的行、列的位置以及行、列的分布等与预先准备的基准信息进行比较,通过综合判断比较结果,来按照符合邮递目的地区域的可能性确定优先顺序。
[0066]如此,邮递物分拣系统所具有图像处理部330,在无法识别邮递物21的邮递目的地信息时,取得由操作者选择的邮递目的地候选区域以及由操作的输入的分拣信息。由此,邮递物分拣系统能够根据被选择的邮递目的地候选区域以及被输入的分拣信息来确定邮递物21的分拣目的地,以适当地分拣邮递物21。
[0067](诊断处理的操作)
[0068]下面,参照图7来说明实施方式涉及的诊断处理的操作。图7是示出实施方式涉及的诊断处理的一示例的流程图。在此,判断从图像提取邮递目的地候选区域所需的参数与决定作为邮递目的地区域的可能性的优先顺序所需的参数是否相配。此外,在此,如果各自的参数不适当,则计算适当的参数,并在读取处理部300设定计算出的参数。
[0069]判断部410,参照区域提取信息存储部210与区域选择信息存储部220,并将由图像处理部330所决定的最优先顺序的邮递目的地候选区域与作为邮递目的地区域而被操作者选择的邮递目的地候选区域进行比较,以判断这些是否一致(步骤S400)。判断部410将在步骤S400中判断的结果输出至警告显示终端500 (步骤S402)。
[0070]在此,参照图8来说明输出至警告显示终端500的显示画面示例。图8是显示在警告显示终端500的警告显示部510上的、示出判断部410的判断结果的界面显示画面的一示例。如图8所示,警告显示终端500例如显示正确区域D1、错误区域D2以及其他区域D3等。正确区域是指操作者通过目视识别而作为邮递目的地区域进行选择的邮递目的地候选区域。错误区域是与正确区域不同的区域,是图像处理部330作为最优先顺序的邮递目的地候选区域而决定的区域。其他区域是指,不属于正确区域与错误区域的任一区域的区域。
[0071]通过进行这种显示,操作者能够识别自动识别邮递目的地的邮递物分拣处理系统10的调整是否适当。操作者通过参照显示在警告显示部510的显示画面上的该结果,能够确认邮递目的地候选区域的设定不良以及最优先顺序的邮递目的地候选区域的决定不良,以调整邮递物分拣处理系统10。
[0072]此外,判断部410也可以将表示判断结果的信息显示在图像显示部110或单独设置的显示器、独立设置在远程位置的维修中心等的显示画面上。进一步,警告显示终端500也可以通过声音等向操作者或维修人员通知不良疑点。此外,也可以在每一次进行判断时、每进行规定次数的判断时或不一致的判断结果达到规定次数以上时,判断处理部400输出判断结果,或者警告显示终端500将判断结果显示在警告显示部510上。此外,也可以在判断结果累计到一定数量以上时、判断结果连续累计到一定数量时或不一致的判断结果累计到一定比例以上时,判断处理部400输出判断结果,或者警告显示终端500将判断结果显示在图像显不部110等。
[0073]返回到图7中,对流程图继续说明。区域设定参数计算部420基于存储在区域提取信息存储部210与区域选择信息存储部220中的信息,计算参数,该参数用于使图像处理部330从表意信息提取邮递目的地候选区域。进一步,对由图像处理部330提取的邮递目的地候选区域,区域设定参数计算部420计算参数,该参数用于决定按照符合邮递目的地区域的可能性的最优先顺序(步骤S404)。此外,当判断部410进行了规定次数的判断时,区域设定参数计算部420也可以自动进行参数的计算。可以适当地设定区域设定参数计算部420进行参数计算的时机。
[0074]区域设定参数计算部420例如利用预先准备的多个参数进行提取邮递目的地候选区域的模拟操作以及决定邮递目的地候选区域的优先顺序的模拟操作,计算出提取邮递目的地候选区域所需的最佳参数以及决定邮递目的地候选区域的优先顺序所需的最佳参数,以决定各参数。例如,区域设定参数计算部420例如将区域高度X为规定值Xl以上且区域开始位置坐标之和(sx+sy)Y为规定值Yl以下的区域作为最优先的邮递目的地候选区域。此外,例如,区域设定参数计算部420在规定值Xl与规定值Yl上分别设定5种值,并对Xl与Yl的所有组合,进行对作为邮递目的地区域选择了不适当的邮递目的地候选区域的异常群图像决定邮递目的地候选区域的优先顺序的模拟操作。之后,区域设定参数计算部420将从拍摄图像提取的邮递目的地区域与模拟结果进行比较,计算出Xl与Yl的所有组合的正确率。区域设定参数计算部420将其中被设定成为最高正确率的区域的参数X1、X2决定为最佳参数。当与决定区域设定的优先顺序的处理相关的参数有η个并想要调整所有参数时,区域设定参数计算部420若分别使用两种变动值进行轮流计算,则进行η的2次方次数的模拟操作即可。当模拟操作次数过多时,区域设定参数计算部420也可以通过实验计划法等计算出适当的设定值。
[0075]此外,最佳参数的计算方法还有例如通过机器学习来计算出最佳参数的方法。例如通过梯度法设定最佳参数的方法。例如,当参数的候选设定值有多个时,区域设定参数计算部420使每个参数稍微变化,通过观察变更前后的正确答案数量的增减来确定改进方向。之后,区域设定参数计算部420直到满足正确答案数量不增减等的结束条件为止调整每个参数。满足结束条件的参数成为最佳参数。此外,最佳参数的设定不限于上述方法,也可以由操作者设定。
[0076]接着,区域设定参数计算部420将提取如上方式计算出的邮递目的地候选区域所需的参数、决定优先顺序所需的参数输出至读取处理部300。读取处理部300替代在内部所设定的参数而适用从区域设定参数计算部420输入的参数(步骤S406)。此外,读取处理部300输出已适用的参数(步骤S408)。此外,也可以将从区域设定参数计算部420输出的参数显示在图像显示部110、警告显示部510、单独设置的显示器、独立设置在远程位置的画面显不部等显不画面上。
[0077]以上,实施方式涉及的邮递物分拣处理系统10的诊断处理中,能够检测出对对应于邮递物21的邮递目的地的分拣目的地的分拣是否恰当地进行。判断部410参照区域提取信息存储部210与区域选择信息存储部220,将被决定为符合邮递目的地区域的可能性最高的邮递目的地候选区域与作为邮递目的地区域而被操作者选择的邮递目的地候选区域进行比较。之后,判断部410判断这些是否一致,并将判断结果输出至警告显示终端500。由此,操作者能够判断用于将邮递物21分拣到对应于邮递目的地的分拣目的地而设定的参数是否适当。
[0078]此外,实施方式涉及的邮递物分拣处理系统10的诊断处理中,区域设定参数计算部420能够计算出设定在图像处理部330中的、从表意信息提取邮递目的地候选区域所需的参数以及确定优先顺序所需的参数。通过将由区域设定参数计算部420计算出的参数应用于邮递物分拣处理系统10中,能够更适当地分拣对应于邮递物21的邮递目的地的分拣目的地。
[0079]如此,判断部410判断作为存储在区域提取信息存储部210中的邮递目的地区域而被决定为高优先顺序的邮递目的地候选区域与存储在区域选择信息存储部220中且作为邮递目的地区域而被操作者选择的邮递目的地候选区域是否一致,并输出判断结果。如果判断结果不一致时,判断部410输出表示设定在邮递物分拣处理系统10的参数为不良的信息。其结果,能够检测出适用于邮递物分拣处理系统10中的参数不良。
[0080]进一步,区域设定参数计算部420能够参照存储在区域提取信息存储部210中的信息与存储在区域选择信息存储部220中的信息,计算提取邮递目的地候选区域所述的参数与决定邮递目的地候选区域的优先顺序所需的参数。读取处理部300只要替代不良参数而适用由区域设定参数计算部420计算出的参数,就能够提高邮递物21的分拣处理精度,而无需借助操作者的操作。
[0081]下面,有关上述实施方式的变形例进行说明。
[0082]在实施方式中,通过处理由扫描仪50取得的图像来进行对邮递物21的分拣处理,但是本发明的邮递物分拣处理系统并非限定于此。例如,邮递物分拣处理系统除了具备实施方式的结构以外,也可以具备用于识别条形码的结构。图9是示出邮递物分拣处理系统10的其他结构例。该邮递物分拣处理系统10除了具备图1中所示的结构以外,还具备条形码扫描仪600、条形码读取部350以及条形码识别部360。
[0083]条形码扫描仪600取得包含表示在邮递物21上的条形码的图像。条形码读取部350从条形码扫描仪600所取得的图像识别条形码,进一步解码条形码以取得对应于条形码的信息(例如数字串)。条形码识别部360识别对应于由条形码读取部350取得的信息的邮递目的地信息。
[0084]例如,将表示邮递目的地信息的识别信息(数字串)编码化而取得的记号信息、即条形码被打印在邮递物21上或记载于票单20上时,条形码扫描仪600取得包含条形码的图像。条形码读取部350从条形码扫描仪600所取得的图像中识别条形码,进一步解码条形码以取得对应于条形码的信息(数字串)。条形码识别部360识别对应于由条形码读取部350取得的信息(例如数字串)的邮递目的地信息。由此,能够识别邮递物21的邮递目的地信息,以确定邮递物的分拣目的地。此外,涉及的变形例中,识别部320不仅基于条形码取
得邮递目的地信息,而且通过OCR技术,从由扫描仪50拍摄的图像识别出图像中所包含的文字信息。图像处理部330基于通过OCR技术识别出的文字信息来取得邮递目的地信息。
[0085]参照图10说明上述变形例的处理。图10是示出变形例的处理步骤的一示例的流程图。邮递物分拣处理系统10按照图10所示的流程图所表示的处理顺序来分拣邮递物21。对于该图10所示的处理中,在进行与所述图2相同处理的处理顺序附上相同的符号,并省略处理。
[0086]首先,条形码扫描仪600取得包含打印在邮递物21上或记载于票单20上的条形码的图像。条形码读取部350从取得的图像中识别条形码,进一步解码条形码以取得条形码所表示的信息(数字串)。条形码识别部360识别对应于取得的信息(数字串)的邮递目的地信息(步骤S200)。之后,条形码识别部360判断能否确定对应于邮递物21的邮递目的地的分拣目的地(步骤S202)。如果能够确定分拣目的地,就输出分拣目的地(步骤S320)。
[0087]如果条形码识别部360无法确定对应于邮递目的地的分拣目的地,则扫描仪50取得装载在传送带70上而被搬运的邮递物21的拍摄图像(步骤S204)。识别部320通过OCR技术,从拍摄图像识别出贴在邮递物21上的帐票20上所记载的文字信息。之后,图像处理部330基于通过OCR技术识别的文字列,进行选择正确的邮递目的地信息的处理,以取得邮递目的地信息,以便即使通过OCR技术识别的文字列的一部分被误识别也能够正确识别出邮递目的地信息(步骤S206)。由此,如果能够确定对应于邮递目的地的分拣目的地时,就输出分拣目的地信息。如果无法确定邮递目的地的分拣目的地时,则进入步骤S300的处理。此外,也可以省略步骤S300的处理,将在步骤S204拍摄的图像使用于步骤S302中。
[0088]由此,变形例的邮递物分拣处理系统10,不仅进行通过OCR技术的识别处理,而且还进行识别条形码的处理,因此可以提高能够确定对应于邮递物的邮递目的地的分拣目的地的概率。
[0089]根据以上说明的至少一个实施方式,邮递物分拣处理系统使被图像处理部330决定为高优先顺序的邮递目的地候选区域与操作者对第一输入部120进行操作而作为邮递目的地区域选择的邮递目的地候选区域相关联地存储在存储部200中。此外,邮递物分拣处理系统具有如下功能:判断存储在存储部200中的被决定为尚优先顺序的邮递目的地候选区域与作为邮递目的地区域被操作者选择的邮递目的地候选区域是否一致,并输出判断结果。由此,邮递物分拣处理系统10能够将用于调整自动识别邮递目的地的系统所需的信息提供给图像处理部。
[0090]此外,根据至少一个实施方式,邮递物分拣处理系统具有区域设定参数计算部420,该区域设定参数计算部420计算提取邮递目的地候选区域所需的参数与决定邮递目的地候选区域的最优先顺序所需的参数。进一步,邮递物分拣处理系统能够向操作员或读取处理部300提供计算出的这些参数。由此,邮递物分拣处理系统能够从邮递物取得正确的邮递目的地信息。其结果,邮递物分拣处理系统能够将邮递物正确地分拣至对应于邮递目的地的分拣目的地。
[0091]虽然说明了本发明的多个实施方式,但是这些实施方式是作为示例而提出,并非旨在限定发明的范围。这些实施方式可以以其他各种方式实施,在不脱离发明要旨的范围内,能够进行各种省略、置换、变更。这些实施方式或其变形包含在发明的范围或要旨中,同时也包含在权利要求中记载的发明以及其均等的范围内。
【主权项】
1.一种邮递物分拣处理系统,其特征在于,具备: 图像取得部,用于取得拍摄有邮递物的拍摄图像; 输入部,用于接收操作者的操作输入; 识别部,基于由所述图像取得部取得的所述拍摄图像,识别所述拍摄图像中所含有的可识别的表意信息, 图像处理部,基于由所述识别部识别的所述表意信息,提取所述拍摄图像中的候选邮递目的地区域,并按照符合邮递目的地区域的可能性决定优先顺序, 关联处理部,当满足规定条件时,基于最优先顺序的候选邮递目的地区域中所包含的信息来处理邮递物,当不满足所述规定条件时,基于由所述输入部所接收的通过操作者的操作输入而被选择的候选邮递目的地区域中所包含的信息,进行定邮递物的邮递目的地的处理,同时,使被所述图像处理部决定为高优先顺序的候选邮递目的地区域与所述输入部所接收的通过操作者的操作输入而被选择的候选邮递目的地区域相关联地存储在存储部中, 判断部,参照所述存储部,判断存储在所述存储部中的、被图像处理部决定为高优先顺序的候选邮递目的地区域与通过所述操作者的操作输入而被选择的候选邮递目的地区域是否一致,并输出判断结果。2.根据权利要求1所述的邮递物分拣处理系统,其特征在于, 所述关联处理部使由所述识别部识别的表意信息与由所述图像处理部提取的所述各候选邮递目的地区域以及由所述图像处理部所决定的优先顺序相关联地存储在所述存储部中。3.根据权利要求1所述的邮递物分拣处理系统,其特征在于, 所述关联处理部使由所述图像取得部取得的图像、对应于所述邮递物的图像的坐标值、对应于所述邮递物的各候选邮递目的地区域的坐标值、对应于所述各邮递目的地区域的各文字行的坐标值、对应于根据由所述图像处理部提取的所述各文字行的位置关系汇集多个行而构成的区域的坐标值、由所述图像处理部所决定的所述优先顺序和对应于所述优先顺序的所述候选邮递目的地区域的相关信息、以及被识别部识别的所述各候选邮递目的地区域的表意信息中的任一个,与被所述图像处理部决定为高优先顺序的候选邮递目的地区域以及由所述输入部所接收的通过操作者的操作输入而被选择的候选邮递目的地区域相关联地存储在所述存储部中。4.根据权利要求1所述的邮递物分拣处理系统,其特征在于,还具备: 区域设定参数计算部,其根据所述判断部的判断结果或存储在所述存储部中的信息,计算出提取候选邮递目的地区域所需的参数或按照符合邮递目的地区域的可能性决定优先顺序所需的参数。5.根据权利要求4所述的邮递物分拣处理系统,其特征在于, 所述判断部参照所述存储部判断存储在所述存储部中的被决定为高优先顺序的候选邮递目的地区域的相关信息与通过所述操作者的操作输入而被选择的候选邮递目的地区域是否一致,当不一致的次数达到规定次数以上时,所述区域设定参数计算部进行所述参数的计算。6.根据权利要求1所述的邮递物分拣处理系统,其特征在于, 当所述判断部参照所述存储部,判断被决定为高优先顺序的候选邮递目的地区域与通过所述操作者的操作输入而被选择的候选邮递目的地区域不一致的次数连续出现规定次数时,输出所述判断结果。7.根据权利要求4所述的邮递物分拣处理系统,其特征在于, 当所述判断部进行了规定次数的判断时,所述区域设定参数计算部进行所述参数的计笪并ο8.根据权利要求6所述的邮递物分拣处理系统,其特征在于, 所述区域设定参数计算部基于存储在所述存储部中的信息进行模拟操作,计算出从所述表意信息中提取各候选邮递目的地区域所需的参数,并且计算出按照符合邮递目的地区域的可能性决定邮递物的优先顺序所需的参数。9.根据权利要求4所述的邮递物分拣处理系统,其特征在于, 所述区域设定参数计算部基于存储在所述存储部中的信息,通过机器学习来计算出从所述表意信息中提取各候选邮递目的地区域所需的参数,并且计算出按照符合邮递目的地区域的可能性决定邮递物的优先顺序所需的参数。10.根据权利要求4所述的邮递物分拣处理系统,其特征在于, 所述区域设定参数计算部将计算出的、提取候选邮递目的地区域所需的参数以及按照符合邮递目的地区域的可能性决定优先顺序所需的参数,作为所述图像处理部的参数而应用。
【专利摘要】邮递物分拣处理系统从拍摄邮递物的拍摄图像识别出可识别的表意信息,并根据表意信息提取各候选邮递目的地区域,同时确定按照符合邮递物的邮递目的地区域的可能性的优先顺序。当满足规定条件时,邮递物分拣处理系统基于最优先顺序的邮递目的地区域中所含有的信息来处理邮递物,当不满足规定条件时,邮递物分拣处理系统基于通过操作者对输入部进行的操作输入而被选择的候选邮递目的地区域中所含有的信息,进行决定邮递物的邮递目的地的处理,同时,使被确定为高优先顺序的候选邮递目的地区域与通过操作者对输入部进行操作输入而被选择的候选邮递目的地区域相关联地存储在存储部中,并输出判断这些是否一致的结果。
【IPC分类】B07C3/18, B07C3/14
【公开号】CN104889063
【申请号】CN201510100809
【发明人】前田匡哉, 浜村伦行, 渡边优香, 朴英, 入江文平, 马场贤二
【申请人】株式会社东芝
【公开日】2015年9月9日
【申请日】2015年3月6日
【公告号】EP2915596A1, US20150306634