图像显示装置、图像显示方法以及图像显示程序的制作方法

xiaoxiao2020-10-23  19

图像显示装置、图像显示方法以及图像显示程序的制作方法
【技术领域】
[0001]本发明涉及一种具备显示显示画面的显示部的图像显示装置、图像显示方法以及图像显示程序。
【背景技术】
[0002]以往,提出如下一种胶囊型内窥镜系统:使用拍摄被检体内的胶囊型内窥镜来获取被检体内部的体内图像,使医生等观察该体内图像(例如参照专利文献1、2)。
[0003]胶囊型内窥镜在为了观察(检查)而从被检体的口中吞下后到被自然排出为止的期间,在体腔内,例如胃、小肠等脏器的内部跟随其蠕动运动而移动,伴随该移动,每隔规定时间地拍摄被检体内。另外,胶囊型内窥镜在体腔内移动的期间通过无线通信将在体内拍摄到的图像数据依次发送到外部。
[0004]而且,胶囊型内窥镜系统除了上述胶囊型内窥镜以外还具备接收装置和图像显示
目.ο
[0005]接收装置依次接收从胶囊型内窥镜发送来的图像数据,并且依次记录在插入安装于该接收装置的移动式的记录介质中。
[0006]图像显示装置在上述移动式的记录介质插入安装于该图像显示装置时,取得记录在该记录介质中的图像数据。而且,图像显示装置逐帧地切换并显示(帧再现)与取得的图像数据对应的体内图像。
[0007]医生等通过确认如上述那样显示的体内图像来诊断被检体。
[0008]专利文献1:日本特开2006-288612号公报
[0009]专利文献2:日本专利第5385138号公报

【发明内容】

_0] 发明要解决的问题
[0011]然而,在专利文献1、2所记载的技术中,存在如下担忧:在拍摄到被检体内的出血部、病变等异常图像少(例如只有I帧)的情况下,由于所显示的体内图像逐帧地依次切换,因此医生等没有注意到显示了异常图像而继续再现。
[0012]本发明是鉴于上述而完成的,在于提供一种即使在以时间序列获取到的图像群中包含的异常图像少的情况下也能够显示容易发现该异常图像的显示画面的图像显示装置、图像显示方法以及图像显示程序。
_3] 用于解决问题的方案
[0014]为了解决上述问题而达成目的,本发明所涉及的图像显示装置具备显示显示画面的显示部,该图像显示装置的特征在于,具备:图像获取部,其获取包含以时间序列获取到的多个图像的图像群;图像提取部,其从由上述图像获取部获取到的上述图像群中提取包含满足规定的条件的主图像的主图像群;图像关联部,其对上述主图像群中包含的每个上述主图像关联上述图像群中的没有被上述图像提取部提取出的副图像;以及显示控制部,其生成在第一区域配置上述主图像群并在与上述第一区域不同的第二区域配置包含上述副图像的副图像群的显示画面,并使上述显示部显示该显示画面,其中,上述主图像群沿第一方向以时间序列配置在上述第一区域,上述副图像群以通过上述图像关联部被关联到上述主图像的每个副图像与该主图像排列的方式,沿与上述第一方向正交的第二方向以时间序列配置在上述第二区域,上述显示控制部以使上述主图像群沿上述第一方向移动的方式以及使上述主图像群的至少一部分和上述副图像群的至少一部分沿上述第二方向移动的方式变更上述显示画面。
[0015]另外,本发明所涉及的图像显示装置的特征在于,在上述发明中,上述图像关联部将上述副图像关联到在时间序列上最接近该副图像的上述主图像。
[0016]另外,本发明所涉及的图像显示装置的特征在于,在上述发明中,上述显示控制部生成上述副图像的图像尺寸小于上述主图像的图像尺寸的上述显示画面。
[0017]另外,本发明所涉及的图像显示装置的特征在于,在上述发明中,上述显示控制部生成上述第二区域中的上述副图像的配置位置离上述第一区域越远则该副图像的图像尺寸越小的上述显示画面。
[0018]另外,本发明所涉及的图像显示装置的特征在于,在上述发明中,上述显示控制部生成如下的上述显示画面:在包含上述显示画面的中心位置的上述第一区域配置上述主图像群,并且上述第一区域中的上述主图像的配置位置离上述中心位置越远则该主图像的图像尺寸越小。
[0019]另外,本发明所涉及的图像显示装置的特征在于,在上述发明中,还具备指示接受部,该指示接受部接受上述主图像群沿上述第一方向移动的方式下的上述显示画面的变更的开始指示、以及上述主图像群沿上述第一方向移动的方式下的上述显示画面的变更的停止指示,上述显示控制部在上述指示接受部接受到上述开始指示的情况下,以不在上述第二区域配置上述副图像群而上述主图像群沿上述第一方向移动的方式依次生成上述显示画面,在上述指示接受部接受到上述停止指示的情况下,以在上述第二区域配置上述副图像群并且使上述主图像群的移动停止的方式生成上述显示画面。
[0020]另外,本发明所涉及的图像显示装置的特征在于,在上述发明中,上述显示控制部生成在上述主图像群中包含的各上述主图像以及上述副图像群中包含的各上述副图像之间没有间隙的上述显示画面。
[0021]另外,本发明所涉及的图像显示装置的特征在于,在上述发明中,上述显示控制部生成相对于上述副图像强调了上述主图像的上述显示画面。
[0022]另外,本发明所涉及的图像显示装置的特征在于,在上述发明中,在没有在上述显示画面内配置上述主图像群中包含的全部的上述主图像的情况下,上述显示控制部使上述显示画面中包含表示存在没有配置的上述主图像的存在信息。
[0023]另外,本发明所涉及的图像显示装置的特征在于,在上述发明中,在没有在上述显示画面内配置上述副图像群中包含的全部的上述副图像的情况下,上述显示控制部使上述显示画面中包含表示存在没有配置的上述副图像的存在信息。
[0024]另外,本发明所涉及的图像显示装置的特征在于,在上述发明中,上述存在信息为表示上述没有配置的上述主图像或者上述副图像的个数的信息。
[0025]另外,本发明所涉及的图像显示方法由具备显示显示画面的显示部的图像显示装置进行,该图像显示方法的特征在于,包括:图像获取步骤,获取包含以时间序列获取到的多个图像的图像群;图像提取步骤,从在上述图像获取步骤中获取到的上述图像群中提取包含满足规定的条件的主图像的主图像群;图像关联步骤,对上述主图像群中包含的每个上述主图像关联上述图像群中的在上述图像提取步骤中没有被提取出的副图像;显示步骤,生成在第一区域配置上述主图像群并在与上述第一区域不同的第二区域配置包含上述副图像的副图像群的显示画面,并使上述显示部显示该显示画面;以及显示变更步骤,变更上述显示画面,其中,在上述显示步骤中,将上述主图像群沿第一方向以时间序列配置在上述第一区域,将上述副图像群以在上述图像关联步骤中关联到上述主图像的每个副图像与该主图像排列的方式,沿与上述第一方向正交的第二方向以时间序列配置在上述第二区域,在上述显示变更步骤中,以使上述主图像群沿上述第一方向移动的方式以及使上述主图像群的至少一部分和上述副图像群的至少一部分沿上述第二方向移动的方式变更上述显示画面。
[0026]另外,本发明所涉及的图像显示程序的特征在于,使图像显示装置执行上述的图像显示方法。
[0027]发明的效果
[0028]根据本发明所涉及的图像显示装置,起到如下效果:即使在以时间序列获取到的图像群中包含的异常图像少的情况下,也能够显示容易发现该异常图像的显示画面。
[0029]本发明所涉及的图像显示方法为上述的图像显示装置进行的方法,因此起到与上述的图像显示装置相同的效果。
[0030]本发明所涉及的图像显示程序为由上述的图像显示装置执行的程序,因此起到与上述的图像显示装置相同的效果。
【附图说明】
[0031]图1是表示本发明的实施方式I所涉及的图像显示系统的示意图。
[0032]图2是表示图1所示的图像显示装置的框图。
[0033]图3是表示本发明的实施方式I所涉及的图像显示方法的流程图。
[0034]图4是表示在图3所示的步骤S6中生成的显示画面的一例的图。
[0035]图5是表示在图3所示的步骤S9中进行的显示画面的画面转变的一例的图。
[0036]图6是表示在图3所示的步骤S9中进行的显示画面的画面转变的一例的图。
[0037]图7是虚拟地表现图3所示的步骤S9的图。
[0038]图8是表示在图3所示的步骤S12中显示部所显示的显示画面的一例的图。
[0039]图9是表示在图3所示的步骤S12中显示部所显示的显示画面的一例的图。
[0040]图10是表示本发明的实施方式I的变形例的图。
[0041]图11是表示本发明的实施方式2所涉及的由显示控制部生成的显示画面的一例的图。
[0042]图12是表示本发明的实施方式3所涉及的由显示控制部生成的显示画面的一例的图。
[0043]图13是表示本发明的实施方式4所涉及的由显示控制部生成的显示画面的一例的图。
[0044]图14是表示本发明的实施方式5所涉及的由显示控制部进行的显示画面的画面转变的一例的图。
[0045]图15是表示本发明的实施方式5所涉及的由显示控制部生成的显示画面的一例的图。
[0046]图16是表示本发明的实施方式6所涉及的由显示控制部生成的显示画面的一例的图。
[0047]图17是用于说明本发明的实施方式7所涉及的显示画面的生成方法的图。
[0048]图18是虚拟地表现本发明的实施方式7所涉及的由显示控制部生成的显示画面的图。
[0049]图19是表示本发明的实施方式I?7的变形例的图。
【具体实施方式】
[0050]下面参照附图详细地说明本发明所涉及的图像显示装置、图像显示方法以及图像显示程序的优选的实施方式。此外,并不是通过该实施方式限定本发明。
[0051](实施方式I)
[0052]〔图像显示系统的概略结构〕
[0053]图1是表示本发明的实施方式I所涉及的图像显示系统I的示意图。
[0054]图像显示系统I是使用吞入型的胶囊型内窥镜2来获取被检体100内部的体内图像、使医生等观察该体内图像的系统。
[0055]该图像显示系统I如图1所示那样除了胶囊型内窥镜2以外还具备接收装置3、图像显示装置4以及移动式的记录介质5等。
[0056]记录介质5是用于在接收装置3与图像显示装置4之间进行数据的交换的移动式的记录媒介,构成为能够分别相对于接收装置3和图像显示装置4可装卸。
[0057]胶囊型内窥镜2为形成为能够导入到被检体100的脏器内部的大小的胶囊型的内窥镜装置,通过经口摄入等被导入被检体100的脏器内部,通过蠕动运动等在脏器内部移动的同时依次拍摄体内图像。而且,胶囊型内窥镜2依次发送通过拍摄生成的图像数据。
[0058]接收装置3具备多个接收天线3a?3h,经由这些多个接收天线3a?3h中的至少一个接收来自被检体100内部的胶囊型内窥镜2的图像数据。而且,接收装置3在被插入安装于该接收装置3的记录介质5内存储接收到的图像数据。
[0059]此外,接收天线3a?3h既可以如图1所示那样配置在被检体 100的体表上,也可以配置在被检体100所穿着的外套。另外,接收装置3所具备的接收天线数为一个以上即可,并不特别限定为八个。
[0060]〔图像显示装置的结构〕
[0061]图2是表示图像显示装置4的框图。
[0062]图像显示装置4构成为获取被检体100内的图像数据并显示与获取到的图像数据对应的图像的工作站。
[0063]该图像显示装置4如图2所示那样具备读写器41、存储部42、输入部43、显示部44以及控制部45等。
[0064]读写器41在记录介质5被插入安装于该读写器41时,在由控制部45进行的控制下,取得保存在记录介质5中的图像数据(包含由胶囊型内窥镜2以时间序列拍摄(获取)到的多个体内图像的体内图像群)。另外,读写器41将取得的体内图像群传输到控制部45。而且,被传输到控制部45的体内图像群被存储在存储部42中。
[0065]g卩,读写器41具有作为本发明所涉及的图像获取部的功能。
[0066]存储部42存储从读写器41传输来的体内图像群。另外,存储部42存储控制部45执行的各种程序(包括图像显示程序)、控制部45的处理所需的信息等。
[0067]输入部43使用键盘和鼠标等构成,接受用户操作。
[0068]而且,输入部43具有作为本发明所涉及的指示接受部的功能。
[0069]显示部44使用液晶显示器等构成,在由控制部45进行的控制下,显示包含体内图像的显示画面。
[0070]控制部45使用CPU (Central Processing Unit:中央处理器)等构成,读出存储在存储部42中的程序(包括图像显示程序),并按照该程序控制图像显示装置4整体的动作。
[0071]该控制部45如图2所示那样具备图像提取部451、图像处理部452、图像关联部453以及显示控制部454等。
[0072]图像提取部451从由图像处理部452实施了图像处理并被存储在存储部42中的显示用体内图像群中提取包含满足规定的图像提取条件的主图像(显示用体内图像)的主图像群。而且,图像提取部451使存储部42存储提取出的主图像群。
[0073]在此,作为图像提取条件,例举出与在时间序列上连续的体内图像间的相似度有关的阈值等。
[0074]图像处理部452对存储在存储部42中的每个体内图像实施图像处理,分别生成显示用体内图像。而且,图像处理部452使存储部42存储包含生成的显示用体内图像的显示用体内图像群。
[0075]另外,图像处理部452计算由图像提取部451进行上述图像提取所需的信息。
[0076]具体地说,图像处理部452读出存储在存储部42中的显示用体内图像群,提取各显示用体内图像的颜色信息。而且,图像处理部452基于各显示用体内图像的颜色信息对显示用体内图像群内的每个显示用体内图像计算在时间序列上连读的显示用体内图像间的相似度。
[0077]此外,图像处理部452也可以计算显示用体内图像群内的相邻图像间的运动向量,基于进行该计算得到的各显示用体内图像的运动向量来对每个显示用体内图像计算显示用体内图像间的相似度。
[0078]而且,图像处理部452使存储部42将如上述那样计算出的关于相似度的信息与对应的显示用体内图像相关联地进行存储。
[0079]图像关联部453对由图像提取部451提取出的主图像群中包含的每个主图像关联显示用体内图像群中的未被图像提取部451提取出的副图像群中包含的副图像(显示用体内图像)。而且,图像关联部453使存储部42将表示关联了哪个主图像的关联信息与副图像相关联地进行存储。
[0080]显示控制部454根据对输入部43进行的用户操作读出存储在存储部42中的信息,生成配置了主图像、副图像的显示画面,并使显示部44显示该显示画面。
[0081]〔图像显示装置的动作〕
[0082]接着说明上述的图像显示装置4的动作(图像显示方法)。
[0083]图3是表示本实施方式I所涉及的图像显示方法的流程图。
[0084]首先,读写器41在记录介质5被插入安装于该读写器41时,在由控制部45进行的控制下,取得保存在记录介质5中的体内图像群(步骤S1:图像获取步骤)。而且,由读写器41取得的体内图像群被存储在存储部42中。
[0085]接着,图像处理部452读出存储在存储部42中的体内图像群,通过图像处理生成显示用体内图像群。另外,图像处理部452提取各显示用体内图像的颜色信息,基于该颜色信息,对显示用体内图像群内的每个显示用体内图像计算在时间序列上连续的显示用体内图像间的相似度(步骤S2)。而且,图像处理部452使存储部42将计算出的关于相似度的信息与对应的显示用体内图像相关联地进行存储。
[0086]接着,控制部45始终根据对输入部43进行的用户操作监视是否有体内图像的显示指示(步骤S3)。
[0087]在判断为有体内图像的显示指示的情况下(步骤S3 是”),图像提取部451读出存储在存储部42中的关于每个显示用体内图像的相似度的信息。另外,图像提取部451从存储在存储部42中的显示用体内图像群中提取相似度在规定的阈值以下的显示用体内图像(在时间序列上连续的显示用体内图像间的相似度低的显示用体内图像)作为主图像(步骤S4:图像提取步骤)。而且,图像提取部451使存储部42存储包含提取出的主图像的主图像群。
[0088]接着,图像关联部453对在步骤S4中提取出的每个主图像关联在步骤S4中没有被提取出的副图像(步骤S5:图像关联步骤)。而且,图像关联部453使存储部42将表示关联了哪个主图像的关联信息与副图像相关联地进行存储。
[0089]具体地说,图像关联部453把握处于在时间序列上连续的主图像间的副图像的帧数,在帧数为偶数的情况下,将该副图像的时间序列上的前半部分与紧挨着的之前主图像进行关联,将该副图像的时间序列上的后半部分与紧接在之后的主图像进行关联。
[0090]例如,在显示用体内图像群中的第一、四帧的显示用体内图像为主图像的情况下,由于处于该主图像间的副图像的帧数为偶数“2”,因此图像关联部453将第二帧的副图像与第一帧的主图像进行关联,将第三帧的副图像与第四帧的主图像进行关联。
[0091]另一方面,在处于在时间序列上连续的主图像间的副图像的帧数为奇数的情况下,图像关联部453以在时间序列上后侧多一帧的方式将该副图像划分为在时间序列上为前侧的副图像和在时间序列上为后侧的副图像。而且,图像关联部453将在时间序列上为前侧的副图像与紧挨着的之前的主图像进行关联,将在时间序列上为后侧的副图像与紧接在之后的主图像进行关联。
[0092]例如,在显示用体内图像群中的第四、八帧的显示用体内图像为主图像的情况下,由于处于该主图像间的副图像的帧数为奇数“3”,因此图像关联部453将第五帧的副图像与第四帧的主图像进行关联,将第六、七帧的副图像与第八帧的主图像进行关联。
[0093]此外,在处于在时间序列上连续的主图像间的副图像的帧数为“I”的情况下,该副图像与紧接在之后的主图像相关联。
[0094]接着,显示控制部454基于存储在存储部42中的信息(主图像群、副图像群以及关联信息),如以下所示地生成显示画面(步骤S6)。
[0095]图4是表示在图3所示的步骤S6中生成的显示画面Wl的一例的图。
[0096]此外,在图4中,八边形的图形表示显示用体内图像,该显示用体内图像中的“PO”表示第〇帧的显示用体内图像(例如“P8”表示第八帧的显示用体内图像)。
[0097]具体地说,显示控制部454从帧序号小的主图像开始从存储部42依次读出五帧量的主图像。而且,显示控制部454将该五帧量的主图像隔开规定的间隙地以时间序列配置在通过显示画面中的中心位置且沿左右方向(沿第一方向的方向)延伸的第一区域。
[0098]例如,在从帧序号小的主图像开始依次的五帧量的主图像为主图像PU P4、P8、P12、P13的情况下,显示控制部454从存储部42读出该主图像P1、P4、P8、P12、P13。而且,显示控制部454如图4所示那样在显示画面Wl中的第一区域Arl从左开始以时间序列依次配置该主图像PU P4、P8、P12、P13。
[0099]另外,显示控制部454基于存储在存储部42中的关联信息,读出与读出的上述五帧量的主图像相关联的副图像。而且,显示控制部454将与主图像相关联的副图像以与该主图像排列的方式,沿与第一方向正交的第二方向隔开规定的间隙并以时间序列配置在显示画面中的与第一区域不同的第二区域。
[0100]在此,关于与主图像相关联且在时间序列上比该主图像靠前的副图像,显示控制部454将该副图像相对于显示画面中的该主图像配置在上侧的第二区域(以下记载为第二上区域)。另外,关于与主图像相关联且在时间序列上比该主图像靠后的副图像,将该副图像相对于显示画面中的该主图像配置在下侧的第二区域(以下记载为第二下区域)。并且,在与主图像相关联且在时间序列上比该主图像靠前或者靠后的副图像为两帧量以上的情况下,显示控制部454只将在时间序列上最接近该主图像的副图像配置在第二上区域或者第二下区域。
[0101]如以上所述,显示控制部454在将副图像群配置在第二区域时,将通过图像关联部453被关联到主图像的每个副图像配置在第二区域。
[0102]例如,副图像P2为与主图像Pl相关联并且在时间序列上比主图像Pl罪后的显不用体内图像。因此,显示控制部454如图4所示那样在显示画面Wl中的处于第一区域Arl的下侧的第二下区域Ar2D中将副图像P2配置在主图像Pl的下侧。
[0103]另外,例如副图像P6、P7为与主图像P8相关联并且在时间序列上比主图像P8靠前的显示用体内图像。另外,与主图像P8相关联且在时间序列上比主图像P8靠前的副图像有两帧量。因此,显示控制部454如图4所示那样在显示画面Wl中的处于第一区域Arl的上侧的第二上区域Ar2U中,将在时间序列上最接近主图像P8的副图像P7配置在主图像P8的上侧,关于副图像P6,不配置在显示画面Wl中。
[0104]如以上那样,在从帧序号小的主图像开始依次的5帧量的主图像为主图像P1、P4、P8、P12、P13的情况下,显示控制部454通过上述的处理如图4所示那样在显示画面Wl中的主图像P4、P8、P12的上侧(第二上区域Ar2U)分别配置副图像P3、P7、P11,并在显示画面Wl中的主图像P1、P4、P8、P13的下侧(第二下区域Ar2D)分别配置副图像P2、P5、P9、P14。
[0105]并且,显示控制部454在存储在存储部42中的显示用体内图像群中存在没有配置在显示画面中的显示用体内图像的情况下,在显示画面中配置促使该显示用体内图像的显示的再现图标。
[0106]例如,在图4所不的例子中,与主图像P8相关联的副图像P6、与主图像P12相关联的副图像P1以及与主图像P13相关联的副图像P15没有配置在显示画面Wl中。因此,显示控制部454在显示画面Wl中的应该配置该副图像P6、P10、P15的位置(副图像P7、P11的上侧、副 图像P14的下侧)分别配置促使该副图像P6、P10、P15的显示的再现图标As。
[0107]另外,主图像群中的六帧以后的主图像也没有配置在显示画面Wl中。因此,显示控制部454在显示画面Wl中的应该配置该六帧以后的主图像的位置(主图像P13的右侧)配置促使该六帧以后的主图像的显示的再现图标Am。
[0108]上述的再现图标Am、As相当于本发明所涉及的存在信息。
[0109]接着,显示控制部454使显示部44显示生成的显示画面Wl (步骤S7)。
[0110]以上所说明的步骤S6、S7相当于本发明所涉及的显示步骤。
[0111]接着,显示控制部454根据对输入部43进行的用户操作判断是否有再现操作(步骤 S8) ο
[0112]在此,所谓再现操作是将鼠标光标定位在再现图标As、Am的显示位置,并点击鼠标按键的操作。
[0113]在判断为没有再现操作的情况下(步骤S8 否”),显示控制部454在步骤S7中使显示画面Wl的显示继续。
[0114]另一方面,在判断为有再现操作的情况下(步骤S8 是”),显示控制部454如以下所示那样变更(滚动)显示画面Wl (步骤S9:显示变更步骤)。
[0115]图5和图6是表示在步骤S9中进行的显示画面Wl的画面转变的一例的图。
[0116]此外,图5和图6表示图4所示的显示画面Wl的画面转变(图5的(a)以及图6的(a)是与图4相同的图),图5表示操作了再现图标Am的情况,图6表示操作了再现图标As的情况。
[0117]具体地说,在操作了配置在显示画面Wl中的左端或者右端的再现图标Am的情况下,显示控制部454以主图像和副图像成一体地向右方或者左方移动的方式使显示画面Wl滚动。
[0118]例如,当在步骤S7中显示图4所示的显示画面Wl时操作了配置在显示画面Wl中的右端的再现图标Am的情况下,显示控制部454如图5所示那样依次生成主图像Pl、P4、P8、P12、P13以及副图像P2、P3、P5、P7、P9、Pll、P14成一体地向左侧移动的方式的显示画面Wl ο
[0119]此时,显示控制部454生成如下显示画面Wl:主图像Pl和与该主图像Pl相关联的副图像P2逐渐从显不画面Wl的左侧尚开,相对于主图像P13在时间序列上罪后的主图像P19和与该主图像P19相关联的副图像P18、P20逐渐从显示画面Wl的右侧出现。
[0120]而且,显示控制部454按照显示部44的显示帧频使显示部44依次显示生成的图5的(b)、图5的(c)以及图5的(d)的各显示画面Wl。通过这样各显示画面Wl依次显示于显示部44,显示画面Wl以主图像和副图像顺畅地向左侧移动的方式滚动。
[0121]另一方面,在操作了配置在显示画面Wl中的上侧或者下侧的再现图标As的情况下,显示控制部454以主图像和副图像成一体地向上方或者下方(沿与第一方向正交的第二方向的方向)移动的方式使显示画面Wl滚动。
[0122]例如,当在步骤S7中显示图4所示的显示画面Wl时操作了配置在显示画面Wl中的副图像P7的上侧的再现图标As的情况下,显示控制部454如图6所示那样依次生成主图像P1、P4、P8、P12、P13以及副图像P2、P3、P5、P7、P9、P11、P14成一体地向下侧移动的方式的显示画面W1。
[0123]此时,显示控制部454生成如下显示画面Wl:配置在显示画面Wl中的下侧的副图像P2、P5、P9、P14逐渐从显示画面Wl的下侧离开,与显示画面Wl中的主图像P8、P12相关联并且没有配置在显示画面Wl中的副图像P6、PlO逐渐从显示画面Wl的上侧出现。
[0124]而且,显示控制部454按照显示部44的显示帧频使显示部44依次显示生成的图6的(b)、图6的(c)以及图6的(d)的各显示画面Wl。通过这样各显示画面Wl依次显示于显示部44,显示画面Wl以主图像和副图像顺畅地向下侧移动的方式滚动。
[0125]在此,显示控制部454如图5的(b)?图5的(d)或者图6的(b)?图6的(d)所示那样,在显示画面Wl的滚动中,在显示画面Wl中不配置再现图标Am、As。
[0126]图7是虚拟地表现步骤S9的图。
[0127]此外,在图7中,图示了从第一帧到第七^^一帧为止的显示用体内图像Pl?P71。
[0128]上述的步骤S9能够如图7所示那样虚拟地表现。
[0129]例如,假设如下虚拟画面Wl':如图7所示那样,主图像P1、P4、P8、P12、P13、P19、P33、P40、P51、P57、P71沿第一方向Dl隔开规定的间隙且以时间序列进行配置,与这些主图像相关联的副图像以与该主图像排列的方式沿第二方向D2隔开规定的间隙且以时间序列进行配置。
[0130]而且,在上述的步骤S9中,按照再现图标AnuAs的操作,一边在虚拟画面Wl'上沿第一方向Dl、第二方向D2移动图像区域FAr,一边将位于图像区域FAr内的虚拟画面W的一部分(主图像、副图像)作为显不画面Wl显不于显不部44。
[0131]此外,在本实施方式I中,如图7所示那样,配置在显示画面Wl中的主图像和副图像的全部的图像为相同的图像尺寸。
[0132]返回图3,在步骤S9之后,显示控制部454根据对输入部43进行的用户操作判断是否有停止操作(步骤S10)。
[0133]在此,所谓停止操作是当在步骤S9中显示画面Wl滚动时,点击鼠标按键的操作。
[0134]在判断为没有停止操作的情况下(步骤SlO 否”),显示控制部454使显示画面Wl滚动并且判断是否存在还未显示的主图像或者副图像(步骤Sll)。
[0135]而且,在判断为存在还未显示的主图像或者副图像的情况下(步骤Sll 是”),显示控制部454转移到步骤S9,继续显示画面Wl的滚动。
[0136]另一方面,在判断为有停止操作的情况下(步骤SlO 是”),或者在判断为没有还要显示的主图像或者副图像的情况下(步骤Sll 否”),显示控制部454停止显示画面Wl的滚动(步骤S12)。
[0137]图8和图9是表示在步骤S12中显示部44所显示的显示画面Wl的一例的图。
[0138]此外,图8示出当在显示画面Wl沿第一方向Dl滚动时、在图5的(d)所示的状态下进行了鼠标的点击操作的情况下显示部44所显示的显示画面W1。图9示出当在显示画面Wl沿第二方向D2滚动的结果是没有还要显示的副图像的情况(图6的(d)的状态)下显示部44所显示的显示画面Wl。
[0139]例如,当在显示画面Wl沿第一方向Dl滚动时进行了鼠标的点击操作的情况下,显示控制部454生成如图8所示那样在进行该点击操作的时间点显示部44所显示的显示画面Wl配置有再现图标Am、As的显示画面Wl,并使显示部44显示该显示画面Wl。
[0140]在图8所不的例子中,与主图像P8相关联的副图像P6、与主图像P12相关联的副图像P10、与主图像P13相关联的副图像P15以及与主图像P19相关联的副图像P16、P17、P21?P25(参照图7)没有配置在显示画面Wl中。因此,显示控制部454如图8所示那样在显示画面Wl中的应该配置该副图像P6、P10、P15?P17、P21?P25的位置(副图像P7、P11、P18的上侧、副图像P14、P20的下侧)分别配置促使该副图像P6、P10、P15?P17、P21?P25的显示的再现图标As。
[0141]另外,关于主图像群中的第一帧以及七帧以后的主图像也没有配置在显示画面Wl中。因此,显示控制部454如图8所示那样在显示画面Wl中的应该配置该第一帧以及七帧以后的主图像的位置(主图像P4的左侧以及主图像P19的右侧)分别配置促使该第一帧以及七巾贞以后的主图像的显不的再现图标Am。
[0142]另外,在例如在显示画面Wl沿第二方向D2滚动的结果是没有还要显示的副图像的情况下,直到没有还要显示的副图像的状态为止,显示控制部454如图9所示那样生成在显示部44所显示的显示画面Wl中配置有再现图标Am、As的显示画面Wl,并使显示部44显示该显示画面Wlo
[0143]在图9所不的例子中,与主图像Pl相关联的副图像P2、与主图像P4相关联的副图像P5、与主图像P8相关联的副图像P9以及与主图像P13相关联的副图像P14、P15没有配置在显示画面Wl中。因此,显示控制部454如图9所示那样,在显示画面Wl中的应该配置该副图像P2、P5、P9、P14、P15的位置(主图像Pl、P4、P8、P13的下侧)分别配置促使该副图像P2、P5、P9、P14、P15的显示的再现图标As。
[0144]另外,主图像群中的六帧以后的主图像也没配置在显示画面Wl中。因此,显示控制部454如图9所示那样在显示画面Wl中的应该配置六帧以后的主图像的位置(主图像P13的右侧)配置促使该六帧以后的主图像的显示的再现图标Am。
[0145]返回图3,在步骤S12之后,控制部45根据对输入部43进行的用户操作判断是否有体内图像的显示的结束指示(步骤S13)。
[0146]在判断为没有体内图像的显示的结束指示的情况下(步骤S13 否”),控制部45转移到步骤S8。
[0147]另一方面,在判断为有体内图像的显示的结束指示的情况下(步骤S13 是”),控制部45结束本处理(体内图像的显示处理)。
[0148]以上所说明的本实施方式I所涉及的图像显示装置4具备图像提取部451。因此,能够从通过胶囊型内窥镜2以时间序列拍摄到的体内图像群(由图像处理部452处理后的显示用体内图像群)中提取拍摄到了被检体100内的出血部、病变等的异常图像作为主图像。
[0149]另外,本实施方式I所涉及的图像显示装置4具备显示控制部454。因此,能够使医生等观察沿第一方向Dl以时间序列配置了包含异常图像的主图像群的显示画面W1。而且,由于以主图像群沿第一方向Dl移动的方式使显示画面Wl滚动,因此即使在异常图像少(例如只有一帧)的情况下,该异常图像的显示时间(滚动时的在显示画面中移动的时间)也为比较长的时间,从而医生等容易发现该异常图像。并且,即使在异常图像没有作为主图像被提取出的情况下,也由于作为副图像配置在显示画面Wl中的第二上、下区域Ar2U、Ar2D,而医生等能够发现该异常图像。
[0150]由于以上,根据本实施方式I所涉及的图像显示装置4,起到如下效果:即使在通过胶囊型内窥镜2以时间序列拍摄到的体内图像群中包含的异常图像少的情况下,也能够显示容易发现该异常图像的显示画面W1。
[0151]另外,本实施方式I所涉及的图像显示装置4具备将未被图像提取部451提取出的副图像关联到帧序号最接近该副图像的主图像的图像关联部453。而且,显示控制部454在将副图像群配置在第二上、下区域Ar2U、Ar2D时,将通过图像关联部453被关联到主图像的每个副图像配置在第二上、下区域Ar2U、Ar2D。即,与主图像相关联的副图像集中配置在第二上、下区域Ar2U、Ar2D。
[0152]因此,医生等在发现了存在关注位置的主图像(例如好像包 括出血部、病变等的显示用体内图像)的情况下,确认集中配置在第二上、下区域Ar2U、Ar2D并且在相对于该主图像在时间上接近的时候拍摄到的副图像,由此能够比较该主图像和副图像,重点确认关注位置。
[0153]并且,在本实施方式I中,显示控制部454将通过图像关联部453被关联到主图像的副图像以与该主图像排列的方式,沿与第一方向Dl正交的第二方向D2以时间序列配置在第二上、下区域Ar2U、Ar2D。
[0154]S卩,主图像群配置在显示画面Wl中的上下方向的中心位置。另外,关于与主图像相关联的副图像,在相对于该主图像在时间上接近的时候拍摄到(帧序号接近)的副图像配置在最接近该主图像的位置处,在时间上远离的时候拍摄到(帧序号远离)的副图像配置在离该主图像远的位置处。
[0155]因而,能够将是异常图像的可能性高的显示用体内图像(主图像)配置在显示画面Wl中的医生等最容易观察的位置(上下方向的中心位置)。另外,能够将是异常图像的可能性低的显示用体内图像(副图像)配置在显示画面Wl中的离上下方向的中心位置远的位置处。因此,医生等能够更迅速地发现异常图像。
[0156]另外,在本实施方式I中,显示控制部454除了使显示画面Wl沿第一方向Dl滚动以外,还使显示画面Wl沿配置副图像的第二方向D2滚动。
[0157]因此,医生等在发现了存在关注位置的主图像且在与该主图像相关联的副图像的一部分没有配置在显示画面Wl中的情况下,通过操作输入部43,能够使显示画面Wl沿第二方向D2滚动,由此确认与该主图像相关联的全部的副图像。
[0158](实施方式I的变形例)
[0159]图10是表示本发明的实施方式I的变形例的图。
[0160]此外,图10示出在再现图标As被操作的情况下的图4所示的显示画面Wl (在图3所示的步骤S7中显示的显示画面Wl)的画面转变(图10的(a)为与图4相同的图)。
[0161]在上述的实施方式I中,显示控制部454在再现图标As被操作的情况下,以配置在显示画面Wl的主图像和副图像的全部成一体地沿第二方向D2移动的方式使显示画面Wl滚动,但并不限于此。
[0162]显示控制部454也可以以只有配置在与被操作的再现图标As同一列的主图像和副图像成一体地向上方或者下方(沿第二方向的方向)移动的方式使显示画面Wl滚动。
[0163]例如,当在步骤S7中显示图4所示的显示画面Wl时操作了配置在显示画面Wl中的副图像P7的上侧的再现图标As的情况下,显示控制部454如图10的(b)?图10的(d)所示那样依次生成如下方式的显示画面Wl:配置在与该再现图标As不同的列的图像Pl?P5、P11?P14不移动,只有配置在与该再现图标As同一列的主图像P8和副图像P7、P9成一体地向下侧移动。
[0164]此时,显示控制部454生成如下显示画面Wl:配置在显示画面Wl中的下侧的副图像P9逐渐从显示画面Wl的下侧离开,与显示画面Wl中的主图像P8相关联并且没有配置在显示画面Wl中的副图像P6逐渐从显示画面Wl的上侧出现。
[0165]而且,显示控制部454按照显示部44的显示帧频使显示部44依次显示生成的图10的(b)?图10的(d)的各显示画面Wl。通过这样各显示画面Wl依次显示于显示部44,显示画面Wl以一列的主图像P8和副图像P6、P7、P9顺畅地向下侧移动的方式滚动。
[0166]在此,显示控制部454如图10的(b)?图10的(d)所示那样,在显示画面Wl的滚动中,在显示画面Wl中不配置再现图标Am、As。
[0167]如以上那样,通过以只有一列的主图像和副图像成一体地移动的方式使显示画面Wi滚动,相比于上述的实施方式I所说明的所有的列的主图像和副图像成一体地移动的方式,能够一目了然的把握配置有应该确认的显示用体内图像的位置。
[0168]另外,关于配置在与被操作了的再现图标As不同的列的主图像(是异常图像的可能性高的显示用体内图像),能够在该滚动中,始终配置在显示画面Wl。
[0169](实施方式2)
[0170]接着,说明本发明的实施方式2。
[0171]在以下的说明中,对与上述的实施方式I相同的结构和步骤标注相同的符号,省略或者简化其详细的说明。
[0172]在上述的实施方式I中,显示控制部454使配置在显示画面Wl中的主图像和副图像的全部的图像为相同的图像尺寸。
[0173]相对于此,在本实施方式2中,使配置在显示画面Wl中的主图像和副图像的图像尺寸不同。
[0174]而且,本实施方式2所涉及的图像显示系统的结构为与上述的实施方式I相同的结构。
[0175]以下,只说明本实施方式2所涉及的显示画面Wl中的主图像和副图像的图像尺寸。
[0176]图11是表示由本发明的实施方式2所涉及的显示控制部454生成的显示画面Wl的一例的图。
[0177]此外,图11示出在图3所示的步骤S6中生成的显示画面W1。
[0178]本实施方式2所涉及的显示控制部454生成副图像的图像尺寸比主图像的图像尺寸小的显示画面Wl。
[0179]在此,显示控制部454使各主图像的图像尺寸全部相同,使各副图像的图像尺寸也全部相同。
[0180]例如,显示控制部454在步骤S6中如图11所示那样生成副图像P2、P3、P5?P7、P9?P11、P14、P15的图像尺寸比主图像P1、P4、P8、P12、P13的图像尺寸小的显示画面Wl。
[0181]此外,在本实施方式2中,只有主图像和副图像的图像尺寸与上述的实施方式I不同,显示画面Wl中的主图像和副图像的配置方式以及显示画面Wl的滚动方式与上述的实施方式I相同。
[0182]根据以上所说明的本实施方式2,除了与上述的实施方式I相同的效果以外还具有以下的效果。
[0183]在本实施方式2中,显示控制部454生成副图像的图像尺寸比主图像的图像尺寸小的显示画面Wl。
[0184]因此,通过将是异常图像的可能性高的主图像显示得比该可能性低的副图像大,能够使关注主图像,由此医生等更容易发现异常图像。
[0185](实施方式3)
[0186]接着说明本发明的实施方式3。
[0187]在以下的说明中,对与上述的实施方式2相同的结构和步骤标注相同符号,省略或者简化其详细的说明。
[0188]在本实施方式3中,相对于上述的实施方式2,只有将表示没有配置在显示画面Wl中的主图像、副图像的个数的信息配置在显示画面Wl中这一点不同。
[0189]而且,本实施方式3所涉及的图像显示装置的结构为与上述的实施方式2相同的结构。
[0190]以下只说明本实施方式3所涉及的配置在显示画面Wl中的上述信息。
[0191]图12是表示本发明的实施方式3所涉及的由显示控制部454生成的显示画面Wl的一例的图。
[0192]此外,图12示出在图3所示的步骤S6中生成的显示画面Wl。
[0193]本实施方式3所涉及的显示控制部454在不使显示画面Wl滚动的状态(图3所示的步骤S6、S12)下,读出存储在存储部42中的信息(主图像群、副图像群以及关联信息)。另外,显示控制部454基于该信息识别存储在存储部42中的主图像群、副图像群中的没有配置在显示画面Wl中的主图像、与配置在显示画面Wl的主图像相关联并且没有配置在显示画面Wl中的副图像的个数。而且,显示控制部454在显示画面Wl中的与再现图标Am、As相邻的位置配置表示该个数的信息。
[0194]在图12所示的例子中,显示控制部454基于上述信息识别除配置在显示画面Wl的主图像PU P4、P8、P12、P13以外,相对于该主图像在时间序列上靠后的主图像的帧数为“12574”。而且,显示控制部454在与显示画面Wl中的右端的再现图标Am相邻的位置配置“12574”这个数字。
[0195]在此,在图12所示的例子中,不存在与配置在显示画面Wl的主图像P1、P4、P8、P12、P13相关联并且没有配置在显示画面Wl中的副图像。因此,显示控制部454没有在显示画面Wl中配置表示该副图像的个数的信息、再现图标As。
[0196]上述的表示个数的信息相当于本发明所涉及的存在信息。
[0197]此外,在本实施方式3中,相对于上述的实施方式2,只有将表示上述个数的信息配置在显示画面Wl中这一点不同,显示画面Wl中的主图像以及副图像的配置方式以及显示画面Wl的滚动方式与上述的实施方式2相同。
[0198]根据以上说明的本实施方式3,除了与上述的实施方式2相同的效果以外还具有以下的效果。
[0199]在本实施方式3中,在没有在显示画面Wl内配置主图像群(副图像群)中包含的全部的主图像(副图像)的情况下,显示控制部454使显示画面Wl中包含表示没有配置的主图像(副图像)的个数的信息。
[0200]因此,医生等能够根据显示于显示画面Wl的上述表示个数的信息推测使显示画面Wl滚动来确认全部的主图像(副图像)需要花费多少时间等。
[0201](实施方式4)
[0202]接着,说明本发明的实施方式4。
[0203]在以下的说明中,对与上述的实施方式2相同的结构和步骤标注相同符号,省略或者简化其详细的说明。
[0204]在上述的实施方式2中,显示控制部454使主图像与副图像的图像尺寸不同,但是使各主图像的图像尺寸全部相同,使各副图像的图像尺寸也全部相同。
[0205]相对于此,在本实施方式4中,各主图像的图像尺寸、各副图像的图像尺寸也不同。
[0206]而且,本实施方式4所涉及的图像显示系统的结构为与上述的实施方式2相同的结构。
[0207]以下只说明本实施方式4所涉及的显示画面Wl中的主图像和副图像的图像尺寸。
[0208]图13是表示由本发明的实施方式4所涉及的显示控制部454生成的显示画面Wl的一例的图。
[0209]此外,图13示出在图3所示的步骤S6中生成的显示画面Wl。
[0210]本实施方式4所涉及的显示控制部454生成如下显示画面Wl:使处于显示画面Wl的中心位置的主图像的图像尺寸最大,使配置在该中心位置以外的各主图像的图像尺寸为从该中心位置到该各主图像的配置位置为止的长度越长则图像尺寸越小。另外,在关注相互关联的主图像和副图像的情况下,显示控制部454生成如下显示画面Wl:使该副图像的图像尺寸为从配置该主图像的位置到该副图像的配置位置为止的长度越长则图像尺寸越小。
[0211]例如,显示控制部454在步骤S6中,如图13所示那样,生成如下显示画面Wl:使配置在显示画面Wl的中心位置的主图像P8的图像尺寸最大,使配置在主图像P8的左右的各主图像P4、P12的图像尺寸比主图像P8的图像尺寸小,使配置在主图像P4的左侧和主图像P12的右侧的各主图像P1、P13的图像尺寸比主图像P4、P12的图像尺寸小。另外,在关注相互关联的主图像P8和副图像P6、P7、P9的情况下,显不控制部454生成如下显不画面Wl:使配置在主图 像P8的上下的各副图像P7、P9的图像尺寸比主图像P8的图像尺寸小,使配置在副图像P7之上的副图像P6的图像尺寸比副图像P7的图像尺寸小。其它的主图像Pl和副图像P2、主图像P4和副图像P3、P5、主图像P12以及副图像P10、P11、主图像P13以及副图像P14、P15的图像尺寸的关系也与主图像P8和副图像P6、P7、P9的图像尺寸的关系相同。
[0212]此外,在本实施方式4中,只有主图像和副图像的图像尺寸与上述的实施方式2不同,显示画面Wl中的主图像和副图像的配置方式以及显示画面Wl的滚动方式与上述的实施方式2相同。
[0213]根据以上说明的本实施方式4,除了与上述的实施方式2相同的效果以外还具有以下的效果。
[0214]在本实施方式4中,显示控制部454生成如下的显示画面Wl:第二上、下区域Ar2U、Ar2D中的副图像的配置位置离第一区域Arl越远,则该副图像的图像尺寸越小。
[0215]因此,通过使是异常图像的可能性低的显示用体内图像(副图像)的图像尺寸小,能够使得关注是异常图像的可能性高的显示用体内图像(主图像),由此医生等更容易发现异常图像。
[0216]另外,在本实施方式4中,显示控制部454生成如下显示画面Wl:在显示画面Wl的包含中心位置的第一区域Arl配置主图像群,第一区域Arl中的主图像的配置位置离该中心位置越远则该主图像的图像尺寸越小。
[0217]因此,能够使配置在显示画面Wl中的医生等最关注的位置(显示画面Wl的中心位置)的显示用体内图像的图像尺寸最大,使配置在医生等难以关注的位置(显示画面Wl的外缘侧的位置)的显示用体内图像的图像尺寸最小。因而,能够成为对于医生等来讲容易观察显示用体内图像的显示画面Wl。
[0218](实施方式5)
[0219]接着,说明本发明的实施方式5。
[0220]在以下的说明中,对与上述的实施方式I相同的结构和步骤标注相同符号,省略或者简化其详细的说明。
[0221]在本实施方式5中,相对于上述的实施方式1,只有操作再现图标Am来使显示画面Wl滚动时生成的显示画面Wl不同。
[0222]而且,本实施方式5所涉及的图像显示装置的结构为与上述的实施方式I相同的结构。
[0223]以下只说明本实施方式5所涉及的在滚动时生成的显示画面Wl。
[0224]图14是表示由本发明的实施方式5所涉及的显示控制部454进行的显示画面Wl的画面转变的一例的图。
[0225]此外,图14示出再现图标Am被操作的情况下的图4所示的显示画面Wl (在图3所示的步骤S7中显示的显示画面Wl)的画面转变(图14的(a)是与图4相同的图)。
[0226]本实施方式5所涉及的显示控制部454在显示画面Wl中的左端或者右端的再现图标Am被操作的情况下(图3所示的步骤S8:“是”),以使副图像群为非显示(不配置在显示画面Wl中)并且使主图像群向左方或者右方移动的方式使显示画面Wl滚动。
[0227]例如,当在步骤S7中显示图4所示的显示画面Wl时操作了配置在显示画面Wl中的右端的再现图标Am的情况下,显示控制部454如图14的(b)?图14的(d)所示那样,依次生成不将副图像群配置在第二上、下区域Ar2U、Ar2D而主图像Pl、P4、P8、P12、P13成一体地向左侧移动的方式的显示画面Wl。而且,显示控制部454按照显示部44的显示帧频使显示部44依次显示生成的图14的(b)?图14的(d)的各显示画面Wl。
[0228]图15是表示本发明的实施方式5所涉及的由显示控制部454生成的显示画面Wl的一例的图。
[0229]此外,图15示出在图14的(d)所示的状态下进行了停止操作的情况下(图3所示的步骤SlO:“是”)的显示画面W1。
[0230]另外,显示控制部454在发生了停止操作的情况下(图3所示的步骤SlO 是”),或者在没有还要显示的主图像的情况下(图3所示的步骤Sll 否”),停止显示画面Wl的滚动。而且,显示控制部454生成在于该停止的时间点显示部44所显示的显示画面Wl中配置了再现图标Am、As、与主图像相关联的副图像的与上述的实施方式I相同的显示画面Wl (图8、图15),并使显示部44显示该显示画面Wl。
[0231]根据以上说明的实施方式5,除了与上述的实施方式I相同的效果以外还具有以下的效果。
[0232]在本实施方式5中,显示控制部454在显示画面Wl的沿第一方向Dl的滚动中不在显示画面Wl配置副图像群,在停止该滚动时在显示画面Wl配置副图像群。
[0233]因此,显示画面Wl的在沿配置主图像群的第一方向Dl的滚动中,使不需要医生等关注的副图像群为非显示而使医生等只关注主图像群,由此使医生等能够高效地发现异常图像。
[0234](实施方式6)
[0235]接着,说明本发明的实施方式6。
[0236]在以下的说明中,对与上述的实施方式I相同的结构和步骤标注相同的符号,省略或者简化其详细的说明。
[0237]在本实施方式6中,相对于上述的实施方式I,只有将显示画面Wl中的主图像以能够与副图像进行识别的方式强调显示这一点不同。
[0238]而且,本实施方式6所涉及的图像显示装置的结构是与上述的实施方式I相同的结构。
[0239]以下只说明本实施方式6所涉及的显示画面Wl中的主图像的强调显示。
[0240]图16是表示本发明的实施方式6所涉及的由显示控制部454生成的显示画面Wl的一例的图。
[0241]此外,图16示出在图3所示的步骤S6中生成的显示画面W1。
[0242]本实施方式6所涉及的显示控制部454如图16所示那样生成如下显示画面Wl:为了能够相对于副图像P2、P3、P5?P7、P9?P11、P14识别显示画面Wl中的主图像P1、P4、P8、P12、P13,通过粗框等强调该主图像P1、P4、P8、P12、P13的外缘。
[0243]此外,省略具体的图示,但显示控制部454不限于在步骤S6中生成的显示画面W1,在使显示画面Wl滚动时(图3所示的步骤S9)、停止该滚动时(图3所示的步骤S12)也生成通过粗框等强调各主图像的各外缘的显示画面W1。
[0244]根据以上说明的本实施方式6,除了与上述的实施方式I相同的效果以外还具有以下的效果。
[0245]在本实施方式6中,显示控制部454生成相对于副图像强调了主图像的显示画面
Wlo
[0246]因此,通过将是异常图像的可能性高的主图像相对于该可能性低的副图像进行强调显示,能够使得关注主图像,由此医生等更容易发现异常图像。
[0247](实施方式7)
[0248]接着,说明本发明的实施方式7。
[0249]在以下的说明中,对与上述的实施方式I相同的结构和步骤标注相同符号,省略或者简化其详细的说明。
[0250]在上述的实施方式I中,显示控制部454生成了隔开规定的间隙地配置了主图像和副图像的显不画面Wl。
[0251]相对于此,在本实施方式7中,显示画面Wl中的主图像和副图像没有间隙。
[0252]而且,本实施方式7所涉及的图像显示系统的结构为与上述的实施方式I相同的结构。
[0253]以下说明本实施方式7所涉及的显示画面Wl。
[0254]图17是用于说明本发明的实施方式7所涉及的显示画面Wl的生成方法的图。
[0255]然而,显示用体内图像P如图17所示那样不是矩形,而是在矩形的四角的区域Cl?C4不具有像素数据(像素值)的八边形的图像。因此,即使想要在显示画面Wl中没有间隙地配置主图像和副图像,也会在上述区域Cl?C4的部分产生间隙。
[0256]因此,本实施方式7所涉及的图像处理部452对显示用体内图像群中包含的每个显示用体内图像P提取相对于各边界线BI?B4与四角的区域Cl?C4对称的区域CP?C4'中包含的像素,并获取这些像素的像素值。
[0257]在此,各边界线BI?B4是指从显示用体内图像P分别划分出四角的区域Cl?C4的边界。
[0258]而且,图像处理部452使用获取到的区域Cl'?Cf内的像素的像素值来对对应的四角的区域Cl?C4进行插值。具体地说,作为区域Cl内的任意的插值像素的像素值,应用处于相对于边界线BI与该插值像素对称的位置的区域Cl'内的像素的像素值。其它的区域C2?C4也与上述的区域Cl相同。
[0259]通过这样的插值处理,如图17所示那样,生成四角的区域Cl?C4被插值的显示用体内图像P 。
[0260]图18是虚拟地表现本发明的实施方式7所涉及的由显示控制部454生成的显示画面Wl的图。
[0261]此外,在图18中,与图7 —样图示了从第一帧到第七十一帧为止的四角的区域Cl?C4被插值的显示用体内图像Pl'?P7P。
[0262]而且,本实施方式7所涉及的显示控制部454生成没有间隙地配置由图像处理部452进行了插值的显示用体内图像P'的显示画面W1,并使显示部44显示该显示画面W1。
[0263]例如,在虚拟地表现由显示控制部454生成的显示画面Wl的情况下,显示画面Wl如图18所示那样为显示用体内图像P'(在图18中只图示显示用体内图像Pl'?P7P )没有间隙地进行配置的虚拟画面Wl'的一部分。
[0264]此外,在本实施方式7中,只有没有间隙地配置主图像和副图像这一点与上述的实施方式I不同,显示画面Wl中的主图像和副图像的配置方式以及显示画面Wl的滚动方式与上述的实施方式I相同。
[0265]根据以上说明的本实施方式7,除了与上述的实施方式I相同的效果以外还具有以下的效果。
[0266]在本实施方式7中,显示控制部454生成在主图像群中包含的各主图像以及副图像群中包含的各副图像之间没有间隙的显示画面W1。
[0267]因此,在显示画面Wl内的主图像和副图像间存在间隙的情况下,医生等必须用眼睛追着各图像,然而由于在显示画面Wl内的主图像以及副图像间没有间隙,因此能够俯瞰没有该隙间地配置的主图像和副图像的整体。因而,能够成为对于医生等来讲容易观察显示用体内图像的显示画面Wl。
[0268](实施方式7的变形例)
[0269]在上述的实施方式7中,在显示画面Wl没有间隙地配置各显示用体内图像P时,为了不使相邻的显示用体内图像P之间的边界醒目,也可以对该边界进行插值处理。
[0270]例如,作为该插值处理,能够列举出使用显示用体内图像P中的与上述边界线相邻的端部区域的像素的像素值来进行插值的方法(例如,参照日本特开2012-185583号公报)。
[0271](其它的实施方式)
[0272]至此,说明了用于实施本发明的方式,但本发明不应该只被上述的实施方式I?7所限定。
[0273]在上述的实施方式I?7中,图像显示装置4使用记录介质5和读写器41获取由胶囊型内窥镜2以时间序列拍摄到的体内图像群,但不限于此。
[0274]例如, 将体内图像群预先保存在另外设置的服务器中。另外,在图像显示装置设置与服务器进行通信的通信部。而且,也可以构成为图像显示装置通过通信部与服务器进行通信来获取体内图像群。在该情况下,本发明所涉及的图像获取部相当于上述通信部。
[0275]在上述的实施方式I?7中,作为图像提取条件,采用与在时间序列上连续的体内图像间的相似度相关的阈值,但不限于此。
[0276]例如,作为图像提取条件,也可以采用与体内图像内的红色或者其它颜色的规定的颜色水平相关的阈值、与体内图像的平均颜色的水平相关的阈值或者与体内图像内的规定的颜色的展现水平(规定的颜色的像素数)相关的阈值。在采用这样的图像提取条件的情况下,图像处理部452基于各显示用体内图像的颜色信息,对各显示用体内图像中的每个显示用体内图像计算上述的体内图像内的红色或者其它颜色的规定的颜色水平、体内图像的平均颜色的水平或者体内图像内的规定的颜色的展现水平。
[0277]在上述的实施方式I?7中,在从显示用体内图像群中提取主图像时,也可以采用与上述的实施方式I?7不同的提取方法。
[0278]例如,图像显示装置(控制部)基于显示用体内图像的像素的颜色特征量、纹理特征量等,从显示用体内图像中检测关注区域(存在出血部、病变等的可能性高的区域)。另夕卜,图像显示装置(控制部)比较在时间序列上连续的显示用体内图像的各关注区域,计算相似度(表示比较对象的区域的相似性的指标)、差异度(表示比较对象的区域的差异性的指标)、移动量(在比较对象的区域内进行相同对象的对应时的坐标的变化量)或者统计量(比较对象的区域内的像素值的平均值、方差值、失真度、峰度、直方图等)。而且,图像显示装置(图像提取部)提取具有规定的相似度、差异度、移动量或者统计量的显示用体内图像作为主图像(关于以上的提取方法例如参照日本特开2010-142287号公报)。
[0279]在上述的实施方式I?7中,在根据用户操作而操作了再现图标AnuAs的情况下,使显示画面Wl滚动,但不限于此。
[0280]例如,也可以构成为在通过用户操作保持按下鼠标按键的状态下移动鼠标时,使显示画面Wl沿该鼠标的移动方向滚动。此时,也可以根据鼠标的移动速度,变更使显示画面Wl滚动的速度(主图像等的移动速度)(鼠标的移动速度越快越加速滚动的速度)。
[0281]图19是表示本发明的实施方式I?7的变形例的图。
[0282]在上述的实施方式I?7中,将与主图像相关联的副图像以同该主图像排列的方式沿与第一方向Dl正交的第二方向D2以时间序列进行配置,但不限于此。
[0283]例如,也可以如图19所示那样配置主图像和副图像。
[0284]以下说明图19所示的主图像P33以及与该主图像P33相关联的副图像P26?P32、P34?P36的配置的关系。
[0285]具体地说,将相对于主图像P33帧序号近的上限为两个的副图像(图19的情况下为副图像P31、P32以及副图像P34、P35,以下记载为第一副图像)以比主图像P33的图像尺寸小的图像尺寸沿第一方向分别排列配置在主图像P33的上侧和下侧。另外,将在时间序列上比第一副图像靠前和靠后的上限为四个的副图像(在图19的情况下为副图像P27?P30以及副图像P36,以下记载为第二副图像)以比第一副图像小的图像尺寸沿第一方向分别排列配置在第一副图像的上侧和下侧。并且,将在时间序列上比第二副图像靠前和靠后的上限为八个的副图像(在图19的情况下只是副图像P26,以下记载为第三副图像)以比第二副图像小的图像尺寸沿第一方向分别排列配置在第二副图像的上侧和下侧。在具有在时间序列上比第三副图像靠前和靠后的图像的情况下,与上述第一?第三副图像的配置方法相同地进行配置。
[0286]此外,图19所示的其它的主图像和与该主图像相关联的副图像的配置关系也与上述主图像P33以及与该主图像P33相关联的副图像P26?P32、P34?P36的配置关系相同。
[0287]附图标记说曰月
[0288]1:图像显示系统;2:胶囊型内窥镜;3:接收装置;3a?3h:接收天线;4:图像显示装置;5:存储介质;41:读写器;42:存储部;43:输入部;44:显示部;45:控制部;451:图像提取部;452:图像处理部;453:图像关联部;454:显不控制部;100:被检体;Arl:第一区域;Ar2D:第二下区域;Ar2U:第二上区域;Am、As:再现图标;B1?B4:边界线;C1?C4、C1'?C4':区域;Dl:第一方向;D2:第二方向;Far:图像区域;P、P':显示用体内图像;P1、P1'、P4、P4,、P8、P8,、P12、P12'、P13、P13'、P19、P19'、P33、P33'、P40、P40r、P51、P51'、P57、P57'、P71、P71':主图像(显示用体内图像);P2、P2'、P3、P3'、P5 ?P7、P5r ?P7r、P9 ?Ρ11、Ρ9'?Pll'、P14 ?P18、P14'?P18'、P20 ?P32、P20'?P32'、P34 ?P39、P34'?P39'、P41 ?P50、P41'?P50'、P52 ?P56、P52'?P56'、P58?P70、P58'?P70':副图像(显示用体内图像);W1:显示画面;Wl':虚拟画面。
【主权项】
1.一种图像显示装置,具备显示显示画面的显示部,该图像显示装置的特征在于,具备: 图像获取部,其获取包含以时间序列获取到的多个图像的图像群; 图像提取部,其从由上述图像获取部获取到的上述图像群中提取包含满足规定的条件的主图像的主图像群; 图像关联部,其对上述主图像群中包含的每个上述主图像关联上述图像群中的没有被上述图像提取部提取出的副图像;以及 显示控制部,其生成在第一区域配置上述主图像群并在与上述第一区域不同的第二区域配置包含上述副图像的副图像群的显示画面,并使上述显示部显示该显示画面, 其中,上述主图像群沿第一方向以时间序列配置在上述第一区域, 上述副图像群以通过上述图像关联部被关联到上述主图像的每个副图像与该主图像排列的方式,沿与上述第一方向正交的第二方向以时间序列配置在上述第二区域, 上述显示控制部以使上述主图像群沿上述第一方向移动的方式以及使上述主图像群的至少一部分和上述副图像群的至少一部分沿上述第二方向移动的方式变更上述显示画面。2.根据权利要求1所述的图像显示装置,其特征在于, 上述图像关联部将上述副图像关联到在时间序列上最接近该副图像的上述主图像。3.根据权利要求1或2所述的图像显示装置,其特征在于, 上述显示控制部生成上述第二区域中的上述副图像的配置位置离上述第一区域越远则该副图像的图像尺寸越小的上述显示画面。4.根据权利要求1至3中的任一项所述的图像显示装置,其特征在于, 上述显示控制部生成如下的上述显示画面:在包含上述显示画面的中心位置的上述第一区域配置上述主图像群,并且上述第一区域中的上述主图像的配置位置离上述中心位置越远则该主图像的图像尺寸越小。5.根据权利要求1至4中的任一项所述的图像显示装置,其特征在于, 还具备指示接受部,该指示接受部接受上述主图像群沿上述第一方向移动的方式下的上述显示画面的变更的开始指示、以及上述主图像群沿上述第一方向移动的方式下的上述显示画面的变更的停止指示, 上述显示控制部在上述指示接受部接受到上述开始指示的情况下,以不在上述第二区域配置上述副图像群而上述主图像群沿上述第一方向移动的方式依次生成上述显示画面,在上述指示接受部接受到上述停止指示的情况下,以在上述第二区域配置上述副图像群并且使上述主图像群的移动停止的方式生成上述显示画面。6.根据权利要求1至5中的任一项所述的图像显示装置,其特征在于, 上述显示控制部生成在上述主图像群中包含的各上述主图像以及上述副图像群中包含的各上述副图像之间没有间隙的上述显示画面。7.根据权利要求1至6中的任一项所述的图像显示装置,其特征在于, 上述显示控制部生成相对于上述副图像强调了上述主图像的上述显示画面。8.根据权利要求1至7中的任一项所述的图像显示装置,其特征在于, 在没有在上述显示画面内配置上述主图像群中包含的全部的上述主图像的情况下,上述显示控制部使上述显示画面中包含表示存在没有配置的上述主图像的存在信息。9.根据权利要求1至8中的任一项所述的图像显示装置,其特征在于, 在没有在上述显示画面内配置上述副图像群中包含的全部的上述副图像的情况下,上述显示控制部使上述显示画面中包含表示存在没有配置的上述副图像的存在信息。10.根据权利要求8或9所述的图像显示装置,其特征在于, 上述存在信息是表示上述没有配置的上述主图像或者上述副图像的个数的信息。11.一种图像显示方法,由具备显示显示画面的显示部的图像显示装置进行,该图像显示方法的特征在于,包括: 图像获取步骤,获取包含以时间序列获取到的多个图像的图像群; 图像提取步骤,从在上述图像获取步骤中获取到的上述图像群中提取包含满足规定的条件的主图像的主图像群; 图像关联步骤,对上述主图像群中包含的每个上述主图像关联上述图像群中的在上述图像提取步骤中没有被提取出的副图像; 显示步骤,生成在第一区域配置上述主图像群并在与上述第一区域不同的第二区域配置包含上述副图像的副图像群的显示画面,并使上述显示部显示该显示画面;以及 显示变更步骤,变更上述显示画面, 其中,在上述显示步骤中, 将上述主图像群沿第一方向以时间序列配置在上述第一区域,将上述副图像群以在上述图像关联步骤中关联到上述主图像的每个副图像与该主图像排列的方式,沿与上述第一方向正交的第二方向以时间序列配置在上述第二区域, 在上述显示变更步骤中, 以使上述主图像群沿上述第一方向移动的方式以及使上述主图像群的至少一部分和上述副图像群的至少一部分沿上述第二方向移动的方式变更上述显示画面。12.一种图像显示程序,其特征在于, 其使图像显示装置执行根据权利要求11所述的图像显示方法。
【专利摘要】图像显示装置(4)具备:图像提取部(451),其从获取到的图像群中提取包含满足规定的条件的主图像的主图像群;图像关联部(453),其对主图像群中包含的每个主图像关联未被图像提取部(451)提取出的副图像;以及显示控制部(454),其生成在第一区域配置主图像群且在与第一区域不同的第二区域配置包含副图像的副图像群的显示画面,并使显示部(44)显示该显示画面。主图像群沿第一方向以时间序列配置在第一区域。副图像群以通过图像关联部(453)被关联到主图像的每个副图像与该主图像排列的方式,沿与第一方向正交的第二方向以时间序列配置在第二区域。显示控制部(454)以使主图像群沿第一方向移动的方式以及使主图像群的至少一部分和副图像群的至少一部分沿第二方向移动的方式变更显示画面。
【IPC分类】G09G5/34, G09G5/00, A61B1/00, G09G5/14, A61B1/04
【公开号】CN104902800
【申请号】CN201480004217
【发明人】高杉启, 岩城秀和
【申请人】奥林巴斯株式会社
【公开日】2015年9月9日
【申请日】2014年6月5日
【公告号】WO2015033634A1

最新回复(0)