内窥镜图像处理装置、内窥镜图像处理方法及程序

技术领域

本发明涉及内窥镜图像处理装置、内窥镜图像处理方法及程序。

背景技术

在医疗领域中，以往已知有如下技术：根据拍摄被检者的所希望的部位得到的图像来检测病变部，将与该检测到的病变部相关的信息附加到该图像进行显示。

具体而言，例如在日本特开2004-73488号公报中公开了如下技术：根据拍摄被检者的胸部得到的X线图像来检测病变部，将能够确定该检测到的病变部的位置的标记显示于与该X线图像对应的诊断图像的外框部分。

这里，在医疗领域的内窥镜观察中，设置于内窥镜的细长的插入部被插入到被验者的内部，通过设置于该插入部的前端部的光学元件等拍摄规定的观察视野内的被摄体，并且，将拍摄该被摄体得到的图像显示于监视器等显示装置。此外，在医疗领域的内窥镜观察中，例如，根据插入到被验者的内部的插入部的前端部和存在于该被验者的内部的病变部的相对的位置关系，拍摄该被验者的内部的被摄体得到的图像中的该病变部的位置发生变化。

但是，在日本特开2004-73488号公报中，未特别提及显示如下标记时的具体的显示方法等，该标记能够确定在内窥镜观察时拍摄被摄体得到的图像中的病变部的位置。

因此，根据日本特开2004-73488号公报所公开的结构，例如可能发生如下状况：根据在内窥镜观察时拍摄被摄体得到的图像中的病变部的位置的变化，能够确定该病变部的位置的标记的显示位置频繁地变化。而且，根据日本特开2004-73488号公报所公开的结构，在发生了如上的状况时，产生进行病变部的诊断等作业的用户必须细心地注意标记的显示位置这样的问题点。

即，根据日本特开2004-73488号公报所公开的结构，产生与可能对通过内窥镜观察进行病变部的诊断等作业的用户增加过度的负担这样的上述问题点相应的课题。

本发明是鉴于上述情况而完成的，其目的在于，提供一种能够减轻通过内窥镜观察进行病变部的诊断等作业的用户的负担的内窥镜图像处理装置、内窥镜图像处理方法及程序。

发明内容

用于解决问题的手段

本发明的一方案的内窥镜图像处理装置具有：其构成为进行用于在由内窥镜拍摄被检体内的被摄体得到的内窥镜图像中检测病变区域的处理，并且进行用于取得病变信息的处理，该病变区域相当于被估计为包含病变部的区域，该病变信息包含表示所述内窥镜图像所包含的所述病变区域的位置的信息；判定部，其构成为判定在所述内窥镜图像中是否包含所述病变区域；以及显示控制部，其构成为进行用于基于所述病变信息和由所述判定部得到的判定结果而生成1个以上的标记的处理，并且进行用于生成显示图像的处理，其中，所述1个以上的标记表示由所述病变检测部检测的所述病变区域的检测状态的概要，在所述显示图像中，使所述内窥镜图像显示于设定在显示装置的显示画面上的内窥镜图像显示区域，并且使所述1个以上的标记显示于N个标记显示区域中的至少1个标记显示区域，该N个标记显示区域设定在所述显示画面上的所述内窥镜图像显示区域的外部的规定的位置，并且被设定为具有与所述1个以上的标记的最大显示数相应的个数的区域。

在本发明的一方案的内窥镜图像处理方法中，病变检测部进行用于在由内窥镜拍摄被检体内的被摄体得到的内窥镜图像中检测病变区域的处理，并且进行用于取得病变信息的处理，该病变区域相当于被估计为包含病变部的区域，该病变信息包含表示所述内窥镜图像所包含的所述病变区域的位置的信息，判定部判定在所述内窥镜图像中是否包含所述病变区域，显示控制部进行用于基于所述病变信息和由所述判定部得到的判定结果而生成1个以上的标记的处理，所述1个以上的标记表示由所述病变检测部检测的所述病变区域的检测状态的概要，所述显示控制部进行用于生成显示图像的处理，在所述显示图像中，使所述内窥镜图像显示于设定在显示装置的显示画面上的内窥镜图像显示区域，并且使所述1个以上的标记显示于N个标记显示区域中的至少1个标记显示区域，该N个标记显示区域设定在所述显示画面上的所述内窥镜图像显示区域的外部的规定的位置，并且被设定为具有与所述1个以上的标记的最大显示数相应的个数的区域。

本发明的一方案的程序用于使计算机执行如下处理：用于在由内窥镜拍摄被检体内的被摄体得到的内窥镜图像中检测病变区域的处理，该病变区域相当于被估计为包含病变部的区域；用于取得病变信息的处理，该病变信息包含表示所述内窥镜图像所包含的所述病变区域的位置的信息；判定处理，判定在所述内窥镜图像中是否包含所述病变区域；用于基于所述病变信息和通过所述判定处理得到的判定结果而生成1个以上的标记的处理，该1个以上的标记表示所述病变区域的检测状态的概要；以及用于生成显示图像的处理，在该显示图像中，使所述内窥镜图像显示于设定在显示装置的显示画面上的内窥镜图像显示区域，并且使所述1个以上的标记显示于N个标记显示区域中的至少1个标记显示区域，该N个标记显示区域设定在所述显示画面上的所述内窥镜图像显示区域的外部的规定的位置，并且被设定为具有与所述1个以上的标记的最大显示数相应的个数的区域。

附图说明

图1是示出包含实施方式的内窥镜图像处理装置的内窥镜系统的主要部分的结构的图。

图2是用于说明在第1实施方式的内窥镜图像处理装置中进行的处理的流程图。

图3是示出设定在显示装置的显示画面上的内窥镜图像显示区域及标记显示区域的一例的图。

图4是示出设定于内窥镜图像的参照区域的一例的图。

图5是示出根据第1实施方式的内窥镜图像处理装置的处理而显示的显示图像的一例的图。

图6是示出根据第1实施方式的内窥镜图像处理装置的处理而显示的显示图像的一例的图。

图7是示出根据第1实施方式的内窥镜图像处理装置的处理而显示的显示图像的一例的图。

图8是示出根据第1实施方式的内窥镜图像处理装置的处理而显示的显示图像的一例的图。

图9是用于说明在第2实施方式的内窥镜图像处理装置中进行的处理的流程图。

图10是示出根据第2实施方式的内窥镜图像处理装置的处理而显示的显示图像的一例的图。

图11是示出根据第2实施方式的内窥镜图像处理装置的处理而显示的显示图像的一例的图。

图12是示出根据第2实施方式的内窥镜图像处理装置的处理而显示的显示图像的一例的图。

图13是示出根据第2实施方式的内窥镜图像处理装置的处理而显示的显示图像的一例的图。

图14是示出根据第2实施方式的内窥镜图像处理装置的处理而显示的显示图像的一例的图。

图15是用于说明在第2实施方式的变形例的内窥镜图像处理装置中进行的处理的流程图。

具体实施方式

以下，参照附图对本发明的实施方式进行说明。

(第1实施方式)

图1至图8是第1实施方式的图。

如图1所示，内窥镜系统1构成为具有内窥镜11、主体装置12、内窥镜图像处理装置13、以及显示装置14。图1是示出包含实施方式的内窥镜图像处理装置的内窥镜系统的主要部分的结构的图。

内窥镜11例如构成为具备能够向被检体内插入的细长形状的插入部(未图示)、以及设置在该插入部的基端部的操作部(未图示)。此外，内窥镜11例如构成为经由从操作部延伸的通用缆线(未图示)，以装卸自如的方式与主体装置12连接。此外，在内窥镜11的内部，例如设置有用于引导从主体装置12供给的照明光并将其从插入部的前端部出射的光纤等导光构件(未图示)。此外，在内窥镜11的插入部的前端部设置有摄像部111。

摄像部111例如构成为具备CCD图像传感器或CMOS图像传感器这样的摄像元件。此外，摄像部111构成为拍摄从被照明光而照明的被摄体返回的返回光，生成与该拍摄到的返回光相应的摄像信号并向主体装置12输出，其中，该照明光是经由内窥镜11的插入部的前端部出射的照明光。

主体装置12构成为以装卸自如的方式与内窥镜11及内窥镜图像处理装置13的分别连接。此外，例如如图1所示，主体装置12构成为具有光源部121、图像生成部122、控制部123以及存储介质124。

光源部121例如构成为具备LED等这样的1个以上的发光元件。具体而言，光源部121例如构成为具有产生蓝色光(以后也称为B光)的蓝色LED、产生绿色光(以后也称为G光)的绿色LED、以及产生红色光(以后也称为R光)的红色LED。此外，光源部121构成为能够产生与控制部123的控制相应的照明光并将其供给到内窥镜11。

图像生成部122构成为，能够基于从内窥镜11输出的摄像信号生成内窥镜图像，将该生成的内窥镜图像一帧一帧地向内窥镜图像处理装置13依次输出。

在本实施方式中，主体装置12的图像生成部122及控制部123可以构成为各个电子电路，或者也可以构成为FPGA(Field Programmable Gate Array：现场可编程门阵列)等集成电路中的电路块。此外，在本实施方式中，例如，主体装置12也可以构成为具备1个以上的处理器(CPU等)。此外，通过适当对本实施方式的结构进行变形，例如，主体装置12也可以从存储器等存储介质124读入用于执行图像生成部122及控制部123的功能的程序，并且，进行与该读入的程序相应的动作。

内窥镜图像处理装置13构成为以装卸自如的方式与主体装置12及显示装置14分别连接。此外，内窥镜图像处理装置13构成为通过进行基于从主体装置12输出的内窥镜图像的处理，生成表示该内窥镜图像中的病变区域的检测状态的概要的1个以上的标记。此外，内窥镜图像处理装置13构成为能够生成显示图像并向显示装置14输出，该显示图像包含从主体装置12输出的内窥镜图像和如上述那样生成的1个以上的标记。此外，内窥镜图像处理装置13构成为具有病变检测部131、判定部132、显示控制部133以及存储介质134。

病变检测部131构成为，进行用于在从主体装置12依次输出的内窥镜图像中检测与被估计为包含病变部的区域相当的病变区域L的处理，并且，进行用于取得与表示该检测到的病变区域L的信息相当的病变信息IL的处理。

另外，在本实施方式中，病变区域L例如作为包含息肉的区域而被检测。此外，在本实施方式中，病变信息IL例如作为包含如下两种信息的信息而被取得，该两种信息为表示从主体装置12输出的内窥镜图像所包含的病变区域L的位置(像素位置)的信息、以及表示该内窥镜图像所包含的该病变区域L的尺寸(像素数)的信息。

判定部132构成为，根据病变检测部131中的病变信息IL的取得状态，判定在从主体装置12输出的内窥镜图像中是否包含病变区域L。

具体而言，例如在病变检测部131中检测到取得了病变信息IL的情况下，判定部132取得在从主体装置12输出的内窥镜图像中包含病变区域L这一判定结果。此外，例如在病变检测部131中检测到未取得病变信息IL的情况下，判定部132取得在从主体装置12依次输出的内窥镜图像中不包含病变区域L这一判定结果。

判定部132构成为具有用于依次存储由病变检测部131得到的病变信息IL的存储器(未图示)。此外，判定部132构成为，进行用于基于由病变检测部131得到的病变信息IL来判定与该病变信息IL对应的病变区域L的检测是否中断的处理。

具体而言，判定部132例如基于由注目区域检测部131得到的第1病变信息和在该第1病变信息的前1帧存储于存储器的第2病变信息，检测由该第1病变信息表示的第1病变区域和由该第2病变信息表示的第2病变区域是否为同一病变区域L。然后，判定部132在能够检测到上述的第1及第2病变区域为同一病变区域L的情况下，取得病变区域L的检测未中断这一判定结果。此外，判定部132在无法检测到上述的第1及第2病变区域为同一病变区域L的情况下，取得病变区域L的检测中断这一判定结果。

显示控制部133构成为进行用于在显示装置14的显示画面上设定内窥镜图像显示区域、并且在该显示画面上的该内窥镜图像显示区域的外部的规定的位置设定与后述的标记的最大显示数对应的N个标记显示区域的处理。即，N个标记显示区域设定在显示装置14的显示画面上的内窥镜图像显示区域的外部的规定的位置，并且，设定为具有与后述的标记的最大显示数相应的个数的区域。另外，根据本实施方式，只要是与后述的标记的最大显示数对应的值，则也可以将上述的N的值设定为任意值。

显示控制部133构成为进行如下处理：该处理用于基于由病变检测部131得到的病变信息IL和由判定部132得到的判定结果而生成1个以上的标记，该1个以上的标记表示与该病变信息IL对应的病变区域L的检测状态的概要。

显示控制部133构成为进行如下处理：该处理用于使从主体装置12输出的内窥镜图像显示于内窥镜图像显示区域、并且生成并输出用于使如上述那样生成的1个以上的标记显示于N个标记显示区域中的至少1个标记显示区域的显示图像。即，显示控制部133构成为，能够生成显示图像并向显示装置14输出，该显示图像包含从主体装置12输出的内窥镜图像和如上述那样生成的1个以上的标记。

在本实施方式中，内窥镜图像处理装置13的病变检测部131、判定部132及显示控制部133可以构成为各个电子电路，或者也可以构成为FPGA(Field Programmable GateArray)等集成电路中的电路块。此外，在本实施方式中，例如，内窥镜图像处理装置13也可以构成为具备1个以上的处理器(CPU等)。此外，通过适当对本实施方式的结构进行变形，例如，内窥镜图像处理装置13也可以从存储器等存储介质134读入用于执行病变检测部131、判定部132及显示控制部133的功能的程序，并且，进行与该读入的程序相应的动作。

显示装置14构成为以装卸自如的方式与内窥镜图像处理装置13连接。此外，显示装置14具备显示器等，构成为能够显示从内窥镜图像处理装置13输出的显示图像。

接下来，对本实施方式的作用进行说明。

手术医生等用户在将内窥镜系统1的各部连接并接通电源之后，向被检者的内部插入内窥镜11的插入部，并且，在能够拍摄该被检者的内部的所希望的被摄体的位置配置该插入部的前端部。

控制部123在主体装置12的电源被接通时，对光源部121进行用于依次或同时产生B光、G光及R光作为照明光的控制。然后，根据这样的控制部123的控制，从光源部121向内窥镜11供给照明光，由摄像部111拍摄从被该照明光照明的被摄体返回的返回光，在图像生成部122生成与从摄像部111向主体装置12输出的摄像信号相应的内窥镜图像EG，将该生成的内窥镜图像EG一帧一帧地向内窥镜图像处理装置13依次输出。

这里，参照图2等来说明在本实施方式的内窥镜图像处理装置13的各部进行的处理的具体例。图2是用于说明在第1实施方式的内窥镜图像处理装置中进行的处理的流程图。

病变检测部131进行用于在内窥镜图像EG中检测与被估计为包含病变部的区域相当的病变区域L的处理，并且，进行用于取得与表示该检测到的病变区域L的信息相当的病变信息IL的处理。

显示控制部133进行用于在显示装置14的显示画面上设定内窥镜图像显示区域并且在该显示画面上的该内窥镜图像显示区域的外部的规定的位置设定N个标记显示区域的处理。

具体而言，显示控制部133例如在显示装置14的显示画面上分别设定图3所示的1个内窥镜图像显示区域AG和4个标记显示区域AM1、AM2、AM3及AM4。图3是示出设定在显示装置的显示画面上的内窥镜图像显示区域及标记显示区域的一例的图。

内窥镜图像显示区域AG例如被设定为具有与内窥镜图像EG的尺寸相同的尺寸或者比内窥镜图像EG的尺寸大的尺寸的八边形的区域(参照图3)。此外，标记显示区域AM1～AM4例如位于显示装置14的显示画面上的内窥镜图像显示区域AG的外部，并且，被设定为从该内窥镜图像显示区域AG的中心观察时位于左上侧、左下侧、右上侧及右下侧这4个方向的4个三角形的区域(参照图3)。即，标记显示区域AM1～AM4设定在内窥镜图像显示区域AG的外部的规定的位置，并且，被设定为与后述的各显示例中的标记的最大显示数对应的4个区域。另外，图3的显示画面内的虚线是为了说明内窥镜图像显示区域AG及标记显示区域AM1～AM4的位置关系等而描绘的，因此，实际上未显示在显示装置14中。

显示控制部133进行用于在内窥镜图像EG中设定规定的多个参照区域的处理。

具体而言，显示控制部133例如设定图4所示的4个参照区域AR1、AR2、AR3及AR4，该4个参照区域AR1、AR2、AR3及AR4相当于将八边形的内窥镜图像EG分割为左上部、左下部、右上部及右下部的各部而得到的区域。另外，在图4中，为了方便图示及说明，省略内窥镜图像EG所包含的病变区域L等被摄体的描绘。图4是示出设定于内窥镜图像的参照区域的一例的图。

根据本实施方式，显示控制部133只要在内窥镜图像EG中设定规定的多个参照区域，则也可以设定具有与图4所例示的参照区域AR1～AR4不同的数量及/或形状的参照区域。

判定部132根据病变检测部131中的病变信息IL的取得状态，判定在内窥镜图像EG中是否包含病变区域L(图2的步骤S1)。

显示控制部133在由判定部132得到在内窥镜图像EG中不包含病变区域L这一判定结果的情况下(S1：否)，生成用于使该内窥镜图像EG显示于内窥镜图像显示区域的显示图像并将其向显示装置14输出(图2的步骤S4)，之后结束一系列的处理。即，在本实施方式中，在内窥镜图像EG中不包含病变区域L的情况下，在标记显示区域不显示表示该病变区域L的检测状态的概要的标记。

显示控制部133在由判定部132得到在内窥镜图像EG中包含病变区域L这一判定结果的情况下(S1：是)，进行用于基于由病变检测部131得到的病变信息IL和设定于该内窥镜图像EG的规定的多个参照区域而生成表示与该病变信息IL对应的病变区域L的检测状态的概要的标记的处理(图2的步骤S2)。

显示控制部133生成用于使内窥镜图像EG显示于内窥镜图像显示区域并且使通过图2的步骤S2生成的标记显示于标记显示区域的显示图像并将其向显示装置14输出(图2的步骤S3)，之后结束一系列的处理。

这里，根据图2的步骤S2及步骤S3的处理，例如将图5～图8中的任意一个图所示的显示图像显示于显示装置14。图5～图8是示出根据第1实施方式的内窥镜图像处理装置的处理而显示的显示图像的一例的图。

在图5的显示图像DGA的内窥镜图像显示区域AG显示有具有与该内窥镜图像显示区域AG相同的形状及尺寸的内窥镜图像EGA。此外，根据图5的内窥镜图像EGA，在设定于该内窥镜图像EGA的左下部的参照区域AR2(参照图4)包含病变区域LA。因此，根据图5的显示图像DGA，表示在内窥镜图像EGA的参照区域AR2检测到病变区域LA的标记MA被显示于标记显示区域AM2。另外，图5的显示画面内的虚线是为了说明病变区域LA及标记显示区域AM1～AM4的位置关系等而描绘的，因此，实际上未显示在显示装置14中。

根据图5的显示例，作为图2的步骤S2的处理，由显示控制部133进行用于确定病变区域LA的当前位置包含在参照区域AR2中的处理。此外，根据图5的显示例，作为图2的步骤S2的处理，由显示控制部133进行用于生成表示在内窥镜图像EGA的参照区域AR2检测到病变区域LA的标记MA的处理。此外，根据图5的显示例，作为图2的步骤S3的处理，由显示控制部133进行用于生成包含内窥镜图像EGA及标记MA的显示图像DGA并使其显示于显示装置14的处理。

即，根据图5的显示例，由显示控制部133进行如下处理：基于病变信息IL确定规定的多个参照区域中的包含病变区域LA的当前位置的一个参照区域AR2；生成表示该一个参照区域AR2的一个标记MA；在N个标记显示区域中的设定在与该一个参照区域AR2最近的位置的一个标记显示区域AM2显示该一个标记MA。

另外，根据本实施方式，也可以代替进行用于在与检测到病变区域LA的参照区域AR2对应的标记显示区域AM2显示标记的处理，例如进行用于在与未检测到该病变区域LA的参照区域AR1、AR3及AR4对应的标记显示区域AM1、AM3及AM4显示标记的处理。

此外，根据本实施方式，例如在病变区域LA具有包含于参照区域AR1～AR4中的多个参照区域这样的尺寸的情况下，也可以进行用于在与该多个参照区域对应的各标记显示区域显示标记的处理。具体而言，例如在病变区域LA包含于参照区域AR1及AR2的情况下，也可以由显示控制部133进行用于在与该参照区域AR1及AR2对应的标记显示区域AM1及AM2显示标记的处理。

此外，根据本实施方式，例如在病变区域LA具有包含于参照区域AR1～AR4中的多个参照区域这样的尺寸的情况下，也可以进行用于在与该多个参照区域中的包含该病变区域L的面积最大的一个参照区域对应的一个标记显示区域显示标记的处理。

在图6的显示图像DGB的内窥镜图像显示区域AG显示有具有与该内窥镜图像显示区域AG相同的形状及尺寸的内窥镜图像EGB。此外，根据图6的内窥镜图像EGB，在设定于该内窥镜图像EGB的左上部的参照区域AR1(参照图4)包含病变区域LB。因此，根据图6的显示图像DGB，表示在内窥镜图像EGB中检测到病变区域LB的4个标记MB1、MB2、MB3及MB4被显示于标记显示区域AM1～AM4。此外，根据图6的显示图像DGB，显示有标记MB1，该标记MB1具有表示在内窥镜图像EGB的参照区域AR1检测到病变区域LB这样的形状。换言之，根据图6的显示图像DGB，显示有指示参照区域AR1这样的三角形的标记MB1，该参照区域AR1相当于内窥镜图像EGB中的检测到病变区域LB的区域。此外，根据图6的显示图像DGB，显示有标记MB2、MB3及MB4，该标记MB2、MB3及MB4具有表示在内窥镜图像EGB的参照区域AR2、AR3及AR4未检测到病变区域LB这样的形状。另外，图6的显示画面内的虚线是为了说明病变区域LB及标记显示区域AM1～AM4的位置关系等而描绘的，实际上未显示在显示装置14中。

根据图6的显示例，作为图2的步骤S2的处理，由显示控制部133进行用于分别生成标记MB1、MB2、MB3及MB4的处理，该标记MB1、MB2、MB3及MB4表示在内窥镜图像EGB中检测到病变区域LB。此外，根据图6的显示例，作为图2的步骤S2的处理，由显示控制部133进行用于确定病变区域LB的当前位置包含在参照区域AR1中的处理。此外，根据图6的显示例，作为图2的步骤S2的处理，由显示控制部133进行用于生成指示参照区域AR1这样的三角形的标记MB1的处理，该参照区域AR1相当于内窥镜图像EGB中的检测到病变区域LB的区域。此外，根据图6的显示例，作为图2的步骤S2的处理，由显示控制部133进行用于生成指示与内窥镜图像EGB中的参照区域AR1存在的方向不同的方向这样的三角形的标记MB2、MB3及MB4的处理。此外，根据图6的显示例，作为图2的步骤S3的处理，由显示控制部133进行用于生成包含内窥镜图像EGB及标记MB1～MB4的显示图像DGB并使其显示于显示装置14的处理。

即，根据图6的显示例，由显示控制部133进行如下处理：在N个标记显示区域分别逐一地显示标记；基于病变信息IL确定规定的多个参照区域中的包含病变区域LB的当前位置的一个参照区域AR1；以及将标记显示区域AM1所显示的一个标记MB1的形状设定为指示该一个参照区域AR1这样的形状，该标记显示区域AM1是该N个标记显示区域中的设定于与该一个参照区域AR1最近的位置的一个标记显示区域。

在图7的显示图像DGC的内窥镜图像显示区域AG显示有具有与该内窥镜图像显示区域AG相同的形状及尺寸的内窥镜图像EGC。此外，根据图7的内窥镜图像EGC，在设定于该内窥镜图像EGC的左下部的参照区域AR2(参照图4)包含病变区域LC。因此，根据图7的显示图像DGC，在标记显示区域AM1～AM4显示有表示在内窥镜图像EGC中检测到病变区域LC的4个标记MC1、MC2、MC3及MC4。此外，根据图7的显示图像DGC，显示有标记MC2，该标记MC2具有表示在内窥镜图像EGC的参照区域AR2检测到病变区域LC这样的亮度。此外，根据图7的显示图像DGC，显示有标记MC1、MC3及MC4，该标记MC1、MC3及MC4具有表示在内窥镜图像EGC的参照区域AR1、AR3及AR4未检测到病变区域LC这样的亮度。另外，图7的显示画面内的虚线是为了说明病变区域LC及标记显示区域AM1～AM4的位置关系等而描绘的，因此，实际上未显示在显示装置14中。

根据图7的显示例，作为图2的步骤S2的处理，由显示控制部133进行用于分别生成表示在内窥镜图像EGC中检测到病变区域LC的标记MC1、MC2、MC3及MC4的处理。此外，根据图7的显示例，作为图2的步骤S2的处理，由显示控制部133进行用于确定病变区域LC的当前位置包含在参照区域AR2中的处理。此外，根据图7的显示例，作为图2的步骤S2的处理，由显示控制部133进行用于生成具有亮度BHA的标记MC2的处理。此外，根据图7的显示例，作为图2的步骤S2的处理，由显示控制部133进行用于生成具有比亮度BHA低的亮度BLA的标记MC1、MC3及MC4的处理。换言之，根据图7的显示例，作为图2的步骤S2的处理，由显示控制部133进行用于将标记MC2的亮度设定为比标记MC1、MC3及MC4的亮度高的亮度的处理。此外，根据图7的显示例，作为图2的步骤S3的处理，由显示控制部133进行用于生成包含内窥镜图像EGC及标记MC1～MC4的显示图像DGC并使其显示于显示装置14的处理。

即，根据图7的显示例，由显示控制部133进行如下处理：在N个标记显示区域分别逐一地显示标记；基于病变信息IL确定规定的多个参照区域中的包含病变区域L的当前位置的一个参照区域AR2；将标记显示区域AM2所显示的一个标记MC2的亮度设定为与该一个标记MC2以外的(N-1)个标记的亮度不同的亮度，该标记显示区域AM2是该N个标记显示区域中的设定在与该一个参照区域AR2最近的位置的一个标记显示区域。

在图8的显示图像DGD的内窥镜图像显示区域AG，显示有具有与该内窥镜图像显示区域AG相同的形状及尺寸的内窥镜图像EGD。此外，根据图8的内窥镜图像EGD，在设定于该内窥镜图像EGD的左上部的参照区域AR1(参照图4)包含病变区域LD。因此，根据图8的显示图像DGD，在标记显示区域AM1～AM4显示有表示在内窥镜图像EGD中检测到病变区域LD的4个标记MD1、MD2、MD3及MD4。此外，根据图8的显示图像DGD，显示有MD1～MD4，该MD1～MD4具有表示在内窥镜图像EGD的参照区域AR1检测到病变区域LD这样的形状。换言之，根据图8的显示图像DGD，显示有指示参照区域AR1这样的三角形的标记MD1～MD4，该参照区域AR1相当于内窥镜图像EGD中的检测到病变区域LD的区域。另外，图8的显示画面内的虚线是为了说明病变区域LD及标记显示区域AM1～AM4的位置关系等而描绘的，因此，实际上未显示在显示装置14中。

根据图8的显示例，作为图2的步骤S2的处理，由显示控制部133进行用于分别生成表示在内窥镜图像EGD中检测到病变区域LD的标记MD1、MD2、MD3及MD4的处理。此外，根据图8的显示例，作为图2的步骤S2的处理，由显示控制部133进行用于确定病变区域LD的当前位置包含在参照区域AR1中的处理。此外，根据图8的显示例，作为图2的步骤S2的处理，由显示控制部133进行用于生成指示内窥镜图像EGD中的包含病变区域LD的参照区域AR1所在的方向(相当于内窥镜图像EGD的左上侧的方向)这样的三角形的标记MD1～MD4的处理。此外，根据图8的显示例，作为图2的步骤S3的处理，由显示控制部133进行用于生成包含内窥镜图像EGD及标记MD1～MD4的显示图像DGD并使其显示于显示装置14的处理。

即，根据图8的显示例，由显示控制部133进行如下处理：在N个标记显示区域分别逐一地显示标记；基于病变信息IL确定规定的多个参照区域中的包含病变区域L的当前位置的一个参照区域AR1；以及将该N个标记显示区域所显示的N个标记的形状设定为指示内窥镜图像EG中的该一个参照区域AR1存在的方向这样的形状。

根据本实施方式的各显示例，作为由病变检测部131检测的病变区域L的检测状态的概要，由显示控制部133进行用于生成1个以上的标记并显示于N个标记显示区域中的至少1个标记显示区域的处理，该1个以上的标记表示在内窥镜图像EG中是否检测到病变区域L，并且表示该病变区域L的当前位置包含在设定于该内窥镜图像EG的规定的多个参照区域中的哪个参照区域中。此外，根据本实施方式的各显示例，在由判定部132得到在内窥镜图像EG中包含病变区域L这一判定结果的情况下，由显示控制部133进行如下处理：基于病变信息IL而生成表示由病变检测部131检测的病变区域L的检测状态的概要的1个以上且4个以下的M个标记；以及在4个标记显示区域AM1～AM4中的M个标记显示区域逐一地显示该M个标记。

如以上所述，根据本实施方式，例如，即便在发生了病变区域L的位置在内窥镜图像EG的内部频繁地变化这样的状况的情况下，也能够将具有与当前检测到该病变区域L的部位相应的显示方式的1个以上的标记显示于显示装置14的显示画面上的设置在内窥镜图像显示区域AG的外部的规定的位置的标记显示区域。因此，根据本实施方式，例如，用户通过观察设定在显示装置14的显示画面上的规定的位置的1个以上的标记显示区域所显示的标记，能够容易地掌握病变区域L的检测状态。因此，根据本实施方式，能够减轻通过内窥镜观察进行病变部的诊断等作业的用户的负担。

此外，如以上所述，根据本实施方式，进行将用户在观察1个以上的标记显示区域所显示的标记时得到的信息限制为表示内窥镜图像EG中的病变区域L的检测状态的概要的信息这样的处理。因此，根据本实施方式，例如，能够尽量防止对进行内窥镜图像EG所包含的病变区域L的诊断的用户给予无用的先入之见。

另外，根据本实施方式，例如，也可以通过应用日本特开2013-255656号公报所公开的与摄像距离的估计相关的方法，由病变检测部131进行用于(基于内窥镜图像EG的红色成分等)检测从内窥镜11的插入部的前端部到病变部的表面为止的估计距离EL的处理，并且由显示控制部133进行用于使基于该估计距离EL生成的标记显示于标记显示区域的处理。而且，根据这样的处理，例如，能够在估计距离EL较近的情况下，使具有相对大的尺寸的标记显示于标记显示区域，另一方面，在该估计距离EL较远的情况下，使具有相对小的尺寸的标记显示于该标记显示区域。此外，根据如上所述的处理，例如，能够在估计距离EL较近的情况下，使具有相对高的亮度的标记显示于标记显示区域，另一方面，在该估计距离EL较远的情况下，使具有相对低的亮度的标记显示于该标记显示区域。即，根据如上所述的处理，由显示控制部133进行用于基于估计距离EL而生成如下的1个以上的标记的处理，该1个以上的标记将内窥镜11的插入部的前端部与病变区域L所包含的病变部分离何种程度作为该病变区域L的检测状态的概要进一步示出。

此外，本实施方式的显示控制部133也可以构成为将与图5～图8的显示例分别对应的标记的显示方法所涉及的处理组合多个来进行。

此外，根据本实施方式，只要能够设定于显示装置14的显示画面上的内窥镜图像显示区域AG的外部的规定的位置、并且设定于能够使用户视觉确认该内窥镜图像显示区域AG所显示的内窥镜图像EG中的病变区域L的检测状态的概要的位置，则也可以将该显示画面上的标记显示区域设定于与图3所示的位置不同的位置。

此外，根据本实施方式，只要设定于显示装置14的显示画面上的内窥镜图像显示区域AG的外部的规定的位置、并且设定为具有与标记的最大显示数对应的个数的区域，则也可以将该显示画面所包含的标记显示区域的个数设定为任意的个数，其中，该标记表示该内窥镜图像显示区域AG所显示的内窥镜图像EG中的病变区域L的检测状态的概要。

此外，根据本实施方式，只要具有能够使用户视觉确认内窥镜图像显示区域AG所显示的内窥镜图像EG中的病变区域L的检测状态的概要的形状，则也可以将标记显示区域所显示的标记的形状变形为任意的形状。

此外，根据本实施方式，也可以进行用于生成具有能够使用户视觉确认内窥镜图像EG中的病变区域L的检测状态的概要的颜色的标记的处理，并且，进行用于使包含该内窥镜图像EG及该标记的显示图像显示于显示装置14的处理。而且，根据这样的结构，例如，在由判定部132得到在内窥镜图像EG中包含病变区域L这一判定结果的情况下，由显示控制部133进行如下处理：在N个标记显示区域分别逐一地显示具有规定的颜色的标记；基于病变信息IL确定规定的多个参照区域中的包含该病变区域L的当前位置的一个参照区域；使该N个标记显示区域中的设定在与该一个参照区域最近的位置的一个标记显示区域所显示的一个标记的颜色变化为与该规定的颜色不同的颜色。

(第2实施方式)

图9至图15是第2实施方式的图。

另外，在本实施方式中，能够利用具有与第1实施方式同样的结构的内窥镜系统1，另一方面，在内窥镜图像处理装置13中进行与第1实施方式不同的处理。因此，以后，参照图9等来说明在内窥镜图像处理装置13的各部进行的处理的具体例，另一方面，适当省略与能够应用在第1实施方式中已述的处理等的部分相关的具体说明。具体而言，以后，设为在图3所例示的内窥镜图像显示区域AG及标记显示区域AM1～AM4被设定于显示装置14的显示画面并且图4所例示的参照区域AR1～AR4被设定于内窥镜图像EG的状态下进行处理来进行说明。图9是用于说明在第2实施方式的内窥镜图像处理装置中进行的处理的具体例的流程图。

病变检测部131进行用于在内窥镜图像EG中检测与被估计为包含病变部的区域相当的病变区域L的处理，并且，进行用于取得与表示该检测到的病变区域L的信息相当的病变信息IL的处理。

判定部132根据病变检测部131中的病变信息IL的取得状态，判定在内窥镜图像EG中是否包含病变区域L(图9的步骤S11)。

显示控制部133在由判定部132得到在内窥镜图像EG中不包含病变区域L这一判定结果的情况下(S11：否)，生成用于使该内窥镜图像EG显示于内窥镜图像显示区域的显示图像并将其向显示装置14输出(图9的步骤S16)，之后结束一系列的处理。

显示控制部133在由判定部132得到在内窥镜图像EG中包含病变区域L这一判定结果的情况下(S11：是)，进行用于生成表示在该内窥镜图像EG中检测到该病变区域L的标记的处理(图9的步骤S12)。

显示控制部133生成显示图像并将其向显示装置14输出，该显示图像用于使内窥镜图像EG显示于内窥镜图像显示区域，并且用于使通过图9的步骤S12生成的标记显示于标记显示区域(图9的步骤S13)。

这里，根据图9的步骤S12及步骤S13的处理，例如，图10所示的显示图像DGE被显示于显示装置14。图10是示出根据第2实施方式的内窥镜图像处理装置的处理而显示的显示图像的一例的图。

在图10的显示图像DGE的内窥镜图像显示区域AG显示有具有与该内窥镜图像显示区域AG相同的形状及尺寸的内窥镜图像EGE。此外，根据图6的内窥镜图像EGE，在设定于该内窥镜图像EGE的左下侧的参照区域AR2(参照图4)包含病变区域LE。因此，根据图10的显示图像DGE，表示在内窥镜图像EGE中检测到病变区域LE的4个标记ME1、ME2、ME3及ME4被显示于标记显示区域AM1～AM4。另外，图10的显示画面内的虚线是为了说明病变区域LE及标记显示区域AM1～AM4的位置关系等而描绘的，因此，实际上不显示在显示装置14中。

根据图10的显示例，作为图9的步骤S12的处理，由显示控制部133进行用于分别生成表示在内窥镜图像EGE中检测到病变区域LE的标记ME1、ME2、ME3及ME4的处理。此外，根据图10的显示例，作为图9的步骤S13的处理，由显示控制部133进行用于生成包含内窥镜图像EGE及标记ME1～ME4的显示图像DGE并使其显示于显示装置14的处理。

判定部132在存储器中依次存储在图9的步骤S11的处理以后由病变检测部131得到的病变信息IL。此外，判定部132进行用于基于存储器所存储的病变信息IL来判定与该病变信息IL对应的病变区域L的检测是否中断的处理(图9的步骤S14)。

显示控制部133在由判定部132得到病变区域L的检测未中断这一判定结果的情况下(S14：否)，返回图9的步骤S13，进行处理。即，根据本实施方式，在基于病变检测部131的病变区域L的检测持续的期间中，将图10所例示的包含通过图9的步骤S13生成的标记的显示图像继续显示于显示装置14。

显示控制部133在由判定部132得到病变区域L的检测中断这一判定结果的情况下(S14：是)，进行如下处理：该处理用于根据从得到该判定结果紧前的病变信息IL确定的该病变区域L的位置、即该病变区域L的检测即将中断前该病变区域L所在的位置包含在设定于内窥镜图像EG的规定的多个参照区域中的哪个参照区域，来变更当前显示于显示装置14的至少1个标记的显示方式(图9的步骤S15)，之后，结束一系列的处理。另外，在本实施方式中，在通过图9的步骤S15的处理变更了标记的显示方式的情况下，变更后的显示方式维持固定期间。

这里，例如，在由于图10的内窥镜图像EGE所包含的病变部位移到该内窥镜图像EGE的外部而使病变区域LE的检测刚刚中断后进行了图9的步骤S15的处理的情况下，将图11～图13中任一个图所示的显示图像显示于显示装置14。图11～图13是示出根据第2实施方式的内窥镜图像处理装置的处理而显示的显示图像的一例的图。

在图11的显示图像DGF的内窥镜图像显示区域AG显示有内窥镜图像EGF，该内窥镜图像EGF具有与该内窥镜图像显示区域AG相同的形状及尺寸，并且相当于图10的内窥镜图像EGE中的病变区域LE所包含的病变部出镜(frame-out)的图像。此外，根据图11的显示图像DGF，在与内窥镜图像EGF中的参照区域AR2对应的标记显示区域AM2未显示标记。此外，根据图11的显示图像DGF，与图10同样的标记ME1、ME3及ME4被显示在与内窥镜图像EGF中的参照区域AR2以外的3个参照区域对应的标记显示区域AM1、AM3及AM4。

根据图11的显示例，作为图9的步骤S15的处理，由显示控制部133进行用于确定得到病变区域LE的检测中断这一判定结果紧前的该病变区域LE的位置包含在参照区域AR2中的处理。此外，根据图11的显示例，作为图9的步骤S15的处理，由显示控制部133进行用于从标记显示区域AM2消除与参照区域AR2对应的标记ME2的处理，该参照区域AR2是病变区域LE所包含的病变部向内窥镜图像EGE的外部位移紧前所存在的区域。

即，根据图11的显示例，在由判定部132得到在内窥镜图像EG中包含病变区域L这一判定结果的情况下，由显示控制部133进行用于在N个标记显示区域分别逐一地显示标记的处理。此外，根据图11的显示例，在由判定部132得到病变区域LE的检测中断这一判定结果的情况下，由显示控制部133进行如下处理：基于病变信息IL，确定规定的多个参照区域中的包含该病变区域LE的检测中断紧前该病变区域LE所在的位置在内的一个参照区域AR2；以及消除N个标记显示区域中的设定在与该一个参照区域AR2最近的位置的一个标记显示区域AM2所显示的一个标记ME2。

另外，根据本实施方式，作为图9的步骤S15的处理，也可以代替进行用于从标记显示区域AM2消除与参照区域AR2对应的标记ME2的处理，例如，由显示控制部133进行用于从与参照区域AR1、AR3及AR4对应的标记显示区域AM1、AM3及AM4消除标记的处理。

在图12的显示图像DGG的内窥镜图像显示区域AG显示有内窥镜图像EGG，该内窥镜图像EGG具有与该内窥镜图像显示区域AG相同的形状及尺寸，并且相当于图10的内窥镜图像EGE中的病变区域LE所包含的病变部出镜的图像。此外，根据图12的显示图像DGG，具有与图10的标记ME2不同的形状的标记MG2被显示在与内窥镜图像EGG中的参照区域AR2对应的标记显示区域AM2。此外，根据图12的显示图像DGG，具有与图10同样的形状的标记ME1、ME3及ME4被显示在与内窥镜图像EGG中的参照区域AR2以外的3个参照区域对应的标记显示区域AM1、AM3及AM4。

根据图12的显示例，作为图9的步骤S15的处理，由显示控制部133进行用于确定得到病变区域LE的检测中断这一判定结果紧前的该病变区域LE的位置包含在参照区域AR2中的处理。此外，根据图12的显示例，作为图9的步骤S15的处理，由显示控制部进行如下处理：该处理用于通过使与病变区域LE所包含的病变部向内窥镜图像EGE的外部位移紧前所存在的参照区域AR2对应的标记ME2的形状变化，生成指示该参照区域AR2这样的三角形的标记MG2。

即，根据图12的显示例，在由判定部132得到在内窥镜图像EG中包含病变区域L这一判定结果的情况下，由显示控制部133进行用于在N个标记显示区域分别逐一地显示标记的处理。此外，根据图12的显示例，在由判定部132得到病变区域LE的检测中断这一判定结果的情况下，由显示控制部133进行如下处理：基于病变信息IL，确定规定的多个参照区域中的包含该病变区域LE的检测中断紧前该病变区域LE所在的位置在内的一个参照区域AR2；以及将N个标记显示区域中的设定在与该一个参照区域AR2最近的位置的一个标记显示区域AM2所显示的一个标记ME2的形状设定为指示该一个参照区域AR2这样的形状。

另外，根据本实施方式，作为图9的步骤S15的处理，例如也可以由显示控制部133进行如下处理：该处理用于通过使与参照区域AR1、AR3及AR4对应的标记ME1、ME3及ME4的形状变化，生成指示参照区域AR2这样的标记。而且，根据这样的处理，例如，标记ME1、ME3及ME4被设为具有与标记ME2相同形状的三角形而显示于显示装置14。

在图13的显示图像DGH的内窥镜图像显示区域AG显示有内窥镜图像EGH，该内窥镜图像EGH具有与该内窥镜图像显示区域AG相同的形状及尺寸，并且相当于图10的内窥镜图像EGE中的病变区域LE所包含的病变部出镜的图像。此外，根据图13的显示图像DGH，具有比图10的标记ME2的亮度BLB高的亮度BLH的标记MH2被显示在与内窥镜图像EGH中的参照区域AR2对应的标记显示区域AM2。此外，根据图13的显示图像DGH，具有与图10的标记ME2的亮度BLB相同的亮度的标记ME1、ME3及ME4被显示在与内窥镜图像EGH中的参照区域AR2以外的3个参照区域对应的标记显示区域AM1、AM3及AM4。

根据图13的显示例，作为图9的步骤S15的处理，由显示控制部133进行用于确定得到病变区域LE的检测中断这一判定结果紧前的该病变区域LE的位置包含在参照区域AR2中的处理。此外，根据图13的显示例，作为图9的步骤S15的处理，由显示控制部133进行如下处理：该处理用于通过使与病变区域LE所包含的病变部向内窥镜图像EGE的外部位移紧前所存在的参照区域AR2对应的标记ME2的亮度BLB增加，生成具有比该亮度BLB高的亮度的标记MH2。换言之，根据图13的显示例，作为图9的步骤S15的处理，由显示控制部133进行用于将标记ME2的亮度设定为比标记ME1、ME3及ME4的亮度高的亮度的处理。

即，根据图13的显示例，在由判定部132得到在内窥镜图像EG中包含病变区域L这一判定结果的情况下，由显示控制部133进行用于在N个标记显示区域分别逐一地显示标记的处理。此外，根据图13的显示例，在由判定部132得到病变区域LE的检测中断这一判定结果的情况下，由显示控制部133进行如下处理：基于病变信息IL，确定规定的多个参照区域中的包含该病变区域LE的检测中断紧前该病变区域LE所在的位置在内的一个参照区域AR2；以及将N个标记显示区域中的设定在与该一个参照区域AR2最近的位置的一个标记显示区域AM2所显示的一个标记ME2的亮度设定为与该一个标记ME2以外的(N-1)个标记的亮度不同的亮度。

另外，根据本实施方式，作为图9的步骤S15的处理，也可以代替进行用于使与参照区域AR2对应的标记ME2的亮度BLB增加的处理，例如由显示控制部133进行用于使与参照区域AR1、AR3及AR4对应的标记ME1、ME3及ME4的亮度BLB减小的处理。

根据本实施方式的各显示例，由显示控制部133进行用于生成1个以上的标记作为病变区域L的检测状态的概要并使其显示于N个标记显示区域中的至少1个标记显示区域的处理，该1个以上的标记表示在内窥镜图像EG中是否检测到该病变区域L，并且表示该病变区域L的检测中断紧前该病变区域L所在的位置包含在设定于该内窥镜图像EG的规定的多个参照区域中的哪个参照区域。此外，根据本实施方式的各显示例，在由判定部132得到在内窥镜图像EG中包含病变区域L这一判定结果的情况下，由显示控制部133进行如下处理：生成表示检测到该病变区域L的4个标记；以及在4个标记显示区域AM1～AM4逐一地显示该4个标记。

如以上所述，根据本实施方式，例如，即便在发生了病变区域L在内窥镜图像EG中频繁地重复入镜(frame-in)及出镜这样的状况的情况下，也能够使表示是否检测到该病变区域L的标记显示于显示装置14的显示画面上的设定在内窥镜图像显示区域AG的外部的规定的位置的标记显示区域。此外，如以上所述，根据本实施方式，例如，即便在发生了病变区域L从内窥镜图像EG的内部向外部位移这样的状况的情况下，也能够使具有与该病变区域L最后被检测到的部位相应的显示方式的1个以上的标记显示于显示装置14的显示画面上的被设置在内窥镜图像显示区域AG的外部的规定的位置的标记显示区域。因此，根据本实施方式，例如，用户通过观察显示装置14的显示画面上的设定在规定的位置的1个以上的标记显示区域所显示的标记，能够容易地掌握病变区域L的检测状态。因此，根据本实施方式，能够减轻通过内窥镜观察进行病变部的诊断等作业的用户的负担。

此外，如以上所述，根据本实施方式，进行将用户观察1个以上的标记显示区域所显示的标记时得到的信息限制为表示内窥镜图像EG中的病变区域L的检测状态的概要的信息这样的处理。因此，根据本实施方式，例如，能够尽量防止对进行内窥镜图像EG所包含的病变区域L的诊断的用户给予无用的先入之见。

另外，即便在由于内窥镜图像EG所包含的病变部向残渣等遮挡物的背侧位移而导致病变区域L的检测中断的情况下，也能够大致同样地应用在本实施方式中说明的各显示例。而且，在这样的情况下，例如，根据图9的步骤S15的处理，在显示装置14中显示图14所示的显示图像DGP。图14是示出根据第2实施方式的内窥镜图像处理装置的处理而显示的显示图像的一例的图。

在图14的显示图像DGP的内窥镜图像显示区域AG显示有内窥镜图像EGP，该内窥镜图像EGP具有与该内窥镜图像显示区域AG相同的形状及尺寸，并且相当于图10的内窥镜图像EGE中的病变区域LE所包含的病变部向残渣等遮挡物SP的背侧位移了的图像。此外，根据图14的显示图像DGP，在与内窥镜图像EGP中的参照区域AR2对应的标记显示区域AM2未显示标记。此外，根据图14的显示图像DGP，与图10同样的标记ME1、ME3及ME4被显示在与内窥镜图像EGP中的参照区域AR2以外的3个参照区域对应的标记显示区域AM1、AM3及AM4。另外，图14的显示画面内的虚线是为了表示病变区域LE所包含的病变部位于遮挡物SP的背侧而描绘的，因此，实际上未显示在显示装置14中。

根据图14的显示例，作为图9的步骤S15的处理，由显示控制部133进行用于确定得到病变区域LE的检测中断这一判定结果紧前的该病变区域LE的位置包含在参照区域AR2中的处理。此外，根据图14的显示例，作为图9的步骤S15的处理，由显示控制部133进行用于从标记显示区域AM2消除与参照区域AR2对应的标记ME2的处理，该参照区域AR2是病变区域LE所包含的病变部向遮挡物SP的背侧位移紧前所在的区域。

本实施方式的显示控制部133也可以构成为，在由判定部132得到病变区域L的检测中断这一判定结果的情况下，代替图9的步骤S15的处理，例如进行图15所示的处理。以下对这样的变形例的显示控制部133的处理的具体例进行说明。图15是用于说明在第2实施方式的变形例的内窥镜图像处理装置中进行的处理的流程图。

显示控制部133在由判定部132得到病变区域L的检测中断这一判定结果的情况下(S14：是)，进行如下处理：该处理用于判定根据得到该判定结果紧前的病变信息IL而确定的该病变区域L的位置、即该病变区域L的检测中断紧前的该病变区域L的位置是否为与内窥镜图像EG的端部相当的位置(图15的步骤S21)。

显示控制部133在得到病变区域L的检测中断紧前的该病变区域L的位置是与内窥镜图像EG的端部相当的位置这一判定结果的情况下(S21：是)，进行如下处理：该处理用于变更当前显示于显示装置14的至少1个标记的显示方式，使得示出该病变区域L所包含的病变部位移到该内窥镜图像EG的外部(图15的步骤S22)，之后，结束一系列的处理。

具体而言，显示控制部133例如在得到图10所示的病变区域LE的检测中断紧前的该病变区域LE的位置是确定被包含在参照区域AR2中且与该参照区域AR2的端部相当的位置这一判定结果的情况下，进行用于生成具有与图13的显示例同样的显示方式的标记MH2并使其显示于标记显示区域AM2的处理。

显示控制部133在得到病变区域L的检测中断紧前的该病变区域L的位置是与比内窥镜图像EG的端部靠内侧的位置相当的位置这一判定结果的情况下(S21：否)，进行如下处理：该处理用于变更当前显示于显示装置14的至少1个标记的显示方式，使得示出该病变区域L所包含的病变部位移到残渣等遮挡物的背侧(图15的步骤S23)，之后，结束一系列的处理。

具体而言，显示控制部133例如在得到图10所示的病变区域LE的检测中断紧前的该病变区域LE的位置是确定被包含在参照区域AR2中且与比该参照区域AR2的端部靠内侧的位置相当的位置这一判定结果的情况下，进行用于生成具有与图12的显示例同样的显示方式的标记MG2并使其显示于标记显示区域AM2的处理。

即，根据图15所示的处理，由显示控制部133进行如下处理：基于病变信息IL，确定规定的多个参照区域中的包含病变区域LE的检测中断紧前该病变区域LE所在的位置在内的一个参照区域AR2；以及将N个标记显示区域中的设定在与该一个参照区域AR2最近的位置的一个标记显示区域AM2所显示的一个标记ME2的显示方式设定为根据该病变区域LE的检测中断的原因而不同的显示方式。此外，根据图15所示的处理，在由于病变部位移到内窥镜图像EG的外部而导致病变区域LE的检测中断的情况下，由显示控制部133进行将上述的一个标记ME2的显示方式设定为(标记MH2这样的)第1显示方式的处理。此外，根据图15所示的处理，在由于病变部位移到内窥镜图像EG所包含的遮挡物的背侧而导致病变区域L的检测中断的情况下，由显示控制部133进行将上述的一个标记的显示方式设定为与上述的第1显示方式不同的(标记MG2这样的)第2显示方式的处理。

此外，本实施方式的显示控制部133也可以构成为，将与图11～图13的显示例分别对应的标记的显示方法所涉及的处理组合多个来进行。

此外，根据本实施方式，也可以进行用于生成具有能够使用户视觉确认内窥镜图像EG中的病变区域L的检测状态的概要的颜色的标记的处理，并且进行用于使包含该内窥镜图像EG及该标记的显示图像显示于显示装置14的处理。而且，根据这样的结构，例如在由判定部132得到在内窥镜图像EG中包含病变区域L这一判定结果的情况下，由显示控制部133进行用于在N个标记显示区域分别逐一地显示具有规定的颜色的标记的处理。此外，根据如上所述的结构，例如，在由判定部132得到病变区域L的检测中断这一判定结果的情况下，由显示控制部133进行如下处理：基于病变信息IL，确定规定的多个参照区域中的包含该病变区域L的检测中断紧前该病变区域L所在的位置在内的一个参照区域；以及将N个标记显示区域中的设定在与该一个参照区域最近的位置的一个标记显示区域所显示的一个标记的颜色变化为与该规定的颜色不同的颜色。

另外，本发明不限于上述实施方式，能够在不脱离发明的主旨的范围内进行各种变更、应用。