掌桥专利:专业的专利平台
掌桥专利
首页

内窥镜系统及其工作方法

文献发布时间:2023-06-19 18:32:25


内窥镜系统及其工作方法

技术领域

本发明涉及一种能够显示多种内窥镜图像的内窥镜系统及其工作方法。

背景技术

在医疗领域中,广泛进行使用了具备光源装置、内窥镜及处理器装置的内窥镜系统的诊断。在使用了内窥镜系统的诊断中,进行如下:通过被称为图像增强内窥镜或图像增强观察(IEE、image enhanced endoscopy)的方法,使用利用内窥镜对作为被摄体的观察对象进行摄影而获得的图像(以下,称为内窥镜图像),强调显示观察对象的表面结构、病变或活体信息等,从而获得医生用于诊断观察对象的诊断支援信息。

IEE中,已知有通过将拍摄观察对象而获得的内窥镜图像进行数字图像处理而使用的方法或使用通过特定照明光照亮而拍摄了观察对象的内窥镜图像的方法等而形成各种内窥镜图像的方法。例如,通过由医生选择特定种类的内窥镜图像,来判定观察对象中血管密集的区域或氧饱和度低的区域等的活体信息,并将这些区域强调显示在显示器等上。这种显示作为医生用于诊断观察对象的诊断支援信息是有用的。

已知有如下内窥镜系统等,在获取为了生成氧饱和度图像而所需的第1摄像信号和第2摄像信号这2种图像信号时,设置照明光的熄灯期间的同时,通过比起成为普通观察图像的第1摄像信号的读取时间缩短第2摄像信号的读取时间,从而抑制普通观察图像的亮度及分辨率的降低以及帧速率的降低,也抑制使用普通观察图像的氧饱和度图像的亮度及分辨率的降低以及帧速率的降低(专利文献1)。

专利文献1:国际公开第2015/136963号

在通过照射多种照明光中的每一个来获取多种内窥镜图像的情况下,与照射单一照明光时相比,假设摄影的帧速率相同,则各种类型的各个内窥镜图像的摄影的帧速率减少。如专利文献1的情况那样,在进行摄影而得到的内窥镜图像中根据特定的1种内窥镜图像来进行显示的情况下,对于除此以外的内窥镜图像,通过选择像素进行读取等而缩短读取时间,对于显示的内窥镜图像,能够提高帧速率。然而,根据要求的IEE的内容,对于2种以上的多种内窥镜图像,可能发生想要抑制因帧速率的降低或所选择的像素的读取等而引起的画质的降低而进行显示或图像分析等的情况。

发明内容

本发明的目的在于提供一种在获取多种内窥镜图像的情况下能够显示抑制了画质的降低的内窥镜图像的内窥镜系统及其工作方法。

本发明的内窥镜系统具备:内窥镜,具有摄像部;光源部,将具有互不相同的光谱的多个照明光中的每一个照射到被摄体;及处理器装置,具有处理器,处理器在第1观察模式下进行如下处理:控制光源部,以使多个照明光中的每一个以预先设定的顺序照射到被摄体;控制摄像部,以在照射多个照明光中所包含的第1照明光的第1期间,按照预先设定的第1摄影帧速率对被摄体进行摄影;获取摄像部在第1期间进行摄影而得到的第1图像;根据第1图像,按照高于第1摄影帧速率的第1显示帧速率生成显示用第1图像;进行将显示用第1图像显示在显示器上的控制。

优选显示用第1图像包含不变更第1图像的图像。

优选处理器在第1观察模式下进行如下处理:控制摄像部,以在照射多个照明光中所包含的第2照明光的第2期间,按照预先设定的第2摄影帧速率对被摄体进行摄影;获取摄像部在第2期间进行摄影而得到的第2图像。

优选处理器进行将第2图像显示在显示器上的控制。

优选处理器控制光源部,以重复由多个照明光中的每一个构成的样式(pattern)而照射到被摄体。

优选处理器控制光源部,以重复由第1照明光和第2照明光构成的样式而将第1照明光或第2照明光照射到被摄体。

优选处理器控制光源部,以间歇性地照射多个照明光中的每一个。

优选处理器控制摄像部,以在由摄像部进行拍摄的摄像期间和读取拍摄而获得的图像信号的读取期间构成的1帧的期间中,将摄像期间设为比读取期间长的期间。

优选处理器控制光源部,以在摄像期间内分别至少各进行1次多个照明光中的任一个的熄灯和照射。

优选处理器控制光源部,以变更进行多个照明光中的任一个的照射的照射期间来进行照明光的照射。

优选处理器控制摄像部,以根据所变更的照射期间来变更曝光期间。

优选处理器控制光源部在1次照射中照射的照明光的发光量。

优选发光量根据光源部进行照明光的照射的照射期间和作为照明光的单位时间内的发光量的瞬间发光量来进行计算。

优选处理器在能够与第1观察模式互相切换的第2观察模式下进行如下处理:控制光源部,以使多个照明光中所包含的第3照明光照射到被摄体;控制摄像部,以在照射第3照明光的第3期间,按照预先设定的第3摄影帧速率对被摄体进行摄影;获取摄像部在第3期间进行摄影而得到的第3图像;在将第3图像显示在显示器上的情况下,按照第3摄影帧速率以下的第3显示帧速率生成显示用第3图像。

本发明的内窥镜系统的工作方法为具备具有摄像部的内窥镜、将具有互不相同的光谱的多个照明光中的每一个照射到被摄体的光源部、及具有处理器的处理器装置的内窥镜系统的工作方法,所述内窥镜系统的工作方法具备由处理器在第1观察模式下执行的如下步骤:控制光源部,以使多个照明光中的每一个以预先设定的顺序照射到被摄体的步骤;控制摄像部,以在照射多个照明光中所包含的第1照明光的第1期间,按照预先设定的第1摄影帧速率对被摄体进行摄影的步骤;获取摄像部在第1期间进行摄影而得到的第1图像的步骤;根据第1图像,按照高于第1摄影帧速率的第1显示帧速率生成显示用第1图像的步骤;及进行将显示用第1图像显示在显示器上的控制的步骤。

发明效果

根据本发明,在获取多种内窥镜图像的情况下,能够显示抑制了画质的降低的内窥镜图像。

附图说明

图1是内窥镜系统的概略图。

图2是表示内窥镜系统的功能的框图。

图3是说明光源部所包含的4色LED的说明图。

图4是表示紫色光V、蓝色光B、绿色光G及红色光R的光谱的曲线图。

图5是表示第2照明光的光谱的曲线图。

图6是说明照明光和摄影的样式的一例的说明图。

图7是表示摄像传感器的结构的说明图。

图8是表示滤色器的透光率的曲线图。

图9是表示帧速率控制部的功能的框图。

图10是对色差扩大处理进行说明的说明图。

图11是表示显示控制部的功能的框图。

图12是对摄影帧、插补帧及显示帧进行说明的说明图。

图13是表示具备移动检测部的内窥镜系统的功能的框图。

图14是显示第1图像及进行色差扩大处理的第2图像的显示器的图像图。

图15是显示第1图像、进行伪彩色处理的第2图像及图像分析结果的显示器的图像图。

图16是显示第1图像及进行伪彩色处理的第2图像的显示器的图像图。

图17是表示第1观察模式下的内窥镜系统的动作的一系列流程的流程图。

图18是说明第1观察模式下的摄像传感器与照明光的关系的说明图。

图19是说明第2观察模式下的摄像传感器与照明光的关系的说明图。

符号说明

10-内窥镜系统,12-内窥镜,12a-插入部,12b-操作部,12c-弯曲部,12d-前端部,12e-弯角钮,12f-变焦操作部,12g-模式切换开关,12h-钳道口,12i-冻结开关,13-光源装置,14-处理器装置,15-显示器,16-键盘,20-光源部,20a-V-LED,20b-B-LED,20c-G-LED,20d-R-LED,21-光源用处理器,30a-照明光学系统,30b-摄像光学系统,36-摄像驱动部,38-像素,39-滤色器阵列,39a-蓝色滤色器,39b-绿色滤色器,39c-红色滤色器,41-光导件,42-照明透镜,43-物镜,44-变焦透镜,45-摄像传感器,45a-摄像面,46-CDS/AGC电路,47-A/D变频器,51-中央控制部,52-图像获取部,53-DSP,54-降噪部,55-存储器,56-图像处理部,57-显示控制部,58-视频信号生成部,61-普通图像处理部,62-特殊图像处理部,63-帧速率控制部,71-帧速率调整部,72-摄影帧速率控制部,73-显示帧速率控制部,74-显示用图像生成部,81-第1图像,82、82a、82b-第2图像,83-插补帧,84-移动检测部,91-图像分析结果画面,92-发红,93-病变区域,A1、A2-摄像期间,B1-读取期间,B2-熄灯期间,C1-曝光期间,C2-照射期间,D1-瞬间发光量,D2-发光量,E1、E2-范围,L1-第1照明光,L2-第2照明光,P1-样式,X-行方向,Y-列方向,ST110~ST180-步骤。

具体实施方式

如图1所示,内窥镜系统10具有内窥镜12、光源装置13、处理器装置14、显示器15及键盘16。内窥镜12与光源装置13光学连接,并且,与处理器装置14电连接。各种连接并不限于有线,可以是无线,并且,也可以经由网络。

内窥镜12具有插入具有观察对象的受检者体内的插入部12a、设置在插入部12a的基端部分的操作部12b、设置在插入部12a的前端侧的弯曲部12c及前端部12d。弯曲部12c通过对操作部12b的弯角钮12e进行操作而进行弯曲动作。前端部12d具备作为摄像部的摄像传感器45,通过弯曲部12c的弯曲动作朝向所期望的方向。从插入部12a到前端部12d设置有用于插入贯通处置器具等的钳子通道(未图示)。处置器具从钳道口12h插入钳子通道内。并且,送气、送水或抽吸也从钳道口12h进行。

除了弯角钮12e以外,操作部12b具有用于变更摄像倍率的变焦操作部12f、用于观察模式的切换操作的模式切换开关12g及用于获取静止图像的冻结开关12i。另外,观察模式的切换操作、变焦操作或静止图像获取操作可以作为除了模式切换开关12g、变焦操作部12f或冻结开关以外使用了键盘16或脚踏开关(未图示)等的操作。

内窥镜系统10具备第1观察模式和第2观察模式。第1观察模式下获取多种内窥镜图像,并将其中1种或2种以上的内窥镜图像显示在显示器15上。第2观察模式为获取1种内窥镜图像的观察模式,并将所获取的1种内窥镜图像显示在显示器15上。

内窥镜图像的种类通过照明光的种类和/或图像处理的内容等来进行区分。照明光的种类通过照明光的光谱(光谱特性)来进行区分。因此,在摄影时的照明光的光谱互不相同的情况下,进行摄影而得到的内窥镜图像的种类互不相同。

本实施方式中,在第1观察模式下,获取使用第1照明光对观察对象进行摄影而得到的第1图像和使用第2照明光对观察对象进行摄影而得到的第2图像。在第2观察模式下,获取使用第3照明光对观察对象进行摄影而得到的第3图像。

在第1观察模式下,获取作为第1照明光使用白色光来拍摄观察对象而获得的自然色彩的内窥镜图像即普通图像(第1图像)和发出作为与白色光不同的具有特定光谱的照明光的特殊光(第2照明光)而对观察对象进行摄影而得到的特殊图像(第2图像)这2种图像,例如,将2种图像排列显示在显示器15上。在第2观察模式下,获取作为第3照明光使用了白色光的普通图像(第3图像),并将普通图像(第3图像)显示在显示器15上。第1照明光和第3照明光或第2照明光和第3照明光可以相同也可以不同。本实施方式中,第1照明光和第3照明光设为相同的白色光。

本实施方式中,第2图像为对发出第2照明光而对观察对象进行摄影而得到的特殊图像进行色差扩大处理而获得的色差扩大处理图像。作为第2图像,除此之外,也可以使用对发出作为与白色光不同的具有特定光谱的照明光的特殊光而对观察对象进行摄影而得到的内窥镜图像不进行色差扩大处理而获得的特殊图像、或进行伪彩色处理而获得的伪彩色处理图像。关于色差扩大处理或伪彩色处理,将在后面进行叙述。

处理器装置14具有处理器,并与显示器15及键盘16电连接。显示器15显示通过内窥镜获取的内窥镜图像和/或各种信息等。键盘16作为接受功能设定等的输入操作的用户界面而发挥功能。另外,处理器装置14可以连接保存图像或图像信息等的外部存储器(未图示)。

如图2所示,光源装置13发出照射观察对象的照明光,具备光源部20及控制光源部20的光源用处理器21。光源用处理器21通过处理器装置14的中央控制部51被控制。

光源部20例如由多个颜色的LED(Light Emitting Diode:发光二极管)等半导体光源、激光二极管与荧光体的组合、或者氙气灯和卤素光源构成。并且,将具有互不相同的光谱的多个照明光中的每一个照射到观察对象。并且,光源部20中包含用于调整LED等所发出的光的波长频带的滤光器等。光源用处理器21通过打开/关闭各LED等或调整各LED等的驱动电流或驱动电压来控制照明光的光量。并且,光源用处理器21通过滤光器的变更等来控制照明光的波长频带。

如图3所示,本实施方式中,光源部20具有V-LED(Violet Light Emitting Diode:紫色发光二极管)20a、B-LED(Blue Light Emitting Diode:蓝色发光二极管)20b、G-LED(Green Light Emitting Diode:绿色发光二极管)20c及R-LED(Red Light EmittingDiode:红色发光二极管)20d这4色的LED。

如图4所示,V-LED20a产生中心波长410±10nm、波长范围380~420nm的紫色光V。B-LED20b产生中心波长450±10nm、波长范围420~500nm的蓝色光B。G-LED20c产生波长范围达480~600nm的绿色光G。R-LED20d产生中心波长为620~630nm,波长范围达600~650nm的红色光R。

光源用处理器21控制V-LED20a、B-LED20b、G-LED20c及R-LED20d。光源用处理器21在设定为第1观察模式的情况下获取普通图像时及设定为第2观察模式的情况下,以发出紫色光V、蓝色光B、绿色光G及红色光R之间的光强度比的组合成为Vc∶Bc∶Gc∶Rc的第1照明光的方式控制各LED20a~20d。第1照明光为白色光。

光源用处理器21在设定为第1观察模式的情况下获取特殊图像时,以发出紫色光V、蓝色光B、绿色光G及红色光R之间的光强度比的组合成为Vs∶Bs∶Gs∶Rs的特殊光的方式控制各LED20a~20d。特殊光例如为第2照明光。第2照明光优选为获得强调表层血管的内窥镜图像的照明光。因此,第2照明光优选使紫色光V的光强度大于蓝色光B的光强度。例如,如图5所示,将紫色光V的光强度Vs1与蓝色光B的光强度Bs1的比率设为“4∶1”。

另外,本说明书中,光强度比的组合包含至少1个半导体光源的比率为0(零)的情况。因此,包含各半导体光源的任一个或两个以上不点亮的情况。例如,如紫色光V、蓝色光B、绿色光G及红色光R之间的光强度比的组合为1∶0∶0∶0的情况,仅点亮半导体光源中的1个,不点亮其他3个的情况下,也具有光强度比,且是光强度比的组合之一。

如上所述,第1照明光和第2照明光中发出的紫色光V、蓝色光B、绿色光G及红色光R的光强度比的组合、即照明光的种类互不相同。因此,第1照明光和第2照明光中,具有互不相同的光谱。光源用处理器21控制各LED20a~20d,以重复由多个照明光中的每一个构成的样式,并将多个照明光中的每一个以预先设定的顺序照射到观察对象。

本实施方式中,在第1观察模式下,自动切换并发出第1照明光和第2照明光等种类互不相同的照明光,在第2观察模式下,连续发出第1照明光。在自动切换并发出第1照明光和第2照明光的情况下,例如,交替地重复连续发出第1照明光的第1期间和连续发出第2照明光的第2期间。更详细而言,以预先设定的帧数执行发出第1照明光的第1期间之后,以预先设定的帧数执行发出第2照明光的第2期间。之后再次变成第1期间,重复由第1期间和第2期间构成的样式。另外,可以切换并发出3种以上的照明光。该情况也与2种照明光的情况相同地,以预先设定的顺序,在各个照明光中在预先设定的帧数的期间内发出照明光,并重复该样式。另外,照明光的样式可以是使用2次以上相同种类的照明光的样式,所使用的照明光并无限制。

另外,“帧”是指用于控制拍摄观察对象的摄像传感器45(参考图2)的单位,“1帧”是指至少包含用来自观察对象的光进行拍摄而曝光摄像传感器45的摄像期间及读取图像信号的读取期间的期间。关于1帧,对应1张摄影而得到的内窥镜图像。本实施方式中,与作为摄影单位的“帧”对应地分别确定第1期间、第2期间或第3期间等各种期间。另外,第1、第2或第3等各种期间可以是分别与任一个相同的帧数,也可以是互不相同的帧数,能够无限制地进行设定。

如图6所示,本实施方式中,用2帧(2FL)照射第1照明光L1的第1期间,之后,用1帧(1FL)照射第2照明光L2的第2期间。将该第1照明光L1和第2照明光L2的组合设为样式P1,并重复样式P1。

各LED20a~20e所发出的光经由由反射镜或透镜等构成的光路耦合部(未图示)入射于光导件41。光导件41内置于内窥镜12及通用塞绳(连接内窥镜12、光源装置13及处理器装置14的塞绳)。光导件41将来自光路耦合部的光传播至内窥镜12的前端部12d。

在内窥镜12的前端部12d设置有照明光学系统30a及摄像光学系统30b。照明光学系统30a具有照明透镜42,通过光导件41传播的照明光经由照明透镜42照射到观察对象。摄像光学系统30b具有摄像驱动部36、物镜43、变焦透镜44及摄像传感器45。来自观察对象的反射光、散射光及荧光等各种光经由物镜43及变焦透镜44入射于摄像传感器45。由此,观察对象的像成像在摄像传感器45上。变焦透镜44通过对变焦操作部12f进行操作而在长焦端与广角端之间自由移动,从而扩大或缩小成像在摄像传感器45上的观察对象。

摄像传感器45为彩色摄像元件,拍摄观察对象的光学图像而输出图像信号。本实施方式中,采用CMOS(Complementary Metal-Oxide Semiconductor:互补型金属氧化物半导体)图像传感器。如图7所示,在摄像传感器45的摄像面45a形成有通过光电转换生成像素信号的多个像素38。像素38在行方向(X方向)及列方向(Y方向)上二维排列成矩阵状。

在摄像传感器45的光入射侧设置有滤色器阵列39。滤色器阵列39具有蓝色(B)滤色器39a、绿色(G)滤色器39b及红色(R)滤色器39c。这些滤色器之中任一个配置在各像素38上。滤色器阵列39的颜色排列为拜耳排列,以黑白方格每隔1像素配置有G滤色器39b,在其余像素上以分别呈方形网格状的方式配置有B滤色器39a和R滤色器39c。

以下,将配置有B滤色器39a的像素38称为B像素,将配置有G滤色器39b的像素38称为G像素,将配置有R滤色器39c的像素38称为R像素。在偶数(0,2,4,……,N-1)的各像素行中交替地配置有B像素和G像素。在奇数(1,3,5,……,N)的各像素行中交替地配置有G像素和R像素。在此,N为正整数,像素行是指在行方向上排列的1行量的像素38。像素列是指在列方向上排列的1列量的像素38。

滤色器阵列39具有图8所示的光谱特性。B滤色器39a对于例如380nm~560nm的波长频带具有高透光率。G滤色器39b对于例如450nm~630nm的波长频带具有高透光率。R滤色器39c对于例如580nm~760nm的波长频带具有高透光率。

摄像传感器45通过摄像驱动部36被驱动,经由滤色器阵列39由多个像素38接收来自被照明光照亮的观察对象的返回光,并输出图像信号。摄像传感器45作为图像信号输出由B像素信号、G像素信号及R像素信号构成的BGR图像信号。

本实施方式中,作为摄像传感器45,使用CMOS图像传感器,但CMOS图像传感器一般而言以滚动快门方式进行摄像动作。滚动快门方式中,摄像传感器45通过“依次读取方式”执行信号读取。依次读取方式中,对于所有像素38,从开头像素行“0”到最终像素行“N”为止按每1像素行依次执行信号读取。

摄像传感器45作为复位方式能够执行“依次复位方式”及“一次性复位方式”。依次复位方式中,从开头像素行“0”到最终像素行“N”为止按每1像素行依次进行复位。一次性复位方式中,所有像素行一次性同时复位。本实施方式中,通过依次复位方式进行复位。

本实施方式中,作为摄像传感器45,使用滚动快门方式的CMOS图像传感器,但并不限于此,也可以使用全局快门方式的CMOS图像传感器。而且,作为摄像传感器45,可以使用CCD(Charge Coupled Device:电荷耦合元件)图像传感器来代替CMOS图像传感器。

另外,代替设置有原色滤色器的摄像传感器45,可以使用具备C(蓝色)、M(品红色)、Y(黄色)及G(绿色)的补色滤色器的补色摄像传感器。使用补色摄像传感器时,输出CMYG4色的图像信号。因此,通过补色-原色颜色转换,将CMYG4色的图像信号转换成RGB3色的图像信号,由此能够获得与摄像传感器45相同的RGB图像信号。并且,代替摄像传感器45,可以使用不设置滤色器的单色传感器。

摄像传感器45经由摄像驱动部36通过中央控制部51(参考图2)被驱动控制。中央控制部51与摄像传感器45的驱动同步地通过光源用处理器21控制光源部20的发光。控制摄像传感器45以对由作为白色光的第1照明光L1照亮的观察对象进行摄影,由此从摄像传感器45的B像素输出Bc图像信号,从G像素输出Gc图像信号,从R像素输出Rc图像信号。相同地,控制摄像传感器45以对由作为特殊光的第2照明光L2照亮的观察对象进行摄影,由此从摄像传感器45的B像素输出Bs图像信号,从G像素输出Gs图像信号,从R像素输出Rs图像信号。

中央控制部51具备帧速率控制部63(参考图2)。帧速率表示每单位时间的帧数,单位使用fps(frames per second)。帧速率控制部63控制对内窥镜图像进行摄影时的摄影帧速率或显示内窥镜图像时的显示帧速率等帧速率。关于帧速率控制部63,将在后面进行叙述。

CDS/AGC(Correlated Double Sampling/Automatic Gain Control:相关双采样/自动增益控制)电路46对从摄像传感器45获得的模拟图像信号进行相关双采样(CDS)或自动增益控制(AGC)。经过CDS/AGC电路46的图像信号通过A/D(Analog/Digital:模拟/数字)变频器47转换成数字图像信号。A/D转换后的数字图像信号输入到处理器装置14。

处理器装置14中,与摄像控制或图像处理等处理有关的程序储存在程序用存储器(未图示)中。处理器装置14中,通过由处理器等构成的中央控制部51,运行程序用存储器内的程序,由此实现中央控制部51、图像获取部52、DSP(Digital Signal Processor:数字信号处理器)53、降噪部54、存储器55、图像处理部56、显示控制部57、视频信号生成部58的功能。并且,中央控制部51接收来自内窥镜12及光源装置13的信息,根据所接收到的信息,除了进行处理器装置14的各部的控制以外,进行内窥镜12或光源装置13的控制。并且,也接收来自键盘16的指示等信息。

如图9所示,中央控制部51所具备的帧速率控制部63具备帧速率调整部71、摄影帧速率控制部72及显示帧速率控制部73。

帧速率调整部71调整摄影帧速率和显示帧速率,以满足预先设定的条件。与摄影帧速率和显示帧速率有关的条件根据获取的内窥镜图像的种类来进行设定。因此,根据获取内窥镜图像时的照明光的种类,来设定与摄影帧速率和显示帧速率有关的条件。

帧速率调整部71在第1观察模式下,向摄影帧速率控制部72发送指示,以在照射第1照明光L1的第1期间,按照第1摄影帧速率对观察对象进行摄影,将所获得的第1图像显示在显示器15上时,向显示帧速率控制部73发送指示,以按照第1显示帧速率显示第1图像。

并且,帧速率调整部71在第1观察模式下,向摄影帧速率控制部72发送指示,以在照射第2照明光L2的第2期间,按照第2摄影帧速率对观察对象进行摄影,将所获得的第2图像显示在显示器15上时,向显示帧速率控制部73发送指示,以按照第2显示帧速率显示第2图像。

帧速率调整部71中,作为与获取的第1图像有关的条件,预先设定有第1显示帧速率高于第1摄影帧速率的条件。因此,帧速率调整部71根据预先设定的第1摄影帧速率和高于第1摄影帧速率的第1显示帧速率,向摄影帧速率控制部72和显示帧速率控制部73分别发送指示。

并且,作为与获取的第2图像有关的条件,预先设定有第2摄影帧速率与第2显示帧速率相同的条件。因此,帧速率调整部71根据与预先设定的第2摄影帧速率相同的第2显示帧速率,向摄影帧速率控制部72和显示帧速率控制部73分别发送指示。

摄影帧速率控制部72根据从帧速率调整部71发送的与第1摄影帧速率有关的指示,调整摄影帧速率。摄影帧速率控制部72在第1观察模式下,控制摄像传感器45等,以在照射第1照明光L1的第1期间,按照第1摄影帧速率对观察对象进行摄影。关于显示帧速率控制部73的动作,将在后面进行叙述。

图像获取部52获取从内窥镜12输入的内窥镜图像的数字图像信号。图像获取部52在每一帧中获取对由各照明光照亮的观察对象进行摄影而得到的图像信号。

获取的图像信号被发送到DSP53。DSP53对接收到的图像信号进行色彩校正处理等数字信号处理。降噪部54对由DSP53实施了色彩校正处理等的图像信号实施基于例如移动平均法或中值滤波法等的降噪处理。降低了噪声的图像信号存储于存储器55中。

图像处理部56从存储器55获取降噪后的图像信号。并且,根据需要,对所获取的图像信号,实施颜色转换处理、色彩强调处理及结构强调处理等信号处理,生成映现出观察对象的彩色的内窥镜图像。图像处理部56具备普通图像处理部61及特殊图像处理部62。

普通图像处理部61在第1观察模式及第2察模式中,对所输入的1帧量的降噪后的普通图像用图像信号,实施颜色转换处理、色彩强调处理、结构强调处理等普通图像用图像处理。实施了普通图像用图像处理的图像信号作为普通图像输入到显示控制部57。

特殊图像处理部62在第1观察模式下,对所输入的1帧量的降噪后的特殊图像的图像信号,分别实施颜色转换处理、色彩强调处理、结构强调处理等特殊图像用图像处理。实施了特殊图像用图像处理的图像信号作为特殊图像输入到显示控制部57。

图像处理部56所生成的内窥镜图像为普通图像或特殊图像,颜色转换处理、色彩强调处理及结构强调处理的内容根据内窥镜图像的种类而不同。在普通图像的情况下,图像处理部56实施观察对象呈自然色彩的上述各种信号处理而生成普通图像。在特殊图像的情况下,图像处理部56例如实施强调观察对象的血管的各种信号处理等而生成特殊图像。

在此,对第2图像为对发出第2照明光L2而对观察对象进行摄影而得到的内窥镜图像进行色差扩大处理而获得的色差扩大处理图像时的色差扩大处理进行说明。色差扩大处理中,首先计算表示Bs图像信号与Gs图像信号之比的第1信号比(Bs/Gs)及表示Rs图像信号与Gs图像信号之比的第2信号比(Gs/Rs)。并且,根据第1信号比及第2信号比,进行扩大多个观察对象范围之间的色差的色差扩大处理,并且,根据色差扩大处理后的第1信号比及第2信号比,生成色差扩大图像。色差扩大处理为色彩强调处理的1种。色差扩大图像成为第2图像。

关于色差扩大处理,如图10所示,优选在由第1信号比(Bs/Gs)及第2信号比(Gs/Rs)构成的二维空间中扩大多个观察对象范围之间的距离。具体而言,优选在二维空间中,在色差扩大处理前后维持了多个观察对象范围中的第1范围(由用圆圈包围的1来表示)的位置的状态下,扩大第1范围与第2范围(由用圆圈包围的2来表示)的距离、第1范围与第3范围(由用圆圈包围的3来表示)的距离及第1范围与第4范围(由用圆圈包围的4来表示)的距离。色差扩大处理优选通过对第1信号比及第2信号比进行极坐标转换之后调整矢径和角度的方法来进行。另外,优选第1范围为不存在病变等的正常部,第2~第4范围为有可能存在病变等的异常部。通过色差扩大处理,从色差扩大处理前的二维空间中的范围E1,在色差扩大处理后扩展为范围E2,因此色差被强调,例如,成为异常部与正常部的色差被强调的图像。优选将该图像设为第2图像。

并且,对第2图像为对发出第2照明光L2而对观察对象进行摄影而得到的内窥镜图像进行伪彩色处理而获得的伪彩色处理图像时的伪彩色处理进行说明。伪彩色处理为将Bs图像信号分配给显示用B信道和G信道,并将Gs图像信号分配给显示用R信道的处理。通过该伪彩色处理,获得表层血管等特定深度的血管或结构被强调的图像。可以将该图像设为第2图像。

显示控制部57接收图像处理部56所生成的内窥镜图像,根据中央控制部51的控制,进行用于显示在显示器15上的控制。如图11所示,显示控制部57具备显示用图像生成部74。显示用图像为用于显示在显示器15上的图像,显示用图像生成部74根据图像处理部56所生成的内窥镜图像生成显示用图像。

关于显示显示用图像时的帧速率,显示控制部57遵从中央控制部51所具备的帧速率调整部71的指示。显示控制部57通过按照帧速率调整部71的指示生成显示用图像,来进行用于将内窥镜图像显示在显示器15上的控制。

针对每种内窥镜图像进行帧速率调整部71的指示。因此,在特定种类的内窥镜图像中,来自帧速率调整部71的指示例如为摄影帧速率与显示帧速率不同的速率,在需要的情况下,显示控制部57通过调整显示用图像生成部74所生成的显示用图像的数量,按照帧速率调整部71的指示,进行显示在显示器15上的图像的控制。

帧速率调整部71对特定种类的内窥镜图像的指示具体而言可举出以下3个情况。第1,在来自帧速率调整部71的指示中,具有显示帧速率与摄影帧速率相同的情况。在该情况下,显示用图像生成部74将摄影而得到的内窥镜图像直接生成为显示用图像。第2,在来自帧速率调整部71的指示中,具有显示帧速率低于摄影帧速率的情况。在该情况下,显示用图像生成部74以与显示帧速率匹配的方式生成从摄影而获得的内窥镜图像中选择的内窥镜图像作为显示用图像。第3,在来自帧速率调整部71的指示中,具有显示帧速率高于摄影帧速率的情况。在该情况下,显示用图像生成部74将摄影而得到的内窥镜图像直接生成为显示用图像,并且根据摄影而得到的内窥镜图像新生成显示用图像,并将这些合在一起作为显示用图像。

本实施方式中,关于第1图像,帧速率调整部71将显示帧速率高于摄影帧速率的条件发送到显示控制部57。并且,关于第2图像,将进行摄影但不进行显示的条件,即摄影帧速率为高于0fps的特定的摄影帧速率,且显示帧速率为0fps的条件发送到显示控制部57。在该情况下,显示用图像生成部74为了根据摄影而得到的第1图像新生成第1显示用图像,例如,根据摄影而得到的过去的第1图像进行帧插补。

帧插补中,将根据摄影而得到的过去的内窥镜图像生成的内窥镜图像设为插补帧。生成插补帧的方法能够根据情况进行选择。例如,可举出使用摄影而得到的内窥镜图像以加法运算平均方式进行的方法、以移动矢量方式进行的方法或通过复制方式进行的方法等。通过将插补帧与原来摄影而得到的内窥镜图像的帧一起使用,增加了显示的内窥镜图像的帧数,能够满足显示帧速率高于摄影帧速率的条件。

在以加法运算平均方式进行的方法中,例如,将使用多个摄影而得到的过去的内窥镜图像而新生成的图像设为显示用图像时,对使用的各个内窥镜图像计算图像信号值的平均值,根据通过使用这些平均值的内窥镜图像的数量进行加法运算平均而获得的值来生成显示用图像,并能够将其设为插补帧。加法运算平均意味着简单地进行平均的简单平均,但根据情况,可以使用对任一内窥镜图像进行加权相加之后进行平均的加权平均。加权的比率能够预先设定。并且,并不限于使用2张内窥镜图像,也可以使用3张以上的内窥镜图像进行加法运算平均,从而生成显示用图像。

本实施方式中,帧速率调整部71的指示中,对于第1图像,将作为第1图像的摄影帧速率的第1摄影帧速率设为30fps,将作为第1图像的显示帧速率的第1显示帧速率设为60fps。并且,帧速率调整部71的指示中,对于第2图像,将作为第2图像的摄影帧速率的第2摄影帧速率设为15fps,将作为第2图像的显示帧速率的第2显示帧速率设为0。另外,关于第1照明光L1和第2照明光L2,重复以2帧和1帧照射的样式P1(图6),关于第1图像和第2图像的摄影帧速率及显示帧速率,也重复上述指示的值的帧速率。

如图12所示,摄像帧在第1期间通过第1照明光L1对第1图像81进行2帧摄影,接着在第2期间通过第2照明光L2对第2图像82进行1帧摄影。并且,重复该组合的样式P1。摄影帧、插补帧及显示帧的一栏中所记载的第1图像81、插补帧83及第2图像82中所标注的编号为以摄影时间的顺序标注1至9的编号。第2图像82中标注有阴影。插补帧中标注有与第2图像82不同的阴影。

如图12的摄影帧的一栏所示,帧速率调整部71对于第1图像81,设置将摄影帧速率设为30fps并且将显示帧速率设为60fps的条件,对于第2图像82,设置将摄影帧速率设为15fps并且将显示帧速率设为0fps的条件。因此,如插补帧的一栏所示,显示用图像生成部74根据摄影而得到的第1图像81,以30fps的比率生成新的显示用图像作为插补帧83。并且,如显示帧的一栏所示,将摄影而得到的第1图像81和插补帧83相加为60fps,并将这些显示在显示器15上。如上所述,所有显示帧是基于第1图像81的图像。因此,显示用第1图像包含不变更第1图像81的图像及变更了第1图像81的插补帧83。

本实施方式中,插补帧83通过加法运算平均方法而生成。记为“1+2”的插补帧83表示通过使用了1号第1图像81和2号第1图像81这2个第1图像81的加法运算平均而生成的插补帧83。1号第1图像81和2号第1图像81以50∶50的比率进行图像信号的加法运算平均,但比率并不限于此。显示插补帧83时,作为显示帧,插补帧83作为时序列配置在为了生成插补帧83而使用的第1图像81与第1图像81之间。在移动矢量方式或复制方式等中,也能够同样配置捅补帧83而进行显示。如上所述,按照高于第1摄影帧速率的第1显示帧速率,生成作为第1图像81的显示用图像的第1显示用图像,从而能够满足第1摄影帧速率和第1显示帧速率的条件。

在以移动矢量方式进行的方法中,例如,将使用多个摄影而得到的过去的内窥镜图像而新生成的图像设为显示用图像时,对使用的各个内窥镜图像计算图像信号值的平均值,在参考了根据这些各个内窥镜图像计算出的移动矢量的基础上,根据对使用的内窥镜图像进行加权平均而获得的值来生成显示用图像,并能够将其设为插补帧。

如图13所示,以移动矢量方式进行的情况下,处理器装置14具备移动检测部84。移动检测部84除了根据内窥镜图像计算移动矢量以外,也可以通过陀螺仪传感器等物理方法,检测摄像传感器45与观察对象的相对移动。并且,在根据内窥镜图像计算移动矢量的情况下,也可以根据内窥镜图像中映现的形状、血管、病变或切口等的结构物、或者处置器具等的标志来计算。

在以复制方式进行的方法中,复制摄影而得到的过去的内窥镜图像来生成显示用图像,并能够将其设为插补帧。复制的内窥镜图像可以是紧前摄影而得到的内窥镜图像,也可以使用紧前以外的过去摄影而得到的内窥镜图像。另外,加法运算平均方法中,在使用紧前的2张内窥镜图像时,将比率设为100∶0的情况下,与通过复制方式复制2个之前摄影而得到的内窥镜图像来生成插补帧的情况相同,将设为0∶100的情况下,与通过复制方式复制紧前摄影而得到的1张内窥镜图像来生成插补帧的情况相同。并且,复制的内窥镜图像根据作为条件的摄影帧速率与显示帧速率的关系,可以复制生成1个插补帧,也可以复制生成2张以上的插补帧。

通过如上所述的方法,显示用图像生成部74按照帧速率调整部71的指示生成显示用图像,由此能够调整显示帧速率。另外,显示用图像生成部74生成插补帧83作为显示用图像时使用的过去的内窥镜图像能够设为生成插补帧83的时刻之前的帧的1张或2张以上,但根据情况,也可以是3张以上。并且,也可以不是插补帧83的生成之前摄影而得到的连续的2张等,而是时间上相隔的过去摄影而得到的内窥镜图像。

显示控制部57中生成的显示用图像在视频信号生成部58中,生成为用于显示在显示器15上的视频信号,并发送到显示器15。显示器15显示从视频信号生成部58发送的显示用图像。

作为第1观察模式下的显示用图像的显示方法,在显示基于第1图像81的显示用图像和基于第2图像82的显示用图像这2种内窥镜图像的情况下,可以显示在相同的显示器15上,例如,也可以分别显示在不同的显示器上。并且,基于第1图像81的显示用图像被调整为显示帧速率高于摄影帧速率的状态,因此平滑地进行显示,因此与基于第2图像82的显示用图像的显示面积相比,如通过较大的显示面积进行显示等那样,可以在第1图像81和第2图像82中使显示面积不同地进行显示。

如图14所示,在第1观察模式下,在显示第1图像81及作为第2图像82进行了色差扩大处理的第2图像82a的情况下,在显示器15的大面积的区域中显示第1图像81,在小面积的区域中显示第2图像82a。由于第1图像81是通过白色光而呈自然色彩的图像,因此例如为进行检查的医生看惯了的图像。因此,由于被调整为第1图像81的第1显示帧速率高于第1摄影帧速率的条件,因此平滑且容易观察,即使在大面积的区域中显示的情况下,也能够没有违和感地进行观察。另外,图14中,第1图像81及第2图像82a中映现的观察对象具有发红92。

第2图像82a是通过特殊光及色彩强调显示处理而强调显示表层血管等的结构的图像,因此血管密集的病变等被强调显示。因此,即使在比较小的面积的区域中显示了第2图像82a的情况下,也强调显示了病变等,因此通过与第1图像81排列显示,能够防止病变等的遗漏。

在第1观察模式下,可以显示第1图像81,并显示进行了伪彩色处理的第2图像82b。在显示第2图像82b的情况下,可以进一步显示使用了第2图像82b的图像分析结果画面91。

如图15所示,例如在第1观察模式下,在显示器15的大面积的区域中显示第1图像81,在小面积的区域中显示进行了伪彩色处理的第2图像82b及使用了第2图像82b的图像分析结果画面91。关于第2图像82b所包含的发红92,进行使用了AI(artificialintelligence:人工智能)的图像分析、和/或用于氧饱和度或距离的测定等物理量测定的图像分析等,其结果,例如作为病变区域93通过图像分析结果画面91进行表示。因此,医生能够一边通过使用白色光调整了显示帧速率的容易观察的第1图像81进行观察,一边通过图像分析结果画面91即时获得与发红92例如是肿瘤性的还是非肿瘤性的诊断有关的信息的同时进行诊断。并且,进行图像分析的图像可以是所获取的任一种类的内窥镜图像,例如,能够设为第1图像、第2图像和/或第3图像中的任一个以上。此时,图像分析可以同时进行,也可以通过不同的图像分析部分别并行地进行。并且,图像分析能够使用处理器装置14以外的装置来进行。如此,根据各种图像分析来获取适当种类的内窥镜图像,并能够用于各个图像分析,因此能够提高图像分析的精度。

另外,如图16所示,在第1观察模式下,可以在显示器15的大面积的区域中显示第1图像81,在小面积的区域中仅显示进行了伪彩色处理的第2图像82b。并且,第1观察模式下,在显示第1图像81且不显示第2图像82的情况下,显示显示器15的大面积的区域的第1图像81,在小面积的区域中可以不显示任何图像,也可以显示第2图像82以外的图像。并且,可以在小面积的区域中显示第1图像81,在大面积的区域中显示第2图像82。另外,第2图像82统称第2图像,包含第2图像82a及第2图像82b。

接着,沿图17所示的流程图,对本实施方式的内窥镜系统的第1观察模式下的动作的一系列流程进行说明。开始第1观察模式下的内窥镜检查,并设定各种帧速率(步骤ST110)。第1观察模式下设定的帧速率为第1图像81的第1摄影帧速率及第1显示帧速率、以及第2图像82的第2摄影帧速率及第2显示帧速率。设定各种帧速率之后,开始第1观察模式下的观察(步骤ST120)。由于照明光通过样式P1照射到观察对象,因此首先获取第1图像81。第1图像81是按照第1摄影帧速率获取的(步骤ST130)。

接着,按照第2摄影帧速率获取第2图像82(步骤ST140)。获取第1图像81之后,按照第1显示帧速率生成第1显示用图像(步骤ST150)。在显示第2图像82的情况下(步骤ST160中为“是”),按照第2显示帧速率生成第2显示用图像(步骤ST170)。接着,将所生成的第1显示用图像及第2显示用图像显示在显示器15上。在不显示第2图像82的情况下(步骤ST160中为“否”),显示第1显示用图像。

由于内窥镜系统10如上所述地构成,因此即使在获取了2种内窥镜图像的情况下,第1图像81通过调整显示帧,能够同时获得在进行显示时可抑制画质的降低,并且在第2图像82中不进行像素的间隔剔除等的高品质的图像。这也能够适用于获取2种以上的内窥镜图像的情况,根据目的获取多种内窥镜图像,且能够通过符合各个目的的画质获取各个内窥镜图像。由此,能够显示抑制了画质的降低的2种以上的内窥镜图像,无需特别的功夫,使用医生在检查中获取的照明光等不同的多个内窥镜图像,能够在获取多个图像分析结果的同时进行检查。因此,医生同时获得有利于诊断的多个图像分析结果作为诊断支援信息,并且能够通过高画质的内窥镜图像进行诊断。

另外,摄像传感器45为根据通过依次读取方式执行信号读取并且通过依次复位方式进行复位的滚动快门方式来进行摄像动作的摄像传感器45,但基于滚动快门方式的上述摄像动作中,也可以根据通过调整作为照射照明光的期间的照射期间调整了曝光期间的伪全局快门方式来进行摄像动作。

在该情况下,可以通过光源部20的控制,间歇性地照射多个照明光中的每一个。间歇性地照射是指以在照射期间的前后设置熄灯期间的方式进行照射。优选地,以在1帧的期间至少包含1次照射期间的方式进行照射。因此,优选地,在1帧的期间分别至少各包含1次照射期间和熄灯期间。

如图18所示,作为伪全局快门方式,照明光在照射期间C2的期间进行照射,之后,在熄灯期间B2的期间进行熄灯,并将其重复进行。摄像传感器45中,在作为与照射期间C2相同的期间的曝光期间C1进行曝光,之后,在作为与熄灭照明光的熄灯期间B2相同的期间的读取期间B1的期间进行读取。另外,图18中,通过对角线示出为随着时间的经过依次读取像素行的依次读取方式。

照明光对准摄像传感器的曝光期间C1,在照射期间C2中间歇性地进行照射。图18中,在摄像传感器45的线中,用阴影示意性地表示被照明光曝光的区域。通过采用这种伪全局快门方式,在切换照明光时,不会产生混色等问题,因此优选。摄像期间A1为包含曝光期间C1及读取期间B1的期间,且为1帧的期间。

另外,摄像传感器45进行拍摄的摄像期间A1和读取拍摄而获得的图像信号的读取期间B1的期间中,摄像期间A1成为比读取期间B1长的期间。由此,在1帧中,能够设置曝光摄像传感器45的整个线的曝光期间。

例如,摄像期间A1能够设为1/45sec(秒)。并且,曝光期间C1及读取期间B1能够分别设为1/90sec。因此,可以说该情况下的摄影帧速率为45fps。

另外,光源部20可以变更进行多个照明光中的任一个的照射的照射期间C2来进行照明光的照射。例如,间歇性地照射照明光时的照射期间C2由用户从1/90sec、1/200sec或1/400sec中进行选择。

在该情况下,可以根据所变更的照射期间C2,来变更曝光期间C1。即,快门速度能够通过照射期间C2来控制。通过照明光的照射期间C2来控制的快门速度例如能够设为1/90sec、1/200sec或1/400sec。

本实施方式中,切换第1照明光和第2照明光来进行发光(参考图6),并重复在第1照明光L1中连续摄影2帧,切换成第2照明光L2并摄影1帧的样式P1。因此,在45fps中,在30fps下获取基于第1照明光L1的第1图像81,在15fps下获取基于第2照明光L2的第2图像82。

并且,发光量能够根据由光源部20进行照明光的照射的照射期间C2和作为照明光的单位时间内的发光量的瞬间发光量D1构成的发光积分量来进行计算。因此,能够控制光源部20在1次照明光的照射中照射的照明光的发光量。

并且,发光量能够通过APC(Automatic Power Control:自动功率控制)来进行控制,该情况下也相同地,能够根据由光源部20进行照明光的照射的照射期间C2和作为照明光的单位时间内的发光量的瞬间发光量D1构成的发光积分量来计算发光量,且能够通过照明光的照射期间C2和/或瞬间发光量D1来进行控制。另外,为了获取瞬间发光量D1,可以使用光量计等(未图示)。

另外,如上所述,内窥镜系统10能够具备可与第1观察模式相互切换的第2观察模式。在第2观察模式下,不进行照明光的切换,在相同的照明光中对观察对象进行观察。在第2观察模式下,将多个照明光中所包含的第3照明光照射到观察对象,控制摄像传感器45,以在照射第3照明光的第3期间,按照预先设定的第3摄影帧速率对观察对象进行摄影。摄像传感器45获取在第3期间进行摄影而得到的第3图像。另外,将第3图像显示在显示器上的情况下,优选按照第3摄影帧速率以下的第3显示帧速率来显示第3图像。另外,第3摄影帧速率是在第3照明光的照射中进行拍摄的帧速率,第3显示帧速率是将第3图像显示在显示器15上时的帧速率。

在第2观察模式下,由于按照第3摄影帧速率以下的第3显示帧速率来显示第3图像,因此不生成插补帧。因此,在第2观察模式下,不生成显示用图像。

并且,在第2观察模式下,摄像传感器45通过滚动快门方式进行摄像动作。如图19所示,作为滚动快门方式,照明光始终进行照射。摄像传感器45中,始终曝光,并随着时间的经过依次读取像素行。从最初的像素行到最后的像素行在曝光后完成读取为止的期间A2为1帧。例如,摄像期间A2能够设为1/60sec。因此,该情况下的摄影帧速率为60fps。

另外,在第2观察模式下,由于摄像传感器45通过如上所述的滚动快门方式进行摄像动作,因此摄像传感器45进行拍摄的摄像期间A2成为将曝光期间和读取拍摄而获得的图像信号的读取期间相加的期间,且成为1帧的期间。本实施方式中,作为摄像期间A2的1帧的期间为1/60sec。

并且,在第2观察模式下,由于照明光始终点亮,因此光量能够通过照明光的发光量D2来进行控制。另外,与第1观察模式相同地,发光量D2能够通过APC来进行控制,该情况下也相同地,能够通过照明光的发光量D2来控制光量。并且,快门速度能够通过摄像传感器45的摄像期间A2来进行控制。

本实施方式中,在第2观察模式下,基于第3照明光的第3摄影帧速率例如能够设为60fps。第3显示帧速率为第3摄影帧速率以下,例如能够设为60fps、50fps或59.94fps。

另外,上述实施方式中,对进行内窥镜图像处理的情况进行本发明的适用,但对处理内窥镜图像以外的医疗图像的处理器装置、医疗图像处理装置或医疗图像处理系统等也能够进行本发明的适用。

另外,本实施方式中,在第1观察模式下,获取了第1图像及第2图像这2种图像,但也可以获取3种以上的图像。并且,在第1观察模式下,通过使用了AI的图像分析对第2图像鉴别肿瘤和非肿瘤,并将其结果显示在显示器15上,但可以使用所获取的多种图像中的任一个进行图像分析,也可以对插补帧等所生成的图像进行图像分析。即,也可以在第1图像、基于第1图像的插补帧及第2图像这3种内窥镜图像中,对1个或2个以上进行图像分析。

如上所述,所获取的多种图像中,可以在1个或2个以上种类的内窥镜图像中,进行基于图像信息的分析,例如基于AT的诊断支援信息等的获取,或者氧饱和度或被摄体中的距离的测定等物理量测定信息的获取等。作为用于图像分析的内窥镜图像,根据图像分析的种类,能够选择使用能够获取良好的分析结果的内窥镜图像的种类。在该情况下,多个分析可以同时进行,也可以并行地进行。

例如,在第1观察模式下,获取作为普通图像的第1图像、作为特殊图像的第2图像、及作为与第2图像不同的特殊图像的第3图像,通过使用第1图像和第2图像进行分析而计算被摄体的氧饱和度,通过使用第2图像进行另一分析而进行被摄体所具有的病变的检测,通过使用第3图像进一步进行又一分析而能够获取与检测出的病变的恶性度有关的诊断信息。如此,通过使用多种内窥镜图像进行分别不同的图像分析处理,能够在基于内窥镜的观察中自动获得多个诊断信息。

并且,分析可以在处理器装置14中进行,也可以使用另一装置来进行。例如,进行多个分析的情况下,可以在连接于处理器装置14的图像处理装置(未图示)中进行分析。关于分析结果,可以在图像处理装置中连接显示器15,且图像处理装置进行将分析结果显示在显示器15上的控制。在该情况下,显示在显示器15上的第1图像81、第2图像82和/或插补帧83等内窥镜图像从处理器装置14发送到图像处理装置,且图像处理装置可以进行将这些图像和分析结果显示在显示器15上的控制。

另外,在显示内窥镜图像和/或分析结果等的情况下,可以显示在多个显示器15上,也可以显示在平板电脑等(未图示)小型便携式终端装置上。显示时,根据显示的装置,能够预先设定画面的布局等。

上述实施方式中,处理器装置14中所包含的中央控制部51、图像获取部52、DSP53、降噪部54、图像处理部56、显示控制部57及视频信号生成部58等执行各种处理的处理部(processing unit)的硬件结构为如下所示的各种处理器(processor)。各种处理器中,包括可编程逻辑器件(Programmable Logic Device:PLD)及专用电路等,所述可编程逻辑器件是执行软件(程序)而作为各种处理部发挥功能的通用处理器即CPU(CentralProcessing Unit:中央处理器)、FPGA(Field Programmable Gate Array:现场可编程逻辑门阵列)等制造后能够变更电路结构的处理器,所述专用电路是具有为了执行各种处理而专门设计的电路结构的处理器。

1个处理部可以由这些各种处理器中的1个构成,也可以由相同种类或不同种类的2个以上的处理器的组合(例如,多个FPGA或者CPU与FPGA的组合)构成。并且,也可以由1个处理器构成多个处理部。作为由1个处理器构成多个处理部的例,第1,如客户端或服务器等计算机为代表,具有如下方式,即,由1个以上的CPU和软件的组合构成1个处理器,该处理器作为多个处理部而发挥功能。第2,如片上系统(System On Chip:SoC)等为代表,具有如下方式,即,使用以1个IC(Integrated Circuit:集成电路)芯片实现包含多个处理部的系统整体的功能的处理器。如此,各种处理部作为硬件结构,使用1个以上的上述各种处理器而构成。

而且,更具体而言,这些各种处理器的硬件结构为组合了半导体元件等电路元件的方式的电路(circuitry)。

相关技术
  • 内窥镜用光源装置、内窥镜以及内窥镜系统
  • 内窥镜和内窥镜系统
  • 电子内窥镜用处理器以及电子内窥镜系统
  • 电子内窥镜处理器以及电子内窥镜系统
  • 电子内窥镜用处理器以及电子内窥镜系统
  • 内窥镜业务辅助装置及内窥镜业务辅助系统以及内窥镜业务辅助装置的工作方法
  • 内窥镜系统、处理系统、内窥镜系统的工作方法以及图像处理程序
技术分类

06120115608276