1.本发明涉及一种根据命令保存多种静止图像的内窥镜系统及内窥镜系统的工作方法。
背景技术:2.在医疗领域,广泛进行使用具备光源装置、内窥镜及处理器装置的内窥镜系统的诊断。在使用内窥镜系统的诊断中,有时通过对照明光等下工夫的图像增强观察(iee,image enhanced endoscopy:图像增强内镜),使用用内窥镜拍摄观察对象而获得的图像(以下,称为内窥镜图像),获得与观察对象的表面结构或粘膜表层等相关的各种信息。
3.在使用iee的诊断中,有时能够通过获取由多种照明光等获得的多种内窥镜图像,并详细地比较或叠加这些内窥镜图像来进行适当的诊断。作为使用由通过白色光观察获得的正常图像及通过iee获得的图像等构成的多种图像的技术,公开了一种内窥镜系统等,其在表示装置上并列显示氧饱和度观察动态图像、正常观察动态图像及血管增强观察动态图像,当在动态图像显示中操作冻结按钮时,在设定曝光条件后将各观察动态图像作为静止图像而保存(专利文献1)。
4.以往技术文献
5.专利文献
6.专利文献1:日本特开2013-188364号公报
技术实现要素:7.发明要解决的技术课题
8.在现有技术中,从在动态图像显示中通过操作冻结按钮来命令保存静止图像的时点,例如追溯到过去一定期间,选择并保存模糊少的多种静止图像。在多种照明光中,例如,通过对基于用于强调观察对象的表层血管等的照明光的图像和基于用于强调相同的观察对象的中深层血管等的照明光的图像这2种图像进行比较,可获得与观察对象的深度方向相关的信息,因此在对病变的范围进行诊断时等是有效的。
9.为了保存与多种照明光对应的多种静止图像,例如,如现有技术那样,通过切换照明光按每个照明光进行静止图像的保存并保存各种静止图像。在反复切换多个照明光的同时对观察对象进行观察并拍摄的情况下,由于光过敏等问题,优选尽可能延长用于观察的照明光的切换周期。然而,在该情况下,需要选择在进行静止图像记录命令时没有用于观察的照明光的图像,照明光的切换周期越长,所保存的多种图像之间的时间差越大。所保存的多种图像之间的时间差越大,由于观察对象的移动等,图像之间的位置较大偏离的可能性越高,可能会保存不适合于比较或叠加的静止图像。
10.另一方面,为了减小所保存的多种图像之间的时间差,可以考虑缩短多个照明光的切换周期,以缩短各照明光的照明时间。然而,该方法可能发生光闪烁或光过敏的问题,成为与图像之间的时间差的权衡。
11.并且,在专利文献1中,除了上述以外,根据规定的顺序自动切换多个照明光,并且在监视器上同时显示与各照明光对应的动态图像。在该情况下,作为一种照明光,与不切换照明光的情况相比,帧速率成为一半以下,例如,有时难以通过多种图像之间的比较或叠加来诊断可能移动的观察对象。
12.本发明的目的在于提供一种内窥镜系统及内窥镜系统的工作方法,所述内窥镜系统中,将多种静止图像按照1次命令以适合比较或叠加的状态保存。
13.用于解决技术课题的手段
14.本发明为一种内窥镜系统,其具备:多个半导体光源,发出相互不同的波段的光;光源用处理器,进行使多个半导体光源的光强度比的组合相互不同的多种照明光中分别发光的控制;及图像用处理器。图像用处理器按每一帧获取对由多种照明光所包含的第1照明光和第2照明光照明的观察对象进行拍摄而获得的第1图像和第2图像,并进行保存从所获取的多个第1图像和多个第2图像中分别选择的第1图像和第2图像的图像保存处理,在进行用于开始图像保存处理的处理开始操作时,为了进行图像保存处理,从在包括进行处理开始操作的时刻的对象期间获取的多个第1图像和多个第2图像中分别选择满足预先设定的选择条件的第1图像和第2图像。光源用处理器在对象期间将发光中的第1照明光及第2照明光中的一个切换为另一个而发光。
15.优选对象期间是图像用处理器获取预先设定的各多个第1图像和第2图像的期间。
16.优选对象期间是图像用处理器获取满足选择条件的第1图像和第2图像的期间。
17.优选光源用处理器以预先设定的周期交替地切换第1照明光和第2照明光而发光。
18.优选光源用处理器在从切换第1照明光和第2照明光的发光的时刻开始的预先设定的期间之后进行处理开始操作时,通过处理开始操作,将在处理开始操作前发光的第1照明光及第2照明光中的一个切换为另一个而发光。优选光源用处理器在经过了对象期间时,将在处理开始操作后发光的第1照明光及第2照明光中的一个切换为另一个而发光。优选光源用处理器在经过了从处理开始操作的时刻开始的预先设定的期间时,将在处理开始操作后发光的第1照明光及第2照明光中的一个切换为另一个而发光。
19.优选光源用处理器在从切换第1照明光和第2照明光的发光的时刻开始的预先设定的期间进行处理开始操作时,使在处理开始操作前发光的第1照明光及第2照明光中的一个在处理开始操作后也发光。优选光源用处理器在经过了从切换第1照明光和第2照明光的发光的时刻开始的预先设定的期间时,将在处理开始操作时发光的第1照明光及第2照明光中的一个切换为另一个而发光。优选光源用处理器在经过了从处理开始操作的时刻开始的预先设定的期间时,将在处理开始操作时发光的第1照明光及第2照明光中的一个切换为另一个而发光。
20.优选图像用处理器将选择条件设为所获取的多个第1图像或多个第2图像中的每一个中模糊最少的第1图像或第2图像。
21.优选图像用处理器将选择条件设为在从所获取的多个第1图像或多个第2图像中分别选择的第1图像和第2图像中位置偏移最少的第1图像及第2图像。
22.优选图像用处理器将选择条件设为在从所获取的多个第1图像或多个第2图像中分别选择的第1图像和第2图像中亮度的差最小的第1图像及第2图像。
23.优选图像用处理器将选择条件设为在从所获取的多个第1图像或多个第2图像中
选择的第1图像和第2图像中获取时刻的差最小的第1图像及第2图像。
24.优选具备显示第1图像和/或第2图像的显示器,图像用处理器在对象期间在显示器上显示所保存的第1图像和/或第2图像。
25.本发明为一种内窥镜系统的工作方法,内窥镜系统具备:多个半导体光源,发出相互不同的波段的光;光源用处理器,进行使多个半导体光源的光强度比的组合相互不同的多种照明光中分别发光的控制;及图像用处理器。图像用处理器按每一帧获取对由多种照明光所包含的第1照明光和第2照明光照明的观察对象进行拍摄而获得的第1图像和第2图像,并进行保存从所获取的多个第1图像和多个第2图像中分别选择的第1图像和第2图像的图像保存处理,在进行用于开始图像保存处理的处理开始操作时,为了进行图像保存处理,从在包括进行处理开始操作的时刻的对象期间获取的多个第1图像和多个第2图像中分别选择满足预先设定的选择条件的第1图像和第2图像,光源用处理器在对象期间将发光中的第1照明光及第2照明光中的一个切换为另一个而发光。
26.发明效果
27.根据本发明,能够通过1次命令以适合比较或叠加的状态保存多种静止图像。
附图说明
28.图1是内窥镜系统的外观图。
29.图2是内窥镜的操作部的外观图。
30.图3是表示内窥镜系统的功能的框图。
31.图4是说明光源部所包含的4色led的说明图。
32.图5是表示紫色光v、蓝色光b、绿色光g及红色光r的光谱的图表。
33.图6是表示第1照明光的光谱的图表。
34.图7是表示第2照明光的光谱的图表。
35.图8是表示发光期间设定菜单的说明图。
36.图9是表示第1特殊观察图像的图像图。
37.图10是表示照明第1照明光时所获得的紫色及蓝色光图像和绿色及红色光图像的说明图。
38.图11是表示第2特殊观察图像的图像图。
39.图12是表示照明第2照明光时所获得的紫色及蓝色光图像和绿色及红色光图像的说明图。
40.图13是说明第1特殊观察模式下的静止图像的保存的一例的说明图。
41.图14是说明第1特殊观察模式下的静止图像的保存的另一例的说明图。
42.图15是表示第3照明光的光谱的图表。
43.图16是表示第4照明光的光谱的图表。
44.图17是对在切换后期间之后进行了处理开始操作时的静止图像的保存的一例进行说明的说明图。
45.图18是对在经过了对象期间时切换照明光而发光时的静止图像的保存的一例进行说明的说明图。
46.图19是对在经过了处理开始操作后期间时切换照明光而发光时的静止图像的保
存的一例进行说明的说明图。
47.图20是对在切换后期间进行了处理开始操作时的静止图像的保存的一例进行说明的说明图。
48.图21是对在经过切换后期间之后,切换为在照明光的切换前发光的第1照明光而发光时的一例进行说明的说明图。
49.图22是对在经过处理开始操作后期间之后,切换为在照明光的切换前发光的第1照明光而发光时的另一例进行说明的说明图。
50.图23是对选择条件和所保存的内窥镜图像进行说明的说明图。
51.图24是对选择条件和所保存的内窥镜图像进行说明的表。
52.图25是对在显示器上显示的图像的选择的一例进行说明的说明图。
53.图26是对在显示器上显示的图像的选择的另一例进行说明的说明图。
54.图27是表示第1特殊观察模式下的静止图像的保存的一连串的流程的流程图。
具体实施方式
55.在图1中,内窥镜系统10具有内窥镜12、光源装置14、处理器装置16、显示器18及键盘19。内窥镜12与光源装置14光学连接,且与处理器装置16电连接。内窥镜12具有插入于具有观察对象的受检者的体内的插入部12a、设置于插入部12a的基端部分的操作部12b以及设置于插入部12a的前端侧的弯曲部12c及前端部12d。弯曲部12c通过操作操作部12b的弯角钮12e(参考图2)来进行弯曲动作。前端部12d通过弯曲部12c的弯曲动作而朝向所期望的方向。
56.如图2所示,操作部12b除了弯角钮12e以外还具有用于观察模式的切换操作的模式切换开关12g、用于变更摄像倍率的变焦操作部12h及进行静止图像记录命令的静止图像记录命令部12f。另外,观察模式的切换操作、变焦操作、或静止图像记录命令可以设为除了使用模式切换开关12g、或静止图像记录命令部12f的观测器开关以外,还使用键盘19、或脚踏开关(未图示)等的操作或命令。
57.内窥镜系统10具有正常观察模式、特殊观察模式及多观察模式这3个模式。正常观察模式是在显示器18上显示正常观察图像(以下称为正常图像)的模式,所述正常观察图像为作为照明光使用白色光拍摄观察对象而获得的自然色彩的图像。特殊观察模式包括第1特殊观察模式和第2特殊观察模式。第1特殊观察模式是在显示器18上显示强调表层血管等表层信息的第1特殊观察图像(以下称为第1图像)的模式,第2特殊观察模式是在显示器18上显示强调深层血管等深层信息的第2特殊观察图像(以下称为第2图像)的模式。多观察模式是自动切换第1特殊观察模式和第2特殊观察模式的模式。
58.处理器装置16与显示器18及键盘19电连接。显示器18输出并显示正常图像、第1图像、第2图像和/或这些图像所附带的信息等。键盘19作为接受功能设定等的输入操作的用户界面而发挥作用。另外,在处理器装置16中也可以连接记录图像或图像信息等的外置记录部(省略图示)。
59.在图3中,光源装置14发出向观察对象照射的照明光,具备光源部20和控制光源部20的光源用处理器21。光源部20例如由多色led(light emitting diode,发光二极管)等半导体光源、激光二极管与荧光体的组合、或氙气灯、卤素光源构成。并且,光源部20包括用于
调整由led等发射的光的波段的滤光器等。光源用处理器21通过各led等的开/关、各led等的驱动电流和驱动电压的调整来控制照明光的光量。并且,光源用处理器21通过滤光器的变更等来控制照明光的波段。
60.如图4所示,在本实施方式中,光源部20具有v-led(violet light emitting diode:紫色发光二极管)20a、b-led(blue light emitting diode:蓝色发光二极管)20b、g-led(green light emitting diode:绿色发光二极管)20c及r-led(red light emitting diode:红色发光二极管)20d这4种颜色的led。
61.如图5所示,v-led20a产生中心波长410
±
10nm、波长范围380~420nm的紫色光v。b-led20b产生中心波长450
±
10nm、波长范围420~500nm的蓝色光b。g-led20c产生波长范围达到480~600nm的绿色光g。r-led20d产生中心波长620~630nm且波长范围达到600~650nm的红色光r。
62.光源用处理器21控制v-led20a、b-led20b、g-led20c及r-led20d。当为正常观察模式时,光源用处理器21以发出紫色光v、蓝色光b、绿色光g及红色光r之间的光强度比的组合成为vc∶bc∶gc∶rc的正常光的方式,控制各led20a~20d。
63.当设定为第1特殊观察模式时,光源用处理器21以发出紫色光v、蓝色光b、绿色光g及红色光r之间的光强度比的组合成为vs1∶bs1∶gs1∶rs1的第1照明光的方式,控制各led20a~20d。第1照明光优选强调表层血管。因此,第1照明光优选使紫色光v的光强度大于蓝色光b的光强度。例如,如图6所示,将紫色光v的光强度vs1与蓝色光b的光强度bs1的比率设为“4∶1”。
64.另外,在本说明书中,光强度比的组合包括至少1个半导体光源的比率为0(零)的情况。因此,包括各半导体光源中的任一个或2个以上不点亮的情况。例如,如紫色光v、蓝色光b、绿色光g及红色光r之间的光强度比的组合为1∶0∶0∶0的情况那样,仅点亮半导体光源中的1个,且不点亮其他3个的情况下也具有光强度比,是光强度比的组合之一。
65.当设定为第2特殊观察模式时,光源用处理器21以发出紫色光v、蓝色光b、绿色光g及红色光r之间的光强度比的组合成为vs2∶bs2∶gs2∶rs2的第2照明光的方式,控制各led20a~20d。第2照明光优选强调深层血管。因此,第2照明光优选使蓝色光b的光强度大于紫色光v的光强度。例如,如图7所示,将紫色光v的光强度vs2与蓝色光b的光强度bs2的比率设为“1∶3”。
66.如上所述,在正常观察模式、第1特殊观察模式或第2特殊观察模式中,紫色光v、蓝色光b、绿色光g及红色光r的光强度比的组合、即照明光的种类相互不同。另外,可以使用利用了具有与这些观察模式下的照明光相互不同的光强度比的组合的不同种类的照明光的观察模式。
67.当设置为多观察模式时,光源用处理器21交替重复连续发出特定种类的照明光,例如第1照明光的第1期间与连续发出第2照明光的第2期间。对基于光源用处理器21的多观察模式下的发光控制进行具体说明,在使第1照明光发光的第1期间之后,成为使第2照明光发光的第2期间,然后再次成为第1期间,并反复该周期。在本实施方式中,第1期间和第2期间分别为20帧。
68.另外,“帧”是指,用于控制拍摄观察对象的摄像传感器45(参考图3)的单位,例如,“1帧”是指,至少包含由来自观察对象的光曝光摄像传感器45的曝光期间和读出图像信号
的读取期间的期间。在本实施方式中,与作为拍摄的单位的“帧”对应地分别定义第1期间或第2期间等各种期间。
69.作为第1照明光的发光期间的第1期间和作为第2照明光的发光期间的第2期间能够根据连接于光源用处理器21的发光期间设定部22而适当地变更。若通过键盘19的操作而接收发光期间的变更操作,则发光期间设定部22将如图8所示的发光期间设定菜单显示于显示器18上。第1期间例如能够在2帧至60帧之间进行变更,对于各发光期间,分配到滑杆81a上。第2期间例如也能够在2帧至60帧之间进行变更,对于各发光期间,分配到滑杆81b上。
70.在变更第1期间的情况下,通过操作键盘19而在示出滑杆81a上的希望变更的发光期间的位置对准滑块82a,从而第1期间被变更。对于第2期间,也通过操作键盘19而在示出滑杆81b上的希望变更的发光期间的位置对准滑块82b,从而第2期间被变更。另外,滑杆81b例如也从被分配2帧至60帧的发光期间。在本实施方式中,在多观察模式中,第1期间通过滑杆81a分配20帧的发光期间,第2期间通过滑杆81b分配20帧的发光期间。
71.并且,光源用处理器21在进行用于开始图像保存处理的处理开始操作时,在包括进行处理开始操作的时刻的对象期间,进行将发光中的第1照明光及第2照明光中的一个切换为另一个而发光的控制。因此,在对象期间,照明光至少切换一次。例如,当在第1特殊观察模式下进行图像保存处理时,光源用处理器21在对象期间中将发光中的第1照明光切换为第2照明光。在第2特殊观察模式中,在对象期间中将发光中的第2照明光切换为第1照明光。并且,在多观察模式中,当使第1照明光发光时,切换为第2照明光,并且,当使第2照明光发光时,切换为第1照明光。但是,在对象期间中存在作为多观察模式的周期性照明光的切换的情况下,无需进一步切换照明光。通过如上构成光源用处理器21,由1次命令保存多种静止图像。
72.各led20a~20e发出的光经由由反射镜、透镜等构成的光路耦合部(未图示)入射到光导件41。光导件41内置于内窥镜12及通用塞绳(连接内窥镜12与光源装置14及处理器装置16的塞绳)。光导件41将来自光路耦合部的光传播到内窥镜12的前端部12d。
73.在内窥镜12的前端部12d设置有照明光学系统30a及摄像光学系统30b。照明光学系统30a具有照明透镜42,通过光导件41传播的照明光经由照明透镜42照射到观察对象。摄像光学系统30b具有物镜43、变焦透镜44及摄像传感器45。来自观察对象的反射光、散射光及荧光等各种光经由物镜43及变焦透镜44入射到摄像传感器45。由此,观察对象的图像成像在摄像传感器45中。变焦透镜44通过操作变焦操作部12h而在望远端与广角端之间自由移动,并且放大或缩小在摄像传感器45上成像的观察对象。
74.摄像传感器45是按每个像素设置有r(红色)、g(绿色)或b(蓝色)的滤色器中的任一个的彩色摄像传感器,拍摄观察对象并输出rgb各色的图像信号。作为摄像传感器45,能够利用ccd(charge coupled device:电荷耦合元件)摄像传感器或cmos(complementary metal-oxide semiconductor:互补金属氧化物半导体)摄像传感器。并且,代替设置有原色的滤色器的摄像传感器45,可以使用具备c(青色)、m(品红色)、y(黄色)及g(绿色)的补色滤波器的补色摄像传感器。当使用补色摄像传感器时,输出cmyg这4种颜色的图像信号。因此,通过补色-原色颜色转换,将cmyg这4种颜色的图像信号转换为rgb这3种颜色的图像信号,从而能够获得与摄像传感器45相同的rgb图像信号。并且,代替摄像传感器45也可以使用没
有设置滤色器的单色传感器。
75.摄像传感器45由摄像控制部(未图示)驱动控制。摄像控制部由中央控制部59(参考图3)控制。通过摄像控制部的控制根据各模式而不同。在正常观察模式中,摄像控制部控制摄像传感器45以拍摄被正常光照射的观察对象。由此,从摄像传感器45的b像素输出bc图像信号,从g像素输出gc图像信号,从r像素输出rc图像信号。在特殊观察模式或多观察模式中,摄像控制部控制摄像传感器45以拍摄被特殊光照射的观察对象。由此,在第1特殊观察模式中,从摄像传感器45的b像素输出bs1图像信号,从g像素输出gs1图像信号,从r像素输出rs1图像信号。同样地,在第2特殊观察模式中,从摄像传感器45的b像素输出bs2图像信号,从g像素输出gs2图像信号,从r像素输出rs2图像信号。
76.cds/agc(correlated double sampling(相关双采样)/automatic gain control(自动增益控制))电路46对由摄像传感器45获得的模拟的图像信号进行相关双采样(cds)或自动增益控制(agc)。经过了cds/agc电路46的图像信号通过a/d(analog/digital:模拟/数字)变频器47转换为数字图像信号。a/d转换后的数字图像信号输入于处理器装置16。
77.在处理器装置16中,与图像保存处理等的处理相关的程序存储于程序用存储器(未图示)。在处理器装置16中,通过由图像用处理器构成的中央控制部59使程序用存储器内的程序动作,从而实现图像信号获取部51、dsp(digital signal processor:数字信号处理器)52、降噪部53、存储器54、信号处理部55、图像保存部56、显示控制部57、视频信号生成部58及中央控制部59的功能。图像保存部56具备保存控制部61、暂存部62、保存部63,这些功能也同样地通过利用由图像用处理器构成的中央控制部59来使程序用存储器内的程序动作来实现。并且,中央控制部59接收来自内窥镜12及光源装置14的信息,并根据接收到的信息,除了进行处理器装置16的各部的控制以外,还进行内窥镜12或光源装置14的控制。并且,还接收来自键盘19的命令等的信息。
78.作为图像获取部的图像信号获取部51获取从内窥镜12输入的内窥镜图像的数字图像信号。图像信号获取部51按每一帧获取对由各照明光照明的观察对象进行拍摄而得的图像信号。获取的图像信号被发送到dsp52。dsp52对接收到的图像信号进行色彩校正处理等数字信号处理。降噪部53对通过dsp52实施色彩校正处理等的图像信号实施例如基于移动平均法和中值滤波法等的降噪处理。降低噪声的图像信号存储于存储器54。
79.信号处理部55从存储器54获取降噪后的图像信号。并且,根据需要对所获取的图像信号实施颜色转换处理、色彩强调处理及结构强调处理等信号处理,并生成拍摄有观察对象的彩色的内窥镜图像。
80.在信号处理部55中,在正常观察模式中,对所输入的1帧量的降噪后的图像信号实施颜色转换处理、色彩强调处理、结构强调处理等正常模式用图像处理。被实施该正常模式用图像处理的图像信号作为正常图像输入到图像保存部56。
81.在特殊观察模式或多观察模式中,对在第1特殊观察模式或第2特殊观察模式中输入的1帧量的降噪后的图像信号分别实施颜色转换处理、色彩强调处理、结构强调处理等第1特殊观察模式用或第2特殊观察模式用的图像处理。实施了该第1特殊观察模式用或第2特殊观察模式用图像处理的图像信号作为第1图像或第2图像输入到图像保存部56。
82.信号处理部55所生成的内窥镜图像在观察模式为正常观察模式时为正常观察图像,当观察模式为特殊观察模式时为特殊观察图像,因此颜色转换处理、色彩强调处理及结
构强调处理的内容根据观察模式而不同。在正常观察模式的情况下,信号处理部55实施使观察对象呈自然的色彩的上述各种信号处理而生成正常观察图像。在特殊观察模式的情况下,信号处理部55例如实施强调观察对象的血管的上述各种信号处理而生成包含第1图像及第2图像的特殊观察图像。
83.半导体光源由于包括发出波段为中心波长410
±
10nm且波长范围420~500nm的紫色光v(第1窄频带光)的第1半导体光源及发出波段为中心波长450
±
10nm且波长范围380~420nm的蓝色光b(第2窄频带光)的第2半导体光源,因此在由信号处理部55生成的特殊观察图像中,在第1。图像中,以粘膜的表面为基准位于观察对象内的比较浅的位置的血管(所谓的表层血管)或血液成为品红色系的颜色(例如褐色),在第2图像中,以粘膜的表面为基准位于观察对象内的比较深的位置的血管(所谓的中深层血管)成为青色系的颜色(例如绿色)。因此,相对于以粉红色系颜色表示的粘膜,观察对象的血管或出血(血液)通过颜色的差异来强调。
84.如图9所示,通过第1图像显示示出观察对象中背景粘膜bm及表层血管vs1的图像。第1图像根据包括紫色光、蓝色光、绿色光及红色光的第1照明光来获得。如图10所示,第1照明光照射到观察对象时,第1照明光中紫色光v及蓝色光b深入至表层血管vs1所分布的表层。因此,根据紫色光v及蓝色光b的反射光所获得的紫色光图像vp包括表层血管vs1的图像。另外,在此,紫色光v的光强度比蓝色光b的光强度强,因此设为紫色光图像vp。并且,第1照明光中绿色光g和红色光r深入至分布于比表层血管vs1及深层血管vs2(位于比表层血管vs1更深的位置的血管)更深的位置的背景粘膜bm。因此,根据绿色光g和红色光r的反射光所获得的绿色及红色光图像grp包括背景粘膜bm的图像。根据以上内容,第1图像为将紫色光图像vp和绿色及红色光图像grp组合而成的图像,因此显示背景粘膜bm及表层血管vs1的图像。
85.如图11所示,通过第2图像显示示出观察对象中背景粘膜bm及深层血管vs2的图像。第2图像根据包括紫色光、蓝色光、绿色光及红色光的第2照明光来获得。如图12所示,第2照明光照射到观察对象时,第2照明光中紫色光v及蓝色光b深入至深层血管vs2所分布的深层。因此,根据紫色光v及蓝色光b的反射光所获得的蓝色光图像bp包括深层血管vs2的图像。另外,在此,蓝色光b的光强度比紫色光v的光强度强,因此采用蓝色光图像bp。并且,第2照明光中绿色光g和红色光r深入至分布于比表层血管vs1及深层血管vs2(位于比表层血管vs1更深的位置的血管)更深的位置的背景粘膜bm。因此,根据绿色光g和红色光r的反射光所获得的绿色及红色光图像grp包括背景粘膜bm的图像。根据以上内容,第2图像为将蓝色光图像bp和绿色及红色光图像grp组合而成的图像,因此显示背景粘膜bm及深层血管vs2的图像。
86.图像保存部56进行图像保存处理。图像保存处理是保存图像的处理,例如为保存从由图像信号获取部51获取的多个第1图像和多个第2图像中分别选择的第1图像和第2图像的处理。
87.保存控制部61控制图像保存处理。具体而言,保存控制部61在进行用于开始图像保存处理的处理开始操作时,从在包括进行处理开始操作的时刻而设定的对象期间获取的多个第1图像和多个第2图像中分别选择满足预先设定的选择条件的第1图像和第2图像,以保存于保存部63。
88.图像保存处理中的处理开始操作例如为基于静止图像记录命令部12f的静止图像记录命令(冻结命令或释放命令)操作。通过操作静止图像记录命令部12f来输入静止图像记录命令时,经由中央控制部59进行了处理开始操作,并开始图像保存处理等。图像保存部56通过保存控制部61的控制,将通过预先设定的选择条件选择的第1图像及第2图像等内窥镜图像保存于保存部63或存储器(未图示)。存储器是经由lan(local area network,局域网)等与处理器装置16连接的外部存储装置,例如,是将pacs(picture archiving and communication system,图像存储与通讯系统)等内窥镜图像进行归档的系统的文件服务器、nas(network attached storage,网络附加存储)等。
89.根据处理开始操作,除了开始图像保存处理以外,还进行基于保存控制部61的对象期间的设定及基于光源用处理器21的照明光的切换的控制等。对象期间是确定选择保存在保存部63中的第1图像和第2图像的对象的期间,从在该期间获取的多个第1图像和多个第2图像中分别选择保存于保存部63中的第1图像和第2图像。对象期间包括进行处理开始操作的时刻。并且,优选对象期间是图像用处理器获取预先设定的各多个第1图像和第2图像的期间。如上所述,切换照明光的控制是光源用处理器21在对象期间将发光中的第1照明光及第2照明光中的一个切换为另一个而发光的控制。
90.如图13所示,图像保存处理具体如下进行。例如,在第1特殊观察模式中,作为照明光使第1照明光连续发光(第1期间)。摄像传感器45通过对每帧进行电荷的积蓄和读出来获取图像信号。所获取的图像信号暂存于暂存部62。另外,暂存部62始终保存预先设定的规定个数的图像。因此,在图13所示的第一帧中的第1图像a0、下一帧中的第1图像a1、再下一帧中的第1图像a2、又一下一帧的第1图像a3以此类推被连续而分别被暂存,直到切换照明光的种类。
91.在此,通过静止图像记录命令部12f的操作在时刻tf进行静止图像记录命令时,静止图像记录命令成为图像保存处理的处理开始操作,进行对象期间ta的设定,照明光的切换,要保存的图像的选择,所选择的图像的保存。在对象期间ta的设定中,包括进行作为处理开始操作的静止图像记录命令的时刻,在图13的情况下,由于将对象期间预先设定为分别获取3个第1图像和第2图像的期间,因此对象期间设定为分别各获取3个第1图像及第2图像的期间、即各3帧的期间。对象期间ta是能够获取第1图像和第2图像两者的期间,因此在对象期间ta没有发光中的照明光的切换的情况下,光源用处理器21将发光中的第1照明光及第2照明光中的一个切换为另一个。在图13的情况下,在第1特殊观察模式中发出第1照明光,因此通过静止图像记录命令,光源用处理器21从第1照明光切换为第2照明光。
92.连续发出所切换的第2照明光(第2期间)。与获取第1图像相同地摄像传感器45通过对每帧进行电荷的积蓄和读出来获取图像信号。第一帧中的第2图像b0、下一帧中的第2图像b1、再下一帧中的第2图像b2暂存于暂存部62。图像信号获取部51按每帧获取图像,因此接下来第2图像b3、第2图像b4以此类推分别被连续暂存,直到切换照明光的种类。暂存的对象期间ta设定为获取各3个第1图像和第2图像的期间,因此对象期间ta的开始是以进行静止图像记录命令的时刻为起点追溯到过去3帧量的时刻t1,对象期间ta的终点是以进行静止图像记录命令的时刻为起点提前3帧量的时刻t2。具体而言,对象期间ta是夹着进行静止图像记录命令的时刻tf从时刻t1到时刻t2的期间。在该时点,保存控制部61将第1图像a2、a3及a4、以及第2图像b0、b1及b2设为在对象期间ta获取的图像,从其中选择用于保存于
保存部63的图像。
93.保存控制部61从由暂存部62保存的多个第1图像及多个第2图像中在对象期间ta获取的多个第1图像及多个第2图像中分别选择满足预先设定的选择条件的第1图像和第2图像。预先设定的选择条件设为所保存的第1图像和第2图像成为适合比较或叠加的状态的条件。例如,保存控制部61优选将选择条件设为所获取的多个第1图像或多个第2图像中分别模糊最少的第1图像或第2图像。
94.作为选择模糊最少的第1图像或第2图像的方法,能够使用公知的方法。例如,能够计算各图像中的模糊量,选择模糊量最少的图像。作为模糊量的计算方法,主要有基于图像分析的方法和基于摄像传感器45的方法等,作为基于图像分析的方法,有如下方法:对图像中的多个区域的每一个估计点扩散函数(psf(point spread function)),并且从该点扩散函数高精度地估计模糊的方向及大小(参考日本专利5499050号公报)。并且,有从图像信号检测移动矢量并基于移动矢量检测图像模糊量的方法(参考日本特开平3-16470号公报)。并且,还优选使用计算对比度并将对比度大的图像作为模糊量少的图像而检测的方法。
95.在图13中,选择第1图像a2、a3、及a4中被确定为模糊最少的第1图像a2和第2图像b0、b1、及b2中被确定为模糊最少的b2。由保存控制部61选择的第1图像a2和第2图像b2由保存控制部61保存于保存部63。另外,图像保存部56将从信号处理部55发送的图像信号除了用于图像保存处理以外还将其发送到显示控制部57以用于显示。
96.另外,由图像信号获取部51获取的图像或由保存部63保存的图像具有作为图像的附带信息获取的时间,但是优选保存部63在赋予与对应的照明光相关的信息的基础上保存第1图像及第2图像。在该情况下,优选具有照明光的种类等信息或观察模式的信息也作为附带信息。并且,也可以在图像的文件名上附加与照明光或观察模式相关联的标签等识别信息或标识符等。基于以上,能够容易地识别所获取或保存的图像是在哪个时刻获取的第1图像或第2图像。
97.显示控制部57控制在作为显示机构的显示器18上的图像的显示。例如,进行如下控制:在正常观察模式中,将正常图像作为动态图像连续显示在显示器18上,在特殊观察模式中,将第1图像或第2图像作为动态图像连续显示在显示器18上,在多观察模式中,自动切换第1图像或第2图像中的任一个而作为动态图像显示在显示器18上。并且,当进行静止图像记录命令时,进行将所保存的第1图像及第2图像等内窥镜图像作为静止图像显示在显示器18的控制。
98.显示控制部57在显示第1图像及第2图像等静止图像的情况下,通过除了在显示器18上并排显示以外,还调整各个图像的透射率并重叠显示,或者在显示器18的相同区域以1秒以下的短时间进行切换以动画那样显示等、根据目的而设定的显示方法来进行显示。
99.视频信号生成部58将从显示控制部57输出的正常图像、特殊图像或保存于保存部63的第1图像和第2图像转换成能够在显示器18中以全色显示的视频信号。转换完的视频信号输入到显示器18。由此,在显示器18上显示正常图像、特殊图像或最终分数等。
100.如上所述,内窥镜系统10通过设为如上所述的结构,在通过所期望的照明光进行观察的同时,操作1次静止图像记录命令部12f,从而进行向不同种类的照明光的转换,各个种类的照明光中的图像的选择和所选择的多个图像的保存。由于选择是通过预先设定的选择条件进行,因此例如能够由多种照明光引起的图像之间的时间差小、或模糊少等根据目
的选择适当的图像后进行保存。因此,根据内窥镜系统10,能够通过1次命令以适合比较或叠加的状态保存与多个照明光对应的多种静止图像。
101.另外,对象期间可以是图像用处理器获取满足选择条件的第1图像和第2图像的期间。因此,例如,将直到能够获取满足选择条件的第1图像和第2图像的时点为止设为对象期间。具体而言,如图14所示,当照明光等与图13相同时,保存控制部61在选择第1图像a2之后,在第2图像b0不满足选择条件但第2图像b1满足选择条件的情况下,选择第2图像b1并结束对象期间ta。因此,保存控制部61保存第1图像a2和第2图像b1。保存控制部61在第1图像或第2图像被保存于暂存部62后立即对各个图像检查是否为满足预先设定的选择条件的图像,并选择满足选择条件的图像。并且,此时,从时刻t1到时刻t2的对象期间ta比图13的情况短1帧量。通过上述结构,能够缩短保存第1图像和第2图像的期间,因此优选。
102.另外,光源用处理器21可以以预先设定的周期交替地切换第1照明光和第2照明光而发光。并且,优选为所获得的第1图像及第2图像的基础色调相同的照明光的组合。基础色调是在内窥镜图像中成为基础的色调,例如是在内窥镜图像中所占的面积的比例多的色调。即使是不同的内窥镜图像,在基础色调相同的情况下,比较时整体的色调不会有很大差异,容易识别除基础色调以外的部分的差异。可以举出以下情况,即,在如上所述的基于第1照明光的第1图像和基于第2照明光的第2图像中,在dsp52中利用特定的增益系数进行白平衡处理,将基础色调设为自然色彩的观察图像。将该基础色调设为第1基础色调。
103.假设获得第1基础色调时的特定的增益系数使用过去获取的内窥镜图像进行校正。例如,在第1图像中,使用第2图像,在随后的第1图像中校正增益系数。并且,在第2图像中,使用第1图像,校正随后的第2图像中的增益系数。
104.如上所述,第1照明光设为强调表层血管的照明光,第2照明光设为强调中层血管的照明光,以规定周期自动切换。由此,由于是基础色调相同的第1基础色调,因此在内窥镜图像中所占的面积的比例大的部分的色调不变,仅强调显示不同的部分。因此,由于相同的观察对象的表层血管和中层血管被强调并像动画那样显示,因此能够以容易观察的状态获得深度方向的血管信息。
105.并且,作为照明光,也优选设为代替上述第1照明光设为第3照明光,代替第2照明光设为第4照明光的第3照明光与第4照明光的组合。光源用处理器21以发出紫色光v、蓝色光b、绿色光g及红色光r之间的光强度比成为vs3∶bs3∶gs3∶rs3的第3照明光的方式,控制各led20a~20d。光强度比vs3∶bs3∶gs3∶rs3对应于第3照明光的光量条件。第3照明光优选强调表层血管。因此,第3照明光优选使紫色光v的光强度大于蓝色光b的光强度。例如,如图15所示,将紫色光v的光强度vs3与蓝色光b的光强度bs3的比率设定为使紫色光v的光强度vs3高。
106.并且,光源用处理器21以发出紫色光v、蓝色光b、绿色光g及红色光r之间的光强度比成为vs4∶bs4∶gs4∶rs4的第4照明光的方式,控制各led20a~20d。光强度比vs4∶bs4∶gs4∶rs4对应于第4照明光的光量条件。第4照明光优选强调表层血管,并且在远景中也是明亮的图像。因此,第4照明光优选使蓝色光b、绿色光g及红色光r的光强度稍微大于第3照明光中的各个光强度。例如,如图16所示,蓝色光b的光强度bs4、绿色光g的光强度gs4及红色光r的光强度rs4的比率设定为略高于第3照明光中的各个光强度。
107.通过第3照明光和第4照明光获得的内窥镜图像是基础色调相同的第2基础色调。
作为第2基础色调的内窥镜图像成为强调粘膜表层的结构、例如微细血管等的具有红色成分少的色调的内窥镜图像。第3照明光设为强调表层血管的照明光,第4照明光设为强调表层血管并且在远景中也成为明亮的图像的照明光,并以规定周期自动切换。由此,由于基础色调是第2基础色调,因此在内窥镜图像中所占的面积的比例大的部分的色调不变,仅强调显示不同的部分。因此,由于相同的观察对象的表层血管的细微差异被强调并像动画那样显示,因此能够以容易观察的状态获得表层血管的微细的血管信息。
108.另外,光源用处理器21可以进行如下控制:在从切换第1照明光和第2照明光的发光的时刻开始的预先设定的期间之后进行处理开始操作时,将在处理开始操作前发光的第1照明光及第2照明光中的一个切换为另一个而发光。将从切换第1照明光和第2照明光的发光的时刻开始的预先设定的期间设为切换后期间。第1照明光与第2照明光的发光的切换无论是用户切换了观察模式,还是在多观察模式中光源用处理器21周期性地切换照明光,不管理由,在从切换照明光的发光的时刻开始的切换后期间经过后进行处理开始操作的情况下,光源用处理器21通过处理开始操作切换照明光而发光。因此,此时的对象期间ta以处理开始操作为基准来设定即可。
109.具体而言,如图17所示,在时刻t3从第2照明光切换为第1照明光时,在时刻t3开始切换后期间tb,例如,切换后期间tb为3帧,因此在时刻t1切换后期间tb结束。静止图像记录命令的时刻tf是切换后期间tb结束的时刻t1经过后,因此光源用处理器21进行将在图像保存处理的处理开始操作前发光的第1照明光通过静止图像记录命令切换为第2照明光而发光的控制。切换后期间tb例如优选设为与和在对象期间ta针对1种照明光获取的内窥镜图像的个数对应的帧数相同或比其长的期间。在图17的情况下,在对象期间ta针对1种照明光获取的内窥镜图像的个数为3个,因此切换后期间tb设为3帧。通过上述结构,由于在对应期间ta进行照明光的切换,能够使作为选择对象的第1图像及第2图像的时间差更小。
110.并且,光源用处理器21可以进行如下控制,在经过了对象期间ta时,将在处理开始操作后发光的第1照明光及第2照明光中的一个切换为另一个而发光。具体而言,如图18所示,由于处理开始操作是静止图像记录命令,光源用处理器21进行如下控制:在经过了作为对象期间ta的终点的时刻t2时,将在静止图像记录命令后发光的第2照明光切换为在静止图像记录命令前发光的第1照明光而发光。另外,对象期间ta可以是图像用处理器分别获取预先设定的多个第1图像和第2图像的期间,也可以是获取满足选择条件的第1图像和第2图像的期间。
111.通过上述结构,例如,在第1特殊观察模式观察观察对象时,通过进行1次静止图像记录命令,能够自动地保存第1图像与第2图像之类的基于不同的照明光的图像,进而切换到第2照明光被限制在所需的期间。因此,用户能够在观察的模式下继续观察的同时,获得不同种类的静止图像。
112.并且,光源用处理器21可以进行如下控制:在经过了从处理开始操作的时刻开始的预先设定的期间时,将在处理开始操作前发光的第1照明光及第2照明光中的一个切换为另一个而发光。将从处理开始操作的时刻开始的预先设定的期间设为处理开始操作后期间。此时的对象期间ta以处理开始操作为基准来设定即可。
113.具体而言,如图19所示,由于图像保存处理的处理开始操作为静止图像记录命令,因此光源用处理器21进行如下控制:在从静止图像记录命令的时刻tf经过了处理开始操作
后期间tc的时刻t2,将在静止图像记录命令后发光的第2照明光切换为在静止图像记录命令前发光的第1照明光而发光。处理开始操作后期间tc例如优选设为与和在对象期间ta针对1种照明光获取的内窥镜图像的个数对应的帧数相同或比其长的期间。在图19的情况下,在对象期间ta针对1种照明光获取的内窥镜图像的个数为3个,因此开始操作后期间tc优选在3帧以上延长。因此,在图19中,将处理开始操作后期间tc设为3帧。
114.通过上述结构,例如,在第1特殊观察模式观察观察对象时,通过进行1次静止图像记录命令,能够自动地保存第1图像与第2图像之类的基于不同的照明光的图像,进而向第2照明光的切换限制在所设定的必要的期间。因此,用户可以连续所观察的模式下的观察的同时,能够以时间差较小的状态更可靠地获得与作为选择对象的第1图像及第2图像的不同种类的静止图像。
115.并且,光源用处理器21可以进行如下控制:在从切换第1照明光和第2照明光的发光的时刻开始的预先设定的期间进行处理开始操作时,使在处理开始操作前发光的第1照明光及第2照明光中的一个在处理开始操作后也发光。即,在切换后期间tb的期间内进行处理开始操作的情况下,不伴随处理开始操作切换照明光,而是延长在处理开始操作时发光的照明光。此时的对象期间ta可以包括切换前的照明光的发光期间。
116.具体而言,如图20所示,光源用处理器21例如通过多观察模式中的周期性照明光的切换在时刻t4进行照明光的切换时,若在时刻tf进行静止图像记录命令,则切换后期间tb被设定为从时刻t4到时刻t2的3帧的期间,因此在切换后期间tb的期间内进行静止图像记录命令。此时,光源用处理器21即使有静止图像记录命令也不进行照明光的切换,对象期间ta以在时刻t4的照明光的切换为基准设定。因此,保存控制部61将对象期间ta设定为包括照明光的切换前的期间在内的从时刻t1到时刻t2。切换后期间tb与上述相同,设为3帧。
117.通过上述结构,能够使作为选择对象的第1图像及第2图像的时间差更可靠地变小,并且能够抑制由于频繁切换照明光而在显示器18上显示的图像的闪烁,并抑制光过敏问题的产生。
118.此外,光源用处理器21可以进行如下控制:在从切换第1照明光和第2照明光的发光的时刻开始的预先设定的期间,即经过了切换后期间tb后将在处理开始操作时发光的第1照明光及第2照明光中的一个切换为另一个而发光。此时的对象期间ta可以以切换第1照明光与第2照明光的发光的时刻为基准来设定。
119.具体而言,如图21所示,图像保存处理的处理开始操作是静止图像记录命令,因此光源用处理器21进行如下控制:在经过了从切换第1照明光与第2照明光的发光的时刻t4开始的切换后期间tb的时刻t2,将在静止图像记录命令时发光的第2照明光切换为在切换第1照明光与第2照明光的发光之前发光的第1照明光而发光。切换后期间tb例如优选设为与和在对象期间ta针对1种照明光获取的内窥镜图像的个数对应的帧数相同或比其长的期间。在图21的情况下,在对象期间ta针对1种照明光获取的内窥镜图像的个数为3个,因此切换后期间tb优选在3帧以上延长。因此,在图21的情况下,将切换后期间tb设为3帧。
120.并且,光源用处理器21可以进行如下控制:在从处理开始操作的时刻开始的预先设定的期间、即经过了处理开始操作后期间tc之后,将在处理开始操作时发光的第1照明光及第2照明光中的一个切换为另一个而发光。此时的对象期间ta可以以切换第1照明光与第2照明光的发光的时刻为基准来设定。
121.具体而言,如图22所示,图像保存处理的处理开始操作是静止图像记录命令,因此光源用处理器21进行如下控制:在经过了从静止图像记录命令的时刻tf开始的处理开始操作后期间tc的时刻t5,将在静止图像记录命令时发光的第2照明光切换为在切换第1照明光与第2照明光的发光之前发光的第1照明光而发光。处理开始操作后期间tc例如优选设为与和在对象期间ta针对1种照明光获取的内窥镜图像的个数对应的帧数相同或比其长的期间。在图22的情况下,在对象期间ta针对1种照明光获取的内窥镜图像的个数为3个,因此处理开始操作后期间tc优选在3帧以上延长。因此,在图22的情况下,将处理开始操作后期间tc设为3帧。
122.通过上述结构,例如,在多观察模式下观察观察对象时,即使在光源用处理器21不管静止图像记录命令而自动地切换照明光的情况下,也能够抑制由于频繁地切换照明光而在显示器18上显示的图像的闪烁,并且能够抑制光过敏的问题的产生。此外,通过进行1次静止图像记录命令,能够在时间差小的状态下更可靠地获得与作为选择对象的第1图像及第2图像的不同的种类的静止图像。因此,用户例如可以继续所观察的多观察模式下的观察的同时,能够以适当的状态更可靠地获得与作为选择对象的第1图像及第2图像不同种类的静止图像。
123.另外,将预先设定的选择条件设为在从所获取的多个第1图像或多个第2图像中选择的第1图像和第2图像中位置偏移最少的第1图像及第2图像。由于所选择的第1图像与第2图像的位置偏移少,能够以适合比较或叠加的状态保存第1图像和第2图像。
124.作为选择位置偏移最少的第1图像和第2图像的方法,能够使用公知的方法。例如,在基于图像分析的方法中,可以举出分割第1图像和第2图像,并且比较在各个区域中信号特性相似的第1图像的g图像信号和第2图像的g图像信号的累积量而求出的方法等。
125.另外,也可以将预先设定的选择条件设为在从所获取的多个第1图像或多个第2图像中选择的第1图像和第2图像中亮度差最小的第1图像及第2图像。由于所选择的第1图像与第2图像的亮度差小,能够以适合比较或叠加的状态保存第1图像和第2图像。
126.作为选择亮度差最小的第1图像和第2图像的方法,能够使用公知的方法。例如,按每个图像计算亮度y,从在对象期间ta获取的多个第1图像或多个第2图像中分别选择亮度y的差最小的组合。亮度y的计算方法能够使用公知的方法,根据目的而设定。例如,从各图像的图像信号计算时,也可以通过亮度y=α
×
r+β
×
g+γ
×
b来计算。在此,“r”表示各图像的r图像信号的像素值,“g”表示g图像信号的像素值,“b”表示b图像信号的像素值。并且,“α、β、γ”表示规定系数。
127.并且,优选保存控制部61将选择条件设为在从所获取的多个第1图像或多个第2图像中选择的第1图像和第2图像中获取时刻的差最小的第1图像及第2图像。所选择的第1图像与第2图像的获取时刻的差越小,例如,越不易产生第1图像或第2图像的模糊、第1图像与第2图像的位置偏移、第1图像与第2图像的亮度差等,因此能够以适合比较或叠加的状态保存第1图像和第2图像。
128.上述例示的预先设定的选择条件可以单独使用,也可以组合多个而使用。当多个组合而使用的情况下,能够根据组合多个选择条件而计算的第1图像与第2图像的一致度来选择。
129.一致度例如能够设为选择的第1图像及第2图像中的模糊量与移动量(位置偏移
量)之和。具体而言,首先,在对象期间ta获取的多个第1图像中,选择模糊量最少的第1图像。在该基础上,在对象期间ta获取的多个第2图像中,选择模糊量最少的第2图像。然后,在选择的第2图像中,选择与选择的第1图像的移动量成为最小的第2图像并保存。在这种情况下,移动量越小,一致度越高。
130.如图23所示,选择对象为第1图像a2、a3及a4、第2图像b0、b1及b2的情况下,第1图像a2、a3及a4中计算模糊量,选择模糊量最少的第1图像a2,第2图像b0、b1及b2中计算模糊量,选择模糊量最少的第2图像b0及b2。然后,对于第2图像b0及b2,计算从第1图像a2的移动量。在计算相对于第1图像a2的移动量,在第2图像b0中为3、在第2图像b2中为2的情况下,保存第1图像a2及第2图像b2。
131.并且,一致度例如可以分别对所有在对象期间ta获得的多个第1图像及多个第2图像计算如上述的移动量来确定。然后,选择并保存计算的值最小的情况的第1图像与第2图像的一对。计算的值越小,一致度越高。
132.如图24所示,表71中,选择对象为第1图像a2、a3及a4、第2图像b0、b1及b2的情况下,分别在第1图像a2、a3及a4以及第2图像b0、b1及b2中计算模糊量。
133.各图像的模糊量为括弧内的数值。然后,分别对第2图像b0、b1及b2,计算从第1图像a2、a3及a4的移动量。表71中,“模糊量、移动量”的栏中分别记载了第1图像与第2图像的模糊量的小计及第1图像与第2图像的移动量。将相加模糊量及移动量的值分别记载于“合计”的栏。如此,分别在3个第1图像及第2图像中,计算9个合计的值。
134.表71中,各图像的模糊量如括弧内所示,第1图像a2的模糊量为3,第1图像a3的模糊量为2,第1图像a4的模糊量为4。并且,第2图像b0的模糊量为2,第2图像b1的模糊量为3,第2图像b2的模糊量为1。在表71的第1图像a2及第2图像b0相交的部分中,记载有第1图像a2与第2图像b0的模糊量的小计为5,由第1图像a2及第2图像b0计算的移动量(位置偏移)为3。并且,在该部分中的合计欄中,记载有上述模糊量的合计与移动量的合计为8。第1图像a2、a3及a4与第2图像b0、b1及b2的全部中,在上述要领中,计算模糊量的小计与移动量的合计,示于表71的规定的栏。这些9个值中,保存最小时的第1图像a2及第2图像b2。在表71的情况下,保存合计为6的第1图像a2及第2图像b2。
135.一致度为保存判定值,可以根据模糊量及移动量来计算,也可以使用作为其他选择条件的亮度差或时间差等进行数值化来计算。
136.另外,显示控制部57可以在对象期间ta进行将保存部63所保存的第1图像和/或第2图像显示于显示器的控制。在对象期间ta中,切换成第1照明光并且由第2照明光发光,摄像传感器45按每一帧获取图像信号。但是,也可以至少在对象期间ta中,在显示器18中连续显示所保存的第1图像和/或第2图像。
137.如图25所示,第1特殊观察模式中,光源用处理器21根据静止图像记录命令的时刻tf将第1照明光切换成第2照明光,经过作为对象期间ta的终点的时刻t2时,切换成在静止图像记录命令前发光的第1照明光来发光。显示控制部57在第1特殊观察模式中,将第1图像显示于显示器18。而且,根据静止图像记录命令的时刻tf,照明光从第1照明光切换成第2照明光,但是在对象期间ta继续显示第1图像。
138.对象期间ta中显示的第1图像作为根据静止图像记录命令保存的第1图像a2。另外,对象期间ta中显示的第1图像可以延长显示根据静止图像记录命令的时刻tf将照明光
从第1照明光切换成第2照明光之前的第1图像即第1图像a4,也可以显示其他第1图像。并且,除了保存的第1图像a2以外,将保存的第2图像b2例如可以并列显示。
139.如图26所示,在多观察模式中,光源用处理器21根据静止图像记录命令的时刻tf1将第1照明光切换成第2照明光,经过作为对象期间ta1的终点的时刻t2时,切换成在静止图像记录命令前发光的第1照明光来发光。而且,根据光源用处理器21的周期性照明光的切换,在时刻t6中,从第1照明光切换成第2照明光。根据静止图像记录命令的时刻tf2将第2照明光切换成第1照明光,经过作为对象期间ta2的终点的时刻t8时,切换成在静止图像记录命令前发光的第2照明光来发光。
140.显示控制部57在多观察模式中,在照明光为第1照明光的期间,将第1图像显示于显示器18。而且,根据静止图像记录命令的时刻tf1,照明光从第1照明光切换成第2照明光,但是在对象期间ta1继续显示第1图像。对象期间ta1中显示的第1图像作为根据静止图像记录命令保存的第1图像a2。然后,在照明光为第2照明光的期间,将第2图像显示于显示器18。而且,根据静止图像记录命令的时刻tf2,照明光从第1照明光切换成第2照明光,但是在对象期间ta2继续显示第2图像。
141.对象期间ta2中显示的第2图像作为根据静止图像记录命令保存的第2图像b7。另外,对象期间tal中显示的第1图像可以延长显示根据静止图像记录命令的时刻tf1将照明光从第1照明光切换成第2照明光之前的第1图像即第1图像a4,也可以显示其他第1图像。并且,除了保存的第1图像a2以外,将保存的第2图像b2例如可以并列显示。并且,对象期间ta2中显示的第2图像可以延长显示根据静止图像记录命令的时刻tf2将照明光从第2照明光切换成第1照明光之前的第2图像即第2图像b7,也可以显示其他第2图像。并且,除了保存的第2图像b7以外,将保存的第1图像a6例如可以并列显示。
142.如以上,显示控制部57在照明光为第1照明光的第1期间中进行将第1图像连续显示于显示器18的控制,照明光为第2照明光的第2期间中将第2图像连续显示于显示器18,由此获取与观察中的模式不同的模式的图像信号并且能够在显示器18中显示没有闪烁等而适合于比较的状态的所选择的内窥镜图像。因此,用户能够更稳定地进行观察等。
143.另外,在对象期间获取的多个第1图像及多个第2图像中,根据选择条件,有可能不存在满足条件的图像。此时,例如,优选具备进行通知给用户的警告的警告部。警告部进行将不存在满足选择条件的图像的情况通知给用户的警告。关于满足选择条件的图像1个都没有的情况下是否进行警告、如何进行警告或即使是不满足选择条件图像也是否进行保存等的警告的详细内容,进行预先设定。
144.并且,此时,优选具备进行重试的重试部。重试部在不存在满足选择条件的图像的情况下再次进行图像保存处理。关于在满足选择条件的图像1个都没有的情况下是否进行重试、重试的次数及进行重试的时间的设定以及是否催促用户进行处理开始操作等的详细内容,进行预先设定。
145.通过上述结构,在具备警告部的情况下,能够柔软地设定选择条件,即使在没有满足选择条件的图像的情况下,用户能够立即知道该情况,因此优选。并且,在具备重试部的情况下,用户能够简便地适于保存的状态下获取图像,因此优选。
146.接着,沿着图27所示的流程图对静止图像保存的一连串的流程进行说明。在第1特殊观察模式的情况下,在第1特殊观察模式下进行观察(步骤st110)。在观察中,图像信号获
a/d变频器,51-图像信号获取部,52-dsp,53-降噪部,54-存储器,55-信号处理部,56-图像保存部,57-显示控制部,58-视频信号生成部,59-中央控制部,61-保存控制部,62-暂存部,63-保存部,71-表,81a、81b-滑杆,82a、82b-滑块,bm-背景粘膜,bp-蓝色光图像,vs1-表层血管,vs2-深层血管,vp-紫色光图像,grp-绿色及红色光图像,t1~t5-时刻,tf、tf1、tf2-进行静止图像记录命令的时刻,ta、ta1、ta2-对象期间,tb-切换后期间,tc-处理开始操作后期间,a0~a11-第1图像,b0~b9-第2图像,st110~st180-步骤。
技术特征:1.一种内窥镜系统,其具备:多个半导体光源,发出相互不同的波段的光;光源用处理器,进行使多个所述半导体光源的光强度比的组合相互不同的多种照明光分别发光的控制;及图像用处理器,所述图像用处理器按每一帧获取对由所述多种照明光所包含的第1照明光和第2照明光照明的观察对象进行拍摄而获得的第1图像和第2图像,进行保存从所获取的多个所述第1图像和多个所述第2图像中分别选择的所述第1图像和所述第2图像的图像保存处理,在进行用于开始所述图像保存处理的处理开始操作时,为了进行所述图像保存处理,从在包括进行所述处理开始操作的时刻的对象期间获取的多个所述第1图像和多个所述第2图像中分别选择满足预先设定的选择条件的所述第1图像和所述第2图像,所述光源用处理器在所述对象期间将发光中的所述第1照明光及所述第2照明光中的一个切换为另一个而发光。2.根据权利要求1所述的内窥镜系统,其中,所述对象期间是所述图像用处理器分别获取预先设定的多个所述第1图像和所述第2图像的期间。3.根据权利要求1所述的内窥镜系统,其中,所述对象期间是所述图像用处理器获取满足所述选择条件的所述第1图像和所述第2图像的期间。4.根据权利要求1至3中任一项所述的内窥镜系统,其中,所述光源用处理器以预先设定的周期交替地切换所述第1照明光和所述第2照明光而发光。5.根据权利要求1至4中任一项所述的内窥镜系统,其中,所述光源用处理器在从切换所述第1照明光和所述第2照明光的发光的时刻开始的预先设定的期间之后进行所述处理开始操作时,通过所述处理开始操作,将在所述处理开始操作前发光的所述第1照明光及所述第2照明光中的一个切换为另一个而发光。6.根据权利要求5所述的内窥镜系统,其中,所述光源用处理器在经过了所述对象期间时,将在所述处理开始操作后发光的所述第1照明光及所述第2照明光中的一个切换为另一个而发光。7.根据权利要求5所述的内窥镜系统,其中,所述光源用处理器在经过了从所述处理开始操作的时刻开始的预先设定的期间时,将在所述处理开始操作后发光的所述第1照明光及所述第2照明光中的一个切换为另一个而发光。8.根据权利要求1至4中任一项所述的内窥镜系统,其中,所述光源用处理器在从切换所述第1照明光和所述第2照明光的发光的时刻开始的预先设定的期间进行所述处理开始操作时,使在所述处理开始操作前发光的所述第1照明光及所述第2照明光中的一个在所述处理开始操作后也发光。
9.根据权利要求8所述的内窥镜系统,其中,所述光源用处理器在经过了从切换所述第1照明光和所述第2照明光的发光的时刻开始的预先设定的期间时,将在所述处理开始操作时发光的所述第1照明光及所述第2照明光中的一个切换为另一个而发光。10.根据权利要求8所述的内窥镜系统,其中,所述光源用处理器在经过了从所述处理开始操作的时刻开始的预先设定的期间时,将在所述处理开始操作时发光的所述第1照明光及所述第2照明光中的一个切换为另一个而发光。11.根据权利要求1至10中任一项所述的内窥镜系统,其中,所述图像用处理器将所述选择条件设为所获取的多个所述第1图像或多个所述第2图像中的每一个中模糊最少的所述第1图像或所述第2图像。12.根据权利要求1至11中任一项所述的内窥镜系统,其中,所述图像用处理器将所述选择条件设为在从所获取的多个所述第1图像或多个所述第2图像中分别选择的所述第1图像和所述第2图像中位置偏移最少的所述第1图像及所述第2图像。13.根据权利要求1至12中任一项所述的内窥镜系统,其中,所述图像用处理器将所述选择条件设为在从所获取的多个所述第1图像或多个所述第2图像中分别选择的所述第1图像和所述第2图像中亮度的差最小的所述第1图像及所述第2图像。14.根据权利要求1至13中任一项所述的内窥镜系统,其中,所述图像用处理器将所述选择条件设为在从所获取的多个所述第1图像或多个所述第2图像中选择的所述第1图像和所述第2图像中获取时刻的差最小的所述第1图像及所述第2图像。15.根据权利要求1至14中任一项所述的内窥镜系统,其具备:显示器,显示所述第1图像和/或所述第2图像,所述图像用处理器在所述对象期间在所述显示器上显示所保存的所述第1图像和/或所述第2图像。16.一种内窥镜系统的工作方法,所述内窥镜系统具备:多个半导体光源,发出相互不同的波段的光;光源用处理器,进行使多个所述半导体光源的光强度比的组合相互不同的多种照明光分别发光的控制;及图像用处理器,所述图像用处理器按每一帧获取对由所述多种照明光所包含的第1照明光和第2照明光照明的观察对象进行拍摄而获得的第1图像和第2图像,进行保存从所获取的多个所述第1图像和多个所述第2图像中分别选择的所述第1图像和所述第2图像的图像保存处理,在进行用于开始所述图像保存处理的处理开始操作时,为了进行所述图像保存处理,从在包括进行所述处理开始操作的时刻的对象期间获取的多个所述第1图像和多个所述第
2图像中分别选择满足预先设定的选择条件的所述第1图像和所述第2图像,所述光源用处理器在所述对象期间将发光中的所述第1照明光及所述第2照明光中的一个切换为另一个而发光。
技术总结本发明提供一种内窥镜系统及内窥镜系统的工作方法,所述内窥镜系统中,通过1次的命令以适合比较或叠加的状态保存多种静止图像。在进行用于开始图像保存处理的处理开始操作时,图像用处理器从在包括进行处理开始操作的时刻的对象期间获取的多个第1图像和多个第2图像中分别选择满足预先设定的选择条件的第1图像和第2图像。光源用处理器(21)进行在对象期间中将发光中的第1照明光及第2照明光中的一个切换为另一个而发光的控制。个切换为另一个而发光的控制。个切换为另一个而发光的控制。
技术研发人员:岩根弘亮
受保护的技术使用者:富士胶片株式会社
技术研发日:2021.02.17
技术公布日:2022/11/1