信息处理装置、测量系统、图像处理方法和存储介质

技术领域

本公开涉及信息处理装置、测量系统、图像处理方法和非暂态存储介质。

背景技术

例如，日本专利申请公开(JP-A)第2020-85535号描述了一种信息处理装置，该装置能够针对每个预定分类对通过由流动法的图像拍摄获得的物质成分图像进行分类。这个信息处理装置包括分类部，该分类部从包括多种类型的物质成分并且通过拍摄流过流动池的标本液体而获得的多个图像中剪切出被识别为一物质成分的物质成分图像，并且将剪切出的物质成分图像分类为每个预定分类的检测成分；以及控制部，该控制部在被分类部分类为检测成分的物质成分图像被重分类为不同分类的情况下，在检测成分的分类中所包括的物质成分图像的第一图像列表被显示在显示器上的状态中，接收对移动目的地的分类的选择，并且进一步执行控制，以在移动目的地的分类中所包括的物质成分图像的第一图像列表和第二图像列表被同时显示在显示器上的状态中，将从第一图像列表中选择的物质成分图像移动到第二图像列表。

日本专利第6713730号描述了一种检测流过流动池的测量样本中的颗粒的细胞检测装置。这个细胞检测装置包括流动池，用于流动包括颗粒的测量样本；颗粒检测单元，用于检测供应给该流动池的测量样本中的颗粒；颗粒选择单元，用于基于颗粒检测单元的检测结果选择满足检测条件的颗粒和其他颗粒；样本供应单元，用于向流动池供应包括由颗粒选择单元选择的满足检测条件的颗粒的成像样本；以及颗粒成像单元，用于在进行了供应给流动池的选择之后对成像样本中的颗粒进行成像。样本供应单元包括中间存储部，用于存储和浓缩包括由颗粒选择单元选择的满足检测条件的颗粒的成像样本；以及回流路径，用于将在中间存储部中浓缩的成像样本返回到流动池相对于颗粒检测单元的检测位置的上游侧，并且使得成像样本再次流入流动池中。

日本专利第6321279号描述了一种成像装置，该成像装置在将测量样本流入到流动池中的同时对测量样本进行成像。该成像装置包括生成探测光束的探测光束生成单元，在探测光束上执行色散傅里叶变换并且在时域中映射探测光束的光谱的色散傅里叶变换单元，对经色散傅里叶变换的探测光束进行空间映射并且照射藻类或细胞的空间映射单元，检测透射过藻类或细胞的透射光的光束检测单元，以及基于透射光的强度生成藻类或细胞的图像的图像生成单元。

在日本专利申请公开(JP-A)第2020-85535号、日本专利第6713730号和日本专利第6321270号中描述的相关技术中的技术涉及用于自动分析尿液中包括的物质成分的技术，并且对用于尿内物质成分分析的筛选是有效的。然而，当由于筛选而发现一些项目中的诸如阳性之类的问题时，有必要由实验室技术人员等使用显微镜执行复检(以下简称“显微镜检查”)。在这种显微镜检查中，例如，要求相对大量的工时，例如用于创建用于显微镜检查的载玻片(标本)。因此，存在这样一种情况，其中通过对包括物质成分的样本进行成像而获得的图像取代载玻片(标本)被设置为观察目标，但由于帧切割的图像被逐一检查，因此图像中的物质成分的可见性不佳。

发明内容

本公开是鉴于上述观点而做出的，并且提供了一种信息处理装置、测量系统、图像处理方法和非暂态存储介质，其能够改善通过对包括物质成分的样本进行成像而获得的图像中的物质成分的可见性。

根据本公开的一个方面的一种信息处理装置是耦合到成像单元的信息处理装置，该成像单元按时间序列连续地对包括物质成分并且流过流动池的样本进行成像，并且生成该样本的第一图像以及生成第二图像，该第二图像中的在时间序列上与第一图像连续的部分与第一图像的一部分重叠，该信息处理装置包括：获取部，被配置为获取由成像单元生成的第一图像和第二图像，以及图像输出部，被配置为输出通过组合第一图像和第二图像而获得的复合图像。

根据本公开，可以改善通过对包括物质成分的样本进行成像而获得的图像中的物质成分的可见性。

附图说明

图1是图示了根据一实施例的测量系统的配置的一部分的透视图。

图2是图示了根据该实施例的测量系统的配置的示例的示意图。

图3是图示了根据该实施例的信息处理装置的电气配置的示例的框图。

图4是图示了根据该实施例的信息处理装置的功能配置的示例的框图。

图5是图示了根据该实施例的测量结果屏幕的示例的前视图。

图6是图示了根据该实施例的物质成分图像列表屏幕的示例的前视图。

图7是图示了根据该实施例通过组合多个图像而获得的复合图像的示例的示意图。

图8是图示了根据该实施例的图像处理程序的处理流程的示例的流程图。

具体实施方式

以下，将参考附图详细描述用于实现本公开的技术的模式的示例。具有相同操作、动作和功能的组件和处理在各幅附图中用相同的标号来表示，并且可以酌情省略冗余的描述。每幅附图是仅在能够充分理解本公开的技术的程度上示意性图示的。因此，本公开的技术不仅限于图示的示例。在本实施例中，可以省略对与本公开或已知的配置不直接相关的配置的描述。

图1是图示了根据本实施例的测量系统70的配置的一部分的透视图。

如图1中所示，根据本实施例的测量系统70包括流动池40、外壳72、相机74和光源76。图1中图示的“上”箭头指示出垂直方向上测量系统70的上侧。

例如，根据本实施例的流动池40被应用到尿内物质成分检查(尿沉积物检查)，其中通过将作为标本液体的示例的尿液标本与鞘液一起引入来由相机74对尿液标本中的物质成分进行成像，并且根据成像的图像中的物质成分的形状等执行各种类型的分析。

根据本实施例的“样本”包括鞘液和标本液体，但是可以只使用标本液体而不使用鞘液。相机74是成像单元的示例。尿液标本包括多种类型的物质成分。物质成分的类型的示例例如包括红细胞、白细胞、上皮细胞、圆柱体和细菌。在本实施例中，虽然将描述使用尿液标本作为标本液体的示例来执行尿内物质成分检查的情况，但它也可用于对血液、细胞、体液等等的物质成分检查。

测量系统70包括外壳72，其中布置有流动池40。在外壳72中形成插入流动池40的凹槽72A，并且包括外壳72的凹槽72A的位置的一部分由透明构件(例如，玻璃等)形成。在外壳72中，相机74被设在面向流动池40的位置。在外壳72的上侧，光源76被设在面向相机74的位置，流动池40插在光源76和相机74之间。相机74被布置在可对流过流动池40的样本进行成像的位置。

测量系统70包括第一供应装置78，其将标本液体供应到流动池40中的标本流道(未图示)的标本摄入口42。第一供应装置78包括：具有耦合到标本摄入口42的一个端部的供应管道80，设置在供应管道80的中间的泵82，以及耦合到供应管道80的另一个端部并且存储标本液体的标本存储部84。

测量系统70包括第二供应装置86，其将鞘液供应到流动池40中的鞘液流道(未图示)的鞘液摄入口44。第二供应装置86包括：具有耦合到鞘液摄入口44的一个端部的供应管道88，设置在供应管道88的中间的泵90，以及耦合到供应管道88的另一个端部并且存储鞘液的罐92。第一供应装置78和第二供应装置86是样本供应单元的示例。

流动池40包括在标本摄入口42和鞘液摄入口44之间的排放口46。排放管的一个端部(未图示)耦合到排放口46，并且排放管的另一个端部耦合到处置罐(未图示)。流动池40包括合并部分(未图示)，该合并部分合并了从标本摄入口42引入的标本和从鞘液摄入口44引入的鞘液，并且合并的液体(样本)在流道中流动。相机74对合并液体中的物质成分进行成像。

图2是图示了根据本实施例的测量系统70的配置的示例的示意图。

如图2中所示，根据本实施例的测量系统70包括信息处理装置10。图2中图示的“上”箭头指示出垂直方向上测量系统70的上侧，类似地于图1。

信息处理装置10具有作为控制装置的功能，分别控制相机74、与光源76电耦合的光源激活单元77、泵82和泵90的操作。信息处理装置10向光源激活单元77给出脉冲信号，以使得光源76以预定的间隔发光。信息处理装置10驱动泵82以控制标本液体的流速，并且驱动泵90以控制鞘液的流速。虽然未图示，但可以提供多个相机74和将光引导到每个相机74的光学系统。调整每个光学系统，以使得每个相机74被聚焦在流动池40中的不同位置(深度)。换言之，多个相机74在水平面上的相同位置同时对聚焦在不同深度位置的多个图像进行成像。被同时成像的成像图像被存储在稍后彼此关联地描述的图3中图示的存储部15中。本文描述的深度方向是垂直于标本液体流动方向的方向，并且是指图2中的垂直方向。每个焦点与靠近相机74一侧的流动池40的壁面之间的距离是不同的。

图3是图示了根据本实施例的信息处理装置10的电气配置的示例的框图。

如图3中所示的，根据本实施例的信息处理装置10包括中央处理单元(centralprocessing unit，CPU)11、只读存储器(read only memory，ROM)12、随机存取存储器(random access memory，RAM)13、输入/输出接口(input/output interface，I/O)14、存储部15、显示器16、操作部17、通信部18、以及连接部19。CPU 11可以例如是诸如图形处理单元(graphics processing unit，GPU)之类的处理器。

例如，诸如个人计算机(personal computer，PC)之类的通用计算机装置被应用到根据本实施例的信息处理装置10。诸如智能电话或平板终端之类的便携式计算机装置可被应用到信息处理装置10。信息处理装置10可被划分成多个单元。例如，可以包括控制诸如相机74、光源76、泵82或泵90之类的测量系统的单元，以及处理和分析由相机74成像的图像的单元。信息处理装置10可以从外部耦合到测量系统70。

CPU 11、ROM 12、RAM 13和I/O 14构成了控制装置。控制装置例如具有控制诸如相机74、光源76、泵82或泵90之类的测量系统的功能，以及处理和分析相机74所拍摄的图像的功能。CPU 11、ROM 12、RAM 13和I/O 14的每个单元经由总线耦合。

包括存储部15、显示器16、操作部17、通信部18和连接部19的每个功能单元耦合到I/O 14。这些功能单元可以经由I/O 14与CPU 11通信。

控制装置可被配置为控制信息处理装置10的一部分操作的子控制部，或者可被配置为控制信息处理装置10的全部操作的主控制部的一部分。对于控制装置的一些或所有块，例如，使用集成电路，比如大规模集成电路(large scale integration，LSI)或集成电路(integrated circuit，IC)芯片组。可以为每个块使用个体电路，或者可以使用集成一些或所有块的电路。块可以是与彼此成整体地提供的，或者一些块可以是单独提供的。可以单独提供每个块的一部分。控制装置的集成不限于LSI，而是可以使用专用电路或通用处理器。

作为存储部15，例如，使用硬盘驱动器(hard disk drive，HDD)、固态驱动器(solid state drive，SSD)、闪存存储器，等等。存储部15存储用于根据本实施例执行测量系统控制和图像处理的图像处理程序15A。图像处理程序15A可被存储在ROM 12中。存储器可以从外部附接到存储部15，或者可以稍后添加。

图像处理程序15A可以例如被预先安装在信息处理装置10中。图像处理程序15A可以通过存储在非易失性非暂态存储介质中或经由网络线路分发并且视情况在信息处理装置10中安装或升级来实现。作为非易失性非暂态存储介质的示例，假设有致密盘只读存储器(compact disc read only memory，CD-ROM)、磁光盘、硬盘驱动器(HDD)、数字通用盘只读存储器(digital versatile disc read only memory，DVD-ROM)、闪存存储器、存储器卡，等等。

作为显示器16，例如，使用液晶显示器(liquid crystal display，LCD)、有机电致发光(organic electro luminescence，EL)显示器，等等。显示器16可以集成有触摸面板。操作部17包括诸如键盘或鼠标之类的操作输入装置。显示器16和操作部17接收来自信息处理装置10的用户的各种类型的指令。显示器16显示各种类型的信息，例如响应于从用户接收的指令而执行的处理的结果或者关于处理的通知。

通信部18耦合到诸如互联网、局域网(local area network，LAN)或广域网(widearea network，WAN)之类的网络线路，并且可以经由网络线路与外部装置通信。

例如，相机74、光源76、泵82、泵90等等耦合到连接部19。诸如相机74、光源76、泵82或泵90之类的测量系统由上述控制装置控制。连接部19还充当输入端口，用于输入从相机74输出的图像。

顺便说一下，如上所述，在逐一检查帧切割的图像的情况下，图像中的某个物质成分的可见性不好，从而会出现忽略该物质成分的情况。

另一方面，根据本实施例的相机74按时间序列连续地对流过流动池40的样本进行成像，并且生成该样本的第一图像以及生成第二图像，该第二图像中的在时间序列上与第一图像连续的部分与第一图像的一部分重叠。信息处理装置10耦合到相机74，获取相机74生成的第一图像和第二图像，并且输出通过组合第一图像和第二图像而获得的复合图像。复合图像是在流动池40的流动方向上展开的全景图像。第一图像和第二图像在时间序列上是连续的，并且彼此部分重叠。通过输出通过组合第一图像和第二图像而获得的复合图像，与逐一检查帧切割的图像的情况相比，可以改善图像中的物质成分的可见性。具体地，在帧切割图像中，由于图像之间的接合处不是连续的，因此位于帧(也称为照片的片段或帧)之间的物质成分不能被成像，并且忽略该物质成分的情况可能会发生。另一方面，根据复合图像，可以没有间断地执行成像，并且改善了图像在流动方向上的可见性，从而抑制了忽略物质成分的发生。多个目标图像不限于第一图像和第二图像，同样适用于三个或更多个图像。

具体而言，根据本实施例的信息处理装置10的CPU 11通过在RAM 13中写入和执行存储在存储部15中的图像处理程序15A，来作为图4中图示的每个单元工作。

图4是图示了根据本实施例的信息处理装置10的功能配置的示例的框图。

如图4中所示，根据本实施例的信息处理装置10的CPU 11充当控制部11A、获取部11B、分类部11C、显示控制部11D、图像处理部11E和图像输出部11F。

控制部11A控制相机74、泵82和泵90的操作。泵82和泵90的每一者是用于向流动池40供应样本并且使得供应给流动池40的样本流向相机74的泵，并且样本供应速度由泵82和泵90的每一者控制。控制部11A在第一成像模式和第二成像模式之间切换，第一成像模式用于生成不与第一图像的一部分重叠的第二图像，第二成像模式用于生成与第一图像的一部分重叠的第二图像。第二图像与第一图像的一部分重叠是指在第一图像中要拍摄的样本的一部分与在第二图像中要拍摄的样本的一部分重叠。模式根据预定的操作(例如，按钮操作等)由诸如实验室技术人员之类的用户进行切换。第一成像模式是在第一图像和第二图像之间不存在重叠的正常成像模式，第二成像模式是用于创建在第一图像和第二图像之间存在重叠的复合图像的成像模式。以下，第一成像模式也称为“正常模式”，第二成像模式也称为“复合模式”。

首先，将具体描述第一成像模式的情况。

存储部15存储用于图像分类处理的训练模型15B。训练模型15B是用于由分类部11C进行图像分类处理的模型。

获取部11B从通过相机74对流过流动池40的样本进行成像而获得的多个图像(作为示例，300张和1000张)中裁剪出标本液体中所包括的多种类型的物质成分作为物质成分图像，并且获取多个裁剪出的物质成分图像。

分类部11C将获取部11B获取的多个物质成分图像分类为针对每个预定分类(例如，物质成分的类型、大小、形状、核的存在与否，等等)的检测成分。按照每个预定分类由分类部11C分类的物质成分图像群组通过按照每个标本进行划分被暂时存储在存储部15中。作为一种对物质成分图像进行分类的方法，例如，应用了各种类型的已知技术，例如使用机器学习的方法或者使用模式匹配的方法。根据本实施例的物质成分图像群组通过使用例如训练模型15B被分类。训练模型15B是通过对学习数据执行机器学习而生成的模型，该学习数据是通过将每个预定分类的检测成分与过去获得的每个物质成分图像相关联而获得的。也就是说，学习数据是有监督的数据。训练模型15B接收物质成分图像作为输入，并且输出每个预定分类的检测成分。作为执行机器学习的学习模型，例如，卷积神经网络(CNN：convolutional neural network)等等被使用。作为机器学习的一种方法，例如，深度学习等等使用。当作为个体物质成分图像来描述时，物质成分图像群组也被称为物质成分图像。

当对物质成分图像进行分类时，分类部11C基于所使用的图像分类方法(例如，机器学习、模式匹配，等等)来计算匹配度。本文描述的匹配度指的是分类结果的图像的分类准确度，并且随着与正确图像或预定的特征点的匹配率越高，对于每个预定分类，图像被指派的值就越高。当正确的图像或特征点完全匹配时，匹配度为100％。也就是说，匹配度相对较低的物质成分图像未被适当分类可能性较高。匹配度可以被表达为匹配率。

显示控制部11D执行控制，以使得显示器16将被分类部11C分类为检测成分的物质成分图像作为个体物质成分图像来显示。因此，诸如实验室技术人员之类的用户可以直观地检查个体物质成分图像。

这里，将参考图5和图6描述根据本实施例的图像分类处理中的具体屏幕示例。

图5是图示了根据本实施例的测量结果屏幕50的示例的前视图。测量结果屏幕50由显示控制部11D显示在显示器16上。

如图5中所示，根据本实施例的测量结果屏幕50显示每个项目的测量结果的列表。作为测量结果，示出了物质成分名称、成分的含量或数目、作为含量指标的定性显示，等等。测量结果屏幕50包括物质成分名称50A和物质成分按钮50B。

在图5中图示的项目之中，例如，作为主项目，RBC表示红细胞，WBC表示白细胞，NSE表示非鳞状细胞，SQEC表示鳞状细胞，NHC表示其他圆柱体，并且BACT表示细菌。CRYS表示晶体，YST表示酵母，HYST表示玻璃圆柱体，MUCS表示粘液线，SPRM表示精子，并且WBCC表示白细胞团。UNCL表示未分类。

这里，显示控制部11D执行控制，以显示从测量结果屏幕50上的分类项目之中选择的分类的图像列表(参见例如后文描述的图6)，并且对于其物质成分图像已被确认的分类指派标记，该标记指示已对该分类完成确认。在图5中所示的测量结果屏幕50上，对于分类项目之中图像列表已得到确认的项目指派标记50C以指示已完成确认。当执行重分类(分类改变)时，显示反映结果的测量结果。

当在图5中所示的测量结果屏幕50上通过点击操作等选择物质成分名称50A或物质成分按钮50B时，作为一个示例，所选分类项目的个体物质成分图像作为图6中所示的物质成分图像列表屏幕51被显示在显示器16上。

图6是图示了根据本实施例的物质成分图像列表屏幕51的示例的前视图。

如图6中所示，根据本实施例的物质成分图像列表屏幕51显示被选择为其图像想要被确认的物质成分的物质成分图像列表51A。在显示器16上显示物质成分图像列表屏幕51。

图6中所示的物质成分图像列表屏幕51包括检测成分的第一项目按钮群组52和移动目的地的第二项目按钮群组53。为每种类型的检测成分提供检测成分的第一项目按钮群组52。类似地，为移动目的地的每个分类项目提供移动目的地的第二项目按钮群组53。作为一个示例，如上所述，“RBC”表示红细胞，“WBC”表示白细胞，“SQEC”表示鳞状细胞，并且“UNCL”表示未分类。在图6中所示的示例中，由于检测成分的第一项目按钮群组52的“SQEC”处于被选择状态，因此在物质成分图像列表屏幕51上显示鳞状细胞的图像的列表。

图6中所示的物质成分图像列表屏幕51以可操作的方式显示多个操作按钮B1至B6。操作按钮B1是用于放大和显示物质成分图像并且根据图像的放大显示比例(长度)的按钮。在图6所示的示例中，比例被显示为10μm/像素。操作按钮B2是用于切换和显示具有不同焦点位置的物质成分图像的按钮。在图6所示的示例中，可以对应于上层、中间层和下层的三层切换流动池40在深度方向上的焦点位置。操作按钮B3是用于将检测成分的物质成分图像移动到移动目的地的按钮。操作按钮B4是用于将图像分类的编辑工作返回到先前编辑工作的按钮。操作按钮B5是用于显示物质成分图像为“样本”的按钮。操作按钮B6是用于显示窗口的按钮，该窗口用于设置物质成分图像的放大比率和设置物质成分图像的亮度、对比度比率，等等。

由于可以通过操作图6中所示的多个操作按钮B1至B6来改变物质成分图像的显示模式，因此易于确定物质成分。每个操作按钮可以被显示在作为触摸面板的显示器16上，或者可以作为操作部17来提供。

当在图6中所示的物质成分图像列表屏幕51上通过点击操作等选择移动目的地的第二项目按钮群组53中的任何项目按钮时，重分类工作屏幕(未图示)被显示。

接下来，将具体描述第二成像模式的情况。

当诸如实验室技术人员之类的用户参考图6中所示的物质成分图像列表屏幕51，并且在物质成分图像中识别出任何异常时，用户执行预定的操作以切换到第二成像模式。

在第二成像模式中，可以使用类似于第一成像模式中的标本，但是希望流动浓缩标本，该浓缩标本包括通过使标本离心而浓缩的物质成分。

控制部11A控制相机74的成像间隔以及泵82和90的样本供应速度中的至少一者，以使得在第一图像中成像的样本和在第二图像中成像的样本部分重叠。具体而言，使第二成像模式中的样本供应速度慢于第一成像模式中的样本供应速度。或者，第二成像模式的成像间隔可以短于第一成像模式的成像间隔。或者，可以使第二成像模式中的样本供应速度慢于第一成像模式中的样本供应速度，并且可以使第二成像模式中的成像间隔短于第一成像模式中的成像间隔。

第二成像模式是这样的模式：其中，与第一成像模式相比，在缓慢挤压标本的同时对其中的成像区域与第一图像重叠的第二图像进行成像，并且与第一成像模式类似地使用鞘液。在这种情况下，例如，使标本液体和鞘液的样本供应速度(液体馈送速度＝流速)比第一成像模式中的速度慢。可以只使用标本液体而不使用鞘液。在这种情况下，可以使标本液体的样本供应速度(液体馈送速度＝流速)比第一成像模式中的速度慢。

例如，用于图像之间的重叠成像的样本供应速度(V)的上限是如下的移动速度(V

在控制部11A的控制下，相机74按时间序列连续地对流过流动池40的样本进行成像，并且生成样本的第一图像以及生成第二图像，该第二图像中的在时间序列上与第一图像连续的部分与第一图像的一部分重叠。

获取部11B获取由相机74生成的第一图像和第二图像。

图像处理部11E对获取部11B获取的第一图像和第二图像进行复合以创建一个复合图像。具体而言，图像处理部11E基于第二成像模式中的成像间隔和样本供应速度来指定第一图像和第二图像的组合位置。也就是说，通过参考成像间隔和样本供应速度，可以指定前面和后面图像的移位程度，并且指定组合位置。因此，可以执行更适当的图像复合。

图像输出部11F输出由图像处理部11E组合第一图像和第二图像而获得的复合图像。输出目的地例如是显示器16或存储部15。

图7是图示了根据本实施例通过组合多个图像P1至P4而获得的复合图像Ps的示例的示意图。

图7中所示的多个图像P1至P4中的每一者是静止图像，包括物质成分和相互重叠的部分。也就是说，图像P1的右端部与图像P2的左端部重叠，图像P2的右端部与图像P3的左端部重叠，并且图像P3的右端部与图像P4的左端部重叠。

虽然例如创建了将这些图像P1至P4接合起来的一个大型复合图像Ps，但是采用已知的方法作为图像复合处理的方法。例如，采用了被称为“图像复合编辑器(https://nj-clucker.com/microsoft-image-composite-editor/)”的软件。通过由创建的复合图像Ps实现作为一个视野进行观察，可以像显微镜观察一样在滑动的同时在信息处理装置10的显示器16上进行确认。

这里，可以进一步设置间歇流动模式，这是间歇性地反复执行第二成像模式的模式。在间歇流动模式中，提供了在低速供应样本的同时执行成像的时段和停止供应样本的时段。在停止时段期间，通过在深度方向(垂直方向)上对相机74进行扫描，执行高速拍摄，并且也在深度方向上执行成像，从而获得了与显微镜检查中一样的深度信息。因此，可以获得基于最优焦点位置的图像。

接下来，将参考图8描述根据本实施例的信息处理装置10的动作。

图8是图示了根据本实施例的图像处理程序15A的处理流程的示例的流程图。

图像处理程序15A进行的测量系统控制和图像处理是由信息处理装置10的CPU 11将存储在ROM 12或存储部15中的图像处理程序15A写入到RAM 13中来执行的。

在图8的步骤S101中，CPU 11设置第一成像模式(正常模式)，在第一成像模式中执行成像以使得样本的一部分在图像之间不重叠，并且控制泵82和90以使得样本以第一速度(＝第一样本供应速度)流向流动池40。

在步骤S102中，CPU 11根据在步骤S101中设置的第一成像模式，从通过对以第一速度流过流动池40的样本进行成像所获得的多个图像中，切割出样本中包括的多种类型的物质成分作为物质成分图像，并且获取多个切割出的物质成分图像。然后，将多个获取的物质成分图像分类为每个预定分类(例如，物质成分的类型、大小、形状、是否存在核，等等)的检测成分，并且将分类后的物质成分图像显示在图6中作为示例所示的上述物质成分图像列表屏幕51上。异常的存在或不存在由诸如实验室技术人员之类的用户就显示在物质成分图像列表屏幕51上的物质成分图像进行确认。

在步骤S103中，CPU 11确定是否切换到在图像之间有一部分样本重叠的第二成像模式。在确定切换到第二成像模式的情况下(在肯定确定的情况下)，处理前进到步骤S104，而在确定不切换到第二成像模式的情况下(在否定确定的情况下)，图像处理程序15A的一系列处理结束。具体而言，当诸如实验室技术人员之类的用户参考图6中所示的物质成分图像列表屏幕51，并且在物质成分图像中识别出任何异常时，用户执行预定的操作以切换到第二成像模式。

在步骤S104中，CPU 11设置第二成像模式(复合模式)，在第二成像模式中样本被成像以使得样本的一部分在图像之间重叠，并且控制泵82和泵90以使得样本以第二速度(＝第二样本供应速度)流向流动池40。在第二成像模式中，可以使用类似于第一成像模式中的标本，但是希望流动浓缩标本，该浓缩标本包括通过使标本离心而浓缩的物质成分。这里，作为一个示例，将第二成像模式中的第二样本供应速度控制为低于第一成像模式中的第一样本供应速度。第二成像模式中的成像间隔可以短于第一成像模式中的成像间隔。或者，可以使第二成像模式中的第二样本供应速度慢于第一成像模式中的第一样本供应速度，并且可以使第二成像模式中的成像间隔短于第一成像模式中的成像间隔。

在步骤S105中，CPU 11控制相机74来以时间序列连续地对流过流动池40的样本进行成像，并且获取多个图像，其中样本的一部分重叠。作为一个示例，获取了图7中所示的多个图像P1至P4。这里，对于可靠的构图而言，前面图像和后面图像之间的重叠比率希望为例如50％或更多，并且对于快速成像而言，希望为例如80％或更多。

在步骤S106中，CPU 11从步骤S105中获取的多个图像创建复合图像。作为一个示例，创建图7中所示的复合图像Ps。

在步骤S107中，CPU 11将在步骤S106中创建的复合图像输出到例如显示器16或存储部15，并且结束由图像处理程序15A进行的该系列处理。

如上所述，根据本实施例，可以改善通过对包括物质成分的样本进行成像而获得的图像中的物质成分的可见性。因此，可以抑制对图像中的物质成分的忽略的发生。

根据本实施例，自动对其中样本的一部分重叠的多个图像成像，并且从多个成像的图像创建一个全景复合图像，就像用于显微镜检查的图像一样。因此，当执行显微镜检查时，可以省略需要花费时间和精力的载玻片的创建。

根据该全景复合图像，只要通过横向单轴滑动即可容易地执行观察。

当用于创建复合图像的样本没有被浓缩时，可以消除浓缩所要求的时间和精力。

由于复合图像可被自动存储为图像信息，因此也可以通过在诸如多个实验室技术人员之类的用户之间共享复合图像来进行非基于主观性的确定。

在上述实施例中，处理器是指广义上的处理器，包括通用处理器(例如，CPU：中央处理单元，等等)或专用处理器(例如，GPU：图形处理单元，ASIC：专用集成电路，FPGA：现场可编程门阵列，可编程逻辑器件，等等)。

上述实施例中的处理器的操作不仅可以由一个处理器执行，而且可以通过存在于物理分离的位置的多个处理器的合作来执行。处理器的每个操作的顺序不限于上述实施例中描述的顺序，而可以酌情被改变。

上面已作为示例描述了根据实施例的信息处理装置。实施例可以采取用于使得计算机执行信息处理装置中包括的每个单元的功能的程序的形式。实施例可以采取存储程序的非暂态计算机可读存储介质的形式。

此外，在上述实施例中描述的信息处理装置的配置是一个示例，并且可以在不脱离要点的范围内根据情形进行改变。物质成分图像的显示不限于上述实施例，而是可以例如左右并排显示。也可以酌情改变每个按钮的显示位置。

上述实施例中描述的程序的处理流程也是一个示例，而在不脱离要点的范围内，可以删除不必要的步骤，添加新的步骤，或者改变处理顺序。

在上述实施例中，描述了利用计算机通过执行程序由软件配置来实现根据实施例的处理的情况，但本发明不限于此。实施例可通过例如硬件配置或者硬件配置与软件配置的组合来实现。

关于上述实施例，进一步公开了以下内容。

根据第一方面的一种信息处理装置是耦合到成像单元的信息处理装置，该成像单元按时间序列连续地对包括物质成分并且流过流动池的样本进行成像，并且生成该样本的第一图像以及生成第二图像，该第二图像中的在时间序列上与第一图像连续的部分与第一图像的一部分重叠，该装置包括：获取部，被配置为获取由成像单元生成的第一图像和第二图像，以及图像输出部，被配置为输出通过组合第一图像和第二图像而获得的复合图像。

根据第二方面的信息处理装置，在根据第一方面的信息处理装置中，还包括控制部，该控制部被配置为控制成像单元的成像间隔，以使得在第一图像中成像的样本和在第二图像中成像的样本的一部分重叠。

根据第三方面的信息处理装置，在根据第一方面的信息处理装置中，还耦合到样本供应单元，该样本供应单元将样本供应到流动池并且使得供应到流动池的样本流向成像单元，并且该装置还包括控制部，该控制部被配置为控制成像单元的成像间隔或样本供应单元的样本供应速度中的至少一者，以使得在第一图像中成像的样本和在第二图像中成像的样本的一部分重叠。

在根据第四方面的信息处理装置中，在根据第三方面的信息处理装置中，控制部被配置为在第一成像模式和第二成像模式之间切换，该第一成像模式用于生成不与第一图像的一部分重叠的第二图像，该第二成像模式用于生成与第一图像的一部分重叠的第二图像。

在根据第五方面的信息处理装置中，在根据第四方面的信息处理装置中，第二成像模式中的样本供应速度慢于第一成像模式中的样本供应速度。

在根据第六方面的信息处理装置中，在根据第四方面的信息处理装置中，第二成像模式中的成像间隔短于第一成像模式中的成像间隔。

在根据第七方面的信息处理装置中，在根据第四方面的信息处理装置中，第二成像模式中的样本供应速度慢于第一成像模式中的样本供应速度，并且第二成像模式中的成像间隔短于第一成像模式中的成像间隔。

根据第八方面的信息处理装置，在根据第四方面至第七方面的任何一者的信息处理装置中，还包括图像处理部，该图像处理部被配置为组合第一图像和第二图像以创建复合图像，并且该图像处理部被配置为基于第二成像模式中的成像间隔和样本供应速度来指定第一图像和第二图像的组合位置。

在根据第九方面的信息处理装置中，在根据第一方面至第八方面的任何一者的信息处理装置中，复合图像是在流动池的流动方向上展开的全景图像。

根据第十方面的一种测量系统包括：流动池，包括物质成分的样本流过该流动池；成像单元，被配置为按时间序列连续地对流过流动池的样本进行成像，并且生成样本的第一图像以及生成第二图像，该第二图像中的在时间序列上与第一图像连续的部分与第一图像的一部分重叠；以及根据第一方面至第九方面中的任何一方面的信息处理装置，该信息处理装置耦合到该成像单元。

根据第十一方面的一种图像处理方法是由耦合到成像单元的信息处理装置进行的图像处理方法，该成像单元按时间序列连续地对包括物质成分并且流过流动池的样本进行成像，并且生成该样本的第一图像以及生成第二图像，该第二图像中的在时间序列上与第一图像连续的部分与第一图像的一部分重叠，该方法包括：获取由成像单元生成的第一图像和第二图像；并且输出通过组合第一图像和第二图像而获得的复合图像。

根据第十二方面的一种图像处理程序是耦合到成像单元的信息处理装置的图像处理程序，该成像单元被配置为按时间序列连续地对包括物质成分并且流过流动池的样本进行成像，并且生成该样本的第一图像以及生成第二图像，该第二图像中的在时间序列上与第一图像连续的部分与第一图像的一部分重叠，所述程序用于使得计算机执行处理，该处理包括：获取由成像单元生成的第一图像和第二图像；并且输出通过组合第一图像和第二图像而获得的复合图像。