CN105122037A - 图像处理***、图像处理设备、程序、存储介质和图像处理方法 - Google Patents

图像处理***、图像处理设备、程序、存储介质和图像处理方法 Download PDF

Info

Publication number
CN105122037A
CN105122037A CN201380075661.4A CN201380075661A CN105122037A CN 105122037 A CN105122037 A CN 105122037A CN 201380075661 A CN201380075661 A CN 201380075661A CN 105122037 A CN105122037 A CN 105122037A
Authority
CN
China
Prior art keywords
image
cell
candidate region
target cell
focal length
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201380075661.4A
Other languages
English (en)
Inventor
织田英人
尾崎良太
加藤典司
熊泽幸夫
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Fujifilm Business Innovation Corp
Original Assignee
Fuji Xerox Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Fuji Xerox Co Ltd filed Critical Fuji Xerox Co Ltd
Publication of CN105122037A publication Critical patent/CN105122037A/zh
Pending legal-status Critical Current

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/0002—Inspection of images, e.g. flaw detection
    • G06T7/0012—Biomedical image inspection
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00—Arrangements for image or video recognition or understanding
    • G06V10/70—Arrangements for image or video recognition or understanding using pattern recognition or machine learning
    • G06V10/77—Processing image or video features in feature spaces; using data integration or data reduction, e.g. principal component analysis [PCA] or independent component analysis [ICA] or self-organising maps [SOM]; Blind source separation
    • G06V10/778—Active pattern-learning, e.g. online learning of image or video features
    • G06V10/7784—Active pattern-learning, e.g. online learning of image or video features based on feedback from supervisors
    • G06V10/7788—Active pattern-learning, e.g. online learning of image or video features based on feedback from supervisors the supervisor being a human, e.g. interactive learning with a human teacher
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/60—Type of objects
    • G06V20/69—Microscopic objects, e.g. biological cells or cellular parts
    • G06V20/698—Matching; Classification
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2200/00—Indexing scheme for image data processing or generation, in general
    • G06T2200/24—Indexing scheme for image data processing or generation, in general involving graphical user interfaces [GUIs]
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/30—Subject of image; Context of image processing
    • G06T2207/30004—Biomedical image processing
    • G06T2207/30024—Cell structures in vitro; Tissue sections in vitro

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Databases & Information Systems (AREA)
  • Health & Medical Sciences (AREA)
  • General Physics & Mathematics (AREA)
  • General Health & Medical Sciences (AREA)
  • Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Medical Informatics (AREA)
  • Computing Systems (AREA)
  • Software Systems (AREA)
  • Evolutionary Computation (AREA)
  • Artificial Intelligence (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Biomedical Technology (AREA)
  • Molecular Biology (AREA)
  • Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
  • Radiology & Medical Imaging (AREA)
  • Quality & Reliability (AREA)
  • Investigating Or Analysing Materials By Optical Means (AREA)
  • Image Processing (AREA)

Abstract

本发明的目的是使得用户能够仅通过参考拍摄图像中的细胞候选区域的图像来确定细胞候选区域内的对象是否是目标细胞。成像单元(12)以多个焦距拍摄包含目标细胞的样本。候选区域图像获取单元(22)在拍摄的每幅图像中获取作为可以示出目标细胞的候选区域的细胞候选区域的图像。用于显示视觉确认信息的单元(28)显示候选区域图像获取单元(22)获取的多幅图像。另外，用于显示视觉确认信息的单元(28)接收用户的与在细胞候选区域中是否示出目标细胞相关的确定的结果的输入。

Description

图像处理***、图像处理设备、程序、存储介质和图像处理方法
技术领域
本发明涉及图像处理***、图像处理设备、程序、存储介质和图像处理方法。
背景技术
在进行产前诊断的情况下，检测并使用其数量在从母体得到的血液中非常小的有核红细胞(NRBC，下文中称为目标细胞)，NRBC源自胎儿。由于存在于从母体得到的血液中的NRBC的数量非常小，因此通过视觉观察来检测NRBC是麻烦的。因而，如以下在PTL1中所述，提出了通过搜索满足诸如NRBC的颜色、形状、位置关系、面积比等的条件的细胞的目标图像来机械地检测NRBC的技术。
引用列表
专利文献
PTL1：第4346923号日本专利
发明内容
技术问题
本发明的目的是使得用户能够仅通过参考捕获图像中的细胞候选区域的图像来确定细胞候选区域内的对象是否是目标细胞。
针对问题的技术方案
为了解决上述问题，根据权利要求1的本发明是一种图像处理***，其包括：成像装置，其以多个焦距中的各个焦距捕获包括目标细胞的样本的图像；获取装置，其在作为所述成像装置捕获的图像的各个捕获图像中获取与看到所述目标细胞的区域的候选相对应的细胞候选区域的图像；显示装置，其显示由所述获取装置获取的、为多幅图像的图像；以及用于接收用户的与在所述细胞候选区域中是否看到所述目标细胞相关的确定结果的输入的装置。
另外，根据权利要求2所述的图像处理***是根据权利要求1所述的图像处理***，其中，所述显示装置按基于已用来捕获了各个捕获图像的焦距的排列顺序、以列表格式显示所述多幅图像。
另外，根据权利要求3所述的图像处理***是根据权利要求1所述的图像处理***，其中，所述显示装置按根据已用来捕获了各个捕获图像的焦距进行显示的顺序、轮流地逐一显示所述多幅图像。
另外，根据权利要求4所述的图像处理***是根据权利要求1至3中任一项所述的图像处理***，其中，所述显示装置将所述多幅图像连同包括存在于任一幅所述捕获图像中的细胞候选区域在内的周围区域的图像一起显示。
另外，根据权利要求5所述的图像处理***是根据权利要求1至4中任一项所述的图像处理***，其中，所述显示装置将所述多幅图像连同表示已用来捕获了各个捕获图像的焦距的信息一起显示。
另外，为了解决上述问题，根据权利要求6所述的本发明是一种图像处理设备，其包括：获取装置，其在包括目标细胞的样本的各个捕获图像中获取与看到所述目标细胞的区域的候选相对应的细胞候选区域的图像，所述捕获图像是成像装置以多个焦距中的各个焦距捕获的图像；显示装置，其显示由所述获取装置获取的、为多幅图像的图像；以及用于接收用户的与在所述细胞候选区域中是否看到所述目标细胞相关的确定结果的输入的装置。
另外，为了解决上述问题，根据权利要求7所述的本发明是一种程序，该程序用于使得计算机起到如下作用：获取装置，其在包括目标细胞的样本的各个捕获图像中获取与看到所述目标细胞的区域的候选相对应的细胞候选区域的图像，所述捕获图像是成像装置以多个焦距中的各个焦距捕获的图像；显示装置，其显示由所述获取装置获取的、为多幅图像的图像；以及用于接收用户的与在所述细胞候选区域中是否看到所述目标细胞相关的确定结果的输入的装置。
另外，为了解决上述问题，根据权利要求8所述的本发明是一种计算机可读存储介质，其存储用于使得计算机起到如下作用的程序：获取装置，其在包括目标细胞的样本的各个捕获图像中获取与看到所述目标细胞的区域的候选相对应的细胞候选区域的图像，所述捕获图像是成像装置以多个焦距中的各个焦距捕获的图像；显示装置，其显示由所述获取装置获取的、为多幅图像的图像；以及用于接收用户的与在所述细胞候选区域中是否看到所述目标细胞相关的确定结果的输入的装置。
另外，为了解决上述问题，根据权利要求9所述的本发明是一种图像处理方法，其包括：以多个焦距中的各个焦距捕获包括目标细胞的样本的图像；在所述捕获中所获得的各个捕获图像中获取与看到所述目标细胞的区域的候选相对应的细胞候选区域的图像；显示所获取的、为多幅图像的图像；以及接收用户的与在所述细胞候选区域中是否看到所述目标细胞相关的确定结果的输入。
发明的有益效果
根据权利要求1、6、7、8和9所述的本发明，使得用户能够仅通过参考捕获图像中的细胞候选区域的图像来做出关于细胞候选区域内的对象是否是目标细胞的确定。
根据权利要求2至5所述的本发明，与未使用本配置的情况相比，做出与目标候选区域内的对象是否是目标细胞相关的确定变得更容易。
附图说明
图1是示出根据本示例性实施例的图像处理***的***配置的图。
图2A是示出显示设备上显示的屏幕的图。
图2B是示出显示设备上显示的屏幕的图。
图3是示出在各个焦距处的各种类型的细胞的图像的示例的图。
图4A是用于说明显示模式(1)的图。
图4B是用于说明显示模式(2)的图。
图4C是用于说明显示模式(3)的图。
图5是示出将显示模式改变为另一种的方式的图。
图6是示出图像处理***实现的一组功能的功能框图。
图7是示出像素块、细胞核候选区域和细胞候选区域的示例的图。
图8是示出区域候选数据库中的存储器内容的示例的图。
图9是示出轮流地逐一显示各个候选区域图像的方式的图。
图10是示出图像处理设备执行的处理的示例的流程图。
图11是用于说明用于详细显示的显示模式(4)的图。
具体实施方式
以下，将根据附图说明本发明的示例性实施例的示例的详情。
图1示出了根据本示例性实施例的图像处理***1的***配置。如图1所示，图像处理***1包括光学显微镜2、图像处理设备4和显示设备6。图像处理设备4连接至光学显微镜2和显示设备6中的每一个以使得可以进行数据通信。
光学显微镜2经由诸如物镜等光学***、使用CCD摄像装置来捕获在样本台上布置的载片(mount)上的样本的图像。在本示例性实施例中，对从母体得到的血液进行May-Giemsa染色并将其应用于载片，然后，使用所得到的血液作为样本。结果，从母体得到的血液中的胎元的有核红细胞被染成蓝紫色。以下，有核红细胞被称为目标细胞。
图像处理设备4例如是个人计算机，并且获取作为由光学显微镜2捕获的图像的捕获图像。捕获图像包括从母体中得到的血液中所包括的各种类型的细胞的图像。利用May-Giemsa染色，目标细胞(有核红细胞)的细胞核染得比其他细胞的细胞核稍微深。
另外，图像处理设备4确定作为看到目标细胞的区域的候选的细胞候选区域，并且在显示设备6上显示所确定的各个细胞候选区域的图像的列表。
显示设备6显示图像处理设备4确定的各个细胞候选区域的图像的列表。图2A是示出显示设备6上显示的屏幕的示例的图。如图2A所示，所确定的细胞候选区域的图像的列表显示在该屏幕上。
用户参考在屏幕上显示的每幅图像以进行产前诊断。对于细胞候选区域的图像中的每一个，视觉观察结果输入按钮11设置在细胞候选区域的图像的右上部。用户针对对其已做出关于是否看到目标细胞的确定的细胞候选区域而点击视觉观察结果输入按钮11，并且输入确定结果。
顺便提及，可能存在无法仅仅通过参考图像来做出关于是否存在目标细胞的确定的情况。因而，在无法仅仅通过参考图像来做出确定的情况下，可想到，在焦距正改变时，执行使用光学显微镜2来观察在特定图像中看到的细胞的细胞核部分的大小的改变的操作。这是因为由于除了目标细胞外的细胞(淋巴细胞、大尺寸的白细胞、具有污垢的红细胞等)的细胞核是平坦的，因此其细胞核部分的图像具有几乎不变的尺寸，而与焦距无关；然而，由于作为目标细胞的有核红细胞的细胞核不是平坦的，因此其细胞核部分的图像的尺寸随着焦距而改变。图3中示出了在各个焦距下各种类型的细胞的图像的示例。在各个图像下方所描述的数值代表焦距。这里，焦距被表示为在向下方向上从自动对焦点到焦点的长度。标记“+”表示焦点位于自动对焦点下方，而标记“-”表示焦点位于自动对焦点上方。如图3所示，作为目标细胞的有核红细胞的图像的尺寸根据焦距而改变。
然而，执行使用光学显微镜2来观察细胞核部分的图像的尺寸的改变的操作是麻烦的。
鉴于该点，图像处理***1减少了该麻烦。即，在图像处理***1中，光学显微镜2配备有聚焦机构。另外，光学显微镜2以多个焦距中的各个焦距捕获样本的图像。
除此之外，按钮7a和7b设置在图2A所示的屏幕上以选择图像显示模式。然后，当选择了按钮7b时，如图2B所示，对于每个细胞候选区域，以列表格式显示在各个焦距下捕获的图像。在图像下方所描述的数值代表焦距。因而，通过参考捕获图像中的细胞候选区域的图像，用户可以做出关于细胞候选区域内的对象是否是目标细胞的确定，而不用执行上述操作。
另外，针对用户点击和选择的细胞候选区域，对图2A所示的屏幕执行详情显示。这里，按钮10a、10b和10c被设置用于选择详情显示的显示模式。然后，当选择了按钮10a时，在显示模式(1)下执行详情显示。图4A是用于说明显示模式(1)的图。在显示模式(1)下，如图4A所示，对于用户选择的细胞候选区域，在各个焦距下捕获的图像以列表格式显示。这里，在图像下方所描述的数值也代表焦距。因而，同样在选择了按钮10a的情况下，通过参考捕获图像中的细胞候选区域的图像，用户可以做出关于细胞候选区域内的对象是否是目标细胞的确定。
应注意，当选择了按钮10b时，以显示模式(2)执行详情显示。图4B是用于说明显示模式(2)的图。在显示模式(2)下，如图4B所示，显示了包括用户选择的细胞候选区域的周围区域的图像。另外，当选择了按钮10c时，以显示模式(3)执行详情显示。图4C是用于说明显示模式(3)的图。在显示模式(3)下，如图4C所示，对于用户选择的细胞候选区域，显示了以各个焦距捕获的图像和周围区域的图像。用户可以通过改变按钮10a、10b和10c之中所选择的按钮来改变显示模式(1)至(3)之中的用于详情显示的显示模式。图5示出了显示模式被改变为另一种的方式。
以下，将说明用于通过参考捕获图像中的细胞候选区域的图像来使得用户能够做出关于细胞候选区域内的对象是否是目标细胞的确定的技术。
图6是示出了图像处理***1实现的一组功能的功能框图。在图像处理***1中，实现了成像单元12、样本图像获取单元14、样本图像存储器16、细胞候选区域确定单元18、区域候选数据库20(下文中，称为区域候选DB20)、候选区域图像获取单元22、视觉检查用(visual-check-use)信息生成单元24、视觉检查用信息存储器26和视觉检查用信息显示部28。成像单元12由光学显微镜2实现。
另外，除了成像单元12外的功能由图像处理设备4来实现。除了成像单元12外的功能通过图像处理设备4读取并执行存储在计算机可读信息存储介质(例如，光盘、磁盘、磁带、磁光盘、闪速存储器等)中的程序来实现，图像处理设备4是配备有诸如微处理器的控制装置、诸如存储器的存储器装置、将数据发送至诸如接收用户操作的操作接收装置之类的外部装置以及从该外部装置接收数据的输入输出装置等的计算机。应注意，该程序还可以经由诸如互联网的数据通信网络提供至作为计算机的图像处理设备。
以下，将说明这些功能中的每一种。成像单元12以预定的多个焦距中的各个焦距捕获载片表面上的样本的图像，并且将多幅捕获图像(下文中，称为样本图像)输出至样本图像获取单元14。样本图像是图像数据，并且包括已用来捕获了样本图像的焦距作为报头信息。
样本图像获取单元14从成像单元12获取多幅样本图像中的每一个的数据，并且将每幅所获取的样本图像存储在样本图像存储器16中。焦距被表示为在向下方向上从自动对焦点到焦点的长度。
另外，细胞候选区域确定单元18确定上述的细胞候选区域。具体地，细胞候选区域确定单元18从样本图像存储器16读取上述多幅样本图像之一作为标准样本图像，并且从该标准样本图像中提取与目标细胞的细胞核相对应的细胞核候选区域。更具体地，细胞候选区域确定单元18从标准样本图像中提取显著像素的像素块，并且针对每个像素块来提取像素块的外接矩形区域作为细胞核候选区域。这里，显著像素是具有在预定范围内的像素值(RGB值)的像素。然后，细胞候选区域确定单元18针对每个细胞核候选区域而根据细胞核候选区域确定细胞候选区域。例如，对于每个细胞核候选区域，细胞候选区域确定单元18将包括细胞核候选区域的具有指定尺寸的矩形区域确定为细胞候选区域。图7中示出了像素块30、细胞核候选区域32和细胞候选区域34的示例。在图7中，在附图的左上部示出了包括细胞核候选区域32的细胞候选区域34。
另外，细胞候选区域确定单元18将所确定的细胞候选区域34登记到区域候选DB20中。即，细胞候选区域确定单元18将所确定的细胞候选区域34的记录存储在区域候选DB20中。该记录包括细胞候选区域34的区域ID。另外，该记录包括代表细胞候选区域34的坐标数据。另外，该记录包括表示在细胞候选区域34中看到目标细胞的概率的数值(下文中，被称为得分)。另外，该记录包括视觉观察标记值(这里为“0”)，其表示用户的关于在细胞候选区域34中是否看到目标细胞的确定结果。这里，细胞候选区域确定单元18从标准样本图像剪切出细胞候选区域34内的图像，并且获取通过将从标准样本图像切出的图像的图像特征值输入至已进行学习的鉴别器而获得的输出值，作为细胞候选区域34的得分。图像特征值的示例是例如HOG(方向梯度直方图)特征值。得分的值越大，在细胞候选区域34中看到目标细胞的概率就越高。
图8是示出了区域候选DB20中的存储器内容的图。如图8所示，区域候选DB20包括区域ID栏、候选数据栏、得分栏和视觉观察结果栏。细胞候选区域34的区域ID存储在区域ID栏内。代表细胞候选区域34的坐标数据与细胞候选区域34的区域ID相关联地存储在坐标数据栏内。坐标数据包括细胞候选区域34的代表点(例如，中心或左上顶点)的位置坐标以及细胞候选区域34的尺寸(宽度W和高度H)。坐标数据可以是以像素表达的数据或以毫米为单位表达的数据。
另外，将细胞候选区域34的得分与细胞候选区域34的区域ID相关联地存储在得分栏内。另外，将视觉观察标记的值与细胞候选区域34的区域ID相关联地存储在视觉观察结果栏内。值“2”表示用户已确定在细胞候选区域34中看到目标细胞。值“1”表示用户已确定不清楚在细胞候选区域34中是否看到目标细胞。值“0”表示用户尚未看到细胞候选区域34或者用户已确定在细胞候选区域34中未看到目标细胞。不仅视觉观察标记而且用户对细胞候选区域34的注释也可以存储在视觉观察结果栏中。
应注意，细胞候选区域确定单元18可以将所确定的所有细胞候选区域34登记到区域候选DB20中。替选地，细胞候选区域确定单元18可以仅将所确定的细胞候选区域34当中的、由鉴别器鉴别为看到目标细胞的细胞候选区域34的细胞候选区域登记到区域候选DB20中。这里，被鉴别为看到目标细胞的细胞候选区域34的细胞候选区域34例如是得分大于或等于阈值的细胞候选区域34或者得分为最大至第N大(例如，“N”为“200”)的细胞候选区域34。
以下，登记在区域候选DB20中的每个细胞候选区域34被称为细胞候选区域X，并且继续说明。
在成像单元12捕获的多幅样本图像中的每一幅中，候选区域图像获取单元22获取细胞候选区域X的图像作为候选区域图像。具体地，候选区域图像获取单元22从存储在样本图像存储器16中的各个样本图像剪切出细胞候选区域X的图像，来作为候选区域图像。候选区域图像是图像数据，并且包括已用来捕获了包括候选区域图像的样本图像的焦距作为报头信息。
视觉检查用信息生成单元24根据候选区域图像获取单元22获取的多幅候选区域图像中的每一幅来生成视觉检查用信息。具体地，视觉检查用信息生成单元24生成包括候选区域图像获取单元22获取的多个候选区域的信息作为视觉检查用信息，并且将所生成的视觉检查用信息与细胞候选区域X的区域ID相关联地存储在视觉检查用信息存储器26中。
视觉检查用信息显示部28在显示设备6上显示标准样本图像中的细胞候选区域X的图像。具体地，当选择了按钮7a时，视觉检查用信息显示部28在显示设备6上显示标准样本图像中的细胞候选区域X的图像(参见图2A)。
另外，视觉检查用信息显示部28根据视觉检查用信息在显示设备6上显示候选区域图像获取单元22获取的多幅候选区域图像。例如，当选择了按钮7b时，视觉检查用信息显示部28在显示设备6上显示包括在视觉检查用信息中的多幅候选区域图像(参见图2B)。另外，例如，当选择了按钮10a并且用户选择了某一细胞候选区域X时，视觉检查用信息显示部28在显示设备6上显示包括在视觉检查用信息中的多幅候选区域图像(参见图4A)。另外，例如，当选择了按钮10c并且用户选择了某一细胞候选区域X时，视觉检查用信息显示部28在显示设备6上将包括在视觉检查用信息中的多幅候选区域图像连同包括标准样本图像中的细胞候选区域X在内的周围区域的图像一起显示(参见图4C)。
这里，视觉检查用信息显示部28将候选区域图像连同表示已用来捕获了各个样本图像的焦距的信息一起显示。具体地，视觉检查用信息显示部28将每个候选区域图像与包括在候选区域图像中的焦距相关联地进行显示(参见图2B、图4A和图4C)。另外，视觉检查用信息显示部28按基于已用来捕获了各个样本图像的焦距的布置的顺序(例如，按焦距的升序或降序)以列表格式显示候选区域图像(参见图2B、图4A和图4C)。应注意，视觉检查用信息显示部28还可以按根据包括在候选区域图像中的焦距进行显示的顺序(例如，按焦距的升序或降序)轮流地逐一显示各个候选区域图像。示出了轮流地逐一显示各个候选区域图像的方式。箭头表示转移至要显示的候选区域图像。
另外，视觉检查用信息显示部28接收用户的与在某一细胞候选区域X中是否看到目标细胞相关的确定结果的输入。这里，在点击了针对某一细胞候选区域X的视觉观察结果输入按钮11(参见图2A和图2B)的情况下，视觉检查用信息显示部28接收用户的与在细胞候选区域X中是否看到目标细胞相关的确定结果的输入。
另外，视觉检查用信息显示部28将已接收到的、表示用户的确定结果的信息与细胞候选区域X的区域ID相关联地存储在视觉观察结果栏中。这里，在已接收到表示在细胞候选区域X中看到目标细胞的确定结果的输入的情况下，视觉检查用信息显示部28将与细胞候选区域X的区域ID相关联地存储在观察结果栏内的视觉观察标记的值更新为“2”。在已接收到表示不清楚是否在细胞候选区域X中看到目标细胞的确定结果的输入的情况下，视觉检查用信息显示部28将视觉观察标记的值更新为“1”。
然后，根据区域候选DB20中的存储内容来执行目标细胞提取。
以该方式，在图像处理设备4中，对于多个焦距中的每一个，视觉检查用信息显示部28将当以该焦距捕获样本图像时所获得的细胞候选区域34的图像显示在显示设备6上。因而，通过参考图像，用户可以做出关于某一细胞候选区域34内的对象是否为目标细胞的确定。另外，按基于焦距的顺序显示图像，从而利于一眼就确定细胞核部分的尺寸的改变并且利于做出这样的确定。
图10是示出图像处理设备4中的候选区域图像获取单元22、视觉检查用信息生成单元24和视觉检查用信息显示部28执行的处理的示例的流程图。在S101中，图像处理设备4读取存储在样本图像存储器16中的多幅样本图像。另外，在S101中，图像处理设备4读取登记在区域候选DB20中的相应的多个细胞候选区域的坐标数据。
然后，图像处理设备4对存储在存储器装置中的视觉检查区域列表进行初始化(S102)。然后，图像处理设备4将登记在区域候选DB20中的细胞候选区域逐一地当作细胞候选区域(i)，并且执行步骤S103至S106。
即，在S103中，图像处理设备4使用候选区域图像获取单元22来获取各个样本图像中的细胞候选区域(i)的图像作为候选区域图像。另外，在S103中，图像处理设备4使用视觉检查用信息生成单元24来生成包括所获取的多幅候选区域图像的视觉检查用信息，并且将视觉检查用信息保存在视觉检查用信息存储器26中。
然后，例如，在用户选择了细胞候选区域(i)的情况下，图像处理设备4读取存储在视觉检查用信息存储器26中的视觉检查用信息，并且使用视觉检查用信息显示部28来在显示设备6上显示包括在视觉检查用信息中的多幅候选区域图像中的每一幅(S104)。例如，在S104中，图像处理设备4按基于包括在各个候选区域图像中的焦距的排序顺序(参见图4A)、以列表格式显示候选区域图像。替选地，例如，在S104中，图像处理设备4按根据包括在候选区域图像中的焦距进行显示的顺序(参见图9)、轮流地逐一显示各个候选区域图像。替选地，例如，在S104中，图像处理设备4将候选区域图像连同包括标准样本图像中的细胞候选区域(i)在内的周围区域的图像一起显示(参见图4C)。
然后，图像处理设备4使用视觉检查用信息显示部28来接收用户的与在细胞候选区域(i)中是否看到目标细胞相关的确定结果的输入。另外，根据所接收到的输入来确定用户是否已确定在细胞候选区域(i)中看到目标细胞(S105)。
在用户已确定在细胞候选区域(i)中看到目标细胞的情况下(在S105中为是)，将与细胞候选区域(i)的区域ID相关联地存储在视觉观察结果栏内的视觉观察标记的值更新为“2”。另外，将细胞候选区域(i)登记到视觉检查区域列表中(S106)。
相反，在用户已确定在细胞候选区域(i)中未看到目标细胞的情况下(在S105中为否)，图像处理设备4将另一细胞候选区域设置为细胞候选区域(i)并且执行S103及其后的步骤。
最后，在S107中，图像处理设备4输出视觉检查区域列表。
应注意，本发明的示例性实施例不限于上述示例性实施例。
例如，在上文中，描述了有核红细胞是目标细胞的情况；然而，除了有核红细胞外的细胞也可以是目标细胞。即，本发明也可应用于除了有核红细胞外的细胞是目标细胞的情况。
另外，例如，当选择了按钮10b时，图像处理设备4可以不以显示模式(2)(参见图4B)而以显示模式(4)执行详情显示。图11是用于说明显示模式(4)的图。如图11所示，在显示模式(4)下，在各个焦距下的周围区域的图像轮流地逐一显示。
附图标记列表
1图像处理***，2光学显微镜，4图像处理设备，6显示设备，7a、7b、10a、10b、10c按钮，11视觉观察结果输入按钮，12成像单元，14样本图像获取单元，16样本图像存储器，18细胞候选区域确定单元，20区域候选DB，22候选区域图像获取单元，24视觉检查用信息生成单元，26视觉检查用信息存储器，28视觉检查用信息显示部，30像素块，32细胞核候选区域，34细胞候选区域。

Claims (9)

1.一种图像处理***，其包括：
成像装置，其以多个焦距中的各个焦距捕获包括目标细胞的样本的图像；
获取装置，其在作为所述成像装置捕获的图像的各个捕获图像中获取与看到所述目标细胞的区域的候选相对应的细胞候选区域的图像；
显示装置，其显示由所述获取装置获取的、为多幅图像的图像；以及
用于接收用户的与在所述细胞候选区域中是否看到所述目标细胞相关的确定结果的输入的装置。
2.根据权利要求1所述的图像处理***，其中，
所述显示装置按基于已用来捕获了各个捕获图像的焦距的排列顺序、以列表格式显示所述多幅图像。
3.根据权利要求1所述的图像处理***，其中，
所述显示装置按根据已用来捕获了各个捕获图像的焦距进行显示的顺序、轮流地逐一显示所述多幅图像。
4.根据权利要求1至3中任一项所述的图像处理***，其中，
所述显示装置将所述多幅图像连同包括存在于任一幅所述捕获图像中的细胞候选区域在内的周围区域的图像一起显示。
5.根据权利要求1至4中任一项所述的图像处理***，其中，
所述显示装置将所述多幅图像连同表示已用来捕获了各个捕获图像的焦距的信息一起显示。
6.一种图像处理设备，其包括：
获取装置，其在包括目标细胞的样本的各个捕获图像中获取与看到所述目标细胞的区域的候选相对应的细胞候选区域的图像，所述捕获图像是成像装置以多个焦距中的各个焦距捕获的图像；
显示装置，其显示由所述获取装置获取的、为多幅图像的图像；以及
用于接收用户的与在所述细胞候选区域中是否看到所述目标细胞相关的确定结果的输入的装置。
7.一种程序，用于使得计算机起到如下作用：
获取装置，其在包括目标细胞的样本的各个捕获图像中获取与看到所述目标细胞的区域的候选相对应的细胞候选区域的图像，所述捕获图像是成像装置以多个焦距中的各个焦距捕获的图像；
显示装置，其显示由所述获取装置获取的、为多幅图像的图像；以及
用于接收用户的与在所述细胞候选区域中是否看到所述目标细胞相关的确定结果的输入的装置。
8.一种计算机可读存储介质，其存储用于使得计算机起到如下作用的程序：
获取装置，其在包括目标细胞的样本的各个捕获图像中获取与看到所述目标细胞的区域的候选相对应的细胞候选区域的图像，所述捕获图像是成像装置以多个焦距中的各个焦距捕获的图像；
显示装置，其显示由所述获取装置获取的、为多幅图像的图像；以及
用于接收用户的与在所述细胞候选区域中是否看到所述目标细胞相关的确定结果的输入的装置。
9.一种图像处理方法，包括：
以多个焦距中的各个焦距捕获包括目标细胞的样本的图像；
在所述捕获中所获得的各个捕获图像中获取与看到所述目标细胞的区域的候选相对应的细胞候选区域的图像；
显示所获取的、为多幅图像的图像；以及
接收用户的与在所述细胞候选区域中是否看到所述目标细胞相关的确定结果的输入。
CN201380075661.4A 2013-06-07 2013-11-21 图像处理***、图像处理设备、程序、存储介质和图像处理方法 Pending CN105122037A (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2013121331A JP2014238344A (ja) 2013-06-07 2013-06-07 画像処理システム、画像処理装置及びプログラム
JP2013-121331 2013-06-07
PCT/JP2013/081361 WO2014196097A1 (ja) 2013-06-07 2013-11-21 画像処理システム、画像処理装置、プログラム、記憶媒体及び画像処理方法

Publications (1)

Publication Number Publication Date
CN105122037A true CN105122037A (zh) 2015-12-02

Family

ID=52007764

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201380075661.4A Pending CN105122037A (zh) 2013-06-07 2013-11-21 图像处理***、图像处理设备、程序、存储介质和图像处理方法

Country Status (3)

Country Link
JP (1) JP2014238344A (zh)
CN (1) CN105122037A (zh)
WO (1) WO2014196097A1 (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109312286A (zh) * 2016-06-13 2019-02-05 索尼公司 装置、信息处理装置、程序和信息处理方法
WO2020010634A1 (zh) * 2018-07-13 2020-01-16 深圳迈瑞生物医疗电子股份有限公司 一种细胞图像处理***、方法、自动读片装置与存储介质
CN111698423A (zh) * 2020-06-18 2020-09-22 福建捷联电子有限公司 一种具有多种焦距照片的展示方法

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP7311142B2 (ja) * 2019-08-23 2023-07-19 ライトタッチテクノロジー株式会社 生体組織識別装置および生体組織識別プログラム
WO2021135393A1 (zh) * 2019-12-31 2021-07-08 深圳迈瑞生物医疗电子股份有限公司 一种图像分析装置及其成像方法

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6583865B2 (en) * 2000-08-25 2003-06-24 Amnis Corporation Alternative detector configuration and mode of operation of a time delay integration particle analyzer
JP4046161B2 (ja) * 2002-10-29 2008-02-13 独立行政法人放射線医学総合研究所 標本画像データ処理方法及び標本検査システム
JP4346923B2 (ja) 2003-02-21 2009-10-21 晴夫 高林 標的細胞自動探索システム
JP5703781B2 (ja) * 2010-09-03 2015-04-22 ソニー株式会社 画像処理装置および方法

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109312286A (zh) * 2016-06-13 2019-02-05 索尼公司 装置、信息处理装置、程序和信息处理方法
WO2020010634A1 (zh) * 2018-07-13 2020-01-16 深圳迈瑞生物医疗电子股份有限公司 一种细胞图像处理***、方法、自动读片装置与存储介质
CN111656247A (zh) * 2018-07-13 2020-09-11 深圳迈瑞生物医疗电子股份有限公司 一种细胞图像处理***、方法、自动读片装置与存储介质
CN111656247B (zh) * 2018-07-13 2023-03-10 深圳迈瑞生物医疗电子股份有限公司 一种细胞图像处理***、方法、自动读片装置与存储介质
CN111698423A (zh) * 2020-06-18 2020-09-22 福建捷联电子有限公司 一种具有多种焦距照片的展示方法

Also Published As

Publication number Publication date
JP2014238344A (ja) 2014-12-18
WO2014196097A1 (ja) 2014-12-11

Similar Documents

Publication Publication Date Title
AU2020200835B2 (en) System and method for reviewing and analyzing cytological specimens
JP4558047B2 (ja) 顕微鏡システム、画像生成方法、及びプログラム
US7720272B2 (en) Automated microscopic sperm identification
CN105122037A (zh) 图像处理***、图像处理设备、程序、存储介质和图像处理方法
JP2006049964A (ja) 画像表示システム、画像提供装置、画像表示装置、およびコンピュータプログラム
CN105637343A (zh) 检测控制装置、程序、检测***、存储介质和检测控制方法
US20040254738A1 (en) Method and system for organizing multiple objects of interest in field of interest
CN111932542B (zh) 一种基于多焦距的图像识别方法及装置、存储介质
JP4864709B2 (ja) 分散プロット分布を用いてスライドの染色品質を決定するシステム
US20140029813A1 (en) Method and system to digitize pathology specimens in a stepwise fashion for review
CN111462005A (zh) 处理显微图像的方法、装置、计算机设备及存储介质
JP4897488B2 (ja) 分散プロット分布を用いてスライドを分類するシステム
JP5530126B2 (ja) 三次元細胞画像解析システム及びそれに用いる三次元細胞画像解析装置
JP4578135B2 (ja) 標本画像の表示方法および標本画像表示用プログラム
JP2014157158A (ja) 細胞観察方法、三次元細胞画像解析システム及びそれに用いる三次元細胞画像解析装置
JP4785347B2 (ja) 標本画像の表示方法および標本画像表示用プログラム
JP5048038B2 (ja) 血液細胞分類結果の表示方法および血液細胞分類結果表示用プログラム
CN116012693A (zh) 智能诊断方法及装置、红外热成像设备、介质
Wood A microscopy scanning system for clinical chromosome diagnostics

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication