CN104081248A - 信息处理装置、成像控制方法、程序、数字显微镜***、显示控制装置、显示控制方法和程序 - Google Patents

信息处理装置、成像控制方法、程序、数字显微镜***、显示控制装置、显示控制方法和程序 Download PDF

Info

Publication number
CN104081248A
CN104081248A CN201280066139.5A CN201280066139A CN104081248A CN 104081248 A CN104081248 A CN 104081248A CN 201280066139 A CN201280066139 A CN 201280066139A CN 104081248 A CN104081248 A CN 104081248A
Authority
CN
China
Prior art keywords
image
imaging
reimaging
failure
composograph
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201280066139.5A
Other languages
English (en)
Inventor
渡边真司
林信裕
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Corp
Original Assignee
Sony Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Corp filed Critical Sony Corp
Publication of CN104081248A publication Critical patent/CN104081248A/zh
Pending legal-status Critical Current

Links

Classifications

    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B21/00—Microscopes
    • G02B21/36—Microscopes arranged for photographic purposes or projection purposes or digital imaging or video purposes including associated control and data processing arrangements
    • G02B21/365—Control or image processing arrangements for digital or video microscopes
    • G02B21/367—Control or image processing arrangements for digital or video microscopes providing an output produced by processing a plurality of individual source images, e.g. image tiling, montage, composite images, depth sectioning, image comparison
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B21/00—Microscopes
    • G02B21/36—Microscopes arranged for photographic purposes or projection purposes or digital imaging or video purposes including associated control and data processing arrangements
    • G02B21/365—Control or image processing arrangements for digital or video microscopes
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T3/00—Geometric image transformations in the plane of the image
    • G06T3/40—Scaling of whole images or parts thereof, e.g. expanding or contracting
    • G06T3/4038—Image mosaicing, e.g. composing plane images from plane sub-images
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00—Image enhancement or restoration
    • G06T5/50—Image enhancement or restoration using two or more images, e.g. averaging or subtraction
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00—Image enhancement or restoration
    • G06T5/77—Retouching; Inpainting; Scratch removal
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/30—Determination of transform parameters for the alignment of images, i.e. image registration
    • G06T7/33—Determination of transform parameters for the alignment of images, i.e. image registration using feature-based methods
    • G06T7/337—Determination of transform parameters for the alignment of images, i.e. image registration using feature-based methods involving reference images or patches
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/10—Image acquisition modality
    • G06T2207/10056—Microscopic image
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/20—Special algorithmic details
    • G06T2207/20212—Image combination
    • G06T2207/20221—Image fusion; Image merging
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/30—Subject of image; Context of image processing
    • G06T2207/30004—Biomedical image processing
    • G06T2207/30024—Cell structures in vitro; Tissue sections in vitro
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/30—Subject of image; Context of image processing
    • G06T2207/30168—Image quality inspection

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Chemical & Material Sciences (AREA)
  • Analytical Chemistry (AREA)
  • Optics & Photonics (AREA)
  • Microscoopes, Condenser (AREA)
  • Studio Devices (AREA)
  • Image Input (AREA)
  • Image Processing (AREA)

Abstract

用于允许利用较少的精力和时间对图像进行重新成像。提供了一种信息处理装置，该信息处理装置包括：检测单元，该检测单元通过评估使用数字显微镜所捕获的图像以检测需要与图像相关的重新成像的失败；以及生成单元，用于当通过检测单元检测到失败时生成用于设置在重新成像时的成像条件的设置信息。

Description

信息处理装置、成像控制方法、程序、数字显微镜***、显示控制装置、显示控制方法和程序
技术领域
本公开涉及信息处理装置、成像控制方法、程序、数字显微镜***、显示控制装置、显示控制方法和程序。
背景技术
过去，已经使用了利用显微镜来捕获样本的数字图像的数字显微镜***。例如，在病理诊断领域，通过利用数字显微镜***来捕获生物样本的数字图像，可以在任何地方执行基于生物样本的病理诊断，而不用长期的保留关于生物样本的信息或者运送生物样本本身。专利文献1公开了一种用于通过捕获生物样本的局部图像并且组合这些局部图像来生成高分辨率的合成图像数据的技术。
引用列表
专利文献
专利文献1：JP2010-230495A
发明内容
技术问题
如在专利文献1中所示，在一般的数字显微镜***中，从利用显微镜所捕获的多个局部图像生成一个样本图像。在从图像捕获到生成的过程中，经常发生失败。例如，当连续地自动捕获多个样本时，样本的所有图像捕获都成功是很罕见的。尽管如此，在与数字显微镜***相关的先前技术中，例如，当已经获得了将会在将样本图像用于病理诊断等时引起问题的图像时，即，当存在需要重新成像的失败时，从发现该失败到重新成像要花费大量的时间和精力。例如，该失败可能仅能通过在屏幕上确认图像才能发现。因此，对将要重新成像的样本进行搜索，重新***该样本，重新设置成像条件以避免另一个失败，并且执行重新成像。因此，重新成像花费大量的时间和精力。
因此，期望提供一种能够更快速且更省力地执行重新成像的方法。
问题的解决方案
根据本公开，提供了一种信息处理装置，该信息处理装置包括：检测单元，被配置为通过评估使用数字显微镜所捕获的图像来检测需要与图像相关的重新成像的失败；以及生成单元，被配置为如果通过检测单元检测到失败，则生成用于设置在重新成像时的成像条件的设置信息。
根据本公开的另一个实施方式，提供了一种成像控制方法，包括：通过评估使用数字显微镜捕获的图像来检测需要与图像相关的重新成像的失败；以及如果通过检测单元检测到失败，则生成用于设置在重新成像时的成像条件的设置信息。
根据本公开的另一个实施方式，提供了一种程序，其使得计算机起到以下功能：检测单元，被配置为通过评估使用数字显微镜捕获的图像来检测需要与图像相关联的重新成像的失败；以及生成单元，被配置为如果检测单元检测到失败，则生成用于设置在重新成像时的成像条件的设置信息。
根据本公开的另一个实施方式，提供了一种数字显微镜***，包括数字显微镜和信息处理装置，信息处理装置包括检测单元，被配置为通过评估使用数字显微镜捕获的图像来检测需要与图像相关的重新成像的失败；以及生成单元，被配置为如果通过检测单元检测到失败，则生成用于设置在重新成像时的成像条件的设置信息。
根据本公开的另一个实施方式，提供了一种显示控制装置，包括：获取单元，被配置为获取当通过评估使用数字显微镜捕获的图像来检测到需要与图像相关的重新成像的失败时生成的、用于设置重新成像时的成像条件的设置信息；以及显示控制单元，被配置为将通过获取单元获取的设置信息显示在显示面上。
发明的有益效果
根据本公开的信息处理装置、成像控制方法、程序、数字显微镜***、显示控制装置、显示控制方法和程序可以更快速且更省力地执行重新成像。
附图说明
[图1]是示出了根据本公开实施方式的数字显微镜***的示意性配置的实例的说明图。
[图2]是示出了根据第一实施方式的扫描仪的配置的实例的框图。
[图3]是通过数字显微镜成像的实例的说明图。
[图4]是示出了组合图像的实例的说明图。
[图5A]是示出了成像遗漏的实例的说明图。
[图5B]是示出了成像遗漏的检测的实例的说明图。
[图6]是示出了在组合失败时在合成图像中出现边缘的实例的说明图。
[图7]是示出了根据第一实施方式的服务器的配置的实例的框图。
[图8]是示出了根据第一实施方式的观测仪(viewer)的配置的实例的框图。
[图9]是示出了根据第一实施方式的成像控制处理的示意性流程的实例的流程图。
[图10]是示出了与成像遗漏有关的单个图像评估处理的流程的实例的流程图。
[图11]是示出了与组合失败有关的单个图像评估处理的流程的实例的流程图。
[图12]是示出了根据第二实施方式的扫描仪的配置的实例的框图。
[图13]是示出了根据第二实施方式的服务器的配置的实例的框图。
[图14]是示出了根据第二实施方式的在服务器侧的成像控制处理的示意性流程的实例的流程图。
[图15]是示出了与成像遗漏有关的合成图像评估处理的流程的实例的流程图。
[图16]是示出了与组合失败有关的合成图像评估处理的流程的实例的流程图。
[图17]是示出了根据第二实施方式的在扫描仪侧的成像控制处理的示意性流程的实例的流程图。
具体实施方式
在下文中，将参照附图详细描述本发明的优选实施方式。应注意的是，在该说明书和附图中，使用相同的参考标号表示基本上具有相同功能和结构的元件，并且省略了重复描述。
应注意的是，将按以下顺序进行描述。
1.数字显微镜***的示意性的配置
2.第一实施方式
2.1扫描仪的配置
2.2服务器的配置
2.3观测仪的配置
2.4处理的流程
3.第二实施方式
3.1扫描仪的配置
3.2服务器的配置
3.3处理的流程
4.总结
<1.数字显微镜***的示意性配置>
首先，将参照图1描述根据本公开实施方式的数字显微镜***1的示意性配置。图1是示出了根据本公开实施方式的数字显微镜***的示意性配置的实例的说明图。如在图1中所示，数字显微镜***1包括扫描仪100、服务器200以及观测仪300。
扫描仪100是具有数字显微镜或者被连接至数字显微镜的信息处理装置。扫描仪100使用数字显微镜捕获样本的图像。例如，将于其上固定了样本的预制玻片(slide)***数字显微镜中。当将预制玻片***数字显微镜中时，扫描仪100确定成像条件并将所确定的成像条件设置在数字显微镜中。此外，扫描仪100使用数字显微镜捕获预制玻片上的样本的图像。更具体地，扫描仪100确定样本的成像区域作为成像条件，并且在数字显微镜中设置所确定的成像区域。然后，扫描仪100将成像区域分成多个单个区域，确定这些多个单个区域的成像顺序，并且将所确定的成像顺序设置在数字显微镜中。接下来，扫描仪100使数字显微镜在每个单独的区域捕获样本的图像。然后，扫描仪100通过组合作为局部图像的多个捕获到的单独区域的图像来生成合成图像。因此，通过扫描仪100生成了一个样本图像，即，合成图像。
服务器200是管理由扫描仪100生成的样本图像的信息处理装置。例如，服务器200将通过扫描仪100生成的合成图像与关于样本的标识信息相关联并存储在数据库中。
观测仪300是显示控制装置的实例。例如，观测仪300在显示面上显示由扫描仪100生成的或者由服务器200存储的样本的合成图像。此外，例如，观测仪300提供了用于能够基于用户操作来指定扫描仪100的成像条件的用户界面。即，用户可以经由在观测仪300上进行的操作来指定扫描仪100的成像条件。
在根据本公开的实施方式中，可以使用较少的时间和精力在数字显微镜***1中执行重新成像。现在将在下文描述<2.第一实施方式>和<3.第二实施方式>的特定主题。
<2.第一实施方式>
首先，将描述根据本公开的第一实施方式。根据本公开的第一实施方式，通过扫描仪100自动地检测到需要重新成像的失败，并且基于该失败来执行重新成像。
<2.1扫描仪的配置>
现在将参照图2至图6描述根据第一实施方式的扫描仪100-1的配置的实例。图2是示出了根据第一实施方式的扫描仪100-1的配置的实例的框图。如在图2中所示，扫描仪100-1包括成像控制单元110、数字显微镜120、组合单元130、失败检测单元140、设置信息生成单元150和通信单元160。
(成像控制单元110)
成像控制单元110控制使用数字显微镜120的成像。例如，成像控制单元110在数字显微镜120中设置用户指定的或者其自动确定的成像条件，并且使得数字显微镜120基于这些成像条件来捕获样本的图像。例如，成像控制单元110将成像区域、成像顺序、照明亮度、白平衡系数等作为整个样本的成像条件。进一步地，例如，成像控制单元110将焦点位置设置作为用于每个单独区域的成像条件。
此外，当设置信息生成单元150已经生成了用于设置重新成像时的成像条件的设置信息时，成像控制单元110将数字显微镜120中的上述成像条件中的至少一些进行重新设置。然后，成像控制单元110使数字显微镜120基于重新设置的成像条件重新捕获样本的图像。
成像控制条件110将关于设置或重新设置的成像条件的信息(下文中，称之为“成像条件信息”)输出至通信单元160。
(数字显微镜120)
数字显微镜120基于通过成像控制单元110所设置的成像条件来捕获图像。例如，数字显微镜120捕获示出了在所设置的成像区域中的每个单个区域的图像(在下文中，称之为“单个图像”)。下面将参照图3更详细地描述这一点。
图3是示出了通过数字显微镜120的成像的实例的说明图。如在图3中所示，为了捕获生物样本10的图像，设置了包括整个生物样本10的成像区域20。该成像区域20被分成多个单个区域21。可以以任意顺序设置单个区域21的成像顺序，例如，以从生物样本10的中心朝外侧的螺旋形顺序、或者以从顶部到底部或者从底部到顶部通过每列交替移动的Z字形的顺序。基于由此设置的成像顺序，数字显微镜120捕获示出了每个单个区域21的单个图像。这里，数字显微镜120捕获包括单个区域21的扩展区域23作为单个图像，使得可以顺序地组合相邻的单个图像。
数字显微镜120将所捕获的单个图像输出至组合单元130和失败检测单元140。
应注意的是，例如，数字显微镜120包括光学***、图像传感器、图像处理电路以及驱动电路。例如，光学***可以包括物镜。例如，图像传感器可以是CMOS(互补金属氧化物半导体)图像传感器或CCD(电荷耦合器件)图像传感器。图像处理电路执行诸如去马赛克处理和白平衡校正的显影处理。驱动电路基于所设置的成像区域和成像顺序在每次捕获单个图像时移动物镜和样本的相对的位置。
(组合单元130)
组合单元130通过组合由数字显微镜120捕获的单个图像来生成合成图像。下面将参照图4更详细地描述这一点。
图4是示出了组合图像的实例的说明图。图4示出了在相邻的单个区域21捕获的单个图像30a和30b。如已经参照图3所描述的，单个图像30是包括单个区域21的区域23的图像。因此，单个图像30具有与单个区域21相对应的部分31以及其中图像重叠的部分33(在下文中，称之为“重叠部分”)。组合单元130通过将重叠部分33b适当地叠加在重叠部分33a上来组合单个图像30a和单个图像30b。这里，组合单元130利用重叠部分33a的亮度值和重叠部分33b的亮度值来将重叠部分33b叠加在重叠部分33a上。作为实例，例如，组合单元130将重叠部分33b叠加在重叠部分33a上，计算重叠部分33a的每个像素与相对应的重叠部分33b的像素之间的亮度值的差，并且将多个像素之间的这些差的绝对值相加。组合单元130在改变重叠部分33b的位置的同时，计算每个位置的亮度值的差的绝对值的这种总值。此外，在组合时，组合单元130确定其中计算的最小的总值的重叠位置33b的位置作为重叠位置33b的最佳位置。组合单元130以此方式顺序组合相邻的单个区域的单个图像以最终生成整个样本的一个合成图像。
组合单元130将生成的合成图像输出至通信单元160。此外，组合单元130将关于组合相应的单个图像的上述最小的总值输出至失败检测单元140。应注意的是，组合单元130还可以将生成的合成图像输出至失败检测单元140。
(失败检测单元140)
失败检测单元140通过评估使用数字显微镜120捕获的图像检测需要与该图像有关的重新成像的失败。“评估图像”的表述包括评估单个图像中的每一个以及评估由单个图像形成的合成图像。下面将利用特定失败检测的第一实例至第五实例来描述由失败检测单元140进行的失败检测。应注意的是，在失败检测的第一实例和第二实例中，失败检测单元140检测与通过组合多个单个图像生成的合成图像有关的失败作为上述失败。
在第一实例中，失败检测单元140检测应当被包括在合成图像中的区域的成像遗漏作为与合成图像有关的失败。将参照图5A和图5B更详细地描述这一点。
图5A是示出了成像遗漏的实例的说明图。与图3A类似，图5A示出了生物样本10、成像区域20、多个单个区域21以及作为单个图像的成像区域并且包括单个区域21的区域23。这里，虽然成像区域20包括生物样本10的整个深色部分11，但成像区域20不包括生物样本10的浅色部分13。即，即使其是应当被包括在合成图像中的区域，但样本10的一部分没有被捕获。例如，当通过使用整个生物样本的图像检测生物样本的边缘来确定成像区域时，浅色部分13因此会从成像区域遗漏。因此，如果存在成像遗漏，则将变得难以(例如，在病理诊断中)正确地利用样本。
因此，例如，失败检测单元140通过评估其中在图像中的纹理存在的方向来检测应当被包括在合成图像中的区域的成像遗漏。更具体地，例如，失败检测单元140评估其中被定位在成像区域20的周缘部分的区域的单个图像中(即，在形成合成图像的周缘部分的单个图像中)的纹理存在的方向。将参照图5B更详细地描述这一点。
图5B是示出了成像遗漏的检测的实例的说明图。图5B示出了形成合成图像的周缘部分35的单一的单个图像30。因为单个图像30是包括单个区域21的区域23的图像，故单个图像30包括从合成图像突出的突出部分37。换句话说，该突出部分37示出了位于成像区域20的外侧的区域。因此，如果在单个图像30的突出部分37中存在某些类型的纹理，则可以说，在从成像区域20遗漏的突出部分37的方向上存在也应被捕获的样本。因此，失败检测单元140可以通过确定在单个图像30的突出部分37中是否存在纹理作为对其中纹理存在的方向的评估来确定是否存在成像遗漏。应注意的是，失败检测单元140例如可以通过使用边缘检测滤波器检测突出部分37中的边缘、计算检测到的边缘量以及确定该边缘量是否超过预定阈值来检测突出部分37中是否存在纹理。
此外，失败检测单元140可以使用合成图像而不是单个图像来检测成像遗漏。在该情况下，失败检测单元140通过评估其中在被包括在合成图像中的单个图像中纹理存在的方向来检测上述成像遗漏。例如，因为单个图像30的突出部分37没有被包括在合成图像中，故失败检测单元140确定在周缘部分35而不是单个图像30的突出部分37中是否存在纹理。如果在周缘部分35中存在某些类型的纹理，则可以假设在与周缘部分35相对应的方向上，在成像区域20的外侧有很大的可能性存在应当被捕获的样本。因此，失败检测单元140可以通过确定在周缘部分35中是否存在纹理作为对纹理存在的方向的评估，来检测是否存在成像遗漏。应注意的是，例如，失败检测单元140可以确定周缘部分35的边缘方向或者与此组合，而不是确定在周缘部分35中是否存在纹理。即，因为可以假设如果在合成图像的外部方向上存在边缘(在图5B中，在垂直方向上的边缘)，边缘还在突出部分37中延伸，则可以假设在与周缘部分35相对应的方向上，在成像区域的外侧有很大的可能性也存在应当被捕获的样本。
因此，失败检测单元140例如通过评估在单个图像中纹理存在的方向来检测应当被包括在合成图像中的区域的成像遗漏。
在第二实例中，失败检测单元140检测在生成上述合成图像时的组合失败作为与合成图像有关的失败。如参照图4所描述的，虽然通过组合所捕获的单个图像来生成合成图像，但是存在其中没有适当地组合单个图像的情况。因此，在整个合成图像中或者在合成图像的一部分中可能会发生不自然的移位，这会阻碍正确地确认样本。
因此，作为实例，失败检测单元140通过评估生成合成图像时重叠部分的亮度值来检测上述组合失败。如已经参照图4所描述的，当组合单个图像30a和单个图像30b时，组合单元130计算重叠部分33a中的每一个像素与重叠部分33b相对应的像素之间的亮度值的差，并且将多个像素之间的这些差的绝对值相加。此外，在组合期间，组合单元130确定其中将计算的最小的总值的重叠位置33b的位置作为重叠位置33b的最佳位置。因此，可以说上述最小总值是最终指示组合的适宜水平的值。即，如果最小总值小，则可以说组合是成功的，而如果最小总值很大，则可以说组合是失败的。因此，失败检测单元140可以通过确定最小总值是否超过了预定阈值来检测组合失败。应注意的是，失败检测单元140从组合单元130获取最小总值。
此外，作为另一个实例，失败检测单元140还可以通过评估出现在合成图像中的预定方向上的边缘来检测上述组合失败。以下将参照图6更详细地描述这一点。
图6是示出了在组合失败时出现在合成图像中的边缘的实例的说明图。在图6中，示出了合成图像40。如果当生成合成图像40时，在组合时发生了失败，则因为单个图像在组合边界上相互偏移，故在组合边界处出现边缘。例如，出现了水平方向上的边缘41a和垂直方向上的边缘41b。因此，例如，失败检测单元140检测合成图像中出现在预定方向(例如，水平方向和垂直方向)上的边缘，并且评估所检测的边缘的长度或强度。例如，如果所检测到的边缘的长度大于单个区域21的一侧长度的预定比，则可以假设该边缘是作为组合失败的结果而产生的边缘。此外，如果所检测到的边缘的强度大于可以预计的样本的特殊边缘的强度，则也可以假设该边缘是因为组合失败而产生的边缘。在该情况下，失败检测单元140检测到上述组合失败。
因此，例如，失败检测单元140通过评估重叠部分或在合成图像中的预定方向上出现的边缘的亮度值来检测组合失败。
在第三实例中，失败检测单元140检测焦点位置中的的缺陷作为需要与单个图像或合成图像有关的重新成像的失败。当数字显微镜120捕获单个图像时，成像控制单元110设置数字显微镜120中的焦点位置。然而，如果焦点位置的设置是不正确的，则会捕获到模糊的图像。因此，会难以正确地确认样本。
因此，作为实例，失败检测单元140通过评估单个图像的对比度来检测焦点位置中的缺陷。模糊的图像具有较低的对比度。因此，失败检测单元140可以通过计算单个图像的对比度、并且确定所计算的对比度是否超过预定阈值来检测焦点位置的缺陷。应注意的是，可以使用任意方法作为对比度计算方法。作为实例，失败检测单元140计算每四个相邻像素之间的亮度值的差，并且将这些差的绝对值相加。另外，失败检测单元140还可以将计算的整个单个图像的每个像素的总值相加。例如，因此计算出的总值可以被用作单个图像的对比度。这样，失败检测单元140检测焦点位置中的缺陷。
在第四实例中，失败检测单元140检测白平衡上的缺陷作为需要与单个图像或合成图像有关的重新成像的失败。虽然在单个图像的显影处理期间在数字显微镜120中执行白平衡校正，但是错误的白平衡会导致待显影的单个图像的颜色是不同于实际样本的颜色。因此，这会使得难以正确地确认样本的颜色。
因此，作为实例，数字显微镜120捕获其中不存在样本的区域的图像(即，没有示出任何东西)。然后，失败检测单元140将关于图像的颜色信息与提前准备作为模板的颜色信息相比较。如果它们之间的差大于预定阈值，则失败检测单元140检测到白平衡上的缺陷。以这种方式，失败检测单元140检测到白平衡上的缺陷。
在第五实例中，失败检测单元140检测亮度上的缺陷作为需要与单个图像或和合成图像有关的重新成像的失败。虽然在数字显微镜120中的成像期间调节了照明亮度，但是错误的亮度会导致单个图像太亮或太暗而不能被捕获。因此，这会使得难以正确地确认样本。
因此，作为实例，与白平衡上的缺陷类似，数字显微镜120捕获了其中不存在样本的区域的图像(即，没有示出任何东西)。然后，失败检测单元140将关于图像的亮度信息与提前准备作为模板的亮度信息相比较。如果它们之间的差大于预定阈值，则失败检测单元140检测亮度中的缺陷。这样，失败检测单元140检测到亮度上的缺陷。
上面，利用特定的失败检测的第一实例至第五实例描述了通过失败检测单元140进行的失败检测。基于这种失败检测，在没有让用户确认屏幕上的图像的情况下可以自动检测需要重新成像的失败。
在第一实施方式中，每当捕获多个单个图像中的每一个时，失败检测单元140评估每个图像以检测需要重新成像的失败。基于这种评估，可以在捕获单个图像的点上检测失败，其能够在检测到失败之后立即执行重新成像。即，为了执行重新成像，没有必要将样本重新***数字显微镜120或者改变不需要重新设置的项目的设置。因此，在该情况下，执行重新成像所需的工作是非常有限的，并且充分地减少了重新成像花费的时间。
失败检测单元140将与检测到的失败有关的信息输出至设置信息生成单元150。
(设置信息生成单元150)
当通过失败检测单元140检测到失败时，设置信息生成单元150生成用于设置重新成像时的成像条件的设置信息。下面将利用失败检测的上述第一实例至第五实例来描述通过设置信息生成单元150进行的设置信息的生成。
首先，将描述检测到成像遗漏时的设置信息的生成。当通过失败检测单元140检测到上述成像遗漏时，例如，设置信息生成单元150生成用于重新设置成像区域以包括将被新捕获的追加区域的成像区域信息的成像区域。该成像区域信息是一条设置信息。更具体地，例如参照图5A和图5B所描述的，当评估其中在单个图像中存在纹理的方向时，失败检测单元140知道单个区域21(或者单个图像30)和成像遗漏所在的方向(例如，左、右、上、下)。因此，设置信息生成单元150从失败检测单元140获取单个区域21坐标和成像遗漏方向的组合作为与该成像遗漏有关的信息，并且生成包括该组合的信息作为区域信息。基于这种成像区域信息，成像控制单元110可以重新设置成像区域以包括成像遗漏区域。因此，在重新成像时可以避免相同的成像遗漏。
应注意的是，成像区域信息可以包括简单地指示扩大成像区域的信息。在该情况下，成像控制单元110改变用于确定成像区域的参数，使得成像区域更宽。作为实例，成像控制单元110通过检测在整个样本的图像中出现的样本的边缘来确定成像区域。在该情况下，成像控制单元110减小边缘检测中的阈值。因此，因为还检测到了较弱的边缘，故在数字显微镜120中确定并重新设置了较宽的成像区域。此外，作为另一个实例，成像控制单元110将整个样本的图像分成块，计算每个块的亮度值上的变化，并且将具有超过阈值的变化的块区域确定为成像区域。在该情况下，成像控制单元110减小用于与该变化相比较的阈值。因此，因为多个块区域被确定为成像区域，故在数字显微镜120中重新设置了更宽的成像区域。
另外，例如，如果成像区域被重新设置，设置信息生成单元150还生成用于重新设置单个图像的成像顺序的成像顺序信息。该成像顺序信息是一条设置信息。例如，该成像顺序信息包括指示成像顺序被重新设置的信息。通常，连续地捕获相邻单个区域21的单个图像。通过这样连续地捕获相邻的单个图像并且将它们按顺序组合，减小了组合失败的可能性。另一方面，在重新成像时，如果首先以最初的成像顺序捕获单个图像，并且追加捕获了扩展区域的单个图像，则没有以原始成像区域的单个图像的顺序捕获扩展区域的单个图像。因此，增加了组合失败的可能性。因此，当重新设置成像区域时，通过追加生成成像顺序信息并且重新设置成像顺序可以在重新成像时避免组合失败。
其次，将描述在生成合成图像期间检测到组合失败时设置信息的生成。当通过失败检测单元140检测到上述组合失败时，设置信息生成单元150生成用于设置单个图像的成像顺序的成像顺序信息。该成像顺序信息是指示将被设置的成像顺序的信息，该成像顺序不同于检测到组合失败时的成像顺序。表述“不同的成像顺序”可以是其中不同于成像的开始位置的成像顺序，或者是其中不同于扫描模式(螺旋形顺序、Z字形顺序等)的成像顺序。组合失败的发生很大程度上取决于设置了何种成像顺序。如参照图4所描述的，利用重叠部分33的亮度值来执行单个图像30的组合。例如，当从其中在重叠部分33的像素中几乎没有亮度变化的单个图像30成像时，在组合时发生偏差，使得在成像区域中组合失败的可能性增加。因此，组合失败的发生取决于成像顺序。因此，如果已经发生了组合失败，通过以不同的成像顺序执行重新成像，将会减小发生组合失败的可能性。应注意的是，成像顺序信息可以包括指示检测到组合失败时的成像顺序本身的信息。
第三，将描述检测到焦点位置中的缺陷时的设置信息的生成。当检测到焦点位置中的缺陷时，设置信息生成单元150生成用于重新设置焦点位置的焦点位置信息。该焦点位置信息是一条设置信息。例如，该焦点位置信息是包括与检测到的其焦点位置中的缺陷的单个图像相对应的单个区域的坐标和设置的焦点位置的信息。基于这种焦点位置信息，成像控制单元110可以改变具体用于在其焦点位置具有缺陷的单个区域的焦点位置。因此，在重新成像期间，可以避免相同的焦点位置中的缺陷。
应注意的是，当确定在成像区域中的每个单个区域上的焦点位置时，成像控制单元110例如通过在若干单独区域上独立地测量焦点位置并且通过使用测量的焦点位置执行插补，确定另一单个区域的焦点位置。在该情况下，基于该焦点位置，成像控制单元110可以改变单独地测量焦点位置的单个区域，或者可以改变插补方法。在该情况下，焦点位置信息可以包括简单地指示改变焦点位置的信息。
第四，将描述检测到白平衡上的缺陷时的设置信息的生成。当检测到白平衡上的缺陷时，设置信息生成单元150生成用于重新设置白平衡的白平衡信息。该白平衡信息是一条设置信息。例如，该白平衡信息包括关于在检测到白平衡上的缺陷时其中不存在样本的区域的图像的颜色信息(即，与模板颜色信息相比的颜色信息)。基于这种白平衡信息，成像控制单元110可以将白平衡(例如，白平衡校正中的RGB系数)调节到适当值。因此，在重新成像期间，可以避免相同的白平衡缺陷。应注意的是，设置信息生成单元150还可以确定应当如何改变RGB系数(例如，将R乘以因子0.8等)，并且从关于其中不存在样本的图像的颜色信息以及被预先准备作为模板的颜色信息生成包括这种信息的白平衡信息。
第五，将描述在检测到亮度中的缺陷时设置信息的生成。当检测到亮度中的缺陷时，设置信息生成单元150生成用于重新设置照明亮度的亮度信息。该亮度信息是一条设置信息。例如，该亮度信息包括关于当检测到亮度的缺陷时其中不存在样本的区域的图像的亮度信息(即，与模板亮度信息相比的亮度信息)。基于这种亮度信息，成像信息控制单元110可以将照明亮度调节到适当值。因此，在重新成像期间可以避免相同的亮度缺陷。应注意的是，设置信息生成单元150还可以确定应当如何调整照明亮度(例如，将亮度R乘以因子1.2等)，并且从关于其中不存在样本的图像的亮度信息以及被预先准备作为模板的亮度信息生成包括这种信息的亮度信息。
以上，已经通过利用特定失败检测的第一实例至第五实例描述了设置信息生成单元150的设置信息的生成。基于这种设置信息，扫描仪100在用户无须单独重新考虑用于避免另一失败的成像条件的情况下可以自动设置用于重新成像的成像条件。
设置信息生成单元150将生成的设置信息输出至成像控制单元110和通信单元160。
(成像控制单元110)
因此，通过组合单元130检测到了需要重新成像的失败，并且设置信息生成单元150基于该失败生成了设置信息。另一方面，例如，成像控制单元110基于失败检测单元140所检测到的上述失败的类型，确定是否使数字显微镜120重新捕获单个图像中的每一个或者重新捕获多个单个图像的全部。即，确定是执行局部重新成像还是整体重新成像。例如，成像控制单元110如下所述来执行确定。
[表1]
即，如果失败的类型是成像遗漏或者焦点位置上的缺陷，例如，如果缩短重新成像花费的时间优先，则成像控制单元110可以确定用于执行部分重新成像。如果避免组合失败优先，则成像控制单元110可以确定用于执行整体重新成像。在成像控制单元110中提前设置缩短用于重新成像所花费的时间优先还是避免组合失败优先。
此外，例如，如果失败的类型是组合失败、白平衡上的缺陷或者亮度上的缺陷，成像控制单元110例如确定将要执行整体重新成像。因为组合失败通常会影响整个合成图像而不仅仅是合成图像的一部分，期望的是执行整体重新成像。另外，因为通常针对所有的多个单个图像将白平衡和亮度设置为相同的设置而不是针对每个单个图像进行不同的设置，故白平衡和亮度类似地影响多个单个图像。因此，期望的是执行整体重新成像。
因此，通过基于失败的类型确定重新成像范围，可以针对必要的范围执行重新成像。即，可以在重新成像时避免另一失败的同时，更有效地执行重新成像。
(通信单元160)
通信单元16与服务器200-1和观测仪300通信。例如，通信单元160将合成图像从组合单元130传输到服务器200-1和观测仪300。此外，通信单元160将成像条件信息从成像控制单元110传输到服务器200-1和观测仪300。另外，通信单元160将设置信息从设置信息生成单元150传输到观测仪300。
此外，如果将通过服务器200-1或观测仪300确定或改变成像条件，则通信单元160还可以从服务器200-1或观测仪300接收成像条件信息。类似地，如果将通过服务器200-1或观测仪300生成或改变设置信息，则通信单元160还可以从服务器200-1或观测仪300接收设置信息。通信单元160可以将接收到的这些信息输出到成像控制单元110。
<2.2服务器的配置>
现在将参照图7描述根据第一实施方式的服务器200-1的配置的实例。图7是示出了描述根据第一实施方式的服务器200-1的配置的实例的框图。如在图7中所示，服务器200-1包括通信单元210、存储单元220以及控制单元230。
(通信单元210)
通信单元210与扫描仪100-1和观测仪300通信。例如，通信单元210从扫描仪100-1接收合成图像和成像条件信息。此外，通信单元210将存储在存储单元220中的合成图像和成像条件信息传输到观测仪300。
(存储单元220)
存储单元220存储由服务器200-1管理的合成图像和成像条件信息。例如，存储单元220还可以被配置作为数据库，其使关于每个样本的标识信息相关联，并且存储该样本的合成图像和关于何时生成该合成图像的成像条件信息。
(控制单元230)
控制单元230控制整个服务器200-1。例如，当通过通信单元210从扫描仪100-1接收合成图像和成像条件信息时，控制单元230将接收到的合成图像和成像条件信息存储在存储单元220中。此外，控制单元230还可以自动地或者基于来自用户的指令传输待呈现给用户的合成图像和成像条件信息。
<2.3观测仪的配置>
现在将参照图8描述根据第一实施方式的观测仪300的配置的实例。图8是示出了根据第一实施方式的观测仪300的配置的实例的框图。如图8中所示，观测仪300包括通信单元310、输入单元320、控制单元330以及显示单元340。
(通信单元310)
通信单元310与扫描仪100-1和服务器200-1通信。例如，通信单元310从扫描仪100-1或服务器200-1接收待呈现给用户的合成图像。通信单元310还可以连同合成图像一起接收与合成图像相关联的成像条件信息或设置信息。
此外，如果已经通过用户经由下述的用户界面指定了成像条件或者编辑了设置信息，则通信单元310将指示指定了成像条件或编辑的设置信息的成像条件信息传输至扫描仪100-1。
(输入单元320)
输入单元320检测用户操作。该输入单元320可以包括诸如触摸板、键盘、按钮、定点装置等的一个或多个输入装置。
(控制单元330)
控制单元330控制整个观测仪300。控制单元330例如包括获取单元331和显示控制单元333。
(获取单元331)
获取单元331经由通信单元310获取待呈现给用户的合成图像以及生成合成图像时的成像条件信息。例如，获取单元331基于来自用户的指令，或者在每当扫描仪100-1生成合成图像时获取合成图像和成像条件信息。
此外，获取单元331经由通信单元310在当前时间点获取指示扫描仪100-1的成像条件的成像条件信息。例如，获取单元331基于来自用户的指令获取该成像条件信息。
另外，获取单元331还可以在预定条件下经由通信单元310获取设置信息。例如，如果在成像开始之前，用户发布了将设置信息呈现给用户的指令或者已经生成了应当呈现给用户的设置信息，则获取单元331可以获取设置信息。
(显示控制单元333)
显示控制单元333在显示单元340的显示面上显示合成图像。例如，显示控制单元333基于来自用户的指令，或者在每当生成合成图像时，在上述显示面上显示合成图像。此外，如果在用户查看合成图像时发现了需要重新成像的失败，例如，显示控制单元333在显示单元340的显示面上显示生成合成图像时的成像条件信息，使得用户可以重新考虑成像条件。
此外，为了让用户自由地指定成像条件，例如，显示控制单元333提供了用户界面，用于能够通过用户操作来指定扫描仪100-1的成像条件。例如，显示控制单元333基于来自用户的指令在当前时间点将扫描仪100-1的成像条件呈现给用户。此外，如果用户通过输入单元320上的用户操作指定了成像条件，则显示控制单元333将指示指定的成像条件的成像条件信息经由通信单元310传输到扫描仪100-1。
另外，显示控制单元333还在显示单元340的显示面上显示所获取的设置信息。在本实施方式中，通过扫描仪100-1自动检测需要重新成像的失败，并且还自动执行重新成像。然而，如果在开始成像之前用户发布了将设置信息呈现给用户的指令或者如果已经生成了应当被呈现给用户的设置信息，则还可以显示用于重新成像的设置信息。
作为实例，显示控制单元333可以在执行重新成像之前将设置信息呈现给用户。此外，在执行重新成像之前，显示控制单元333还能够由用户来编辑设置信息。如果确定设置信息是不合适的，则能够以这样的方式编辑设置信息允许用户编辑设置信息并且以适当的方式执行重新成像。
(显示单元340)
显示单元340是具有显示面的显示器。在控制单元330的控制下，显示单元340在显示面上显示例如合成图像、成像条件信息、设置信息等。
<2.4处理的流程>
接下来，将参照图9至图11描述根据第一实施方式的成像控制单元的实例。
(成像控制处理)
图9是示出了根据第一实施方式的成像控制处理的示意性流程的实例的流程图。
首先，步骤S401至步骤S405是与整个成像有关的处理。在步骤S401中，扫描仪100-1中的成像控制单元110确定成像区域，并且在数字显微镜129中设置所确定的成像区域。然后，在步骤S403中，成像控制单元110确定示出了被包括在成像区域中的每个单个区域的单个图像的成像顺序，并且在数字显微镜120中设置所确定的程序顺序。接下来，在步骤S405中，成像控制单元110确定其他整体成像条件，例如，诸如白平衡和照明亮度，并且在数字显微镜120中设置这些确定的成像条件。
然后，步骤S407至步骤S415是重复用于每个单个图像的处理。
在步骤S407中，成像控制单元110例如确定用于捕获每个单个图像的单个成像条件(诸如焦点位置)，并且在数字显微镜120中设置所确定的成像条件。接下来，在步骤S409中，数字显微镜120基于所设置的成像顺序来捕获单个图像。然后，在步骤S411中，组合单元130将捕获的单个图像与相邻的单个图像组合。此外，在步骤S500中，失败检测单元140执行与所捕获的单个图像有关的单个图像评估处理。
在步骤S413中，失败检测单元140确定在单个图像评估处理中是否检测到了需要重新成像的失败。如果检测到了失败，则处理进行至步骤S417。如果没有检测到失败，则处理进行到步骤S415。
在步骤S415中，成像控制单元110确定是否已经完成了被包括在成像区域中的全部单个区域的单个图像的成像。如果已经完成了成像，则处理结束。如果还没有完成成像，则处理返回到步骤S407。
在步骤S417中，设置信息生成单元150生成用于设置重新成像时的成像条件的设置信息。然后，在步骤S419中，成像控制单元110确定是执行局部重新成像还是整体重新成像。如果期望进行整体重新成像，则处理返回到步骤S401。如果不需要整体重新成像，则处理返回到步骤S407。应注意的是，如果处理返回到步骤S401，则在步骤S401至步骤407中，成像控制单元110基于所生成的设置信息设置整体成像条件和单个成像条件。此外，如果处理返回到步骤S407，则在步骤S407中成像控制单元110基于所生成的设置信息来设置单个成像条件。
(单个图像评估处理500)
接下来，将描述单个图像评估处理500的实例。针对需要重新成像的每种类型的失败执行单个图像评估处理500。即，如果检测到了五种失败类型，则执行五个单个图像评估处理500。这里，将具体描述与成像遗漏有关的单个图像评估处理500a和与组合失败有关的单个图像评估处理500b。
图10是示出了与成像遗漏有关的单个图像评估处理500a的流程的实例的流程图。在该单个图像评估处理500a中，评估在单个图像中纹理存在的方向。
首先，在步骤S510中，失败检测单元140确定单个图像是否是位于成像区域20的周缘部分的区域的单个图像(即，形成合成图像的周缘部分的单个图像)。如果单个图像是位于成像区域20的周缘部分的区域的单个图像，则处理进行到步骤S520，否则，处理结束。
在步骤S520中，失败检测单元140检测单个图像的突出部分(即，从合成图像突出的单个图像的部分)的边缘，并且计算检测到的边缘的量。
然后，在步骤S530中，失败检测单元140确定所计算的边缘量是否超过阈值。即，失败检测单元140确定在单个图像的突出部分中是否存在纹理。如果边缘量超过了阈值，则处理进行到步骤S540，否则，处理结束。
在步骤S540中，失败检测单元140检测应当被包括在合成图像中的区域的成像遗漏作为需要重新成像的失败。然后，处理结束。
接下来，图11是示出了与组合失败有关的单个图像评估处理500b的流程的实例的流程图。在该单个图像评估处理500b中，评估生成合成图像时重叠部分的亮度值。
首先，在步骤S550中，失败检测单元140计算彼此相邻的单个图像的重叠部分之间的亮度值的差(即，对应于重叠部分的像素之间的亮度值的差的绝对值的总值)。
然后，在步骤S560中，失败检测单元140确定上述重叠部分的亮度值的差是否超过预定阈值。如果该差超过了预定阈值，则处理进行到步骤S570，否则，处理结束。
在步骤S570中，失败检测单元140检测生成合成图像时的组合失败作为需要重新成像的失败。然后，处理结束。
以上已经描述了第一实施方式。根据第一实施方式，在扫描仪100中，自动检测需要重新成像的失败，并且基于设置信息(其是基于失败生成的)自动设置重新成像期间的成像条件。因此，用户不需要执行过去已执行过的任务(诸如在屏幕上确认图像以及重新设置成像条件等)以避免再次发生失败。因此，可以以更少的精力和时间来执行重新成像。另外，在第一实施方式中，在检测到失败之后，可以立即执行重新成像。即，为了执行重新成像，没有必要将样本重新***到数字显微镜120中或者改变不需要重新设置的项目的设置。因此，在该情况下，几乎消除了执行重新成像所需的工作，并且充分地减小了重新成像所花费的时间。
<3.第二实施方式>
接下来，将描述本公开的第二实施方式。根据本公开的第二实施方式，在服务器200-2中，自动检测需要重新成像的失败。此外，基于该失败的检测，服务器200-2使扫描仪100-2重新捕获样本的图像。应注意的是，根据第二实施方式的观测仪300的配置可以与根据第一实施方式的观测仪300的配置相同。
<3.1扫描仪的配置>
首先，将参照图12描述根据第二实施方式的扫描仪100-2的配置的实例。图12是示出根据第二实施方式的扫描仪100-2的配置的实例的框图。如在图12中所示，扫描仪100-2包括成像控制单元111、数字显微镜121、组合单元131以及通信单元160。
(成像控制单元111)
成像控制单元111控制使用数字显微镜121的成像。例如，成像控制单元111在数字显微镜121中设置由用户指定的或者自动确定的成像条件，并且使得数字显微镜121基于这些成像条件来捕获样本的图像。与根据第一实施方式的成像控制单元111类似，例如，成像控制单元111设置成像区域、成像顺序、照明亮度、白平衡系数等作为整个样本的成像条件。此外，成像控制单元111设置焦点位置作为每个单个图像的成像条件。
此外，根据本实施方式，当通过通信单元160已经接收到由服务器200-2生成的设置信息时，成像控制单元111在数字显微镜121中重新设置上述成像条件中的至少一些。然后，成像控制单元111使数字显微镜121基于重新设置的成像条件重新捕获样本的图像。
成像控制单元110将指示成像条件的所设置的或所重新设置的成像条件信息输出至通信单元160。
(数字显微镜121)
数字显微镜121基于由成像控制单元111设置的成像条件来捕获图像。例如，与根据第一实施方式的数字显微镜120类似，数字显微镜121捕获示出了设置成像区域中的每个单个区域的单个图像。此外，数字显微镜121将捕获的单个图像输出至组合单元131。
(组合单元131)
与根据第一实施方式的组合单元130类似，组合单元131通过组合由数字显微镜121捕获的单个图像来生成合成图像。此外，组合单元131将生成的合成图像输出至通信单元160。
<3.2服务器的配置>
接下来，将参照图13描述根据第二实施方式的服务器200-2的配置的实例。图13是示出了根据第二实施方式的服务器200-2的配置的实例的框图。如图13中所示，服务器200-2包括通信单元210、存储单元220、控制单元230、失败检测单元240以及设置信息生成单元250。
(失败检测单元240)
失败检测单元240通过评估经由通信单元210从扫描仪100-2接收的合成图像(或者其局部图像)来检测需要重新成像的失败。由失败检测单元240检测到的失败的类型可以与根据第一实施方式的扫描仪100-1的失败检测单元140检测到的失败类型相同。即，失败检测单元240可以检测上述成像遗漏和组合失败作为与合成图像有关的失败。此外，失败检测单元240可以检测上述焦点位置上的缺陷、白平衡上的缺陷或者亮度上的缺陷作为其他失败。
应注意的是，当检测成像遗漏时，因为突出部分不包括在合成图像中，故在评估其中纹理在合成图像或局部图像中存在的方向时，失败检测单元240使用图5B中示出的周缘部分35。此外，当检测到组合失败时，因为彼此相邻的单个图像的两个重叠部分已经丢失，故失败检测单元240评估被包括在如图6中所示的合成图像中的边缘的方向。
失败检测单元240将与检测到的失败有关的信息输出至设置信息生成单元250。
(设置信息生成单元250)
当失败检测单元240检测到失败时，设置信息生成单元250生成用于设置重新成像时的成像条件的设置信息。与设置信息生成单元150类似，当检测到需要重新成像的失败时，设置信息生成单元250生成各种类型的设置信息，诸如成像遗漏、组合失败、焦点位置上的缺陷、白平衡上的缺陷以及亮度上的缺陷。
当已经生成了设置信息时，设置信息生成单元250将设置信息和促使重新成像的重新成像请求经由通信单元210传输到扫描仪100-2。还可以在重新成像请求已经传输到观测仪300并且在观测仪300上输入了来自用户的重新成像指令后将重新成像请求传输到扫描仪100-2。
<3.3处理的流程>
接下来，将参照图14至图17描述根据第二实施方式的成像控制处理的实例。
(服务器200-2侧上的成像控制处理)
首先，将描述在服务器200-2侧上执行的成像控制处理的处理实例。图14是示出了根据第二实施方式的服务器200-2侧的成像控制处理的示意性流程的实例的流程图。
首先，在步骤S601中，服务器200-2的失败检测单元240从存储单元220读取合成图像。例如，失败检测单元240通过自动选择未评估的合成图像或者基于来自用户的指令从存储单元220选择和读取合成图像。然后，在步骤S700中，失败检测单元240执行合成图像评估处理。然后，在步骤S603中，失败检测单元240确定是否已经检测到需要重新成像的失败。如果已经检测到这种失败，则处理进行到步骤S605，否则，处理结束。
在步骤S605中，设置信息生成单元250生成用于设置重新成像时的成像条件的设置信息。接下来，在步骤S607中，设置信息生成单元250将生成的设置信息存储在存储单元220中。此外，在步骤S609中，设置信息生成单元250将设置信息和重新成像请求经由通信单元210传输至扫描仪100-2或观测仪300。然后，处理结束。
(合成图像评估处理700)
接下来，将描述合成图像评估处理700的实例。针对每种类型的需要重新成像的失败执行合成图像评估处理700。即，如果检测到五种类型的失败，则执行五个合成图像评估处理700。这里，将具体描述与成像遗漏有关的合成图像评估处理700a和与组合失败有关的合成图像评估处理700b。
图15是示出了与成像遗漏有关的合成图像评估处理700a的流程的实例的流程图。在该合成图像评估处理700a中，评估其中在合成图像中纹理存在的方向。
首先，在步骤S710中，失败检测单元240检测合成图像的周缘部分的边缘，并且计算检测到的边缘的量。失败检测单元240计算形成合成图像的每个单个图像(即，局部图像)的边缘量。
然后，在步骤S720中，失败检测单元240确定所计算的边缘量是否超过阈值。即，失败检测单元240确定在合成图像的周缘部分是否存在纹理。失败检测单元240执行形成合成图像的每个个体图像(即，局部图像)的确认。如果边缘量超过了阈值，则处理进行到步骤S730，如果没有，则处理结束。
在步骤S730中，失败检测单元240检测应当被包括在合成图像中的区域的成像遗漏作为需要重新成像的失败。然后，处理结束。
接下来，图16是示出了与组合失败有关的合成图像评估处理700b的流程的实例的流程图。在该合成图像评估处理700a中，评估预定方向上的边缘。
首先，在步骤S740中，失败检测单元240检测应当被包括在合成图像中的预定方向的边缘，并且计算检测到的边缘的长度或强度。
然后，在步骤S750中，失败检测单元240确定是否存在等于或大于预定长度或预定强度的预定方向上的边缘。如果存在等于或大于预定长度或预定强度的预定方向上的边缘，则处理进行到步骤S760，否则，处理结束。
在步骤S760中，失败检测单元240检测当生成合成图像时的组合失败作为需要重新成像的失败。然后，处理结束。
(扫描仪100-2侧上的成像控制处理)
接下来，将描述在扫描仪100-2侧上执行成像控制处理的处理实例。图17是示出了根据第二实施方式在扫描仪100-2侧上的成像控制处理的示意性流程的实例的流程图。
首先，步骤S801至步骤S807是与整体成像有关的处理。在步骤S801中，扫描仪100-2的通信单元160从服务器200-2接收设置信息。然后，在步骤S803中，基于设置信息，成像控制单元111确定示出被包括在所设置的成像区域中的单个区域中的每一个的单个图像的成像顺序，并且在数字显微镜121中设置所确定的成像顺序。此外，在步骤S807中，基于设置信息，例如，成像控制单元111确定诸如白平衡和照明亮度的其他整体成像条件，并且在通信电路121中设置所确定的成像条件。
然后，步骤S809至步骤S815针对每个单个图像进行重复处理。
在步骤S809中，成像控制单元111确定用于捕获每个单个图像的单个成像条件(诸如焦点位置)，例如，并且在数字显微镜121中设置所确定的成像条件。然后，在步骤S811中，数字显微镜121基于所设置的成像顺序捕获单个图像。然后，在步骤S813中，组合单元131将捕获的单个图像与相邻的单个图像组合。
在步骤S815中，成像控制单元111确定是否已经完成了被包括在成像区域中的所有的单个区域的单个图像的成像。如果已经完成了成像，则处理进行到步骤S817。如果没有完成成像，则处理返回到步骤S809。
在步骤S817中，通信单元160将合成图像传输至服务器200-2和观测仪300。然后，处理结束。
以上已经描述了第二实施方式。根据第二实施方式，在扫描仪200中，自动检测需要重新成像的失败，并且促使扫描仪100-2基于该失败执行重新成像。因此，用户不需要执行过去执行过的任务(诸如在屏幕上确认图像以及重新设置成像条件等)以避免再次发生失败。因此，可以用更少的精力和时间来执行重新成像。另外，在第二实施方式中，即使在每个扫描仪中不具有失败检测和设置信息生成的功能的情况下可以通过在服务器中存储合成图像来执行失败检测和设置信息生成。此外，实际上，事后必要时可以执行失败检测和设置信息生成，同时减小扫描仪的成像时间。
<总结>
在上文中，已经参照图1至图17描述了根据本公开的数字显微镜***的两个实施方式。根据本公开的这些实施方式，通过评估使用数字显微镜捕获的图像来检测需要重新成像的失败。此外，当检测到这种失败时，生成用于设置重新成像时的成像条件的设置信息。即，自动检测需要重新成像的失败，并且基于设置信息(其是基于失败生成的)自动设置重新成像时的成像条件。因此，用户不需要执行过去已执行过的任务(诸如在屏幕上确认图像以及重新设置成像条件等)以避免再次发生失败。因此，可以以较少的精力和时间来执行重新成像。
此外，与合成图像有关的失败被检测作为需要重新成像的失败。基于这种失败的检测，即使发生诸如成像遗漏和组合失败的数字显微镜***的特有失败，仍自动执行重新成像。因此，可以减小数字显微镜***中重新成像的时间和精力。
此外，如果检测到成像遗漏，则将生成的成像区域信息作为设置信息。基于该成像区域信息，可以将成像区域设置为包括成像遗漏的区域。这使得在重新成像时能够避免相同的成像遗漏。另外，将生成的成像顺序信息作为具有该成像区域信息的设置信息。基于该成像顺序信息，在重新成像时可以避免组合失败。
此外，如果检测到组合失败，则将生成的成像顺序信息作为设置信息。基于该成像顺序信息，通过以不同的成像顺序执行重新成像可以减小发生组合失败的可能性。
此外，在重新成像时，基于检测到的失败的类型确定是执行部分重新成像还是整体重新成像。因此，通过基于失败类型确定重新成像的范围，可以执行必要的范围的重新成像。即，可以在避免了重新成像时的另一失败的同时更有效地执行重新成像。
此外，例如，可以在扫描仪侧上执行失败检测和设置信息生成。在该情况下，例如，每当捕获了多个单个图像时，评估每个图像以检测需要重新成像的失败。因为这种评估能够在捕获图像之后检测失败，故可以立即执行重新成像。因此，因为可以在没有每次都重新排列成像目标(诸如预制玻片)的情况下执行重新成像，故可以减小重新成像花费的时间和精力。
另外，例如，可以在服务器侧上执行失败检测和设置信息生成。在该情况下，例如，可以利用在服务器中累积的合成图像来执行失败检测和设置信息生成。因此，即使在每个扫描仪中不具有失败检测和设置信息生成功能的情况下可以通过在服务器中存储合成图像来执行失败检测和设置信息生成。此外，事后必要时可以执行失败检测和设置信息生成，同时减小了在扫描仪上的成像时间。
以上已经参照附图描述了本发明的优选实施方式，当然，本发明不限于上述实例。在所附权利要求的范围内，本领域普通技术人员能够发现各种替换和变形，并且应当理解，它们将自然地落入本发明的技术范围之内。
例如，数字显微镜可以不配置有扫描仪，或者可以是独立于扫描仪的装置。在该情况下，数字显微镜连接至扫描仪。另外，扫描仪、服务器、和观测仪中的两个或多个装置可以是相同的装置。
此外，根据本说明书的成像控制处理的处理步骤不必以流程图中描述的时间顺序执行。例如，成像控制处理中的处理步骤可以以不用于流程图中描述的顺序执行或者可以并行执行。
另外，可以编写计算机程序，其使得扫描仪、服务器和观测仪中的CPU、ROM、RAM表现出与上述扫描仪、服务器和观测仪中的对应部分相同的功能。此外，还提供了其中存储了这种计算机程序的存储介质。
另外，本技术还可以被配置如下。
(1)一种信息处理装置，包括：
检测单元，被配置为通过评估使用数字显微镜所捕获的图像来检测需要与所述图像相关的重新成像的失败；以及
生成单元，被配置为如果通过所述检测单元检测到所述失败，则生成用于设置在重新成像时的成像条件的设置信息。
(2)根据(1)的信息处理装置，其中，所述检测单元被配置为将与通过组合多个图像生成的合成图像相关的失败检测作为所述失败。
(3)根据(2)的信息处理装置，其中，与所述合成图像相关的所述失败包括应当被包括在所述合成图像中的区域的成像遗漏。
(4)根据(3)所述的信息处理装置，其中，所述检测单元被配置为通过评估在所述图像中纹理存在的方向来检测所述成像遗漏。
(5)根据(2)至(4)中任一项所述的信息处理装置，其中，所述生成单元被配置为如果通过所述检测单元检测到所述成像遗漏，则生成用于重新设置成像区域以包括将被新捕获的追加区域的成像区域信息。
(6)根据(5)所述的信息处理装置，其中，所述生成单元被配置为如果所述成像区域将被重新设置，则进一步生成用于重新设置所述图像的成像顺序的成像顺序信息。
(7)根据(2)所述的信息处理装置，其中，与所述合成图像相关的所述失败包括生成所述合成图像时的组合失败。
(8)根据(7)所述的信息处理装置，其中，所述检测单元被配置为通过评估被包括在所述合成图像的预定方向上的边缘来检测所述组合失败。
(9)根据(7)所述的信息处理装置，其中，所述检测单元被配置为通过评估当生成所述合成图像时的重叠部分的亮度值来检测所述组合失败。
(10)根据(7)至(9)中任一项所述的信息处理装置，其中，所述生成单元被配置为如果通过所述检测单元检测到所述组合失败，则生成用于重新设置所述图像的成像顺序的成像顺序信息。
(11)根据(2)至(10)中任一项所述的信息处理装置，其中，所述检测单元被配置为进一步将焦点位置、白平衡或者亮度上的缺陷检测作为所述失败。
(12)根据(2)至(11)中任一项所述的信息处理装置，进一步包括：
成像控制单元，被配置为基于通过所述检测单元检测到的所述失败的类型来确定是使所述数字显微镜重新捕获各个图像还是重新捕获所述多个图像的全部。
(13)根据(2)至(12)中任一项所述的信息处理装置，其中，所述检测单元被配置为每当捕获所述多个图像中的每一个时评估用于检测所述失败的各个图像。
(14)根据(2)至(12)中任一项所述的信息处理装置，其中，所述检测单元被配置为在生成了所述合成图像之后评估所述合成图像或者所述合成图像的局部图像。
(15)根据(1)至(14)中任一项所述的信息处理装置，进一步包括：
显示控制单元，被配置为能够在执行重新成像之前将通过所述生成单元生成的所述设置信息呈现给用户或者由所述用户进行编辑。
(16)一种成像控制方法，包括：
通过评估使用数字显微镜捕获的图像来检测需要与所述图像相关的重新成像的失败；以及
如果通过所述检测单元检测到所述失败，则生成用于设置在重新成像时的成像条件的设置信息。
(17)一种程序，使计算机起到以下作用：
检测单元，被配置为通过评估使用数字显微镜捕获的图像来检测需要与所述图像相关联的重新成像的失败；以及
生成单元，被配置为如果所述检测单元检测到所述失败，则生成用于设置在重新成像时的成像条件的设置信息。
(18)一种数字显微镜***，包括：
数字显微镜；以及
信息处理装置，所述信息处理装置包括
检测单元，被配置为通过评估使用数字显微镜捕获的图像来检测需要与所述图像相关的重新成像的失败；以及
生成单元，被配置为如果通过所述检测单元检测到所述失败，则生成用于设置在重新成像时的成像条件的设置信息。
(19)一种显示控制装置，包括：
获取单元，被配置为获取当通过评估使用数字显微镜捕获的图像来检测到需要与所述图像相关的重新成像的失败时生成的、用于设置重新成像时的成像条件的设置信息；以及
显示控制单元，被配置为将通过所述获取单元获取的所述设置信息显示在显示面上。
(20)一种信息处理装置，包括：
检测单元，被配置为通过评估图像来检测与通过将利用数字显微镜捕获的多个图像组合所生成的合成图像相关的失败；
生成单元，被配置为如果通过所述检测单元检测到所述失败，则生成用于设置在重新成像时的成像条件的设置信息。
参考标号列表
1   数字显微镜***
10  生物样本
20  成像区域
21  单个区域
30  单个图像
33  重叠部分
35  周缘部分
37  突出部分
40  合成图像
100 扫描仪
110、111  成像控制单元
120、121  数字显微镜
130、131  组合单元
140 失败检测单元
150 设置信息生成单元
160 通信单元
200 服务器
210 通信单元
220 存储单元
230 控制单元
240 失败检测单元
250 设置信息生成单元
300 观测仪
310 通信单元
320 输入单元
330 控制单元
331 获取单元
333 显示控制单元
340 显示单元

Claims (20)

1.一种信息处理装置，包括：
检测单元，被配置为通过评估使用数字显微镜捕获的图像来检测需要与所述图像相关的重新成像的失败；以及
生成单元，被配置为如果通过所述检测单元检测到所述失败，则生成用于设置在重新成像时的成像条件的设置信息。
2.根据权利要求1所述的信息处理装置，其中，所述检测单元被配置为将与通过组合多个图像生成的合成图像相关的失败检测作为所述失败。
3.根据权利要求2所述的信息处理装置，其中，与所述合成图像相关的所述失败包括应当被包括在所述合成图像中的区域的成像遗漏。
4.根据权利要求3所述的信息处理装置，其中，所述检测单元被配置为通过评估在所述图像中纹理存在的方向来检测所述成像遗漏。
5.根据权利要求2所述的信息处理装置，其中，所述生成单元被配置为如果通过所述检测单元检测到所述成像遗漏，则生成用于重新设置成像区域以包括将被新捕获的追加区域的成像区域信息。
6.根据权利要求5所述的信息处理装置，其中，所述生成单元被配置为如果所述成像区域将被重新设置，则进一步生成用于重新设置所述图像的成像顺序的成像顺序信息。
7.根据权利要求2所述的信息处理装置，其中，与所述合成图像相关的所述失败包括生成所述合成图像时的组合失败。
8.根据权利要求7所述的信息处理装置，其中，所述检测单元被配置为通过评估被包括在所述合成图像的预定方向上的边缘来检测所述组合失败。
9.根据权利要求7所述的信息处理装置，其中，所述检测单元被配置为通过评估当生成所述合成图像时的重叠部分的亮度值来检测所述组合失败。
10.根据权利要求7所述的信息处理装置，其中，所述生成单元被配置为如果通过所述检测单元检测到所述组合失败，则生成用于重新设置所述图像的成像顺序的成像顺序信息。
11.根据权利要求2所述的信息处理装置，其中，所述检测单元被配置为进一步将焦点位置、白平衡或者亮度上的缺陷检测作为所述失败。
12.根据权利要求2所述的信息处理装置，进一步包括：
成像控制单元，被配置为基于通过所述检测单元检测到的所述失败的类型来确定是使所述数字显微镜重新捕获各个图像还是重新捕获所述多个图像的全部。
13.根据权利要求2所述的信息处理装置，其中，所述检测单元被配置为每当捕获所述多个图像中的每一个时评估用于检测所述失败的各个图像。
14.根据权利要求2所述的信息处理装置，其中，所述检测单元被配置为在生成了所述合成图像之后评估所述合成图像或者所述合成图像的局部图像。
15.根据权利要求1所述的信息处理装置，进一步包括：
显示控制单元，被配置为能够在执行重新成像之前将通过所述生成单元生成的所述设置信息呈现给用户或者由所述用户进行编辑。
16.一种成像控制方法，包括：
通过评估使用数字显微镜捕获的图像来检测需要与所述图像相关的重新成像的失败；以及
如果通过检测单元检测到所述失败，则生成用于设置在重新成像时的成像条件的设置信息。
17.一种程序，使计算机起到以下功能：
检测单元，被配置为通过评估使用数字显微镜捕获的图像来检测需要与所述图像相关联的重新成像的失败；以及
生成单元，被配置为如果所述检测单元检测到所述失败，则生成用于设置在重新成像时的成像条件的设置信息。
18.一种数字显微镜***，包括：
数字显微镜；以及
信息处理装置，所述信息处理装置包括：
检测单元，被配置为通过评估使用数字显微镜捕获的图像来检测需要与所述图像相关的重新成像的失败；以及
生成单元，被配置为如果通过所述检测单元检测到所述失败，则生成用于设置在重新成像时的成像条件的设置信息。
19.一种显示控制装置，包括：
获取单元，被配置为获取当通过评估使用数字显微镜捕获的图像而检测到需要与所述图像相关的重新成像的失败时生成的、用于设置重新成像时的成像条件的设置信息；以及
显示控制单元，被配置为将通过所述获取单元获取的所述设置信息显示在显示面上。
20.一种信息处理装置，包括：
检测单元，被配置为通过评估图像来检测与通过将利用数字显微镜捕获的多个图像组合所生成的合成图像相关的失败；以及
生成单元，被配置为如果通过所述检测单元检测到所述失败，则生成用于设置在重新成像时的成像条件的设置信息。
CN201280066139.5A 2012-01-11 2012-12-07 信息处理装置、成像控制方法、程序、数字显微镜***、显示控制装置、显示控制方法和程序 Pending CN104081248A (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2012-003214 2012-01-11
JP2012003214 2012-01-11
PCT/JP2012/081801 WO2013105373A1 (ja) 2012-01-11 2012-12-07 情報処理装置、撮像制御方法、プログラム、デジタル顕微鏡システム、表示制御装置、表示制御方法及びプログラム

Publications (1)

Publication Number Publication Date
CN104081248A true CN104081248A (zh) 2014-10-01

Family

ID=48781333

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201280066139.5A Pending CN104081248A (zh) 2012-01-11 2012-12-07 信息处理装置、成像控制方法、程序、数字显微镜***、显示控制装置、显示控制方法和程序

Country Status (5)

Country Link
US (3) US10509218B2 (zh)
EP (1) EP2804038B1 (zh)
JP (1) JP6102749B2 (zh)
CN (1) CN104081248A (zh)
WO (1) WO2013105373A1 (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11269740B2 (en) * 2020-02-28 2022-03-08 Kyocera Document Solutions Inc. Data linkage system and processing monitoring system

Families Citing this family (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5557091B2 (ja) * 2010-03-30 2014-07-23 日本電気株式会社 画像処理装置、画像読取装置、画像処理方法及び画像処理プログラム
EP2804038B1 (en) * 2012-01-11 2018-11-14 Sony Corporation Information processing device, imaging control method, program, digital microscope system
JP2016126242A (ja) * 2015-01-07 2016-07-11 キヤノン株式会社 画像処理装置、画像処理方法およびプログラム
JP6540129B2 (ja) * 2015-03-19 2019-07-10 株式会社ニコン 観察装置、観察方法、及びプログラム
JP6503907B2 (ja) * 2015-06-12 2019-04-24 リコーイメージング株式会社 撮影装置、撮影制御装置、撮影制御方法、及び撮影制御プログラム
JP6488905B2 (ja) * 2015-06-19 2019-03-27 株式会社島津製作所 顕微鏡
JP6572117B2 (ja) * 2015-12-04 2019-09-04 オリンパス株式会社 顕微鏡、画像貼り合わせ方法、プログラム
DE102016110988A1 (de) * 2016-06-15 2017-12-21 Sensovation Ag Verfahren zum digitalen Aufnehmen einer Probe durch ein Mikroskop
JP6887910B2 (ja) * 2017-08-01 2021-06-16 株式会社東芝 画像処理装置
JP6707207B2 (ja) * 2017-09-27 2020-06-10 富士フイルム株式会社 観察装置、観察方法および観察プログラム
US10861156B2 (en) * 2018-02-28 2020-12-08 Case Western Reserve University Quality control for digital pathology slides
US10641659B2 (en) * 2018-08-14 2020-05-05 Shimadzu Corporation Infrared microscope with adjustable connection optical system
JP7263983B2 (ja) * 2019-08-30 2023-04-25 富士通株式会社 撮影漏れ検出装置、及び、撮影漏れ検出方法

Family Cites Families (20)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7369304B2 (en) 1999-10-29 2008-05-06 Cytyc Corporation Cytological autofocusing imaging systems and methods
US7433025B2 (en) * 2002-04-10 2008-10-07 Thermo Fisher Scientific (Asheville) Llc Automated protein crystallization imaging
US20040105000A1 (en) 2002-11-29 2004-06-03 Olymlpus Corporation Microscopic image capture apparatus
JP4544850B2 (ja) 2002-11-29 2010-09-15 オリンパス株式会社 顕微鏡画像撮影装置
US7746404B2 (en) * 2003-11-10 2010-06-29 Hewlett-Packard Development Company, L.P. Digital camera with panoramic image capture
US7792338B2 (en) * 2004-08-16 2010-09-07 Olympus America Inc. Method and apparatus of mechanical stage positioning in virtual microscopy image capture
US7877213B2 (en) * 2004-09-23 2011-01-25 Agilent Technologies, Inc. System and methods for automated processing of multiple chemical arrays
US7336847B2 (en) * 2004-10-11 2008-02-26 Benq Corporation Texture error recovery method using edge preserving spatial interpolation
JP2008535528A (ja) * 2005-01-18 2008-09-04 トレストル コーポレーション スライドの可変品質画像を形成するためのシステムおよび方法
DE102005017642B4 (de) * 2005-04-15 2010-04-08 Vistec Semiconductor Systems Jena Gmbh Verfahren zur Inspektion eines Wafers
US20060256397A1 (en) * 2005-05-12 2006-11-16 Lexmark International, Inc. Method and system for combining images
JP2006317406A (ja) * 2005-05-16 2006-11-24 Olympus Corp 細胞画像撮像装置、細胞画像撮像方法、細胞画像撮像プログラム、及び細胞観察装置
US7424218B2 (en) * 2005-07-28 2008-09-09 Microsoft Corporation Real-time preview for panoramic images
JP4757023B2 (ja) * 2005-12-28 2011-08-24 富士通株式会社 インジェクション装置およびインジェクション方法
JP5014966B2 (ja) * 2007-11-30 2012-08-29 パナソニック電工Ｓｕｎｘ株式会社 拡大観察装置
JP4466968B2 (ja) * 2008-11-10 2010-05-26 キヤノン株式会社 画像処理装置、画象処理方法、プログラム、及びプログラム記憶媒体
JP5316161B2 (ja) 2009-03-27 2013-10-16 ソニー株式会社 観察装置
US8396269B2 (en) * 2010-04-08 2013-03-12 Digital Pathco LLC Image quality assessment including comparison of overlapped margins
JP5887766B2 (ja) * 2011-08-31 2016-03-16 株式会社ニコン 顕微鏡制御装置、画像処理装置、顕微鏡装置およびプログラム
EP2804038B1 (en) 2012-01-11 2018-11-14 Sony Corporation Information processing device, imaging control method, program, digital microscope system

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11269740B2 (en) * 2020-02-28 2022-03-08 Kyocera Document Solutions Inc. Data linkage system and processing monitoring system

Also Published As

Publication number Publication date
US20210208381A1 (en) 2021-07-08
US11422356B2 (en) 2022-08-23
US10983329B2 (en) 2021-04-20
JPWO2013105373A1 (ja) 2015-05-11
JP6102749B2 (ja) 2017-03-29
EP2804038B1 (en) 2018-11-14
EP2804038A4 (en) 2015-08-12
WO2013105373A1 (ja) 2013-07-18
US10509218B2 (en) 2019-12-17
EP2804038A1 (en) 2014-11-19
US20200088986A1 (en) 2020-03-19
US20140362204A1 (en) 2014-12-11

Similar Documents

Publication Publication Date Title
CN104081248A (zh) 信息处理装置、成像控制方法、程序、数字显微镜***、显示控制装置、显示控制方法和程序
US8036463B2 (en) Character extracting apparatus, method, and program
US8401274B2 (en) Image processing apparatus and method
US9959451B2 (en) Image inspection device, image inspection method and image inspection program
US8233041B2 (en) Image processing device and image processing method for performing three dimensional measurements
KR101117472B1 (ko) 육안 검사장치와 육안 검사방법
CN1376895A (zh) 光学式计量装置
JP2012021914A (ja) 画像処理装置及び外観検査方法
US20220084856A1 (en) Defect Inspection Apparatus and Defect Inspection Program
JP2019148438A (ja) 画像処理システムおよび設定方法
US20080063272A1 (en) Character extracting apparatus, method, and program
JP5141470B2 (ja) 画像合成方法および画像処理システム
JP2010133744A (ja) 欠陥検出方法およびその方法を用いた視覚検査装置
JP2007198968A (ja) 画像分類方法及び画像分類装置
JP2019158711A (ja) 画像処理システム、画像処理装置、画像処理プログラム
JP2009192371A (ja) 外観検査装置及び外観検査方法
US6943826B1 (en) Apparatus for debugging imaging devices and method of testing imaging devices
JP7380332B2 (ja) 画像処理装置、画像処理装置の制御方法およびプログラム
WO2013118304A1 (ja) 検査装置、検査方法、および記録媒体
JP3931130B2 (ja) 測定システム、演算方法および演算プログラム
EP1221809A2 (en) Handling system and device for determining the state of a slip
JP2012052931A (ja) 検査装置、検査方法、プログラムおよび記録媒体
KR100556013B1 (ko) 미소 치수 측정 장치
JP2017228005A (ja) 位置特定装置及び位置特定方法
JP3311628B2 (ja) 薄型表示機器の欠陥箇所位置決め装置

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C05 Deemed withdrawal (patent law before 1993)
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20141001