CN113804705A - 检查方法以及检查装置 - Google Patents
检查方法以及检查装置 Download PDFInfo
- Publication number
- CN113804705A CN113804705A CN202110639747.1A CN202110639747A CN113804705A CN 113804705 A CN113804705 A CN 113804705A CN 202110639747 A CN202110639747 A CN 202110639747A CN 113804705 A CN113804705 A CN 113804705A
- Authority
- CN
- China
- Prior art keywords
- image
- images
- image processing
- inspection apparatus
- scanning direction
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/0002—Inspection of images, e.g. flaw detection
- G06T7/0004—Industrial image inspection
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01N—INVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
- G01N21/00—Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
- G01N21/84—Systems specially adapted for particular applications
- G01N21/88—Investigating the presence of flaws or contamination
- G01N21/95—Investigating the presence of flaws or contamination characterised by the material or shape of the object to be examined
- G01N21/956—Inspecting patterns on the surface of objects
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01B—MEASURING LENGTH, THICKNESS OR SIMILAR LINEAR DIMENSIONS; MEASURING ANGLES; MEASURING AREAS; MEASURING IRREGULARITIES OF SURFACES OR CONTOURS
- G01B11/00—Measuring arrangements characterised by the use of optical techniques
- G01B11/24—Measuring arrangements characterised by the use of optical techniques for measuring contours or curvatures
- G01B11/245—Measuring arrangements characterised by the use of optical techniques for measuring contours or curvatures using a plurality of fixed, simultaneously operating transducers
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01N—INVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
- G01N21/00—Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
- G01N21/84—Systems specially adapted for particular applications
- G01N21/88—Investigating the presence of flaws or contamination
- G01N21/8806—Specially adapted optical and illumination features
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01N—INVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
- G01N21/00—Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
- G01N21/84—Systems specially adapted for particular applications
- G01N21/88—Investigating the presence of flaws or contamination
- G01N21/8851—Scan or image signal processing specially adapted therefor, e.g. for scan signal adjustment, for detecting different kinds of defects, for compensating for structures, markings, edges
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/97—Determining parameters from multiple pictures
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/56—Cameras or camera modules comprising electronic image sensors; Control thereof provided with illuminating means
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01N—INVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
- G01N21/00—Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
- G01N21/84—Systems specially adapted for particular applications
- G01N21/88—Investigating the presence of flaws or contamination
- G01N21/8851—Scan or image signal processing specially adapted therefor, e.g. for scan signal adjustment, for detecting different kinds of defects, for compensating for structures, markings, edges
- G01N2021/8887—Scan or image signal processing specially adapted therefor, e.g. for scan signal adjustment, for detecting different kinds of defects, for compensating for structures, markings, edges based on image processing techniques
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10141—Special mode during image acquisition
- G06T2207/10152—Varying illumination
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/20—Special algorithmic details
- G06T2207/20212—Image combination
- G06T2207/20221—Image fusion; Image merging
Landscapes
- Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Physics & Mathematics (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Biochemistry (AREA)
- Life Sciences & Earth Sciences (AREA)
- Chemical & Material Sciences (AREA)
- Analytical Chemistry (AREA)
- Health & Medical Sciences (AREA)
- General Health & Medical Sciences (AREA)
- Immunology (AREA)
- Pathology (AREA)
- Signal Processing (AREA)
- Theoretical Computer Science (AREA)
- Quality & Reliability (AREA)
- Multimedia (AREA)
- Investigating Materials By The Use Of Optical Means Adapted For Particular Applications (AREA)
Abstract
本发明提供一种检查方法以及检查装置。本检查装置具备:图像传感器(101~116),拍摄片材(S);照明装置(2),向片材(S)照射光;和图像处理装置(7),根据图像传感器(101~116)的输出,生成对象物(E)的图像。图像处理装置(7)基于图像传感器(101~116)的输出,生成共同地包含片材(S)的规定范围的图像的取入图像(Pa~Pd)。图像处理装置(7)按生成的每个取入图像(Pa~Pd),提取片材(S)中的对象物(E)的图像。图像处理装置(7)针对提取的对象物E的图像彼此,基于该图像中显现的对象物(E)的特征量来建立关联。图像处理装置(7)将建立关联的对象物(E)的图像彼此合成。
Description
技术领域
本发明涉及使用了多个图像传感器的被检查体的检查装置以及检查方法,提高被检查体中的对象物的检测再现性以及检测概率。
背景技术
在半导体、电子设备、二次电池等的设备领域,已知使用光电变换型的图像传感器,对被检查体中的对象物(异物、缺陷等)进行检测的缺陷检测装置。
近年来,在这些领域中,由于产品的高精度化、小型化导致被检查体中的异物、缺陷的尺寸变小。此外,要求生产的效率化、品质改善,伴随于此,需要制造工序的高速化、成品率提高等。为了制造工序的高速化、成品率提高,需要图像传感器的高分辨率化、高响应性。
但是,在高分辨率并且高响应性的图像传感器的制作中,需要大量的开发费、开发时间。因此,在专利文献1中,通过将多个图像传感器并排并同时处理,实现高速的检测器。
在先技术文献
专利文献
专利文献1:JP专利5172162号公报
发明内容
本发明的一实施方式所涉及的检查装置是通过对被检查体中的对象物的尺寸进行检测来检查所述被检查体的检查装置,具备:多个图像传感器,拍摄所述被检查体;照明装置,向所述被检查体照射光;和图像处理装置,根据所述多个图像传感器的输出,生成所述对象物的图像。所述图像处理装置基于所述多个图像传感器的输出,生成共同地包含所述被检查体的规定范围的图像的多个取入图像,按所生成的多个取入图像的每个取入图像,提取所述被检查体中的对象物的图像,针对所提取的所述对象物的图像彼此,基于该图像中显现的所述对象物的特征量来建立关联,将建立关联的所述对象物的图像彼此合成。
本发明的一实施方式所涉及的检查方法是通过使用检查装置来对所述被检查体中的所述对象物的尺寸进行检测,从而检查所述被检查体的检查方法,所述检查装置具备:多个图像传感器,拍摄被检查体;照明装置,向所述被检查体照射光;和图像处理装置,根据所述多个图像传感器的输出,生成所述被检查体中的对象物的图像,所述检查方法包含:基于所述多个图像传感器的输出,生成共同地包含所述被检查体的规定范围的图像的多个取入图像的步骤;按所生成的多个取入图像的每个取入图像,提取所述被检查体中的对象物的图像的步骤;针对提取出的所述对象物的图像彼此,基于该图像中显现的所述对象物的特征量来建立关联的步骤;和将建立关联的所述对象物的图像彼此合成的步骤。
附图说明
图1是本实施方式所涉及的检查装置的侧视图。
图2是本实施方式所涉及的检查装置的俯视图。
图3是表示本实施方式所涉及的摄像装置中的图像传感器的配置的例子的俯视图。
图4是用于对本实施方式所涉及的图像处理装置中的图像生成方法的流程进行说明的流程图。
图5A是用于对本实施方式所涉及的图像处理装置中的图像生成方法进行说明的图。
图5B是用于对本实施方式所涉及的图像处理装置中的图像生成方法进行说明的图。
图6A是用于对本实施方式所涉及的图像处理装置中的图像生成方法进行说明的图。
图6B是用于对本实施方式所涉及的图像处理装置中的图像生成方法进行说明的图。
图7是用于对本实施方式所涉及的图像处理装置中的对象物的图像的提取方法以及对象物的图像的合成方法的流程进行说明的流程图。
图8是用于对本实施方式所涉及的图像处理装置中的对象物的图像的合成方法进行说明的图。
图9A是表示本实施方式所涉及的检查装置输出的对象物的合成图像的图。
图9B是表示现有的检查装置输出的对象物的合成图像的图。
图10是用于对本实施方式所涉及的检查装置中的传感器的种类和动态图像的种类与光学***的关系进行说明的图。
-符号说明-
1 摄像装置
2 照明装置
101~116 图像传感器
3~5 辊
6 旋转编码器
7 图像处理装置
8 传送带
9~10 驱动装置
Pa~Pd 取入图像
E 对象物。
具体实施方式
在专利文献1中,为了准确地进行对象物的检测,将从图像传感器输出的多个图像合成,生成高精细的图像。在专利文献1中,基于图像传感器的配置,将多个图像的位置分别偏移(修正)后,进行图像的合成。
但是,例如,在照明装置照射的光的方向不恒定的情况下、被检查体是立体等情况下,有时光对被检查体的照射方式不是恒定的。在这种情况下,担心在从图像传感器输出的多个图像中,对象物的位置较大偏离。因此,通过基于图像传感器的配置来分别修正多个图像的位置,可能无法修正对象物的位置的偏离,不能检测对象物。
特别地,被检查体被输送时,进行被检查体的检查的情况下,容易产生对象物的位置的偏离。
本发明的目的在于,在使用了多个图像传感器的检查装置以及检查方法中,提高被检查体中的对象物的检测再现性以及检测概率。
以下,基于附图来对本发明的实施方式详细进行说明。以下的优选的实施方式的说明本质上仅仅为示例,完全并不意图限制本发明、其应用物或者其用途。
图1表示本实施方式所涉及的检查装置的侧视图,图2表示本实施方式所涉及的检查装置的俯视图。如图1以及图2所示,本检查装置具备:摄像装置1、照明装置2、辊3~5、旋转编码器6、图像处理装置7。在辊3~5的外周,卷绕传送带8。
本检查装置进行构成为片状的片材S(被检查体)的检查。具体地,本检查装置对片材S中的对象物进行检测。这里,作为对象物,本检查装置对片材S中的缺陷、异物进行检测。该缺陷中例如不仅包含检查对象的片材S中的短路、断线等片材S的生产时的欠缺部分或不足部分,也包含片材S的损伤(例如,片材S与其他构件接触所导致的划痕)等。本检查装置在检测出的对象物大于规定的尺寸的情况下,判断为片材S中包含对象物。片材S在被载置于传送带8的状态下,在图1以及图2的实线所示的箭头的方向上被输送。
摄像装置1具备多个图像传感器,对由传送带8输送的片材S进行拍摄。这里,摄像装置1在辊4、5之间,构成为拍摄片材S的线传感器。摄像装置1将从图像传感器输出的像素信号发送给图像处理装置7。另外,在以下的说明中,将摄像装置1的扫描方向设为X方向,将摄像装置1的副扫描方向设为Y方向,将与X方向以及Y方向垂直的方向设为Z方向。
照明装置2具有例如包含LED、激光、卤素光源等的光源,在辊4、5之间,对摄像装置1的扫描区域(片材S)进行光的照射。具体地,照明装置2被设置为使得光的照射方向相对于传送带8倾斜角度10°左右。即,摄像装置1以及照明装置2包含暗视场光学***。
辊3通过驱动机构9而旋转,驱动传送带8,将片材S在附图的实线箭头方向输送。驱动机构9例如是与辊3连结的致动器。致动器例如是旋转电机。
辊5通过驱动机构10,使传送带8在X方向(图2中的虚线的箭头方向)以规定的速度蛇行。通过使传送带8在X方向蛇行,进行基于本检查装置的检查后的工序中的片材S的对位。驱动机构10例如是与辊5连结并使辊5在X方向往复运动的致动器。
旋转编码器6对辊4的旋转速度进行检测,对由传送带8输送的片材S的移动量进行检测。旋转编码器6将检测出的片材S的移动量发送给图像处理装置7。
图像处理装置7例如是计算机,基于从摄像装置1接收的像素信号以及旋转编码器6检测的片材S的移动量,通过后述的图像生成方法,生成多个取入图像。图像处理装置7通过后述的对象物的提取方法,从生成的多个取入图像提取对象物E的图像。图像处理装置7通过后述的图像合成方法,将提取的对象物E的图像合成,生成对象物E的合成图像。
(关于摄像装置)
图3是表示本实施方式所涉及的摄像装置中的图像传感器的配置的例子的俯视图。如图3所示,摄像装置1具备图像传感器101~116。图像传感器101~116分别包含多个像素。
这里,以图像处理装置7根据4个图像生成对象物的合成图像的情况为例来进行说明。在本实施方式中,合成图像中的1个像素的X方向上的分割数nx设为2,Y方向上的分割数ny设为2。此外,构成图像传感器101~116的各像素的X方向上的分辨率x设为42.3νm,Y方向上的分辨率y设为42.3μm。此外,图像传感器101~116分别X方向是432像素(18273.6μm),Y方向是1像素(42.3μm)。为了提高对象物的检测精度,优选合成的多个图像是通过处于以小于1个像素的单位错开的位置的多个图像传感器而生成。分割数nx以多个图像传感器相对于作为基准的传感器(例如图像传感器101等)在X方向偏离多少为指标。例如,在分割数nx为2的情况下,是指2个图像传感器在X方向偏离1/2像素(0.5像素)偏离。同样地,分割数ny以多个图像传感器相对于作为基准的传感器(例如图像传感器101等)在Y方向偏离多少为指标。例如,在分割数ny是2的情况下,是指2个图像传感器在Y方向偏离1/2像素(0.5像素)。
图像传感器105以图像传感器101为基准而在Y方向被配置于距离y1的位置。距离y1为y/ny+a×y。a是系数(0以上的整数)。图像传感器105以图像传感器101为基准,配置为具有分辨率y的a倍加上0.5像素(y/ny)的距离。这里,a=94。因此,距离y1=3997.35μm。图像传感器105以图像传感器101为基准而在X方向被配置于相同的位置。
图像传感器109以图像传感器101为基准,被配置于在Y方向距离y2、在X方向距离x1的位置。距离y2为0+b×y。即,图像传感器109以图像传感器101为基准,被配置为具有分辨率y的b倍的距离。“0”是指图像传感器109在Y方向相对于图像传感器101以1像素的整数倍偏离,不包含小数点以下的端数的偏离。B是系数(0以上的整数)。这里,b=189。因此,距离y2=7994.7μm。此外,距离x1为x/nx+c×x。c是系数(0以上的整数)。这里,c=0。因此,距离x1=21.15μm。
图像传感器113以图像传感器101为基准,被配置于在Y方向距离y3、在X方向距离x1的位置。距离y3为y/ny+d×y。d为系数(0以上的整数)。这里,d=283。因此,距离y3=11992.05μm。
通过以上的结构,图像传感器105被配置为相对于图像传感器101,在Y方向偏离94.5像素。若忽略整数部分,则图像传感器105被配置为相对于图像传感器101,在Y方向偏离0.5像素。图像传感器109被配置为相对于图像传感器101,在X方向偏离0.5像素。图像传感器113被配置为相对于图像传感器101,在X方向偏离0.5像素,在Y方向偏离283.5像素。若忽略整数部分,则图像传感器113被配置为相对于图像传感器101,在X方向偏离0.5像素,在Y方向偏离0.5像素。
同样地,图像传感器106、107、108以图像传感器102、103、104为基准,分别被配置为在Y方向距离y1的位置。图像传感器110、111、112以图像传感器102、103、104为基准,分别被配置为在Y方向距离y2、在X方向距离x1的位置。图像传感器114、115、116以图像传感器102、103、104为基准,分别被配置为在Y方向距离y3、在X方向距离x1的位置。
此外,图像传感器102在X方向,被配置为一部分与图像传感器101重叠。这里,图像传感器102在X方向,与图像传感器101重叠423μm(10像素)。此外,在Y方向,相对于图像传感器101,被配置于距离y4(本例中为21像素)的位置。因此,图像传感器102以图像传感器101为基准,被配置为在X方向17850.6μm(422像素)的距离、在Y方向-888.3μm(21像素)的距离。
图像传感器103被配置为在X方向,一部分与图像传感器102重叠。这里,图像传感器103在X方向,与图像传感器102重叠423μm(10像素)。此外,在Y方向,相对于图像传感器102,被配置于距离y4(21像素)的位置。因此,图像传感器103以图像传感器102为基准,被配置于在X方向17850.6μm(422像素)的距离、在Y方向888.3μm(21像素)的距离。此外,在Y方向,相对于图像传感器102,被配置于距离y4(21像素)的位置。图像传感器104在X方向,被配置为一部分与图像传感器103重叠。这里,图像传感器104在X方向,与图像传感器103重叠423μm(10像素)。此外,在Y方向,被配置于相对于图像传感器103为距离y4(21像素)的位置。因此,图像传感器104以图像传感器103为基准,被配置于在X方向17850.6μm(422像素)的距离、在Y方向-888.3μm(21像素)的距离。
同样地,图像传感器106、110、114以图像传感器105、109、113为基准,分别被配置于在X方向422像素的距离、在Y方向-21像素的距离。图像传感器107、111、115以图像传感器106、110、114为基准,分别被配置于在X方向422像素的距离、在Y方向21像素的距离。图像传感器108、112、116以图像传感器107、111、115为基准,分别被配置于在X方向422像素的距离、在Y方向-21像素的距离。
(关于取入图像的生成方法)
参照图1~图6B,对图像处理装置中的图像生成方法进行说明。图4是用于对图像处理装置中的图像生成方法的流程进行说明的流程图,图5A、图5B、图6A以及图6B是用于对图像处理装置中的图像生成方法进行说明的图。具体地,图5A是表示传送带上的标记位置的俯视图,图5B是基于来自摄像装置1的信号而生成的取入图像,图6A是在Y方向偏移的取入图像,图6B是在X方向偏移的取入图像。
在步骤S1,图像处理装置7基于从摄像装置1接收的像素信号(从图像传感器101~116输出的像素信号)、以及旋转编码器6所检测的片材S的移动量,生成片材S的取入图像。
如图5A所示,在传送带8上,形成在X方向延伸的标记L1、L2。图像处理装置7接受图像传感器101~116输出的像素信号,生成处理前的取入图像(图像P1~P16)。另外,图像P1~P16是基于图像传感器101~116的各个像素信号而生成的图像。
在步骤S2,图像处理装置7以标记L1、L2为基准,将取入图像的Y方向的位置偏移(修正)。如图5B以及图6A所示,图像处理装置7修正图像P1~P16的Y方向的位置,以使得标记L1、L2的Y方向的位置一致。
在步骤S3,基于图像传感器101~116的配置,将取入图像的X方向的位置偏移(修正)。如图6A以及图6B所示,基于图像传感器101~116的X方向的配置(X方向的重叠),将图像P1~P16的X方向的位置修正(偏移)。例如,图像传感器101、102在X方向相互重叠10像素,因此图像处理装置7将图像P1、P2在X方向重叠10像素。此时,图像P1、P2的重叠部分设为任意一方的亮度等级,或者设为将双方平均化的亮度等级。
这里,图像处理装置7将图像P1~P4、P5~P8、P9~P12、P13~P16分别在X方向重叠10像素。
在步骤S4,图像处理装置7在X方向重叠的图像P1~P4、P5~P8、P9~P12、P13~P16中,将以坐标原点Oa、Ob、Oc、Od分别为基准的规定区域(图6B中被点划线包围的区域)提取(生成)为取入图像Pa、Pb、Pc、Pd。坐标原点Ob是相对于坐标原点Oa在Y方向偏移1/ny像素(这里,在Y方向0.5像素)的点。坐标原点Oc是相对于坐标原点Oa在X方向偏移1/nx像素(这里,在X方向0.5像素)的点。坐标原点Od是相对于坐标原点Oa在X方向偏移1/nx像素以及在Y方向偏移1/ny像素(这里,在Y方向0.5像素以及在X方向0.5像素)的点。
通过以上的方法,图像处理装置7基于图像传感器101~116的像素信号,生成4个取入图像Pa~Pd。
(关于对象物的图像的提取方法以及对象物的图像的合成方法)
参照图1~图9B,对图像处理装置中的对象物的图像的提取方法以及对象物的图像的合成方法进行说明。图7是用于对图像处理装置中的对象物的图像的提取方法以及对象物的图像的合成方法的流程进行说明的流程图,图8是用于对图像处理装置中的对象物的图像的合成方法进行说明的图。
接下来,图像处理装置7基于取入图像Pa~Pd,进行对象物E的图像的提取以及合成。
在步骤S5,图像处理装置7对图像Pa~Pd,作为前处理而进行滤波处理。例如,图像处理装置7对图像Pa~Pd,进行中值滤波处理、平滑化滤波处理、比较差分滤波处理等强调对象物E(缺陷以及异物)的滤波处理或者去除基底的影响的滤波处理。
在步骤S6,图像处理装置7对图像Pa~Pd进行二值化处理。
在步骤S7,图像处理装置7基于对象物E的第1特征量,提取图像Pa~Pd中的对象物E的图像。例如,作为对象物E的第1特征量,使用对象物E的面积、最大长度、纵横比、纵宽度、横宽度、二值化阈值(亮度阈值)、亮度等级(最大值、最小值、平均值等)、费雷特直径(最大值、最小值等)、主轴的长度(最大值、最小值等)等。此外,图像处理装置7也可以将不包含对象物的片材S的图像数据用作为第1特征量,通过该图像数据与图像Pa~Pd的比较,提取对象物E的图像。此外,图像处理装置7也可以在照明装置2能够在一定方向照射光的情况下,将规定方向的光分量用作为第1特征量,在规定方向的光分量超过规定值的情况下,提取对象物E。
图像处理装置7在规定的像素以上包含对象物E的情况下,提取对象物E的图像。这里,图像处理装置7在2像素以上包含对象物E的情况下,提取对象物E的图像。
在步骤S8,图像处理装置7基于对象物E的第2特征量(特征量),进行提取的对象物E的图像的关联(建立关联)。作为对象物E的第2特征量,是对象物E的面积、纵横比、重心(面积重心、重心的亮度值等)、外接于对象物E的图像的矩形的中心或者重心、亮度等级(最大值、最小值、平均值等)、费雷特直径(最大值、最小值等)、主轴的长度(最大值、最小值等)等。这里,图像处理装置7基于对象物E的图像的重心(面积重心),进行对象物E的图像的关联。
如图8所示,图像处理装置7从图像Pa提取对象物E1~E4,从图像Pb提取对象物E5~E8,从图像Pc提取对象物E9~E12,从图像Pd提取对象物E13~E15。该情况下,图像处理装置7基于对象物E1~E15的各自的重心G1~G15,进行对象物E1~E15的图像的关联。具体地,图像处理装置7在将图像Pa~Pd重叠的情况下,将重心处于对应的位置的对象物E的图像关联。
这里,图像处理装置7在对象物E的重心位置处于规定范围的情况下,进行对象物E的图像的关联。规定范围优选是5像素(0.1mm)~50像素(1.0mm),这里,被设定为16像素(0.32mm)。但是,并不限定于此,也可以根据图像传感器101~116之间的距离设定而将规定范围设定得较大。
首先,在图8中,图像处理装置7进行图像Pa的对象物E的图像与图像Pb、Pc、Pd的对象物E的图像的关联。具体地,由于重心G5、G9、G13存在于重心G1的规定范围内,因此图像处理装置7将对象物E1、E5、E9、E13的图像关联。由于重心G6、G10存在于重心G2的规定范围内,因此图像处理装置7将对象物E2、E6、E10的图像关联。由于重心G7存在于重心G3的规定范围内,因此图像处理装置7将对象物E3、E7的图像关联。
接下来,图像处理装置7进行图像Pb的对象物的图像与图像Pc、Pd的对象物的图像的关联。由于重心G11、G15存在于重心G8的规定范围内,因此图像处理装置7将对象物E8、E11、E15的图像关联。
接下来,图像处理装置7进行图像Pc的对象物的图像与图像Pd的对象物的图像的关联。在图8中,由于图像Pc、Pd中,重心对应的对象物E的图像之中、未关联的对象物E不存在,因此图像处理装置7不进行对象物E的图像的关联。
步骤S9中,图像处理装置7基于第3特征量,进行对象物E的图像合成。作为对象物E的第3特征量,是对象物E的图像的面积、纵横比、重心以及外接于对象物E的图像的矩形的重心等。这里,图像处理装置7基于对象物E的图像的重心,进行对象物E的图像的图像合成。
具体地,图像处理装置7将提取的对象物E的图像尺寸在X方向以及Y方向分别2倍化。并且,图像处理装置7针对被关联的对象物E的图像,以对象物E的图像的重心(第3特征量)为中心进行重叠,将每个像素的亮度等级相加,进行平均化。
例如,在图8中,由于对象物E1、E5、E9、E13的图像被关联,因此图像处理装置7基于4张图像,生成对象物E的图像。
在步骤S10,图像处理装置7输出所生成的对象物E的图像(例如,显示于图略的显示器等)。此时,图像处理装置7输出被合成的对象物E的图像,并且输出未关联的对象物E的图像。在图8中,作为被合成的对象物E的图像,图像处理装置7输出对象物E1、E5、E9、E13的合成图像、对象物E2、E6、E10的合成图像、对象物E8、E11、E15的合成图像,作为未关联的对象物E的图像,输出对象物E4的图像、对象物E12的图像、对象物E14的图像。图像处理装置7对关联的多个对象物的图像实施图像合成处理并生成合成图像,输出合成图像。另一方面,图像处理装置7对未关联的单独的对象物的图像跳过图像合成处理并将图像直接输出。例如,对象物E4的图像不与图像Pb~Pd的对应的区域的图像(不存在对象物的基底图像)合成,直接被输出。对象物E4的图像的画质比对象物E4的图像与基底图像的合成图像的画质高。通过将对象物E4的图像直接输出,能够提高对象物E4的检测精度。
图9A以及图9B是对本实施方式所涉及的检查装置以及现有的检查装置输出的对象物的合成图像进行比较的图。具体地,图9A是本实施方式所涉及的检查装置输出的对象物的合成图像,图9B是现有的检查装置输出的对象物的合成图像。
在现有的检查装置中,图像处理装置7通过上述的取入图像的生成方法,生成取入图像Pa~Pd。图像处理装置7基于图像传感器101~116的配置将取入图像Pa~Pd的X方向以及Y方向的位置偏移(修正),合成取入图像Pa~Pd的基础上,提取对象物E的图像。
如图9A以及图9B所示,相比于现有的检查装置,本实施方式所涉及的检查装置输出的对象物E的图像更加清楚。在现有的检查装置中,进行基于图像传感器的配置的偏移(修正),但不考虑光对被检查体的照射方式,因此被合成的每个取入图像的对象物E的图像的位置偏离,对象物E的合成图像变得不清楚。与此相对地,在本实施方式中,按照每个取入图像提取对象物E的图像之后,以对象物E的重心为中心,合成被提取的对象物E的图像。由此,能够抑制被合成的对象物E的图像的位置的偏离,因此能够使对象物E的合成图像清楚。
通过以上的结构,本检查装置通过检测片材S中的对象物E的尺寸,来检查片材S。本检查装置具备:拍摄片材S的图像传感器101~116、向片材S照射光的照明装置2、根据图像传感器101~116的输出来生成对象物E的图像的图像处理装置7。图像处理装置7基于来自图像传感器101~116的输出,生成共同地包含片材S的规定范围的图像的取入图像Pa~Pd。图像处理装置7按照生成的每个取入图像Pa~Pd,提取片材S中的对象物E的图像。图像处理装置7基于该图像中显现的对象物E的重心(特征量),将提取的对象物E的图像彼此关联(建立关联)。然后,图像处理装置7将关联的对象物E的图像彼此合成。
根据本公开的一方式,如以下所示,在使用了多个图像传感器的检查装置以及检查方法中,能够准确地检测被检查体中的对象物的尺寸(大小),因此能够提高被检查体中的对象物的检测再现性以及检测概率。
在基于图像传感器101~116的配置,合成取入图像Pa~Pd的情况下,担心根据光对片材S的照射方式,每个取入图像Pa~Pd的对象物E的位置较大偏离。因此,担心通过基于图像传感器的位置的取入图像Pa~Pd的修正,不能修正对象物E的位置的偏离,不能检测对象物E。与此相对地,在本检查装置中,对象物E的图像是按照每个取入图像Pa~Pd而被提取的,提取的对象物E的图像彼此基于特征量而被建立关联并合成。由此,能够抑制每个取入图像Pa~Pd的对象物E的位置的偏离,因此能够准确地进行对象物E的图像的合成,能够准确地检测被检查体中的对象物的尺寸(大小)。因此,能够提高被检查体(片材S)中的对象物(异物或者缺陷)的检测再现性以及检测概率。
此外,图像处理装置7不将未关联(未建立关联)的对象物E的图像与其他对象物E的图像合成而输出。由此,能够提高被检查体(片材S)中的对象物的检测再现性以及检测概率。
此外,图像传感器101~116分别将X方向的分辨率设为x,将Y方向的分辨率设为y。该情况下,图像传感器101~104、105~108、109~112、113~116分别在X方向按照每(1/nx)+mx像素排列配置。图像传感器101、105、109、113在Y方向按照每(1/ny)+py像素排列配置。图像传感器102、106、110、114在Y方向按照每(1/ny)+py像素排列配置。图像传感器103、107、111、115在Y方向按照每(1/ny)+py像素排列配置。图像传感器104、108、112、116在Y方向按照每(1/ny)+py像素排列配置。其中,nx是X方向上的像素的分割数,ny是Y方向上的像素的分割数,m、p是整数的系数。由此,1个像素在X方向被分割为分割数nx,在Y方向被分割为分割数ny,因此能够提高摄像装置的X方向以及Y方向的分辨率。
(其他的实施方式)
如以上那样,作为本申请中公开的技术的示例,对实施方式进行了说明。但是,本公开中的技术并不局限于此,也能够适用于适当进行了变更、置换、附加、省略等的实施方式。
另外,在上述实施方式中,摄像装置1以及照明装置2由暗视场光学***构成,也可以由明视场光学***构成。此外,摄像装置1构成为线传感器,但也可以构成为区域传感器。此外,图像处理装置7可以根据从图像传感器101~116输出的像素信号生成动态图像,也可以生成静止图像。
图10是用于对本实施方式所涉及的检查装置中的传感器的种类、动态图像的种类、光学***的关系进行说明的图。将摄像误差为设定分辨率以上表示为A,将摄像误差小于设定分辨率~设定分辨率的十分之一以上表示为B,将摄像误差小于设定分辨率的十分之一表示为C。如图10所示,本检查装置在摄像装置1以及照明装置2在由暗视场光学***构成的情况下,能够生成最清楚的对象物E的合成图像。这是由于通过低角度地进行照明,对象物的基底(地面等级)不被照射光(不存在异物的位置的基底的明亮度为低等级),对象物照射光,因此SN(信号噪声(异物的亮度/基底的亮度))比提高。另外,即使照明装置2由明视场光学***构成,也能够得到与本检查装置同样的效果,即使从图像传感器生成动态图像也能够得到同样的效果。
此外,摄像装置1的图像传感器并不局限于上述配置。此外,摄像装置1的图像传感器的数量并不局限于上述数量。
此外,构成各图像传感器的像素数并不局限于上述的像素数。
此外,图像处理装置7生成的取入图像并不局限于4张。图像处理装置7生成至少2张取入图像即可。
此外,本检查装置所检查的被检查体并不局限于构成为片状。
产业上的可利用性
本发明的检查装置能够用于半导体、电子设备、二次电池等中使用的构件所包含的异物、缺陷等的检查。
Claims (8)
1.一种检查装置,通过对被检查体中的对象物的尺寸进行检测,来检查所述被检查体,所述检查装置具备:
多个图像传感器,拍摄所述被检查体;
照明装置,向所述被检查体照射光;和
图像处理装置,根据所述多个图像传感器的输出,生成所述对象物的图像,
所述图像处理装置基于所述多个图像传感器的输出,生成共同地包含所述被检查体的规定范围的图像的多个取入图像,
所述图像处理装置按生成的多个取入图像的每个取入图像,提取所述被检查体中的对象物的图像,
所述图像处理装置针对提取出的所述对象物的图像彼此,基于该图像中显现的所述对象物的特征量来建立关联,
所述图像处理装置将建立关联的所述对象物的图像彼此合成。
2.根据权利要求1所述的检查装置,其中,
所述图像处理装置还输出与其他对象物的图像未建立关联的对象物的图像。
3.根据权利要求1或者2所述的检查装置,其中,
所述特征量包含该图像中显现的所述对象物的面积、纵横比、重心、外接于所述对象物的矩形的中心及重心、亮度等级、费雷特直径以及主轴的长度的任意一个。
4.根据权利要求1~3的任意一项所述的检查装置,其中,
所述多个图像传感器包含:
第1图像传感器;和
第2图像传感器,被配置为在所述第1图像传感器扫描被检查体的方向即扫描方向分离第1距离,并且,在与所述扫描方向垂直的方向即副扫描方向与所述第1图像传感器分离第2距离,
其中,所述第1距离通过(x/nx)+m×x来表示,所述第2距离通过(y/ny)+p×y来表示,x表示所述扫描方向的分辨率,y表示所述副扫描方向的分辨率,nx是所述扫描方向上的像素的分割数,ny是所述副扫描方向上的像素的分割数,m、p是整数的系数。
5.根据权利要求1~4的任意一项所述的检查装置,其中,
所述检查装置具备:
传送带,传送所述被检查体;
第1驱动机构,使所述传送带在与所述多个图像传感器扫描所述被检查体的方向即扫描方向垂直的副扫描方向移动;和
第2驱动机构,在所述第1驱动机构使所述传送带在所述副扫描方向移动的期间,使所述传送带在所述扫描方向往复移动。
6.根据权利要求5所述的检查装置,其中,
在所述被检查体被所述传送带在所述副扫描方向输送时,所述多个图像传感器扫描所述被检查体。
7.根据权利要求1~6的任意一项所述的检查装置,其中,
所述图像传感器以及所述照明装置由暗视场光学***构成。
8.一种检查方法,通过使用检查装置对所述被检查体中的所述对象物的尺寸进行检测,从而检查所述被检查体,所述检查装置具备:多个图像传感器,拍摄被检查体;照明装置,向所述被检查体照射光;和图像处理装置,根据所述多个图像传感器的输出,生成所述被检查体中的对象物的图像,
所述检查方法包含:
基于所述多个图像传感器的输出,生成共同地包含所述被检查体的规定范围的图像的多个取入图像的步骤;
按所生成的多个取入图像的每个取入图像,提取所述被检查体中的对象物的图像的步骤;
针对提取出的所述对象物的图像彼此,基于该图像中显现的所述对象物的特征量来建立关联的步骤;和
将建立关联的所述对象物的图像彼此合成的步骤。
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2020-102355 | 2020-06-12 | ||
JP2020102355A JP2021196242A (ja) | 2020-06-12 | 2020-06-12 | 検出方法および検出装置 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN113804705A true CN113804705A (zh) | 2021-12-17 |
Family
ID=78718879
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202110639747.1A Pending CN113804705A (zh) | 2020-06-12 | 2021-06-08 | 检查方法以及检查装置 |
Country Status (4)
Country | Link |
---|---|
US (1) | US20210390684A1 (zh) |
JP (1) | JP2021196242A (zh) |
CN (1) | CN113804705A (zh) |
DE (1) | DE102021114705A1 (zh) |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR102555250B1 (ko) * | 2021-02-03 | 2023-07-14 | (주)인스케이프 | 이차전지 외관 검사 장치 및 외관 검사 방법 |
Family Cites Families (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH05172162A (ja) | 1991-12-19 | 1993-07-09 | Toyota Motor Corp | 半自動変速装置の制御装置 |
JP5172162B2 (ja) * | 2006-08-25 | 2013-03-27 | 株式会社日立ハイテクノロジーズ | 欠陥検査装置 |
JP4726983B2 (ja) * | 2009-10-30 | 2011-07-20 | 住友化学株式会社 | 欠陥検査システム、並びに、それに用いる、欠陥検査用撮影装置、欠陥検査用画像処理装置、欠陥検査用画像処理プログラム、記録媒体、および欠陥検査用画像処理方法 |
-
2020
- 2020-06-12 JP JP2020102355A patent/JP2021196242A/ja active Pending
-
2021
- 2021-06-03 US US17/338,594 patent/US20210390684A1/en active Pending
- 2021-06-08 CN CN202110639747.1A patent/CN113804705A/zh active Pending
- 2021-06-08 DE DE102021114705.0A patent/DE102021114705A1/de active Pending
Also Published As
Publication number | Publication date |
---|---|
US20210390684A1 (en) | 2021-12-16 |
DE102021114705A1 (de) | 2021-12-16 |
JP2021196242A (ja) | 2021-12-27 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP5585228B2 (ja) | 画像検査装置、画像検査方法、及び画像形成装置 | |
JP6348789B2 (ja) | ワーク処理装置、ワーク搬送システム | |
JP2009068995A (ja) | マイクロアレイ装置 | |
KR20140146137A (ko) | 화상 처리 시스템, 화상 처리 방법 및 화상 처리 프로그램이 기록된 컴퓨터 판독가능한 기록 매체 | |
CN113804705A (zh) | 检查方法以及检查装置 | |
KR102399860B1 (ko) | 워크 처리 장치, 워크 반송 시스템 | |
US20220405904A1 (en) | Inspection method and inspection apparatus | |
KR20060117834A (ko) | 결함 검사 장치 및 그 동작방법 | |
JP2006038775A (ja) | フラットパネルディスプレイ用透明基板の画像検査装置及び画像検査方法 | |
JP2011252886A (ja) | 印刷物の検査方法及び印刷物の検査装置 | |
WO2023105849A1 (ja) | 検査方法および検査装置 | |
CN201673124U (zh) | 自动光学检测*** | |
JP2015059854A (ja) | 欠陥検査方法及び欠陥検査装置 | |
JP4884540B2 (ja) | 基板検査装置及び基板検査方法 | |
JP4563184B2 (ja) | ムラ欠陥の検査方法および装置 | |
JP2011112593A (ja) | 印刷物の検査方法及び検査装置 | |
CN115682925A (zh) | 检查方法以及检查装置 | |
JP4613090B2 (ja) | 検査装置 | |
JPH1091837A (ja) | 認識対象物のエッジ検出装置 | |
JP2005274325A (ja) | 金属帯の光学式欠陥検査方法 | |
JP2011196827A (ja) | 欠陥検査装置、欠陥検査方法、及びパターン基板の製造方法 | |
JP2005030996A (ja) | 繰り返しパターンを有する基板の検査方法 | |
JP5962587B2 (ja) | 検出装置および検出方法 | |
JP2014126464A (ja) | 検査装置及び検査方法 | |
JP2000348174A (ja) | カード検査装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |