JP2016194434A - Inspection system and inspection method - Google Patents
Inspection system and inspection method Download PDFInfo
- Publication number
- JP2016194434A JP2016194434A JP2015073821A JP2015073821A JP2016194434A JP 2016194434 A JP2016194434 A JP 2016194434A JP 2015073821 A JP2015073821 A JP 2015073821A JP 2015073821 A JP2015073821 A JP 2015073821A JP 2016194434 A JP2016194434 A JP 2016194434A
- Authority
- JP
- Japan
- Prior art keywords
- inspection
- defect
- inspection object
- image
- photographing unit
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Landscapes
- Length Measuring Devices By Optical Means (AREA)
- Investigating Materials By The Use Of Optical Means Adapted For Particular Applications (AREA)
Abstract
Description
本発明は、検査システムおよび検査方法に関する。 The present invention relates to an inspection system and an inspection method.
めっき処理など各種の処理を行った基板等については、外観検査を行って欠陥の有無を検出する。外観検査は、検査対象の撮影画像の画像処理を行うなどして自動で行われるが、検査結果の確認や欠陥種類を判別するため、目視による検査を改めて行うことが一般的である。特許文献1には、このような目視検査を行うためのシステムの一例が開示されている。 About the board | substrate etc. which performed various processes, such as a plating process, the external appearance inspection is performed and the presence or absence of a defect is detected. The appearance inspection is automatically performed by performing image processing of a photographed image to be inspected, but in general, visual inspection is performed again in order to confirm the inspection result and determine the defect type. Patent Document 1 discloses an example of a system for performing such a visual inspection.
しかしながら、目視による検査を行う場合、作業の疲れによる集中力低下や視力低下が起こり、効率の面で問題があった。また、上記のシステムでは欠陥種類の判別を自動で行うことができなかった。 However, when visual inspection is performed, there is a problem in terms of efficiency due to a decrease in concentration and visual acuity due to work fatigue. In addition, the above system cannot automatically determine the type of defect.
本発明は、欠陥検査を好適に行える検査システムを提供することを目的とする。 An object of this invention is to provide the inspection system which can perform a defect inspection suitably.
前述した課題を解決するための第1の発明は、検査対象の周囲から検査対象に検査光を照射し、検査対象の法線方向に反射した検査光をエリアカメラで受光してカラー画像を撮影するエリアカメラ撮影部と、前記カラー画像の色情報を用いて検査対象の欠陥検査を行う第1の検査装置と、を備えることを特徴とする検査システムである。 The first invention for solving the above-mentioned problem is to irradiate the inspection object with the inspection light from around the inspection object, and to receive the inspection light reflected in the normal direction of the inspection object with the area camera to shoot a color image An inspection system comprising: an area camera photographing unit that performs inspection, and a first inspection device that performs defect inspection of an inspection object using color information of the color image.
本発明では、エリアカメラを用いて検査対象をカラー画像で撮影することにより、色情報を用いて目視による見えと変わらない条件で自動で欠陥検査ができるようになり、また高解像度の画像を用いて高精度な検査ができる。結果、高効率かつ高精度で欠陥検査を行えるようになり、目視検査の省略により人件費の削減も可能になる。さらに、検査対象の周囲から照明を行うことで、銅板の圧延筋など、品質に影響を与えない程度の微小な凹凸が検査結果に影響を与えるのを抑制し、検査対象の処理ムラや汚れといった欠陥を好適に検査できる。 In the present invention, by using a color image to image an inspection object using an area camera, it becomes possible to automatically inspect defects using color information under conditions that are not different from the visual appearance, and use high-resolution images. High-precision inspection. As a result, defect inspection can be performed with high efficiency and high accuracy, and labor costs can be reduced by omitting visual inspection. Furthermore, by illuminating from the periphery of the inspection target, it is possible to suppress the minute unevenness that does not affect the quality, such as rolling strips on the copper plate, from affecting the inspection result, and to process unevenness and dirt on the inspection target. Defects can be suitably inspected.
前記エリアカメラ撮影部は、前記エリアカメラと、検査対象と前記エリアカメラの間に配置され、ドーム内面から検査対象に向けて検査光を照射するドーム照明と、前記ドーム照明と前記エリアカメラの間に配置され、検査対象の法線方向に沿って検査光を照射する同軸照明と、を有することが望ましい。また前記エリアカメラ撮影部のドーム照明は、前記ドーム内面において検査対象の法線方向に当たる部分に孔を有する
具体的には、例えば上記のような構成を採ることで、検査対象の周囲から好適に照明を行うことができる。
The area camera photographing unit is arranged between the area camera, the inspection object and the area camera, and dome illumination for irradiating inspection light from the inner surface of the dome toward the inspection object, and between the dome illumination and the area camera. And a coaxial illumination that irradiates the inspection light along the normal direction of the inspection object. In addition, the dome illumination of the area camera photographing unit has a hole in a portion corresponding to the normal direction of the inspection object on the inner surface of the dome. Lighting can be performed.
前記第1の検査装置は、前記欠陥検査として、前記カラー画像の色情報を用いて検査対象の欠陥種類を判別することが望ましい。
色情報を用いて欠陥種類を自動で判別することで、各種の欠陥の発生率をプロセス工程へフィードバックするなどして品質向上に寄与できる。
It is desirable that the first inspection apparatus discriminates a defect type to be inspected using color information of the color image as the defect inspection.
By automatically discriminating the defect type using the color information, it is possible to contribute to quality improvement by feeding back the occurrence rate of various defects to the process process.
検査対象の周囲から検査対象に検査光を照射し、検査対象の法線方向に反射した検査光をラインカメラで受光してグレースケール画像を撮影するラインカメラ撮影部と、前記グレースケール画像に基づいて検査対象の欠陥検査を行う第2の検査装置と、を更に備え、前記第2の検査装置は、前記欠陥検査として、前記グレースケール画像を用いて検査対象の欠陥の検出を行うことが望ましい。
ラインカメラによる検査を併用することで、検査効率を向上させることができる。すなわち、ラインカメラはエリアカメラに比べてカメラ分解能が低いが視野が広く、検査対象を搬送しつつ撮影を行って高速で欠陥を検出できる。さらに、ラインカメラ撮影部においても検査対象の周囲から照明を行うことで、品質に影響を与えない程度の微小な凹凸が検査結果に影響を与えるのを抑制できる。
A line camera imaging unit that irradiates the inspection light from around the inspection object, receives the inspection light reflected in the normal direction of the inspection object by the line camera, and shoots a gray scale image, and based on the gray scale image And a second inspection device that inspects the defect to be inspected, and the second inspection device preferably detects the defect to be inspected using the grayscale image as the defect inspection. .
Inspection efficiency can be improved by using inspection with a line camera together. That is, the line camera has a lower camera resolution than the area camera, but has a wide field of view, and can detect defects at high speed by performing imaging while conveying the inspection object. Furthermore, by illuminating from the periphery of the inspection target also in the line camera photographing unit, it is possible to suppress the minute unevenness that does not affect the quality from affecting the inspection result.
また、前記エリアカメラ撮影部は、前記第2の検査装置で検出した欠陥の位置情報を用いて、前記欠陥を含む、検査対象の一部の範囲を撮影することが望ましい。
エリアカメラ撮影部では検査対象全体を撮影する必要はなく、第2の検査装置で検出した欠陥を含む一部の範囲を撮影すればよいので、高解像度での撮影を行っても検査効率が低下しない。
Moreover, it is preferable that the area camera photographing unit photographs a partial range of the inspection target including the defect using position information of the defect detected by the second inspection apparatus.
The area camera imaging unit does not need to image the entire inspection object, and it is only necessary to image a part of the area including the defect detected by the second inspection apparatus. do not do.
検査対象は、所定のパターンのパターン部分を複数有するものであり、前記エリアカメラ撮影部は、検査対象のパターン部分において前記欠陥を含む範囲を撮影するとともに、別のパターン部分において、前記範囲に対応する範囲を撮影することが望ましい。
欠陥を含む範囲の画像と比較するための画像を、検査時に検査対象から撮影して取得することで、事前に正の画像を用意する必要がなく、検査の手間が省ける。
The inspection object has a plurality of pattern parts of a predetermined pattern, and the area camera photographing unit photographs a range including the defect in the pattern part to be inspected and corresponds to the range in another pattern part. It is desirable to take a picture of the range.
By capturing and acquiring an image for comparison with an image in a range including a defect from an inspection target at the time of inspection, it is not necessary to prepare a positive image in advance, and the labor of inspection can be saved.
前記ラインカメラ撮影部は、前記ラインカメラと、検査対象と前記ラインカメラの間に配置され、ドーム内面から検査対象に向けて検査光を照射するドーム照明と、前記ドーム照明と前記ラインカメラの間に配置され、検査対象の法線方向に沿って検査光を照射する同軸照明と、を含む撮影ユニットを有することが望ましい。また前記ラインカメラ撮影部のドーム照明は、前記ドーム内面において検査対象の法線方向に当たる部分に孔を有することが望ましい。
ラインカメラ撮影部の具体的な構成もエリアカメラ撮影部と略同様とでき、これにより検査対象の周囲から好適に照明を行うことができる。
The line camera photographing unit is disposed between the line camera, the inspection object, and the line camera, and dome illumination that irradiates inspection light from the inner surface of the dome toward the inspection object, and between the dome illumination and the line camera. It is desirable to have an imaging unit including a coaxial illumination that is arranged in the vertical direction and irradiates the inspection light along the normal direction of the inspection target. Moreover, it is desirable that the dome illumination of the line camera photographing unit has a hole in a portion of the inner surface of the dome that is in the normal direction of the inspection object.
The specific configuration of the line camera photographing unit can be substantially the same as that of the area camera photographing unit, and accordingly, illumination can be suitably performed from around the inspection object.
前記ラインカメラ撮影部は、複数の前記撮影ユニットを有することが望ましい。少なくともいずれかの前記撮影ユニットは、他の前記撮影ユニットと検査光の色が異なることが望ましい。
これにより、検査対象の複数の領域ごとに、検査に適した照明を行って検査対象を撮影し、欠陥検査が好適に行えるようになる。
The line camera imaging unit preferably includes a plurality of the imaging units. It is desirable that at least one of the imaging units has a different color of inspection light from the other imaging units.
Thereby, illumination suitable for inspection is performed for each of a plurality of regions to be inspected, and the inspection target is photographed, so that defect inspection can be suitably performed.
前記第2の検査装置は、検査対象の複数の領域のそれぞれについて、前記領域を特定するためのマスク画像を用いて欠陥の検出を行うことが望ましい。また、前記第1の検査装置は、前記マスク画像に基づいて、欠陥が検査対象上のどの領域に位置するかを特定することが望ましい。
これにより検査対象の領域ごとの検査を行うことで、各領域の材質等に応じた欠陥検査ができ、誤検知なども抑制できる。また両検査装置で共通のマスク画像を用いることで、検査の手間も省略できる。
It is preferable that the second inspection apparatus detects a defect for each of a plurality of regions to be inspected using a mask image for specifying the region. Further, it is desirable that the first inspection apparatus specifies in which region on the inspection object the defect is located based on the mask image.
Thus, by performing inspection for each region to be inspected, it is possible to perform defect inspection according to the material of each region, and to suppress erroneous detection. Further, by using a mask image common to both inspection apparatuses, the labor of inspection can be omitted.
第2の発明は、エリアカメラ撮影部において、検査対象の周囲から検査対象に検査光を照射し、検査対象の法線方向に反射した検査光をエリアカメラで受光してカラー画像を撮影するステップと、第1の検査装置により、前記カラー画像の色情報を用いて検査対象の欠陥検査を行うステップと、を有することを特徴とする検査方法である。 According to a second aspect of the present invention, in the area camera photographing unit, the inspection light is irradiated from the periphery of the inspection object, and the inspection light reflected in the normal direction of the inspection object is received by the area camera to photograph a color image. And a step of inspecting a defect to be inspected using the color information of the color image by the first inspection apparatus.
本発明により、欠陥検査を好適に行える検査システムを提供することができる。 According to the present invention, an inspection system capable of suitably performing defect inspection can be provided.
以下、図面に基づいて本発明の好適な実施形態について詳細に説明する。 Hereinafter, preferred embodiments of the present invention will be described in detail with reference to the drawings.
(1.検査システム1の概略構成)
図1は本発明の実施形態に係る検査システム1の概略構成を示す図である。図1に示す検査システム1は、ラインカメラ検査部100とエリアカメラ検査部200を有し、これらの検査部で検査対象10の検査を行うものである。
(1. Schematic configuration of inspection system 1)
FIG. 1 is a diagram showing a schematic configuration of an inspection system 1 according to an embodiment of the present invention. The inspection system 1 shown in FIG. 1 includes a line
ラインカメラ検査部100は、ラインカメラ撮影部2、検査装置3(第2の検査装置)等から構成される。エリアカメラ検査部200は、エリアカメラ撮影部5、検査装置6(第1の検査装置)等から構成される。
The line
(2.検査対象10)
図2(a)は本実施形態に係る検査対象10を示す図である。図2(a)に示す検査対象10は、銅板等の基材の表面にパターンを形成したパターン部分10aが、基材上に複数面付けされたものである。図の例では、パターン部分10aが縦2×横3の計6面面付けされている。
(2. Inspection object 10)
FIG. 2A is a diagram showing the
図2(b)は、図2(a)の線a−aに沿ったパターン部分10aの鉛直方向断面を見たものである。本実施形態では、パターン部分10aにおいて、基材上に亜鉛めっきを施しためっき領域12、基材のハーフエッチングを行ったハーフエッチング領域13、及びめっき処理やハーフエッチング処理が行われていない基材そのものの領域である素材領域11によるパターンが形成されているものとする。
FIG. 2B is a view of a vertical section of the
また図2(a)の例では、左上のパターン部分10aにおいて、素材領域11の欠陥111とハーフエッチング領域13の欠陥131が存在し、その右隣のパターン部分10aにおいて、めっき領域12の欠陥121が存在するものとする。
In the example of FIG. 2A, the
これらの欠陥としては、例えば素材領域11であれば洗浄後のレジスト残り等があり、めっき領域12であればめっき欠けなどがある。またハーフエッチング領域13であれば過度なエッチングによる薄厚化等がある。ただし、欠陥としては他にも検査対象10の汚れや処理ムラ等があり、上記したものに限ることはない。
Examples of these defects include residual resist after cleaning in the case of the
(3.ラインカメラ検査部100)
前記したように、ラインカメラ検査部100は、ラインカメラ撮影部2、検査装置3等から構成される。
(3. Line camera inspection unit 100)
As described above, the line
ラインカメラ撮影部2は、検査装置3の制御によりラインカメラで検査対象10を撮影するものである。図3はラインカメラ撮影部2を示す図である。ラインカメラ撮影部2は、3つの撮影ユニット20a、20b、20cから構成され、搬送装置25によって矢印Aに示す方向に搬送される検査対象10の撮影を順次行う。
The line
撮影ユニット20aでは、ラインカメラ21、同軸照明22、ドーム照明23が検査対象10の表面側に設けられる。撮影ユニット20aでは、同軸照明22及びドーム照明23を用いて検査対象10の周囲から検査対象10の表面に検査光26を照射し、検査対象10の表面の法線方向に反射した検査光26をラインカメラ21で受光して検査対象10の撮影を行う。
In the
ラインカメラ21は、ライン状に配列した複数の受光素子の各々で検査光を受光するものであり、ラインカメラ21の長手方向(受光素子の配列方向)を検査対象10の搬送方向と平面上直交する方向に合わせて配置される。本実施形態では、ラインカメラ21によりグレースケール画像による撮影が行われる。
The
同軸照明22は、検査対象10の表面の法線方向(同軸方向)に沿って検査光26を照射するものである。同軸照明22では、光源221から出射した白色の検査光26がハーフミラー222によって反射され、検査対象10の表面の法線方向に沿って検査対象10へと照射される。
The
ドーム照明23は、ドーム内面から白色の検査光26を検査対象10に向けて照射するものである。ドーム照明23は検査対象10とラインカメラ21の間に配置されており、さらにドーム照明23とラインカメラ21の間には同軸照明22が配置される。ドーム照明23のドーム内面の頂部には孔231が設けられる。この部分は検査対象10の表面の法線方向に対応しており、孔231を介して同軸照明22からの検査光26を通すことができるようになっている。
The
撮影ユニット20aは、特に検査対象10の素材領域11を検査するために用いられ、上記の同軸照明22とドーム照明23を併用することで、検査対象10の周囲から検査対象10に検査光26を照射できる。
The
撮影ユニット20bも撮影ユニット20aと同様のラインカメラ21、同軸照明22、ドーム照明23の構成を有するが、青色の検査光を用いる点で異なる。撮影ユニット20bは特に検査対象10のめっき領域12を検査するために用いられ、めっき層での反射率が高い青色の検査光を用いることで欠陥が検出しやすくなる。
The photographing
撮影ユニット20cでは、検査対象10の裏面を検査するため、撮影ユニット20aと同様のラインカメラ21、同軸照明22、ドーム照明23の構成が検査対象10の裏面側に設けられる。なお、この裏面の検査については裏面の撮影画像から既知の種々の方法により行うことができ、詳細な説明は省略する。
In the
撮影ユニット20cでは、さらに、検査対象10の表面側に照明24が設けられる。照明24は検査対象10の表面の法線方向に沿って検査対象10に白色の検査光28を照射する。撮影ユニット20cでは、検査対象10を透過した検査光28をラインカメラ21で受光して撮影を行うことができ、この撮影画像から検査対象10のハーフエッチング領域13を検査することができる。例えばハーフエッチング領域13に過度なエッチングにより薄厚化した欠陥があると、透過する検査光28の量が多くなる。
In the
検査装置3は、ラインカメラ撮影部2を制御して検査対象10の撮影をグレースケール画像にて行い、このグレースケール画像に基づいて検査対象10の欠陥検査を行うものである。
The inspection device 3 controls the line
図4は検査装置3のハードウェア構成を示す図である。図4に示すように、検査装置3は、例えば制御部31、記憶部32、入力部33、表示部34、通信部35等をバス36により接続して構成されたコンピュータにより実現できる。但しこれに限ることなく、適宜様々な構成をとることができる。
FIG. 4 is a diagram illustrating a hardware configuration of the inspection apparatus 3. As shown in FIG. 4, the inspection device 3 can be realized by a computer configured by connecting a
制御部31は、CPU、ROM、RAMなどから構成される。CPUは、記憶部32、ROMなどの記録媒体に格納された検査装置3の処理に係るプログラムをRAM上のワークメモリ領域に呼び出して実行する。ROMは不揮発性メモリであり、コンピュータのブートプログラムやBIOSなどのプログラム、データなどを恒久的に保持している。RAMは揮発性メモリであり、記憶部32、ROMなどからロードしたプログラムやデータを一時的に保持するとともに、制御部31が各種処理を行う為に使用するワークエリアを備える。
The
記憶部32は例えばハードディスクドライブであり、制御部31が実行するプログラム、プログラム実行に必要なデータ、OSなどが格納される。これらのプログラムやデータは、制御部31により必要に応じて読み出され、RAMに移して実行される。
The
入力部33はデータの入力を行い、例えばキーボード、マウスなどのポインティングデバイス、テンキーなどの入力装置を有する。
表示部34は、液晶パネルなどのディスプレイ装置と、ディスプレイ装置と連携して表示機能を実現するための論理回路(ビデオアダプタ等)を有する。
The
The
通信部35は、ネットワーク等を介した通信を媒介する通信インタフェースであり、他の装置との間で通信を行う。
バス36は、各部間の制御信号、データ信号等の授受を媒介する経路である。
The
The
(4.エリアカメラ検査部200)
前記したように、エリアカメラ検査部200は、エリアカメラ撮影部5、検査装置6等から構成される。
(4. Area camera inspection unit 200)
As described above, the area
エリアカメラ撮影部5は、検査装置6の制御によりエリアカメラで検査対象10を撮影するものである。図5(a)はエリアカメラ撮影部5を示す図である。エリアカメラ撮影部5では、エリアカメラ51、同軸照明52、ドーム照明53が検査対象10の表面側に設けられ、これにより検査ステージ55上の検査対象10の表面の撮影を行う。
The area
エリアカメラ撮影部5では、同軸照明52及びドーム照明53を用いて検査対象10の周囲から検査対象10の表面に検査光56を照射し、検査対象10の表面の法線方向に反射した検査光56をエリアカメラ51で受光して検査対象10の撮影を行う。
In the area
エリアカメラ51は、面状に配列した複数の受光素子の各々で検査光を受光するものであり、本実施形態ではカラー画像による撮影が行われる。
The
同軸照明52は前記した撮影ユニット20aの同軸照明22(図3参照)と同様であり、光源521から出射した白色の検査光56をハーフミラー522によって反射し、検査対象10の表面の法線方向に沿って検査対象10へと照射するものである。
The
ドーム照明53も前記した撮影ユニット20aのドーム照明23(図3参照)と同様の構成となっており、ドーム内面から白色の検査光56を検査対象10に向けて照射する。ドーム照明53が検査対象10とエリアカメラ51の間に配置され、ドーム照明53とエリアカメラ51の間に同軸照明52が配置される点も同様である。ドーム照明53のドーム内面において、検査対象10の表面の法線方向に対応する部分である頂部には孔531が設けられ、孔531を介して同軸照明52からの検査光56を通すことができる。
The
図5(b)は検査ステージ55を上から見た図である。検査ステージ55は、平面上直交する二軸方向(矢印B、C参照)のそれぞれに沿って検査対象10を搬送可能な二軸搬送装置である。
FIG. 5B is a view of the
検査装置6は、エリアカメラ撮影部5を制御して検査対象10の撮影をカラー画像にて行い、このカラー画像の色情報を用いて検査対象10の欠陥検査を行うものである。
The
検査装置6は、検査装置3と同様、制御部、記憶部、入力部、表示部、通信部等をバスにより接続して構成されたコンピュータにより実現できる。但しこれに限ることなく、適宜様々な構成をとることができる。
As with the inspection apparatus 3, the
(5.検査対象10の検査方法)
次に、図6〜図11を参照して検査システム1による検査対象10の検査方法について説明する。
(5. Inspection method of inspection object 10)
Next, an inspection method for the
(5−1.検査方法の概略)
まず図6を参照して検査方法の概略について説明する。図6は検査方法の概略を示すフローチャートである。
(5-1. Outline of inspection method)
First, an outline of the inspection method will be described with reference to FIG. FIG. 6 is a flowchart showing an outline of the inspection method.
本実施形態では、まずラインカメラ検査部100で検査対象10の欠陥検査を行う(S1)。S1では、欠陥検査として、検査対象10の欠陥の検出が行われる。
In the present embodiment, the line
S1の欠陥検査では、実際の良品、不良品を分ける基準に比べて厳しい基準を用いて欠陥の検出を行う。従って、S1で欠陥が無いとされれば検査対象10は良品であるが、S1において、実際に不良品となる欠陥(真の欠陥)ではないにも関わらず欠陥有りとされる場合も存在する。
In the defect inspection in S1, defects are detected using criteria that are stricter than the criteria for dividing actual good products and defective products. Therefore, if there is no defect in S1, the
フローチャートの説明に戻る。S1の欠陥検査で欠陥無しとされた場合(S2;NO)、検査対象10を良品とし、検査装置3等によって検査対象10が良品である旨が記録される(S3)。
Return to the description of the flowchart. When it is determined that there is no defect in the defect inspection in S1 (S2; NO), the
一方、S1の欠陥検査で欠陥有りとされた場合(S2;YES)、エリアカメラ検査部200にて二次的な欠陥検査を行う(S4)。S4では、欠陥検査として、欠陥が真の欠陥であるか否かの判定と、真の欠陥について欠陥種類の判別が行われる。
On the other hand, when it is determined that there is a defect in the defect inspection in S1 (S2; YES), the area
S4の欠陥検査で真の欠陥が無いとされた場合(S5;NO)、検査対象10を良品とし、検査装置6等によって検査対象10が良品である旨が記録される(S6)。
When it is determined that there is no true defect in the defect inspection in S4 (S5; NO), the
一方、S4の欠陥検査で真の欠陥が有るとされた場合(S5;YES)、検査対象10を不良品とし、検査装置6等によって検査対象10が不良品である旨と真の欠陥の欠陥種類が記録される(S7)。
On the other hand, when it is determined that there is a true defect in the defect inspection of S4 (S5; YES), the
(5−2.検査装置3での欠陥検査)
次に、前記したS1における検査装置3での欠陥検査の流れについて説明する。図7は検査装置3での欠陥検査の流れを示すフローチャートである。図の各ステップは検査装置3の制御部31により実行される。
(5-2. Defect inspection with inspection device 3)
Next, the flow of defect inspection in the inspection apparatus 3 in S1 described above will be described. FIG. 7 is a flowchart showing a flow of defect inspection in the inspection apparatus 3. Each step in the figure is executed by the
S1では、まず、検査装置3がラインカメラ撮影部2を制御し、ラインカメラ撮影部2で検査対象10をグレースケール画像にて撮影する(S11)。前記したように、ラインカメラ撮影部2では、検査対象10を搬送装置25で搬送しつつ、撮影ユニット20a、20b、20cのそれぞれで検査対象10の撮影が行われる。撮影画像は各撮影ユニット20a、20b、20cのラインカメラ21から検査装置3に送信され、検査装置3は撮影画像を受信する。
In S1, first, the inspection device 3 controls the line
次に、検査装置3は、検査対象10の撮影画像と正の画像から差分画像を作成する(S12)。
Next, the inspection apparatus 3 creates a difference image from the captured image of the
ここで、本実施形態では撮影ユニット20a、20b、20cでの撮影画像のそれぞれから、検査対象10の素材領域11、めっき領域12、ハーフエッチング領域13の欠陥検出を個々に行うものとする。そのため、撮影画像においてこれらの領域を個別に特定するためのマスク画像を用いる。
Here, in this embodiment, the defect detection of the
図8は上記のマスク画像の例を示すものである。マスク画像301は撮影ユニット20aでの撮影画像から素材領域11のみを特定するためのものであり、素材領域11を除く部分が黒で表現されている。
FIG. 8 shows an example of the mask image. The
同様に、マスク画像302は撮影ユニット20bでの撮影画像からめっき領域12のみを特定するためのものであり、めっき領域12を除く部分が黒で表現されている。マスク画像303は撮影ユニット20cでの撮影画像からハーフエッチング領域13のみを特定するためのものであり、ハーフエッチング領域13を除く部分が黒で表現されている。
Similarly, the
S12では、例えば、撮影ユニット20aでの撮影画像にマスク画像301を重畳することで、素材領域11の画素は撮影画像のままとし他の画素は黒の画素とした画像を作成する。そして、この画像を、当該画像についての正の画像(素材領域11に欠陥が無い場合の画像)と比較し、対応する画素の画素値の差をとって差分画像を作成する。
In S12, for example, the
同様に、撮影ユニット20bでの撮影画像にマスク画像302を重畳することで、めっき領域12の画素は撮影画像のままとし他の画素は黒の画素とした画像を作成し、この画像と、当該画像についての正の画像(めっき領域12に欠陥が無い場合の画像)との差分画像を作成する。
Similarly, by superimposing the
撮影ユニット20cでの撮影画像についても、マスク画像303を重畳することで、ハーフエッチング領域13の画素は撮影画像のままとし他の画素は黒の画素とした画像を作成し、この画像と、当該画像についての正の画像(ハーフエッチング領域13に欠陥が無い場合の画像)との差分画像を作成する。
Also for the captured image of the
図9はこれらの差分画像を模式的に示した例である。撮影ユニット20aでの撮影画像から得た差分画像401では、パターン部分10aの素材領域11の欠陥111の部分に、正常部分との輝度差が生じる。この例では欠陥111が高輝度の部分として現れている。
FIG. 9 is an example schematically showing these difference images. In the
同様に、撮影ユニット20bでの撮影画像から得た差分画像402では、パターン部分10aのめっき領域12の欠陥121の部分に輝度差が生じ、撮影ユニット20cでの撮影画像から得た差分画像403では、パターン部分10aのハーフエッチング領域13の欠陥131の部分に輝度差が生じる。
Similarly, in the
検査装置3は、これらの差分画像を所定の閾値で二値化して(S13)欠陥部分を抽出し、これに基づいて欠陥の検出を行う(S14)。検査装置3は、検出した欠陥について、その位置情報や面積、各種の特徴量等を欠陥情報として記憶部32に記録する。
The inspection apparatus 3 binarizes these difference images with a predetermined threshold (S13), extracts a defect portion, and detects a defect based on this (S14). The inspection apparatus 3 records the position information, area, various feature amounts, and the like of the detected defect in the
なお、S14における欠陥の検出基準は様々に定めることができ、例えば欠陥部分の面積が所定の基準値を超える場合に欠陥であると判定するが、これに限定されることはない。 The defect detection criteria in S14 can be variously determined. For example, the defect is determined to be a defect when the area of the defect portion exceeds a predetermined reference value, but is not limited thereto.
またS14では、検査対象10が実際の欠陥を有するにも関わらず欠陥無しと判定してしまうリスクを避けるため、欠陥検出時の基準値を、前記したように実際の良品、不良品の判定基準よりも厳しくなるようにしておく。そのため、S14で欠陥が無いとされれば実際にも検査対象10は良品であるが、欠陥有りと判定された検査対象10の中に、実際には欠陥の無い検査対象10が混じっている可能性がある。
In S14, in order to avoid the risk of determining that there is no defect even though the
(5−3.検査装置6での欠陥検査)
次に、前記したS4における検査装置6での欠陥検査の流れについて説明する。図10は検査装置6での欠陥検査の流れを示すフローチャートである。図の各ステップは検査装置6の制御部により実行される。
(5-3. Defect inspection with inspection device 6)
Next, the flow of defect inspection in the
S4では、まず検査装置6が、ラインカメラ検査部100の検査装置3から、検査装置3にて検出された欠陥の位置情報とマスク画像等を受信して取得する(S41)。
In S4, first, the
次に、検査装置6はエリアカメラ撮影部5を制御し、エリアカメラ撮影部5で検査対象10をカラー画像にて撮影する(S42)。
Next, the
ここでは、検査対象10を検査ステージ55上で移動させつつ、パターン部分10aの欠陥を含む範囲(以下、欠陥範囲という)と、当該パターン部分10aとは別の、欠陥の無いパターン部分10aにおいて上記欠陥範囲と対応する範囲(以下、比較範囲という)の撮影を行う。欠陥の無いパターン部分10aがどの位置かについての情報は、例えばS41で検査装置3から検査装置6へと送信しておくことができる。
Here, the
図11は検査対象10上の欠陥範囲と比較範囲の例を示す図である。本実施形態では、素材領域11の欠陥111について、左上のパターン部分10aの欠陥111を含む欠陥範囲Aが撮影されるとともに、欠陥の無いパターン部分10aにおいて、上記欠陥範囲Aの位置に対応する比較範囲A’の撮影を行う。
FIG. 11 is a diagram illustrating an example of a defect range and a comparison range on the
同様に、めっき領域12の欠陥121について、中上のパターン部分10aの欠陥121を含む欠陥範囲Bが撮影されるとともに、欠陥の無いパターン部分10aにおいて、上記欠陥範囲Bの位置に対応する比較範囲B’の撮影を行う。ハーフエッチング領域13の欠陥131についても、左上のパターン部分10aの欠陥131を含む欠陥範囲Cを撮影するとともに、欠陥の無いパターン部分10aにおいて、上記欠陥範囲Cの位置に対応する比較範囲C’の撮影を行う。
Similarly, the defect range B including the
これらの欠陥範囲、比較範囲の撮影画像はエリアカメラ51から検査装置6に送信され、検査装置6は撮影画像を受信する。なお、図11の例では、比較範囲の撮影を行う欠陥の無いパターン部分10aを、欠陥を有するパターン部分10aの下に隣接するパターン部分10aとしているが、これに限ることはない。
The captured images in the defect range and the comparison range are transmitted from the
フローチャートの説明に戻る。検査装置6は、各欠陥について、欠陥範囲と比較範囲の撮影画像を比較して対応する画素の画素値の差をとるなどして、欠陥範囲と比較範囲の撮影画像から差分画像を作成する(S43)。
Return to the description of the flowchart. The
検査装置6は、差分画像を所定の閾値で二値化するなどして改めて欠陥部分を抽出し、欠陥の色情報(RGB値やHSV値等)と面積を取得する(S44)。抽出した欠陥部分(欠陥111)の画像の例を図12(a)に示す。欠陥の色情報としては、例えば前記した欠陥範囲の撮影画像や差分画像において、欠陥部分に対応する範囲の各画素の色情報の平均値などとできるが、これに限ることはない。
The
その後、検査装置6は、欠陥が検査対象10上のどの領域に位置するかを、マスク画像に基づいて作成した領域画像を用いて特定する(S45)。
Thereafter, the
領域画像500の例を図13(a)に示す。この領域画像500は前記したマスク画像301、302、303から作成されたものであり、素材領域11とハーフエッチング領域13が特定される。まためっき領域12については、素材領域11との間の所定幅の境界部12aとその内部12bとを別領域として特定している。これらの領域は色分けして表される。
An example of the
S45では、例えば図12(b)に示すように欠陥111の画像圧縮を行い、前記したラインカメラ撮影部2での撮影画像と解像度を合わせる。そして、図13(b)に示すように、欠陥111の位置を、S41で取得した位置情報に基づいて領域画像500上にマッチングすることで、欠陥111がどの領域のものかを改めて特定できる。図の例では、欠陥111が素材領域11の欠陥であると特定される。
In S45, for example, as shown in FIG. 12B, the image of the
そして、検査装置6は、欠陥が真の欠陥であるか否かを判定するとともに、真の欠陥については、色情報を用いて欠陥種類を判別する(S46)。
Then, the
本実施形態では、欠陥が真の欠陥であるか否かの判定を、欠陥の面積を当該欠陥が位置する領域ごとの基準値と比較して行うことができる。例えば欠陥111の場合であれば、S44で得た欠陥111の面積を、素材領域11について予め定められた基準値と比較し、基準値を上回っていれば、欠陥111が真の欠陥であるとする。
In the present embodiment, it is possible to determine whether or not a defect is a true defect by comparing the area of the defect with a reference value for each region where the defect is located. For example, in the case of the
また、真の欠陥の欠陥種類の判別は、色情報を用いて行う。欠陥種類としては、めっき欠けやレジスト残り、ムラ、汚れなどがあり、例えば色情報により、素材領域11の欠陥111が黄みがかっていれば「レジスト残り」などと判別できる。
Also, the defect type of the true defect is determined using the color information. Defect types include missing plating, remaining resist, unevenness, and dirt. For example, if the
具体的な手法としては、例えば「素材領域11」において欠陥種類が「レジスト残り」であれば色情報が「R、Gの値が180〜200かつBの値が50以下」であるなどと、領域ごとに複数の欠陥種類と色情報の値を予め紐付け、判別情報として設定しておく。そして、S44で取得した欠陥の色情報を、当該欠陥が位置する領域の判別情報と比較して、色情報が一致する欠陥種類や色情報が最も近い欠陥種類を当該欠陥の欠陥種類と判別できる。このように、欠陥種類についても、領域ごとの基準を用いて判別ができる。
As a specific method, for example, if the defect type is “resist remaining” in the “
S47において、各欠陥が真の欠陥ではない、すなわち検査対象10に真の欠陥が存在しないとされると、図6で説明したS5;NO→S6への流れとなり、S6にて検査対象10が良品である旨が記録される。
In S47, if each defect is not a true defect, that is, if there is no true defect in the
一方、真の欠陥が存在する場合には、図6で説明したS5;YES→S7への流れとなり、検査対象10が不良品である旨と、真の欠陥について判別された欠陥種類が記録される。
On the other hand, if there is a true defect, the flow goes to S5; YES → S7 described in FIG. 6 to record that the
以上説明したように、本実施形態によれば、エリアカメラ検査部200にてエリアカメラ51を用いて検査対象10をカラー画像で撮影することにより、色情報を用いて目視による見えと変わらない条件で自動で欠陥検査ができるようになり、また高解像度の画像を用いて高精度な検査ができる。結果、高効率かつ高精度で欠陥検査を行えるようになり、目視検査の省略により人件費の削減も可能になる。
As described above, according to the present embodiment, the area
さらに、欠陥検査として、カラー画像の色情報を用いて検査対象の欠陥種類を判別することで、各種の欠陥の発生率をプロセス工程へフィードバックするなどして品質向上に寄与できる。 Further, as defect inspection, by determining the type of defect to be inspected using color information of a color image, it is possible to contribute to quality improvement by feeding back the occurrence rate of various defects to the process process.
また、前記したラインカメラ検査部100でのラインカメラ21による検査を併用することで、検査効率を向上させることができる。すなわち、ラインカメラ21はエリアカメラ51に比べてカメラ分解能が低いが視野が広く、検査対象10を搬送しつつ撮影を行って高速で欠陥を検出できる。エリアカメラ撮影部5では検査対象10全体を撮影する必要はなく、検査装置3で検出した欠陥を含む一部の範囲を撮影すればよいので、高解像度での撮影を行っても検査効率が低下しない。
Moreover, inspection efficiency can be improved by using together the test | inspection by the
また検査時には、エリアカメラ撮影部5において、検査対象10の欠陥範囲と併せて前記した比較範囲を撮影して取得し、これらを比較して差分画像を作成するので、事前に正の画像を用意する必要がなく、検査対象10の種類が変わるごとに正の画像を作成する必要もないので検査の手間が省ける。
At the time of inspection, the area
さらに、ラインカメラ撮影部2やエリアカメラ撮影部5としては、前記したカメラ、同軸照明、ドーム照明などの構成により検査対象10の周囲から照明を行うことで、銅板の圧延筋など、製品に影響を与えない程度の微小な凹凸が検査結果に影響を与えるのを抑制し、検査対象10上のムラや汚れといった欠陥を好適に検査できる。
Further, as the line
さらに、ラインカメラ撮影部2は、複数の撮影ユニット20a、20b、20cを有し、各撮影ユニット20a、20b、20cでは白色や青色などの異なる色の検査光を用いるので、素材領域11やめっき領域12など検査対象10の複数の領域ごとに、検査に適した照明を行って検査対象10を撮影し、欠陥検査が好適に行えるようになる。
Further, the line
さらに本実施形態では、検査装置3において、検査対象10の複数の領域のそれぞれについて、領域を特定するマスク画像を用いて欠陥の検出を行い、検査装置6では、マスク画像に基づいて欠陥が検査対象10のどの領域に位置するかを特定する。これにより検査対象10の領域ごとの検査を行うことで、各領域の材質別に判定基準を設定するなどして材質等に応じた欠陥検査ができる。また、例えばめっき領域12の欠陥検査にハーフエッチング領域13の欠陥が影響を与えるといったこともなく、誤検知なども抑制できる。また欠陥種類の判別も容易になる。さらに、両検査装置3、6で共通のマスク画像を用いることで、それぞれの検査装置3、6でマスク画像を作成する必要もなく、検査の手間も省略できる。
Furthermore, in this embodiment, the inspection apparatus 3 detects a defect for each of a plurality of areas of the
しかしながら、本発明は上記説明した実施形態に限らない。例えばS1における欠陥検査は、ラインカメラ撮影部2での撮影画像から欠陥が検出できればよく、前記した方法に限ることはない。S4における欠陥検査も同様、エリアカメラ撮影部5で撮影したカラー画像の色情報を用いて欠陥検査を行えばよく、前記した方法に限らない。例えば真の欠陥であるか否かの判定を色情報を用いて行うことも可能であるし、欠陥種類の判別を欠陥の面積を用いて行うこともできる。
However, the present invention is not limited to the embodiment described above. For example, the defect inspection in S <b> 1 is not limited to the above-described method as long as the defect can be detected from the image captured by the line
また検査対象10も上記したものに限らない。例えば検査対象10の基材は樹脂等であってもよく、これらの基材にめっきやハーフエッチング以外の処理が施されたものであってもよい。
The
以上、添付図面を参照して、本発明の好適な実施形態について説明したが、本発明は係る例に限定されない。当業者であれば、本願で開示した技術的思想の範疇内において、各種の変更例または修正例に想到し得ることは明らかであり、それらについても当然に本発明の技術的範囲に属するものと了解される。 The preferred embodiments of the present invention have been described above with reference to the accompanying drawings, but the present invention is not limited to such examples. It will be apparent to those skilled in the art that various changes or modifications can be conceived within the scope of the technical idea disclosed in the present application, and these are naturally within the technical scope of the present invention. Understood.
1;検査システム
2;ラインカメラ撮影部
3、6;検査装置
5;エリアカメラ撮影部
10;検査対象
10a;パターン部分
11;素材領域
12;めっき領域
12a;境界部
12b;内部
13;ハーフエッチング領域
20a、20b、20c;撮影ユニット
21;ラインカメラ
22、52;同軸照明
23、53;ドーム照明
24;照明
25;搬送装置
26、28、56;検査光
51;エリアカメラ
55;検査ステージ
100;ラインカメラ検査部
111、121、131;欠陥
200;エリアカメラ検査部
221、521;光源
222、522;ハーフミラー
231、531;孔
301、302、303;マスク画像
401、402、403;差分画像
500;領域画像
DESCRIPTION OF SYMBOLS 1;
Claims (14)
前記カラー画像の色情報を用いて検査対象の欠陥検査を行う第1の検査装置と、
を備えることを特徴とする検査システム。 An area camera photographing unit that irradiates the inspection light from around the inspection object, receives the inspection light reflected in the normal direction of the inspection object by the area camera, and shoots a color image;
A first inspection apparatus for inspecting a defect to be inspected using color information of the color image;
An inspection system comprising:
前記エリアカメラと、
検査対象と前記エリアカメラの間に配置され、ドーム内面から検査対象に向けて検査光を照射するドーム照明と、
前記ドーム照明と前記エリアカメラの間に配置され、検査対象の法線方向に沿って検査光を照射する同軸照明と、
を有することを特徴とする請求項1記載の検査システム。 The area camera photographing unit
The area camera;
A dome illumination which is arranged between the inspection object and the area camera and irradiates the inspection light from the inner surface of the dome toward the inspection object;
Coaxial illumination that is arranged between the dome illumination and the area camera and irradiates inspection light along the normal direction of the inspection object;
The inspection system according to claim 1, further comprising:
前記グレースケール画像に基づいて検査対象の欠陥検査を行う第2の検査装置と、
を更に備え、
前記第2の検査装置は、前記欠陥検査として、前記グレースケール画像を用いて検査対象の欠陥の検出を行うことを特徴とする請求項1から請求項4のいずれかに記載の検査システム。 A line camera photographing unit that irradiates the inspection light from around the inspection object, receives the inspection light reflected in the normal direction of the inspection object by the line camera, and shoots a grayscale image;
A second inspection apparatus for inspecting a defect to be inspected based on the gray scale image;
Further comprising
5. The inspection system according to claim 1, wherein the second inspection apparatus detects a defect to be inspected using the gray scale image as the defect inspection. 6.
前記エリアカメラ撮影部は、検査対象のパターン部分において前記欠陥を含む範囲を撮影するとともに、別のパターン部分において、前記範囲に対応する範囲を撮影することを特徴とする請求項6記載の検査システム。 The inspection object has a plurality of pattern portions of a predetermined pattern,
The inspection system according to claim 6, wherein the area camera imaging unit images a range including the defect in a pattern portion to be inspected, and images a range corresponding to the range in another pattern portion. .
前記ラインカメラと、
検査対象と前記ラインカメラの間に配置され、ドーム内面から検査対象に向けて検査光を照射するドーム照明と、
前記ドーム照明と前記ラインカメラの間に配置され、検査対象の法線方向に沿って検査光を照射する同軸照明と、
を含む撮影ユニットを有することを特徴とする請求項5から請求項7のいずれかに記載の検査システム。 The line camera photographing unit
The line camera;
Dome illumination that is arranged between the inspection object and the line camera and irradiates the inspection light from the inner surface of the dome toward the inspection object;
Coaxial illumination that is arranged between the dome illumination and the line camera and irradiates inspection light along the normal direction of the inspection target;
The inspection system according to any one of claims 5 to 7, further comprising an imaging unit including:
第1の検査装置により、前記カラー画像の色情報を用いて検査対象の欠陥検査を行うステップと、
を有することを特徴とする検査方法。 In the area camera photographing unit, irradiating the inspection light from around the inspection object, receiving the inspection light reflected in the normal direction of the inspection object by the area camera, and photographing a color image;
Performing a defect inspection of an inspection object using color information of the color image by a first inspection apparatus;
An inspection method characterized by comprising:
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2015073821A JP2016194434A (en) | 2015-03-31 | 2015-03-31 | Inspection system and inspection method |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2015073821A JP2016194434A (en) | 2015-03-31 | 2015-03-31 | Inspection system and inspection method |
Publications (1)
Publication Number | Publication Date |
---|---|
JP2016194434A true JP2016194434A (en) | 2016-11-17 |
Family
ID=57323003
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2015073821A Pending JP2016194434A (en) | 2015-03-31 | 2015-03-31 | Inspection system and inspection method |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP2016194434A (en) |
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN110044294A (en) * | 2018-01-17 | 2019-07-23 | 欧姆龙株式会社 | Image testing device and lighting device |
CN111272775A (en) * | 2020-02-24 | 2020-06-12 | 上海感图网络科技有限公司 | Device and method for detecting defects of heat exchanger by using artificial intelligence |
CN112304974A (en) * | 2020-11-06 | 2021-02-02 | 长沙麦睛科技有限公司 | Device and method for detecting defects of coaxial cylinder-like product with complex surface by using artificial intelligence |
JP2021021670A (en) * | 2019-07-30 | 2021-02-18 | 三菱パワー株式会社 | Visual inspection device |
-
2015
- 2015-03-31 JP JP2015073821A patent/JP2016194434A/en active Pending
Cited By (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN110044294A (en) * | 2018-01-17 | 2019-07-23 | 欧姆龙株式会社 | Image testing device and lighting device |
JP2021021670A (en) * | 2019-07-30 | 2021-02-18 | 三菱パワー株式会社 | Visual inspection device |
JP7291027B2 (en) | 2019-07-30 | 2023-06-14 | 三菱重工業株式会社 | Appearance inspection device |
CN111272775A (en) * | 2020-02-24 | 2020-06-12 | 上海感图网络科技有限公司 | Device and method for detecting defects of heat exchanger by using artificial intelligence |
CN112304974A (en) * | 2020-11-06 | 2021-02-02 | 长沙麦睛科技有限公司 | Device and method for detecting defects of coaxial cylinder-like product with complex surface by using artificial intelligence |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US7978903B2 (en) | Defect detecting method and defect detecting device | |
JP6682809B2 (en) | Inspection system and inspection method | |
JP2016194434A (en) | Inspection system and inspection method | |
JP2017166929A (en) | Defect inspection device, defect inspection method and defect inspection system for sheet-like object | |
JP2009293999A (en) | Wood defect detector | |
JP6696323B2 (en) | Pattern inspection apparatus and pattern inspection method | |
JP2006303491A (en) | Method of inspecting wafer | |
KR20140091916A (en) | Inspection Method For Display Panel | |
TWI495867B (en) | Application of repeated exposure to multiple exposure image blending detection method | |
JP5088165B2 (en) | Defect detection method and defect detection apparatus | |
JP6623545B2 (en) | Inspection system, inspection method, program, and storage medium | |
CN115461612A (en) | Appearance inspection device and appearance inspection method | |
JP6628185B2 (en) | Inspection method for transparent objects | |
JP2006155579A (en) | Image processing method and image processing apparatus | |
JP2009080004A (en) | Inspection device | |
JP5239275B2 (en) | Defect detection method and defect detection apparatus | |
WO2022190654A1 (en) | Inspection system, inspection management device, inspecting method, and program | |
JP2019045451A (en) | Inspection apparatus, inspection method and program | |
JP2010019646A (en) | Imaging processing inspection method and imaging processing inspecting system | |
JP2017156659A (en) | Defect inspection device and defect inspection method for color filter | |
US11538149B2 (en) | Spot detection device, spot detection method, and display device | |
JP2005265828A (en) | Flaw detection method and apparatus | |
JP4889018B2 (en) | Appearance inspection method | |
JP7300155B2 (en) | Teaching device in solid preparation appearance inspection, and teaching method in solid preparation appearance inspection | |
JP4653340B2 (en) | Can appearance inspection device using a three-plate CCD camera |