JP2006184019A - Visual inspection system - Google Patents

Visual inspection system Download PDF

Info

Publication number
JP2006184019A
JP2006184019A JP2004374728A JP2004374728A JP2006184019A JP 2006184019 A JP2006184019 A JP 2006184019A JP 2004374728 A JP2004374728 A JP 2004374728A JP 2004374728 A JP2004374728 A JP 2004374728A JP 2006184019 A JP2006184019 A JP 2006184019A
Authority
JP
Japan
Prior art keywords
substrate
imaging unit
inspection
imaging
unit
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2004374728A
Other languages
Japanese (ja)
Inventor
Yoshihiro Akiyama
吉宏 秋山
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Saki Corp
Original Assignee
Saki Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Saki Corp filed Critical Saki Corp
Priority to JP2004374728A priority Critical patent/JP2006184019A/en
Priority to US11/314,092 priority patent/US7590279B2/en
Publication of JP2006184019A publication Critical patent/JP2006184019A/en
Pending legal-status Critical Current

Links

Images

Landscapes

  • Image Processing (AREA)
  • Image Analysis (AREA)
  • Investigating Materials By The Use Of Optical Means Adapted For Particular Applications (AREA)
  • Image Input (AREA)

Abstract

<P>PROBLEM TO BE SOLVED: To provide a visual inspection system which enables the practice of the precise examination of an inspection target, even if the inspection target is changed dimensionally in its direction of imaging. <P>SOLUTION: The visual inspection system 200 for performing the visual inspection of a substrate 2 is equipped with a surface imaging unit 80a for taking the surface image of the substrate 2, slave PCs 140a and 140b provided so as to correspond to the surface imaging unit 80a to perform inspection on the basis of the image data of the substrate 2, a back imaging unit 80b for taking the image of the back of the substrate 2 and the slave PCs 140c and 140d provided so as to correspond to the back imaging unit 80b to perform inspection from the image data of the substrate 2. The surface imaging unit 80a is provided with a focal point adjusting motor 40 or the like which constitutes focusing mechanism for aligning a focus with the substrate 2 being the inspection target without changing an image magnification corresponding to the thickness of the substrate 2. <P>COPYRIGHT: (C)2006,JPO&NCIPI

Description

本発明は、部品が実装されている基板等の被検査体の外観を検査する外観検査装置に関する。   The present invention relates to an appearance inspection apparatus for inspecting the appearance of an object to be inspected such as a board on which components are mounted.

近年では、様々な機器に電子基板が実装されるようになってきているが、この種の電子基板が実装される機器においては小型化、薄型化等が常に課題となっており、この点から、電子基板の高密度化を図ることが要求される。そして、電子基板における高密度実装を実現する上では、基板における部品の実装状態を高精度に検査することが重要となり、従来から、部品実装後のプリント基板(以下「基板」という)を高精度に検査するために、画像認識技術を用いた検査装置が提案されている(例えば、特許文献1参照。)。また、複数の外観検査装置と管理コンピュータとしてのPC(Personal Computer)とをLANによって接続し、特定の外観検査装置に、当該外観検査装置による検査結果と共に他の外観検査装置による検査結果を最終検査結果として記憶させ、当該最終検査結果を同一の基板についての単一の最終検査結果としてPCのモニタ画面に表示させる外観検査システムも知られている(例えば、特許文献2参照。)。更に、基板の両面に実装された部品の検査を相互干渉なしで同時に実行可能な外観検査装置も知られている(例えば、特許文献3参照。)。
特公平7−120421号公報 特開平11−118439号公報 特開2003―99758号公報
In recent years, electronic boards have been mounted on various devices, but downsizing, thinning, etc. have always been a challenge for devices on which this type of electronic substrate is mounted. Therefore, it is required to increase the density of the electronic substrate. In order to achieve high-density mounting on an electronic board, it is important to inspect the mounting state of components on the board with high accuracy. Conventionally, printed boards after mounting components (hereinafter referred to as “boards”) have high accuracy. Therefore, an inspection apparatus using an image recognition technique has been proposed (for example, see Patent Document 1). In addition, a plurality of visual inspection devices and a PC (Personal Computer) as a management computer are connected via a LAN, and the final inspection of the inspection results of other visual inspection devices together with the inspection results of the visual inspection device is performed on a specific visual inspection device. There is also known an appearance inspection system that stores the result and displays the final inspection result on a monitor screen of a PC as a single final inspection result for the same substrate (see, for example, Patent Document 2). Furthermore, there is also known an appearance inspection apparatus capable of simultaneously inspecting components mounted on both sides of a substrate without mutual interference (see, for example, Patent Document 3).
Japanese Patent Publication No.7-120421 Japanese Patent Laid-Open No. 11-118439 JP 2003-99758 A

しかしながら、外観検査装置の検査対象となる被検査体は年々多様化してきており、同種の被検査体であっても厚さや高さといって撮像方向における寸法が異なっているものが増えてきている。従って、精度のよい検査を実行する上では、被検査体の撮像方向における寸法の変化に対応できるように外観検査装置を構成する必要がある。   However, the inspected objects to be inspected by the appearance inspection apparatus are diversified year by year, and even the same type of inspected objects are increasing in thickness and height but having different dimensions in the imaging direction. . Therefore, in order to perform a highly accurate inspection, it is necessary to configure the appearance inspection apparatus so as to be able to cope with a change in the dimension of the object to be inspected in the imaging direction.

そこで、本発明は、被検査体の撮像方向における寸法が変化しても精度のよい検査を実行可能とする外観検査装置の提供を目的とする。   Therefore, an object of the present invention is to provide an appearance inspection apparatus that can perform an accurate inspection even if the dimension of an object to be inspected changes in the imaging direction.

本発明による外観検査装置は、被検査体の外観を検査するための外観検査装置において、被検査体を撮像可能であり、被検査体の撮像方向における寸法に応じて像倍率を変えることなく被検査体に焦点を合わせる焦点合わせ機構を有する撮像手段を備えることを特徴とする。   An appearance inspection apparatus according to the present invention is an appearance inspection apparatus for inspecting the appearance of an object to be inspected, and can image the object to be inspected without changing the image magnification in accordance with the dimension of the object to be inspected in the imaging direction. An imaging means having a focusing mechanism for focusing on the inspection object is provided.

この外観検査装置の撮像手段は、検査体の撮像方向における寸法に応じて像倍率を変えることなく被検査体に焦点を合わせる焦点合わせ機構を有している。従って、この外観検査装置によれば、被検査体の撮像方向における寸法が変化しても、被検査体に焦点を合わせて鮮明な被検査体の画像を得ることができるので、精度のよい検査を実行可能となる。   The imaging means of this appearance inspection apparatus has a focusing mechanism that focuses on the object to be inspected without changing the image magnification according to the dimension of the inspection object in the imaging direction. Therefore, according to this appearance inspection apparatus, even if the dimension of the inspection object in the imaging direction changes, it is possible to obtain a clear image of the inspection object by focusing on the inspection object. Can be executed.

この場合、焦点合わせ機構は、被検査体の厚さに応じて被検査体との焦点距離を変化させると好ましい。かかる構成は、例えば基板等の概ね一定の厚さを有する被検査体の検査に好適である。   In this case, it is preferable that the focusing mechanism changes the focal distance from the inspection object according to the thickness of the inspection object. Such a configuration is suitable for inspecting an object to be inspected having a substantially constant thickness, such as a substrate.

また、撮像手段は、被検査体の表面を撮像する表面側撮像手段と、被検査体の裏面を撮像する表面側撮像手段とを含み、表面側撮像手段と裏面側撮像手段とのうちの少なくとも何れか一方が焦点合わせ機構を有すると好ましい。   The imaging means includes a surface side imaging means for imaging the surface of the object to be inspected and a surface side imaging means for imaging the back surface of the object to be inspected, and at least of the surface side imaging means and the back surface side imaging means. It is preferable that either one has a focusing mechanism.

すなわち、表面および裏面の双方が検査対象となる被検査体は、基本的に、表面および裏面の何れか一方が、対応する撮像手段に対して位置決めされることから、焦点合わせ機構は、表面側撮像手段と裏面側撮像手段との少なくとも何れ一方に対して設けられればよい。   In other words, the object to be inspected on both the front surface and the back surface is basically positioned on the front side because either one of the front surface or the back surface is positioned with respect to the corresponding imaging means. What is necessary is just to provide with respect to at least any one of an imaging means and a back side imaging means.

本発明によれば、被検査体の撮像方向における寸法が変化しても精度のよい検査を実行することが可能となる。   According to the present invention, it is possible to perform an accurate inspection even if the dimension of the object to be inspected changes in the imaging direction.

以下、図面を参照しながら、本発明を実施するための最良の形態について詳細に説明する。   Hereinafter, the best mode for carrying out the present invention will be described in detail with reference to the drawings.

図1は、本発明による外観検査装置を示す拡大斜視図である。同図に示される外観検査装置200は、検査テーブル10、基板搬送テーブル50、表面側撮像ユニット80aおよび裏面側撮像ユニット80b(以下、適宜、これらを「撮像ユニット80」と称する。)等を含むものである。基板搬送テーブル50は、支持プレート52と、この支持プレート52上に支持された2本の搬送レール54を有している。搬送レール54に対しては、図示されないモータにより駆動されて被検査体としての基板2を搬送する搬送ベルト(不図示)が設けられており、被検査体としての基板2は、当該搬送ベルトにより検査テーブル10の略中央まで搬送される。また、搬送レール54の上方には、基板2の搬送を検知する光センサ等の非接触センサである搬送センサ(図示省略)が設けられており、この搬送センサにより基板2の端面や基板2に設けられた検知孔等が検知されると、基板2が検査テーブル10の略中央に搬送されたと判断され、搬送ベルトによる基板2の搬送が停止される。なお、本実施形態における基板2は、ICチップやコネクタといった各種電子部品が実装された電子基板であり、その表面側が、いわゆるリフロー面とされ、その裏面側が、いわゆるDIP面とされている。   FIG. 1 is an enlarged perspective view showing an appearance inspection apparatus according to the present invention. The appearance inspection apparatus 200 shown in the figure includes an inspection table 10, a substrate transfer table 50, a front side imaging unit 80a, a back side imaging unit 80b (hereinafter, these will be referred to as “imaging unit 80” as appropriate), and the like. It is a waste. The substrate transfer table 50 includes a support plate 52 and two transfer rails 54 supported on the support plate 52. The transport rail 54 is provided with a transport belt (not shown) that is driven by a motor (not shown) to transport the substrate 2 as an object to be inspected, and the substrate 2 as the object to be inspected is supported by the transport belt. It is conveyed to the approximate center of the inspection table 10. Further, a conveyance sensor (not shown) that is a non-contact sensor such as an optical sensor that detects conveyance of the substrate 2 is provided above the conveyance rail 54, and this conveyance sensor is provided on the end surface of the substrate 2 and the substrate 2. When the provided detection hole or the like is detected, it is determined that the substrate 2 has been transported to the approximate center of the inspection table 10, and the transport of the substrate 2 by the transport belt is stopped. In addition, the board | substrate 2 in this embodiment is an electronic board | substrate with which various electronic components, such as an IC chip and a connector, were mounted, the surface side is made into what is called a reflow surface, and the back surface side is made what is called a DIP surface.

また、基板搬送テーブル50は、外観検査装置200の下方に設けられたガイドシャフトが挿通される挿通部を有しており、当該ガイドシャフトにより、基板搬送テーブル50は、搬送レール54による基板2の搬送方向と直交する方向に移動自在に支持される。更に、基板搬送テーブル50は、搬送モータ58(図4参照)により駆動される送りねじ56と係合しており、当該送りねじ(ボールネジ)56を回転させることにより、基板搬送テーブル50を移動させて基板2を撮像ユニット80へと搬送することができる。なお、図1において手前側の搬送レール54には、その上に載置された基板2を上方から押圧して形状を矯正する図示されないクランプが設けられている。   The substrate transport table 50 has an insertion portion through which a guide shaft provided below the appearance inspection apparatus 200 is inserted, and the substrate transport table 50 causes the substrate 2 by the transport rail 54 to pass through the guide shaft. It is supported movably in a direction orthogonal to the transport direction. Further, the substrate transport table 50 is engaged with a feed screw 56 driven by a transport motor 58 (see FIG. 4), and the substrate transport table 50 is moved by rotating the feed screw (ball screw) 56. Thus, the substrate 2 can be transported to the imaging unit 80. In FIG. 1, the transport rail 54 on the near side is provided with a clamp (not shown) for correcting the shape by pressing the substrate 2 placed thereon from above.

図2は、外観検査装置200に含まれる撮像ユニット80を示す拡大斜視図である。同図に示されるように、撮像ユニット80には、被検査体である基板2の表面すなわちリフロー面側を上方から撮像するための表面側撮像ユニット80aと、基板2の裏面すなわちDIP面側を下方から撮像するための裏面側撮像ユニット80bとが含まれる。図2に示されるように、表面側撮像ユニット80aは、搬送レール54の上方に配置され、裏面側撮像ユニット80bは、表面側撮像ユニット80aと共に被検査体である基板2を挟むように搬送レール54の下方に配置される。   FIG. 2 is an enlarged perspective view showing the imaging unit 80 included in the appearance inspection apparatus 200. As shown in the figure, the imaging unit 80 includes a front side imaging unit 80a for imaging the surface of the substrate 2 to be inspected, that is, the reflow surface side from above, and the back side of the substrate 2, that is, the DIP surface side. And a back side imaging unit 80b for imaging from below. As shown in FIG. 2, the front surface side imaging unit 80a is disposed above the transport rail 54, and the back surface side imaging unit 80b is transported with the front surface side imaging unit 80a so as to sandwich the substrate 2 that is an object to be inspected. 54 is disposed below.

表面側撮像ユニット80aは、表面側照明ユニット100a、表面側支持フレーム36a、ベースフレーム38、第1撮像部30a、第2撮像部30b、焦点調整モータ40、中間レンズ42等を有する。また、裏面側撮像ユニット80bは、裏面側照明ユニット100b、裏面側支持フレーム36b、第3撮像部30c、第4撮像部30d、中間レンズ42等を有する。以下、適宜、第1撮像部30a、第2撮像部30b、第3撮像部30c、第4撮像部30dを「撮像部30」と称し、表面側照明ユニット100a、裏面側照明ユニット100bを「照明ユニット100」と称する。   The front side imaging unit 80a includes a front side illumination unit 100a, a front side support frame 36a, a base frame 38, a first imaging unit 30a, a second imaging unit 30b, a focus adjustment motor 40, an intermediate lens 42, and the like. The back side imaging unit 80b includes a back side illumination unit 100b, a back side support frame 36b, a third imaging unit 30c, a fourth imaging unit 30d, an intermediate lens 42, and the like. Hereinafter, the first imaging unit 30a, the second imaging unit 30b, the third imaging unit 30c, and the fourth imaging unit 30d are referred to as “imaging unit 30” as appropriate, and the front-side illumination unit 100a and the back-side illumination unit 100b are “illuminated”. This is referred to as “unit 100”.

図2に示されるように、表面側支持フレーム36aには、第1撮像部30a、第2撮像部30b、および中間レンズ42が固定されている。第1撮像部30aは、第1レンズ32aおよび第1ラインセンサ34aを含み、第2撮像部30bは、第2レンズ32bおよび第2ラインセンサ34bを含む。これらの第1撮像部30aおよび第2撮像部30bは、被検査体である基板2の表面を撮像するために、基板2の上方に並設されている。また、第1レンズ32a、第1ラインセンサ34a、第2レンズ32b、第2ラインセンサ34b、および中間レンズ42の配置箇所は、第1撮像部30aおよび第2撮像部30bの撮像範囲が重複するように定められる。このように、複数の撮像部30a,30bを用いることにより、まず高い解像度で基板2の表面を撮像可能となり、検査精度を向上させることができる。また、複数の撮像部30a,30bを用いることにより、撮像した画像の処理を分散して実行できることから、検査速度をも向上させることが可能となる。   As shown in FIG. 2, the first imaging unit 30a, the second imaging unit 30b, and the intermediate lens 42 are fixed to the front-side support frame 36a. The first imaging unit 30a includes a first lens 32a and a first line sensor 34a, and the second imaging unit 30b includes a second lens 32b and a second line sensor 34b. The first imaging unit 30a and the second imaging unit 30b are arranged in parallel above the substrate 2 in order to capture an image of the surface of the substrate 2 that is an object to be inspected. In addition, the first lens 32a, the first line sensor 34a, the second lens 32b, the second line sensor 34b, and the arrangement position of the intermediate lens 42 overlap the imaging ranges of the first imaging unit 30a and the second imaging unit 30b. It is determined as follows. As described above, by using the plurality of imaging units 30a and 30b, it is possible to first image the surface of the substrate 2 with high resolution, and the inspection accuracy can be improved. In addition, by using a plurality of imaging units 30a and 30b, the processing of the captured image can be executed in a distributed manner, so that the inspection speed can be improved.

また、本実施形態では、表面側撮像ユニット80aの表面側支持フレーム36aが、ベースフレーム38上に基板2の搬送方向に摺動自在に支持されており、表面側支持フレーム36aは、焦点調整モータ40によってベースフレーム38に対して移動させられる。すなわち、焦点調整モータ40を作動させることにより、表面側支持フレーム36aに固定されている第1撮像部30a、第2撮像部30b、および中間レンズ42をベースフレーム38に対して一体に移動させることができる。   In the present embodiment, the front-side support frame 36a of the front-side imaging unit 80a is supported on the base frame 38 so as to be slidable in the transport direction of the substrate 2, and the front-side support frame 36a is a focus adjustment motor. 40 is moved relative to the base frame 38. That is, by operating the focus adjustment motor 40, the first imaging unit 30a, the second imaging unit 30b, and the intermediate lens 42 fixed to the front-side support frame 36a are moved integrally with respect to the base frame 38. Can do.

一方、裏面側撮像ユニット80bの第1撮像部30a、第2撮像部30b、および中間レンズ42は、ベースフレーム38等の下方に位置決めされている裏面側支持フレーム36b上に固定されている。裏面側撮像ユニット80bの第3撮像部30cおよび第4撮像部30dは、被検査体である基板2の裏面を撮像するために、基板2の下方に並設されている。裏面側撮像ユニット80bの第3レンズ32c、第3ラインセンサ34c、第4レンズ32d、第4ラインセンサ34d、および中間レンズ42の配置箇所も、第3撮像部30cおよび第4撮像部30dの撮像範囲が重複するように定められる。   On the other hand, the first imaging unit 30a, the second imaging unit 30b, and the intermediate lens 42 of the back side imaging unit 80b are fixed on the back side support frame 36b positioned below the base frame 38 and the like. The third imaging unit 30c and the fourth imaging unit 30d of the back side imaging unit 80b are juxtaposed below the substrate 2 in order to capture the back side of the substrate 2 that is an object to be inspected. The arrangement positions of the third lens 32c, the third line sensor 34c, the fourth lens 32d, the fourth line sensor 34d, and the intermediate lens 42 of the back side imaging unit 80b are also taken by the third imaging unit 30c and the fourth imaging unit 30d. It is determined that the ranges overlap.

図3は、撮像ユニット80に含まれる照明ユニット100を示す概略構成図である。照明ユニット100には、表面側撮像ユニット80aの表面側照明ユニット100aと、裏面側撮像ユニット80bの裏面側照明ユニット100bとが含まれる。表面側照明ユニット100aおよび裏面側照明ユニット100bは、第1光源102、第2光源104、第3光源106、ハーフミラー110、およびアクリルシート112等をそれぞれ有しており、第1光源102、第2光源104および第3光源106は、ハーフミラー110を取り囲むように配置される。   FIG. 3 is a schematic configuration diagram showing the illumination unit 100 included in the imaging unit 80. The illumination unit 100 includes a front side illumination unit 100a of the front side imaging unit 80a and a back side illumination unit 100b of the back side imaging unit 80b. The front side lighting unit 100a and the back side lighting unit 100b have a first light source 102, a second light source 104, a third light source 106, a half mirror 110, an acrylic sheet 112, and the like, respectively. The two light sources 104 and the third light source 106 are arranged so as to surround the half mirror 110.

第1光源102は、対応する第1および第2ラインセンサ34a,34bまたは34c,34dの走査方向に並設された緑色LED(発光ダイオード)群により構成され、緑色LED群の並設長さは、被検査体である基板2の幅以上とされている。表面側照明ユニット100aの第1光源102は、表面側撮像ユニット80aのラインセンサ34a,34bによる基板2上の走査ラインの真上に配置され、被検査体である基板2に対して光を上から下に概ね垂直に照射する。これに対して、裏面側照明ユニット100bの第1光源102は、裏面側撮像ユニット80bのラインセンサ34c,34dによる基板2上の走査ラインの真下に配置され、被検査体である基板2に対して光を下から上に概ね垂直に照射する。   The first light source 102 is composed of a group of green LEDs (light emitting diodes) arranged in parallel in the scanning direction of the corresponding first and second line sensors 34a, 34b or 34c, 34d. The width is equal to or larger than the width of the substrate 2 that is an object to be inspected. The first light source 102 of the front surface side illumination unit 100a is disposed directly above the scanning line on the substrate 2 by the line sensors 34a and 34b of the front surface side imaging unit 80a, and emits light to the substrate 2 that is an object to be inspected. Irradiate vertically from the top to the bottom. On the other hand, the first light source 102 of the back-side illumination unit 100b is disposed directly below the scanning line on the substrate 2 by the line sensors 34c and 34d of the back-side imaging unit 80b, and is for the substrate 2 that is an object to be inspected. Irradiate the light from the bottom to the top almost vertically.

第1光源102からの光(落射光)は、ハーフミラー110を通過して基板2の検査面に対して入射角がほぼゼロで投射される。本実施形態においては、第1光源102に幅をもたせてあり、基板2が反っている場合であっても入射角がゼロになるような落射光成分が存在するように配慮されている。基板2(走査ライン)からの反射光は、ハーフミラー110で反射し、対応する中間レンズ42を通過して対応する第1および第2レンズ32a,32bまたは第3および第4レンズ32c,32dへと入射する。このように、第1光源102からいわゆる落射光を基板2に投じ、これをラインセンサ34で検出することにより、基板2内の部品の位置ずれ、欠品、はんだのヌレの判定などを行うことが可能となる。なお、効率的に走査ラインへ光を照射するためには、LED群のための基板を中央で2つのサブ基板に分割し、それぞれのサブ基板にLED群を並設してもよい。   The light (epi-illumination light) from the first light source 102 passes through the half mirror 110 and is projected onto the inspection surface of the substrate 2 with an incident angle of substantially zero. In the present embodiment, the first light source 102 has a width, and it is considered that there is an incident light component that makes the incident angle zero even when the substrate 2 is warped. The reflected light from the substrate 2 (scanning line) is reflected by the half mirror 110 and passes through the corresponding intermediate lens 42 to the corresponding first and second lenses 32a and 32b or the third and fourth lenses 32c and 32d. And incident. In this way, the so-called incident light from the first light source 102 is projected onto the substrate 2 and detected by the line sensor 34, thereby making it possible to determine misalignment of components in the substrate 2, lack of solder, solder leakage, etc. Is possible. In order to efficiently irradiate the scanning lines with light, the substrate for the LED group may be divided into two sub-substrates at the center, and the LED groups may be arranged in parallel on each sub-substrate.

第2光源104は、対応する第1および第2ラインセンサ34a,34bまたは34c,34dの走査方向に並設された白色LED(発光ダイオード)群により構成され、白色LED群の並設長さは、被検査体である基板2の幅以上とされている。各照明ユニット100aおよび100bは、それぞれ2体の第2光源104を有し、これら2体の第2光源104は、それぞれの投射光が第1光源102から走査ラインへの光路と干渉しないように、基板2の搬送方向における走査ラインの両側に1体ずつ配置される。   The second light source 104 is composed of a group of white LEDs (light emitting diodes) arranged in parallel in the scanning direction of the corresponding first and second line sensors 34a, 34b or 34c, 34d. The width is equal to or larger than the width of the substrate 2 that is an object to be inspected. Each of the illumination units 100a and 100b has two second light sources 104, and the two second light sources 104 prevent the projection light from interfering with the optical path from the first light source 102 to the scanning line. One is disposed on each side of the scanning line in the conveyance direction of the substrate 2.

第3光源106は、対応する第1および第2ラインセンサ34a,34bまたは34c,34dの走査方向に並設された青色LED(発光ダイオード)群により構成され、青色LED群の並設長さは、被検査体である基板2の幅以上とされている。各照明ユニット100aおよび100bは、それぞれ4体の第3光源106を有し、これら4体の第3光源106は、それぞれの投射光が第1光源102および第2光源104から走査ラインへの光路と干渉しないように、基板2の搬送方向における走査ラインの両側に2体ずつ配置される。   The third light source 106 is composed of a group of blue LEDs (light emitting diodes) arranged in parallel in the scanning direction of the corresponding first and second line sensors 34a, 34b or 34c, 34d. The width is equal to or larger than the width of the substrate 2 that is an object to be inspected. Each of the illumination units 100a and 100b has four third light sources 106, and the four third light sources 106 have optical paths from the first light source 102 and the second light source 104 to the scanning line. Two bodies are arranged on both sides of the scanning line in the transport direction of the substrate 2 so as not to interfere with each other.

上述のように、第1光源102は緑色の光を照射し、第2光源104は白色の光を照射し、第3光源106は青色の光を照射する。従って、各照明ユニット100a,100bは被検査体である基板2に対して複数の色の光を照射する複合光源として機能する。緑色LEDや青色LEDは、白色LEDよりも明るい光を発することから、第1光源102を緑色光源とすると共に第3光源106を青色光源とすることにより、SN比のよいクリアな画像を得ることができる。また、プリント基板は一般に緑色に着色されていることが多いので、第1光源を緑色光源とすれば、落射光により平面を明るく照射することができる。更に、第3光源106を青色光源とすることにより、基板2に実装されたICチップやコネクタ等の部品に低い角度から青い光を照射して部品にレーザー印字された文字等を良好に認識することが可能となる。   As described above, the first light source 102 emits green light, the second light source 104 emits white light, and the third light source 106 emits blue light. Accordingly, each of the illumination units 100a and 100b functions as a composite light source that irradiates a plurality of colors of light onto the substrate 2 that is an object to be inspected. Since the green LED and the blue LED emit light brighter than the white LED, a clear image with a good S / N ratio can be obtained by using the first light source 102 as a green light source and the third light source 106 as a blue light source. Can do. Further, since the printed circuit board is often colored in green, if the first light source is a green light source, the plane can be illuminated brightly by incident light. Furthermore, by using the third light source 106 as a blue light source, the components such as the IC chip and the connector mounted on the substrate 2 are irradiated with blue light from a low angle, and the characters and the like laser-printed on the component are recognized well. It becomes possible.

本実施形態では、第2光源104および第3光源106と走査ラインとの間に、第2光源104および第3光源106からの光を拡散するアクリルシート112が配置されている。これにより、第2光源104および第3光源106として点光源であるLEDの集合体を用いても、上記拡散作用により、スポット的な光が画像データに写り込んで検査精度を損なうことを抑制できる。また、本実施形態においては、白色光源である第2光源104、緑色光源である第1光源、青色光源である第2光源の順に、それぞれの光源が独立に一つの走査ラインについて3回点灯され、1回の点灯ごとにラインセンサ34で基板2を走査する。これにより、基板2に各光源102,104および106が光を照射した状態での画像を得ることができる。   In the present embodiment, an acrylic sheet 112 that diffuses light from the second light source 104 and the third light source 106 is disposed between the second light source 104 and the third light source 106 and the scanning line. Thereby, even if it uses the aggregate | assembly of LED which is a point light source as the 2nd light source 104 and the 3rd light source 106, it can suppress that spot-like light is reflected in image data by the said diffusion effect, and impairs an inspection precision. . In the present embodiment, each light source is independently turned on three times for one scanning line in the order of the second light source 104, which is a white light source, the first light source, which is a green light source, and the second light source, which is a blue light source. The substrate 2 is scanned by the line sensor 34 every time lighting is performed. Thereby, an image can be obtained in a state where the light sources 102, 104 and 106 irradiate the substrate 2 with light.

なお、被検査体である基板2に孔が設けられていたり、塞がれるべき孔がはんだで完全に充填されなかったりすることもあり、これらの場合、当該孔を介して一方の照明ユニット100から他方側に光が漏れるおそれがある。そして、一方の照明ユニット100から他方側に漏れた光がラインセンサ34により直接走査されると、いわゆるブルーミングという現象が生じてしまい、基板2の撮像に悪影響が及ぼされてしまうおそれもある。このため、本実施形態において、表面側照明ユニット100aと裏面側照明ユニット100bとは、基板の搬送方向に距離Lだけ互いにオフセットして配置される。すなわち、本実施形態では、図3からわかるように、表面側照明ユニット100aが裏面側照明ユニット100bよりも基板搬送方向上流側に配置されている。オフセット長Lは、ブルーミング抑制の観点から50mm以上とされると好ましい。   In addition, a hole may be provided in the substrate 2 that is an object to be inspected, or a hole to be closed may not be completely filled with solder. In these cases, one illumination unit 100 is connected via the hole. There is a risk of light leaking from one side to the other. When light leaking from one illumination unit 100 to the other side is directly scanned by the line sensor 34, a phenomenon called so-called blooming occurs, which may adversely affect the imaging of the substrate 2. For this reason, in this embodiment, the front surface side illumination unit 100a and the back surface side illumination unit 100b are disposed offset from each other by a distance L in the substrate transport direction. That is, in this embodiment, as can be seen from FIG. 3, the front surface side illumination unit 100a is disposed upstream of the back surface side illumination unit 100b in the substrate transport direction. The offset length L is preferably 50 mm or more from the viewpoint of suppressing blooming.

図4は、上述の外観検査装置200の制御ブロック図である。同図に示されるように、表面側撮像ユニット80aの第1撮像部30aに含まれる第1ラインセンサ34aは、第1画像処理部130aを介して検査手段としての第1スレーブPC140aに接続されており、表面側撮像ユニット80aの第2撮像部30bに含まれる第2ラインセンサ34bは、第2画像処理部130bを介して第2スレーブPC140bに接続されている。これらの第1スレーブPC140aおよび第2スレーブPC140bは、表面側撮像ユニット80aに対応した表面側検査手段として機能する。   FIG. 4 is a control block diagram of the appearance inspection apparatus 200 described above. As shown in the figure, the first line sensor 34a included in the first imaging unit 30a of the front-side imaging unit 80a is connected to the first slave PC 140a as an inspection unit via the first image processing unit 130a. The second line sensor 34b included in the second imaging unit 30b of the front-side imaging unit 80a is connected to the second slave PC 140b via the second image processing unit 130b. The first slave PC 140a and the second slave PC 140b function as surface side inspection means corresponding to the surface side imaging unit 80a.

同様に、裏面側撮像ユニット80bの第3撮像部30cに含まれる第3ラインセンサ34cは、第3画像処理部130cを介して第3スレーブPC140cに接続されており、裏面側撮像ユニット80bの第4撮像部30dに含まれる第4撮像部30dは、第4画像処理部130dを介して第4スレーブPC140dに接続されている。これらの第3スレーブPC140cおよび第4スレーブPC140dは、裏面側撮像ユニット80bに対応した裏面側検査手段として機能する。以下、適宜、第1画像処理部130a〜第4画像処理部130dを「画像処理部130」と称し、第1スレーブPC140a〜第4スレーブPC140dを「スレーブPC140」と称する。各画像処理部130は、対応する撮像部30によって撮像された画像を処理して画像データを生成するものである。   Similarly, the third line sensor 34c included in the third imaging unit 30c of the back-side imaging unit 80b is connected to the third slave PC 140c via the third image processing unit 130c, and the third line sensor 34c of the back-side imaging unit 80b. The fourth imaging unit 30d included in the fourth imaging unit 30d is connected to the fourth slave PC 140d via the fourth image processing unit 130d. The third slave PC 140c and the fourth slave PC 140d function as back side inspection means corresponding to the back side imaging unit 80b. Hereinafter, the first image processing unit 130a to the fourth image processing unit 130d will be referred to as “image processing unit 130” and the first slave PC 140a to the fourth slave PC 140d will be referred to as “slave PC 140” as appropriate. Each image processing unit 130 processes an image captured by the corresponding image capturing unit 30 to generate image data.

各スレーブPC140a〜140dは、CPU,ROM,RAM等に加えて、対応する画像処理部130a〜130dから送られる画像データ等を格納するメモリ141a〜141dを有する。また、各スレーブPC140a〜140dには、上述のCPU等により、メモリ141a〜141dに格納された画像データの解析および検査を実行する解析部142a〜142dが構築されている。更に、各スレーブPC140a〜140dは、検査の合否の判定基準として解析部142a〜142dによる解析に用いられる検査データを格納したライブラリ143a〜143dや、各種データの送受信を行う送受信部144a〜144d等を有している。   Each of the slave PCs 140a to 140d includes memories 141a to 141d that store image data sent from the corresponding image processing units 130a to 130d, in addition to the CPU, ROM, RAM, and the like. In addition, in each of the slave PCs 140a to 140d, analysis units 142a to 142d that perform analysis and inspection of image data stored in the memories 141a to 141d are constructed by the above-described CPU or the like. Further, each of the slave PCs 140a to 140d includes a library 143a to 143d that stores inspection data used for analysis by the analysis units 142a to 142d as determination criteria for the pass / fail of inspection, and transmission / reception units 144a to 144d that transmit and receive various data. Have.

スレーブPC140a〜140dの送受信部144a〜144dは、それぞれスイッチングハブ150を介して他のスレーブPC140と相互にデータ通信可能に接続されている。また、スレーブPC140a〜140dは、スイッチングハブ150を介してマスタPC160にも接続されており、これにより、マスタPC160と各スレーブPC140a〜140dとの間のデータ通信も可能とされている。マスタPC160は、CPU,ROM,RAM、メモリ、入出力インターフェース等を有するものであり、外観検査装置200全体の管理手段として機能する。マスタPC160には、CPU等により、焦点制御部161、照明制御部162および走査制御部163および搬送制御部164が構築されている。また、マスタPC160は、表示制御部165と、各種データの送受信を行う送受信部166とを有している。図4に示されるように、表示制御部165により、最終的な検査結果を表示させるディスプレイ170が制御され、送受信部166は、上述のスイッチングハブ150に接続されている。   The transmission / reception units 144a to 144d of the slave PCs 140a to 140d are connected to the other slave PCs 140 via the switching hub 150 so as to be able to perform data communication with each other. The slave PCs 140a to 140d are also connected to the master PC 160 via the switching hub 150, thereby enabling data communication between the master PC 160 and each of the slave PCs 140a to 140d. The master PC 160 has a CPU, a ROM, a RAM, a memory, an input / output interface, and the like, and functions as a management unit for the appearance inspection apparatus 200 as a whole. In the master PC 160, a focus control unit 161, an illumination control unit 162, a scanning control unit 163, and a conveyance control unit 164 are constructed by a CPU or the like. In addition, the master PC 160 includes a display control unit 165 and a transmission / reception unit 166 that transmits and receives various data. As shown in FIG. 4, the display 170 that controls the display of the final inspection result is controlled by the display controller 165, and the transmitter / receiver 166 is connected to the switching hub 150 described above.

焦点制御部161は、表面側撮像ユニット80aに設けられている焦点調整モータ40を制御するものである。そして、本実施形態においては、焦点制御部161、焦点調整モータ40、および表面側支持フレーム36aとベースフレーム38との摺動機構等により、像倍率を変えることなく被検査体である基板2に焦点を合わせるための焦点合わせ機構が構成される。また、照明制御部162は、表面側照明ユニット100aおよび裏面側照明ユニット100bを制御するものであり、走査制御部163は、表面側撮像ユニット80aの第1ラインセンサ34aおよび第2ラインセンサ34b並びに裏面側撮像ユニット80bの第3ラインセンサ34cおよび第4ラインセンサ34dによる被検査体の走査を制御する。更に、搬送制御部164は、搬送モータ58を制御するものであり、搬送レール54(搬送ベルト)上にセットされた被検査体である基板2の移動や、基板2の1ライン分移動等は、搬送制御部164により制御される。   The focus control unit 161 controls the focus adjustment motor 40 provided in the front-side imaging unit 80a. In this embodiment, the focus control unit 161, the focus adjustment motor 40, the sliding mechanism between the front-side support frame 36a and the base frame 38, and the like are applied to the substrate 2 that is the object to be inspected without changing the image magnification. A focusing mechanism for focusing is configured. The illumination control unit 162 controls the front side illumination unit 100a and the back side illumination unit 100b, and the scanning control unit 163 includes the first line sensor 34a and the second line sensor 34b of the front side imaging unit 80a, and Control of the scan of the object to be inspected by the third line sensor 34c and the fourth line sensor 34d of the back side imaging unit 80b is controlled. Furthermore, the conveyance control unit 164 controls the conveyance motor 58. The movement of the substrate 2, which is the inspection object set on the conveyance rail 54 (conveyance belt), the movement of the substrate 2 by one line, and the like are performed. Control is performed by the transport control unit 164.

なお、マスタPC160の送受信部166は、LAN(Local Area Network)を介して他のPC等に接続されてもよく、これにより、マスタPC160から当該他PCに検査結果等を与えることが可能となる。また、マスタPC160には、図示されないキーボードやマウスといった入力手段が接続され、これらのキーボード等を介して、ユーザは、データ入力や、外観検査装置200の操作を実行することができる。   Note that the transmission / reception unit 166 of the master PC 160 may be connected to another PC or the like via a LAN (Local Area Network), whereby the master PC 160 can give an inspection result or the like to the other PC. . The master PC 160 is connected to input means such as a keyboard and a mouse (not shown), and the user can execute data input and operation of the appearance inspection apparatus 200 via these keyboards and the like.

次に、図5〜図9を参照しながら、上述の外観検査装置200による被検査体の外観検査の手順について説明する。   Next, with reference to FIGS. 5 to 9, a procedure for appearance inspection of the object to be inspected by the above-described appearance inspection apparatus 200 will be described.

図5は、外観検査装置200による基板2の外観検査の手順を説明するためのフローチャートである。同図は、表面リフロー工程と裏面のDIP工程とを経てICチップやコネクタ等の部品が実装された基板2の表裏面を同時に検査する手順を示すものである。同図に示されるように、基板2の検査を実行するに際して、マスタPC160の焦点制御部161は、検査前に予め入力されている基板情報(検査データ)から被検査体である基板2の厚さ情報を取得する(S10)。なお、基板2の厚さは、キーボードやマウス等を用いてユーザによってマスタPC160に入力されてもよい。基板2の厚さを取得すると、マスタPC160の焦点制御部161は、所定の記憶領域に格納されている焦点調整テーブルから、S10にて入力された基板2の厚さ情報に応じたベースフレーム38に対する表面側支持フレーム36aの移動量(例えば、0.3〜2.0mm程度)を読み出すと共に、読み出した移動量だけ表面側支持フレーム36aが移動するように焦点調整モータ40を制御する(S12)。   FIG. 5 is a flowchart for explaining a procedure of appearance inspection of the substrate 2 by the appearance inspection apparatus 200. This figure shows a procedure for simultaneously inspecting the front and back surfaces of the substrate 2 on which components such as an IC chip and a connector are mounted through a front surface reflow process and a back surface DIP process. As shown in the figure, when the inspection of the substrate 2 is executed, the focus control unit 161 of the master PC 160 determines the thickness of the substrate 2 that is the object to be inspected from the substrate information (inspection data) input in advance before the inspection. Information is acquired (S10). Note that the thickness of the substrate 2 may be input to the master PC 160 by the user using a keyboard, a mouse, or the like. When the thickness of the substrate 2 is acquired, the focus control unit 161 of the master PC 160 reads the base frame 38 according to the thickness information of the substrate 2 input in S10 from the focus adjustment table stored in a predetermined storage area. The movement amount (for example, about 0.3 to 2.0 mm) of the surface side support frame 36a with respect to is read, and the focus adjustment motor 40 is controlled so that the surface side support frame 36a moves by the read movement amount (S12). .

上述のように、表面側撮像ユニット80aの撮像系(光学系)を構成する第1および第2ラインセンサ34a,34b、第1および第2レンズ32a,32b、中間レンズ42等は、何れも表面側支持フレーム36a上に位置決め固定されている。従って、S12にて表面側支持フレーム36aがベースフレーム38に対して移動させられると、被検査体である基板との焦点距離、すなわち、中間レンズ42の端面からハーフミラー110までの距離xと、ハーフミラー110から基板2の表面までの距離xとの合計(図2参照)が変化することになるので、像倍率を変えることなく基板2に焦点を合わせることができる。このように、外観検査装置200は、被検査体である基板2の撮像方向における寸法、すなわち、基板2の厚さに応じて基板2との焦点距離(x+x)を変化させる焦点合わせ機構を有している。この結果、外観検査装置200によれば、基板2の厚さが変化しても、基板2の表面に焦点を合わせて鮮明な画像を得ることができるので、精度のよい検査を実行することが可能となる。 As described above, the first and second line sensors 34a and 34b, the first and second lenses 32a and 32b, the intermediate lens 42, and the like constituting the imaging system (optical system) of the surface-side imaging unit 80a are all surfaces. It is positioned and fixed on the side support frame 36a. Therefore, when the surface-side support frame 36a is moved relative to the base frame 38 at S12, the focal length of the substrate as an inspection target, i.e., the distance x 1 from the end face of the intermediate lens 42 to the half mirror 110 since the sum of the distance x 2 from the half mirror 110 to the surface of the substrate 2 (see FIG. 2) will change, can be focused on the substrate 2 without changing the image magnification. As described above, the appearance inspection apparatus 200 is configured to change the focal length (x 1 + x 2 ) with the substrate 2 in accordance with the dimension in the imaging direction of the substrate 2 as the inspection object, that is, the thickness of the substrate 2. It has a mechanism. As a result, according to the appearance inspection apparatus 200, a clear image can be obtained by focusing on the surface of the substrate 2 even if the thickness of the substrate 2 is changed. It becomes possible.

上述のようにして、S12における焦点合わせ処理が完了すると、マスタPC160の搬送制御部164は、基板搬送テーブル50による撮像ユニット80への基板2の搬送を開始させる(S14)。本実施形態では、上述のように、表面側照明ユニット100aが裏面側照明ユニット100bよりも基板2の搬送方向上流側に配置されている。このため、基板2は、基板搬送テーブル50により、まず、表面側撮像ユニット80aの第1ラインセンサ34aおよび第2ラインセンサ34bによる走査範囲であるスタート位置まで移動される。そして、基板2が表面側撮像ユニット80aの第1ラインセンサ34aおよび第2ラインセンサ34bによる走査範囲であるスタート位置まで搬送されると、マスタPC160の照明制御部162が、表面側照明ユニット100aおよび裏面側照明ユニット100bによる基板2の照射を開始させ、マスタPC160の走査制御部163が、表面側撮像ユニット80aの第1および第2撮像部30a,30bおよび裏面側撮像ユニット80bの第3および第4撮像部30c,30dによる基板2の表裏面の撮像を開始させる(S16)。   As described above, when the focusing process in S12 is completed, the transport control unit 164 of the master PC 160 starts transporting the substrate 2 to the imaging unit 80 by the substrate transport table 50 (S14). In the present embodiment, as described above, the front surface side illumination unit 100a is disposed on the upstream side in the transport direction of the substrate 2 relative to the back surface side illumination unit 100b. For this reason, the board | substrate 2 is first moved to the start position which is the scanning range by the 1st line sensor 34a and the 2nd line sensor 34b of the surface side imaging unit 80a by the board | substrate conveyance table 50a. And if the board | substrate 2 is conveyed to the start position which is the scanning range by the 1st line sensor 34a and the 2nd line sensor 34b of the surface side imaging unit 80a, the illumination control part 162 of master PC160 will be the surface side illumination unit 100a and Irradiation of the substrate 2 by the back side illumination unit 100b is started, and the scanning control unit 163 of the master PC 160 causes the first and second imaging units 30a and 30b of the front side imaging unit 80a and the third and third of the back side imaging unit 80b. The imaging of the front and back surfaces of the substrate 2 by the four imaging units 30c and 30d is started (S16).

S16にて各撮像ユニット80a,80bによる撮像が開始されると、第1ラインセンサ34a、第2ラインセンサ34b、第3ラインセンサ34c、第4ラインセンサ34dは、一走査単位の基板2の走査を同期して行うように走査制御部163により制御される。すなわち、表面側照明ユニット100aによって基板2の表面に光が照射された際に、第1撮像部30aの第1ラインセンサ34aは、中間レンズ42および第1レンズ32aを介して、また、第2撮像部30bの第2ラインセンサ34bは、中間レンズ42および第2レンズ32bを介して、それぞれ画像を走査する。更に、裏面側照明ユニット100bによって基板2の裏面に光が照射された際に、第3撮像部30cの第3ラインセンサ34cは、中間レンズ42および第3レンズ32cを介して、また、第4撮像部30dの第4ラインセンサ34dは、中間レンズ42および第4レンズ32dを介して、それぞれ画像を走査する。このように、ラインセンサ34a〜34dを用いることにより、検査面を二次元的に移行・停止させ、これをくり返して順次スポット撮像をする構成に比較して、機構を単純化すると共に、検査時間を短縮化することが可能となる。   When imaging by the imaging units 80a and 80b is started in S16, the first line sensor 34a, the second line sensor 34b, the third line sensor 34c, and the fourth line sensor 34d scan the substrate 2 in one scanning unit. Are controlled by the scanning control unit 163 so as to synchronize. That is, when light is irradiated onto the surface of the substrate 2 by the front side illumination unit 100a, the first line sensor 34a of the first imaging unit 30a passes through the intermediate lens 42 and the first lens 32a, and the second The second line sensor 34b of the imaging unit 30b scans an image via the intermediate lens 42 and the second lens 32b. Further, when light is irradiated to the back surface of the substrate 2 by the back surface side illumination unit 100b, the third line sensor 34c of the third imaging unit 30c passes through the intermediate lens 42 and the third lens 32c, and the fourth The fourth line sensor 34d of the imaging unit 30d scans an image via the intermediate lens 42 and the fourth lens 32d. As described above, by using the line sensors 34a to 34d, the inspection surface is moved and stopped two-dimensionally, and the mechanism is simplified and the inspection time is compared with a configuration in which this is repeated to sequentially perform spot imaging. Can be shortened.

そして、マスタPC160の搬送制御部164は、基板2が第1〜第4ラインセンサ34a〜34dにより1ラインだけ走査されるたびに、送りねじ56を駆動する搬送モータ58に制御信号を与え、基板2を1ライン分進行させる。これにより、第1〜第4ラインセンサ34a〜34dによる走査を一括して実行可能となり、第1〜第4ラインセンサ34a〜34dによる走査が実行されないタイミングで搬送制御部164によって基板2が移動させられるので、効率よく基板2の走査を行って検査時間を短縮可能となる。なお、一走査単位とは、例えば基板2の一端から他端までの一方向における1回の走査、あるいは1回の往復走査といったラインセンサ34a〜34bが実行し得る走査の単位をいう。   The transport control unit 164 of the master PC 160 gives a control signal to the transport motor 58 that drives the feed screw 56 every time the substrate 2 is scanned by one line by the first to fourth line sensors 34a to 34d. Advance 2 for one line. As a result, scanning by the first to fourth line sensors 34a to 34d can be executed in a lump, and the substrate 2 is moved by the transport control unit 164 at a timing when the scanning by the first to fourth line sensors 34a to 34d is not executed. Therefore, the inspection time can be shortened by efficiently scanning the substrate 2. One scanning unit refers to a scanning unit that can be executed by the line sensors 34a to 34b, such as one scanning in one direction from one end to the other end of the substrate 2 or one reciprocating scanning.

このようにして、第1〜第4ラインセンサ34a〜34dが基板2の搬送方向における全長について走査すると、基板2の表裏面の撮像が1回の基板搬送工程中で実行されることになる。すなわち、基板2は、基板搬送テーブル50により、表面側撮像ユニット80aと裏面側撮像ユニット80bとの間を搬送され、この間、表面側撮像ユニット80aは基板2の表面を、裏面側撮像ユニット80bは基板2の裏面を、それぞれ1回の基板搬送工程の中に撮像する。なお、1回の基板搬送工程とは、基板2の一方向における搬送工程でもよく、基板2の往復搬送工程であってもよい。   In this way, when the first to fourth line sensors 34a to 34d scan the entire length in the transport direction of the substrate 2, imaging of the front and back surfaces of the substrate 2 is performed in one substrate transport process. That is, the substrate 2 is transported between the front-side imaging unit 80a and the back-side imaging unit 80b by the substrate transport table 50. During this time, the front-side imaging unit 80a is on the surface of the substrate 2, and the back-side imaging unit 80b is The back surface of the board | substrate 2 is imaged in one board | substrate conveyance process, respectively. The one-time substrate transport process may be a transport process in one direction of the substrate 2 or a reciprocal transport process of the substrate 2.

ところで、本実施形態において、各撮像ユニット80a,80bによる基板2の撮像中、照明制御部162は、一走査単位の実行に伴う光の照射が同期して行われるように表面側照明ユニット100aおよび裏面側照明ユニット100bを制御し、走査制御部163は、表面側照明ユニット100aおよび裏面側照明ユニット100bが基板2に光を照射したときに基板2の走査が同期して行われるように第1〜第4ラインセンサ34a〜34bを制御する。   By the way, in this embodiment, during the imaging of the board | substrate 2 by each imaging unit 80a, 80b, the illumination control part 162 performs the irradiation of the light accompanying execution of one scanning unit synchronously, and the surface side illumination unit 100a and The back side illumination unit 100b is controlled, and the scanning control unit 163 performs first scanning so that the scanning of the substrate 2 is performed synchronously when the front side illumination unit 100a and the back side illumination unit 100b irradiate the substrate 2 with light. Controls the fourth line sensors 34a to 34b.

具体的には、照明制御部162は、同時に同色の光を基板2に対して同期して照射するように表面側照明ユニット100aおよび裏面側照明ユニット100bを制御する。また、本実施形態では、例えば、白色光源である第2光源104、緑色光源である第1光源102、青色光源である第3光源106がこの順番で作動され、表面側照明ユニット100aおよび裏面側照明ユニット100bは、白色光、緑色光、青色光をこの順番で基板2に照射する。これにより、例えば表面側照明ユニット100aにより照射された光が、周辺の部品による写り込み等によって裏面側照明ユニット100bによって照射されている基板2の裏面に漏洩してしまったとしても、光の干渉の検査結果への悪影響を最小限に抑制することが可能となる。   Specifically, the illumination control unit 162 controls the front-side illumination unit 100a and the back-side illumination unit 100b so that the substrate 2 is simultaneously irradiated with the same color of light in synchronization. In the present embodiment, for example, the second light source 104, which is a white light source, the first light source 102, which is a green light source, and the third light source 106, which is a blue light source, are operated in this order. The illumination unit 100b irradiates the substrate 2 with white light, green light, and blue light in this order. As a result, even if, for example, the light irradiated by the front surface side lighting unit 100a leaks to the back surface of the substrate 2 irradiated by the back surface side lighting unit 100b due to reflection by peripheral components, the light interference It is possible to minimize adverse effects on the inspection results.

そして、マスタPC160の走査制御部163は、表面側照明ユニット100aおよび裏面側照明ユニット100bの第2光源104から基板2に対して白色光が同時に照射されたときに、各ラインセンサ34a〜34dに一走査単位の走査を同期して実行させる。また、走査制御部163は、表面側照明ユニット100aおよび裏面側照明ユニット100bの第1光源102から緑色光が同時に照射されたときに、各ラインセンサ34a〜34dに更に一走査単位の走査を同期して実行させ、表面側照明ユニット100aおよび裏面側照明ユニット100bの第3光源106から青色光が同時に照射されたときに、各ラインセンサ34a〜34dに更に一走査単位の走査を同期して実行させる。   Then, the scanning control unit 163 of the master PC 160 applies each of the line sensors 34a to 34d when white light is simultaneously irradiated on the substrate 2 from the second light source 104 of the front side illumination unit 100a and the rear side illumination unit 100b. The scanning of one scanning unit is executed synchronously. The scanning control unit 163 further synchronizes scanning in units of one scanning to each of the line sensors 34a to 34d when green light is simultaneously emitted from the first light sources 102 of the front side illumination unit 100a and the rear side illumination unit 100b. When the blue light is simultaneously irradiated from the third light source 106 of the front surface side illumination unit 100a and the back surface side illumination unit 100b, the line sensors 34a to 34d are further synchronized with each other by one scanning unit. Let

上述のようにして各撮像ユニット80a,80bによって基板2が撮像される際、第1撮像部30aの第1ラインセンサ34aによって取得された画像は第1画像処理部130aに、第2撮像部30bの第2ラインセンサ34bによって取得された画像は第2画像処理部130bに、第3撮像部30cの第3ラインセンサ34cによって取得された画像は第3画像処理部130cに、第4撮像部30dの第3ラインセンサ34dによって取得されたは第4画像処理部130dに、それぞれ送信される。   When the board | substrate 2 is imaged by each imaging unit 80a, 80b as mentioned above, the image acquired by the 1st line sensor 34a of the 1st imaging part 30a is sent to the 1st image processing part 130a, and the 2nd imaging part 30b. The image acquired by the second line sensor 34b of the second image sensor 30b is in the second image processing unit 130b, the image acquired by the third line sensor 34c of the third image capturing unit 30c is in the third image processing unit 130c, and the fourth image capturing unit 30d. Obtained by the third line sensor 34d is transmitted to the fourth image processing unit 130d.

各画像処理部130a〜130dは、対応するラインセンサ34a〜34dから受け取った画像の画像処理を実行する。そして、第1画像処理部130aは第1スレーブPC140aのメモリ141aに画像処理後の画像データを送信・格納し、第2画像処理部130bは第2スレーブPC140bのメモリ141bに画像処理後の画像データを送信・格納する。同様に、第3画像処理部130cは第3スレーブPC140cのメモリ141cに画像処理後の画像データを送信・格納し、第4画像処理部130dは第4スレーブPC140dのメモリ141dに画像処理後の画像データを送信・格納する。   Each of the image processing units 130a to 130d executes image processing of images received from the corresponding line sensors 34a to 34d. The first image processing unit 130a transmits and stores the image data after the image processing to the memory 141a of the first slave PC 140a, and the second image processing unit 130b stores the image data after the image processing in the memory 141b of the second slave PC 140b. Is sent and stored. Similarly, the third image processing unit 130c transmits and stores the image data after the image processing to the memory 141c of the third slave PC 140c, and the fourth image processing unit 130d stores the image after the image processing in the memory 141d of the fourth slave PC 140d. Send and store data.

表面側撮像ユニット80aおよび裏面側撮像ユニット80bによる基板2の撮像が完了すると、マスタPC160の搬送制御部164は、搬送モータ58に指令信号を与えて送りねじ56を回転させることにより、基板搬送テーブル50を移動させて撮像が終了した基板2を次の工程へと搬出できるようにする。   When the imaging of the substrate 2 by the front side imaging unit 80a and the back side imaging unit 80b is completed, the conveyance control unit 164 of the master PC 160 gives a command signal to the conveyance motor 58 and rotates the feed screw 56 to thereby rotate the substrate conveyance table. 50 is moved so that the substrate 2 on which imaging has been completed can be carried out to the next step.

一方、各スレーブPC140a〜140dのメモリ141a〜141dに被検査体である基板2の画像データが格納されると、各々のスレーブPC140a〜140dの解析部142a〜142dは、それぞれのメモリ141a〜141dに格納された画像データの解析を行い、他のスレーブPC140a〜140dにおいて基板2の検査に際して必要なデータの交換を行う(S18)。S18においてスレーブPC140a〜140d間で交換されるデータには、例えば基板2に設けられた位置決め基準としての認識マークの位置を示すデータや、基板2に設けられたバーコード等の識別マークを解析して得られる基板2のシリアルナンバーや製造年月日等のデータといった基板2の検査に際してスレーブPC140a〜140dにおいて共用されるべきデータ(以下「共用データ」という)や、第1撮像部30aおよび第2撮像部30b、第3撮像部30cおよび第3撮像部30dにより撮像された部品の画像データが含まれる。   On the other hand, when the image data of the substrate 2 that is the inspection object is stored in the memories 141a to 141d of the slave PCs 140a to 140d, the analysis units 142a to 142d of the slave PCs 140a to 140d are stored in the memories 141a to 141d, respectively. The stored image data is analyzed, and data necessary for the inspection of the board 2 is exchanged in the other slave PCs 140a to 140d (S18). In the data exchanged between the slave PCs 140a to 140d in S18, for example, data indicating the position of the recognition mark as a positioning reference provided on the substrate 2 or an identification mark such as a barcode provided on the substrate 2 is analyzed. The data to be shared in the slave PCs 140a to 140d (hereinafter referred to as “shared data”), such as the serial number and the date of manufacture of the board 2 obtained in this way, and the first imaging unit 30a and the second The image data of the parts imaged by the imaging unit 30b, the third imaging unit 30c, and the third imaging unit 30d is included.

かかるS18における画像データの解析/交換について、図6を参照しながら説明する。図6(a)は、被検査体である基板2の表面を例示する上面図であり、以下、基板2の表面についての画像データの解析および共用データの共有化について説明する。図6(a)に示されるように、基板2には、基板2の位置決め基準となる第1認識マーク4aおよび第2認識マーク4bが形成されている。また、図6(a)に例示される基板2の略中央部には、表面側撮像ユニット80aの第1撮像部30aの撮像範囲と第2撮像部30bの撮像範囲にまたがるように第1部品6と第2部品8とが実装されている。なお、図示を省略するが、基板2には、各種データが記録されたバーコードが設けられている。   The analysis / exchange of image data in S18 will be described with reference to FIG. FIG. 6A is a top view illustrating the surface of the substrate 2 as an object to be inspected. Hereinafter, analysis of image data and sharing of shared data on the surface of the substrate 2 will be described. As shown in FIG. 6A, the substrate 2 is formed with a first recognition mark 4 a and a second recognition mark 4 b that serve as a positioning reference for the substrate 2. In addition, in the substantially central portion of the substrate 2 illustrated in FIG. 6A, the first component extends across the imaging range of the first imaging unit 30a and the imaging range of the second imaging unit 30b of the front side imaging unit 80a. 6 and the second component 8 are mounted. Although not shown, the substrate 2 is provided with a barcode on which various data are recorded.

図6(a)からわかるように、基板2の図中左側半分の領域は、第1撮像部30aによって撮像される一方、図中右側半分は第2撮像部30bにより撮像される。従って、基板2の第1認識マーク4aは、第1撮像部30aにより撮像され、その画像データは、第1スレーブPC140aのメモリ141aに格納される。また、基板2の第2認識マーク4bは、第2撮像部30bにより撮像され、その画像データは、第2スレーブPC140bのメモリ141bに格納される。これにより、第1撮像部30aに対応するスレーブPC140aは、メモリ141aに格納された画像データの解析時に、認識マークの画像データからその位置データを取得する。同様に、第2撮像部30bに対応するスレーブPC140bは、メモリ141bに格納された画像データの解析時に、認識マークの画像データからその位置データを取得する。そして、第1スレーブPC140aは、第1認識マーク4aの位置データを共用データとして他のスレーブPC140b,140cおよび140dに送信し、第2スレーブPC140bは、第2認識マーク4bの位置データを共用データとして他のスレーブPC140a,140cおよび140dに送信する。   As can be seen from FIG. 6A, the left half region of the substrate 2 in the drawing is imaged by the first imaging unit 30a, while the right half region in the drawing is imaged by the second imaging unit 30b. Accordingly, the first recognition mark 4a on the board 2 is imaged by the first imaging unit 30a, and the image data is stored in the memory 141a of the first slave PC 140a. The second recognition mark 4b on the board 2 is imaged by the second imaging unit 30b, and the image data is stored in the memory 141b of the second slave PC 140b. As a result, the slave PC 140a corresponding to the first imaging unit 30a acquires the position data from the image data of the recognition mark when analyzing the image data stored in the memory 141a. Similarly, the slave PC 140b corresponding to the second imaging unit 30b acquires the position data from the image data of the recognition mark when analyzing the image data stored in the memory 141b. Then, the first slave PC 140a transmits the position data of the first recognition mark 4a as shared data to the other slave PCs 140b, 140c and 140d, and the second slave PC 140b uses the position data of the second recognition mark 4b as shared data. It transmits to other slave PCs 140a, 140c and 140d.

この結果、外観検査装置200では、基板2が搬送レール54上で僅かに傾いていたり、基板2の位置が走査方向や搬送方向において若干ずれてセットされていたりしていても、基板2の位置決め基準としての第1認識マーク4aおよび第2認識マーク4bの位置データが共用データとして各スレーブPC140a〜140dにおいて共有されることから、各スレーブPC140a〜140dは、対応する撮像部30a〜30dの撮像範囲に認識マークが含まれておらず、あるいは認識マークの一部しか含まれていないような場合であっても、基板2の位置や姿勢を把握することができる。   As a result, in the appearance inspection apparatus 200, even if the substrate 2 is slightly tilted on the transport rail 54 or the position of the substrate 2 is set slightly shifted in the scanning direction or the transport direction, the positioning of the substrate 2 is performed. Since the position data of the first recognition mark 4a and the second recognition mark 4b as a reference is shared as shared data among the slave PCs 140a to 140d, each of the slave PCs 140a to 140d has an imaging range of the corresponding imaging unit 30a to 30d. Even if the recognition mark is not included or only a part of the recognition mark is included, the position and orientation of the substrate 2 can be grasped.

一方、図6(a)からわかるように、表面側撮像ユニット80aにおいては、第1撮像部30aと第2撮像部30bとの何れにおいても撮像されない領域が発生しないように、第1撮像部30aの撮像範囲と第2撮像部30bの撮像範囲とが、図6(a)において二点鎖線で示されるように一部重複するように定められている。同様に、裏面側撮像ユニット80bにおいても、第3撮像部30cの撮像範囲と第4撮像部30dの撮像範囲とが、一部重複するように定められている。ここで、表面側撮像ユニット80aを例に取って説明すると、図6(b)に示されるように、第1撮像部30aの撮像範囲は、基板2の図中左端から、基板2の走査方向における中心線よりも多少図中右側にまで及ぶ。これに対して、第2撮像部30bの撮像範囲は、基板2の図中右端から、基板2の走査方向における中心線よりも多少図中左側にまで及ぶ。   On the other hand, as can be seen from FIG. 6A, in the front side imaging unit 80a, the first imaging unit 30a does not generate a region that is not imaged in either the first imaging unit 30a or the second imaging unit 30b. The imaging range of the second imaging unit 30b and the imaging range of the second imaging unit 30b are determined to partially overlap as shown by a two-dot chain line in FIG. Similarly, also in the back side imaging unit 80b, the imaging range of the third imaging unit 30c and the imaging range of the fourth imaging unit 30d are determined to partially overlap. Here, the surface-side imaging unit 80a will be described as an example. As shown in FIG. 6B, the imaging range of the first imaging unit 30a is the scanning direction of the substrate 2 from the left end of the substrate 2 in the figure. It extends slightly to the right in the figure than the center line. On the other hand, the imaging range of the second imaging unit 30b extends from the right end in the figure of the substrate 2 to the left side in the figure to some extent from the center line in the scanning direction of the substrate 2.

そして、本実施形態においては、図6(a)等に例示された第1部品6や第2部品8のように、複数の撮像部30の撮像範囲にまたがって配置されている基板2上の部品については、当該部品の中心部を撮像範囲内に含む撮像部30に対応したスレーブPC140が検査を行うように定められている。すなわち、図6(a)等からわかるように、第1部品6は、その中心部が第1撮像部30aの撮像範囲に属するので、第1部品6の検査は、第1撮像部30aに対応した検査部としての第1スレーブPC140aにより実行される。これに対して、第2部品8は、その中心部が第2撮像部30bの撮像範囲に属することから、第2部品8の検査は、第2撮像部30bに対応した検査部としての第2スレーブPC140bにより実行される。   In this embodiment, like the first component 6 and the second component 8 illustrated in FIG. 6A and the like, on the substrate 2 arranged across the imaging ranges of the plurality of imaging units 30. For the component, it is determined that the slave PC 140 corresponding to the imaging unit 30 including the central part of the component in the imaging range performs the inspection. That is, as can be seen from FIG. 6 (a) and the like, the center of the first component 6 belongs to the imaging range of the first imaging unit 30a, so the inspection of the first component 6 corresponds to the first imaging unit 30a. It is executed by the first slave PC 140a as the inspection unit. On the other hand, since the center part of the second component 8 belongs to the imaging range of the second imaging unit 30b, the inspection of the second component 8 is a second inspection unit corresponding to the second imaging unit 30b. It is executed by the slave PC 140b.

この場合、図6(b)からわかるように、第1撮像部30aに対応した第1画像処理部130aによってスレーブPC140aのメモリ141aに画像データが格納された時点では、スレーブPC140aは、その検査対象である第1部品6の画像データのすべてを保持していないことになる。同様に、第2撮像部30bに対応した第2画像処理部130bによってスレーブPC140bのメモリ141bに画像データが格納された時点では、スレーブPC140bは、その検査対象である第2部品8の画像データのすべてを保持していないことになる。   In this case, as can be seen from FIG. 6B, when the image data is stored in the memory 141a of the slave PC 140a by the first image processing unit 130a corresponding to the first imaging unit 30a, the slave PC 140a That is, not all the image data of the first component 6 is held. Similarly, when the image data is stored in the memory 141b of the slave PC 140b by the second image processing unit 130b corresponding to the second imaging unit 30b, the slave PC 140b has the image data of the second component 8 to be inspected. Will not hold everything.

このため、各スレーブPC140a〜140dは、画像データの解析の実行中に、自らの検査対象となっていない部品の画像データを認識すると、当該部品の検査を担うスレーブPC140a〜140d(あるいは、他のスレーブPC140のすべて)に対して当該画像データを送信する。すなわち、図6の例のもとでは、第1スレーブPC140aのメモリ141aには、第2部品8の画像データの一部が含まれることになるが、かかる第2部品8の画像データは、第1スレーブPC140aから第2部品8の検査を担う第2スレーブPC140bに送られ、第2スレーブPC140bは、その画像データをメモリ141bに格納する。また、第2スレーブPC140bのメモリ141bには、第1部品6の画像データの一部が含まれることになるが、かかる第1部品6の画像データは、第2スレーブPC140bから第1部品6の検査を担う第1スレーブPC140aに送られ、第1スレーブPC140aは、その画像データをメモリ141aに格納する。こうして、スレーブPC140aおよびスレーブPC140bは、図6(c)に示されるように、自らが検査を担う部品の欠落している画像データを取得する。   For this reason, when each slave PC 140a to 140d recognizes image data of a component that is not subject to inspection during execution of image data analysis, each of the slave PCs 140a to 140d that is responsible for the inspection of the component (or another The image data is transmitted to all of the slave PCs 140). That is, under the example of FIG. 6, the memory 141a of the first slave PC 140a includes a part of the image data of the second component 8, but the image data of the second component 8 is The data is sent from one slave PC 140a to a second slave PC 140b responsible for inspecting the second component 8, and the second slave PC 140b stores the image data in the memory 141b. Further, the memory 141b of the second slave PC 140b includes a part of the image data of the first component 6. The image data of the first component 6 is transferred from the second slave PC 140b to the first component 6. The data is sent to the first slave PC 140a responsible for the inspection, and the first slave PC 140a stores the image data in the memory 141a. In this way, as shown in FIG. 6C, the slave PC 140a and the slave PC 140b acquire the image data in which the components that are inspected by themselves are missing.

上述のようにして、画像データの解析/交換を完了させると、各スレーブPC140a〜140dの解析部142a〜142dは、それぞれ、ライブラリ143a〜143dに格納されている検査データを用いて自らが担う基板2の領域の検査を実行する(S20)。ここで、外観検査装置200では、検査合否の判定基準としての検査データが、被検査体である基板2に実装されたICチップやコネクタといった各部品について、表面側撮像ユニット80aと裏面側撮像ユニット80bの撮像方向に対応させてそれぞれ複数用意されている。   When the analysis / exchange of the image data is completed as described above, the analysis units 142a to 142d of the slave PCs 140a to 140d respectively use the inspection data stored in the libraries 143a to 143d, respectively. Inspection of area 2 is executed (S20). Here, in the appearance inspection apparatus 200, the front side imaging unit 80a and the rear side imaging unit have the inspection data as the determination criteria of the inspection pass / fail for each component such as an IC chip and a connector mounted on the substrate 2 that is an inspection object. A plurality of images are prepared corresponding to the imaging direction 80b.

すなわち、従来の外観検査装置では、基本的に基板の表裏面の検査が同時に行われることがなかったため、外観検査装置において撮像ユニットの撮像方向に応じてフロー、DIPあるいは手付けといった「はんだ形式」を識別する必要はなかった。これに対して、本発明による外観検査装置200では、被検査体である基板2の表裏面が同時に検査できるようにするために、基板2に実装された各部品について、表面用検査データと裏面用検査データとが少なくとも1つ用意されている。表面用検査データおよび裏面用検査データは、検査において合格とされる「はんだ形状」等を示す画像データおよび数値データからなり、部品に対応したはんだパッドの形状に応じたフロー、DIPあるいは手付けといった「はんだ形式」を識別するための識別子をそれぞれ有している。   That is, in the conventional visual inspection apparatus, the front and back surfaces of the substrate are not basically inspected at the same time. Therefore, in the visual inspection apparatus, a “solder type” such as flow, DIP, or manual attachment is used according to the imaging direction of the imaging unit. There was no need to identify. On the other hand, in the appearance inspection apparatus 200 according to the present invention, the inspection data for the front surface and the back surface of each component mounted on the substrate 2 are provided so that the front and back surfaces of the substrate 2 that is the object to be inspected can be simultaneously inspected. At least one inspection data is prepared. The inspection data for the front surface and the inspection data for the back surface are composed of image data and numerical data indicating “solder shape” or the like that is passed in the inspection, and the flow, DIP, or manual attachment according to the shape of the solder pad corresponding to the part. Each has an identifier for identifying the “solder type”.

各部品についての表面用検査データは、表面側撮像ユニット80aに対応したスレーブPC140aおよび140bのうち、当該部品の検査を担うもののライブラリ143aまたは143bに、各部品についての裏面用検査データは、裏面側撮像ユニット80bに対応したスレーブPC140cおよび140dのうち、当該部品の検査を担うもののライブラリ143cまたは143dに、それぞれ格納されている。ただし、基板2の表面の検査を行うスレーブPC140aおよび140bのライブラリ143aおよび143bに格納される表面用検査データは、互いに同一のものとされてもよい。同様に、基板2の裏面の検査を行うスレーブPC140cおよび140dのライブラリ143cおよび143dに格納される表面用検査データは、互いに同一のものとされてもよい。   The inspection data for the front surface for each component is stored in the library 143a or 143b of the slave PCs 140a and 140b corresponding to the front-side imaging unit 80a, and the inspection data for the rear surface for each component is Of the slave PCs 140c and 140d corresponding to the imaging unit 80b, those stored in the library 143c or 143d of the one responsible for the inspection of the component are stored. However, the surface inspection data stored in the libraries 143a and 143b of the slave PCs 140a and 140b that inspect the surface of the substrate 2 may be the same. Similarly, the surface inspection data stored in the libraries 143c and 143d of the slave PCs 140c and 140d that inspect the back surface of the substrate 2 may be the same.

これにより、外観検査装置200では、これらの表面用および裏面用検査データと、表面側撮像ユニット80aおよび裏面側撮像ユニット80bを用いて得られる基板2の画像データと用いることにより、表面側にリフロー面を有すると共に裏面側にDIP面を有する基板2を同時に複数の方向、すなわち、表面側と裏面側とから精度よく検査することが可能となる。なお、上述の表面用および裏面用検査データは、各スレーブPC140a〜140dのライブラリ143a〜143dにそれぞれ個別に入力されてもよい。また、マスタPC160にすべての表面用および裏面用検査データを一括して入力し、各スレーブPC140a〜140dが、自らが必要とする検査データをマスタPC160から取得するようにしてもよい。   Thereby, in the appearance inspection apparatus 200, reflow is performed on the front surface side by using the inspection data for the front surface and the back surface and the image data of the substrate 2 obtained by using the front surface side imaging unit 80a and the back surface side imaging unit 80b. The substrate 2 having the surface and having the DIP surface on the back surface side can be simultaneously inspected with high accuracy from a plurality of directions, that is, the front surface side and the back surface side. Note that the above-described front surface and back surface inspection data may be individually input to the libraries 143a to 143d of the slave PCs 140a to 140d, respectively. Alternatively, all the inspection data for the front surface and the back surface may be input to the master PC 160 at a time, and each slave PC 140a to 140d may acquire the inspection data required by the slave PC 140a from the master PC 160.

このように、外観検査装置200では、各スレーブPC140a〜140dが、メモリ141a〜141dに格納された画像データを解析し、その結果得られる認識マークやバーコード、その他検査に必要なデータである共用データを共有すると共に、検査に必要な画像データを相互に交換し合う。そして、各スレーブPC140a〜140dは、共用データ、画像データおよびそれぞれのライブラリ143a〜143dに格納された検査データを用いて被検査体である基板2の検査をそれぞれ実行する。   As described above, in the appearance inspection apparatus 200, each of the slave PCs 140a to 140d analyzes the image data stored in the memories 141a to 141d, and the shared mark that is obtained as a result, the barcode, and other data necessary for the inspection. In addition to sharing data, image data necessary for inspection is exchanged with each other. Then, each of the slave PCs 140a to 140d performs an inspection of the substrate 2 that is an object to be inspected using the shared data, the image data, and the inspection data stored in the respective libraries 143a to 143d.

このような各スレーブPC140a〜140bの動作は、実質的に、生物の細胞の動きと同様のものである。すなわち、すべての細胞は同じ遺伝子を持ち、あるトリガに従って自らに関係する指令のみを選択して実行するが、これを本実施形態に当てはめると、上述の共用データが遺伝子に相当し、上述のスレーブPC140a〜140dが細胞に相当する。そして、本実施形態では、マスタPC160が各スレーブPC140a〜140bに検査箇所や内容を割り当て、指示する代わりに、各スレーブPC140が自律的に画像データを処理し、検査を実行する。この結果、外観検査装置200では、基板2の検査を複数のスレーブPC140a〜140dに分担させて、基板2の検査の精度を向上させると共に、検査時間を短縮化することが可能となる。   The operation of each of the slave PCs 140a to 140b is substantially the same as the movement of a biological cell. That is, all cells have the same gene, and only a command related to itself is selected and executed according to a certain trigger. When this is applied to this embodiment, the above-mentioned shared data corresponds to a gene, and the above-mentioned slave The PCs 140a to 140d correspond to cells. In the present embodiment, instead of the master PC 160 assigning and instructing inspection locations and contents to the slave PCs 140a to 140b, each slave PC 140 autonomously processes the image data and executes the inspection. As a result, in the appearance inspection apparatus 200, the inspection of the substrate 2 is shared by the plurality of slave PCs 140a to 140d, so that the inspection accuracy of the substrate 2 can be improved and the inspection time can be shortened.

S20における検査が終了すると、各スレーブPC140a〜140dは、互いに検査結果を共有すべく、他のスレーブPC140およびマスタPC160にそれぞれの検査結果を示すデータを送信する(S22)。また、各スレーブPC140a〜140dのメモリ141a〜141dに格納されている認識マークの位置データ等の共用データも、マスタPC160に送信される。そして、マスタPC160の表示制御部165は、CPUからの指令に応じて、予め入力されている基板2のCADデータや各スレーブPC140a〜140dから受け取ったデータに基づいて、被検査体である基板2についての検査結果をディスプレイ170の画面171に表示させる(S24)。   When the inspection in S20 is completed, the slave PCs 140a to 140d transmit data indicating the inspection results to the other slave PCs 140 and the master PC 160 in order to share the inspection results with each other (S22). In addition, shared data such as recognition mark position data stored in the memories 141 a to 141 d of the slave PCs 140 a to 140 d is also transmitted to the master PC 160. Then, the display control unit 165 of the master PC 160 responds to a command from the CPU based on the CAD data of the substrate 2 inputted in advance and the data received from each of the slave PCs 140a to 140d. Is displayed on the screen 171 of the display 170 (S24).

図7は、ディスプレイ170の画面171に表示される検査結果を例示する模式図である。同図に示されるように、本実施形態の外観検査装置200では、表示制御部165によって、被検査体である基板2の表面についての検査結果と、基板2の裏面についての検査結果とがディスプレイ170の画面171上に同時に表示させられる。また、表示制御部165は、図7に示されるように、各スレーブPC140a〜140dによる検査の結果、不良であると判定された箇所(部品)を合格箇所と明確に識別し得る形式で検査結果を画面171上に表示させる。これにより、ユーザは、特にマウス等を操作しなくても、被検査体の表面と裏面との検査結果を同時に把握することができる。このように、外観検査装置200によれば、被検査体である基板2の表裏面双方について速やかに検査が実行された後、ユーザに対して基板2表面と裏面との検査結果が同時に提供されることから、ユーザの使い勝手を大幅に向上させることができる。   FIG. 7 is a schematic view illustrating the inspection result displayed on the screen 171 of the display 170. As shown in the figure, in the appearance inspection apparatus 200 of the present embodiment, the display control unit 165 displays the inspection result for the surface of the substrate 2 that is the object to be inspected and the inspection result for the back surface of the substrate 2. 170 are simultaneously displayed on the screen 171. In addition, as shown in FIG. 7, the display control unit 165 has a test result in a format that can clearly identify a point (part) determined to be defective as a pass point as a result of the test by each of the slave PCs 140 a to 140 d. Is displayed on the screen 171. Thereby, the user can grasp | ascertain simultaneously the test result of the surface of a to-be-inspected object, and a back surface, without operating especially a mouse | mouth etc. in particular. As described above, according to the appearance inspection apparatus 200, after both the front and back surfaces of the substrate 2 that is the object to be inspected are quickly inspected, the inspection results of the front and back surfaces of the substrate 2 are simultaneously provided to the user. Therefore, user convenience can be greatly improved.

なお、被検査体が、図8に例示されるようなミシン目またはV溝2a等を有して部品実装後に切断される形式の基板2Aである場合には、各スレーブPC140a〜140dによる検査結果は、図9に例示されるような態様でディスプレイ170の画面171上に表示されてもよい。すなわち、図8に例示されるように、部品実装後にNo.1〜No.4の4つの領域に分離される基板2Aについて、各スレーブPC140a〜140dによる検査の結果、例えば領域No.4の表裏面に不良箇所が存在していると判定された場合、マスタPC160の表示制御部165は、不良箇所を含む領域No.4の表裏面のみをディスプレイ170の画面171上に表示させる。このように、検査手段としての各スレーブPC140a〜140dによる検査の結果、不良箇所が存在している被検査体である基板2Aの領域の表裏面のみを表示手段としてのディスプレイ170に表示させても、ユーザの使い勝手を大幅に向上させることができる。   When the object to be inspected is a substrate 2A having a perforation or a V-groove 2a as illustrated in FIG. 8 and being cut after component mounting, the inspection results by the slave PCs 140a to 140d May be displayed on the screen 171 of the display 170 in a manner as illustrated in FIG. That is, as illustrated in FIG. 1-No. 4, the result of the inspection by the slave PCs 140a to 140d, for example, region No. 4, the display control unit 165 of the master PC 160 determines the region No. including the defective portion. 4 is displayed on the screen 171 of the display 170 only. In this way, as a result of the inspection by each of the slave PCs 140a to 140d as the inspection means, only the front and back surfaces of the area of the substrate 2A, which is the object to be inspected in which the defective portion exists, may be displayed on the display 170 as the display means. The user convenience can be greatly improved.

上述のようにして、各スレーブPC140a〜140dによる検査結果をディスプレイ170に表示させると、マスタPC160は、同種の被検査体が存在するか否か判定し(S26)、同種すなわち検査が終了した基板2と同一厚さの基板2を検査すべきと判断した場合(S26におけるYes)には、再度S14〜S24の処理を実行させる。また、マスタPC160は、同種の被検査体が存在しないと判断した場合(S26におけるNo)、外観検査装置200による検査を終了させる。   As described above, when the inspection result by each of the slave PCs 140a to 140d is displayed on the display 170, the master PC 160 determines whether or not the same kind of inspected object exists (S26), and the same kind, that is, the board that has been inspected. When it is determined that the substrate 2 having the same thickness as 2 should be inspected (Yes in S26), the processes of S14 to S24 are executed again. In addition, when the master PC 160 determines that there is no inspection object of the same type (No in S26), the master PC 160 ends the inspection by the appearance inspection apparatus 200.

ここまで、本発明を実施するための好適な実施形態について説明したが、本発明は上述の実施形態に限定されるものではなく、当業者の知識に基づいて様々な改良や変更がなさ得ることはいうまでもなく、そのような変形例も本発明の範囲に含まれる。以下、そのような変形例を例示する。   The preferred embodiments for carrying out the present invention have been described so far, but the present invention is not limited to the above-described embodiments, and various improvements and modifications can be made based on the knowledge of those skilled in the art. Needless to say, such modifications are also included in the scope of the present invention. Hereinafter, such modifications will be exemplified.

すなわち、各撮像部30a〜30dは、ラインセンサ34a〜34dによって被検査体である基板2を走査するものではなく、CCDセンサ等によって所定範囲の画像を順次撮像するものであってもよい。このような構成を採用しても、容易に基板2の画像を撮像することができる。   That is, each of the imaging units 30a to 30d may not sequentially scan the substrate 2 that is the object to be inspected by the line sensors 34a to 34d, but may sequentially capture images in a predetermined range using a CCD sensor or the like. Even if such a configuration is adopted, an image of the substrate 2 can be easily captured.

また、撮像部30およびそれに対応するスレーブPC140は、基板2の表面側すなわち基板2の上方と、基板2の裏面側すなわち基板2の下方とにそれぞれ1組ずつ設けられてもよい。これにより、撮像部30やスレーブPC140の数を削減でき、コストを低減化することができる。この場合、上述の共用データは基板2の表面を検査するスレーブPC140と裏面を検査するスレーブPC140との間で送受信されることから、例えば基板2の一方の面に識別マーク等が無くても、他方の面に識別マークがあれば、その位置データを利用可能となる。これにより、基板2の構成を簡素化することができる。   The imaging unit 30 and the corresponding slave PC 140 may be provided on the front side of the substrate 2, that is, above the substrate 2, and on the back side of the substrate 2, that is, below the substrate 2, respectively. Thereby, the number of imaging units 30 and slave PCs 140 can be reduced, and the cost can be reduced. In this case, since the above-mentioned shared data is transmitted and received between the slave PC 140 that inspects the front surface of the substrate 2 and the slave PC 140 that inspects the back surface, for example, even if there is no identification mark or the like on one surface of the substrate 2, If there is an identification mark on the other surface, the position data can be used. Thereby, the structure of the board | substrate 2 can be simplified.

更に、基板2を固定した状態で、照明ユニット100や撮像部30を含む撮像ユニット80を移動させてもよい。これにより、基板2の撮像時に、基板2を安定に保持した状態で撮像ユニット80と基板2との相対的移動を実現することができる。   Furthermore, the imaging unit 80 including the illumination unit 100 and the imaging unit 30 may be moved while the substrate 2 is fixed. Thereby, the relative movement of the imaging unit 80 and the board | substrate 2 is realizable in the state which hold | maintained the board | substrate 2 stably at the time of the imaging of the board | substrate 2. FIG.

また、上述の共用データは、スレーブPC140からマスタPC160に送信された後、マスタPC160が各スレーブPC140に送信するようにしてもよい。これにより、各スレーブPC140とマスタPC160との共有データの共有を容易に実現することができる。   The shared data described above may be transmitted from the slave PC 140 to the master PC 160, and then transmitted from the master PC 160 to each slave PC 140. Thereby, sharing of shared data between each slave PC 140 and master PC 160 can be easily realized.

更に、上述の実施形態では、表面側撮像ユニット80aにのみ、焦点合わせ機構が設けられているが、被検査体の形状等に応じて、表面側撮像ユニット80aおよび裏面側撮像ユニット80bの双方に焦点合わせ機構が設けられてもよい。   Further, in the above-described embodiment, the focusing mechanism is provided only in the front surface side imaging unit 80a. However, depending on the shape of the object to be inspected, both the front surface side imaging unit 80a and the back surface side imaging unit 80b are provided. A focusing mechanism may be provided.

また、上述の実施形態においては、被検査体である基板2の表裏面を同時に検査する手順が説明されたが、被検査体の表裏面についての検査結果を同時に表示させるに際し、被検査体の表面についての検査結果および被検査体の裏面についての検査結果とは、別工程で取得されたものであってもよい。また、被検査体の表面についての検査結果および被検査体の裏面についての検査結果との何れか一方は、他の外観検査装置によるものであってもよい。   In the above-described embodiment, the procedure for simultaneously inspecting the front and back surfaces of the substrate 2 that is the object to be inspected has been described. However, when the inspection results for the front and back surfaces of the object to be inspected are displayed at the same time, The inspection result for the front surface and the inspection result for the back surface of the object to be inspected may be acquired in separate steps. In addition, any one of the inspection result on the surface of the object to be inspected and the inspection result on the back surface of the object to be inspected may be based on another appearance inspection apparatus.

更に、上述の実施形態においては、焦点合わせに必要となる基板厚さの入力がユーザにより実行されるものとして説明されたが、これに限られるものではない。すなわち、被検査体である基板のバーコード等に基板厚さ情報をもたせておき、このバーコードが撮像・解析された時点で焦点合わせが実行されてもよい。   Furthermore, in the above-described embodiment, it has been described that the input of the substrate thickness necessary for focusing is executed by the user. However, the present invention is not limited to this. That is, substrate thickness information may be provided on a barcode or the like of a substrate that is an object to be inspected, and focusing may be performed when the barcode is imaged and analyzed.

そして、上記実施形態に係る外観検査装置が、いわゆるリフロー前検査等にも利用され得ることはいうまでもない。   Needless to say, the appearance inspection apparatus according to the above-described embodiment can also be used for so-called pre-reflow inspection or the like.

本発明による外観検査装置の拡大斜視図である。It is an expansion perspective view of the external appearance inspection apparatus by this invention. 図1の外観検査装置に含まれる撮像ユニットを示す拡大斜視図である。It is an expansion perspective view which shows the imaging unit contained in the external appearance inspection apparatus of FIG. 図2の撮像ユニットに含まれる照明ユニットを示す概略構成図である。It is a schematic block diagram which shows the illumination unit contained in the imaging unit of FIG. 本発明による外観検査装置の制御ブロック図である。It is a control block diagram of the external appearance inspection apparatus by this invention. 本発明による外観検査装置による被検査体の外観検査の手順を説明するためのフローチャートである。It is a flowchart for demonstrating the procedure of the external appearance inspection of the to-be-inspected object by the external appearance inspection apparatus by this invention. (a)は、被検査体である基板の表面を例示する上面図であり、(b)は、各撮像ユニットの撮像範囲を例示する模式図であり、(c)は、検査手段としての各スレーブPCのメモリに格納される画像データを説明するための模式図である。(A) is a top view illustrating the surface of a substrate that is an object to be inspected, (b) is a schematic view illustrating the imaging range of each imaging unit, and (c) is each of the inspection means. It is a schematic diagram for demonstrating the image data stored in the memory of slave PC. 図1の外観検査装置に含まれるディスプレイに表示される検査結果を例示する模式図である。It is a schematic diagram which illustrates the test result displayed on the display contained in the external appearance inspection apparatus of FIG. 図1の外観検査装置において検査され得る被検査体を例示する模式図である。It is a schematic diagram which illustrates the to-be-inspected object which can be test | inspected in the external appearance inspection apparatus of FIG. 図1の外観検査装置に含まれるディスプレイに表示される検査結果の他の例を示す模式図である。It is a schematic diagram which shows the other example of the test result displayed on the display contained in the external appearance inspection apparatus of FIG.

符号の説明Explanation of symbols

2,2A 基板、 4a,4b 認識マーク、 6,8 部品、 10 検査テーブル、 30a,30b,30c,30d 撮像部、 32a,32b,32c,32d レンズ、 34a,34b,34c,34d ラインセンサ、 36a 表面側支持フレーム、 36b 裏面側支持フレーム、38 ベースフレーム、40 焦点調整モータ、42 中間レンズ、50 基板搬送テーブル、52 支持プレート、54 搬送レール、58 搬送モータ、80a 表面側撮像ユニット、80b 裏面側撮像ユニット、100a 表面側照明ユニット、100b 裏面側照明ユニット、102,104,106 光源、110 ハーフミラー、112 アクリルシート、130a,130b,130c,13d 画像処理部、140a,140b,140c,140d スレーブPC、141a,141b,141c,141d メモリ、142a,142b,142c,142d 解析部、143a,143b,143c,143d ライブラリ、144a,144b,144c,144d,166 送受信部、150 スイッチングハブ、160 マスタPC、161 焦点制御部、162 照明制御部、163 走査制御部、164 搬送制御部、165 表示制御部、170 ディスプレイ、171 画面、200 外観検査装置。   2, 2A substrate, 4a, 4b recognition mark, 6, 8 parts, 10 inspection table, 30a, 30b, 30c, 30d imaging unit, 32a, 32b, 32c, 32d lens, 34a, 34b, 34c, 34d line sensor, 36a Front side support frame, 36b Back side support frame, 38 Base frame, 40 Focus adjustment motor, 42 Intermediate lens, 50 Substrate transport table, 52 Support plate, 54 Transport rail, 58 Transport motor, 80a Front side imaging unit, 80b Back side Imaging unit, 100a Front side illumination unit, 100b Back side illumination unit, 102, 104, 106 Light source, 110 Half mirror, 112 Acrylic sheet, 130a, 130b, 130c, 13d Image processing unit, 140a, 140b, 140c, 1 40d Slave PC, 141a, 141b, 141c, 141d Memory, 142a, 142b, 142c, 142d Analysis unit, 143a, 143b, 143c, 143d Library, 144a, 144b, 144c, 144d, 166 Transmission / reception unit, 150 switching hub, 160 master PC, 161 focus control unit, 162 illumination control unit, 163 scanning control unit, 164 transport control unit, 165 display control unit, 170 display, 171 screen, 200 visual inspection device.

Claims (3)

被検査体の外観を検査するための外観検査装置において、
前記被検査体を撮像可能であり、前記被検査体の撮像方向における寸法に応じて像倍率を変えることなく前記被検査体に焦点を合わせる焦点合わせ機構を有する撮像手段を備えることを特徴とする外観検査装置。
In an appearance inspection apparatus for inspecting the appearance of an object to be inspected,
The imaging device includes an imaging unit capable of imaging the object to be inspected and having a focusing mechanism for focusing on the object to be inspected without changing an image magnification according to a dimension in an imaging direction of the object to be inspected. Appearance inspection device.
前記焦点合わせ機構は、前記被検査体の厚さに応じて前記被検査体との焦点距離を変化させることを特徴とする請求項1に記載の外観検査装置。   The visual inspection apparatus according to claim 1, wherein the focusing mechanism changes a focal distance with the inspection object according to a thickness of the inspection object. 前記撮像手段は、前記被検査体の表面を撮像する表面側撮像手段と、前記被検査体の裏面を撮像する表面側撮像手段とを含み、前記表面側撮像手段と前記裏面側撮像手段とのうちの少なくとも何れか一方が前記焦点合わせ機構を有することを特徴とする請求項1または2に記載の外観検査装置。


The imaging means includes a surface side imaging means for imaging the surface of the object to be inspected, and a surface side imaging means for imaging the back surface of the object to be inspected, and the surface side imaging means and the back surface side imaging means The appearance inspection apparatus according to claim 1, wherein at least one of them has the focusing mechanism.


JP2004374728A 2004-12-24 2004-12-24 Visual inspection system Pending JP2006184019A (en)

Priority Applications (2)

Application Number Priority Date Filing Date Title
JP2004374728A JP2006184019A (en) 2004-12-24 2004-12-24 Visual inspection system
US11/314,092 US7590279B2 (en) 2004-12-24 2005-12-22 Appearance inspection apparatus for inspecting inspection piece

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2004374728A JP2006184019A (en) 2004-12-24 2004-12-24 Visual inspection system

Publications (1)

Publication Number Publication Date
JP2006184019A true JP2006184019A (en) 2006-07-13

Family

ID=36737257

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2004374728A Pending JP2006184019A (en) 2004-12-24 2004-12-24 Visual inspection system

Country Status (1)

Country Link
JP (1) JP2006184019A (en)

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2008143228A1 (en) * 2007-05-21 2008-11-27 Nikon Corporation Wafer end surface inspecting apparatus
WO2009154182A1 (en) * 2008-06-18 2009-12-23 株式会社コベルコ科研 Edge surface observation apparatus
JP2011215123A (en) * 2010-03-31 2011-10-27 Jokon Kaku Frame mechanism for inspection system
WO2011158826A1 (en) * 2010-06-16 2011-12-22 株式会社愛央技研 Exterior inspection device
JP2013101118A (en) * 2011-11-07 2013-05-23 Samsung Electro-Mechanics Co Ltd Visual inspection tool and visual inspection system using the same
EP2597459A1 (en) 2011-11-22 2013-05-29 Keyence Corporation Image processing apparatus

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS63127148A (en) * 1986-11-17 1988-05-31 Kanzaki Paper Mfg Co Ltd Surface inspection apparatus
JPH02105110U (en) * 1989-02-07 1990-08-21
JPH06174446A (en) * 1992-12-09 1994-06-24 Omron Corp Inspection device for mounted component
JPH11304721A (en) * 1998-04-23 1999-11-05 Sony Corp Visual inspection device
JP2002181729A (en) * 2000-12-12 2002-06-26 Saki Corp:Kk Apparatus and method for visual inspection
JP2002310934A (en) * 2001-04-18 2002-10-23 Saki Corp:Kk Visual inspection apparatus
JP2003099758A (en) * 2001-09-25 2003-04-04 Hitachi Ltd Method and device for inspecting appearance of substrate
JP2004226128A (en) * 2003-01-20 2004-08-12 Saki Corp:Kk Apparatus and method for visual inspection

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS63127148A (en) * 1986-11-17 1988-05-31 Kanzaki Paper Mfg Co Ltd Surface inspection apparatus
JPH02105110U (en) * 1989-02-07 1990-08-21
JPH06174446A (en) * 1992-12-09 1994-06-24 Omron Corp Inspection device for mounted component
JPH11304721A (en) * 1998-04-23 1999-11-05 Sony Corp Visual inspection device
JP2002181729A (en) * 2000-12-12 2002-06-26 Saki Corp:Kk Apparatus and method for visual inspection
JP2002310934A (en) * 2001-04-18 2002-10-23 Saki Corp:Kk Visual inspection apparatus
JP2003099758A (en) * 2001-09-25 2003-04-04 Hitachi Ltd Method and device for inspecting appearance of substrate
JP2004226128A (en) * 2003-01-20 2004-08-12 Saki Corp:Kk Apparatus and method for visual inspection

Cited By (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2008143228A1 (en) * 2007-05-21 2008-11-27 Nikon Corporation Wafer end surface inspecting apparatus
WO2009154182A1 (en) * 2008-06-18 2009-12-23 株式会社コベルコ科研 Edge surface observation apparatus
JP2010002216A (en) * 2008-06-18 2010-01-07 Kobelco Kaken:Kk Observation device of edge surface
JP2011215123A (en) * 2010-03-31 2011-10-27 Jokon Kaku Frame mechanism for inspection system
US8432540B2 (en) 2010-03-31 2013-04-30 Cooper S.K. Kuo Support mechanism for inspection systems
WO2011158826A1 (en) * 2010-06-16 2011-12-22 株式会社愛央技研 Exterior inspection device
JP2012002661A (en) * 2010-06-16 2012-01-05 Io Giken Co Ltd Appearance inspection device
JP2013101118A (en) * 2011-11-07 2013-05-23 Samsung Electro-Mechanics Co Ltd Visual inspection tool and visual inspection system using the same
EP2597459A1 (en) 2011-11-22 2013-05-29 Keyence Corporation Image processing apparatus
US9182356B2 (en) 2011-11-22 2015-11-10 Keyence Corporation Image processing apparatus

Similar Documents

Publication Publication Date Title
US7751611B2 (en) Apparatus for inspecting appearance of inspection piece
US7590279B2 (en) Appearance inspection apparatus for inspecting inspection piece
US20100289891A1 (en) Apparatus for inspecting object under inspection
KR20090031875A (en) Surface inspection device
TW201819855A (en) Electronic component conveying apparatus and electronic component inspection apparatus
JP4746991B2 (en) Inspection device for inspection object
JP2006184022A (en) Visual inspection system
KR20060129791A (en) System and method for optical automated inspection
JP4828234B2 (en) Inspection device for inspection object
JP2009092485A (en) Print solder inspection device
JP2006184019A (en) Visual inspection system
CN100483068C (en) Appearance inspection apparatus for inspecting inspection piece
JP2007033202A (en) Visual inspection apparatus and visual inspection method
JP6358527B2 (en) Inspection device
JP2004095672A (en) Electronic circuit component loading machine and method for inspecting accuracy of loading position thereof
US20120098956A1 (en) Imaging apparatus for fully automatic screen printer
JP2007192598A (en) Device for inspecting object to be inspected
JP2007333672A (en) Apparatus and method for visual inspection
JP6339849B2 (en) Inspection device
JP2006184021A (en) Visual inspection system
JP5296490B2 (en) Inspection device for inspection object
KR20180123870A (en) System for measuring three dimension shape and Method thereof
KR20070068170A (en) Vision inspection system and method for inspection using thereof
KR20170107317A (en) A double-side inspection equipment
JP6456726B2 (en) Inspection device, inspection method, and inspection program

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20071207

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20100414

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20100427

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20100628

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20100727

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20100927

RD02 Notification of acceptance of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7422

Effective date: 20100927

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A821

Effective date: 20100928

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20101104