JP5570588B2 - Video centering method - Google Patents

Video centering method Download PDF

Info

Publication number
JP5570588B2
JP5570588B2 JP2012504574A JP2012504574A JP5570588B2 JP 5570588 B2 JP5570588 B2 JP 5570588B2 JP 2012504574 A JP2012504574 A JP 2012504574A JP 2012504574 A JP2012504574 A JP 2012504574A JP 5570588 B2 JP5570588 B2 JP 5570588B2
Authority
JP
Japan
Prior art keywords
image
inspection
magnification
coordinate
optical system
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2012504574A
Other languages
Japanese (ja)
Other versions
JP2012523560A (en
Inventor
ミン ファン ヨン
ジェ パク ヒ
ヨル イ チャン
ホン ヒョン チャン
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
SNU Precision Co Ltd
Original Assignee
SNU Precision Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by SNU Precision Co Ltd filed Critical SNU Precision Co Ltd
Publication of JP2012523560A publication Critical patent/JP2012523560A/en
Application granted granted Critical
Publication of JP5570588B2 publication Critical patent/JP5570588B2/en
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G01MEASURING; TESTING
    • G01BMEASURING LENGTH, THICKNESS OR SIMILAR LINEAR DIMENSIONS; MEASURING ANGLES; MEASURING AREAS; MEASURING IRREGULARITIES OF SURFACES OR CONTOURS
    • G01B11/00Measuring arrangements characterised by the use of optical techniques
    • G01B11/002Measuring arrangements characterised by the use of optical techniques for measuring two or more coordinates
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01NINVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N21/00Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
    • G01N21/84Systems specially adapted for particular applications
    • G01N21/88Investigating the presence of flaws or contamination
    • G01N21/95Investigating the presence of flaws or contamination characterised by the material or shape of the object to be examined
    • G01N21/956Inspecting patterns on the surface of objects
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01NINVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N21/00Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
    • G01N21/84Systems specially adapted for particular applications
    • G01N21/88Investigating the presence of flaws or contamination
    • G01N21/8851Scan or image signal processing specially adapted therefor, e.g. for scan signal adjustment, for detecting different kinds of defects, for compensating for structures, markings, edges
    • G01N2021/8887Scan or image signal processing specially adapted therefor, e.g. for scan signal adjustment, for detecting different kinds of defects, for compensating for structures, markings, edges based on image processing techniques
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01NINVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N21/00Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
    • G01N21/84Systems specially adapted for particular applications
    • G01N21/88Investigating the presence of flaws or contamination
    • G01N21/8851Scan or image signal processing specially adapted therefor, e.g. for scan signal adjustment, for detecting different kinds of defects, for compensating for structures, markings, edges
    • G01N2021/8887Scan or image signal processing specially adapted therefor, e.g. for scan signal adjustment, for detecting different kinds of defects, for compensating for structures, markings, edges based on image processing techniques
    • G01N2021/8893Scan or image signal processing specially adapted therefor, e.g. for scan signal adjustment, for detecting different kinds of defects, for compensating for structures, markings, edges based on image processing techniques providing a video image and a processed signal for helping visual decision

Landscapes

  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Immunology (AREA)
  • Pathology (AREA)
  • Chemical & Material Sciences (AREA)
  • Analytical Chemistry (AREA)
  • Biochemistry (AREA)
  • General Health & Medical Sciences (AREA)
  • Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Image Analysis (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
  • Studio Devices (AREA)
  • Length Measuring Devices By Optical Means (AREA)
  • Investigating Materials By The Use Of Optical Means Adapted For Particular Applications (AREA)
  • Image Processing (AREA)

Description

本発明は、検査対象物から検出しようとする検査領域が高倍率の画像中央に位置するようにする映像センタリング方法に関するものであり、より詳しくは、検査領域を高倍率の画像中央に位置させるとき、倍率の変換が発生しないことはもちろん、検査領域を探索するための動きに伴う時間を最小化することができる映像センタリング方法に関するものである。   The present invention relates to a video centering method in which an inspection region to be detected from an inspection object is positioned at the center of a high-magnification image, and more specifically, when the inspection region is positioned at the center of a high-magnification image. Further, the present invention relates to a video centering method capable of minimizing the time associated with the movement for searching for the inspection area, as well as the fact that the conversion of magnification does not occur.

一般的に、映像センタリング技術は、撮影される検査対象物の画像で検出しようとする検査領域を検索し、検出された検査領域を高倍率の画像中央に位置させる技術である。   In general, the video centering technique is a technique for searching an inspection area to be detected from an image of an inspection object to be photographed and positioning the detected inspection area at the center of a high-magnification image.

図1は、従来技術の第1比較例による画像センタリング方法を説明するためのフローチャートであり、図1を参照すれば、事前にユーザーは、検査対象物を低倍率の光学系で撮影し、撮影された画像から検出しようとする検査領域を抽出し、モデル画像として登録しておく(S1)。   FIG. 1 is a flowchart for explaining an image centering method according to a first comparative example of the prior art. Referring to FIG. 1, a user photographs an inspection object with a low-magnification optical system in advance. The inspection area to be detected is extracted from the obtained image and registered as a model image (S1).

次に、検査対象物で検査領域を画像の中央に位置させるために、低倍率の光学系が検査対象物を定められた手順で撮影し、撮影された画像はターゲット画像として登録される(S2)。そして、登録された低倍率のターゲット画像で登録されたモデルの画像を検索する(S3)。このとき、ターゲット画像からモデル画像が検索された場合、モデル画像がターゲット画像の中央に位置するように光学系または検査対象物を移動させる(S4)。通常は、低倍率のターゲット画像からモデル画像が検索されるが、他の場合、S2のステップに戻ってターゲット画像を更新することができる(S31)。次に、光学系は、低倍率から高倍率に変換され(S5)、高倍率に変換された光学系が検査対象物を撮影することによって、検査領域が画像中央に配置された高倍率の最終的な画像を取得することができる(S6)。   Next, in order to position the inspection region at the center of the image with the inspection object, the low-magnification optical system images the inspection object according to a predetermined procedure, and the captured image is registered as a target image (S2). ). Then, the registered model image is searched with the registered low-magnification target image (S3). At this time, when the model image is retrieved from the target image, the optical system or the inspection object is moved so that the model image is located at the center of the target image (S4). Normally, the model image is searched from the low-magnification target image. In other cases, the target image can be updated by returning to the step of S2 (S31). Next, the optical system is converted from low magnification to high magnification (S5), and the optical system converted to high magnification captures the inspection object, so that the inspection area is arranged at the center of the image at the final high magnification. A typical image can be acquired (S6).

ここで、低倍率は20xの倍率を示し、高倍率は50xの倍率を示すこととする。   Here, the low magnification indicates a magnification of 20 ×, and the high magnification indicates a magnification of 50 ×.

従来技術により、液晶表示装置の薄膜トランジスタをセンタリングするときに、図3は、従来技術の比較例から抜粋された検査領域を示したものである。図3を参照すると、薄膜トランジスタのソース/ドレイン電極とゲート電極の形成領域を検査領域10として設定した。このとき、図3に示された図面は、従来技術により、低倍率の光学系で撮影した画像から抜粋した検査領域10を示す。   When centering the thin film transistor of the liquid crystal display device according to the prior art, FIG. 3 shows an inspection region extracted from a comparative example of the prior art. Referring to FIG. 3, the source / drain electrode and gate electrode formation region of the thin film transistor was set as the inspection region 10. At this time, the drawing shown in FIG. 3 shows an inspection region 10 extracted from an image taken with a low-magnification optical system according to the prior art.

図2は、従来技術の第2比較例による画像センタリング方法を説明するためのフローチャートであり、図2を参照すれば、事前にユーザーは検査対象物を高倍率の光学系で撮影し、撮影された画像から検索しようとする検査領域を抽出し、モデル画像として登録しておく(S10)。   FIG. 2 is a flowchart for explaining an image centering method according to a second comparative example of the prior art. Referring to FIG. 2, a user photographs an inspection object with a high-magnification optical system in advance. The examination area to be searched is extracted from the obtained image and registered as a model image (S10).

次に、高倍率の光学系は、検査対象物を順次に撮影し、撮影された画像は、ターゲット画像として登録される(S20)。そして、登録されたターゲット画像から登録されたモデル画像を検索する(S30)。このとき、高倍率の光学系が撮影するターゲット画像から登録されたモデル画像が検出されるまで高倍率の光学系または検査対象物が継続して動き、その動きに応じて登録されるターゲット画像を更新する(S32)。ここで、ターゲット画像からモデル画像が検出された場合、モデル画像がターゲット画像の中央に位置するよう、光学系または検査対象物を移動させる(S40)。次に、高倍率の光学系が検査対象物を撮影することにより、検査領域が画像中央に配置された高倍率の最終的な画像を取得することができる(S50)。   Next, the high-magnification optical system sequentially photographs the inspection object, and the photographed image is registered as a target image (S20). Then, the registered model image is searched from the registered target image (S30). At this time, the high-magnification optical system or the inspection object continuously moves until a registered model image is detected from the target image captured by the high-magnification optical system, and the target image registered in accordance with the movement is displayed. Update (S32). Here, when the model image is detected from the target image, the optical system or the inspection object is moved so that the model image is positioned at the center of the target image (S40). Next, the high-magnification optical system images the inspection object, whereby a high-magnification final image in which the inspection area is arranged at the center of the image can be acquired (S50).

しかしながら、従来技術の第1比較例における画像センタリング方法によると、ターゲット画像からモデル画像が検出され、光学系または検査対象物を移動させた後、光学系を低倍率から高倍率へ変換させる過程を経なければならないこととなり、倍率変換に伴う遅延時間が発生する問題がある。   However, according to the image centering method in the first comparative example of the prior art, the model image is detected from the target image, and after the optical system or the inspection object is moved, the process of converting the optical system from low magnification to high magnification is performed. There is a problem in that a delay time associated with the magnification conversion occurs.

また、従来技術の第1比較例における画像センタリング方法によると、最終画像を取得したとき、倍率の変換による誤差が発生するおそれがあり、これによって検査領域が画像の中央に位置しない可能性がある。   In addition, according to the image centering method in the first comparative example of the prior art, when the final image is acquired, there is a possibility that an error due to magnification conversion may occur, which may cause the inspection region not to be located at the center of the image. .

また、従来技術の第2比較例における画像センタリングの方法によると、検索プロセスの動きに基づいて登録されるターゲット画像からモデル画像の一部が表示されたり、或いは表示されない場合には、ターゲット画像を継続的に更新しなければならない問題がある。   Also, according to the image centering method in the second comparative example of the prior art, when a part of the model image is displayed or not displayed from the target image registered based on the movement of the search process, the target image is There is a problem that needs to be updated continuously.

また、従来技術の第2比較例における画像センタリングの方法によると、ターゲット画像からモデル画像全体が検出されるまで、高倍率の光学系または検査対象物が継続的に動かなければならないことから、検索プロセスの動きに伴う遅延が発生してしまう問題がある。   Further, according to the image centering method in the second comparative example of the prior art, the high-magnification optical system or the inspection object must continuously move until the entire model image is detected from the target image. There is a problem that a delay occurs due to the movement of the process.

したがって、本発明の目的は、このような従来技術の問題を解決するためのものであり、光学系の倍率変換がなくても、迅速に最終画像を取得することができる映像センタリング方法を提供することにある。   Accordingly, an object of the present invention is to solve such a problem of the prior art, and provides a video centering method capable of quickly obtaining a final image without a magnification conversion of the optical system. There is.

また、倍率変換による誤差を防止し、検査領域が最終画像の中央に正しく位置されることのできる映像センタリング方法を提供することにある。   It is another object of the present invention to provide a video centering method capable of preventing an error due to magnification conversion and correctly positioning an inspection region at the center of a final image.

また、検索プロセスの動きに基づいて登録されるターゲット画像からモデル画像の一部が表示されたり、或いは表示されない場合でも継続的に撮影せずに中央に検査領域が位置する最終画像を取得することができる映像センタリング方法を提供することにある。   In addition, even if a part of the model image is displayed or not displayed from the target image registered based on the movement of the search process, the final image in which the inspection region is located in the center is acquired without continuously capturing images. It is to provide a video centering method capable of

また、検索プロセスの動きを最小限にし、検査領域を検索するのにかかる遅延時間を最小限に抑えることができる映像センタリング方法を提供することにある。   It is another object of the present invention to provide a video centering method capable of minimizing a delay of a search process and minimizing a delay time required for searching an inspection area.

上記の目的は、本発明により、映像センタリング方法において、検査対象物を第1の倍率の光学系で撮影し、撮影された第1の倍率の画像で検出しようとする検査領域の位置を設定してモデル画像として登録する登録ステップと、検査対象物を、定められた手順に従って第1の倍率よりも高倍率である第2の倍率の光学系で撮影してターゲット画像を取得する撮影ステップと、撮影ステップで取得したターゲット画像を第1の倍率の大きさに縮小して検査画像として登録する縮小ステップと、モデル画像で検査画像を検索するマッチングステップと、マッチングステップで検査画像が検出された場合、登録ステップで設定された検査領域の位置に対応するように第2の倍率の光学系、または検査対象物を移動させるセンタリングステップと、を含めて構成される映像センタリング方法によって達成される。   According to the present invention, in the video centering method according to the present invention, the inspection object is imaged by the optical system having the first magnification, and the position of the inspection region to be detected is set by the captured image having the first magnification. A registration step for registering as a model image, an imaging step for acquiring a target image by imaging an inspection object with an optical system having a second magnification higher than the first magnification according to a predetermined procedure, When the target image acquired in the photographing step is reduced to the first magnification and registered as the inspection image, the matching step for searching for the inspection image in the model image, and the inspection image is detected in the matching step A centering step of moving the optical system of the second magnification or the inspection object so as to correspond to the position of the inspection region set in the registration step; It is achieved by composed image centering method including.

ここで、マッチングステップで検査画像が検出されなかった場合、エラー信号を発生する警告ステップと、撮影ステップに復帰する循環ステップのうち、少なくともいずれか一つのステップを含めて構成することが好ましい。   Here, when no inspection image is detected in the matching step, it is preferable to include at least one of a warning step for generating an error signal and a circulation step for returning to the imaging step.

ここで、センタリングステップの後、第2倍率の光学系が検査対象物を撮影し、検査領域が画像の中央に形成される最終画像を取得する最終ステップと、をさらに含めて構成することが好ましい。   Here, after the centering step, it is preferable to further include a final step in which the optical system of the second magnification captures the inspection object and obtains a final image in which the inspection region is formed at the center of the image. .

ここで、モデル画像の検査領域の位置は、モデル画像内に検査領域の位置を指定して第1の座標として設定し、モデル画像で検出された検査画像の位置は、モデル画像内で検出された検査画像の位置を第1座標に対する第2座標として設定し、第1の座標と第2の座標の間の変位に応じて換算された値をもって第2の倍率の光学系または検査対象物の移動方向と移動距離が決められるようにすることが好ましい。   Here, the position of the inspection area of the model image is set as the first coordinates by specifying the position of the inspection area in the model image, and the position of the inspection image detected in the model image is detected in the model image. The position of the inspected image is set as the second coordinate with respect to the first coordinate, and the second magnification optical system or inspection object has a value converted according to the displacement between the first coordinate and the second coordinate. It is preferable that the moving direction and the moving distance are determined.

本発明によれば、光学系の倍率変換を行うことなく、迅速に最終画像を取得することができる映像センタリングの方法が提供される。   According to the present invention, there is provided a video centering method capable of quickly acquiring a final image without performing magnification conversion of an optical system.

また、倍率変換による誤差を防止し、検査領域が最終画像の中央に正しく位置されることのできる映像センタリングの方法が提供される。   Also provided is a video centering method that prevents errors due to magnification conversion and allows the inspection region to be correctly positioned in the center of the final image.

また、検索プロセスの動きに基づいて登録されるターゲット画像からモデル画像の一部が表示されたり、或いは表示されない場合でも、中央に検査領域が配置される最終画像を取得することができる映像センタリングの方法が提供される。   Also, video centering that can acquire the final image in which the inspection area is arranged in the center even if a part of the model image is displayed or not displayed from the target image registered based on the movement of the search process A method is provided.

また、検索プロセスの動きを最小限にし、検査領域を検索するのにかかる遅延時間を最小限に抑えることができる映像センタリングの方法が提供される。   Also provided is a video centering method that minimizes the movement of the search process and minimizes the delay time required to search the inspection area.

従来技術の第1比較例による画像センタリング方法を説明するためのフローチャートである。It is a flowchart for demonstrating the image centering method by the 1st comparative example of a prior art. 従来技術の第2比較例による画像センタリング方法を説明するためのフローチャートである。It is a flowchart for demonstrating the image centering method by the 2nd comparative example of a prior art. 従来技術の比較例から抜粋した検査領域を示した図である。It is the figure which showed the test | inspection area | region extracted from the comparative example of the prior art. 本発明の一実施形態による映像センタリング方法を説明するためのフローチャートである。4 is a flowchart for explaining a video centering method according to an exemplary embodiment of the present invention. 本発明の一実施形態による映像センタリング方法を説明するための図である。FIG. 5 is a diagram for explaining a video centering method according to an exemplary embodiment of the present invention. 本発明の一実施形態による映像センタリング方法を説明するための図である。FIG. 5 is a diagram for explaining a video centering method according to an exemplary embodiment of the present invention. 本発明の一実施形態による映像センタリング方法を説明するための図である。FIG. 5 is a diagram for explaining a video centering method according to an exemplary embodiment of the present invention. 本発明の一実施形態による映像センタリング方法を説明するための図である。FIG. 5 is a diagram for explaining a video centering method according to an exemplary embodiment of the present invention. 本発明の一実施形態による映像センタリング方法を説明するための図である。FIG. 5 is a diagram for explaining a video centering method according to an exemplary embodiment of the present invention.

説明に先立ち、複数の実施形態において同一の構成を有する構成要素については同一の符号を使用して代表的に第1実施形態で説明し、その他の実施形態では、第1実施形態と異なる構成について説明することとする。
以下、添付図面を参照して本発明の一実施形態による映像センタリング方法について詳細に説明する。
Prior to the description, components having the same configuration in a plurality of embodiments will be described in the first embodiment by using the same reference numerals, and in other embodiments, different configurations from the first embodiment will be described. I will explain.
Hereinafter, an image centering method according to an embodiment of the present invention will be described in detail with reference to the accompanying drawings.

本発明では、液晶表示装置の薄膜トランジスタの形状をセンタリングする方法として、特に、薄膜トランジスタのソース/ドレイン電極とゲート電極の接続部分が画像中央に位置するようにする方法を一実施形態として説明する。以下に説明する用語で、検査対象物は液晶表示装置に相当し、検査領域は薄膜トランジスタのソース/ドレイン電極とゲート電極の接続部分に相当する。   In the present invention, as a method for centering the shape of a thin film transistor of a liquid crystal display device, in particular, a method in which a connection portion between a source / drain electrode and a gate electrode of a thin film transistor is positioned at the center of an image will be described as an embodiment. In terms described below, the inspection object corresponds to a liquid crystal display device, and the inspection region corresponds to a connection portion between a source / drain electrode and a gate electrode of a thin film transistor.

図4は本発明の一実施形態による映像センタリング方法を説明するためのフローチャートであり、図5から図9は、本発明の一実施形態による映像センタリング方法を説明するための図である。特に、図5は、本発明の一実施形態に基づいて撮影されたモデル画像20であり、図6は本発明の一実施形態に基づいて撮影されたターゲット画像30であり、図7は本発明の一実施形態に応じて、ターゲット画像30が縮小された検査画像31であり、図8は、検査画像31が検出された本発明の一実施形態によるモデル画像20であり、図9は本発明の一実施形態によって最終ステップで取得した最終画像40である。   FIG. 4 is a flowchart for explaining a video centering method according to an embodiment of the present invention, and FIGS. 5 to 9 are diagrams for explaining a video centering method according to an embodiment of the present invention. In particular, FIG. 5 is a model image 20 photographed according to an embodiment of the present invention, FIG. 6 is a target image 30 photographed according to an embodiment of the present invention, and FIG. FIG. 8 shows a model image 20 according to an embodiment of the present invention in which the inspection image 31 is detected, and FIG. 9 shows the present invention. FIG. 6 is a final image 40 acquired in a final step according to the embodiment.

図4を参照すれば、本発明の一実施形態による映像センタリング方法は、登録ステップ(S100)、撮影ステップ(S200)、縮小ステップ(S300)、マッチングステップ(S400)、およびセンタリングステップ(S500)に分けることができる。   Referring to FIG. 4, the video centering method according to an embodiment of the present invention includes a registration step (S100), a shooting step (S200), a reduction step (S300), a matching step (S400), and a centering step (S500). Can be divided.

事前にユーザーは、検査対象物を第1の倍率の光学系で撮影し、取得した画像そのものを図5に示したようなモデル画像20として登録させておく。本発明の一実施形態によるモデル画像20から検索しようとする検査領域10は、第1座標(X2、Y2)に設定される。すなわち、モデル画像20の検査領域10の位置は、モデル画像20内で検査領域10の位置を指定して、第1座標(X2、Y2)として設定する。このプロセスは、登録ステップ(S100)であり、登録ステップ(S100)は、検査対象物を第1の倍率の光学系で撮影し、撮影された第1の倍率の画像から検出しようとする検査領域10の位置を設定し、モデル画像20として登録する。   In advance, the user images the inspection object with the optical system of the first magnification, and registers the acquired image itself as a model image 20 as shown in FIG. The inspection area 10 to be searched from the model image 20 according to the embodiment of the present invention is set to the first coordinates (X2, Y2). That is, the position of the inspection area 10 of the model image 20 is set as the first coordinates (X2, Y2) by specifying the position of the inspection area 10 in the model image 20. This process is a registration step (S100). In the registration step (S100), the inspection object is imaged with the optical system of the first magnification and the inspection area to be detected from the captured image of the first magnification. 10 positions are set and registered as a model image 20.

登録ステップ(S100)を経て登録されたモデル画像20に基づいて、第1の倍率より高倍率である第2倍率の光学系は、検査対象物を定められた手順で撮影してターゲット画像30を取得する。より詳しくは、第2倍率の光学系で検査対象物を撮影すると、図6に示したようなターゲット画像30を取得することができる。取得されたターゲット画像30には、検出しようとする検査領域10が全部または一部が表示されたり、或いは検査領域10が表示されない場合がある。図6のターゲット画像30では、検査領域10の一部が表示されている。このプロセスが、撮影ステップ(S200)であり、撮影ステップ(S200)は、モデル画像20が登録された状態で、検査対象物を定められた手順に従って第1の倍率よりも高倍率である第2倍率の光学系で撮影してターゲット画像30を取得する。   Based on the model image 20 registered through the registration step (S100), the second magnification optical system having a magnification higher than the first magnification captures the target image 30 by photographing the inspection object in a predetermined procedure. get. More specifically, when the inspection object is photographed with the optical system of the second magnification, the target image 30 as shown in FIG. 6 can be acquired. The acquired target image 30 may display all or part of the inspection region 10 to be detected, or may not display the inspection region 10. In the target image 30 of FIG. 6, a part of the inspection area 10 is displayed. This process is an imaging step (S200), and in the imaging step (S200), the model image 20 is registered, and the second magnification which is higher than the first magnification according to a predetermined procedure for the inspection object. A target image 30 is acquired by photographing with an optical system of magnification.

このように、撮影ステップ(S200)を経て取得したターゲット画像30は、第1の倍率の大きさに縮小し、検査画像31として仮登録される。より詳しくは、図7に示すように、図6のターゲット画像30を縮小して縮小された検査画像31を登録する。このようなプロセスが縮小ステップ(S300)であり、縮小のステップ(S300)は、撮影ステップ(S200)で取得したターゲット画像30を第1の倍率の大きさに縮小し、検査画像31として登録する。   In this way, the target image 30 acquired through the photographing step (S200) is reduced to the first magnification and temporarily registered as the inspection image 31. More specifically, as shown in FIG. 7, the inspection image 31 reduced by reducing the target image 30 of FIG. 6 is registered. Such a process is the reduction step (S300). In the reduction step (S300), the target image 30 acquired in the photographing step (S200) is reduced to the first magnification and registered as the inspection image 31. .

そうすると、登録ステップ(S100)を経て登録されたモデル画像20に基づいて、モデル画像20で仮登録されている検査画像31を検索する。後述する循環ステップ(S420)によって、上述したターゲット画像30および検査画像31は、第2倍率の光学系が定められた手順に従って検査対象物を撮影するたびに更新され、更新された検査画像31を上述したモデル画像20から継続的に検索することができる。このプロセスがマッチングステップ(S400)であり、マッチングステップ(S400)は、登録されているモデル画像20からの検査画像31を検索する。   Then, based on the model image 20 registered through the registration step (S100), the inspection image 31 temporarily registered in the model image 20 is searched. Through the circulation step (S420), which will be described later, the target image 30 and the inspection image 31 described above are updated every time the inspection object is photographed according to the procedure in which the optical system of the second magnification is determined. It is possible to continuously search from the model image 20 described above. This process is the matching step (S400), and the matching step (S400) searches the inspection image 31 from the registered model image 20.

マッチングステップ(S400)を経てモデル画像20から検査画像31が検出されると、センタリングステップ(S500)を経ることとなる。センタリングステップ(S500)では、登録ステップ(S100)で設定された検査領域10の位置に対応するように第2倍率の光学系または検査対象物を移動させる。より詳しくは、図8に示すように、モデル画像20の検査領域10の位置は、登録ステップ(S100)で設定されたように、第1の座標(X2、Y2)として設定されている。このとき、モデル画像20の検査画像31の位置は、登録ステップ(S100)で登録されたモデル画像20内で検出された検査画像31の位置を、第1座標(X2、Y2)に対する第2座標(X1、Y1)として設定される。すると、設定された第1の座標(X2、Y2)と第2の座標(X1、Y1)の間の変位(L)を換算して第2倍率の光学系または検査対象物の移動方向と移動距離が決定される。   When the inspection image 31 is detected from the model image 20 through the matching step (S400), the centering step (S500) is performed. In the centering step (S500), the optical system of the second magnification or the inspection object is moved so as to correspond to the position of the inspection region 10 set in the registration step (S100). More specifically, as shown in FIG. 8, the position of the inspection region 10 of the model image 20 is set as the first coordinates (X2, Y2) as set in the registration step (S100). At this time, the position of the inspection image 31 of the model image 20 is the second coordinate relative to the first coordinate (X2, Y2), which is the position of the inspection image 31 detected in the model image 20 registered in the registration step (S100). It is set as (X1, Y1). Then, the displacement (L) between the set first coordinate (X2, Y2) and the second coordinate (X1, Y1) is converted, and the movement direction and movement of the optical system or inspection object of the second magnification. The distance is determined.

すなわち、第2座標が(X1、Y1)であり、第1座標が(X2、Y2)であるため、モデル画像20内で両方の座標間の変位(L)につき、
X軸方向の長さは、Lx=(|X2−X1|)であり、
Y軸方向の長さは、Ly=(|Y2−Y1|)である。
That is, since the second coordinate is (X1, Y1) and the first coordinate is (X2, Y2), the displacement (L) between both coordinates in the model image 20 is
The length in the X-axis direction is Lx = (| X2-X1 |),
The length in the Y-axis direction is Ly = (| Y2-Y1 |).

なお、第2倍率の光学系または検査対象物が実際の移動距離Rに対してモデル画像20内での変位(L)への変換定数をKとすると、
(変換定数Kは、モデル画像20内での単位長さ(変位が1の場合)に応じて、第2倍率の光学系または検査対象物が移動する実際の距離を意味する)
X軸方向の実際の移動距離は、Rx=K(|X2−X1|)であり、
Y軸方向の実際の移動距離は、Ry=K(|Y2−Y1|)であり、
実際の移動距離は以下の数式を満足するようになる。
If the conversion constant to the displacement (L) in the model image 20 with respect to the actual moving distance R of the optical system or inspection object of the second magnification is K,
(The conversion constant K means the actual distance that the optical system of the second magnification or the inspection object moves according to the unit length (when the displacement is 1) in the model image 20)
The actual movement distance in the X-axis direction is Rx = K (| X2-X1 |),
The actual movement distance in the Y-axis direction is Ry = K (| Y2-Y1 |),
The actual travel distance will satisfy the following formula.

Figure 0005570588
Figure 0005570588

図8の図示によれば、センタリングステップ(S500)による第2倍率の光学系は、右側にRxだけ移動され、下側にRyだけ移動される。検査対象物は、第2倍率の光学系とは逆方向に動く。   Referring to FIG. 8, the second magnification optical system in the centering step (S500) is moved to the right by Rx and moved to the lower side by Ry. The inspection object moves in the direction opposite to the optical system of the second magnification.

センタリングステップ(S500)を経てから最終ステップ(S600)を経ることになる。最終ステップ(S600)では、第2倍率の光学系または検査対象物が移動した後、第2倍率の光学系が検査対象物を撮影して最終画像40を取得する。最終画像40は、図9に示すように、第2倍率で検査対象物を撮影した映像であり、高倍率である第2倍率の最終画像40の中央に検査領域10が位置する。   After the centering step (S500), the final step (S600) is performed. In the final step (S600), after the second magnification optical system or the inspection object moves, the second magnification optical system captures the inspection object and acquires the final image 40. As shown in FIG. 9, the final image 40 is an image obtained by photographing the inspection object at the second magnification, and the inspection region 10 is located at the center of the final image 40 at the second magnification, which is a high magnification.

また、マッチングステップ(S400)で検査画像31が検出されない場合は、エラー信号を発生する警告ステップ(S410)と、上記の撮影ステップ(S200)に戻る循環ステップ(S420)のうち、少なくともいずれか一つのステップを含めて構成することができる。   When the inspection image 31 is not detected in the matching step (S400), at least one of a warning step (S410) that generates an error signal and a circulation step (S420) that returns to the photographing step (S200). It can be configured with one step.

警告ステップ(S410)は、モデル画像20内で検査画像31を検出することができないというエラー信号を生成し、生成されたエラー信号に応じてユーザーが確認できるようにする。ユーザーの確認方法としては、エラー信号を画面に表示したり、ビープ音を鳴らす方法などがある。循環ステップ(S420)では、撮影ステップ(S200)に復帰してターゲット画像30を更新する。   In the warning step (S410), an error signal indicating that the inspection image 31 cannot be detected in the model image 20 is generated, and the user can confirm the error signal according to the generated error signal. As a user confirmation method, an error signal is displayed on the screen or a beep sound is generated. In the circulation step (S420), the process returns to the photographing step (S200) to update the target image 30.

映像センタリング方法に応じて検査領域10が同一の場合、モデル画像20は変更されないが、検査領域10が変更される場合、上述のモデル画像20は、ユーザーにより変更されることができる。   When the inspection area 10 is the same according to the video centering method, the model image 20 is not changed. However, when the inspection area 10 is changed, the above-described model image 20 can be changed by the user.

上述した本発明の一実施形態による映像センタリング方法では、第1の倍率が第2の倍率よりも低倍率であり、第1の倍率として20xの倍率を、そして第2の倍率として50xの倍率を適用することができる。本発明では、第1の倍率に対する第2の倍率の比が大きいほど有利である。   In the video centering method according to the embodiment of the present invention described above, the first magnification is lower than the second magnification, the first magnification is 20 ×, and the second magnification is 50 ×. Can be applied. In the present invention, the larger the ratio of the second magnification to the first magnification, the more advantageous.

本発明によれば、第1の倍率として登録されたモデル画像20を介して第2の倍率で検査領域10を撮影し、検査領域10が中央に位置する画像を取得することができるため、最終画像40を取得するにあたって、従来技術の第1比較例のような光学系の倍率変換がなく、従来技術の第2比較例のような探索に伴う動きが最小限に抑えられる。   According to the present invention, the inspection area 10 can be imaged at the second magnification via the model image 20 registered as the first magnification, and an image in which the inspection area 10 is located in the center can be acquired. When acquiring the image 40, there is no magnification conversion of the optical system as in the first comparative example of the prior art, and the movement accompanying the search as in the second comparative example of the prior art is minimized.

本発明の権利範囲は、上述した一実施形態に限られるものではなく、添付の特許請求の範囲内で多様な形態の実施例として具現することができる。特許請求の範囲において請求する本発明の要旨を超えることなく、当該発明の属する技術分野における通常の知識を有する者であれば誰でも変形可能な、様々な範囲まで、本発明における請求範囲の記載の範囲内にあるものとみなす。   The scope of rights of the present invention is not limited to the above-described embodiment, and can be embodied as various embodiments within the scope of the appended claims. Description of the claims in the present invention to various extents that can be modified by anyone having ordinary knowledge in the technical field to which the invention belongs without exceeding the gist of the present invention claimed in the claims. Is considered to be within the scope of

光学系の倍率変換がなく、迅速に最終画像を取得することができ、検索プロセスの動きに基づいて登録されるターゲット画像からモデル画像の一部が表示されたり、あるいは表示されない場合でも、中央に検査領域が配置される最終画像を取得することのできる映像センタリングの方法が提供される。
There is no magnification conversion of the optical system, the final image can be acquired quickly, and even if part of the model image is displayed or not displayed from the target image registered based on the movement of the search process, it is centered A video centering method is provided that can obtain a final image in which an inspection region is placed.

Claims (5)

検査対象物を第1の倍率の光学系で撮影し、撮影された前記第1の倍率の画像で検出しようとする検査領域の位置を設定してモデル画像として登録する登録ステップと、
前記検査対象物を、続いて前記第1の倍率よりも高倍率である第2の倍率の光学系で撮影してターゲット画像を取得する撮影ステップと、
前記撮影ステップで取得した前記ターゲット画像を前記第1の倍率の大きさに縮小して検査画像として登録する縮小ステップと、
前記モデル画像で前記検査画像を検索するマッチングステップと、
該マッチングステップで前記検査画像が検出された場合、前記登録ステップで設定された前記検査領域の位置に対応するように、前記第2の倍率の光学系または前記検査対象物を移動させるセンタリングステップと、を備えることを特徴とする、映像センタリング方法。
A registration step of photographing an inspection object with an optical system of a first magnification, setting a position of an inspection region to be detected in the photographed image of the first magnification, and registering it as a model image;
An imaging step of acquiring a target image by imaging the inspection object with an optical system having a second magnification that is higher than the first magnification;
A reduction step of reducing the target image acquired in the imaging step to the size of the first magnification and registering it as an inspection image;
A matching step of searching for the inspection image in the model image;
A centering step of moving the optical system of the second magnification or the inspection object so as to correspond to the position of the inspection region set in the registration step when the inspection image is detected in the matching step; And a video centering method.
前記マッチングステップで前記検査画像が検出されなかった場合に、エラー信号を発生する警告ステップと、前記撮影ステップに戻る循環ステップのうち、少なくともいずれか一つのステップを備えることを特徴とする、請求項1に記載の映像センタリング方法。   The method according to claim 1, further comprising at least one of a warning step for generating an error signal when the inspection image is not detected in the matching step and a circulation step for returning to the imaging step. 2. The video centering method according to 1. 前記センタリングステップの後、前記第2倍率の光学系が前記検査対象物を撮影し、前記検査領域が画像の中央に形成される最終画像を取得する最終ステップと、をさらに備えることを特徴とする、請求項1または請求項2に記載の映像センタリング方法。   After the centering step, the optical system of the second magnification further images the inspection object, and further includes a final step of obtaining a final image in which the inspection region is formed at the center of the image. The video centering method according to claim 1 or 2. 前記モデル画像の前記検査領域の位置は、前記モデル画像内に前記検査領域の位置を指定して第1の座標として設定し、前記モデル画像で検出された前記検査画像の位置は、前記モデル画像内で検出された前記検査画像の位置を前記第1座標に対する第2座標として設定し、前記第1の座標と前記第2の座標の間の変位に応じて換算された値をもって前記第2の倍率の光学系または前記検査対象物の移動方向と移動距離が決められることを特徴とする、請求項3に記載の映像センタリング方法。   The position of the inspection area of the model image is set as a first coordinate by specifying the position of the inspection area in the model image, and the position of the inspection image detected in the model image is the model image The position of the inspection image detected within the second coordinate is set as a second coordinate with respect to the first coordinate, and the second coordinate is converted into a value corresponding to the displacement between the first coordinate and the second coordinate. The video centering method according to claim 3, wherein a moving direction and a moving distance of the magnification optical system or the inspection object are determined. 前記モデル画像の前記検査領域の位置は、前記モデル画像内に前記検査領域の位置を指定して第1の座標として設定し、前記モデル画像で検出された前記検査画像の位置は、前記モデル画像内で検出された前記検査画像の位置を前記第1座標に対する第2座標として設定し、前記第1の座標と前記第2の座標の間の変位に応じて換算された値をもって前記第2の倍率の光学系または前記検査対象物の移動方向と移動距離が決められることを特徴とする、請求項1または請求項2に記載の映像センタリング方法。
The position of the inspection area of the model image is set as a first coordinate by specifying the position of the inspection area in the model image, and the position of the inspection image detected in the model image is the model image The position of the inspection image detected within the second coordinate is set as a second coordinate with respect to the first coordinate, and the second coordinate is converted into a value corresponding to the displacement between the first coordinate and the second coordinate. The video centering method according to claim 1 or 2, wherein a moving direction and a moving distance of the magnification optical system or the inspection object are determined.
JP2012504574A 2009-04-10 2010-04-06 Video centering method Expired - Fee Related JP5570588B2 (en)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
KR1020090031232A KR101029460B1 (en) 2009-04-10 2009-04-10 image centering method
KR10-2009-0031232 2009-04-10
PCT/KR2010/002081 WO2010117176A2 (en) 2009-04-10 2010-04-06 Image-centering method

Publications (2)

Publication Number Publication Date
JP2012523560A JP2012523560A (en) 2012-10-04
JP5570588B2 true JP5570588B2 (en) 2014-08-13

Family

ID=42936695

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2012504574A Expired - Fee Related JP5570588B2 (en) 2009-04-10 2010-04-06 Video centering method

Country Status (5)

Country Link
JP (1) JP5570588B2 (en)
KR (1) KR101029460B1 (en)
CN (1) CN102439415B (en)
TW (1) TWI481860B (en)
WO (1) WO2010117176A2 (en)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2015078852A (en) * 2013-10-15 2015-04-23 株式会社ディスコ Alignment method

Family Cites Families (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH04295748A (en) * 1991-03-25 1992-10-20 Nikon Corp Pattern inspecting apparatus
JPH05157534A (en) * 1991-12-05 1993-06-22 Matsushita Electric Ind Co Ltd Pattern matching method
JPH08201025A (en) * 1995-01-31 1996-08-09 Ntn Corp Noncontact coordinate dimension measuring machine
KR19990070849A (en) * 1998-02-25 1999-09-15 이종수 Solder Inspection System and Method of Printed Circuit Board
JP2000028336A (en) * 1998-07-10 2000-01-28 Hoya Corp Device for measuring shape and method therefor
JP2000269306A (en) * 1999-03-18 2000-09-29 Fujitsu Quantum Device Kk Manufacture of semiconductor device and manufacturing apparatus therefor
JP3448041B2 (en) * 2001-09-26 2003-09-16 株式会社東芝 Pattern defect inspection equipment
JP4313162B2 (en) * 2002-11-21 2009-08-12 株式会社日立国際電気 Alignment mark detection method and inspection apparatus
JP2004343222A (en) * 2003-05-13 2004-12-02 Olympus Corp Image processing apparatus
CN1981302B (en) * 2004-07-09 2010-12-29 奥林巴斯株式会社 Image processing device and method
JP4065893B1 (en) 2006-12-04 2008-03-26 東京エレクトロン株式会社 Defect detection device, defect detection method, information processing device, information processing method, and program thereof

Also Published As

Publication number Publication date
CN102439415B (en) 2014-04-16
CN102439415A (en) 2012-05-02
KR101029460B1 (en) 2011-04-15
TWI481860B (en) 2015-04-21
WO2010117176A3 (en) 2011-01-20
TW201037298A (en) 2010-10-16
WO2010117176A2 (en) 2010-10-14
JP2012523560A (en) 2012-10-04
KR20100112774A (en) 2010-10-20

Similar Documents

Publication Publication Date Title
JP6323183B2 (en) Image processing apparatus and image processing method
JP5863374B2 (en) Image processing method
US20120002032A1 (en) Information processing apparatus, stage-undulation correcting method, program therefor
JP2003254748A (en) Stereo image characteristic inspection system
JP2010141698A (en) Imaging apparatus
JP2010141697A (en) Imaging apparatus
US20150378143A1 (en) Whole slide imaging
JP2006276454A (en) Image correcting method and pattern defect inspecting method using same
JP5178781B2 (en) Sensor output data correction device and sensor output data correction method
JPWO2018168757A1 (en) Image processing apparatus, system, image processing method, article manufacturing method, program
JP2006214816A (en) Semiconductor inspection device
JP5570588B2 (en) Video centering method
JP5967197B2 (en) Information processing apparatus, information processing method, program, and microscope system
JP5209100B2 (en) Imaging device
JP2012004664A (en) Image processing system, inspection equipment, image processing method, and image processing program
JP4313162B2 (en) Alignment mark detection method and inspection apparatus
JPWO2017145270A1 (en) Image processing apparatus, image processing method, and endoscope
JP2010283088A (en) Wafer appearance inspection device
JP6076103B2 (en) Image processing method
WO2016172838A1 (en) Magnetic resonance imaging system and magnetic resonance imaging method
JP2008154195A (en) Method of creating pattern for calibration of lens, pattern for calibration of lens, method and device for calibrating lens utilizing pattern for calibration, and method and device for calibrating imaging apparatus
JP5209139B2 (en) Imaging device
JP2006032521A (en) Mark identifying device
JP2012068761A (en) Image processing device
JP2017058214A (en) Defect detection device and method

Legal Events

Date Code Title Description
A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20130627

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20130702

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20140603

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20140624

R150 Certificate of patent or registration of utility model

Ref document number: 5570588

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

LAPS Cancellation because of no payment of annual fees