JPH0861930A - 形状計測装置、検査装置、及び製品の製造方法 - Google Patents
形状計測装置、検査装置、及び製品の製造方法Info
- Publication number
- JPH0861930A JPH0861930A JP19560494A JP19560494A JPH0861930A JP H0861930 A JPH0861930 A JP H0861930A JP 19560494 A JP19560494 A JP 19560494A JP 19560494 A JP19560494 A JP 19560494A JP H0861930 A JPH0861930 A JP H0861930A
- Authority
- JP
- Japan
- Prior art keywords
- image
- inspection
- measurement
- light
- target
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Landscapes
- Length Measuring Devices By Optical Means (AREA)
Abstract
(57)【要約】
【目的】 未知の対象の三次元形状計測を可能とする形
状計測装置の提供。 【構成】 入力ユニット11から入力する指令により、
カラー画像表示装置である投光装置3に選択された三次
元計測法の計測用カラーパタンを表示し、この計測用カ
ラーパタンをX−Yステージ2上の計測対象1に投光
し、その計測対象1をカラーカメラ4で撮像し、対象1
の表面法線ベクトルの天頂角成分ベクトル、方位角成分
ベクトルをセンシングし、これらから対象1の形状計測
を行う。
状計測装置の提供。 【構成】 入力ユニット11から入力する指令により、
カラー画像表示装置である投光装置3に選択された三次
元計測法の計測用カラーパタンを表示し、この計測用カ
ラーパタンをX−Yステージ2上の計測対象1に投光
し、その計測対象1をカラーカメラ4で撮像し、対象1
の表面法線ベクトルの天頂角成分ベクトル、方位角成分
ベクトルをセンシングし、これらから対象1の形状計測
を行う。
Description
【0001】
【産業上の利用分野】本発明は、物体の三次元形状を計
測する計測方法を採用する形状計測装置、及び三次元計
測データを利用して製品を検査する検査装置、及び製品
製造ライン中の半製品を検査し、不良品を修理修正する
場合に利用される製品製造方法に関するものであり、特
に、自動化検査のための三次元形状情報獲得技術の中で
も特に形状が未知で、非完全拡散反射表面(非ランバー
ト面:後述)を有する対象に適用される検査装置、及び
これらの検査装置を利用した製品製造方法に関する。
測する計測方法を採用する形状計測装置、及び三次元計
測データを利用して製品を検査する検査装置、及び製品
製造ライン中の半製品を検査し、不良品を修理修正する
場合に利用される製品製造方法に関するものであり、特
に、自動化検査のための三次元形状情報獲得技術の中で
も特に形状が未知で、非完全拡散反射表面(非ランバー
ト面:後述)を有する対象に適用される検査装置、及び
これらの検査装置を利用した製品製造方法に関する。
【0002】
【従来の技術】従来から物体の三次元形状を計測した
り、その計測データを用いて自動化検査を行ったりする
必要性は多くの産業分野において発生している。これら
の場合は、三次元計測方法から見て、既知形状の対象の
発見、同定、選別を目的とする場合と、対象の形状が未
知で、その形状を自動的に知ろうとする場合とに大別さ
れる。後者の場合は、前者に比して数段困難な場合が多
く、現在の三次元画像計測技術を以ってしても、必ずし
も満足すべき成果が収められるとは限らない。対象の形
状が未知の場合には、通常用いられる代表的三次元形状
計測法である受動的センシング法の一種、両眼視三角測
量法の適用が不可能であるために、能動的センシング法
を採用するが、この方法にも限界及び短所がある。
り、その計測データを用いて自動化検査を行ったりする
必要性は多くの産業分野において発生している。これら
の場合は、三次元計測方法から見て、既知形状の対象の
発見、同定、選別を目的とする場合と、対象の形状が未
知で、その形状を自動的に知ろうとする場合とに大別さ
れる。後者の場合は、前者に比して数段困難な場合が多
く、現在の三次元画像計測技術を以ってしても、必ずし
も満足すべき成果が収められるとは限らない。対象の形
状が未知の場合には、通常用いられる代表的三次元形状
計測法である受動的センシング法の一種、両眼視三角測
量法の適用が不可能であるために、能動的センシング法
を採用するが、この方法にも限界及び短所がある。
【0003】能動的センシング法は既知のパタンを有す
る構造化光(Structured light)を対象に投光し、対象
表面に当たった光の構造が対象の形状に従って歪むの
で、その歪み方を画像検出して対象の形状を三角測量法
の逆問題解として算出する方法として知られている。例
えば、光源からの光束を一定の形態を成す単数や複数の
スリットを通過させることによりパタン光とし、これを
対象に投光する方法がある(井口征士・佐藤宏介著「三
次元画像計測」、昭晃堂、1990年、2章参照)。こ
れらの従来法は、直進光束を構成するパタンを完全拡散
反射表面即ち、ランパート面(Lambertian surface)の
対象に投光すること、及び対象に対して一定の角度に配
置された撮像装置が対象形状により、歪みを受けた変形
投光パタンを撮像することをその基本原理としている。
る構造化光(Structured light)を対象に投光し、対象
表面に当たった光の構造が対象の形状に従って歪むの
で、その歪み方を画像検出して対象の形状を三角測量法
の逆問題解として算出する方法として知られている。例
えば、光源からの光束を一定の形態を成す単数や複数の
スリットを通過させることによりパタン光とし、これを
対象に投光する方法がある(井口征士・佐藤宏介著「三
次元画像計測」、昭晃堂、1990年、2章参照)。こ
れらの従来法は、直進光束を構成するパタンを完全拡散
反射表面即ち、ランパート面(Lambertian surface)の
対象に投光すること、及び対象に対して一定の角度に配
置された撮像装置が対象形状により、歪みを受けた変形
投光パタンを撮像することをその基本原理としている。
【0004】ところが、本発明の課題は未知形状の計測
であり、対象の代表的表面形状を自由曲面体とすると、
前述のパタン光の計測限界は生成されたパタンの精細度
に依存するので、それよりも急峻な、あるいは細い表面
変化を有する自由曲面は計測対象範囲から外されること
になる。また、多くの物体表面は完全なランバート面で
はなく、多少のハイライト部を伴うものなので、これが
投光パタン検出の障害となり、計測に良好な結果が得ら
れないこともしばしば生起する。
であり、対象の代表的表面形状を自由曲面体とすると、
前述のパタン光の計測限界は生成されたパタンの精細度
に依存するので、それよりも急峻な、あるいは細い表面
変化を有する自由曲面は計測対象範囲から外されること
になる。また、多くの物体表面は完全なランバート面で
はなく、多少のハイライト部を伴うものなので、これが
投光パタン検出の障害となり、計測に良好な結果が得ら
れないこともしばしば生起する。
【0005】このような構造化光を用いる三角測量法は
基本原理として距離計測法であるが、これに対して対象
表面の非ランバート性を利用する表面角度センシング法
がある。その計測原理は、光源と受光センサと対象を一
定の幾何光学的位置関係(ジオメトリ)に設定すること
によって、対象表面からの正反射成分を検出し、未知形
状の表面法線ベクトルを計測するものである。例えば、
Arthur C.Sanderson et al. は、その論文(“Structur
ed highight inspection of specular surfaces ”,IEE
E Transactions on Pattern Analysis and Machine Int
elligence, Volume 10,Number 1,pages 46-51,1988)に
おいて、半球構造体の内側に光ファイバで誘導した多数
の点光源を配置し、上方よりそれぞれの照射角度を以っ
て対象に投光し、その真上に設置したカメラで正反射光
を撮像する計測方法を発表している。対象の表面法線ベ
クトルのモデルはガウス球なので、光源の概念構成は図
24に示したようになる。このような表面法線ベクトル
の直接的センシング法は絶対値計測法ではないので、別
途基準位置を計測する付帯条件を必要とするが、急峻な
面や微細な部分の面素の表面角度の検出も可能な実用性
の高い方法である。
基本原理として距離計測法であるが、これに対して対象
表面の非ランバート性を利用する表面角度センシング法
がある。その計測原理は、光源と受光センサと対象を一
定の幾何光学的位置関係(ジオメトリ)に設定すること
によって、対象表面からの正反射成分を検出し、未知形
状の表面法線ベクトルを計測するものである。例えば、
Arthur C.Sanderson et al. は、その論文(“Structur
ed highight inspection of specular surfaces ”,IEE
E Transactions on Pattern Analysis and Machine Int
elligence, Volume 10,Number 1,pages 46-51,1988)に
おいて、半球構造体の内側に光ファイバで誘導した多数
の点光源を配置し、上方よりそれぞれの照射角度を以っ
て対象に投光し、その真上に設置したカメラで正反射光
を撮像する計測方法を発表している。対象の表面法線ベ
クトルのモデルはガウス球なので、光源の概念構成は図
24に示したようになる。このような表面法線ベクトル
の直接的センシング法は絶対値計測法ではないので、別
途基準位置を計測する付帯条件を必要とするが、急峻な
面や微細な部分の面素の表面角度の検出も可能な実用性
の高い方法である。
【0006】しかし、彼等の装置は、その後の論文(Sh
ree K.Nayar et al., “Specular surface inspection
using structured highlight and Gaussian Images
”,IEEE Transactions on Robotics and Automation,V
olume 6,Number 2,page 214,1990 )によると、127
個の点光源を直列時分割的に点灯していくと、1回の計
測のための各画像フレームの取込みに7.62秒も要し
てしまい、とても実用的とは言えない。そこで、彼等
は、7光源ずつの組合わせ点灯により、7画像フレーム
取込みで課題を解決したと報告しているが、複数光源の
同時点灯によるセンシングの信頼性は、特に未知の自由
曲面体においては、顕著に低下してしまう。例えば、対
象が波形状表面をなしていると不都合が生じる。それ
は、1光源に対応して正反射をする箇所は1箇所ではな
いからで、複数個光源を点灯すると、表面ハイライト反
射点がどの光源に対応しているのか判別不能となる。即
ち、彼等の解決法は単調凹面あるいは単調凸面の対象に
しか適用できないのである。このように能動的三次元計
測法の最近の成果である表面角度センシング法も実用化
には未だ一歩届かない状況にある。彼等の方法は、対象
表面の各法線ベクトルNを投光撮像ジオメトリの逆問題
解として、その天頂角成分ベクトルθ=arccos
(Nz)と、その方位角成分ベクトルφ=arctan
(Ny/Nx)、(ここでx、y、zは三次元直交座標
軸)を几帳面に計測しようとする方法である。
ree K.Nayar et al., “Specular surface inspection
using structured highlight and Gaussian Images
”,IEEE Transactions on Robotics and Automation,V
olume 6,Number 2,page 214,1990 )によると、127
個の点光源を直列時分割的に点灯していくと、1回の計
測のための各画像フレームの取込みに7.62秒も要し
てしまい、とても実用的とは言えない。そこで、彼等
は、7光源ずつの組合わせ点灯により、7画像フレーム
取込みで課題を解決したと報告しているが、複数光源の
同時点灯によるセンシングの信頼性は、特に未知の自由
曲面体においては、顕著に低下してしまう。例えば、対
象が波形状表面をなしていると不都合が生じる。それ
は、1光源に対応して正反射をする箇所は1箇所ではな
いからで、複数個光源を点灯すると、表面ハイライト反
射点がどの光源に対応しているのか判別不能となる。即
ち、彼等の解決法は単調凹面あるいは単調凸面の対象に
しか適用できないのである。このように能動的三次元計
測法の最近の成果である表面角度センシング法も実用化
には未だ一歩届かない状況にある。彼等の方法は、対象
表面の各法線ベクトルNを投光撮像ジオメトリの逆問題
解として、その天頂角成分ベクトルθ=arccos
(Nz)と、その方位角成分ベクトルφ=arctan
(Ny/Nx)、(ここでx、y、zは三次元直交座標
軸)を几帳面に計測しようとする方法である。
【0007】これに対し、この方法の長所を生かした上
で、実用性を発揮しようとした検査装置も発表されてい
る。例えば、はんだ付接合部のはんだ形状情報をセンシ
ングするために方位角成分検出を断念し、円環状の光源
を異なる高さから(即ち対象への異なる入射天頂角)の
照明によって、表面法線ベクトルの中の天頂角成分だけ
を検出する装置である。この場合は、フレーム画像取込
み回数も前述の全方向全時分割法に比して、遙かに少数
で済み、演算プロセスもずっと簡単なので、検査速度の
向上が実現できている。しかし、これは飽くまでも実用
性を最優先するための簡略法であり、真の意味での三次
元形状情報は得られていない。
で、実用性を発揮しようとした検査装置も発表されてい
る。例えば、はんだ付接合部のはんだ形状情報をセンシ
ングするために方位角成分検出を断念し、円環状の光源
を異なる高さから(即ち対象への異なる入射天頂角)の
照明によって、表面法線ベクトルの中の天頂角成分だけ
を検出する装置である。この場合は、フレーム画像取込
み回数も前述の全方向全時分割法に比して、遙かに少数
で済み、演算プロセスもずっと簡単なので、検査速度の
向上が実現できている。しかし、これは飽くまでも実用
性を最優先するための簡略法であり、真の意味での三次
元形状情報は得られていない。
【0008】
【発明が解決しようとする課題】未知の対象の三次元形
状計測法を実用化するためには能動的センシング法の中
でも、表面角度センシング法が理論上適合している。し
かし、この方法は前述したような“画像取込み時間浪費
型”であるために実用化には程遠い。また、計測目的や
対象の特性から必ずしも常に全方向センシングを必要と
するわけではないので、方法上何等かの省略を加え、実
用化を計ると投光撮像ジオメトリが固定化されるため、
そのジオメトリで検出できる範囲も固定されてしまい、
計測装置としての適用範囲が限定される。その典型的な
例が上述の天頂角ベクトルのみをセンシングする検査装
置である。この例は方位角成分センシングを放棄したた
めに、計測データから対象の三次元形状を再構成するこ
とが出来ない。そこで、この表面角度センシング法の全
方向センシングを省略を加えずに実行し、また省略が可
能な場合には、自在に省略した計測法を適用出来る計測
装置の実現こそ、本発明が解決しようとする課題であ
る。
状計測法を実用化するためには能動的センシング法の中
でも、表面角度センシング法が理論上適合している。し
かし、この方法は前述したような“画像取込み時間浪費
型”であるために実用化には程遠い。また、計測目的や
対象の特性から必ずしも常に全方向センシングを必要と
するわけではないので、方法上何等かの省略を加え、実
用化を計ると投光撮像ジオメトリが固定化されるため、
そのジオメトリで検出できる範囲も固定されてしまい、
計測装置としての適用範囲が限定される。その典型的な
例が上述の天頂角ベクトルのみをセンシングする検査装
置である。この例は方位角成分センシングを放棄したた
めに、計測データから対象の三次元形状を再構成するこ
とが出来ない。そこで、この表面角度センシング法の全
方向センシングを省略を加えずに実行し、また省略が可
能な場合には、自在に省略した計測法を適用出来る計測
装置の実現こそ、本発明が解決しようとする課題であ
る。
【0009】
【課題を解決するための手段及び作用】上述の課題を解
決するために、本発明は表面角度センシング法の投光撮
像ジオメトリ機能が固定化されたハードウェア依存型の
せいで実用化を阻害されていると考え、これをソフトウ
ェア型機能とすることによって実用化ボトルネックを排
除する提案を行っている。そのための手段としては、投
光手段にカラー画像表示装置を用いた上、投光撮像方式
規定手段からの指令によって必要なカラー画像パタンを
自在に画面上に生成し、その構造化光束を対象に投光
し、カラー撮像することによって表面形状情報として必
要な情報を省略化することなく獲得する形状計測方法を
提案している。この提案により、表面角度のカラー分割
センシング法と時分割センシング法を容易に組合わせる
ことが出来るようになったので、特に天頂角成分ベクト
ルセンシング位相と方位角成分ベクトルセンシング位相
に、それぞれの計測用画像パタンを投光装置の画面に表
示し投光することで、従来、最大の難問題であった表面
法線ベクトルの完全計測を実用条件の中で達成してい
る。また、本発明になる形状計測装置に品質良否判定プ
ログラムを付加することで、実用性のある検査装置の実
現を提案している。更に、本発明に係る自動検査を実施
しつつ不良品を修理修正することにより、半製品を完成
品とする製造方法をも提案している。
決するために、本発明は表面角度センシング法の投光撮
像ジオメトリ機能が固定化されたハードウェア依存型の
せいで実用化を阻害されていると考え、これをソフトウ
ェア型機能とすることによって実用化ボトルネックを排
除する提案を行っている。そのための手段としては、投
光手段にカラー画像表示装置を用いた上、投光撮像方式
規定手段からの指令によって必要なカラー画像パタンを
自在に画面上に生成し、その構造化光束を対象に投光
し、カラー撮像することによって表面形状情報として必
要な情報を省略化することなく獲得する形状計測方法を
提案している。この提案により、表面角度のカラー分割
センシング法と時分割センシング法を容易に組合わせる
ことが出来るようになったので、特に天頂角成分ベクト
ルセンシング位相と方位角成分ベクトルセンシング位相
に、それぞれの計測用画像パタンを投光装置の画面に表
示し投光することで、従来、最大の難問題であった表面
法線ベクトルの完全計測を実用条件の中で達成してい
る。また、本発明になる形状計測装置に品質良否判定プ
ログラムを付加することで、実用性のある検査装置の実
現を提案している。更に、本発明に係る自動検査を実施
しつつ不良品を修理修正することにより、半製品を完成
品とする製造方法をも提案している。
【0010】特許請求範囲の請求項1に係る形状計測装
置は、三次元形状計測装置であって、カラー画像表示装
置であり、所定の投光方式に従って、カラーパタンを表
示して発生する光束を計測対象に投光する投光手段と、
この投光手段とは、前記計測対象に対して三次元形状計
測を可能とする幾何光学的空間位置関係に設置され、前
記光束を受けた計測対象を撮像して画像信号を出力する
撮像手段と、適用した三次元計測方式に準じて、前記投
光手段の投光方式及び前記撮像手段の撮像方式から成る
計測方式を規定する計測方式規定手段と、前記撮像手段
からの画像信号を受けて前記計測方式に対応するプログ
ラムを用いて、三次元形状計測演算をなす演算手段と、
を備えている。
置は、三次元形状計測装置であって、カラー画像表示装
置であり、所定の投光方式に従って、カラーパタンを表
示して発生する光束を計測対象に投光する投光手段と、
この投光手段とは、前記計測対象に対して三次元形状計
測を可能とする幾何光学的空間位置関係に設置され、前
記光束を受けた計測対象を撮像して画像信号を出力する
撮像手段と、適用した三次元計測方式に準じて、前記投
光手段の投光方式及び前記撮像手段の撮像方式から成る
計測方式を規定する計測方式規定手段と、前記撮像手段
からの画像信号を受けて前記計測方式に対応するプログ
ラムを用いて、三次元形状計測演算をなす演算手段と、
を備えている。
【0011】この形状計測装置は、能動的三次元情報セ
ンシングにおける投光光束構造をソフトウェア指示によ
り、画像表示装置の画面上のカラーパタンとして描出
し、自在に投光パタンを生成して目的に応じた三次元形
状計測を実行出来るようにしている。即ち、計測対象と
投光手段と撮像手段が一定の幾何光学的配置に固定化さ
れた計測装置において、投光手段がカラー画像表示装置
であり、採用した三次元計測方法に従って、その画面上
にカラーパタンを表示し、その光束の投光を受けた計測
対象を撮像装置が撮像して出力した画像信号から採用し
た三次元計測方法に応じて、演算手段が三次元形状計測
演算を実施し、計測対象の三次元形状を算出する形状計
測装置であり、目的に応じて三次元形状計測投光手段と
撮像手段の投光撮像方式を規定することが出来る。
ンシングにおける投光光束構造をソフトウェア指示によ
り、画像表示装置の画面上のカラーパタンとして描出
し、自在に投光パタンを生成して目的に応じた三次元形
状計測を実行出来るようにしている。即ち、計測対象と
投光手段と撮像手段が一定の幾何光学的配置に固定化さ
れた計測装置において、投光手段がカラー画像表示装置
であり、採用した三次元計測方法に従って、その画面上
にカラーパタンを表示し、その光束の投光を受けた計測
対象を撮像装置が撮像して出力した画像信号から採用し
た三次元計測方法に応じて、演算手段が三次元形状計測
演算を実施し、計測対象の三次元形状を算出する形状計
測装置であり、目的に応じて三次元形状計測投光手段と
撮像手段の投光撮像方式を規定することが出来る。
【0012】請求項2に係る形状計測装置は、請求項1
に記載のものにおいて、メモリ手段を具備し、前記投光
手段は投光方式に従い相互に異なる複数のパタンを時分
割的に表示して発生する光束を計測対象に投光し、前記
撮像手段は前記光束を受けた計測対象を撮像方式に従っ
て投光と同期して時分割的に撮像し、複数組の画像信号
を出力して、前記メモリ手段に貯蔵し、前記演算手段は
貯蔵された前記画像信号を併用して三次元形状計測演算
を行うものである。
に記載のものにおいて、メモリ手段を具備し、前記投光
手段は投光方式に従い相互に異なる複数のパタンを時分
割的に表示して発生する光束を計測対象に投光し、前記
撮像手段は前記光束を受けた計測対象を撮像方式に従っ
て投光と同期して時分割的に撮像し、複数組の画像信号
を出力して、前記メモリ手段に貯蔵し、前記演算手段は
貯蔵された前記画像信号を併用して三次元形状計測演算
を行うものである。
【0013】この形状計測装置は、投光手段と撮像手段
が複数の位相において画像センシング出来、かつ各位相
における投光パタンが異なるようになしているので、そ
れらの画像データをメモリして計測演算すれば、最少回
数の撮像によって対象の十分な三次元データが得られ
る。請求項3に係る形状計測装置は、請求項2に記載の
ものにおいて、投光手段及び撮像手段が、1回の計測当
たり各2位相の投光及び撮像を行い、前記投光手段は、
第一位相においては表面法線ベクトル天頂角成分センシ
ング・パタンを表示して発生する光束を対象に投光し、
第二位相においては表面法線ベクトル方位角成分センシ
ング・パタンを表示して発生する光束を対象に投光し、
前記撮像手段は前記光束を受けた計測対象を投光と同期
して撮像し、2組の画像信号を出力して前記メモリ手段
に貯蔵し、前記演算手段は貯蔵された前記画像信号を併
用して前記対象の表面法線ベクトルを算出するようにし
ている。
が複数の位相において画像センシング出来、かつ各位相
における投光パタンが異なるようになしているので、そ
れらの画像データをメモリして計測演算すれば、最少回
数の撮像によって対象の十分な三次元データが得られ
る。請求項3に係る形状計測装置は、請求項2に記載の
ものにおいて、投光手段及び撮像手段が、1回の計測当
たり各2位相の投光及び撮像を行い、前記投光手段は、
第一位相においては表面法線ベクトル天頂角成分センシ
ング・パタンを表示して発生する光束を対象に投光し、
第二位相においては表面法線ベクトル方位角成分センシ
ング・パタンを表示して発生する光束を対象に投光し、
前記撮像手段は前記光束を受けた計測対象を投光と同期
して撮像し、2組の画像信号を出力して前記メモリ手段
に貯蔵し、前記演算手段は貯蔵された前記画像信号を併
用して前記対象の表面法線ベクトルを算出するようにし
ている。
【0014】この形状計測装置は、表面法線ベクトルの
うちの天頂角成分ベクトル計測のためのパタン光を投光
して撮像する位相と、同じく方位角成分ベクトル計測の
ためのパタン光を投光して撮像する別位相とを用意した
ので、両位相の画像データをメモリして三次元形状計測
演算に利用し、最短時間で対象の表面法線ベクトルが算
出出来る。
うちの天頂角成分ベクトル計測のためのパタン光を投光
して撮像する位相と、同じく方位角成分ベクトル計測の
ためのパタン光を投光して撮像する別位相とを用意した
ので、両位相の画像データをメモリして三次元形状計測
演算に利用し、最短時間で対象の表面法線ベクトルが算
出出来る。
【0015】請求項4に係る形状計測装置は、請求項
1、請求項2あるいは請求項3に記載のものにおいて、
投光手段は、計測対象を原点とする幾何光学空間座標に
位置付けた仮想ガウス球表面上の緯度線あるいは経度線
もしくは緯度上のエリアあるいは経度上のエリアを中心
射影法あるいはその他の球体投影法に基づいて、前記投
光手段画面上に描出することによって計測対象の表面法
線ベクトルセンシング・パタンとしている。
1、請求項2あるいは請求項3に記載のものにおいて、
投光手段は、計測対象を原点とする幾何光学空間座標に
位置付けた仮想ガウス球表面上の緯度線あるいは経度線
もしくは緯度上のエリアあるいは経度上のエリアを中心
射影法あるいはその他の球体投影法に基づいて、前記投
光手段画面上に描出することによって計測対象の表面法
線ベクトルセンシング・パタンとしている。
【0016】この形状計測装置は、投光手段の画面上に
表示するパタンの描出方法に関し、このパタンは、計測
対象を原点とする空間座標に仮想的に位置するガウス球
表面上の緯度線あるいは経度線もしくは緯度上のエリア
あるいは経度上のエリアを画面上に中心射影法あるいは
その他の投影法により描いたパタンである。請求項5に
係る形状計測装置は、請求項1に記載のものにおいて、
撮像手段が、前記計測方式規定手段からの撮像角度指示
信号あるいは撮像倍率指示信号に従って、撮像角度ある
いは撮像倍率の変更が可能である。
表示するパタンの描出方法に関し、このパタンは、計測
対象を原点とする空間座標に仮想的に位置するガウス球
表面上の緯度線あるいは経度線もしくは緯度上のエリア
あるいは経度上のエリアを画面上に中心射影法あるいは
その他の投影法により描いたパタンである。請求項5に
係る形状計測装置は、請求項1に記載のものにおいて、
撮像手段が、前記計測方式規定手段からの撮像角度指示
信号あるいは撮像倍率指示信号に従って、撮像角度ある
いは撮像倍率の変更が可能である。
【0017】この形状計測装置では、撮像角度指示信号
あるいは撮像倍率指示信号によって撮像角度、あるいは
撮像倍率の変換を指示することができる。請求項6に係
る検査装置は、三次元形状計測方法採用の検査装置であ
って、カラー画像表示装置であり、所定の投光方式に従
って、カラーパタンを表示して発生する光束を検査対象
に投光する投光手段と、この投光手段とは、前記検査対
象に対して三次元形状計測を可能とする幾何光学的空間
位置関係に設置され、前記光束を受けた検査対象を撮像
して画像信号を出力する撮像手段と、適用した三次元計
測方式に準じて、前記投光手段の投光方式及び前記撮像
手段の撮像方式から成る計測方式を規定する計測方式規
定手段と、前記撮像手段からの画像信号を受けて前記計
測方式に対応するプログラムを用いて、三次元形状計測
演算をなす演算手段と、前記演算手段の三次元計測演算
データを用いて検査対象の品質良否判定を行う判定手段
とを備えている。
あるいは撮像倍率指示信号によって撮像角度、あるいは
撮像倍率の変換を指示することができる。請求項6に係
る検査装置は、三次元形状計測方法採用の検査装置であ
って、カラー画像表示装置であり、所定の投光方式に従
って、カラーパタンを表示して発生する光束を検査対象
に投光する投光手段と、この投光手段とは、前記検査対
象に対して三次元形状計測を可能とする幾何光学的空間
位置関係に設置され、前記光束を受けた検査対象を撮像
して画像信号を出力する撮像手段と、適用した三次元計
測方式に準じて、前記投光手段の投光方式及び前記撮像
手段の撮像方式から成る計測方式を規定する計測方式規
定手段と、前記撮像手段からの画像信号を受けて前記計
測方式に対応するプログラムを用いて、三次元形状計測
演算をなす演算手段と、前記演算手段の三次元計測演算
データを用いて検査対象の品質良否判定を行う判定手段
とを備えている。
【0018】この検査装置は、品質良否判定プログラム
を備え、計測された対象の三次元形状データを用いて対
象品質の良否判定を行う。請求項7に係る検査装置は、
検査対象を撮像し、その画像を目視観測に供する検査装
置であって、投光手段は画像表示装置であり、投光方式
規定手段からの規定信号に従って目視検査に好適な画像
の生成に必要な光源としての白色エリアをその画像上に
表示して発生する光束を前記検査対象に投光し、撮像手
段が前記光束を受けた検査対象を撮像し、その画像を表
示手段が表示する。
を備え、計測された対象の三次元形状データを用いて対
象品質の良否判定を行う。請求項7に係る検査装置は、
検査対象を撮像し、その画像を目視観測に供する検査装
置であって、投光手段は画像表示装置であり、投光方式
規定手段からの規定信号に従って目視検査に好適な画像
の生成に必要な光源としての白色エリアをその画像上に
表示して発生する光束を前記検査対象に投光し、撮像手
段が前記光束を受けた検査対象を撮像し、その画像を表
示手段が表示する。
【0019】この検査装置は、画像表示装置を投光手段
とし、その画面上に検査対象の目視検査に好適な画像を
生成するのに必要な白色エリアを表示して検査対象を照
明し、撮像手段が撮像して画像表示する。請求項8に係
る検査装置は、三次元形状計測方法採用の検査装置であ
って、カラー画像表示装置であり、所定の投光方式に従
って、カラーパタンを表示して発生する光束を検査対象
に投光する投光手段と、この投光手段とは、前記検査対
象に対して三次元形状計測を可能とする幾何光学的空間
位置関係に設置され、前記光束を受けた検査対象を撮像
して画像信号を出力する撮像手段と、適用した三次元計
測方式に準じて、前記投光手段の投光方式及び前記撮像
手段の撮像方式から成る計測方式を規定する計測方式規
定手段と、前記撮像手段からの画像信号を受けて前記計
測方式に対応するプログラムを用いて、三次元形状計測
演算をなす演算手段と、前記演算手段の三次元計測演算
データを用いて検査対象の品質良否判定を行う判定手段
と、第1検査位相において自動検査され、不良判定され
た検査対象を同定するデータ(IDデータ)を記憶する
記憶手段と、第2検査位相において前記同定データを用
いて選択され、前記撮像手段によって撮像された前記不
良判定対象の画像を、不良判定の目視再検査に供するた
め表示する表示手段とを備えたものである。
とし、その画面上に検査対象の目視検査に好適な画像を
生成するのに必要な白色エリアを表示して検査対象を照
明し、撮像手段が撮像して画像表示する。請求項8に係
る検査装置は、三次元形状計測方法採用の検査装置であ
って、カラー画像表示装置であり、所定の投光方式に従
って、カラーパタンを表示して発生する光束を検査対象
に投光する投光手段と、この投光手段とは、前記検査対
象に対して三次元形状計測を可能とする幾何光学的空間
位置関係に設置され、前記光束を受けた検査対象を撮像
して画像信号を出力する撮像手段と、適用した三次元計
測方式に準じて、前記投光手段の投光方式及び前記撮像
手段の撮像方式から成る計測方式を規定する計測方式規
定手段と、前記撮像手段からの画像信号を受けて前記計
測方式に対応するプログラムを用いて、三次元形状計測
演算をなす演算手段と、前記演算手段の三次元計測演算
データを用いて検査対象の品質良否判定を行う判定手段
と、第1検査位相において自動検査され、不良判定され
た検査対象を同定するデータ(IDデータ)を記憶する
記憶手段と、第2検査位相において前記同定データを用
いて選択され、前記撮像手段によって撮像された前記不
良判定対象の画像を、不良判定の目視再検査に供するた
め表示する表示手段とを備えたものである。
【0020】この検査装置は、自動検査位相で不良判定
した検査対象の同定(ID)データをメモリし、その同
定(ID)データを用いて、対象の自動検査が完了した
後に自動検査不良判定対象を撮像してその画像を表示
し、目視による再検査に提供する。請求項9に係る製品
製造方法は、検査対象の形状を検査し、不良判定された
対象に修理修正を施すことによって、半製品から完成品
を製造する方法であって、製品製造ライン内に、三次元
形状計測装置であって、カラー画像表示装置であり、所
定の投光方式に従って、カラーパタンを表示して発生す
る光束を検査対象に投光する投光手段と、この投光手段
とは、前記検査対象に対して三次元形状計測を可能とす
る幾何光学的空間位置関係に設置され、前記光束を受け
た検査対象を撮像して画像信号を出力する撮像手段と、
適用した三次元計測方式に準じて、前記投光手段の投光
方式及び前記撮像手段の撮像方式から成る計測方式を規
定する計測方式規定手段と、前記撮像手段からの画像信
号を受けて前記計測方式に対応するプログラムを用い
て、三次元形状計測演算をなす演算手段とを備える検査
装置を設置し、この検査装置により、半製品の品質の良
否判定を行い、不良判定された箇所の修理修正を行い、
半製品を完成する。
した検査対象の同定(ID)データをメモリし、その同
定(ID)データを用いて、対象の自動検査が完了した
後に自動検査不良判定対象を撮像してその画像を表示
し、目視による再検査に提供する。請求項9に係る製品
製造方法は、検査対象の形状を検査し、不良判定された
対象に修理修正を施すことによって、半製品から完成品
を製造する方法であって、製品製造ライン内に、三次元
形状計測装置であって、カラー画像表示装置であり、所
定の投光方式に従って、カラーパタンを表示して発生す
る光束を検査対象に投光する投光手段と、この投光手段
とは、前記検査対象に対して三次元形状計測を可能とす
る幾何光学的空間位置関係に設置され、前記光束を受け
た検査対象を撮像して画像信号を出力する撮像手段と、
適用した三次元計測方式に準じて、前記投光手段の投光
方式及び前記撮像手段の撮像方式から成る計測方式を規
定する計測方式規定手段と、前記撮像手段からの画像信
号を受けて前記計測方式に対応するプログラムを用い
て、三次元形状計測演算をなす演算手段とを備える検査
装置を設置し、この検査装置により、半製品の品質の良
否判定を行い、不良判定された箇所の修理修正を行い、
半製品を完成する。
【0021】請求項10に係る製品製造方法は、検査対
象の形状を検査し、不良判定された検査対象に修理修正
を施すことによって、半製品から完成品を製造する方法
であって、製造ライン内に、検査対象を撮像し、その画
像を目視観測に供する検査装置であって、投光手段は画
像表示装置であり、投光方式規定手段からの規定信号に
従って目視検査に好適な画像の生成に必要な光源として
の白色エリアをその画像上に表示して発生する光束を前
記対象に投光し、撮像手段が前記光束を受けた検査対象
を撮像し、その画像を表示手段が表示する検査装置を設
置し、この検査装置により半製品の品質の良否判定を行
い、不良判定された箇所の修理修正を行い、半製品を完
成することを特徴とする製品製造方法。
象の形状を検査し、不良判定された検査対象に修理修正
を施すことによって、半製品から完成品を製造する方法
であって、製造ライン内に、検査対象を撮像し、その画
像を目視観測に供する検査装置であって、投光手段は画
像表示装置であり、投光方式規定手段からの規定信号に
従って目視検査に好適な画像の生成に必要な光源として
の白色エリアをその画像上に表示して発生する光束を前
記対象に投光し、撮像手段が前記光束を受けた検査対象
を撮像し、その画像を表示手段が表示する検査装置を設
置し、この検査装置により半製品の品質の良否判定を行
い、不良判定された箇所の修理修正を行い、半製品を完
成することを特徴とする製品製造方法。
【0022】請求項11に係る製品製造方法は、検査対
象の形状を検査し、不良判定された検査対象に修理修正
を施すことによって、半製品から完成品を製造する方法
であって、製品製造ライン内に、三次元形状計測方法採
用の検査装置であって、カラー画像表示装置であり、所
定の投光方式に従って、カラーパタンを表示して発生す
る光束を検査対象に投光する投光手段と、この投光手段
とは、前記検査対象に対して三次元形状計測を可能とす
る幾何光学的空間位置関係に設置され、前記光束を受け
た検査対象を撮像して画像信号を出力する撮像手段と、
適用した三次元計測方式に準じて、前記投光手段の投光
方式及び前記撮像手段の撮像方式から成る計測方式を規
定する計測方式規定手段と、前記撮像手段からの画像信
号を受けて前記計測方式に対応するプログラムを用い
て、三次元形状計測演算をなす演算手段と、前記演算手
段の三次元計測演算データを用いて検査対象の品質良否
判定を行う判定手段と、第1検査位相において自動検査
され、不良判定された検査対象を同定するデータ(ID
データ)を記憶する記憶手段と、第2検査位相において
前記同定データを用いて選択され、前記撮像手段によっ
て撮像された前記不良判定対象の画像を、不良判定の目
視再検査に供するため表示する表示手段とを備えた検査
装置を設置し、この検査装置により、半製品の品質の良
否判定を行い、不良判定された箇所の品質の修理修正を
行い、半製品を完成する。
象の形状を検査し、不良判定された検査対象に修理修正
を施すことによって、半製品から完成品を製造する方法
であって、製品製造ライン内に、三次元形状計測方法採
用の検査装置であって、カラー画像表示装置であり、所
定の投光方式に従って、カラーパタンを表示して発生す
る光束を検査対象に投光する投光手段と、この投光手段
とは、前記検査対象に対して三次元形状計測を可能とす
る幾何光学的空間位置関係に設置され、前記光束を受け
た検査対象を撮像して画像信号を出力する撮像手段と、
適用した三次元計測方式に準じて、前記投光手段の投光
方式及び前記撮像手段の撮像方式から成る計測方式を規
定する計測方式規定手段と、前記撮像手段からの画像信
号を受けて前記計測方式に対応するプログラムを用い
て、三次元形状計測演算をなす演算手段と、前記演算手
段の三次元計測演算データを用いて検査対象の品質良否
判定を行う判定手段と、第1検査位相において自動検査
され、不良判定された検査対象を同定するデータ(ID
データ)を記憶する記憶手段と、第2検査位相において
前記同定データを用いて選択され、前記撮像手段によっ
て撮像された前記不良判定対象の画像を、不良判定の目
視再検査に供するため表示する表示手段とを備えた検査
装置を設置し、この検査装置により、半製品の品質の良
否判定を行い、不良判定された箇所の品質の修理修正を
行い、半製品を完成する。
【0023】
【実施例】以下、実施例により、この発明をさらに詳細
に説明する。図1は、本発明を具体化した第1実施例の
形状計測装置の構成を示す図である。この形状計測装置
の投光ユニット3は二次元カラー画像表示装置であり、
この実施例では、カラーLCD(液晶)表示装置である
が、勿論カラーCRT(陰極線管)でも、また可変色E
L(エレクトロルミネッセンス)板や投影映写(プロジ
ェクション)システム等、入力信号に従ってカラー画像
を表示しうる装置であれば、いずれも適用可能である。
に説明する。図1は、本発明を具体化した第1実施例の
形状計測装置の構成を示す図である。この形状計測装置
の投光ユニット3は二次元カラー画像表示装置であり、
この実施例では、カラーLCD(液晶)表示装置である
が、勿論カラーCRT(陰極線管)でも、また可変色E
L(エレクトロルミネッセンス)板や投影映写(プロジ
ェクション)システム等、入力信号に従ってカラー画像
を表示しうる装置であれば、いずれも適用可能である。
【0024】計測対象の計測目的に応じて入力ユニット
11から入力された指示信号により、選択した能動法三
次元計測法に従って投光撮像制御ユニット6は投光制御
指令を投光ユニット3に伝達し、投光ユニット3はその
表示画面上に指令された三次元計測用カラーパタンを表
示する。同時に投光撮像制御ユニット6は撮像方式指令
をカラーカメラを備えた撮像装置4に伝達し、更に撮像
角度及び撮像倍率を設定する。この実施例では、先ず図
5の天頂角用中心射影カラーパタンを投光ユニット3の
画面上に表示し、その投光によって計測対象1の表面法
線ベクトルの天頂角成分ベクトルをセンシングの上計測
し、次に図6の方位角用中心射影カラーパタンを投光ユ
ニット3の画面上に表示し、その投光によって対象1の
表面法線ベクトルの方位角成分ベクトルをセンシングの
上計測する。撮像された対象1の各表面面素の法線ベク
トルを規定する成分である天頂角ベクトルと方位角ベク
トルは上述の2回の計測によって得られるので、対象1
の三次元表面形状の計測が達成される。 以下にその計
測原理を説明する。図23は図1に示された投光装置
L、撮像装置V、及び原点に置かれた対象表面の法線ベ
クトルNの幾何光学的位置関係を極座標表示したもので
ある。また、演算式(1)、(2)、(3)は、その三
次元直交座標表示を示す。ここで非ランバート面の正反
射性は拘束条件であって、Nθ=(Lθ−Vθ)/2、
Nφ=Lφ=Vφ、Vx=VrsinVθcosLφ、
Vy=VrsinVθsinLφ、Vz=VrcosV
θであるので、投光装置と撮像装置の位置関係で方位角
ベクトルNφがLとVの作る平面に有り、かつ天頂角ベ
クトルNθがLθとVθと成す角の1/2である対象面
素だけが撮像装置へ反射光束を投射する。そこで、逆算
すれば、その画素に相当する面素の反射光がセンシング
出来、その値から法線ベクトルが算出できる。この時、
Lが入射光束としての拡がりと構造を持ったカラーパタ
ンであれば、撮像されるカラー画像は測定系空間におけ
るパタン微小部分の幾何光学的位置と対象表面角度に対
応して“対象のカラー角度画像”となる。
11から入力された指示信号により、選択した能動法三
次元計測法に従って投光撮像制御ユニット6は投光制御
指令を投光ユニット3に伝達し、投光ユニット3はその
表示画面上に指令された三次元計測用カラーパタンを表
示する。同時に投光撮像制御ユニット6は撮像方式指令
をカラーカメラを備えた撮像装置4に伝達し、更に撮像
角度及び撮像倍率を設定する。この実施例では、先ず図
5の天頂角用中心射影カラーパタンを投光ユニット3の
画面上に表示し、その投光によって計測対象1の表面法
線ベクトルの天頂角成分ベクトルをセンシングの上計測
し、次に図6の方位角用中心射影カラーパタンを投光ユ
ニット3の画面上に表示し、その投光によって対象1の
表面法線ベクトルの方位角成分ベクトルをセンシングの
上計測する。撮像された対象1の各表面面素の法線ベク
トルを規定する成分である天頂角ベクトルと方位角ベク
トルは上述の2回の計測によって得られるので、対象1
の三次元表面形状の計測が達成される。 以下にその計
測原理を説明する。図23は図1に示された投光装置
L、撮像装置V、及び原点に置かれた対象表面の法線ベ
クトルNの幾何光学的位置関係を極座標表示したもので
ある。また、演算式(1)、(2)、(3)は、その三
次元直交座標表示を示す。ここで非ランバート面の正反
射性は拘束条件であって、Nθ=(Lθ−Vθ)/2、
Nφ=Lφ=Vφ、Vx=VrsinVθcosLφ、
Vy=VrsinVθsinLφ、Vz=VrcosV
θであるので、投光装置と撮像装置の位置関係で方位角
ベクトルNφがLとVの作る平面に有り、かつ天頂角ベ
クトルNθがLθとVθと成す角の1/2である対象面
素だけが撮像装置へ反射光束を投射する。そこで、逆算
すれば、その画素に相当する面素の反射光がセンシング
出来、その値から法線ベクトルが算出できる。この時、
Lが入射光束としての拡がりと構造を持ったカラーパタ
ンであれば、撮像されるカラー画像は測定系空間におけ
るパタン微小部分の幾何光学的位置と対象表面角度に対
応して“対象のカラー角度画像”となる。
【0025】また図2に示すように、撮像装置4をz軸
上に配置すると、Vθ=0、Vx=Vy=0、Vz=V
rであり、正反射性との複合光束条件は、Nθ=Lθ/
2、Nφ=Lφ=Vφ、Vz=Vr、Vx=Vy=0と
なり、逆問題解を得るための演算が著しく簡略化出来
る。逆に、例えば図3に示すように投光装置3をz軸上
に、また撮像装置4を+x軸に配置すると、演算式
(1)は、Lx=LrsinLθ、Ly=0、Lz=L
rcosLθ、演算式(2)は、Vx=VrsinV
θ、Yy=0、Vz=VrcosVθ、演算式(3)
は、Nθ=arccos(Nz)、Nφ=0となる。正
反射性との複合光束条件はNθ=(Lθ−Vθ)/2で
逆問題解を得る。これらの関係は撮像装置4を±x軸、
あるいは±y軸のいずれかにセットした場合も、φ=n
π/2(n=0、1、2、3)を与えれば同様の結果が
得られる。また、撮像装置4が任意のφ値である場合
は、図23の3演算式と正反射性との複合光束条件によ
り、幾何光学的関係が算出出来る。
上に配置すると、Vθ=0、Vx=Vy=0、Vz=V
rであり、正反射性との複合光束条件は、Nθ=Lθ/
2、Nφ=Lφ=Vφ、Vz=Vr、Vx=Vy=0と
なり、逆問題解を得るための演算が著しく簡略化出来
る。逆に、例えば図3に示すように投光装置3をz軸上
に、また撮像装置4を+x軸に配置すると、演算式
(1)は、Lx=LrsinLθ、Ly=0、Lz=L
rcosLθ、演算式(2)は、Vx=VrsinV
θ、Yy=0、Vz=VrcosVθ、演算式(3)
は、Nθ=arccos(Nz)、Nφ=0となる。正
反射性との複合光束条件はNθ=(Lθ−Vθ)/2で
逆問題解を得る。これらの関係は撮像装置4を±x軸、
あるいは±y軸のいずれかにセットした場合も、φ=n
π/2(n=0、1、2、3)を与えれば同様の結果が
得られる。また、撮像装置4が任意のφ値である場合
は、図23の3演算式と正反射性との複合光束条件によ
り、幾何光学的関係が算出出来る。
【0026】次に、投光装置3の画面上に生成するカラ
ーパタンの形状について説明する。パタンは天頂角につ
いては図21のように水平カラーバーを、また方位角に
ついては図22のように垂直カラーバーをそれぞれ使用
しても良いが、投光装置3の画面が平面状であるために
パタン中心から左右両端、または上下両端に向かって離
れるに従って幾何光学的誤差が大となっていく。原点に
位置する対象表面形状の法線ベクトルモデルはガウス球
であるので、対象から投光装置画面への再短距離を半径
とするガウス球面の投光装置画面上への中心射影が理論
上の正確な表面角度ベクトル検出用投光パタンに相当す
ることになる(図7参照)。そこで、図2に示される投
光撮像ジオメトリに関しては、図5、図6に示すような
形態のパタンを画面上に表示して、これを投光すれば、
精確な三次元計測が実現される。図5、図6のパタンは
図7の演算式(4)を用いて画面上に描くことが出来
る。また、図3、図4に示される投光撮像ジオメトリに
関しては図7の演算式(6)、(5)をそれぞれ適用す
ることによって、同様に計測の目的に適合する投光パタ
ンを画面上に描くことが出来る。実用的な計測装置ある
いは検査装置においては、以上述べたような厳密なパタ
ンでなくとも差支えないケースも有り、それらでは中心
射影以外の投射投影法や円錐投影法や円筒投影法を準用
しても良い。
ーパタンの形状について説明する。パタンは天頂角につ
いては図21のように水平カラーバーを、また方位角に
ついては図22のように垂直カラーバーをそれぞれ使用
しても良いが、投光装置3の画面が平面状であるために
パタン中心から左右両端、または上下両端に向かって離
れるに従って幾何光学的誤差が大となっていく。原点に
位置する対象表面形状の法線ベクトルモデルはガウス球
であるので、対象から投光装置画面への再短距離を半径
とするガウス球面の投光装置画面上への中心射影が理論
上の正確な表面角度ベクトル検出用投光パタンに相当す
ることになる(図7参照)。そこで、図2に示される投
光撮像ジオメトリに関しては、図5、図6に示すような
形態のパタンを画面上に表示して、これを投光すれば、
精確な三次元計測が実現される。図5、図6のパタンは
図7の演算式(4)を用いて画面上に描くことが出来
る。また、図3、図4に示される投光撮像ジオメトリに
関しては図7の演算式(6)、(5)をそれぞれ適用す
ることによって、同様に計測の目的に適合する投光パタ
ンを画面上に描くことが出来る。実用的な計測装置ある
いは検査装置においては、以上述べたような厳密なパタ
ンでなくとも差支えないケースも有り、それらでは中心
射影以外の投射投影法や円錐投影法や円筒投影法を準用
しても良い。
【0027】計測対象1に当たった光束は反射光となっ
て撮像装置4に入射する。前述のように、一般に殆どの
物体表面は散乱反射と鏡面反射の両者の性質をその物体
表面固有の比率で有する「非ランバート面」をなし、本
発明はその鏡面反射成分即ち正反射成分を利用してい
る。対象1に対して撮像装置4を一定の方位角及び天頂
角に設置し、投光ユニット3が図5の天頂角用中心射影
カラーパタンを光束として投光すると、各カラーパタン
はそれぞれの入射天頂角を以って対象に投射され、対象
表面からの正反射光成分はその面素の法線ベクトルの天
頂角成分に従って正反射し、撮像装置4が天頂角ベクト
ルに応じたカラー画像として撮像し、その画像データは
画像入力処理演算ユニット7が内蔵するメモリフレーム
(図示せず)に取り込まれ、画素入力レベルの基準化等
の基本的演算を施された後、CPU9によって各カラー
宛逆問題解として対象各面素毎の天頂角ベクトルが算出
される。この各面素毎の天頂角データは、メモリ10に
貯蔵される。次に投光ユニット3の画面上に図6の方位
角用カラーパタンを表示し、これを投光すると同様にし
て正反射の原理に従って対象表面からの反射光成分は撮
像装置4によって表面方位角ベクトル対応カラー画像と
して撮像され、画像入力処理演算ユニット7が内蔵する
メモリフレームに取り込まれ、入力レベルの基準化等の
基本的演算が施された後、CPU9によって各カラー宛
逆問題解として対象各面素毎の方位角ベクトルが算出さ
れ、メモリ10に貯蔵される。
て撮像装置4に入射する。前述のように、一般に殆どの
物体表面は散乱反射と鏡面反射の両者の性質をその物体
表面固有の比率で有する「非ランバート面」をなし、本
発明はその鏡面反射成分即ち正反射成分を利用してい
る。対象1に対して撮像装置4を一定の方位角及び天頂
角に設置し、投光ユニット3が図5の天頂角用中心射影
カラーパタンを光束として投光すると、各カラーパタン
はそれぞれの入射天頂角を以って対象に投射され、対象
表面からの正反射光成分はその面素の法線ベクトルの天
頂角成分に従って正反射し、撮像装置4が天頂角ベクト
ルに応じたカラー画像として撮像し、その画像データは
画像入力処理演算ユニット7が内蔵するメモリフレーム
(図示せず)に取り込まれ、画素入力レベルの基準化等
の基本的演算を施された後、CPU9によって各カラー
宛逆問題解として対象各面素毎の天頂角ベクトルが算出
される。この各面素毎の天頂角データは、メモリ10に
貯蔵される。次に投光ユニット3の画面上に図6の方位
角用カラーパタンを表示し、これを投光すると同様にし
て正反射の原理に従って対象表面からの反射光成分は撮
像装置4によって表面方位角ベクトル対応カラー画像と
して撮像され、画像入力処理演算ユニット7が内蔵する
メモリフレームに取り込まれ、入力レベルの基準化等の
基本的演算が施された後、CPU9によって各カラー宛
逆問題解として対象各面素毎の方位角ベクトルが算出さ
れ、メモリ10に貯蔵される。
【0028】最後に、このようにしてメモリされた各面
素の表面天頂角ベクトルと表面方位角ベクトルのデータ
は併せてCPU9において各面素の法線ベクトル算出に
使用され、計測対象1の形状計測が完結する。計測結果
データは、表示ユニット13に表示するか、あるいは出
力ユニット12から出力する。なお、図1中のシステム
制御ユニット8はこの形状計測装置の全システム動作を
制御するユニットであり、14はバスである。
素の表面天頂角ベクトルと表面方位角ベクトルのデータ
は併せてCPU9において各面素の法線ベクトル算出に
使用され、計測対象1の形状計測が完結する。計測結果
データは、表示ユニット13に表示するか、あるいは出
力ユニット12から出力する。なお、図1中のシステム
制御ユニット8はこの形状計測装置の全システム動作を
制御するユニットであり、14はバスである。
【0029】第1実施例による計測全体の動作順序を図
8のフローチャートに示す。先ず、図1の計測対象をス
テージ2にセットすると(ST1)、計測シーケンスに
従ってシステム制御ユニット8の制御信号を受けて投光
撮像制御ユニット6が投光装置3の画面にメモリ10に
メモリされているプログラムに従って、天頂角計測用カ
ラーパタンを表示する(ST2)。表示されたパタンが
発する光束を受けた対象を撮像装置4のカラーカメラが
撮像する(ST3)。そこで、撮像装置4はこれを画像
信号に変換して画像入力処理演算ユニット7へ出力す
る。画像処理演算ユニット7はこの画像信号に基準化演
算等の基本的演算を施した後、内蔵するフレームメモリ
(図示せず)にメモリする。CPU9はこのデータから
各面素の天頂角成分ベクトルを算出して(ST4)、デ
ータをメモリ10に貯蔵する(ST5)。
8のフローチャートに示す。先ず、図1の計測対象をス
テージ2にセットすると(ST1)、計測シーケンスに
従ってシステム制御ユニット8の制御信号を受けて投光
撮像制御ユニット6が投光装置3の画面にメモリ10に
メモリされているプログラムに従って、天頂角計測用カ
ラーパタンを表示する(ST2)。表示されたパタンが
発する光束を受けた対象を撮像装置4のカラーカメラが
撮像する(ST3)。そこで、撮像装置4はこれを画像
信号に変換して画像入力処理演算ユニット7へ出力す
る。画像処理演算ユニット7はこの画像信号に基準化演
算等の基本的演算を施した後、内蔵するフレームメモリ
(図示せず)にメモリする。CPU9はこのデータから
各面素の天頂角成分ベクトルを算出して(ST4)、デ
ータをメモリ10に貯蔵する(ST5)。
【0030】次に、計測シーケンスに従ってシステム制
御ユニット8の制御信号を受けて投光撮像制御ユニット
6が投光装置3の画面にメモリ10にメモリされている
プログラムに従って方位角計測用カラーパタンを表示す
る(ST6)。表示されたパタンの光束を受けた対象を
撮像装置4のカラーカメラが撮像する(ST7)。そこ
で、撮像装置4はこれを画像信号に変換して画像入力処
理演算ユニット7へ出力する。画像処理演算ユニット7
は、この画像信号に基準化演算等の基本的演算を施した
後、内蔵するフレームメモリにメモリする。CPU9は
このデータから各面素の方位角成分ベクトルを算出して
(ST8)、データをメモリ10に貯蔵する(ST
9)。次に以上によりメモリ10に貯蔵された天頂角・
方位角両成分データを用いてCPU9が三次元計測演算
により対象各面素の法線ベクトルを算出し(ST1
0)、計測結果を表示ユニット13に表示するか、ある
いは出力ユニット12から出力して計測を完了する。次
に、本発明を具体化した第2実施例を説明する。第2実
施例の構成図は、第1実施例と同様であり、図1の通り
である。しかし、第2実施例は時分割投光法に依拠して
おり、カラー分割投光法の第1実施例とは異なる。即
ち、投光ユニット3は位相Ti(i=1、2、…、m)
では天頂角検出用の単色パタン画像を表示し、次に位相
Tj(j=1、2、…、n)では方位角検出用の単色パ
タン画像を表示すること、及び撮像装置4がそれぞれの
位相において、各パタン表示に対応してm回及びn回の
撮像を行う点で第1実施例と異なっている。そのため
に、撮像装置4はモノクロカメラでも良い(勿論、第1
実施例のカラーカメラであっても良い)。
御ユニット8の制御信号を受けて投光撮像制御ユニット
6が投光装置3の画面にメモリ10にメモリされている
プログラムに従って方位角計測用カラーパタンを表示す
る(ST6)。表示されたパタンの光束を受けた対象を
撮像装置4のカラーカメラが撮像する(ST7)。そこ
で、撮像装置4はこれを画像信号に変換して画像入力処
理演算ユニット7へ出力する。画像処理演算ユニット7
は、この画像信号に基準化演算等の基本的演算を施した
後、内蔵するフレームメモリにメモリする。CPU9は
このデータから各面素の方位角成分ベクトルを算出して
(ST8)、データをメモリ10に貯蔵する(ST
9)。次に以上によりメモリ10に貯蔵された天頂角・
方位角両成分データを用いてCPU9が三次元計測演算
により対象各面素の法線ベクトルを算出し(ST1
0)、計測結果を表示ユニット13に表示するか、ある
いは出力ユニット12から出力して計測を完了する。次
に、本発明を具体化した第2実施例を説明する。第2実
施例の構成図は、第1実施例と同様であり、図1の通り
である。しかし、第2実施例は時分割投光法に依拠して
おり、カラー分割投光法の第1実施例とは異なる。即
ち、投光ユニット3は位相Ti(i=1、2、…、m)
では天頂角検出用の単色パタン画像を表示し、次に位相
Tj(j=1、2、…、n)では方位角検出用の単色パ
タン画像を表示すること、及び撮像装置4がそれぞれの
位相において、各パタン表示に対応してm回及びn回の
撮像を行う点で第1実施例と異なっている。そのため
に、撮像装置4はモノクロカメラでも良い(勿論、第1
実施例のカラーカメラであっても良い)。
【0031】先ず、投光ユニット3の画面上に図9の天
頂角用単色パタンを表示し、これを位相Ti(i=1、
2、…、m:図9ではm=6)において順次投光する
と、各パタンはそれぞれの入射天頂角を以って対象に投
射され、対象表面からの正反射光成分はその面素の法線
ベクトルの天頂角成分に従って正反射し、撮像装置4が
天頂角ベクトルに応じた画像としてTiのタイミングで
計m回撮像し、そのm枚の画像データは画像入力処理演
算ユニット7が内蔵するメモリフレームに取込まれ、画
素入力レベルの基準化等の基本的演算を施された後、C
PU9によって各位相画像データ宛逆問題解として対象
各面素毎の天頂角ベクトルが算出される。この各面素毎
の天頂角データはメモリ10に貯蔵される。
頂角用単色パタンを表示し、これを位相Ti(i=1、
2、…、m:図9ではm=6)において順次投光する
と、各パタンはそれぞれの入射天頂角を以って対象に投
射され、対象表面からの正反射光成分はその面素の法線
ベクトルの天頂角成分に従って正反射し、撮像装置4が
天頂角ベクトルに応じた画像としてTiのタイミングで
計m回撮像し、そのm枚の画像データは画像入力処理演
算ユニット7が内蔵するメモリフレームに取込まれ、画
素入力レベルの基準化等の基本的演算を施された後、C
PU9によって各位相画像データ宛逆問題解として対象
各面素毎の天頂角ベクトルが算出される。この各面素毎
の天頂角データはメモリ10に貯蔵される。
【0032】次に、投光ユニット3の画面上に図10の
方位角用単色パタンを表示し、これを位相Tj(j=
1、2、…n:図10ではn=6)おいて順次投光する
と各パタンはそれぞれの入射方位角を以って対象に投射
され、対象表面からの正反射光成分は、その面素の法線
ベクトルの方位角成分に従って正反射し、撮像装置4が
表面法線ベクトルを構成する方位角ベクトルに応じた画
像としてTjのタイミングで計n回撮像し、そのn枚の
画像データは画像入力処理演算ユニット7が内蔵するメ
モリフレームに取込まれ、画素入力レベルの基準化等の
基本的演算を施された後、CPU9によって各位相画像
データ宛逆問題解として対象各面素毎の方位角ベクトル
が算出される。この各面素毎の方位角データはメモリ1
0に貯蔵される。
方位角用単色パタンを表示し、これを位相Tj(j=
1、2、…n:図10ではn=6)おいて順次投光する
と各パタンはそれぞれの入射方位角を以って対象に投射
され、対象表面からの正反射光成分は、その面素の法線
ベクトルの方位角成分に従って正反射し、撮像装置4が
表面法線ベクトルを構成する方位角ベクトルに応じた画
像としてTjのタイミングで計n回撮像し、そのn枚の
画像データは画像入力処理演算ユニット7が内蔵するメ
モリフレームに取込まれ、画素入力レベルの基準化等の
基本的演算を施された後、CPU9によって各位相画像
データ宛逆問題解として対象各面素毎の方位角ベクトル
が算出される。この各面素毎の方位角データはメモリ1
0に貯蔵される。
【0033】最後に、このようにしてメモリされた各面
素の表面天頂角ベクトルと表面方位角ベクトルのデータ
は併せてCPU9において各面素の法線ベクトル算出に
使用され、計測対象1の形状計測が完結する。計測結果
データは表示ユニット13に表示するか、あるいは出力
ユニット12から出力する。この第2実施例は撮像装置
4をモノクロカメラに置き換え出来るため、コストの低
減効果を有するばかりでなく、前述の点光源を用いたN
ayar等の方法が(m×n)回の点灯による(m×
n)枚の画像データのメモリを要したのに対して、(m
+n)回のパタン投光による(m+n)枚の画像データ
のメモリで全く同精度の形状計測が可能であり、大幅な
計測時間の短縮とコストの削減が実現される。
素の表面天頂角ベクトルと表面方位角ベクトルのデータ
は併せてCPU9において各面素の法線ベクトル算出に
使用され、計測対象1の形状計測が完結する。計測結果
データは表示ユニット13に表示するか、あるいは出力
ユニット12から出力する。この第2実施例は撮像装置
4をモノクロカメラに置き換え出来るため、コストの低
減効果を有するばかりでなく、前述の点光源を用いたN
ayar等の方法が(m×n)回の点灯による(m×
n)枚の画像データのメモリを要したのに対して、(m
+n)回のパタン投光による(m+n)枚の画像データ
のメモリで全く同精度の形状計測が可能であり、大幅な
計測時間の短縮とコストの削減が実現される。
【0034】第2実施例による計測全体の動作順序を図
11のフローチャートに示す。先ず、図1の計測対象1
をステージ2にセットすると(ST1)、計測シーケン
スに従ってシステム制御ユニット8の制御信号を受けて
投光撮像制御ユニット6が投光装置3の画面にメモリ1
0にメモリされているプログラムに従って、天頂角計測
用単色パタンT1を表示する(ST2)。表示されたパ
タンの光束を受けた対象を撮像装置4が撮像する(ST
3)。そこで、撮像装置4はこれを画像データに変換し
て画像入力処理演算ユニット7へ出力する。画像処理演
算ユニット7はこの画像データに基準化演算等の基本的
演算を施した後、内蔵するフレームメモリ(図示せず)
にメモリする。
11のフローチャートに示す。先ず、図1の計測対象1
をステージ2にセットすると(ST1)、計測シーケン
スに従ってシステム制御ユニット8の制御信号を受けて
投光撮像制御ユニット6が投光装置3の画面にメモリ1
0にメモリされているプログラムに従って、天頂角計測
用単色パタンT1を表示する(ST2)。表示されたパ
タンの光束を受けた対象を撮像装置4が撮像する(ST
3)。そこで、撮像装置4はこれを画像データに変換し
て画像入力処理演算ユニット7へ出力する。画像処理演
算ユニット7はこの画像データに基準化演算等の基本的
演算を施した後、内蔵するフレームメモリ(図示せず)
にメモリする。
【0035】以下、T2乃至Tmの各パタンを順次投光
装置に表示し(ST2)、都度対象を撮像装置4が撮像
し(ST3)、画像データに変換して画像入力処理演算
ユニット7へ出力する。画像処理演算ユニット7は、こ
の画像データに基準化演算等の基本的演算を施した後、
内蔵するフレームメモリにメモリする。フレームメモリ
にm枚の画像データがメモリされたら、CPU9はこの
データから各面素の天頂角成分ベクトルを算出して(S
T4)、データをメモリ10に貯蔵する(ST5)。
装置に表示し(ST2)、都度対象を撮像装置4が撮像
し(ST3)、画像データに変換して画像入力処理演算
ユニット7へ出力する。画像処理演算ユニット7は、こ
の画像データに基準化演算等の基本的演算を施した後、
内蔵するフレームメモリにメモリする。フレームメモリ
にm枚の画像データがメモリされたら、CPU9はこの
データから各面素の天頂角成分ベクトルを算出して(S
T4)、データをメモリ10に貯蔵する(ST5)。
【0036】次に計測シーケンスに従って、システム制
御ユニット8の制御信号を受けて投光撮像制御ユニット
6が投光装置3の画像にメモリ10にメモリされている
プログラムに従って方位角計測用単色パタンを表示する
(ST6)。表示されたパタンの光束を受けた対象を撮
像を装置4が撮像する(ST7)。そこで、撮像装置4
はこれを画像データに変換して画像入力処理演算ユニッ
ト7へ出力する。画像処理演算ユニット7はこの画像デ
ータに基準化演算等の基本的演算を施した後、内蔵する
フレームメモリにメモリする。以下、T2乃至Tnの各
パタンを順次投光装置に表示し(ST6)、都度対象を
撮像装置4が撮像し(ST7)、画像データに変換して
画像入力処理演算ユニット7へ出力する。画像処理演算
ユニット7は、この画像データに基準化演算等の基本的
演算を施した後、内蔵するフレームメモリにメモリす
る。
御ユニット8の制御信号を受けて投光撮像制御ユニット
6が投光装置3の画像にメモリ10にメモリされている
プログラムに従って方位角計測用単色パタンを表示する
(ST6)。表示されたパタンの光束を受けた対象を撮
像を装置4が撮像する(ST7)。そこで、撮像装置4
はこれを画像データに変換して画像入力処理演算ユニッ
ト7へ出力する。画像処理演算ユニット7はこの画像デ
ータに基準化演算等の基本的演算を施した後、内蔵する
フレームメモリにメモリする。以下、T2乃至Tnの各
パタンを順次投光装置に表示し(ST6)、都度対象を
撮像装置4が撮像し(ST7)、画像データに変換して
画像入力処理演算ユニット7へ出力する。画像処理演算
ユニット7は、この画像データに基準化演算等の基本的
演算を施した後、内蔵するフレームメモリにメモリす
る。
【0037】フレームメモリにn枚の画像データがメモ
リされたら、CPU9はこのデータから各面素の方位角
成分ベクトルを算出して(ST8)、データをメモリ1
0に貯蔵する(ST9)。次に以上によりメモリ10に
貯蔵された両成分データを用いてCPU9が三次元計測
演算により、対象各面素の法線ベクトルを算出し(ST
10)、計測結果を表示ユニット13に表示するか、あ
るいは出力ユニット12から出力して計測を完了する。
リされたら、CPU9はこのデータから各面素の方位角
成分ベクトルを算出して(ST8)、データをメモリ1
0に貯蔵する(ST9)。次に以上によりメモリ10に
貯蔵された両成分データを用いてCPU9が三次元計測
演算により、対象各面素の法線ベクトルを算出し(ST
10)、計測結果を表示ユニット13に表示するか、あ
るいは出力ユニット12から出力して計測を完了する。
【0038】次に、本発明を具体化した形状検査装置を
第3実施例として説明する。その装置構成を図12に示
す。第3実施例は、X−Y−Z座標軸の原点に対象1を
置き、これに対して4台の投光装置3a、3b、3c、
3d(図12中投光装置3c及び3dは重畳)をX−Y
直交軸真上の同一高さ(Z軸)の空間座標位置、即ちZ
軸対称位置に設置し、それぞれの光束を対象に投射し、
真上への反射光を撮像する撮像装置4を備えた検査装置
である。即ち、第1実施例の投光装置3を各直交軸より
浮上した位置に1台宛配置したものである。検査対象1
をどの方向から計測・検査するかの指示は予め教示され
ているので、その教示内容に従って投光装置3a、3
b、3c、3dの中のいずれか1台が第1実施例と同様
に図2の天頂角計測用カラーパタンと方位角計測用カラ
ーパタンを順次表示して、撮像装置4が都度撮像し、計
測された三次元形状データを元に良否判定プログラムが
対象品質良否判定を下す。また、必要により複数台の投
光装置3を複合的に機能させて自動検査を実行すること
も出来る。つまり、複数台の投光装置3のそれぞれの計
測位相を教示によって定めておき、良否判定プログラム
がそれらの計測データを総合して判定を下すようにする
ことも出来る。
第3実施例として説明する。その装置構成を図12に示
す。第3実施例は、X−Y−Z座標軸の原点に対象1を
置き、これに対して4台の投光装置3a、3b、3c、
3d(図12中投光装置3c及び3dは重畳)をX−Y
直交軸真上の同一高さ(Z軸)の空間座標位置、即ちZ
軸対称位置に設置し、それぞれの光束を対象に投射し、
真上への反射光を撮像する撮像装置4を備えた検査装置
である。即ち、第1実施例の投光装置3を各直交軸より
浮上した位置に1台宛配置したものである。検査対象1
をどの方向から計測・検査するかの指示は予め教示され
ているので、その教示内容に従って投光装置3a、3
b、3c、3dの中のいずれか1台が第1実施例と同様
に図2の天頂角計測用カラーパタンと方位角計測用カラ
ーパタンを順次表示して、撮像装置4が都度撮像し、計
測された三次元形状データを元に良否判定プログラムが
対象品質良否判定を下す。また、必要により複数台の投
光装置3を複合的に機能させて自動検査を実行すること
も出来る。つまり、複数台の投光装置3のそれぞれの計
測位相を教示によって定めておき、良否判定プログラム
がそれらの計測データを総合して判定を下すようにする
ことも出来る。
【0039】次に、第3実施例の動作を図13のフロー
チャートを用いて説明する。先ず、図12の検査対象1
をX−Yステージ2にセットすると(ST1)、装置は
教示された計測シーケンスに従ったシステム制御ユニッ
ト8の制御信号を受けて検査対象1を自動検査位置にも
たらす(ST2)。投光撮像制御ユニット6はシステム
制御ユニット8の制御信号を受けて教示データにより選
択された投光装置3の中の1台の画面にメモリ10にメ
モリされているプログラムに従って、天頂角計測用カラ
ーパタンを表示する(ST3)。表示されたパタンの光
束を受けた対象を測定系空間z軸上の撮像装置4のカラ
ーカメラが撮像する(ST3)。そこで、撮像装置4は
これを画像信号に変換して画像入力処理演算ユニット7
へ出力する。画像処理演算ユニット7はこの画像信号に
基準化演算等の基本的演算を施した後、内蔵するフレー
ムメモリ(図示せず)にメモリする。CPU9は、この
データから各面素の天頂角成分ベクトルを算出して、デ
ータをメモリ10に貯蔵する(ST4)。
チャートを用いて説明する。先ず、図12の検査対象1
をX−Yステージ2にセットすると(ST1)、装置は
教示された計測シーケンスに従ったシステム制御ユニッ
ト8の制御信号を受けて検査対象1を自動検査位置にも
たらす(ST2)。投光撮像制御ユニット6はシステム
制御ユニット8の制御信号を受けて教示データにより選
択された投光装置3の中の1台の画面にメモリ10にメ
モリされているプログラムに従って、天頂角計測用カラ
ーパタンを表示する(ST3)。表示されたパタンの光
束を受けた対象を測定系空間z軸上の撮像装置4のカラ
ーカメラが撮像する(ST3)。そこで、撮像装置4は
これを画像信号に変換して画像入力処理演算ユニット7
へ出力する。画像処理演算ユニット7はこの画像信号に
基準化演算等の基本的演算を施した後、内蔵するフレー
ムメモリ(図示せず)にメモリする。CPU9は、この
データから各面素の天頂角成分ベクトルを算出して、デ
ータをメモリ10に貯蔵する(ST4)。
【0040】次に教示された検査シーケンスに従ってシ
ステム制御ユニット8の制御信号を受けて投光撮像制御
ユニット6が投光装置3の画面にメモリ10にメモリさ
れているプログラムに従って方位角計測用カラーパタン
を表示する(ST5)。表示されたパタンの光束を受け
反射する対象を撮像装置4のカラーカメラが撮像する。
そこで、撮像装置4はこれを画像信号に変換して画像入
力処理演算ユニット7へ出力する。画像処理演算ユニッ
ト7はこの画像信号に基準化演算等の基本的演算を施し
た後、フレームメモリにメモリする。CPU9はこのデ
ータから各面素の方位角成分ベクトルを算出して、デー
タをメモリ10に貯蔵する(ST6)。次に、以上によ
りメモリ10に貯蔵された両成分データを用いてCPU
9が三次元計測演算により、対象各面素の法線ベクトル
を算出し(ST7)、算出された三次元データを用いて
判定アルゴリズムが検査対象の品質良否を判定する(S
T8)。検査結果は必要によりメモリ10に貯蔵する
か、表示ユニット13に表示するか、あるいは出力ユニ
ット12から出力して(ST9)、検査対象を排出し
(ST10)、検査を完了する。
ステム制御ユニット8の制御信号を受けて投光撮像制御
ユニット6が投光装置3の画面にメモリ10にメモリさ
れているプログラムに従って方位角計測用カラーパタン
を表示する(ST5)。表示されたパタンの光束を受け
反射する対象を撮像装置4のカラーカメラが撮像する。
そこで、撮像装置4はこれを画像信号に変換して画像入
力処理演算ユニット7へ出力する。画像処理演算ユニッ
ト7はこの画像信号に基準化演算等の基本的演算を施し
た後、フレームメモリにメモリする。CPU9はこのデ
ータから各面素の方位角成分ベクトルを算出して、デー
タをメモリ10に貯蔵する(ST6)。次に、以上によ
りメモリ10に貯蔵された両成分データを用いてCPU
9が三次元計測演算により、対象各面素の法線ベクトル
を算出し(ST7)、算出された三次元データを用いて
判定アルゴリズムが検査対象の品質良否を判定する(S
T8)。検査結果は必要によりメモリ10に貯蔵する
か、表示ユニット13に表示するか、あるいは出力ユニ
ット12から出力して(ST9)、検査対象を排出し
(ST10)、検査を完了する。
【0041】図12のハードウェア構成を有する第3実
施例は教示するデータ、即ちソフトウェアの変更だけで
更に種々の内容の検査を行うことが出来る。その例を上
げると下記のようである。 第1例:対象表面天頂角ベクトル検査装置その1 図12の投光装置3は、4台とも図5の天頂角センシン
グ用カラーパタンのみを表示して、同時的に投光・撮像
し、計測及び検査を行う。はんだ形状のように天頂角方
向成分が特に品質に第一義の意味を持つ対象には有効な
検査方法であり、副次的な条件の結果に過ぎない方位角
成分計測を省略出来るので、センシング時間と演算時間
の節約に通じる。
施例は教示するデータ、即ちソフトウェアの変更だけで
更に種々の内容の検査を行うことが出来る。その例を上
げると下記のようである。 第1例:対象表面天頂角ベクトル検査装置その1 図12の投光装置3は、4台とも図5の天頂角センシン
グ用カラーパタンのみを表示して、同時的に投光・撮像
し、計測及び検査を行う。はんだ形状のように天頂角方
向成分が特に品質に第一義の意味を持つ対象には有効な
検査方法であり、副次的な条件の結果に過ぎない方位角
成分計測を省略出来るので、センシング時間と演算時間
の節約に通じる。
【0042】第2例:対象表面天頂角ベクトル検査装置
その2 第1例の投光装置(図12:3)の相対向する3aと3
b、3cと3dを組合わせて、それぞれ順次点灯(画像
表示)するといずれも天頂角センシングパタンを表示し
ているが、方位角成分の要素が加わるので、第1例に比
して新たな性能が出現する。例えば3aと3bの組み合
わせでは、3aに天頂角センシングパタンを表示し、一
方3bには全面を白色表示として同時点灯すると、凹凸
面の識別が可能となる。凹面では対象表面の右側部にカ
ラーパタン、左側部に白色面が現れ、また、凸面ではそ
の左右の図柄が逆になる。凹凸面の区別は第1例では不
可能であった。
その2 第1例の投光装置(図12:3)の相対向する3aと3
b、3cと3dを組合わせて、それぞれ順次点灯(画像
表示)するといずれも天頂角センシングパタンを表示し
ているが、方位角成分の要素が加わるので、第1例に比
して新たな性能が出現する。例えば3aと3bの組み合
わせでは、3aに天頂角センシングパタンを表示し、一
方3bには全面を白色表示として同時点灯すると、凹凸
面の識別が可能となる。凹面では対象表面の右側部にカ
ラーパタン、左側部に白色面が現れ、また、凸面ではそ
の左右の図柄が逆になる。凹凸面の区別は第1例では不
可能であった。
【0043】第3例:方位角ベクトル検査装置 第1例とは逆に、図12の投光装置3は4台とも図6の
方位角センシング用カラーパタンのみを表示して投光・
撮像し、計測及び検査を行う。検査対象の向きのみを検
査するケースで天頂角成分計測を省略出来るので、セン
シング時間と演算時間の節約に通じる。
方位角センシング用カラーパタンのみを表示して投光・
撮像し、計測及び検査を行う。検査対象の向きのみを検
査するケースで天頂角成分計測を省略出来るので、セン
シング時間と演算時間の節約に通じる。
【0044】第3実施例は、以上のようなソフトウェア
変更で様々な検査を実行出来るが、また本実施例と同様
な機能は異なるハードウェアによっても実現される。例
えば、図12の投光装置3が3aのみを備え、これを投
光装置回転機構(図示せず)により、第3実施例の説明
で述べた投光装置3a、3b、3c、3dの画像表示・
撮像タイミングにそれぞれの投光位置に移動させること
により、第3実施例と同じ検査目的が達成される。
変更で様々な検査を実行出来るが、また本実施例と同様
な機能は異なるハードウェアによっても実現される。例
えば、図12の投光装置3が3aのみを備え、これを投
光装置回転機構(図示せず)により、第3実施例の説明
で述べた投光装置3a、3b、3c、3dの画像表示・
撮像タイミングにそれぞれの投光位置に移動させること
により、第3実施例と同じ検査目的が達成される。
【0045】次に、本発明の第4実施例である形状検査
装置を説明する。第4実施例の構成は図12の通りであ
り、第3実施例と同様であるが、第3実施例と異なる要
素は、検査対象の自動検査を行った後、不良判定された
箇所のみを画像表示して目視再検査を行う点であり、目
視再検査時には白色照明を行うことである。本例では、
図12に示された投光装置3a、3b、3c、3dの各
画面上に白色エリアを表示し、これを白色照明光源とな
している。しかし、投光装置3以外に別途白色光源を備
え、目視再検査時のみこれを点灯して用いても、一向に
差支えはない。
装置を説明する。第4実施例の構成は図12の通りであ
り、第3実施例と同様であるが、第3実施例と異なる要
素は、検査対象の自動検査を行った後、不良判定された
箇所のみを画像表示して目視再検査を行う点であり、目
視再検査時には白色照明を行うことである。本例では、
図12に示された投光装置3a、3b、3c、3dの各
画面上に白色エリアを表示し、これを白色照明光源とな
している。しかし、投光装置3以外に別途白色光源を備
え、目視再検査時のみこれを点灯して用いても、一向に
差支えはない。
【0046】更に、目視再検時の照明として一般的な室
内照明用白色灯の光束が品質の観測判別に充分な対象画
像を提供しうる場合は、その光束を利用しても支障がな
いこと言うまでもない。ここで、目視観察時白色照明と
する理由は、対象が本来保有する色彩を飽くまでも自然
色で観測するためである。自動検査位相で用いたカラー
光束では対象の持つ本来の色合いが失われ、目視判定を
著しく困難にするばかりか、眼精疲労の原因となる。特
に非ランバート面には画像として全く非日常的な色付け
がなされる。また、投光装置3を光源に利用するメリッ
トはその画面上に表示する白色領域の形や面積や位置を
カラー表示指令プログラムで自由に決められるので、目
視観察に最適な照明が得られることにある。特に鏡面反
射性を持つ非ランバート面は正反射方向を精確に捕捉し
なければ単なる暗領域となり、目視観察が不可能となる
ので、光源のジオメトリ上の条件を自由に設定出来るこ
とは大きな有利である。以上述べた目視再検査位相での
照明方法以外の自動検査位相での投光・撮像方法は、第
3実施例と同様であり、第3実施例の既出説明の通りで
ある。
内照明用白色灯の光束が品質の観測判別に充分な対象画
像を提供しうる場合は、その光束を利用しても支障がな
いこと言うまでもない。ここで、目視観察時白色照明と
する理由は、対象が本来保有する色彩を飽くまでも自然
色で観測するためである。自動検査位相で用いたカラー
光束では対象の持つ本来の色合いが失われ、目視判定を
著しく困難にするばかりか、眼精疲労の原因となる。特
に非ランバート面には画像として全く非日常的な色付け
がなされる。また、投光装置3を光源に利用するメリッ
トはその画面上に表示する白色領域の形や面積や位置を
カラー表示指令プログラムで自由に決められるので、目
視観察に最適な照明が得られることにある。特に鏡面反
射性を持つ非ランバート面は正反射方向を精確に捕捉し
なければ単なる暗領域となり、目視観察が不可能となる
ので、光源のジオメトリ上の条件を自由に設定出来るこ
とは大きな有利である。以上述べた目視再検査位相での
照明方法以外の自動検査位相での投光・撮像方法は、第
3実施例と同様であり、第3実施例の既出説明の通りで
ある。
【0047】次に、第4実施例の動作を図14及び図1
5に示すフローチャートを用いて説明する。図14は三
次元形状計測及び自動検査の基本原理が図13で説明し
た第3実施例のものと全く同様であるので、その点につ
いては説明を省略するが、次の点のみ第3実施例と異な
るので説明を加える。 (1)第4実施例は、1検査対象の中に複数の検査領域
を包含した場合の検査フローを例示したものである。例
えば、プリント配線板上に搭載された電子部品のはんだ
付け検査の場合がこれに該当する。そこで、1標本の中
で順次全検査領域を自動的に走査し(A→Bルートサイ
クル)領域毎に良否判定を行うようにしている。これら
のシーケンス制御はシステム制御ユニット8からの制御
信号によって行われる。
5に示すフローチャートを用いて説明する。図14は三
次元形状計測及び自動検査の基本原理が図13で説明し
た第3実施例のものと全く同様であるので、その点につ
いては説明を省略するが、次の点のみ第3実施例と異な
るので説明を加える。 (1)第4実施例は、1検査対象の中に複数の検査領域
を包含した場合の検査フローを例示したものである。例
えば、プリント配線板上に搭載された電子部品のはんだ
付け検査の場合がこれに該当する。そこで、1標本の中
で順次全検査領域を自動的に走査し(A→Bルートサイ
クル)領域毎に良否判定を行うようにしている。これら
のシーケンス制御はシステム制御ユニット8からの制御
信号によって行われる。
【0048】(2)それらの検査領域の中で品質不良と
自動判定された場合には、その位置データをメモリする
(ST8)。 (3)1標本の全検査領域の自動判定が終了したら自動
検査位相が終了したので、標本は再検査の位置にセット
され、目視再検査位相が始まる(図15、ST10)。
自動判定された場合には、その位置データをメモリする
(ST8)。 (3)1標本の全検査領域の自動判定が終了したら自動
検査位相が終了したので、標本は再検査の位置にセット
され、目視再検査位相が始まる(図15、ST10)。
【0049】図15の目視再検査ステップにおいては、
再検査シーケンスは図12のメモリ10にメモリされて
いる不良箇所位置データに従ってシステム制御ユニット
8の制御信号により、位置決め装置(図示せず)がX−
Yステージ2を移動させて、上述のように検査対象1の
再検査領域を再検査位置にもたらす(ST10)。そこ
で、ST10において、投光装置3が白色面を表示して
検査対象1に対して白色光束を照射すると、撮像装置4
のカラーカメラが再検査領域を撮像し(ST11)、そ
の画像を表示ユニット13のスクリーン上に表示する
(ST12)。そこでオペレータは、この画像を観測す
ることによって目視検査を行い、良否判定を下し(ST
13)、判定結果を入力ユニット11に入力する(ST
14)。結果の入力が終わると、ST15がNOであれ
ば再検査シーケンスはメモリ10にメモリされている不
良箇所位置データに従って(ST16)制御ユニット8
の制御信号により位置決め装置(図示せず)が再びX−
Yステージ2を移動させて検査対象1を次の再検査位置
にもたらし、以上述べた動作が反復される(C→Dルー
トサイクル)。
再検査シーケンスは図12のメモリ10にメモリされて
いる不良箇所位置データに従ってシステム制御ユニット
8の制御信号により、位置決め装置(図示せず)がX−
Yステージ2を移動させて、上述のように検査対象1の
再検査領域を再検査位置にもたらす(ST10)。そこ
で、ST10において、投光装置3が白色面を表示して
検査対象1に対して白色光束を照射すると、撮像装置4
のカラーカメラが再検査領域を撮像し(ST11)、そ
の画像を表示ユニット13のスクリーン上に表示する
(ST12)。そこでオペレータは、この画像を観測す
ることによって目視検査を行い、良否判定を下し(ST
13)、判定結果を入力ユニット11に入力する(ST
14)。結果の入力が終わると、ST15がNOであれ
ば再検査シーケンスはメモリ10にメモリされている不
良箇所位置データに従って(ST16)制御ユニット8
の制御信号により位置決め装置(図示せず)が再びX−
Yステージ2を移動させて検査対象1を次の再検査位置
にもたらし、以上述べた動作が反復される(C→Dルー
トサイクル)。
【0050】このようにして、全ての再検査位置の再検
査が完了したら、ST15がYESとなり検査対象1が
X−Yステージ2から排出され(ST17)、全検査工
程が完了する。以上述べたように、本実施例は良否判定
を自動的に行い、不良の領域だけを画像として表示する
ので、オペレータは極く少数の目視検査を行えば良いこ
とになり、大幅な省力化が実現されるばかりでなく、稍
緩かな自動検査判定基準を設定することによって、不良
箇所の不検出リスクを回避し、少数の良箇所過検出を許
容して不良判定し、不良判定のみの目視再検査を表示画
像によって行うのである。
査が完了したら、ST15がYESとなり検査対象1が
X−Yステージ2から排出され(ST17)、全検査工
程が完了する。以上述べたように、本実施例は良否判定
を自動的に行い、不良の領域だけを画像として表示する
ので、オペレータは極く少数の目視検査を行えば良いこ
とになり、大幅な省力化が実現されるばかりでなく、稍
緩かな自動検査判定基準を設定することによって、不良
箇所の不検出リスクを回避し、少数の良箇所過検出を許
容して不良判定し、不良判定のみの目視再検査を表示画
像によって行うのである。
【0051】次に、本発明の第5実施例である画像表示
検査装置について説明する。第5実施例の構成を図19
に、また動作のフローチャートを図20にそれぞれ示
す。本実施例は、検査対象の自動検査を行わず検査箇所
を撮像し、画像表示してオペレータが目視することによ
り良否判定する検査装置であり、目視検査のために対象
の形状や表面特性に対応して最適の白色照明を行う。こ
こで目視観測時白色照明とする理由は、既に第4実施例
の再検査ステップの説明で述べた通りである。特に、鏡
面反射性を持つ非ランバート面は正反射方向を正確に捕
捉しなければ、単なる暗領域となり目視観察が不可能に
なる。
検査装置について説明する。第5実施例の構成を図19
に、また動作のフローチャートを図20にそれぞれ示
す。本実施例は、検査対象の自動検査を行わず検査箇所
を撮像し、画像表示してオペレータが目視することによ
り良否判定する検査装置であり、目視検査のために対象
の形状や表面特性に対応して最適の白色照明を行う。こ
こで目視観測時白色照明とする理由は、既に第4実施例
の再検査ステップの説明で述べた通りである。特に、鏡
面反射性を持つ非ランバート面は正反射方向を正確に捕
捉しなければ、単なる暗領域となり目視観察が不可能に
なる。
【0052】本実施例は形状不明かつ自由曲面体である
非ランバート面検査対象に最適の白色照明を得るため
に、第2実施例の時分割角度照明の原理を応用した照明
を行い、照明過多も過少もない、最良の対象画像が得ら
れるようにしている。まず、搬入装置(図示せず)によ
り、図19の検査対象1が搬入され、X−Yステージ2
にセットされると(ST1)、検査シーケンスに従って
システム制御ユニット7の制御信号により位置決め装置
(図示せず)が、X−Yステージ2を移動させて検査対
象1の検査領域を検査位置にもたらす(ST2)。
非ランバート面検査対象に最適の白色照明を得るため
に、第2実施例の時分割角度照明の原理を応用した照明
を行い、照明過多も過少もない、最良の対象画像が得ら
れるようにしている。まず、搬入装置(図示せず)によ
り、図19の検査対象1が搬入され、X−Yステージ2
にセットされると(ST1)、検査シーケンスに従って
システム制御ユニット7の制御信号により位置決め装置
(図示せず)が、X−Yステージ2を移動させて検査対
象1の検査領域を検査位置にもたらす(ST2)。
【0053】投光装置3は実施例3及び4で説明した図
12の投光装置3と同様な構造と機能を有している。投
光撮像制御ユニット6は教示された検査データに従って
検査方位角に該当する投光装置3a乃至3dのいずれか
に検査用画像を表示せしめる(ST3)。この時、表示
する画像はまず天頂角センシング用画像であって、例え
ば図9に示す第2実施例の表示画像Tiを各0.5〜2
秒宛T1〜T6順に表示しては消去して行く。撮像され
た(ST4)画像は、順次表示装置12の画面上に表示
される(ST5)ので、この画像をオペレータが目視観
測して判定可能であれば(ST6)品質の良否を判定し
(ST10)、判定結果を入力装置10により入力す
る。
12の投光装置3と同様な構造と機能を有している。投
光撮像制御ユニット6は教示された検査データに従って
検査方位角に該当する投光装置3a乃至3dのいずれか
に検査用画像を表示せしめる(ST3)。この時、表示
する画像はまず天頂角センシング用画像であって、例え
ば図9に示す第2実施例の表示画像Tiを各0.5〜2
秒宛T1〜T6順に表示しては消去して行く。撮像され
た(ST4)画像は、順次表示装置12の画面上に表示
される(ST5)ので、この画像をオペレータが目視観
測して判定可能であれば(ST6)品質の良否を判定し
(ST10)、判定結果を入力装置10により入力す
る。
【0054】ここで、対象に対して入射天頂角の異なる
白色画像を順次表示する理由は、前述したように対象が
未知形状の自由曲面体であるためで、検査前にはどの天
頂角照明が最適か不明だからである。オペレータは最適
の画像が得られたTi照明で入力ユニット10からの指
令入力により自動的角度変更を一時中断し、良否判定を
つけられるまで画像を十分に視察することも出来る。も
し、ST6がNOであり、天頂角成分画像では判定不能
であれば、検査シーケンスは次に方位角センシングのス
テップに入り(ST7〜9)、例えば図10に示す第2
実施例の表示画像Tjを各0.5〜2秒宛T1〜T6順
に表示しては消去して行く。撮像された(ST8)画像
は順次表示装置12の画面上に表示される(ST9)の
で、オペレータが良否判定をして(ST10)、次の検
査位置に対象を移動する(A−Bフローサイクル)。全
検査領域の検査が完了したら(ST11)検体を排出し
て(ST12)、検査を完了する。このフローにおいて
必要があれば、判定結果データをメモリ9にメモリした
り、または出力装置11によりプリント・アウトした
り、他のコンピュータ等に送信したりすることも出来
る。
白色画像を順次表示する理由は、前述したように対象が
未知形状の自由曲面体であるためで、検査前にはどの天
頂角照明が最適か不明だからである。オペレータは最適
の画像が得られたTi照明で入力ユニット10からの指
令入力により自動的角度変更を一時中断し、良否判定を
つけられるまで画像を十分に視察することも出来る。も
し、ST6がNOであり、天頂角成分画像では判定不能
であれば、検査シーケンスは次に方位角センシングのス
テップに入り(ST7〜9)、例えば図10に示す第2
実施例の表示画像Tjを各0.5〜2秒宛T1〜T6順
に表示しては消去して行く。撮像された(ST8)画像
は順次表示装置12の画面上に表示される(ST9)の
で、オペレータが良否判定をして(ST10)、次の検
査位置に対象を移動する(A−Bフローサイクル)。全
検査領域の検査が完了したら(ST11)検体を排出し
て(ST12)、検査を完了する。このフローにおいて
必要があれば、判定結果データをメモリ9にメモリした
り、または出力装置11によりプリント・アウトした
り、他のコンピュータ等に送信したりすることも出来
る。
【0055】次に、第4実施例による画像目視再検査を
行いながら、最終的不良と判定された箇所を修理修正す
ることによって半製品を完成する、プリント配線板電子
部品実装製造工程を例にとり説明する。図17はプリン
ト配線板に電子部品をはんだ付けする製造ラインを示し
ている。左端のはんだ印刷機21にプリント配線板が搬
入されると、そこでスクリーン印刷によりクリームはん
だが塗布され、ベルトコンベアによりチップ装着機22
に搬入され、チップ部品が装着されて次に異形部品装着
機23に運ばれて異形部品が装着される。予定された全
ての部品の装着が終わると、リフロー炉24に搬入さ
れ、クリームはんだが熔融されてはんだ付けが完了す
る。はんだ付けプリント配線板は、次に本発明に係る第
3実施例あるいは第4実施例の自動検査装置25に送り
こまれて、電子部品の有無やはんだ付けの良否の検査が
なされる。自動検査装置25で自動検査が終わったプリ
ント配線板は、第3実施例検査装置の場合には、ベルト
コンベアにより本発明に係る第4実施例検査装置に送り
込まれると同時に、自動検査結果データも通信線を通じ
て本発明に係る検査装置に送信される。また、第4実施
例検査装置の場合には、第4実施例で説明した通りの再
検査ステップに入る。そこで、オペレータは表示画像に
ついて目視再検査を行った上、この半製品プリント配線
板の不良箇所の修理修正をその場で即実行する。図16
は検査装置が修理台16を備え、画像目視再検査がなさ
れて不良と判定された場合、検査対象1は修理台16へ
引き出され、そこで修理対象15として修理または修正
が施される。その場合の動作ステップは、図18のフロ
ーチャートの通りであり、オペレータが画像目視により
不良判定する度に(ST6)、その箇所の修理修正を実
施し(ST7)、再び対象をX−Yテーブルに戻すと、
再検査対象1は上述の通りに次の再検査位置に位置決め
され、次の再検査箇所が画像表示される。
行いながら、最終的不良と判定された箇所を修理修正す
ることによって半製品を完成する、プリント配線板電子
部品実装製造工程を例にとり説明する。図17はプリン
ト配線板に電子部品をはんだ付けする製造ラインを示し
ている。左端のはんだ印刷機21にプリント配線板が搬
入されると、そこでスクリーン印刷によりクリームはん
だが塗布され、ベルトコンベアによりチップ装着機22
に搬入され、チップ部品が装着されて次に異形部品装着
機23に運ばれて異形部品が装着される。予定された全
ての部品の装着が終わると、リフロー炉24に搬入さ
れ、クリームはんだが熔融されてはんだ付けが完了す
る。はんだ付けプリント配線板は、次に本発明に係る第
3実施例あるいは第4実施例の自動検査装置25に送り
こまれて、電子部品の有無やはんだ付けの良否の検査が
なされる。自動検査装置25で自動検査が終わったプリ
ント配線板は、第3実施例検査装置の場合には、ベルト
コンベアにより本発明に係る第4実施例検査装置に送り
込まれると同時に、自動検査結果データも通信線を通じ
て本発明に係る検査装置に送信される。また、第4実施
例検査装置の場合には、第4実施例で説明した通りの再
検査ステップに入る。そこで、オペレータは表示画像に
ついて目視再検査を行った上、この半製品プリント配線
板の不良箇所の修理修正をその場で即実行する。図16
は検査装置が修理台16を備え、画像目視再検査がなさ
れて不良と判定された場合、検査対象1は修理台16へ
引き出され、そこで修理対象15として修理または修正
が施される。その場合の動作ステップは、図18のフロ
ーチャートの通りであり、オペレータが画像目視により
不良判定する度に(ST6)、その箇所の修理修正を実
施し(ST7)、再び対象をX−Yテーブルに戻すと、
再検査対象1は上述の通りに次の再検査位置に位置決め
され、次の再検査箇所が画像表示される。
【0056】このようにして、再検査と修理修正が施さ
れて全箇所の部品実装状態が完璧となった実装プリント
配線板は製品として仕上げられたものであり、完成品と
して出荷される。検査と修理修正はこのように不即不離
の関係にあり、不可欠のステップとして製造工程に組み
込まれているのである。説明では、自動検査装置と本発
明になる検査装置とがベルトコンベアで連結されている
例を上げたが、現場の必要性から両検査装置が切り離さ
れた状態にあって、プリント配線板がストッカによって
一括して後者に運ばれ、一方自動検査結果データが通信
方式またはフロッピディスクによって入力ユニット10
に伝達されても一向に構わない。また、図10の修理台
16はX−Yテーブル2が兼用されて、その機能を果た
す構成であっても良い。
れて全箇所の部品実装状態が完璧となった実装プリント
配線板は製品として仕上げられたものであり、完成品と
して出荷される。検査と修理修正はこのように不即不離
の関係にあり、不可欠のステップとして製造工程に組み
込まれているのである。説明では、自動検査装置と本発
明になる検査装置とがベルトコンベアで連結されている
例を上げたが、現場の必要性から両検査装置が切り離さ
れた状態にあって、プリント配線板がストッカによって
一括して後者に運ばれ、一方自動検査結果データが通信
方式またはフロッピディスクによって入力ユニット10
に伝達されても一向に構わない。また、図10の修理台
16はX−Yテーブル2が兼用されて、その機能を果た
す構成であっても良い。
【0057】
【発明の効果】請求項1に記載の発明によれば、従来の
三次元計測装置は対象と投光手段と撮像手段が一定の幾
何光学的配置に固定化されるために、一度装置のハード
ウェアが決まると、目的や対象の特性に従ってそれぞれ
に適した三次元計測法に変更して計測を実行することが
出来ない宿命であったのに対して、画像表示装置を投光
装置とし最適の投光パタンをソフトウェア指令により、
その画面上に自在に描出し、能動的三次元情報センシン
グを行うことが出来るので、異なる目的の多種の計測を
種々の表面特性を有する対象に適用することが出来るよ
うになった。
三次元計測装置は対象と投光手段と撮像手段が一定の幾
何光学的配置に固定化されるために、一度装置のハード
ウェアが決まると、目的や対象の特性に従ってそれぞれ
に適した三次元計測法に変更して計測を実行することが
出来ない宿命であったのに対して、画像表示装置を投光
装置とし最適の投光パタンをソフトウェア指令により、
その画面上に自在に描出し、能動的三次元情報センシン
グを行うことが出来るので、異なる目的の多種の計測を
種々の表面特性を有する対象に適用することが出来るよ
うになった。
【0058】請求項2に記載の発明によれば、投光手段
が異なるパタンを時分割的に表示して投光し、これと同
期して対象を撮像する機能を有するために、それらの画
像データをメモリして計測演算すると、最少回数の撮像
によって十分な三次元計測を実行できるようになった。
請求項3に記載の発明によれば、天頂角成分ベクトル計
測のためのパタン光と方位角成分ベクトル計測のための
パタン光を異なる位相で投光して撮像し、両位相の画像
データをメモリして三次元形状計測演算を行うので、対
象の表面法線ベクトルが最短時間で算出出来るようにな
った。
が異なるパタンを時分割的に表示して投光し、これと同
期して対象を撮像する機能を有するために、それらの画
像データをメモリして計測演算すると、最少回数の撮像
によって十分な三次元計測を実行できるようになった。
請求項3に記載の発明によれば、天頂角成分ベクトル計
測のためのパタン光と方位角成分ベクトル計測のための
パタン光を異なる位相で投光して撮像し、両位相の画像
データをメモリして三次元形状計測演算を行うので、対
象の表面法線ベクトルが最短時間で算出出来るようにな
った。
【0059】請求項4に記載の発明によれば、投光手段
は、計測対象を原点とする空間座標に仮想的に位置する
ガウス球表面上の緯度線あるいは経度線もしくは緯度上
のエリアあるいは経度上のエリアを画面上に中心投影法
あるいはその他の投影法により描いたパタンを表示して
光源として使用するので、精確な三次元計測が実現し
た。
は、計測対象を原点とする空間座標に仮想的に位置する
ガウス球表面上の緯度線あるいは経度線もしくは緯度上
のエリアあるいは経度上のエリアを画面上に中心投影法
あるいはその他の投影法により描いたパタンを表示して
光源として使用するので、精確な三次元計測が実現し
た。
【0060】請求項5に記載の発明によれば、計測目的
や計測対象の特性に従って、請求項1記載の計測装置が
撮像手段の撮像角度あるいは撮像倍率の変更をすること
が出来るようになった。請求項6に記載の発明によれ
ば、品質良否判定プログラムを備えたので、計測された
対象の三次元形状データを用いて対象品質の良否判定を
行うことが出来るようになった。
や計測対象の特性に従って、請求項1記載の計測装置が
撮像手段の撮像角度あるいは撮像倍率の変更をすること
が出来るようになった。請求項6に記載の発明によれ
ば、品質良否判定プログラムを備えたので、計測された
対象の三次元形状データを用いて対象品質の良否判定を
行うことが出来るようになった。
【0061】請求項7に記載の発明によれば、投光手段
である画像表示装置の画面上に対象の目視検査に好適な
画像を生成するのに必要な白色エリアを表示して対象を
照明し、撮像手段が撮像して画像表示するので、検査装
置が見易く眼性疲労の少ない画像を提供出来るようにな
った。請求項8に記載の発明によれば、自動検査位相で
不良判定した検査対象の同定(ID)データをメモリ
し、その同定(ID)データを用いて対象の自動検査が
完了した後に、自動検査不良判定対象を撮像して、その
画像を表示し、目視による再検査に提供することが出来
るようになった。
である画像表示装置の画面上に対象の目視検査に好適な
画像を生成するのに必要な白色エリアを表示して対象を
照明し、撮像手段が撮像して画像表示するので、検査装
置が見易く眼性疲労の少ない画像を提供出来るようにな
った。請求項8に記載の発明によれば、自動検査位相で
不良判定した検査対象の同定(ID)データをメモリ
し、その同定(ID)データを用いて対象の自動検査が
完了した後に、自動検査不良判定対象を撮像して、その
画像を表示し、目視による再検査に提供することが出来
るようになった。
【0062】請求項9、請求項10、及び請求項11の
発明によれば、ラインを流れる半製品の検査を行い、そ
の結果品質不良と判定された箇所を修理修正して完成品
を得ることが出来るようになった。以上述べたように、
本発明によれば、三次元形状計測装置において能動的セ
ンシング方法を実行するにあたり、計測対象に投光する
光束の生成をカラー画像表示装置の画面上に描出した計
測用カラーパタンにより実現したので、特に表面角度セ
ンシング法の適用例に見られるように、従来は極端に多
数回の計測が必要なために実用性に劣った方法が、例え
ば2回の計測で十分な三次元情報が得られ、実用範囲に
十分入るという大きな効果を生むことになった。この基
本技術に伴い、計測用白色パタンの時分割表示投光で
も、従来法より短時間の計測が実現出来るし、また目視
検査に好都合な画像を得るための白色エリア表示を実現
した目視検査用撮像検査装置も実現出来る。更に、この
基本計測技術を応用した自動検査装置が実現出来るの
で、これにより半製品の検査を行いながら、即不良箇所
の修理修正を行い、検査・修理修正工程を製造工程の中
に組込んで完成品を仕上げる一貫製造方法のシステム化
による高信頼性化、省人化、低コスト化の効果がある。
発明によれば、ラインを流れる半製品の検査を行い、そ
の結果品質不良と判定された箇所を修理修正して完成品
を得ることが出来るようになった。以上述べたように、
本発明によれば、三次元形状計測装置において能動的セ
ンシング方法を実行するにあたり、計測対象に投光する
光束の生成をカラー画像表示装置の画面上に描出した計
測用カラーパタンにより実現したので、特に表面角度セ
ンシング法の適用例に見られるように、従来は極端に多
数回の計測が必要なために実用性に劣った方法が、例え
ば2回の計測で十分な三次元情報が得られ、実用範囲に
十分入るという大きな効果を生むことになった。この基
本技術に伴い、計測用白色パタンの時分割表示投光で
も、従来法より短時間の計測が実現出来るし、また目視
検査に好都合な画像を得るための白色エリア表示を実現
した目視検査用撮像検査装置も実現出来る。更に、この
基本計測技術を応用した自動検査装置が実現出来るの
で、これにより半製品の検査を行いながら、即不良箇所
の修理修正を行い、検査・修理修正工程を製造工程の中
に組込んで完成品を仕上げる一貫製造方法のシステム化
による高信頼性化、省人化、低コスト化の効果がある。
【図1】この発明の一実施例形状計測装置を示す図であ
る。
る。
【図2】同実施例形状計測装置の計測対象、投光ユニッ
ト、撮像装置の配置例を示す図である。
ト、撮像装置の配置例を示す図である。
【図3】同実施例形状計測装置の計測対象、投光ユニッ
ト、撮像装置の他の配置例を示す図である。
ト、撮像装置の他の配置例を示す図である。
【図4】同実施例形状計測装置の計測対象、投光ユニッ
ト、撮像装置の他の配置例を示す図である。
ト、撮像装置の他の配置例を示す図である。
【図5】同実施例形状計測装置の投光ユニット画面上に
描出する表面角度センシング用カラーパタンである。
描出する表面角度センシング用カラーパタンである。
【図6】同実施例形状計測装置の投光ユニット画面上に
描出する表面角度センシング用カラーパタンである。
描出する表面角度センシング用カラーパタンである。
【図7】同投光ユニット画面上に表示する表面角度セン
シング用パタンの数字的描出方法を説明する図である。
シング用パタンの数字的描出方法を説明する図である。
【図8】実施例形状計測装置における計測プロセスを説
明するためのフローチャートである。
明するためのフローチャートである。
【図9】この発明の他の実施例形状計測装置の投光ユニ
ット画面上に描出する表面角度センシング用時分割単色
パタンである。
ット画面上に描出する表面角度センシング用時分割単色
パタンである。
【図10】この発明の他の実施例形状計測装置の投光ユ
ニット画面上に描出する表面角度センシング用時分割単
色パタンである。
ニット画面上に描出する表面角度センシング用時分割単
色パタンである。
【図11】同実施例形状計測装置における計測のプロセ
スを説明するためのフローチャートである。
スを説明するためのフローチャートである。
【図12】この発明の他の実施例製品の検査装置を示す
図である。
図である。
【図13】この発明の他の実施例検査装置の動作を説明
するためのフローチャートである。
するためのフローチャートである。
【図14】この発明の更に他の実施例検査装置の動作を
説明するためのフローチャートである。
説明するためのフローチャートである。
【図15】図14とともに、実施例検査装置の動作を説
明するためのフローチャートである。
明するためのフローチャートである。
【図16】この発明の他の実施例検査装置を示す図であ
る。
る。
【図17】プリント配線板に電子部品をはんだ付けする
工程での処理方法を説明する図である。
工程での処理方法を説明する図である。
【図18】同実施例検査装置の動作を説明するためのフ
ローチャートである。
ローチャートである。
【図19】この発明の更に他の実施例検査装置を示す図
である。
である。
【図20】同実施例検査装置の動作を説明するためのフ
ローチャートである。
ローチャートである。
【図21】同実施例計測装置の投光ユニット画面上に描
出する単純かつ低精度の表面角度センシング用カラーパ
タン参考例である。
出する単純かつ低精度の表面角度センシング用カラーパ
タン参考例である。
【図22】同実施例計測装置の投光ユニット画面上に描
出する単純かつ低精度の表面角度センシング用カラーパ
タン参考例である。
出する単純かつ低精度の表面角度センシング用カラーパ
タン参考例である。
【図23】計測対象と投光装置と撮像装置の幾何光学的
空間座標と、その数字的表現を説明する図である。
空間座標と、その数字的表現を説明する図である。
【図24】従来の表面角度センシング方法における投光
装置の光源配置を説明するための図である。
装置の光源配置を説明するための図である。
1 計測対象 2 X−Yステージ 3 投光装置 4 カラーカメラ 11 入力ユニット
Claims (11)
- 【請求項1】三次元形状計測装置であって、 カラー画像表示装置であり、所定の投光方式に従って、
カラーパタンを表示して発生する光束を計測対象に投光
する投光手段と、 この投光手段とは、前記計測対象に対して三次元形状計
測を可能とする幾何光学的空間位置関係に設置され、前
記光束を受けた計測対象を撮像して画像信号を出力する
撮像手段と、 適用した三次元計測方式に準じて、前記投光手段の投光
方式及び前記撮像手段の撮像方式から成る計測方式を規
定する計測方式規定手段と、 前記撮像手段からの画像信号を受けて前記計測方式に対
応するプログラムを用いて、三次元形状計測演算をなす
演算手段と、を備えて成ることを特徴とする形状計測装
置。 - 【請求項2】メモリ手段を具備し、前記投光手段は投光
方式に従い相互に異なる複数のパタンを時分割的に表示
して発生する光束を計測対象に投光し、前記撮像手段は
前記光束を受けた計測対象を撮像方式に従って投光と同
期して時分割的に撮像し、複数組の画像信号を出力し
て、前記メモリ手段に貯蔵し、前記演算手段は貯蔵され
た前記画像信号を併用して三次元形状計測演算を行うも
のである請求項1記載の形状計測装置。 - 【請求項3】前記投光手段及び撮像手段が、1回の計測
当たり各2位相の投光及び撮像を行い、前記投光手段
は、第一位相においては表面法線ベクトル天頂角成分セ
ンシング・パタンを表示して発生する光束を計測対象に
投光し、第二位相においては表面法線ベクトル方位角成
分センシング・パタンを表示して発生する光束を計測対
象に投光し、前記撮像手段は前記光束を受けた計測対象
を投光と同期して撮像し、2組の画像信号を出力して前
記メモリ手段に貯蔵し、前記演算手段は貯蔵された前記
画像信号を併用して前記計測対象の表面法線ベクトルを
算出することを特徴とする請求項2記載の形状計測装
置。 - 【請求項4】前記投光手段は、計測対象を原点とする幾
何光学空間座標に位置付けた仮想ガウス球表面上の緯度
線あるいは経度線もしくは緯度上のエリアあるいは経度
上のエリアを中心射影法あるいはその他の球体投影法に
基づいて、前記投光手段画面上に描出することによって
計測対象の表面法線ベクトルセンシング・パタンとした
ことを特徴とする請求項1、請求項2、あるいは請求項
3記載の形状計測装置。 - 【請求項5】前記撮像手段は、前記計測方式規定手段か
らの撮像角度指示信号あるいは撮像倍率指示信号に従っ
て、撮像角度あるいは撮像倍率の変更が可能である請求
項1記載の形状計測装置。 - 【請求項6】三次元形状計測方法採用の検査装置であっ
て、カラー画像表示装置であり、所定の投光方式に従っ
て、カラーパタンを表示して発生する光束を検査対象に
投光する投光手段と、 この投光手段とは、前記検査対象に対して三次元形状計
測を可能とする幾何光学的空間位置関係に設置され、前
記光束を受けた検査対象を撮像して画像信号を出力する
撮像手段と、 適用した三次元計測方式に準じて、前記投光手段の投光
方式及び前記撮像手段の撮像方式から成る計測方式を規
定する計測方式規定手段と、 前記撮像手段からの画像信号を受けて前記計測方式に対
応するプログラムを用いて、三次元形状計測演算をなす
演算手段と、 前記演算手段の三次元計測演算データを用いて検査対象
の品質良否判定を行う判定手段とを備えたものであるこ
とを特徴とする検査装置。 - 【請求項7】検査対象を撮像し、その画像を目視観測に
供する検査装置であって、投光手段は画像表示装置であ
り、投光方式規定手段からの規定信号に従って目視検査
に好適な画像の生成に必要な光源としての白色エリアを
その画像上に表示して発生する光束を前記検査対象に投
光し、撮像手段が前記光束を受けた検査対象を撮像し、
その画像を表示手段が表示する検査装置。 - 【請求項8】三次元形状計測方法採用の検査装置であっ
て、カラー画像表示装置であり、所定の投光方式に従っ
て、カラーパタンを表示して発生する光束を検査対象に
投光する投光手段と、 この投光手段とは、前記検査対象に対して三次元形状計
測を可能とする幾何光学的空間位置関係に設置され、前
記光束を受けた検査対象を撮像して画像信号を出力する
撮像手段と、 適用した三次元計測方式に準じて、前記投光手段の投光
方式及び前記撮像手段の撮像方式から成る計測方式を規
定する計測方式規定手段と、 前記撮像手段からの画像信号を受けて前記計測方式に対
応するプログラムを用いて、三次元形状計測演算をなす
演算手段と、 前記演算手段の三次元計測演算データを用いて検査対象
の品質良否判定を行う判定手段と、 第1検査位相において自動検査され、不良判定された検
査対象を同定するデータ(IDデータ)を記憶する記憶
手段と、 第2検査位相において前記同定データを用いて選択さ
れ、前記撮像手段によって撮像された前記不良判定対象
の画像を、不良判定の目視再検査に供するため表示する
表示手段とを備えたものであることを特徴とする検査装
置。 - 【請求項9】検査対象の形状を検査し、不良判定された
検査対象に修理修正を施すことによって、半製品から完
成品を製造する方法であって、製品製造ライン内に、 三次元形状計測装置であって、カラー画像表示装置であ
り、所定の投光方式に従って、カラーパタンを表示して
発生する光束を検査対象に投光する投光手段と、この投
光手段とは、前記検査対象に対して三次元形状計測を可
能とする幾何光学的空間位置関係に設置され、前記光束
を受けた検査対象を撮像して画像信号を出力する撮像手
段と、適用した三次元計測方式に準じて、前記投光手段
の投光方式及び前記撮像手段の撮像方式から成る計測方
式を規定する計測方式規定手段と、前記撮像手段からの
画像信号を受けて前記計測方式に対応するプログラムを
用いて、三次元形状計測演算をなす演算手段とを備える
検査装置を設置し、この検査装置により、半製品の品質
の良否判定を行い、不良判定された箇所の修理修正を行
い、半製品を完成することを特徴とする製品製造方法。 - 【請求項10】検査対象の形状を検査し、不良判定され
た検査対象に修理修正を施すことによって、半製品から
完成品を製造する方法であって、製造ライン内に、検査
対象を撮像し、その画像を目視観測に供する検査装置で
あって、投光手段は画像表示装置であり、投光方式規定
手段からの規定信号に従って目視検査に好適な画像の生
成に必要な光源としての白色エリアをその画像上に表示
して発生する光束を前記検査対象に投光し、撮像手段が
前記光束を受けた検査対象を撮像し、その画像を表示手
段が表示する検査装置を設置し、この検査装置により半
製品の品質の良否判定を行い、不良判定された箇所の修
理修正を行い、半製品を完成することを特徴とする製品
製造方法。 - 【請求項11】検査対象の形状を検査し、不良判定され
た検査対象に修理修正を施すことによって、半製品から
完成品を製造する方法であって、製品製造ライン内に、
三次元形状計測方法採用の検査装置であって、カラー画
像表示装置であり、所定の投光方式に従って、カラーパ
タンを表示して発生する光束を検査対象に投光する投光
手段と、この投光手段とは、前記検査対象に対して三次
元形状計測を可能とする幾何光学的空間位置関係に設置
され、前記光束を受けた検査対象を撮像して画像信号を
出力する撮像手段と、適用した三次元計測方式に準じ
て、前記投光手段の投光方式及び前記撮像手段の撮像方
式から成る計測方式を規定する計測方式規定手段と、前
記撮像手段からの画像信号を受けて前記計測方式に対応
するプログラムを用いて、三次元形状計測演算をなす演
算手段と、前記演算手段の三次元計測演算データを用い
て検査対象の品質良否判定を行う判定手段と、第1検査
位相において自動検査され、不良判定された検査対象を
同定するデータ(IDデータ)を記憶する記憶手段と、
第2検査位相において前記同定データを用いて選択さ
れ、前記撮像手段によって撮像された前記不良判定対象
の画像を、不良判定の目視再検査に供するため表示する
表示手段とを備えた検査装置を設置し、この検査装置に
より、半製品の品質の良否判定を行い、不良判定された
箇所の品質の修理修正を行い、半製品を完成することを
特徴とする製品製造方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP19560494A JP3553652B2 (ja) | 1994-08-19 | 1994-08-19 | 形状計測装置、検査装置、及び製品の製造方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP19560494A JP3553652B2 (ja) | 1994-08-19 | 1994-08-19 | 形状計測装置、検査装置、及び製品の製造方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
JPH0861930A true JPH0861930A (ja) | 1996-03-08 |
JP3553652B2 JP3553652B2 (ja) | 2004-08-11 |
Family
ID=16343927
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP19560494A Expired - Fee Related JP3553652B2 (ja) | 1994-08-19 | 1994-08-19 | 形状計測装置、検査装置、及び製品の製造方法 |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP3553652B2 (ja) |
Cited By (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2005274567A (ja) * | 2004-03-15 | 2005-10-06 | Northrop Grumman Corp | フォトグラメトリーを使用する自動形状計測用にカラーコード化された光 |
JP2006227652A (ja) * | 2006-05-19 | 2006-08-31 | Ckd Corp | フィルタ格子縞板、三次元計測装置及び照明手段 |
US7589844B2 (en) | 2005-07-15 | 2009-09-15 | Asahi Glass Company, Limited | Shape inspection method and apparatus |
WO2010118281A3 (en) * | 2009-04-10 | 2011-01-20 | Omron Corporation | Profilometer, measuring apparatus, and observing apparatus |
US8766298B2 (en) | 2006-09-01 | 2014-07-01 | Cree, Inc. | Encapsulant profile for light emitting diodes |
CN107449360A (zh) * | 2017-06-27 | 2017-12-08 | 无锡贺邦汽车配件有限公司 | 一种用于汽车压铸件的尺寸测量*** |
CN108692677A (zh) * | 2018-04-11 | 2018-10-23 | 四川大学 | 基于反射光场偏振与空时编码的表面三维重建方法和*** |
Families Citing this family (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP4613626B2 (ja) * | 2005-02-04 | 2011-01-19 | 旭硝子株式会社 | 鏡面形状測定方法および装置並びに検査方法および装置 |
US8334985B2 (en) * | 2010-10-08 | 2012-12-18 | Omron Corporation | Shape measuring apparatus and shape measuring method |
-
1994
- 1994-08-19 JP JP19560494A patent/JP3553652B2/ja not_active Expired - Fee Related
Cited By (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2005274567A (ja) * | 2004-03-15 | 2005-10-06 | Northrop Grumman Corp | フォトグラメトリーを使用する自動形状計測用にカラーコード化された光 |
US7589844B2 (en) | 2005-07-15 | 2009-09-15 | Asahi Glass Company, Limited | Shape inspection method and apparatus |
JP2006227652A (ja) * | 2006-05-19 | 2006-08-31 | Ckd Corp | フィルタ格子縞板、三次元計測装置及び照明手段 |
US8766298B2 (en) | 2006-09-01 | 2014-07-01 | Cree, Inc. | Encapsulant profile for light emitting diodes |
WO2010118281A3 (en) * | 2009-04-10 | 2011-01-20 | Omron Corporation | Profilometer, measuring apparatus, and observing apparatus |
JP2012522997A (ja) * | 2009-04-10 | 2012-09-27 | オムロン株式会社 | 表面形状計測装置、計測装置、及び観察装置 |
CN107449360A (zh) * | 2017-06-27 | 2017-12-08 | 无锡贺邦汽车配件有限公司 | 一种用于汽车压铸件的尺寸测量*** |
CN108692677A (zh) * | 2018-04-11 | 2018-10-23 | 四川大学 | 基于反射光场偏振与空时编码的表面三维重建方法和*** |
Also Published As
Publication number | Publication date |
---|---|
JP3553652B2 (ja) | 2004-08-11 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US5032735A (en) | Method of and apparatus for inspecting printed circuit boards | |
US5903353A (en) | Method and apparatus for inspecting component placement and solder connection in printed circuit board manufacture | |
EP1832868A1 (en) | Device for and method of inspecting surface condition | |
JP2015135331A (ja) | 実用型3dビジョンシステム装置およびその方法 | |
CN101506614A (zh) | 对电子元件的球和类似突起作三维视觉以及检查的方法和装置 | |
JP2001521140A (ja) | 三次元検査システム | |
KR20170009524A (ko) | 검사 시스템 및 검사 방법 | |
JP3553652B2 (ja) | 形状計測装置、検査装置、及び製品の製造方法 | |
US6304680B1 (en) | High resolution, high accuracy process monitoring system | |
US4755047A (en) | Photometric stereoscopic shape measuring method | |
JP2000205826A (ja) | 画像処理方法および装置 | |
JPH1054709A (ja) | 顕微鏡を用いた3次元画像認識装置 | |
JP2000131037A (ja) | 物体形状検査装置 | |
JPH08313225A (ja) | 外観検査装置 | |
US5402505A (en) | Semiconductor device lead inspection system | |
JPH07306023A (ja) | 形状計測装置、検査装置及び製品製造方法 | |
JPH0864999A (ja) | 検査装置、三次元形状計測方法及び製品の製造方法 | |
JP2009294115A (ja) | 3次元計測表示方法 | |
JPH09175457A (ja) | 歪検査方法及び歪検査装置 | |
JP4185186B2 (ja) | 撮像装置 | |
US7117047B1 (en) | High accuracy inspection system and method for using same | |
CN108709892A (zh) | 检测***及其方法 | |
KR20170124509A (ko) | 검사 시스템 및 검사 방법 | |
CN114332231A (zh) | 视觉检测设备中机械手与相机的定位方法、装置及介质 | |
JPH1073419A (ja) | エンジン外付け部品の誤欠品検査装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20040120 |
|
A521 | Written amendment |
Effective date: 20040312 Free format text: JAPANESE INTERMEDIATE CODE: A523 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Effective date: 20040413 Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
A61 | First payment of annual fees (during grant procedure) |
Effective date: 20040430 Free format text: JAPANESE INTERMEDIATE CODE: A61 |
|
R150 | Certificate of patent (=grant) or registration of utility model |
Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
LAPS | Cancellation because of no payment of annual fees |