JP2020027029A - Measuring system, measuring method, and measuring program - Google Patents
Measuring system, measuring method, and measuring program Download PDFInfo
- Publication number
- JP2020027029A JP2020027029A JP2018151978A JP2018151978A JP2020027029A JP 2020027029 A JP2020027029 A JP 2020027029A JP 2018151978 A JP2018151978 A JP 2018151978A JP 2018151978 A JP2018151978 A JP 2018151978A JP 2020027029 A JP2020027029 A JP 2020027029A
- Authority
- JP
- Japan
- Prior art keywords
- measurement
- unit
- sensor
- imaging
- displacement
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Classifications
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01B—MEASURING LENGTH, THICKNESS OR SIMILAR LINEAR DIMENSIONS; MEASURING ANGLES; MEASURING AREAS; MEASURING IRREGULARITIES OF SURFACES OR CONTOURS
- G01B11/00—Measuring arrangements characterised by the use of optical techniques
- G01B11/24—Measuring arrangements characterised by the use of optical techniques for measuring contours or curvatures
Landscapes
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Length Measuring Devices By Optical Means (AREA)
Abstract
Description
複数の計測部分の各々を計測するための計測システム、計測方法、および計測プログラムに関する。 The present invention relates to a measurement system, a measurement method, and a measurement program for measuring each of a plurality of measurement portions.
FA(Factory Automation)分野において、計測対象の形状を計測する計測システムが知られている。 2. Description of the Related Art In the field of factory automation (FA), a measurement system that measures a shape of a measurement target is known.
計測対象の形状を計測する計測システムとして、例えば、特開2016−48195号公報(特許文献1)は、測定対象であるワークを撮像して得られる画像からワークの位置および姿勢を特定し、ワークの位置および姿勢ならびに、マスター画像に対して指定された測定箇所に基づいて、変位計とワークとを相対的に移動させて、高さの測定値を求める技術が開示されている。 As a measurement system for measuring the shape of a measurement target, for example, JP-A-2006-48195 (Patent Document 1) specifies a position and a posture of a work from an image obtained by imaging the work to be measured, and A technique is disclosed in which a displacement meter and a workpiece are relatively moved on the basis of the position and orientation of a master image and a measurement location designated with respect to a master image to obtain a height measurement value.
しかし、特許文献1に開示された計測システムは、測定対象を撮像して得られる画像内の測定箇所を変位計のようなセンサで計測するものであって、カメラの撮像領域を変え、広範囲の計測を行なうことについて十分に考慮されていなかった。
However, the measurement system disclosed in
本願発明は、計測可能な範囲を変えて、広範囲の計測を行なうのに適した計測システム、計測装置、および計測方法を提供することを目的とする。 An object of the present invention is to provide a measurement system, a measurement device, and a measurement method suitable for performing measurement over a wide range while changing the measurable range.
本開示の一例によれば、複数の計測部分の各々を計測するための計測システムが提供される。計測システムは、撮像部と、センサと、撮像部およびセンサが配置されるベース部と、ベース部と計測対象との間の相対位置を変化させる変化機構と、ベース部の進行方向に対する撮像部およびセンサの位置関係を調整する調整機構と、撮像部により撮像された計測部分の画像に基づいて、センサにより計測する計測位置を決定する位置決定手段と、ベース部の進行方向に対する撮像部の位置がセンサの前方となるようにしつつ複数の計測部分の各々を撮像部の撮像視野を通過させるとともに、複数の計測部分の各々について位置決定手段により決定された計測位置がセンサの計測範囲を通過するように、変化機構および調整機構を制御する制御手段とを含む。 According to an example of the present disclosure, a measurement system for measuring each of a plurality of measurement portions is provided. The measurement system includes an imaging unit, a sensor, a base unit on which the imaging unit and the sensor are arranged, a change mechanism that changes a relative position between the base unit and the measurement target, an imaging unit with respect to a traveling direction of the base unit, and An adjusting mechanism for adjusting the positional relationship between the sensors, position determining means for determining a measurement position to be measured by the sensor based on an image of the measurement portion taken by the imaging unit, and a position of the imaging unit with respect to the traveling direction of the base unit. While allowing each of the plurality of measurement portions to pass through the imaging field of view of the imaging section while being in front of the sensor, the measurement position determined by the position determination means for each of the plurality of measurement portions passes through the measurement range of the sensor. Control means for controlling the change mechanism and the adjustment mechanism.
この開示によれば、ベース部の進行方向に対して前方に位置する撮像部により撮像された画像に基づいてセンサの計測位置を決定し、決定した計測位置に合わせてセンサの計測範囲を計測位置が通過するように変化機構および調整機構が制御される。そのため、先に撮像部で計測部位を撮像した後、撮像部が撮像した計測部位上をセンサが通過することとなるため、撮像部よりも先にセンサが計測部位上を通過する場合に比べて、時間や移動量のロスを減らすことができる。その結果、計測可能な範囲を変えて、広範囲の計測を行なうのに適した計測システムが提供される。 According to the present disclosure, the measurement position of the sensor is determined based on the image captured by the imaging unit positioned forward with respect to the traveling direction of the base unit, and the measurement range of the sensor is measured according to the determined measurement position. The change mechanism and the adjustment mechanism are controlled so that the light passes. For this reason, after the measurement site is imaged by the imaging unit first, the sensor passes over the measurement site imaged by the imaging unit, so that the sensor passes over the measurement site earlier than the imaging unit. , The loss of time and travel distance can be reduced. As a result, a measurement system suitable for performing measurement over a wide range by changing the measurable range is provided.
上述の開示において、調整機構は、ベース部を回転させる回転機構であってもよい。
この開示によれば、回転というシンプルな機構で撮像部とセンサとの間の位置関係を調整することができるため、調整が容易である。
In the above disclosure, the adjustment mechanism may be a rotation mechanism that rotates the base.
According to this disclosure, since the positional relationship between the imaging unit and the sensor can be adjusted by a simple mechanism called rotation, the adjustment is easy.
上述の開示において、計測システムは、複数の計測部分のうちの少なくとも一の計測部分について、計測部分を撮像して得られる画像特徴の位置に対して、複数の計測位置が予め定められていてもよい。位置決定手段は、計測部分の画像に基づいて画像特徴の位置を特定することで、画像特徴の位置に対する複数の計測位置の各々を決定してもよい。 In the above disclosure, the measurement system may be configured such that, for at least one of the plurality of measurement portions, a plurality of measurement positions are predetermined with respect to a position of an image feature obtained by imaging the measurement portion. Good. The position determining means may determine each of the plurality of measurement positions for the position of the image feature by specifying the position of the image feature based on the image of the measurement portion.
この開示によれば、一の計測部分に対して複数の計測位置が予め定められており、一の撮像で複数の計測位置の各々が決定するため、撮像回数を減らすことができ、その結果、全体の計測時間を短くすることができる。 According to this disclosure, a plurality of measurement positions are determined in advance for one measurement portion, and each of the plurality of measurement positions is determined in one imaging, so that the number of imagings can be reduced, and as a result, Overall measurement time can be shortened.
上述の開示において、センサは、変位センサであってもよい。
上述の開示において、変化機構の変位、および変化機構の変位に対応付けられた調整機構の変位からなる基準経路が予め定められていてもよい。制御手段は、基準経路に沿って変化機構および調整機構を制御することで複数の計測部分の各々が撮像部の撮像視野を通過させるようにするとともに、複数の計測部分の各々については、位置決定手段により決定された計測位置がセンサの計測範囲を通過するように基準経路を修正してもよい。
In the above disclosure, the sensor may be a displacement sensor.
In the above disclosure, a reference path including the displacement of the change mechanism and the displacement of the adjustment mechanism associated with the displacement of the change mechanism may be predetermined. The control means controls the change mechanism and the adjustment mechanism along the reference path so that each of the plurality of measurement parts passes through the imaging field of view of the imaging unit, and for each of the plurality of measurement parts, the position determination is performed. The reference route may be modified so that the measurement position determined by the means passes through the measurement range of the sensor.
この開示によれば、基準経路が予め定められているため、計測システム全体の処理を簡略化することができ、その結果、計測システムにおける処理負担を軽減することができる。 According to this disclosure, since the reference route is determined in advance, the processing of the entire measurement system can be simplified, and as a result, the processing load on the measurement system can be reduced.
上述の開示において、制御手段は、複数の計測部分の各々については、基準経路のうちの変化機構の変位を修正することなく調整機構の変位を修正してもよい。 In the above disclosure, for each of the plurality of measurement portions, the control unit may correct the displacement of the adjusting mechanism without correcting the displacement of the changing mechanism in the reference path.
この開示によれば、調整機構の変位だけを修正するため、修正対象が少なく、計測システム全体の処理を簡略化することができ、その結果、計測システムにおける処理負担を軽減することができる。 According to this disclosure, since only the displacement of the adjustment mechanism is corrected, the number of correction targets is small, the processing of the entire measurement system can be simplified, and as a result, the processing load on the measurement system can be reduced.
上述の開示において、位置決定手段は、計測部分の画像に基づいて、基準経路に応じて定められる基準位置に対する計測部分の位置ずれ値を取得する取得手段をさらに含んでもよい。計測システムは、取得手段により取得された位置ずれ値が、予め定められた許容値を超えているか否かを判定する判定手段と、判定手段の判定結果をユーザに通知する通知手段とをさらに含んでもよい。 In the above disclosure, the position determination unit may further include an acquisition unit configured to acquire a displacement value of the measurement portion with respect to a reference position determined according to the reference route, based on the image of the measurement portion. The measurement system further includes a determination unit configured to determine whether the displacement value acquired by the acquisition unit exceeds a predetermined allowable value, and a notification unit configured to notify a user of the determination result of the determination unit. May be.
この開示によれば、基準位置に対する計測部分の位置ずれが大きく、基準経路の修正量が多くなるような場合にユーザに通知することができ、ユーザフレンドリーな計測システムを提供することができる。 According to this disclosure, it is possible to notify the user when the displacement of the measurement portion with respect to the reference position is large and the correction amount of the reference route is large, and it is possible to provide a user-friendly measurement system.
本開示の別の一例によれば、複数の計測部分の各々を計測するための計測方法が提供される。この計測方法においては、撮像部とセンサとがベース部に配置されているとともに、ベース部と計測対象との相対位置を変化可能であり、ベース部の進行方向に対する撮像部およびセンサの位置関係を調整可能に構成されている。計測方法は、ベース部の進行方向に対する撮像部の位置がセンサの前方となるようにしつつ計測部分が撮像部の撮像視野を通過する第1のステップと、第1のステップにおいて計測部分が撮像視野を通過するときに得られる計測部分の画像に基づいて、センサにより計測する計測位置を決定する第2のステップと、第2のステップにおいて決定された計測位置がセンサの計測範囲を通過する第3のステップとを含み、複数の計測部分の各々に対して第1のステップから第3のステップまでのステップを行う。 According to another example of the present disclosure, a measurement method for measuring each of a plurality of measurement portions is provided. In this measurement method, the imaging unit and the sensor are arranged on the base unit, and the relative position between the base unit and the measurement target can be changed, and the positional relationship between the imaging unit and the sensor with respect to the traveling direction of the base unit is determined. It is configured to be adjustable. The measurement method includes a first step in which the measurement portion passes through the imaging field of view of the imaging unit while the position of the imaging unit with respect to the traveling direction of the base unit is in front of the sensor; A second step of determining a measurement position to be measured by the sensor based on an image of a measurement portion obtained when passing through the sensor, and a third step in which the measurement position determined in the second step passes through a measurement range of the sensor. And the steps from the first step to the third step are performed on each of the plurality of measurement portions.
この開示によれば、ベース部の進行方向に対して前方に位置する撮像部により撮像された画像に基づいてセンサの計測位置を決定し、決定した計測位置に合わせてセンサの計測範囲を計測位置が通過するように変化機構および調整機構が制御される。そのため、先に撮像部で計測部位を撮像した後、撮像部が撮像した計測部位上をセンサが通過することとなるため、撮像部よりも先にセンサが計測部位上を通過する場合に比べて、時間や移動量のロスを減らすことができる。その結果、計測可能な範囲を変えて、広範囲の計測を行なうのに適した計測方法が提供される。 According to the present disclosure, the measurement position of the sensor is determined based on the image captured by the imaging unit positioned forward with respect to the traveling direction of the base unit, and the measurement range of the sensor is measured according to the determined measurement position. The change mechanism and the adjustment mechanism are controlled so that the light passes. For this reason, after the measurement site is imaged by the imaging unit first, the sensor passes over the measurement site imaged by the imaging unit, so that the sensor passes over the measurement site earlier than the imaging unit. , The loss of time and travel distance can be reduced. As a result, a measurement method suitable for performing a wide range of measurement by changing the measurable range is provided.
本開示の別の一例によれば、複数の計測部分の各々を計測するための計測プログラムが提供される。この計測プログラムにおいては、撮像部とセンサとがベース部に配置されているとともに、ベース部と計測対象との相対位置を変化機構により変化可能であり、ベース部の進行方向に対する撮像部およびセンサの位置関係を調整機構により調整可能に構成されている。計測プログラムは、コンピュータに、ベース部の進行方向に対する撮像部の位置がセンサの前方となるようにしつつ計測部分が撮像部の撮像視野を通過するように変化機構および調整機構を制御する第1のステップと、第1のステップにおいて撮像視野を計測部分が通過するときに得られる計測部分の画像に基づいて決定されるセンサにより計測する計測位置がセンサの計測範囲を通過するように変化機構および調整機構を制御する第2ステップとを、複数の計測部分の各々に対して実行させる。 According to another example of the present disclosure, a measurement program for measuring each of a plurality of measurement portions is provided. In this measurement program, the imaging unit and the sensor are arranged on the base unit, and the relative position between the base unit and the measurement target can be changed by a change mechanism, and the imaging unit and the sensor with respect to the traveling direction of the base unit. The positional relationship can be adjusted by an adjusting mechanism. The measurement program controls the computer to control the change mechanism and the adjustment mechanism such that the position of the imaging unit with respect to the traveling direction of the base unit is in front of the sensor and the measurement unit passes through the imaging field of view of the imaging unit. And a change mechanism and adjustment so that a measurement position measured by a sensor determined based on an image of the measurement portion obtained when the measurement portion passes through the imaging field of view in the first step passes through the measurement range of the sensor. And a second step of controlling the mechanism are performed for each of the plurality of measurement portions.
この開示によれば、ベース部の進行方向に対して前方に位置する撮像部により撮像された画像に基づいてセンサの計測位置を決定し、決定した計測位置に合わせてセンサの計測範囲を計測位置が通過するように変化機構および調整機構が制御される。そのため、先に撮像部で計測部位を撮像した後、撮像部が撮像した計測部位上をセンサが通過することとなるため、撮像部よりも先にセンサが計測部位上を通過する場合に比べて、時間や移動量のロスを減らすことができる。その結果、計測可能な範囲を変えて、広範囲の計測を行なうのに適した計測プログラムが提供される。 According to the present disclosure, the measurement position of the sensor is determined based on the image captured by the imaging unit positioned forward with respect to the traveling direction of the base unit, and the measurement range of the sensor is measured according to the determined measurement position. The change mechanism and the adjustment mechanism are controlled so that the light passes. For this reason, after the measurement site is imaged by the imaging unit first, the sensor passes over the measurement site imaged by the imaging unit, so that the sensor passes over the measurement site earlier than the imaging unit. , The loss of time and travel distance can be reduced. As a result, a measurement program suitable for performing a wide range of measurement while changing the measurable range is provided.
本開示の一例によれば、計測可能な範囲を変えて、広範囲の計測を行なうのに適した計測システム、計測装置、および計測方法が提供される。 According to an example of the present disclosure, a measurement system, a measurement device, and a measurement method suitable for performing measurement over a wide range by changing a measurable range are provided.
本開示の上記および他の目的、特徴、局面および利点は、添付の図面と関連して理解される本発明に関する次の詳細な説明から明らかとなるであろう。 The above and other objects, features, aspects and advantages of the present disclosure will become apparent from the following detailed description of the invention that is understood in connection with the accompanying drawings.
以下、図面を参照しつつ、本発明に従う各実施の形態について説明する。以下の説明では、同一の部品および構成要素には同一の符号を付してある。それらの名称および機能も同じである。したがって、これらについての詳細な説明は繰り返さない。なお、以下で説明される各実施の形態および各変形例は、適宜選択的に組み合わせてもよい。 Hereinafter, embodiments of the present invention will be described with reference to the drawings. In the following description, the same parts and components are denoted by the same reference numerals. Their names and functions are the same. Therefore, detailed description thereof will not be repeated. In addition, each embodiment and each modified example described below may be appropriately selectively combined.
§1 適用例
図1を参照して、本発明が適用される場面の一例について説明する。図1は、本実施の形態に係る計測システム1aの適用場面を模式的に示す図である。計測システム1aは、複数の計測部分の各々を計測するために利用される。複数の計測部分は、一のワークに対して設定されていてもよく、また、複数のワークの集合からなる計測対象に対して設定されていてもよい。なお、図1に示す例では、一のワークが計測対象として設定されており、ワーク上に複数の計測部分が設定されている。
§1 Application Example An example of a scene to which the present invention is applied will be described with reference to FIG. FIG. 1 is a diagram schematically showing an application scene of a measurement system 1a according to the present embodiment. The measurement system 1a is used for measuring each of a plurality of measurement parts. The plurality of measurement portions may be set for one work, or may be set for a measurement target including a set of a plurality of works. In the example shown in FIG. 1, one work is set as a measurement target, and a plurality of measurement portions are set on the work.
計測システム1aは、撮像部66aと、センサ68aと、ベース部62aと、調整機構64aと、変化機構8aと、位置決定手段14と、制御手段17とを備える。
The measurement system 1a includes an
撮像部66aおよびセンサ68aは、ベース部62aに設けられている。変化機構8aは、ベース部62aとワークWとの相対位置を変化させる。たとえば、変化機構8aは、図1に示すようなワークWを移動させるXYステージや、また、ベース部62aを動かすロボットなどを含む。
The
調整機構64aは、ベース部62aの進行方向に対する撮像部66aとセンサ68aとの間の位置関係を調整する。たとえば、調整機構64aは、ベース部62aを回転させる回転機構である。なお、調整機構64aは、ベース部62aの進行方向に対する撮像部66aとセンサ68aとの間の位置関係を調整できればよく、回転機構に限られない。
The
位置決定手段14は、撮像部66aが撮像した計測部分Pの画像に基づいて、計測位置pを決定する。たとえば、計測部分Pの位置に対応付けて計測位置pを予め設定しておくことで計測部分Pの画像から計測位置pを決定してもよく、また、計測条件を予め設定し、計測条件を満たす位置を特定することで計測位置pを決定してもよい。
The
制御手段17は、変化機構8aおよび調整機構64aを制御する。具体的には、制御手段17は、ベース部62aの進行方向に対して撮像部66aが前、センサ68aが後ろとなるように調整しながら複数の計測部分の各々が撮像部66aの撮像範囲を通過させるようにする。また、複数の計測部分の各々について、制御手段17は、位置決定手段14により決定された計測位置pがセンサ68aの計測範囲を通過するようにする。
The control means 17 controls the changing
すなわち、計測システム1aにおいては、ベース部62aの進行方向に対して前方に位置する撮像部66aによりセンサ68aの計測位置を決定し、ベース部62aの進行方向に対して後方に位置するセンサ68aの位置を決定した計測位置p上を通過するように変化機構8aおよび調整機構64aが制御される。ベース部62aの進行方向に対して撮像部66aが前方、センサ68aが後方となるように制御されるため、撮像部66aにより正確な計測位置を特定した上で、その特定された計測位置上をセンサ68aが通過するように位置を調整することができる。また、撮像部66aで計測部位を撮像した後、撮像部66aが撮像した計測部位上をセンサ68aが通過することとなるため、撮像部66aよりも先にセンサ68aが計測部位上を通過する場合に比べて、時間や移動量のロスを減らすことができる。
That is, in the measurement system 1a, the measurement position of the
§2 具体例
以下、本発明のより具体的な応用例として、本実施の形態に係る計測システム1のより詳細な構成および処理について説明する。
§2 Specific Example Hereinafter, as a more specific application example of the present invention, a more detailed configuration and processing of the
<A.計測システムの全体構成>
図2は、本実施の形態に係る計測システム1の全体構成を示す模式図である。計測システム1は、たとえば、対象物であるワークW上の複数の計測部分の各々を計測するために利用可能である。ここで、「計測」は、検査を目的とする計測を含み、最終的な出力が計測値である計測と、最終的な出力がたとえば検査の合否だけである計測とを含む。
<A. Overall configuration of measurement system>
FIG. 2 is a schematic diagram illustrating an overall configuration of the
計測システム1は、計測装置6と、移動機構8と、計測装置6および移動機構8とを制御する制御装置として機能するPLC(Programmable Logic Controller)100と、コントローラ200と、サーボドライバ300と、画像処理装置400と、ドライバユニット500とを備える。
The
計測装置6は、コントローラ200、サーボドライバ300、および画像処理装置400の各々と電気的に接続されている。移動機構8は、ドライバユニット500と電気的に接続されている。PLC100は、コントローラ200、サーボドライバ300、画像処理装置400およびドライバユニット500のそれぞれとネットワークNWを介して接続されている。ネットワークNWは、たとえば、フィールドネットワークである。一例としては、ネットワークNWには、EtherCAT(登録商標)やEtherNet/IP(登録商標)などが採用される。
The measuring device 6 is electrically connected to each of the
なお、本実施の形態において、計測システム1は、7つの装置から構成されるとしたが、6つ以下、あるいは、8つ以上で構成されてもよい。たとえば、電気的に接続されている2以上の装置は、1の装置として構成してもよい。また、ネットワークNWを介して接続されている2以上の装置は、互いに内部バスを介して接続させて1の装置として構成してもよい。
In the present embodiment, the
計測装置6は、回転体62、回転機構64、カメラ66、および変位センサ68を備える。回転体62は、本願発明のベース部の一例であって、カメラ66および変位センサ68が取り付けられている。
The measuring device 6 includes a
回転機構64は、回転体62を回転させることで、回転体62の進行方向に対するカメラ66および変位センサ68の位置関係を変化させる。回転機構64は、たとえば、回転式モータで構成されたサーボモータであって、Z軸に平行な軸を中心に回転体62を回転駆動する。なお、回転機構64は、本願発明の調整機構の一例である。調整機構は、回転体62の進行方向に対するカメラ66および変位センサ68の位置関係を変化させることができればよく、図2に示した回転機構64に限られない。
The
カメラ66は、ワークW上に設定された計測部分の各々を撮像する撮像部である。変位センサ68は、ワークW上に設定された計測部分の各々について、計測を行なうセンサである。
The
移動機構8は、本願発明の変化機構の一例であって、ワークWを移動させることで、ワークWと計測装置6との間の相対位置を変化させる。移動機構8は、たとえば、水平方向の並進移動をワークWに与えることができるXYステージである。なお、変化機構は、ワークWと回転体62との相対位置を変化させることができれば、図2に示した移動機構8に限られず、たとえば、回転体62をロボットなどにより移動させる機構や、回転体62およびワークWの各々を移動させる機構であってもよい。
The moving
移動機構8は、Xステージ82Xと、Yステージ82Yと、サーボモータ84X,84Yとを備える。サーボモータ84X,84Yの各々は、回転式モータで構成される。サーボモータ84Xは、Xステージ82XをX軸方向に沿って並進駆動する。サーボモータ84Yは、Yステージ82YをY軸方向に沿って並進駆動する。
The moving
PLC100は、コントローラ200、サーボドライバ300、画像処理装置400およびドライバユニット500を制御する。具体的には、PLC100は、ワークW上の複数の計測部分の各々をカメラ66に順次撮像させるとともに、カメラ66が撮像した画像に基づいて特定される計測位置を変位センサ68に計測させる。
The
コントローラ200は、PLC100から送られる計測命令に従って変位センサ68を制御することで、計測結果を出力する。出力先は、PLC100であってもよく、また、コントローラ200に接続されている表示部232(図9参照)であってもよい。
The
サーボドライバ300は、回転体62の回転量が、PLC100から送られる回転指令に近付くように、回転機構64に対してフィードバック制御を行なう。
The
画像処理装置400は、PLC100からの指令に応じて、カメラ66を制御し、カメラ66から送られる画像に基づいて、各種画像処理を行ない、処理結果をPLC100に送る。
The
ドライバユニット500は、PLC100からの指令に応じて移動機構8に対するフィードバック制御を行なう。ドライバユニット500は、サーボドライバ500X,500Yを含む。サーボドライバ500Xは、Yステージ82Xの移動量が移動指令に近付くように、サーボモータ84Xに対してフィードバック制御を行なう。サーボドライバ500Yは、Yステージ82Yの移動量が移動指令に近付くように、サーボモータ84Yに対してフィードバック制御を行なう。
PLC100は、回転体62の進行方向に対してカメラ66が前方、変位センサ68が後方となるようにサーボドライバ300およびドライバユニット500を制御し、ワークW上の計測部分の少なくとも一部がカメラ66の撮像視野に含まれたタイミングで撮像指示を出力するように画像処理装置400を制御する。画像処理装置400およびPLC100は、カメラ66が撮像した画像に基づいて、変位センサ68の計測位置を決定する。
The
PLC100は、変位センサ68の計測範囲内を決定した計測位置が通過するようにサーボドライバ300およびドライバユニット500を制御し、変位センサ68の計測範囲内に計測位置が含まれるタイミングで計測指示を出力するようにコントローラ200を制御する。
The
すなわち、計測システム1においては、回転体62の進行方向に対して前方に位置するカメラ66により変位センサ68の計測位置を決定し、回転体62の進行方向に対して後方に位置する変位センサ68の位置を決定した計測位置上を通過するように変位センサ68とワークWとの間の相対位置を調整する。
That is, in the
本実施の形態においては、回転体62の進行方向に対するカメラ66の位置を変位センサ68の前方に維持しつつ、ワークW上に設定された複数の計測部分を順次撮像するための基準経路が予め定められている。基準経路は、回転体62とワークWとの間の相対位置の変化および、相対位置の変化に対応付けられた回転体62の進行方向に対するカメラ66と変位センサ68との間の位置関係の変化を含む。より具体的には、基準経路は、移動機構8の移動量および移動機構8の移動量に対応付けられた回転機構64の変位量を含む。計測システム1においては、基準経路に沿ってカメラ66とワークWとの間の相対位置を変化させつつ、カメラ66により撮像された計測部分の画像に基づいて計測位置が特定される度に、変位センサ68の計測範囲を計測位置が通過するように適宜基準経路が修正される。なお、「計測部分」とは、前方に位置するカメラ66で、後方に位置する変位センサ68の計測位置を特定する部分であって、ワークW上に連続して設定されていてもよく、また、非連続に設定されていてもよい。
In the present embodiment, while maintaining the position of the
<B.基準経路>
図3は、基準経路を示す図である。なお、実際には、移動機構8によってワークWの位置が変化するものの、回転体62の位置が固定されていることから、説明を簡略化するため、回転体62がワークWの上方のXY平面上を動いているように表現している。図3において、実線は、基準経路に従って移動機構8が制御された場合の、回転体62の回転中心OとワークWとの相対位置の変化を示す経路L1である。破線は、基準経路に従って移動機構8および回転機構64が制御された場合の、変位センサ68とワークWとの相対位置の変化を示す経路L2である。なお、図3において、便宜上、経路L1および経路L2の重なりを解消させて表現している。また、図3において、便宜上、カメラ66は四角形で表され、変位センサ68は三角形で表されている。また、計測位置p,回転体62,カメラ66,および変位センサ68は、便宜上、一部符号を省略している。また、図3においては、計測部分Pとして、第1計測部分P1〜第6計測部分P6が設定されているものとする。
<B. Standard path>
FIG. 3 is a diagram showing a reference route. Although the position of the work W is actually changed by the moving
基準経路は、たとえば、ワークWの設計上の外観に基づいて生成される。基準経路が生成されることで、移動機構8および回転機構64が経時的にどのように動くが決まる。このとき、基準経路は、ワークWが予め定められた基準状態から計測が開始されるものとして生成される。ここで、基準状態は、ワークWと回転体62との間の相対位置および回転体62に対するワークWの姿勢を含む概念である。
The reference path is generated based on, for example, the design appearance of the work W. The generation of the reference path determines how the moving
実際の計測時においては、ワークWの計測が基準状態から開始するとは限らず、また、設計通りのワークWであるとは限らない。そのため、基準状態からのズレ、および、設置されたワークWとワークWの設計値とのズレによっては、図3に示すように、基準経路に従って移動機構8および回転機構64が制御されたとしても、計測部分Pの計測位置p上を変位センサ68の計測範囲が通過しない。なお、基準経路に従って移動機構8および回転機構64が制御されたとしても、カメラ66の撮像範囲を複数の計測部分Pの各々が通過するものとする。ここで、計測部分Pが撮像範囲を通過するとは、計測部分Pの位置を特定するための特徴部位をカメラ66が撮像可能であればよい。なお、カメラ66の撮像範囲は、変位センサ68の計測範囲に比べて広いものとする。
At the time of actual measurement, the measurement of the work W does not always start from the reference state, and the work W is not always as designed. Therefore, depending on the deviation from the reference state and the deviation between the set work W and the design value of the work W, even if the moving
<C.基準経路の修正>
図3に示すように、基準経路に従って移動機構8および回転機構64が制御されたとしても、計測部分Pの計測位置p上を変位センサ68が通過しない。図4を参照して、基準経路の修正方法について説明する。図4は、基準経路の修正方法の概略を示す図である。
<C. Correction of reference route>
As shown in FIG. 3, even if the moving
ここでは、第1計測部分P1上を回転体62が通過するときを例に説明する。図4においては、回転体62の動きと、回転中心O経路と、変位センサ68経路とを別々に示す。また、図4において、基準経路に従って移動機構8および回転機構64が制御された場合の経路は破線で示されており、修正後の経路は実線で示されている。
Here, a description will be given of when the first measurement portion P 1 on the rotating
図4に示すように、回転体62の回転中心Oの経路を変えることなく、変位センサ68の経路を修正することで、基準経路が修正される。より具体的には、本実施の形態における計測システム1は、移動機構8の経時的な動きを設定時から変えることなく、回転機構64の経時的な動きを変えることで基準経路を修正する。
As shown in FIG. 4, by modifying the path of the
移動機構8は、ワークWと計測装置6との間の相対位置を変化させる機構であるのに対して、回転機構64は、回転体62の進行方向に対するカメラ66および変位センサ68の位置関係を変化させる機構である。すなわち、移動機構8の経時的な動きを変えることなく、回転機構64の経時的な動きを変えることで基準経路が修正されるとは、ワークWと計測装置6との間の相対位置の経路を変えることなく、回転体62の進行方向に対するカメラ66および変位センサ68の位置関係の変化を調整することで、基準経路が修正されることを意味する。
The moving
このように、ワークWと計測装置6との間の相対位置の経路を変えることなく、回転体62の進行方向に対するカメラ66および変位センサ68の位置関係の変化だけを調整することで基準経路が修正されるため、修正対象が少なく、処理を簡略化することができ、その結果、修正に要する処理負担を軽減することができる。より具体的には、修正に要する演算を簡略化することができる。特に、本実施の形態においては、回転体62を回転させる回転機構64の動きのみを調整することで基準経路が修正されるため、回転体62の回転量という1の変数のみを算出すればよく、修正に要する演算をより簡略化することができる。
As described above, the reference path is adjusted by adjusting only the change in the positional relationship between the
<D.計測の流れ>
図5を参照して、本実施の形態の計測システム1の計測処理の流れの一例について説明する。図5は、計測システム1の計測処理の流れの一例を示すフローチャートである。
<D. Measurement Flow>
An example of the flow of the measurement process of the
計測処理は、移動機構8上にワークWが設置されたことに基づいて開始される処理である。
The measurement process is a process started based on the work W being set on the moving
ステップS1において、PLC100は、設定されている経路に従って移動機構8および回転機構64を制御する。設定されている経路は、基準経路が修正されている場合は、修正後の経路であり、基準経路が修正されていない場合は、基準経路である。
In step S1, the
ステップS2において、PLC100は、カメラ66の撮像条件が成立したか否かを判定する。撮像条件は、たとえば、計測部分Pがカメラ66の撮像範囲に位置したことである。計測部分Pがカメラ66の撮像範囲に位置するときの移動機構8の移動量および回転機構64の回転量は、基準経路にしたがって予め定められている。すなわち、本実施の形態における撮像条件は、移動機構8の移動量が予め定められた目標量に達し、かつ、回転機構64の回転量が予め定められた目標量に達したことを以て成立する。
In step S2, the
ステップS3において、カメラ66は、PLC100からの撮像指示に基づいて画像処理装置400から出力される撮像命令に従い、計測部分Pを撮像する。このとき、PLC100は、移動機構8および回転機構64を停止するための指示を出力するようにしてもよい。
In step S3, the
ステップS4において、PLC100は、カメラ66が撮像した画像に基づいて計測位置pを特定する。計測位置pは、たとえば、計測部分Pの位置および姿勢に対応付けて予め定められている。画像処理装置400は、カメラ66が撮像した画像から、公知のパターンマッチングを利用して計測部分Pの位置および姿勢を特定し、PLC100に出力する。PLC100は、出力された計測部分Pの位置および姿勢から計測位置pを特定する。なお、計測部分Pの形状が上下左右対称の円のような形状である場合、姿勢を特定する必要はない。
In step S4, the
ステップS5において、PLC100は、特定した計測位置pに基づいて、基準経路を修正する。具体的には、PLC100は、変位センサ68の計測範囲内を特定した計測位置pが通過するように基準経路を修正する。これにより、変位センサ68の計測範囲内に特定した計測位置pが位置するときの移動機構8の移動量と、回転機構64の回転量とが特定される。なお、ステップS5において、PLC100は、計測位置p上を変位センサ68の計測範囲が通過した後の経路については、修正しないようにしてもよい。すなわち、計測位置p上を変位センサ68の計測範囲が通過した後は、基準経路に従って移動機構8および回転機構64が制御される。
In step S5, the
ステップS6において、PLC100は、計測条件が成立しているか否かを判定する。計測条件は、変位センサ68の計測範囲内に特定した計測位置pが位置していることである。より具体的には、ステップS5において、変位センサ68の計測範囲内に特定した計測位置pが位置するときの移動機構8の移動量と、回転機構64の回転量とが特定されるため、計測条件は、移動機構8の移動量と、回転機構64の回転量とがステップS5において特定された値に達したことで成立する。
In step S6, the
ステップS7において、変位センサ68は、計測を行なう。コントローラ200は、変位センサ68からの信号を受け、計測結果を算出する。このとき、PLC100は、移動機構8および回転機構64を停止するための指示を出力するようにしてもよい。
In step S7, the
ステップS8において、PLC100は、設定されている全ての計測部分の計測が完了したか否かを判定する。設定されている全ての計測部分の計測が完了したと判定されるまで、ステップS2〜ステップS8までの処理が繰り返され、設定されている全ての計測部分の計測が完了したと判定されると、計測処理は終了される。
In step S8, the
<E.計測位置の特定>
PLC100および画像処理装置400は、カメラ66が撮像した画像に基づいて計測位置pを特定する。図6は、計測位置pの特定方法を説明するための図である。画像処理装置400は、まず、計測部分Pの位置および姿勢を公知のパターンマッチングを利用して特定する。より具体的には、計測部分Pごとに予め定められている画像特徴の位置および姿勢を特定することで、計測部分Pの位置および姿勢(「実測位置姿勢SPm」とする。)を特定することができる。図6においては、2本の線分が計測部分Pの画像特徴である。
<E. Determination of measurement position>
The
次に、PLC100は、実測位置姿勢SPmから、計測部分の位置ずれ量を算出する。具体的には、実際に撮像した画像に基づいて計測された実測位置姿勢SPmと、基準経路の設定時の条件下で得られる計測部分P(「基準計測部分Pt」とする。)の位置および姿勢(「基準位置姿勢SPt」とする。)とを比較して、位置ずれ量を算出する。
Next, the
より具体的には、PLC100は、実測位置姿勢SPmを取得したときの移動機構8の移動量と回転機構64の回転量とを特定することができる。基準経路の設定時の条件下で、特定した移動量および回転量で移動機構8および回転機構64を制御した場合の計測部分の位置および姿勢が基準位置姿勢SPtに相当する。PLC100は、基準位置姿勢SPtを取得し、式(1)に従って、基準位置姿勢SPtからの位置ずれ量ΔPを求める。なお、基準位置姿勢SPtは、本願発明の基準経路に応じて定められる基準位置の一例である。
More specifically, the
計測位置は、計測部分Pの位置に対応付けて予め定められている。図6に示す例では、1つの計測部分Pに対して、複数の計測位置pが設定されている。なお、基準計測部分Ptに対する計測位置を基準位置spt(xt,yt)とし、実際の計測部分Pに対する計測位置を実測位置spm(xm,ym)とする。 The measurement position is predetermined in association with the position of the measurement portion P. In the example shown in FIG. 6, a plurality of measurement positions p are set for one measurement portion P. The reference position measuring position relative to a reference measurement portion P t sp t (x t, y t) and, measured measurement position for the actual measurement portion P position sp m (x m, y m ) and.
基準位置sptに位置ずれ量ΔPを反映することで、実測位置spmを算出することができる。具体的には、式(2)に基づいて算出される。
By reflecting the positional deviation amount ΔP to the reference position sp t, it can be calculated measured positions sp m. Specifically, it is calculated based on equation (2).
式(1)において、T( )は、並進移動に対応する変換式を示し、X座標の位置ずれ量ΔXおよびY座標の位置ずれ量ΔYに基づいて定められる。また、R( )は、回転移動に対応する変換式を示し、回転方向の位置ずれ量Δθに基づいて定められる。なお、T( )およびR( )は、式(3)から求めることができる。すなわち、基準位置姿勢SPtおよび実測位置姿勢SPmに基づいて、R( )およびT( )が算出される。
In equation (1), T () represents a conversion equation corresponding to translation, and is determined based on the displacement amount ΔX of the X coordinate and the displacement amount ΔY of the Y coordinate. R () indicates a conversion formula corresponding to the rotational movement, and is determined based on the positional deviation amount Δθ in the rotational direction. Note that T () and R () can be obtained from Expression (3). That is, based on the reference position and orientation SP t and the actually measured position and orientation SP m, R () and T () is calculated.
以上のように、PLC100および画像処理装置400は、カメラ66が撮像した画像に基づいて実測位置spmを特定する。なお、画像処理装置400が、カメラ66が撮像した画像に基づいて実測位置spmを特定するようにしてもよい。この場合、PLC100から、計測部分Pの実測位置姿勢SPmを取得したときの移動機構8の移動量と回転機構64の回転量に関する情報を画像処理装置400は受信する。
As described above, the
<F.基準経路の修正>
PLC100は、計測位置pが変位センサ68の計測範囲内を通過するように、基準経路を修正する。図7は、基準経路の修正方法を説明するための図である。
<F. Correction of reference route>
The
図7の中央を通る実線は、回転体62の回転中心Oが通過する経路L1を表す。前述のように、本実施の形態においては、回転体62の回転中心Oが通過する経路を修正することなく、回転体62を回転させることで、基準経路を修正して、計測位置pが変位センサ68の計測範囲内を通過するようにする。
The solid line through the middle of FIG. 7 represents the path L 1 the rotational center O of the
具体的には、回転体62の回転中心Oが通過する経路は修正されないため、カメラ66座標内における経路L1は、カメラ座標の関数(y=f(x))で表すことができる。また、変位センサ68は、回転体62に固定されているため、回転中心Oを中心に回転する。PLC100は、変位センサ68と回転中心Oとの距離を半径Rとすると、半径Rを画像内のピクセル値に変換した距離r、経路L1、および特定された計測位置pに基づいて、計測位置p上を変位センサ68が通過するときの回転中心Oの位置C(xc,yc)と、回転角度θsとを求めることができる。
Specifically, since the path whereby the rotational center O of the
具体的には、PLC100は、計測位置pを中心とした半径rの円と、経路L1を表すy=f(x)の直線との交点を求め、回転体62の進行方向に対して、計測位置pよりも前方に位置するという制限を設けることで、位置C(xc,yc)が算出される。PLC100は、算出した位置C(xc,yc)と、実測位置spm(xm,ym)と、半径rとに基づいて、回転角度θsを算出する。
Specifically, the
PLC100は、回転体62の回転中心Oが位置C(xc,yc)を通過するときまでに、回転体62の回転角度がθsとなるように回転機構64を制御する。また、PLC100は、回転体62の回転中心Oが位置C(xc,yc)を通過するときであって、回転体62の回転角度がθsとなったときに、計測条件が成立したものとして、コントローラ200に計測指令を出力する。計測指令には、位置C(xc,yc)の情報が含まれ、コントローラ200は、位置C(xc,yc)および位置Cにおける変位センサ68からの信号に基づいて、計測結果を算出し、出力する。
PLC100 the rotation center O of the
<G.ハードウェア構成>
次に、上記で説明した計測を実現するための、計測システム1を構成する各種装置のハードウェア構成について説明する。
<G. Hardware Configuration>
Next, a description will be given of a hardware configuration of various devices constituting the
(g1.画像処理装置のハードウェア構成)
図8は、画像処理装置400のハードウェア構成を示す模式図である。画像処理装置400は、CPU(Central Processing Unit)やMPU(Micro-Processing Unit)などのプロセッサ402と、RAM(Random Access Memory)404と、表示コントローラ406と、システムコントローラ408と、I/O(Input Output)コントローラ410と、ハードディスク412と、カメラインターフェイス414と、コントローラインターフェイス418と、通信インターフェイス420と、メモリカードインターフェイス422とを含む。これらの各部は、システムコントローラ408を中心として、互いにデータ通信可能に接続される。
(G1. Hardware configuration of image processing apparatus)
FIG. 8 is a schematic diagram illustrating a hardware configuration of the
プロセッサ402は、システムコントローラ408との間でプログラム(コード)などを交換して、これらを所定順序で実行することで、目的の演算処理を実現する。
The
システムコントローラ408は、プロセッサ402、RAM404、表示コントローラ406およびI/Oコントローラ410とそれぞれバスを介して接続されており、各部との間でデータ交換などを行うとともに、画像処理装置400全体の処理を司る。
The
RAM404は、典型的には、DRAM(Dynamic Random Access Memory)などの揮発性の記憶装置であり、ハードディスク412から読み出されたプログラムや、カメラ66によって取得された画像(画像データ)、画像に対する処理結果およびワークデータなどを保持する。
The
表示コントローラ406は、表示部432と接続されており、システムコントローラ408からの内部コマンドに従って、各種の情報を表示するための信号を表示部432へ出力する。
The
I/Oコントローラ410は、画像処理装置400に接続される記録媒体や外部機器との間のデータ交換を制御する。より具体的には、I/Oコントローラ410は、ハードディスク412と、カメラインターフェイス414と、入力インターフェイス416と、コントローラインターフェイス418と、通信インターフェイス420と、メモリカードインターフェイス422と接続される。
The I /
ハードディスク412は、記憶装置の一例であって、プロセッサ402で実行される画像処理プログラム440およびプロジェクトファイル442を含む。記憶装置は、ハードディスク412のような不揮発性の磁気記憶装置に限らず、フラッシュメモリなどの半導体記憶装置であってもよいし、DVD−RAM(Digital Versatile Disk Random Access Memory)などの光学記憶装置であってもよい。
The
画像処理プログラム440は、PLC100からの撮像指令に従った画像を取得する処理や、パターンマッチングを行なうための処理を実行するためのプログラムである。より具体的には、画像処理プログラム440は、プロジェクトファイル442に格納された設定条件にしたがって、計測部分Pの位置および姿勢を特定するための処理を実行する。画像処理プログラム440は、他のプログラムの一部に組み込まれて提供されるものであってもよい。その場合、画像処理プログラム440自体は、他のプログラムと協働して予め定められた処理を実行する。すなわち、画像処理プログラム440としては、このような他のプログラムに組み込まれた形態であってもよい。また、代替的に、画像処理プログラム440の実行により提供される機能の一部もしくは全部を専用のハードウェア回路として実装してもよい。
The
カメラインターフェイス414は、ワークWを撮影することで生成された画像データを受け付ける入力部に相当し、カメラ66とプロセッサ402との間のデータ伝送を仲介する。より具体的には、カメラインターフェイス414は、1つ以上のカメラ66と接続が可能であり、プロセッサ402からカメラインターフェイス414を介してカメラ66に撮影指示が出力される。これにより、カメラ66は、被写体を撮影し、生成した画像をカメラインターフェイス414を介してプロセッサ402に出力する。
The
入力インターフェイス416は、プロセッサ402とキーボード434、マウス、タッチパネル、専用コンソールなどの入力装置との間のデータ伝送を仲介する。
The
コントローラインターフェイス418は、PLC100とプロセッサ402との間のデータ伝送を仲介する。より具体的には、コントローラインターフェイス418は、PLC100によって制御される生産ラインの状態に係る情報やワークWに係る情報、撮像指令などをプロセッサ402へ伝送する。
通信インターフェイス420は、プロセッサ402と図示しない他のパーソナルコンピュータやサーバ装置などとの間のデータ伝送を仲介する。通信インターフェイス420は、典型的には、イーサネット(登録商標)やUSB(Universal Serial Bus)などからなる。
The communication interface 420 mediates data transmission between the
メモリカードインターフェイス422は、プロセッサ402と記録媒体であるメモリカード436との間のデータ伝送を仲介する。メモリカード436には、画像処理装置400で実行される画像処理プログラム440などが格納された状態で流通し、メモリカードインターフェイス422は、このメモリカード436からこれらのプログラムを読み出す。メモリカード436は、SD(Secure Digital)などの汎用的な半導体記憶デバイスや、フレキシブルディスク(Flexible Disk)などの磁気記録媒体や、CD−ROM(Compact Disk Read Only Memory)などの光学記録媒体等からなる。あるいは、通信インターフェイス420を介して、配信サーバなどからダウンロードしたプログラムを画像処理装置400にインストールしてもよい。
The
(g2.コントローラ200のハードウェア構成)
図9を参照して、変位センサ68を制御するコントローラ200のハードウェア構成について説明する。図9は、コントローラ200のハードウェア構成の一例を示す模式図である。
(G2. Hardware configuration of controller 200)
The hardware configuration of the
コントローラ200は、CPU(Central Processing Unit)やMPU(Micro-Processing Unit)などのプロセッサ202と、RAM(Random Access Memory)204と、表示コントローラ206と、システムコントローラ208と、I/O(Input Output)コントローラ210と、ハードディスク212と、センサインターフェイス214と、コントローラインターフェイス218と、通信インターフェイス220と、メモリカードインターフェイス222とを含む。これらの各部は、システムコントローラ208を中心として、互いにデータ通信可能に接続される。
The
プロセッサ202は、システムコントローラ208との間でプログラム(コード)などを交換して、これらを所定順序で実行することで、目的の演算処理を実現する。
The
システムコントローラ208は、プロセッサ202、RAM204、表示コントローラ206およびI/Oコントローラ210とそれぞれバスを介して接続されており、各部との間でデータ交換などを行うとともに、画像処理装置400全体の処理を司る。
The
RAM204は、典型的には、DRAM(Dynamic Random Access Memory)などの揮発性の記憶装置であり、ハードディスク212から読み出されたプログラムや、変位センサ68によって取得された画像(画像データ)、画像に対する処理結果およびワークデータなどを保持する。
The
表示コントローラ206は、表示部232と接続されており、システムコントローラ208からの内部コマンドに従って、各種の情報を表示するための信号を表示部232へ出力する。
The
I/Oコントローラ210は、コントローラ200に接続される記録媒体や外部機器との間のデータ交換を制御する。より具体的には、I/Oコントローラ210は、ハードディスク212と、センサインターフェイス214と、入力インターフェイス216と、コントローラインターフェイス218と、通信インターフェイス220と、メモリカードインターフェイス222と接続される。
The I /
ハードディスク212は、記憶装置の一例であって、プロセッサ202で実行される計測プログラム240を含む。記憶装置は、ハードディスク212のような不揮発性の磁気記憶装置に限らず、フラッシュメモリなどの半導体記憶装置であってもよいし、DVD−RAM(Digital Versatile Disk Random Access Memory)などの光学記憶装置であってもよい。
The
計測プログラム240は、PLC100からの計測指令に従った変位センサ68からの信号を取得する処理や、取得した信号に基づいて計測部分Pに対する計測結果を算出する処理や、算出した計測結果を出力する処理などを実行するためのプログラムである。計測プログラム240は、他のプログラムの一部に組み込まれて提供されるものであってもよい。その場合、計測プログラム240自体は、他のプログラムと協働して予め定められた処理を実行する。すなわち、計測プログラム240としては、このような他のプログラムに組み込まれた形態であってもよい。また、代替的に、計測プログラム240の実行により提供される機能の一部もしくは全部を専用のハードウェア回路として実装してもよい。
The
センサインターフェイス214は、変位センサ68からの信号を受け付ける入力部および、変位センサ68に計測指示を出力する出力部に相当し、変位センサ68とプロセッサ202との間のデータ伝送を仲介する。より具体的には、センサインターフェイス214は、1つ以上の変位センサ68と接続が可能であり、プロセッサ202からセンサインターフェイス214を介して変位センサ68に計測指示が出力される。これにより、変位センサ68の投光部61から計測位置pに向けて光が投光され、計測位置pに反射した光を受光した受光部63からの信号がセンサインターフェイス214を介してプロセッサ202に出力される。
The
入力インターフェイス216は、プロセッサ202とキーボード234、マウス、タッチパネル、専用コンソールなどの入力装置との間のデータ伝送を仲介する。
The
コントローラインターフェイス218は、PLC100とプロセッサ202との間のデータ伝送を仲介する。より具体的には、コントローラインターフェイス218は、PLC100によって制御される生産ラインの状態に係る情報やワークWに係る情報、撮像指令などをプロセッサ202へ伝送する。
通信インターフェイス220は、プロセッサ202と図示しない他のパーソナルコンピュータやサーバ装置などとの間のデータ伝送を仲介する。通信インターフェイス220は、典型的には、イーサネット(登録商標)やUSB(Universal Serial Bus)などからなる。
The
メモリカードインターフェイス222は、プロセッサ202と記録媒体であるメモリカード236との間のデータ伝送を仲介する。メモリカード236には、コントローラ200で実行される計測プログラム240などが格納された状態で流通し、メモリカードインターフェイス222は、このメモリカード236からこれらのプログラムを読み出す。メモリカード236は、SD(Secure Digital)などの汎用的な半導体記憶デバイスや、フレキシブルディスク(Flexible Disk)などの磁気記録媒体や、CD−ROM(Compact Disk Read Only Memory)などの光学記録媒体等からなる。あるいは、通信インターフェイス420を介して、配信サーバなどからダウンロードしたプログラムを画像処理装置400にインストールしてもよい。
The
(g3.PLC100のハードウェア構成)
図10を参照して、PLC100のハードウェア構成について説明する。図10は、PLC100のハードウェア構成の一例を示す模式図である。
(G3. Hardware configuration of PLC 100)
The hardware configuration of the
PLC100は、チップセット112と、プロセッサ114と、不揮発性メモリ116と、主メモリ118と、システムクロック120と、メモリカードインターフェイス122と、通信インターフェイス128と、内部バスコントローラ130と、フィールドバスコントローラ138とを含む。チップセット112と他のコンポーネントとの間は、各種のバスを介してそれぞれ結合されている。
The
プロセッサ114およびチップセット112は、典型的には、汎用的なコンピュータアーキテクチャに従う構成を有している。すなわち、プロセッサ114は、チップセット112から内部クロックに従って順次供給される命令コードを解釈して実行する。チップセット112は、接続されている各種コンポーネントとの間で内部的なデータを遣り取りするとともに、プロセッサ114に必要な命令コードを生成する。システムクロック120は、予め定められた周期のシステムクロックを発生してプロセッサ114に出力する。チップセット112は、プロセッサ114での演算処理の実行の結果得られたデータなどをキャッシュする機能を有する。
The
PLC100は、記憶手段として、不揮発性メモリ116および主メモリ118を有する。不揮発性メモリ116は、OS、システムプログラム、ユーザプログラム140、ログ情報などを不揮発的に保持する。主メモリ118は、揮発性の記憶領域であり、プロセッサ114で実行されるべき各種プログラムを保持するとともに、各種プログラムの実行時の作業用メモリとしても使用される。
The
ユーザプログラム140は、ユーザによって作成されるプログラムであって、通信インターフェイス128を介して接続される設定用の外部PCから送られたり、または、メモリカード124に格納された状態で流通したりする。
The
PLC100は、通信手段として、通信インターフェイス128と、内部バスコントローラ130と、フィールドバスコントローラ138とを有する。これらの通信回路は、データの送信および受信を行なう。
The
通信インターフェイス128は、コントローラ200や画像処理装置400との間でデータを遣り取りする。一例として、PLC100は、通信インターフェイス128を介して画像処理装置400に対して撮像指示を出力する。あるいは、PLC100は、通信インターフェイス128を介して画像処理装置400から計測部分Pの位置および姿勢に関する計測結果を受け付ける。また、PLC100は、通信インターフェイス128を介してコントローラ200に対して計測指示を出力する。
The
内部バスコントローラ130は、内部バス126を介したデータの遣り取りを制御する。より具体的には、内部バスコントローラ130は、DMA(Dynamic Memory Access)制御回路132と、内部バス制御回路134と、バッファメモリ136とを含む。
The
メモリカードインターフェイス122は、PLC100に対して着脱可能なメモリカード124とプロセッサ114とを接続する。
The
フィールドバスコントローラ138は、フィールドネットワークに接続するための通信インターフェイスである。PLC100は、フィールドバスコントローラ138を介してサーボドライバ300やドライバユニット500と接続される。
The
<H.機能構成>
図11および図12を参照して、本実施の形態の計測システム1の機能全体について説明する。図11は、経路の修正において機能する計測システム1の機能構成の一例を示す図である。図12は、計測時ならびに経路に沿って移動機構および回転機構を制御するときに機能する計測システム1の機能構成の一例を示す図である。なお、PLC100の各種機能は、ユーザプログラム140が実行されることで実現される。画像処理装置400の各種機能は画像処理プログラム440およびプロジェクトファイル442に従って処理が実行されることで実現される。
<H. Functional Configuration>
With reference to FIG. 11 and FIG. 12, the entire function of the
(h1.経路の修正)
画像処理装置400は、撮像制御部42、位置・姿勢計測部44、およびモデル画像データ46を備える。
(H1. Correction of route)
The
モデル画像データ46は、プロジェクトファイル442に含まれるデータであって、基準経路を生成するための設定が行われることで生成される。モデル画像データ46は、計測部分Pごとに予め定められている画像特徴を示す画像データである。モデル画像データ46は、複数の計測部分Pの各々を識別するための計測番号と対応付けて記憶されている。
The
画像処理装置400は、PLC100から送られる、撮像指令と、撮像視野内に含まれる計測部分Pの計測番号とに基づいて計測部分Pの位置および姿勢を計測し、図6に示した実測位置姿勢SPmを得る。
The
具体的には、撮像制御部42は、PLC100からの撮像指令に従ってカメラ66に撮像を指示する。
Specifically, the
位置・姿勢計測部44は、撮像制御部42からの撮像指示に従ってカメラ66が撮像することで得られる画像データと、PLC100から送られた計測番号に対応するモデル画像データ46とを比較することで、計測部分Pの位置および姿勢を計測し、実測位置姿勢SPmを得る。位置・姿勢計測部44が計測して得られる実測位置姿勢SPmをPLC100に送信する。
The position /
PLC100は、撮像条件判定部12と、撮像条件データ182と、位置・姿勢取得部142と、位置・姿勢データ184と、位置ずれ量算出部144と、計測位置算出部146と、計測位置データ186と、計測ポイント算出部162と、経路データ190と、回転角度算出部164と、移動量算出部166と、軌道修正部168と、計測条件修正部170と、計測条件データ196とを備える。
The
PLC100は、制御周期ごとに各サーボドライバ300,500X,500Yからエンコーダ値を取得する。移動機構8および回転機構64の各々は、サーボモータごとにエンコーダを備えている。エンコーダはサーボモータの移動量に応じたパルス信号を発生させ、移動量をエンコーダ値として計測する。すなわち、サーボドライバ300からのエンコーダ値は、回転体62の初期位置からの回転移動量に相当する。サーボドライバ500Xからのエンコーダ値は、Xステージ84Xの初期位置からの並進移動量に相当する。サーボドライバ500Yからのエンコーダ値は、Yステージ84Yの初期位置からの並進移動量に相当する。
The
撮像条件データ182は、撮像条件を示すデータであって、基準経路が生成されることで得られる情報であって、計測部分Pごとに記憶されている。撮像条件は、たとえば、カメラ66の撮像範囲に計測部分Pが位置するときの回転体62の回転移動量と、Xステージ84Xの並進移動量と、Yステージ84Yの並進移動量との組合せからなる。撮像条件データ182は、計測部分Pを識別するための計測番号と、計測番号が示す計測部分Pの撮像条件との組合せから構成される。
The
撮像条件判定部12は、制御周期ごとに取得するエンコーダ値および撮像条件データ182に基づいて、撮像条件が成立したか否かを判定する。撮像条件判定部12は、撮像条件が成立したと判定した場合、撮像制御部42に対して撮像指令を送るとともに、成立した撮像条件に対応する計測部分Pの計測番号を位置・姿勢計測部44に送る。
The imaging
位置・姿勢取得部142は、カメラ66の撮像時におけるカメラ66と移動機構8との間の相対位置と、位置・姿勢データ184に基づいて、基準経路の設定時の条件下で得られる計測部分Pの位置および姿勢を取得する。具体的には、位置・姿勢取得部142は、図6に示した基準位置姿勢SPtを取得する。
The position /
カメラ66の撮像時におけるカメラ66と移動機構8との間の相対位置は、カメラ位置であり、カメラ66が計測部分Pを撮像したタイミングにおけるエンコーダ値に基づいて撮像条件判定部12が推定する。
The relative position between the
位置・姿勢データ184は、カメラ位置と基準位置姿勢SPtとの関係を示すデータであて、基準経路の設定時に用いられるワークWの表面を示すデータと、設定時のワークWの設置位置に基づいて得られる。
Position and
位置・姿勢取得部142は、位置・姿勢データ184から、撮像条件判定部12が推定したカメラ位置に対応する基準位置姿勢SPtを取得する。
Position and
位置ずれ量算出部144は、上述した式(1)に従い、位置・姿勢計測部44から得られる実測位置姿勢SPmと、位置・姿勢取得部142が取得する基準位置姿勢SPtとに基づいて位置ずれ量ΔPを算出する。
Positional shift
計測位置算出部146は、上述した式(2)に従い、基準計測部分Ptに対する基準位置sptとの対応関係を示す計測位置データ186と、位置ずれ量ΔPとに基づいて、実測位置spmを算出する。計測位置データ186は、計測部分Pと、計測部分Pに対して設定されている計測位置pのカメラ座標値(spt)とが対応付けられたデータであって、計測番号と計測番号が示す計測部分に対応する基準位置sptとの組合せから構成され、計測条件を設定する際に生成されるデータである。計測位置算出部146は、計測対象としている計測部分Pの計測番号に基づいて、計測番号に対応する基準位置sptを計測位置データ186から取得し、取得した基準位置sptに対して、位置ずれ量ΔPを反映して、実測位置spmを算出する。
The measurement
計測ポイント算出部162は、計測位置p上を変位センサ68が通過するときの回転中心Oの位置C(xc,yc)を算出する。計測ポイント算出部162は、計測位置算出部146が算出した実測位置spmと、回転体62の回転中心Oが通過する経路を示す並進移動データ192とに基づいて、カメラ座標系での位置C(xc,yc)を算出する。
Measuring
経路データ190は、ワークWと回転体62との相対位置の変化および、ワークWと変位センサ68との相対位置の変化を含むデータである。具体的には、経路データ190は、移動機構8の経時的な動きを示す並進移動データ192と、回転機構64の経時的な動きを示す回転移動データ194とを含む。
The
並進移動データ192は、ワークWと回転体62との相対位置の変化を示すデータに相当し、言い換えると、ワークW上を回転体62の回転中心Oが移動する経路ともいえ、図7中の経路L1に相当する。
The
計測ポイント算出部162は、並進移動データ192に基づいて経路L1をカメラ座標系の関数(y=f(x))で表し、計測位置pを中心とした半径rの円と、経路L1との交点を求めることで位置Cを算出する。
Measuring
回転角度算出部164は、計測ポイント算出部162が算出した位置Cと、並進移動データ192に基づいて表される経路L1のカメラ座標系の関数(y=f(x))と、実測位置spmとに基づいて、回転角度θsを算出する。
Rotation
移動量算出部166は、カメラ座標系の位置C上に回転中心Oが位置するときの移動機構8の並進移動量(ΔX,ΔY)と、回転角度θsとなる回転機構64の回転移動量(Δθ)とを算出する。
Movement
軌道修正部168は、移動量算出部166が求めた並進移動量(ΔX,ΔY)に達するまでに回転移動量(Δθ)に達するように並進移動データ192に対応付けて回転移動データ194を修正する。
The
計測条件修正部170は、変位センサ68の計測条件を示す計測条件データ196を修正する。具体的には、計測条件修正部170は、移動量算出部166が求めた並進移動量(ΔX,ΔY)に達し、かつ、回転移動量(Δθ)に達したときを一の計測条件とする。
The measurement
これにより、回転機構64の経時的な動きと、変位センサ68の計測条件とが修正される。
Thereby, the temporal movement of the
なお、PLC100は、判定部176をさらに備えてもよい。判定部176は、位置ずれ量算出部144が算出した位置ずれ量ΔPが予め定められた許容値を超えているか否かを判定する。ここで、予め定められた許容値とは、たとえば、回転体62を回転させて変位センサ68とワークWとの間の相対位置を調整するだけで対応することのできる範囲を示す値である。具体的には、位置ずれ量が、変位センサ68と回転体62の回転中心Oとの距離Rに相当する値以上である場合は、回転体62を回転させたとしても、変位センサ68の計測範囲内に計測位置pを位置させることができない。
Note that the
判定部176は、位置ずれ量ΔPが、予め定められた許容値を超えている場合に、ユーザに判定結果を通知するため、通知部178に判定結果を出力する。通知部178は、表示による通知、ランプによる通知、音による通知、または停止信号を出力して処理を停止することによる通知など、種々の方法でユーザに対して通知が可能であって、どのような方法で通知してもよい。
The
なお、本実施の形態において、図11に示す、位置・姿勢計測部44、位置ずれ量算出部144および計測位置算出部146によって、本願発明の位置決定手段の機能が実現される。本実施の形態においては、位置決定手段の機能が、画像処理装置400とPLC100とによって実現されるものの、PLC100だけで実現されるものであってもよく、あるいは、画像処理装置400だけで実現されるものであってもよく、また、他の別の装置を合わせた3つ以上の装置によって実現されるものであってもよい。
In the present embodiment, the function of the position determining means of the present invention is realized by the position /
(h2.移動機構および回転機構の制御)
図12を参照して、経路に沿って移動機構8および回転機構64を制御するときに機能する計測システム1の機能構成について説明する。PLC100は、目標移動量指定部174を備える。
(H2. Control of moving mechanism and rotating mechanism)
With reference to FIG. 12, a functional configuration of the
目標移動量指定部174は、経路データ190に従って目標移動量を指定する。経路データ190は、カメラ66によって複数の計測部分Pの各々を順次撮像するとともに、変位センサ68の計測範囲内を計測位置pの各々が通過するようにするための情報であって、前述のように計測部分を撮像するたびに適宜修正される。
The target movement
目標移動量指定部174は、サーボドライバ300,500X,500Yの各々から送られるエンコーダ値と、経路データ190とに基づいて、サーボドライバ300,500X,500Yの各々の目標移動量MVX,MVY,MVθを算出し、各サーボドライバ300,500X,500Yに移動命令を出す。
Based on the encoder value sent from each of the
(h3.変位センサによる計測)
図12を参照して、変位センサ68により計測を行なうときに機能する計測システム1の機能構成について説明する。
(H3. Measurement by displacement sensor)
With reference to FIG. 12, a functional configuration of the
PLC100は、計測条件判定部172を備える。計測条件判定部172は、制御周期ごとに取得するエンコーダ値および計測条件データ196に基づいて、計測条件が成立したか否かを判定する。計測条件データ196は、計測条件を示すデータであって、計測位置と、計測位置に変位センサ68の計測範囲内が位置するときの並進移動量(ΔX,ΔY)および回転移動量(Δθ)の組合せとから構成される。計測条件判定部172は、エンコーダ値から算出される移動量が、計測条件データ196が示す並進移動量(ΔX,ΔY)および回転移動量(Δθ)に達しているか否かを判定し、達していると判定した場合に、コントローラ200に計測指示を出す。
The
コントローラ200は、計測指示に従って変位センサ68を制御して、計測結果を得る。なお、計測指示には、計測位置pの位置情報が含まれる。コントローラ200は、複数の計測位置pを計測することで、複数の計測位置pにより指定される部位の形状が得られる。
The
<I.基準経路の設定>
計測システム1は、基準経路、撮像条件、および各計測部分に対応する計測位置を設定するための設定装置70をさらに備えてもよい。図13は、設定装置70の機能構成の一例を示す図である。
<I. Setting of reference route>
The
設定装置70は、表示部71と、記憶部72と、計測位置決定部73と、モデル画像生成部74と、経路生成部75と、移動量決定部76と、撮像条件決定部77と、位置・姿勢情報生成部78と、計測条件決定部79とを備える。表示部71は、たとえばタッチパネルである。記憶部72は、例えば、ハードディスクドライブ、ソリッドステートドライブ等の補助記憶装置であり、計測位置決定部73と、モデル画像生成部74と、経路生成部75と、移動量決定部76と、撮像条件決定部77と、位置・姿勢情報生成部78と、計測条件決定部79とで実行される処理プログラム、指定経路の設定に関する情報を示すデータおよび、処理プログラムが実行されることで得られるデータ等を記憶する。
The
計測位置決定部73は、記憶部72に格納されたワークWの設計上の表面を示す3次元設計データ(たとえばCAD(Computer-Aided Design)データ)を読み込み、表示部71にワークWの設計上の外観を示す模式図を表示させる。計測位置決定部73は、ユーザ入力に従って、ワークW上の複数の計測部分および計測部分に対応する計測位置を決定し、計測部分と計測位置との対応関係を示す計測位置データ186を生成する。
The measurement
モデル画像生成部74は、計測位置決定部73がユーザの入力に従って決定した計測部分を示すモデル画像を計測部分ごとに対応付けて記憶し、モデル画像データ46を生成する。
The model
経路生成部75は、計測位置決定部73が決定した複数の計測位置の各々が変位センサ68の計測範囲内を通過するような経路を生成する。経路生成部75は、ユーザ自身で計測位置の各々を繋いだ線を入力し、その入力に従って経路を生成してもよく、また、予め定められた条件を満たす経路を自動で生成してもよい。予め定められた条件は、たとえば、経路の長さが最も短くなることなどを含む。
The
移動量決定部76は、経路生成部75が生成した経路に基づき、生成した経路を実現可能な並進移動量の変位と、並進移動量の変位に対応付けられた回転移動量の変位とを決定することで、経路データ190を生成する。
The movement
撮像条件決定部77は、移動量決定部76が決定した並進移動量の変位と、並進移動量の変位に対応付けられた回転移動量の変位と、計測部分の位置とに基づいて、計測部分がカメラ66の撮像範囲に位置するときの並進移動量と回転移動量との組合せを特定する。撮像条件決定部77は、特定した並進移動量と回転移動量との組合せを撮像条件に決定し、撮像条件データ182を生成する。
The imaging
位置・姿勢情報生成部78は、撮像条件決定部77が決定した撮像条件下で計測部分を撮像したときの計測部分の位置および姿勢を特定し、位置・姿勢データ184を生成する。なお、並進移動量と回転移動量とに基づいてカメラ66とワークWとの相対位置が特定されることから、並進移動量と回転移動量とカメラ座標系における計測部分の位置および姿勢との関係を求めることができるため、その関係を位置・姿勢データ184としてもよい。
The position / posture
計測条件決定部79は、移動量決定部76が決定した並進移動量の変位と、並進移動量の変位に対応付けられた回転移動量の変位と、計測位置とから、計測位置ごとに、その計測位置が変位センサ68の計測範囲内に位置するときの並進移動量と回転移動量とを特定する。計測条件決定部79は、計測位置ごとに特定された並進移動量と回転移動量との関係を計測条件とし、計測条件データ196を生成する。
The measurement
設定装置70が生成した各データ(計測位置データ186、モデル画像データ46、経路データ190、撮像条件データ182、位置・姿勢データ184、計測条件データ196)は、PLC100に送られる。PLC100は、モデル画像データ46を画像処理装置400に送る。
Each data (
<J.作用・効果>
以上のように、本実施の形態の計測システム1においては、回転体62の進行方向に対して前方にカメラ66が位置するようにして複数の計測部分の各々を撮像し、撮像して得られた画像に基づいて変位センサ68で計測する計測位置を決定して、決定した計測位置上を変位センサ68の計測範囲が通過するように回転機構64および移動機構8を制御する。そのため、回転体62の進行方向に対してカメラ66が前方、変位センサ68が後方となるように制御されるため、カメラ66により正確な計測位置を特定した上で、その特定された計測位置上を変位センサ68が通過するように位置を調整することができる。また、カメラ66で計測部分を撮像した後、カメラ66が撮像した計測部分上を変位センサ68が通過することとなるため、カメラ66よりも先に変位センサ68が計測部分上を通過する場合に比べて、時間や移動量のロスを減らすことができる。
<J. Action / Effect>
As described above, in the
また、本実施の形態において、回転体62の進行方向に対するカメラ66と変位センサ68との位置関係を調整する調整機構として回転体62を回転させる回転機構64が用いられる。これにより、回転というシンプルな機構でカメラ66と変位センサ68との間の位置関係を調整することができるため、容易に調整することができる。
In the present embodiment, a
また、本実施の形態において、図6に示すように、一の計測部分に対して複数の計測位置が設定されており、一の計測部分の位置を特定することで、対応する複数の計測位置の各々が特定される。これにより、撮像回数を減らすことができ、その結果、全体の計測時間を短くすることができる。 Further, in the present embodiment, as shown in FIG. 6, a plurality of measurement positions are set for one measurement part, and by specifying the position of one measurement part, a plurality of measurement positions corresponding to the measurement part are determined. Are specified. Thereby, the number of times of imaging can be reduced, and as a result, the overall measurement time can be shortened.
また、本実施の形態においては、基準経路が予め定められており、計測位置を特定する度に修正される。そのため、基準経路が予め定められていない場合に比べて、計測システム全体の処理を簡略化することができ、その結果、計測システムにおける処理負担を軽減することができる。 Further, in the present embodiment, the reference route is predetermined, and is corrected every time the measurement position is specified. Therefore, the processing of the entire measurement system can be simplified as compared with the case where the reference route is not predetermined, and as a result, the processing load on the measurement system can be reduced.
また、本実施の形態においては、回転機構64の変位量(回転移動データ194)のみ修正される。そのため、修正対象が少なく、計測システム全体の処理を簡略化することができ、その結果、計測システムにおける処理負担を軽減することができる。
In the present embodiment, only the displacement amount (rotational movement data 194) of the
また、本実施の形態においては、位置ずれ量ΔPが、予め定められた許容値を超えているか否かを判定し、判定結果がユーザに通知される。そのため、基準位置に対する計測部分の位置ずれが大きく、基準経路の修正量が多くなるような場合にユーザに通知することができ、ユーザフレンドリーな計測システムを提供することができる。 Further, in the present embodiment, it is determined whether or not the displacement amount ΔP exceeds a predetermined allowable value, and the determination result is notified to the user. Therefore, it is possible to notify the user when the displacement of the measurement portion with respect to the reference position is large and the correction amount of the reference route is large, so that a user-friendly measurement system can be provided.
<K.変位センサの計測範囲を通過させる方法の変形例>
本実施の形態においては、回転移動データ194と並進移動データ192とのうち、並進移動データ192のみを修正することで、計測位置上を変位センサ68の計測範囲が通過するようにした。なお、回転移動データ194と並進移動データ192とのうち、いずれのデータも修正するようにしてもよく、また、並進移動データ192のみを修正するようにしてもよい。
<K. Modification of Method for Passing Through Measurement Range of Displacement Sensor>
In the present embodiment, of the
また、本実施の形態において、軌道修正部168は、移動量算出部166が求めた並進移動量(ΔX,ΔY)に達するまでに回転移動量(Δθ)に達するように回転移動データ194を修正するとした。なお、修正方法としては、並進移動量に達するまでの時間を調整するようにしてもよく、または、回転移動量に達するまでの時間を調整するようにしてもよい。
In the present embodiment, the
また、本実施の形態においては、予め基準経路を設定し、カメラ66により撮像した画像に基づいて計測位置を特定し、適宜基準経路を修正することで計測位置上を変位センサ68の計測範囲が通過するようにした。なお、基準経路を予め設定しなくともよい。具体的には、計測部分の特徴画像を設定し、特徴画像を探索するように移動機構8および回転機構64を制御し、特徴画像がカメラ66の撮像視野に位置する度に、計測位置を特定するとともに特定した計測位置上を変位センサ68の計測範囲が通過するような軌道を生成してもよい。
Further, in the present embodiment, the measurement range of the
<L.計測システム1の変形例>
図14〜図17は、変形例に係る計測システムを示す図である。図14に示される計測システム1bは、図2に示す計測システム1と比較して、計測装置6とワークWとの間の相対位置がロボット52により変化される点で異なる。ロボット52はロボットコントローラ50により制御され、ロボットコントローラ50は、PLC100からの指示に従ってロボット52を制御する。
<L. Modification of
14 to 17 are diagrams illustrating a measurement system according to a modification. The
また、計測装置6とワークWとの間の相対位置をロボット52により変化させる方法としては、図14に示すようにワークWを固定して計測装置6をロボット52により動かす方法と、図15に示すように計測装置6を固定し、ワークWをロボット52により動かす方法とが挙げられる。
As a method of changing the relative position between the measuring device 6 and the work W by the
また、図16に示すように、計測装置6とワークWとの間の相対位置を変化させる方法としては、計測装置6をロボット52により動かすともに、ワークWを回転テーブル91の上に載置してもよい。すなわち、計測装置6とワークWとの双方を動かすことで計測装置6とワークWとの間の相対位置を変化させてもよい。回転テーブル91は、ロボットコントローラ50の指示に応じて回転する。これにより、ワークWと計測装置6との間の相対位置を容易に変更することができる。
As shown in FIG. 16, as a method of changing the relative position between the measuring device 6 and the work W, the measuring device 6 is moved by the
なお、ロボット52は、垂直多関節ロボット以外のロボットであってもよい。たとえば、図17に示すように、直交ロボット52aであってもよい。また、水平多関節ロボットなど、他のロボットであってもよい。
Note that the
<M.調整機構の変形例>
図18は、変形例に係る調整機構を説明するための図である。本実施の形態においては、計測装置6の進行方向に対する変位センサ68とカメラ66との位置関係を回転機構64により調整する例を示した。たとえば、図18に示すように、回転体62bの回転中心に変位センサ68bを設置し、変位センサ68bの周囲に複数のカメラ66bを配置し、進行方向に合わせて複数のカメラ66bのうちの一のカメラ66bで撮像することで、変位センサ68bよりも先に計測部分をカメラ66bで撮像することができるようにしてもよい。なお、カメラを回転体の中心に設置し、変位センサを複数設けるようにしてもよい。
<M. Modification of adjustment mechanism>
FIG. 18 is a diagram illustrating an adjustment mechanism according to a modification. In the present embodiment, an example in which the positional relationship between the
また、複数の変位センサまたは複数のカメラから一の変位センサまたはカメラを選択して利用する方法として、機械的に切り替えだけでなく、光学的に切り替えるようにしてもよい。 Further, as a method of selecting and using one displacement sensor or camera from a plurality of displacement sensors or a plurality of cameras, not only mechanical switching but also optical switching may be employed.
<N.センサの変形例>
本実施の形態においては、センサとして指定された計測点を計測する変位センサ68を一例に挙げた。なお、センサは、指定されたライン上の任意の計測点を計測する変位センサであってもよく、また、計測位置を特定するための画像を撮像する撮像部よりも計測範囲の狭いものであれば、画像センサであってもよい。たとえば、画像センサは、撮像部に比べて狭視野高解像度の画像センサである。また、センサは、外観を検査するためのセンサに限らず、温度センサや、硬度計、あるいは超音波センサなどであってもよい。
<N. Modified example of sensor>
In the present embodiment, the
<O.その他の利用例>
また、本実施の形態における計測システムは、一のワークが計測対象として設定されており、ワーク上に複数の計測部分が設定されており、設定された計測部分を順次撮像、計測するシステムである。なお、一のワークが計測対象とする例を挙げたが、複数のワークの集合を計測対象とし、複数のワークの集合からなる計測対象に対して複数の計測部分を設定してもよい。より具体的には、複数のワークの各々が予め定められた位置に配置された計測対象について、各ワークが配置される位置を計測部分として設定し、ワーク自体を特徴画像としてもよい。配置された各ワークの位置および姿勢は、各ワークで異なることがあるものの、撮像部でワークの位置および姿勢を特定し、特定した位置および姿勢に応じてセンサの位置を調整することができる。
<O. Other Usage Examples>
The measurement system according to the present embodiment is a system in which one work is set as a measurement target, a plurality of measurement parts are set on the work, and the set measurement parts are sequentially imaged and measured. . Although an example has been described in which one work is set as a measurement target, a set of a plurality of works may be set as a measurement target, and a plurality of measurement portions may be set for a measurement target including a set of a plurality of works. More specifically, for a measurement target in which each of a plurality of works is arranged at a predetermined position, the position where each work is arranged may be set as a measurement portion, and the work itself may be used as a feature image. Although the position and orientation of each arranged work may be different for each work, the position and orientation of the work can be specified by the imaging unit, and the position of the sensor can be adjusted according to the specified position and orientation.
また、本実施の形態における計測システムは、計測位置が予め定められているものとしたが、計測部分のみ予め定めておき、予め定められた計測条件を満たす位置を撮像部により撮像された画像に基づいて特定し、計測条件を満たす位置を計測位置に設定してもよい。たとえば、撮像部により撮像された画像に基づいて、低い精度で外観検査を行ない、外観検査によりピックアップされた位置を計測位置とし、センサにより高い精度で外観検査を行なうようにしてもよい。より具体的には、カメラにより傷や凹みなどを検出し、傷やや凹みの位置を特定した上で、特定した位置の傷や凹みの深さを変位センサにより検出して、検出した深さが検査基準を満たすか否かを判定するアプリケーションとして、計測システムが提供されてもよい。このような計測システムにおいては、正確に欠陥か否かの判定を行なうことができる。 Further, in the measurement system according to the present embodiment, the measurement position is determined in advance, but only the measurement portion is determined in advance, and a position that satisfies the predetermined measurement condition is set to an image captured by the imaging unit. A position that satisfies the measurement condition and may be set as the measurement position. For example, the appearance inspection may be performed with low accuracy based on the image captured by the imaging unit, the position picked up by the appearance inspection may be used as the measurement position, and the sensor may be used to perform the appearance inspection with high accuracy. More specifically, a flaw or dent is detected by a camera, the position of the flaw or dent is specified, and then the depth of the flaw or dent at the specified position is detected by a displacement sensor. A measurement system may be provided as an application for determining whether or not the inspection criterion is satisfied. In such a measurement system, it is possible to accurately determine whether or not a defect exists.
§3 付記
以上のように、本実施の形態および変形例は以下のような技術思想を開示する。
§3 Supplement As described above, the present embodiment and modifications disclose the following technical ideas.
<構成1>
複数の計測部分の各々を計測するための計測システム(1,1a,1b)であって、
撮像部(66,66a,66b)と、
センサ(68,68a,68b)と、
前記撮像部および前記センサが配置されるベース部(64,64a)と、
前記ベース部と計測対象との間の相対位置を変化させる変化機構(8,8a)と、
前記ベース部の進行方向に対する前記撮像部および前記センサの位置関係を調整する調整機構(64,64a)と、
前記撮像部により撮像された前記計測部分の画像に基づいて、前記センサにより計測する計測位置を決定する位置決定手段(14,44,144,146)と、
前記ベース部の進行方向に対する前記撮像部の位置が前記センサの前方となるようにしつつ前記複数の計測部分の各々を前記撮像部の撮像視野を通過させるとともに、前記複数の計測部分の各々について前記位置決定手段により決定された前記計測位置が前記センサの計測範囲を通過するように、前記変化機構および前記調整機構を制御する制御手段(174)とを備える、計測システム。
<
A measurement system (1, 1a, 1b) for measuring each of a plurality of measurement portions,
Imaging units (66, 66a, 66b);
Sensors (68, 68a, 68b);
A base unit (64, 64a) on which the imaging unit and the sensor are arranged;
A change mechanism (8, 8a) for changing a relative position between the base portion and the measurement target;
An adjustment mechanism (64, 64a) for adjusting a positional relationship between the imaging unit and the sensor with respect to a traveling direction of the base unit;
Position determination means (14, 44, 144, 146) for determining a measurement position to be measured by the sensor based on an image of the measurement portion captured by the imaging unit;
While allowing each of the plurality of measurement portions to pass through the imaging field of view of the imaging portion while the position of the imaging portion with respect to the traveling direction of the base portion is in front of the sensor, the A measurement system comprising: control means (174) for controlling the change mechanism and the adjustment mechanism such that the measurement position determined by the position determination means passes through the measurement range of the sensor.
<構成2>
前記調整機構は、前記ベース部を回転させる回転機構(64)である、構成1に記載の計測システム。
<
The measurement system according to
<構成3>
前記複数の計測部分のうちの少なくとも一の計測部分について、前記計測部分を撮像して得られる画像特徴の位置に対して、複数の前記計測位置が予め定められており、
前記位置決定手段は、前記計測部分の画像に基づいて前記画像特徴の位置を特定することで、前記画像特徴の位置に対する複数の前記計測位置の各々を決定する、構成1または構成2に記載の計測システム。
<Configuration 3>
For at least one measurement portion of the plurality of measurement portions, a plurality of measurement positions are predetermined with respect to a position of an image feature obtained by imaging the measurement portion,
The configuration according to
<構成4>
前記センサは、変位センサ(68)である、構成1〜構成3のうちいずれか1項に記載の計測システム。
<
The measurement system according to any one of
<構成5>
前記変化機構の変位、および当該変化機構の変位に対応付けられた前記調整機構の変位からなる基準経路が予め定められており、
前記制御手段は、前記基準経路に沿って前記変化機構および前記調整機構を制御することで前記複数の計測部分の各々が前記撮像部の撮像視野を通過させるようにするとともに、前記複数の計測部分の各々については、前記位置決定手段により決定された前記計測位置が前記センサの計測範囲を通過するように前記基準経路を修正する(168)、構成1〜構成4のうちいずれか1項に記載の計測システム。
<Configuration 5>
A reference path including the displacement of the change mechanism and the displacement of the adjustment mechanism associated with the displacement of the change mechanism is predetermined,
The control unit controls the change mechanism and the adjustment mechanism along the reference path so that each of the plurality of measurement portions passes through the imaging field of view of the imaging unit, and the plurality of measurement portions The method according to any one of
<構成6>
前記制御手段は、前記複数の計測部分の各々については、前記基準経路のうちの前記変化機構の変位を修正することなく前記調整機構の変位を修正する、構成5に記載の計測システム。
<Configuration 6>
The measurement system according to configuration 5, wherein the control unit corrects a displacement of the adjustment mechanism without correcting a displacement of the change mechanism in the reference path for each of the plurality of measurement portions.
<構成7>
前記位置決定手段は、前記計測部分の画像に基づいて、前記基準経路に応じて定められる基準位置に対する前記計測部分の位置ずれ値を取得する取得手段(144)をさらに含み、
前記取得手段により取得された前記位置ずれ値が、予め定められた許容値を超えているか否かを判定する判定手段(176)と、
前記判定手段の判定結果をユーザに通知する通知手段(178)とをさらに備える、構成5または構成6に記載の計測システム。
<Configuration 7>
The position determination unit further includes an acquisition unit (144) that acquires a displacement value of the measurement portion with respect to a reference position determined according to the reference route, based on an image of the measurement portion,
Determining means (176) for determining whether or not the displacement value obtained by the obtaining means exceeds a predetermined allowable value;
7. The measurement system according to configuration 5 or 6, further comprising a notification unit (178) for notifying a user of a determination result of the determination unit.
<構成8>
複数の計測部分の各々を計測するための計測方法であって、
撮像部(66,66a,66b)とセンサ(68,68a,68b)とがベース部(64,64a)に配置されているとともに、前記ベース部と計測対象との相対位置を変化可能であり、前記ベース部の進行方向に対する前記撮像部および前記センサの位置関係を調整可能に構成されており、
前記ベース部の進行方向に対する前記撮像部の位置が前記センサの前方となるようにしつつ前記計測部分が前記撮像部の撮像視野を通過する第1のステップ(S2)と、
前記第1のステップにおいて前記計測部分が前記撮像視野を通過するときに得られる前記計測部分の画像に基づいて、前記センサにより計測する計測位置を決定する第2のステップ(S4)と、
前記第2のステップにおいて決定された前記計測位置が前記センサの計測範囲を通過する第3のステップ(S6)とを備え、
前記複数の計測部分の各々に対して前記第1のステップから前記第3のステップまでのステップを行う、計測方法。
<
A measurement method for measuring each of a plurality of measurement portions,
The imaging section (66, 66a, 66b) and the sensor (68, 68a, 68b) are arranged on the base section (64, 64a), and the relative position between the base section and the measurement target can be changed. It is configured to be able to adjust the positional relationship between the imaging unit and the sensor with respect to the traveling direction of the base unit,
A first step (S2) in which the measurement section passes through the imaging field of view of the imaging section while the position of the imaging section with respect to the traveling direction of the base section is in front of the sensor;
A second step (S4) of determining a measurement position to be measured by the sensor based on an image of the measurement portion obtained when the measurement portion passes through the imaging field of view in the first step;
A third step (S6) in which the measurement position determined in the second step passes through a measurement range of the sensor.
A measurement method, wherein the steps from the first step to the third step are performed on each of the plurality of measurement portions.
<構成9>
複数の計測部分の各々を計測するための計測プログラム(140)であって、
撮像部(66,66a,66b)とセンサ(68,68a,68b)とがベース部(64,64a)に配置されているとともに、前記ベース部と計測対象との相対位置を変化機構(8,8a)により変化可能であり、前記ベース部の進行方向に対する前記撮像部および前記センサの位置関係を調整機構(64,64a)により調整可能に構成されており、
前記計測プログラムは、コンピュータに、
前記ベース部の進行方向に対する前記撮像部の位置が前記センサの前方となるようにしつつ前記計測部分が前記撮像部の撮像視野を通過するように前記変化機構および前記調整機構を制御する第1のステップ(S1〜S3)と、
前記第1のステップにおいて前記撮像視野を前記計測部分が通過するときに得られる前記計測部分の画像に基づいて決定される前記センサにより計測する計測位置が前記センサの計測範囲を通過するように前記変化機構および前記調整機構を制御する第2ステップ(S1,S4〜S6)とを、前記複数の計測部分の各々に対して実行させる、計測プログラム。
<Configuration 9>
A measurement program (140) for measuring each of the plurality of measurement portions,
An imaging section (66, 66a, 66b) and a sensor (68, 68a, 68b) are arranged on a base section (64, 64a), and a relative position between the base section and a measurement target is changed by a mechanism (8, 8a), and the positional relationship between the imaging unit and the sensor with respect to the traveling direction of the base unit can be adjusted by an adjustment mechanism (64, 64a).
The measurement program is a computer,
A first control unit that controls the change mechanism and the adjustment mechanism such that the measurement unit passes through the imaging field of view of the imaging unit while the position of the imaging unit with respect to the traveling direction of the base unit is in front of the sensor. Steps (S1 to S3),
In the first step, the measurement position measured by the sensor determined based on an image of the measurement portion obtained when the measurement portion passes through the imaging field of view passes through a measurement range of the sensor. A measurement program for executing a second step (S1, S4 to S6) of controlling a change mechanism and the adjustment mechanism for each of the plurality of measurement portions.
今回開示された実施の形態は全ての点で例示であって制限的なものではないと考えられるべきである。本発明の範囲は上記した説明ではなくて特許請求の範囲によって示され、特許請求の範囲と均等の意味および範囲内での全ての変更が含まれることが意図される。 The embodiments disclosed this time are to be considered in all respects as illustrative and not restrictive. The scope of the present invention is defined by the terms of the claims, rather than the description above, and is intended to include any modifications within the scope and meaning equivalent to the terms of the claims.
1,1a,1b 計測システム、6 計測装置、8 移動機構、8a 変化機構、12 撮像条件判定部、14 位置決定手段、17 制御手段、42 撮像制御部、44 位置・姿勢計測部、46 モデル画像データ、50 ロボットコントローラ、52 ロボット、52a 直交ロボット、61 投光部、62,62b 回転体、62a ベース部、63 受光部、64 回転機構、64a 調整機構、66,66b カメラ、66a 撮像部、68,68b 変位センサ、68a センサ、70 設定装置、71,232,432 表示部、72 記憶部、73 計測位置決定部、74 モデル画像生成部、75 経路生成部、76 移動量決定部、77 撮像条件決定部、78 位置・姿勢情報生成部、79 計測条件決定部、82X Xステージ、82Y Yステージ、84X,84Y サーボモータ、91 回転テーブル、100 PLC、112 チップセット、114,202,402 プロセッサ、116 不揮発性メモリ、118 主メモリ、120 システムクロック、122,222,422 メモリカードインターフェイス、124,236,436 メモリカード、126 内部バス、128,220,420 通信インターフェイス、130 内部バスコントローラ、132 制御回路、134 内部バス制御回路、136 バッファメモリ、138 フィールドバスコントローラ、140 ユーザプログラム、142 位置・姿勢取得部、144 位置ずれ量算出部、146 計測位置算出部、162 計測ポイント算出部、164 回転角度算出部、166 移動量算出部、168 軌道修正部、170 計測条件修正部、172 計測条件判定部、174 目標移動量指定部、176 判定部、178 通知部、182 撮像条件データ、184 位置・姿勢データ、186 計測位置データ、190 経路データ、192 並進移動データ、194 回転移動データ、196 計測条件データ、200 コントローラ、210,410 I/Oコントローラ、204,404 RAM、206,406 表示コントローラ、208,408 システムコントローラ、212,412 ハードディスク、214 センサインターフェイス、216,416 入力インターフェイス、218,418 コントローラインターフェイス、234,434 キーボード、240 計測プログラム、300,500X,500Y サーボドライバ、400 画像処理装置、414 カメラインターフェイス、440 画像処理プログラム、442 プロジェクトファイル、500 ドライバユニット、W ワーク。 1, 1a, 1b measuring system, 6 measuring device, 8 moving mechanism, 8a changing mechanism, 12 imaging condition determining section, 14 position determining means, 17 controlling means, 42 imaging controlling section, 44 position / posture measuring section, 46 model image Data, 50 robot controller, 52 robots, 52a orthogonal robot, 61 light emitting unit, 62, 62b rotating body, 62a base unit, 63 light receiving unit, 64 rotating mechanism, 64a adjusting mechanism, 66, 66b camera, 66a imaging unit, 68 , 68b Displacement sensor, 68a sensor, 70 setting device, 71, 232, 432 display unit, 72 storage unit, 73 measurement position determination unit, 74 model image generation unit, 75 route generation unit, 76 movement amount determination unit, 77 imaging condition Determination unit, 78 position / posture information generation unit, 79 measurement condition determination unit, 82XX stage, 82Y Y stage, 84X, 84Y servo motor, 91 turntable, 100 PLC, 112 chipset, 114, 202, 402 processor, 116 nonvolatile memory, 118 main memory, 120 system clock, 122, 222, 422 memory card interface, 124 , 236, 436 memory card, 126 internal bus, 128, 220, 420 communication interface, 130 internal bus controller, 132 control circuit, 134 internal bus control circuit, 136 buffer memory, 138 field bus controller, 140 user program, 142 position Attitude acquisition section, 144 position shift amount calculation section, 146 measurement position calculation section, 162 measurement point calculation section, 164 rotation angle calculation section, 166 movement amount calculation section, 168 trajectory Correct part, 170 measurement condition correction unit, 172 measurement condition determination unit, 174 target movement amount designation unit, 176 determination unit, 178 notification unit, 182 imaging condition data, 184 position / posture data, 186 measurement position data, 190 route data, 192 translational movement data, 194 rotation movement data, 196 measurement condition data, 200 controller, 210, 410 I / O controller, 204, 404 RAM, 206, 406 display controller, 208, 408 system controller, 212, 412 hard disk, 214 sensor Interface, 216, 416 input interface, 218, 418 controller interface, 234, 434 keyboard, 240 measurement program, 300, 500X, 500Y servo driver, 400 Image processing device, 414 camera interface, 440 image processing program, 442 project file, 500 driver unit, W work.
Claims (9)
撮像部と、
センサと、
前記撮像部および前記センサが配置されるベース部と、
前記ベース部と計測対象との間の相対位置を変化させる変化機構と、
前記ベース部の進行方向に対する前記撮像部および前記センサの位置関係を調整する調整機構と、
前記撮像部により撮像された前記計測部分の画像に基づいて、前記センサにより計測する計測位置を決定する位置決定手段と、
前記ベース部の進行方向に対する前記撮像部の位置が前記センサの前方となるようにしつつ前記複数の計測部分の各々を前記撮像部の撮像視野を通過させるとともに、前記複数の計測部分の各々について前記位置決定手段により決定された前記計測位置が前記センサの計測範囲を通過するように、前記変化機構および前記調整機構を制御する制御手段とを備える、計測システム。 A measurement system for measuring each of the plurality of measurement parts,
An imaging unit;
Sensors and
A base unit on which the imaging unit and the sensor are arranged;
A change mechanism that changes a relative position between the base unit and the measurement target,
An adjustment mechanism that adjusts a positional relationship between the imaging unit and the sensor with respect to a traveling direction of the base unit;
Position determining means for determining a measurement position to be measured by the sensor, based on an image of the measurement portion captured by the imaging unit,
While allowing each of the plurality of measurement portions to pass through the imaging field of view of the imaging portion while the position of the imaging portion with respect to the traveling direction of the base portion is in front of the sensor, the A measurement system comprising: control means for controlling the change mechanism and the adjustment mechanism such that the measurement position determined by the position determination means passes through the measurement range of the sensor.
前記位置決定手段は、前記計測部分の画像に基づいて前記画像特徴の位置を特定することで、前記画像特徴の位置に対する複数の前記計測位置の各々を決定する、請求項1または請求項2に記載の計測システム。 For at least one measurement portion of the plurality of measurement portions, a plurality of measurement positions are predetermined with respect to a position of an image feature obtained by imaging the measurement portion,
3. The method according to claim 1, wherein the position determining unit determines each of the plurality of measurement positions with respect to the position of the image feature by specifying a position of the image feature based on an image of the measurement portion. 4. The described measurement system.
前記制御手段は、前記基準経路に沿って前記変化機構および前記調整機構を制御することで前記複数の計測部分の各々が前記撮像部の撮像視野を通過させるようにするとともに、前記複数の計測部分の各々については、前記位置決定手段により決定された前記計測位置が前記センサの計測範囲を通過するように前記基準経路を修正する、請求項1〜請求項4のうちいずれか1項に記載の計測システム。 A reference path including the displacement of the change mechanism and the displacement of the adjustment mechanism associated with the displacement of the change mechanism is predetermined,
The control unit controls the change mechanism and the adjustment mechanism along the reference path so that each of the plurality of measurement portions passes through the imaging field of view of the imaging unit, and the plurality of measurement portions The method according to any one of claims 1 to 4, wherein the reference path is corrected such that the measurement position determined by the position determination unit passes through a measurement range of the sensor. Measurement system.
前記取得手段により取得された前記位置ずれ値が、予め定められた許容値を超えているか否かを判定する判定手段と、
前記判定手段の判定結果をユーザに通知する通知手段とをさらに備える、請求項5または請求項6に記載の計測システム。 The position determination unit further includes an acquisition unit configured to acquire a displacement value of the measurement portion with respect to a reference position determined according to the reference route, based on the image of the measurement portion,
Determining means for determining whether the displacement value acquired by the acquiring means is greater than a predetermined allowable value,
The measurement system according to claim 5, further comprising: a notification unit configured to notify a user of a determination result of the determination unit.
撮像部とセンサとがベース部に配置されているとともに、前記ベース部と計測対象との相対位置を変化可能であり、前記ベース部の進行方向に対する前記撮像部および前記センサの位置関係を調整可能に構成されており、
前記ベース部の進行方向に対する前記撮像部の位置が前記センサの前方となるようにしつつ前記計測部分が前記撮像部の撮像視野を通過する第1のステップと、
前記第1のステップにおいて前記計測部分が前記撮像視野を通過するときに得られる前記計測部分の画像に基づいて、前記センサにより計測する計測位置を決定する第2のステップと、
前記第2のステップにおいて決定された前記計測位置が前記センサの計測範囲を通過する第3のステップとを備え、
前記複数の計測部分の各々に対して前記第1のステップから前記第3のステップまでのステップを行う、計測方法。 A measurement method for measuring each of a plurality of measurement portions,
The imaging unit and the sensor are arranged on the base unit, and the relative position between the base unit and the measurement target can be changed, and the positional relationship between the imaging unit and the sensor with respect to the traveling direction of the base unit can be adjusted. It is composed of
A first step in which the measurement section passes through the imaging field of view of the imaging section while the position of the imaging section with respect to the traveling direction of the base section is in front of the sensor;
A second step of determining a measurement position to be measured by the sensor based on an image of the measurement part obtained when the measurement part passes through the imaging field of view in the first step;
A third step in which the measurement position determined in the second step passes through a measurement range of the sensor,
A measurement method, wherein the steps from the first step to the third step are performed on each of the plurality of measurement portions.
撮像部とセンサとがベース部に配置されているとともに、前記ベース部と計測対象との相対位置を変化機構により変化可能であり、前記ベース部の進行方向に対する前記撮像部および前記センサの位置関係を調整機構により調整可能に構成されており、
前記計測プログラムは、コンピュータに、
前記ベース部の進行方向に対する前記撮像部の位置が前記センサの前方となるようにしつつ前記計測部分が前記撮像部の撮像視野を通過するように前記変化機構および前記調整機構を制御する第1のステップと、
前記第1のステップにおいて前記撮像視野を前記計測部分が通過するときに得られる前記計測部分の画像に基づいて決定される前記センサにより計測する計測位置が前記センサの計測範囲を通過するように前記変化機構および前記調整機構を制御する第2ステップとを、前記複数の計測部分の各々に対して実行させる、計測プログラム。 A measurement program for measuring each of the plurality of measurement portions,
The imaging unit and the sensor are arranged on the base unit, and a relative position between the base unit and the measurement target can be changed by a change mechanism, and a positional relationship between the imaging unit and the sensor with respect to a traveling direction of the base unit. Is configured to be adjustable by an adjustment mechanism,
The measurement program is a computer,
A first control unit that controls the change mechanism and the adjustment mechanism such that the measurement unit passes through the imaging field of view of the imaging unit while the position of the imaging unit with respect to the traveling direction of the base unit is in front of the sensor. Steps and
In the first step, the measurement position measured by the sensor determined based on an image of the measurement portion obtained when the measurement portion passes through the imaging field of view passes through a measurement range of the sensor. And a second step of controlling the changing mechanism and the adjusting mechanism for each of the plurality of measurement portions.
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2018151978A JP7035902B2 (en) | 2018-08-10 | 2018-08-10 | Measurement system, measurement method, and measurement program |
PCT/JP2019/030740 WO2020031964A1 (en) | 2018-08-10 | 2019-08-05 | Measurement system, measurement method, and measurement program |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2018151978A JP7035902B2 (en) | 2018-08-10 | 2018-08-10 | Measurement system, measurement method, and measurement program |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2020027029A true JP2020027029A (en) | 2020-02-20 |
JP7035902B2 JP7035902B2 (en) | 2022-03-15 |
Family
ID=69413741
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2018151978A Active JP7035902B2 (en) | 2018-08-10 | 2018-08-10 | Measurement system, measurement method, and measurement program |
Country Status (2)
Country | Link |
---|---|
JP (1) | JP7035902B2 (en) |
WO (1) | WO2020031964A1 (en) |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH03257354A (en) * | 1990-03-08 | 1991-11-15 | Mitsubishi Electric Corp | Apparatus for inspecting solder printing |
JPH04237310A (en) * | 1991-01-21 | 1992-08-25 | Nippon Telegr & Teleph Corp <Ntt> | Three-dimensional positioning method |
JP2016031368A (en) * | 2014-07-25 | 2016-03-07 | 株式会社ミツトヨ | Method for measuring high accuracy height map of test surface |
JP2016514037A (en) * | 2013-02-18 | 2016-05-19 | ノードソン コーポレーションNordson Corporation | Automatic position locator for height sensor in dispensing system |
-
2018
- 2018-08-10 JP JP2018151978A patent/JP7035902B2/en active Active
-
2019
- 2019-08-05 WO PCT/JP2019/030740 patent/WO2020031964A1/en active Application Filing
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH03257354A (en) * | 1990-03-08 | 1991-11-15 | Mitsubishi Electric Corp | Apparatus for inspecting solder printing |
JPH04237310A (en) * | 1991-01-21 | 1992-08-25 | Nippon Telegr & Teleph Corp <Ntt> | Three-dimensional positioning method |
JP2016514037A (en) * | 2013-02-18 | 2016-05-19 | ノードソン コーポレーションNordson Corporation | Automatic position locator for height sensor in dispensing system |
JP2016031368A (en) * | 2014-07-25 | 2016-03-07 | 株式会社ミツトヨ | Method for measuring high accuracy height map of test surface |
Also Published As
Publication number | Publication date |
---|---|
WO2020031964A1 (en) | 2020-02-13 |
JP7035902B2 (en) | 2022-03-15 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP5911934B2 (en) | Contour measurement device and robot system | |
JP5670416B2 (en) | Robot system display device | |
JP4021413B2 (en) | Measuring device | |
JP2017528727A (en) | Augmented reality camera used in combination with a 3D meter to generate a 3D image from a 2D camera image | |
KR20140008262A (en) | Robot system, robot, robot control device, robot control method, and robot control program | |
JP2017118396A (en) | Program, device and method for calculating internal parameter of depth camera | |
KR20190070875A (en) | Calibration and operation of vision-based manipulation systems | |
WO2017146202A1 (en) | Three-dimensional shape data and texture information generation system, photographing control program, and three-dimensional shape data and texture information generation method | |
JP2004257927A (en) | Three-dimensional profile measuring system and method for measuring the same | |
US20120224033A1 (en) | Three-dimensional measurement method | |
JP2011186928A (en) | Information processing appratus and control method thereof | |
JP2020078859A (en) | Robot device | |
JP3644991B2 (en) | Coordinate system coupling method in robot-sensor system | |
JP2017033429A (en) | Three-dimensional object inspection device | |
JP2019119027A (en) | Method of controlling robot system, and robot system | |
JP2019060742A (en) | Position detector and program | |
JP6973233B2 (en) | Image processing system, image processing device and image processing program | |
JP2001050741A (en) | Calibration method and apparatus for robot | |
JP2010207990A (en) | Measuring system | |
JP2017075880A (en) | Shape measurement apparatus and shape measurement method | |
KR20130075712A (en) | A laser-vision sensor and calibration method thereof | |
JP5740649B2 (en) | Image measuring apparatus, autofocus control method, and autofocus control program | |
JP7035902B2 (en) | Measurement system, measurement method, and measurement program | |
JP2009264898A (en) | Workpiece position/attitude measurement method and measuring device | |
JP2004309318A (en) | Position detection method, its device and its program, and calibration information creation method |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20201211 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20211102 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20211227 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20220201 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20220214 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7035902 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |