JP2018048869A - 試料容器の位置ずれ検出方法およびそれを用いた撮像方法、ならびに試料容器の位置ずれ検出装置 - Google Patents
試料容器の位置ずれ検出方法およびそれを用いた撮像方法、ならびに試料容器の位置ずれ検出装置 Download PDFInfo
- Publication number
- JP2018048869A JP2018048869A JP2016183669A JP2016183669A JP2018048869A JP 2018048869 A JP2018048869 A JP 2018048869A JP 2016183669 A JP2016183669 A JP 2016183669A JP 2016183669 A JP2016183669 A JP 2016183669A JP 2018048869 A JP2018048869 A JP 2018048869A
- Authority
- JP
- Japan
- Prior art keywords
- sample container
- imaging
- coordinates
- sample
- coordinate
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000003384 imaging method Methods 0.000 title claims abstract description 178
- 238000000034 method Methods 0.000 title claims abstract description 39
- 238000001514 detection method Methods 0.000 claims description 160
- 238000006073 displacement reaction Methods 0.000 claims description 72
- 238000000926 separation method Methods 0.000 claims description 59
- 238000012545 processing Methods 0.000 abstract description 22
- 238000007796 conventional method Methods 0.000 description 7
- 238000012986 modification Methods 0.000 description 6
- 230000004048 modification Effects 0.000 description 6
- 239000007788 liquid Substances 0.000 description 5
- 230000000694 effects Effects 0.000 description 4
- 238000004891 communication Methods 0.000 description 3
- 238000007876 drug discovery Methods 0.000 description 3
- 239000002609 medium Substances 0.000 description 3
- 206010028980 Neoplasm Diseases 0.000 description 2
- 201000011510 cancer Diseases 0.000 description 2
- 230000004663 cell proliferation Effects 0.000 description 2
- 238000010586 diagram Methods 0.000 description 2
- 239000003814 drug Substances 0.000 description 2
- 230000005484 gravity Effects 0.000 description 2
- 230000002093 peripheral effect Effects 0.000 description 2
- 230000000717 retained effect Effects 0.000 description 2
- 241000894006 Bacteria Species 0.000 description 1
- 239000003560 cancer drug Substances 0.000 description 1
- 239000001963 growth medium Substances 0.000 description 1
- 230000001678 irradiating effect Effects 0.000 description 1
- 238000002955 isolation Methods 0.000 description 1
- 230000035755 proliferation Effects 0.000 description 1
- 238000011160 research Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/10—Segmentation; Edge detection
- G06T7/13—Edge detection
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01B—MEASURING LENGTH, THICKNESS OR SIMILAR LINEAR DIMENSIONS; MEASURING ANGLES; MEASURING AREAS; MEASURING IRREGULARITIES OF SURFACES OR CONTOURS
- G01B11/00—Measuring arrangements characterised by the use of optical techniques
- G01B11/26—Measuring arrangements characterised by the use of optical techniques for measuring angles or tapers; for testing the alignment of axes
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01B—MEASURING LENGTH, THICKNESS OR SIMILAR LINEAR DIMENSIONS; MEASURING ANGLES; MEASURING AREAS; MEASURING IRREGULARITIES OF SURFACES OR CONTOURS
- G01B11/00—Measuring arrangements characterised by the use of optical techniques
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01B—MEASURING LENGTH, THICKNESS OR SIMILAR LINEAR DIMENSIONS; MEASURING ANGLES; MEASURING AREAS; MEASURING IRREGULARITIES OF SURFACES OR CONTOURS
- G01B11/00—Measuring arrangements characterised by the use of optical techniques
- G01B11/002—Measuring arrangements characterised by the use of optical techniques for measuring two or more coordinates
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01B—MEASURING LENGTH, THICKNESS OR SIMILAR LINEAR DIMENSIONS; MEASURING ANGLES; MEASURING AREAS; MEASURING IRREGULARITIES OF SURFACES OR CONTOURS
- G01B11/00—Measuring arrangements characterised by the use of optical techniques
- G01B11/14—Measuring arrangements characterised by the use of optical techniques for measuring distance or clearance between spaced objects or spaced apertures
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/30—Determination of transform parameters for the alignment of images, i.e. image registration
- G06T7/33—Determination of transform parameters for the alignment of images, i.e. image registration using feature-based methods
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/70—Determining position or orientation of objects or cameras
- G06T7/73—Determining position or orientation of objects or cameras using feature-based methods
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30004—Biomedical image processing
- G06T2207/30072—Microarray; Biochip, DNA array; Well plate
Landscapes
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Engineering & Computer Science (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Theoretical Computer Science (AREA)
- Length Measuring Devices By Optical Means (AREA)
- Image Processing (AREA)
- Investigating Or Analysing Materials By Optical Means (AREA)
Abstract
Description
前記複数の試料収納部の中から2つの試料収納部を位置ずれ検出用試料収納部として選択する試料収納部選択ステップと、
各位置ずれ検出用試料収納部につき、理想的な載置状態における上端、下端、左端、および右端の座標である論理エッジ座標を算出する論理エッジ座標算出ステップと、
前記論理エッジ座標算出ステップで算出された各論理エッジ座標を中心位置として所定範囲の撮像を行う撮像ステップと、
各位置ずれ検出用試料収納部につき、前記撮像ステップでの撮像で得られた上端側、下端側、左端側、および右端側の各撮像画像に対して2つの領域間の分離度を求める分離度フィルタを当該分離度フィルタの中心位置をずらしつつ適用し、各撮像画像について分離度のピーク値が得られたときの当該分離度フィルタの中心位置の座標を仮エッジ座標として検出する仮エッジ座標検出ステップと、
各位置ずれ検出用試料収納部につき、前記仮エッジ座標検出ステップで検出された上端側、下端側、左端側、および右端側の仮エッジ座標に基づいて実際の中心座標を算出する中心座標算出ステップと、
前記中心座標算出ステップで算出された各位置ずれ検出用試料収納部の中心座標に基づいて、前記試料容器の理想的な載置状態からの位置ずれ量を算出する位置ずれ量算出ステップと
を含むことを特徴とする。
前記試料容器の形状は矩形であって、
前記試料容器の長手方向に沿って一列に配置された一群の試料収納部を行と定義したとき、前記試料収納部選択ステップでは、同じ行に属し、かつ、最も離れた位置に配置された2つの試料収納部が前記位置ずれ検出用試料収納部として選択されることを特徴とする。
前記仮エッジ座標検出ステップでは、前記分離度フィルタとして、2つの矩形領域間の分離度を求める矩形分離度フィルタが用いられることを特徴とする。
前記仮エッジ座標検出ステップでは、
前記位置ずれ検出用試料収納部の上端側または下端側についての仮エッジ座標の検出が行われる際には、当該位置ずれ検出用試料収納部の上端側の論理エッジ座標と当該位置ずれ検出用試料収納部の下端側の論理エッジ座標とを結ぶ直線上で前記矩形分離度フィルタの中心位置を移動させつつ分離度が求められ、
前記位置ずれ検出用試料収納部の左端側または右端側についての仮エッジ座標の検出が行われる際には、当該位置ずれ検出用試料収納部の左端側の論理エッジ座標と当該位置ずれ検出用試料収納部の右端側の論理エッジ座標とを結ぶ直線上で前記矩形分離度フィルタの中心位置を移動させつつ分離度が求められることを特徴とする。
前記位置ずれ量算出ステップでは、前記位置ずれ量として、理想的な載置状態における前記試料容器の所定の基準位置と前記試料容器保持部に実際に載置された状態における前記試料容器の前記基準位置との間の変位の大きさを表す並行変位量と、前記試料容器保持部に実際に載置された状態における前記試料容器の理想的な載置状態からの傾きを表す角度とが算出されることを特徴とする。
前記試料収納部選択ステップで選択された2つの試料収納部の一方を第1の位置ずれ検出用試料収納部,他方を第2の位置ずれ検出用試料収納部と定義し、理想的な載置状態における前記第1の位置ずれ検出用試料収納部の中心座標および前記第2の位置ずれ検出用試料収納部の中心座標をそれぞれ第1の理想中心座標および第2の理想中心座標と定義し、前記中心座標算出ステップで算出された前記第1の位置ずれ検出用試料収納部の中心座標および前記第2の位置ずれ検出用試料収納部の中心座標をそれぞれ第1の実中心座標および第2の実中心座標と定義したとき、前記位置ずれ量算出ステップでは、前記位置ずれ量として、前記第1の理想中心座標と前記第1の実中心座標との間の変位の大きさを表す並行変位量と、前記第1の理想中心座標と前記第2の理想中心座標とを結ぶ直線と前記第1の実中心座標と前記第2の実中心座標とを結ぶ直線とのなす角度とが算出されることを特徴とする。
前記仮エッジ座標検出ステップにおいて分離度のピーク値が正常に得られない撮像画像が存在したとき、前記撮像装置が警告の表示を行うことを特徴とする。
複数の試料収納部を有する試料容器を撮像装置によって撮像する撮像方法であって、
第1の発明に係る位置ずれ検出方法を用いて得られた位置ずれ量に基づいて、前記撮像装置の状態を撮像を開始するための状態に調整する調整ステップと、
前記試料容器の撮像を行う試料容器撮像ステップと
を含むことを特徴とする。
前記撮像装置に設けられた撮像部は、移動可能に構成され、
前記位置ずれ量算出ステップでは、前記位置ずれ量として、理想的な載置状態における前記試料容器の所定の基準位置と前記試料容器保持部に実際に載置された状態における前記試料容器の前記基準位置との間の変位の大きさを表す並行変位量と、前記試料容器保持部に実際に載置された状態における前記試料容器の理想的な載置状態からの傾きを表す角度とが算出され、
前記調整ステップでは、前記位置ずれ量算出ステップで算出された並行変位量に基づいて、前記撮像部の撮像開始位置の調整が行われ、
前記試料容器撮像ステップでは、前記位置ずれ量算出ステップで算出された角度に従って前記撮像部を移動させながら前記試料容器の撮像が行われることを特徴とする。
前記試料容器保持部は、移動可能かつ回転可能に構成され、
前記位置ずれ量算出ステップでは、前記位置ずれ量として、理想的な載置状態における前記試料容器の所定の基準位置と前記試料容器保持部に実際に載置された状態における前記試料容器の前記基準位置との間の変位の大きさを表す並行変位量と、前記試料容器保持部に実際に載置された状態における前記試料容器の理想的な載置状態からの傾きを表す角度とが算出され、
前記調整ステップでは、前記位置ずれ量算出ステップで算出された角度に基づいて前記試料容器保持部の回転が行われるとともに前記位置ずれ量算出ステップで算出された並行変位量に基づいて前記試料容器保持部の移動が行われ、
前記試料容器撮像ステップでは、前記撮像装置に設けられた撮像部に対して前記試料容器保持部を相対的に移動させながら前記試料容器の撮像が行われることを特徴とする。
前記撮像装置に設けられた撮像部は、移動可能に構成され、
前記試料容器保持部は、移動可能かつ回転可能に構成され、
前記位置ずれ量算出ステップでは、前記位置ずれ量として、理想的な載置状態における前記試料容器の所定の基準位置と前記試料容器保持部に実際に載置された状態における前記試料容器の前記基準位置との間の変位の大きさを表す並行変位量と、前記試料容器保持部に実際に載置された状態における前記試料容器の理想的な載置状態からの傾きを表す角度とが算出され、
前記調整ステップでは、前記位置ずれ量算出ステップで算出された角度に基づいて前記試料容器保持部の回転が行われるとともに前記位置ずれ量算出ステップで算出された並行変位量に基づいて前記試料容器保持部の移動が行われ、
前記試料容器撮像ステップでは、前記撮像部を移動させながら前記試料容器の撮像が行われることを特徴とする。
前記複数の試料収納部の中から2つの試料収納部を位置ずれ検出用試料収納部として選択する試料収納部選択手段と、
各位置ずれ検出用試料収納部につき、理想的な載置状態における上端、下端、左端、および右端の座標である論理エッジ座標を算出する論理エッジ座標算出手段と、
前記論理エッジ座標算出手段によって算出された各論理エッジ座標を中心位置として所定範囲の撮像を行う撮像手段と、
各位置ずれ検出用試料収納部につき、前記撮像手段による撮像で得られた上端側、下端側、左端側、および右端側の各撮像画像に対して2つの領域間の分離度を求める分離度フィルタを当該分離度フィルタの中心位置をずらしつつ適用し、各撮像画像について分離度のピーク値が得られたときの当該分離度フィルタの中心位置の座標を仮エッジ座標として検出する仮エッジ座標検出手段と、
各位置ずれ検出用試料収納部につき、前記仮エッジ座標検出手段によって検出された上端側、下端側、左端側、および右端側の仮エッジ座標に基づいて実際の中心座標を算出する中心座標算出手段と、
前記中心座標算出手段によって算出された各位置ずれ検出用試料収納部の中心座標に基づいて、前記試料容器の理想的な載置状態からの位置ずれ量を算出する位置ずれ量算出手段と
を備えることを特徴とする。
図2は、本発明の一実施形態に係る撮像装置10の構成を示す図である。この撮像装置10は、試料容器としてのウェルプレート20に形成されているウェル21内で培養されている細胞、細胞コロニー、細菌等(以下、これらをまとめて「細胞等」という。)の試料を撮像するための装置である。ウェルプレート20は、平板状の形状を有している。ウェルプレート20には、上面側に開口を有し下面側に透明の底面を有する試料収納部としての複数個(例えば、6個、24個、96個、384個など)のウェル21が配列されている。ウェル21の形状については、典型的には、断面は円形状であって、底面は平坦状になっている。但し、ウェル21の断面および底面の形状はこれには限定されない。各ウェル21には、細胞等に生育環境を提供する培地としての液体(培養液)が所定量注入される。各ウェル21に注入される液体の量は、一般的には50〜200マイクロリットル程度である。
本実施形態に係る撮像装置10では、ウェルプレート20がホルダ121内で理想的な載置状態からどれだけずれた状態で保持されているのかを検出する(並行変位量および角度を検出する)位置ずれ検出処理が行われる。そして、位置ずれ検出処理で検出された並行変位量および角度を考慮して、目的とする撮像画像を得るための撮像が行われる。なお、位置ずれ検出処理は、例えば、制御部15の記憶部155内に保持された位置ずれ検出処理用のプログラムをCPU151が実行することによって行われる。
y=a1x+b1 ・・・(4)
y=a2x+b2 ・・・(5)
このとき、直線7と直線8とがなす角度θは、次式(6)に基づいて算出される。
以上のような位置ずれ検出処理の終了後、位置ずれを考慮した撮像が行われる。図22は、位置ずれ量検出後の撮像手順を示すフローチャートである。位置ずれ検出処理によって位置ずれ量(並行変位量および角度)が検出された後、まず、撮像装置10の状態を撮像を開始するための状態に調整する処理が行われる(ステップS110)。具体的には、撮像開始位置の調整が行われる。本実施形態に係る撮像装置10では、ステージ12は固定された状態(すなわち、ホルダ121は固定された状態)になっており、撮像ユニット13が移動可能に構成されている(図2参照)。このような構成の撮像装置10が採用されているので、ステップS110では、カメラ駆動機構14の動作により、ステップS70で算出された並行変位量に基づいて撮像ユニット13の位置が調整される(撮像ユニット13の位置が移動する)。
本実施形態によれば、ウェルプレート20の位置ずれを検出するために用いられる2つのウェル(位置ずれ検出用ウェル)21の実際の中心座標は、エッジ近傍領域の撮像画像に対して矩形分離度フィルタ40を適用することによって検出される仮エッジ座標に基づいて算出される。ここで、矩形分離度フィルタ40を用いた処理で分離度のピーク値が得られたときの矩形分離度フィルタ40の中心位置の座標が仮エッジ座標とされるところ、ウェル21内の細胞や培養液の状態に関わらず、矩形分離度フィルタ40の中心位置がウェル21のエッジ近傍にある時に分離度は最大となる。従って、同じような位置ずれが生じている場合、ウェル21内の細胞や培養液の状態に関わらず、一定の座標が仮エッジ座標として検出される。すなわち、たとえ撮像対象毎の培養液の量の違いや細胞増殖などに起因して安定した撮像画像が得られなくても、精度良く仮エッジ座標が検出される。このような仮エッジ座標に基づいて2つの位置ずれ検出用ウェルの実際の中心座標が求められるので、位置ずれ量の算出が精度良く行われる。また、位置ずれの検出に必要とされる撮像画像は合計8箇所のエッジ近傍領域の撮像画像だけであり、位置ずれ検出処理ではテンプレート画像を用いた処理は行われない。このため、処理に必要なデータ量を増大させることなく高速に位置ずれを検出することができる。以上のように、本実施形態によれば、撮像装置10のホルダ121に載置されたウェルプレート20の位置ずれを処理に必要なデータ量を増大させることなく高速に精度良く検出することが可能となる。
上記実施形態においては、ステージ12は固定された状態(すなわち、ホルダ121は固定された状態)であって、撮像ユニット13が移動可能に構成されていた。このため、位置ずれを考慮した撮像は、撮像ユニット13の位置(撮像開始位置)を調整した後に撮像ユニット13を本来の走査移動方向とは斜めの方向に移動させることによって行われていた。しかしながら、本発明はこれに限定されない。そこで、以下、図22を参照しつつ、位置ずれを考慮した撮像に関する変形例について説明する。
本変形例に係る撮像装置では、ウェルプレート20が載置されるステージ12が移動可能かつ回転可能に構成されており(換言すれば、ホルダ121が移動可能かつ回転可能に構成されており)、撮像ユニット13が固定された状態となっている。このような構成において、位置ずれ検出処理の終了後、まず、撮像装置10の状態を撮像を開始するための状態に調整する処理が行われる(ステップS110)。具体的には、位置ずれ検出処理で算出された角度に基づいてステージ12の回転(ホルダ121の回転)が行われるとともに位置ずれ検出処理で算出された並行変位量に基づいてステージ12の移動(ホルダ121の移動)が行われる。その後、撮像ユニット13によるウェルプレート20の撮像が行われる(ステップS120)。その際、ステージ12(ホルダ121)がX軸方向あるいはY軸方向に移動する。このようにして、撮像ユニット13に対してステージ12(ホルダ121)を相対的に移動させながら撮像が行われる。
本変形例に係る撮像装置では、ウェルプレート20が載置されるステージ12が移動可能かつ回転可能に構成されており(換言すれば、ホルダ121が移動可能かつ回転可能に構成されており)、また、撮像ユニット13が移動可能に構成されている。このような構成において、位置ずれ検出処理の終了後、まず、上記第1の変形例と同様にして、ステージ12の回転および移動(ホルダ121の回転および移動)が行われる(ステップS110)。その後、撮像ユニット13によるウェルプレート20の撮像が行われる(ステップS120)。その際、本変形例においては、撮像ユニット13がX軸方向あるいはY軸方向に移動する。
11…光源
12…ステージ
13…撮像ユニット
14…カメラ駆動機構
15…制御部
20…ウェルプレート
21…ウェル
40…矩形分離度フィルタ
121…ホルダ
μ…分離度
Claims (12)
- 複数の試料収納部を有する試料容器が撮像装置の試料容器保持部に載置された際の前記試料容器の理想的な載置状態からの位置ずれ量を検出する、試料容器の位置ずれ検出方法であって、
前記複数の試料収納部の中から2つの試料収納部を位置ずれ検出用試料収納部として選択する試料収納部選択ステップと、
各位置ずれ検出用試料収納部につき、理想的な載置状態における上端、下端、左端、および右端の座標である論理エッジ座標を算出する論理エッジ座標算出ステップと、
前記論理エッジ座標算出ステップで算出された各論理エッジ座標を中心位置として所定範囲の撮像を行う撮像ステップと、
各位置ずれ検出用試料収納部につき、前記撮像ステップでの撮像で得られた上端側、下端側、左端側、および右端側の各撮像画像に対して2つの領域間の分離度を求める分離度フィルタを当該分離度フィルタの中心位置をずらしつつ適用し、各撮像画像について分離度のピーク値が得られたときの当該分離度フィルタの中心位置の座標を仮エッジ座標として検出する仮エッジ座標検出ステップと、
各位置ずれ検出用試料収納部につき、前記仮エッジ座標検出ステップで検出された上端側、下端側、左端側、および右端側の仮エッジ座標に基づいて実際の中心座標を算出する中心座標算出ステップと、
前記中心座標算出ステップで算出された各位置ずれ検出用試料収納部の中心座標に基づいて、前記試料容器の理想的な載置状態からの位置ずれ量を算出する位置ずれ量算出ステップと
を含むことを特徴とする、試料容器の位置ずれ検出方法。 - 前記試料容器の形状は矩形であって、
前記試料容器の長手方向に沿って一列に配置された一群の試料収納部を行と定義したとき、前記試料収納部選択ステップでは、同じ行に属し、かつ、最も離れた位置に配置された2つの試料収納部が前記位置ずれ検出用試料収納部として選択されることを特徴とする、請求項1に記載の位置ずれ検出方法。 - 前記仮エッジ座標検出ステップでは、前記分離度フィルタとして、2つの矩形領域間の分離度を求める矩形分離度フィルタが用いられることを特徴とする、請求項1または2に記載の位置ずれ検出方法。
- 前記仮エッジ座標検出ステップでは、
前記位置ずれ検出用試料収納部の上端側または下端側についての仮エッジ座標の検出が行われる際には、当該位置ずれ検出用試料収納部の上端側の論理エッジ座標と当該位置ずれ検出用試料収納部の下端側の論理エッジ座標とを結ぶ直線上で前記矩形分離度フィルタの中心位置を移動させつつ分離度が求められ、
前記位置ずれ検出用試料収納部の左端側または右端側についての仮エッジ座標の検出が行われる際には、当該位置ずれ検出用試料収納部の左端側の論理エッジ座標と当該位置ずれ検出用試料収納部の右端側の論理エッジ座標とを結ぶ直線上で前記矩形分離度フィルタの中心位置を移動させつつ分離度が求められることを特徴とする、請求項3に記載の位置ずれ検出方法。 - 前記位置ずれ量算出ステップでは、前記位置ずれ量として、理想的な載置状態における前記試料容器の所定の基準位置と前記試料容器保持部に実際に載置された状態における前記試料容器の前記基準位置との間の変位の大きさを表す並行変位量と、前記試料容器保持部に実際に載置された状態における前記試料容器の理想的な載置状態からの傾きを表す角度とが算出されることを特徴とする、請求項1から4までのいずれか1項に記載の位置ずれ検出方法。
- 前記試料収納部選択ステップで選択された2つの試料収納部の一方を第1の位置ずれ検出用試料収納部,他方を第2の位置ずれ検出用試料収納部と定義し、理想的な載置状態における前記第1の位置ずれ検出用試料収納部の中心座標および前記第2の位置ずれ検出用試料収納部の中心座標をそれぞれ第1の理想中心座標および第2の理想中心座標と定義し、前記中心座標算出ステップで算出された前記第1の位置ずれ検出用試料収納部の中心座標および前記第2の位置ずれ検出用試料収納部の中心座標をそれぞれ第1の実中心座標および第2の実中心座標と定義したとき、前記位置ずれ量算出ステップでは、前記位置ずれ量として、前記第1の理想中心座標と前記第1の実中心座標との間の変位の大きさを表す並行変位量と、前記第1の理想中心座標と前記第2の理想中心座標とを結ぶ直線と前記第1の実中心座標と前記第2の実中心座標とを結ぶ直線とのなす角度とが算出されることを特徴とする、請求項5に記載の位置ずれ検出方法。
- 前記仮エッジ座標検出ステップにおいて分離度のピーク値が正常に得られない撮像画像が存在したとき、前記撮像装置が警告の表示を行うことを特徴とする、請求項1から6までのいずれか1項に記載の位置ずれ検出方法。
- 複数の試料収納部を有する試料容器を撮像装置によって撮像する撮像方法であって、
請求項1に記載の位置ずれ検出方法を用いて得られた位置ずれ量に基づいて、前記撮像装置の状態を撮像を開始するための状態に調整する調整ステップと、
前記試料容器の撮像を行う試料容器撮像ステップと
を含むことを特徴とする、撮像方法。 - 前記撮像装置に設けられた撮像部は、移動可能に構成され、
前記位置ずれ量算出ステップでは、前記位置ずれ量として、理想的な載置状態における前記試料容器の所定の基準位置と前記試料容器保持部に実際に載置された状態における前記試料容器の前記基準位置との間の変位の大きさを表す並行変位量と、前記試料容器保持部に実際に載置された状態における前記試料容器の理想的な載置状態からの傾きを表す角度とが算出され、
前記調整ステップでは、前記位置ずれ量算出ステップで算出された並行変位量に基づいて、前記撮像部の撮像開始位置の調整が行われ、
前記試料容器撮像ステップでは、前記位置ずれ量算出ステップで算出された角度に従って前記撮像部を移動させながら前記試料容器の撮像が行われることを特徴とする、請求項8に記載の撮像方法。 - 前記試料容器保持部は、移動可能かつ回転可能に構成され、
前記位置ずれ量算出ステップでは、前記位置ずれ量として、理想的な載置状態における前記試料容器の所定の基準位置と前記試料容器保持部に実際に載置された状態における前記試料容器の前記基準位置との間の変位の大きさを表す並行変位量と、前記試料容器保持部に実際に載置された状態における前記試料容器の理想的な載置状態からの傾きを表す角度とが算出され、
前記調整ステップでは、前記位置ずれ量算出ステップで算出された角度に基づいて前記試料容器保持部の回転が行われるとともに前記位置ずれ量算出ステップで算出された並行変位量に基づいて前記試料容器保持部の移動が行われ、
前記試料容器撮像ステップでは、前記撮像装置に設けられた撮像部に対して前記試料容器保持部を相対的に移動させながら前記試料容器の撮像が行われることを特徴とする、請求項8に記載の撮像方法。 - 前記撮像装置に設けられた撮像部は、移動可能に構成され、
前記試料容器保持部は、移動可能かつ回転可能に構成され、
前記位置ずれ量算出ステップでは、前記位置ずれ量として、理想的な載置状態における前記試料容器の所定の基準位置と前記試料容器保持部に実際に載置された状態における前記試料容器の前記基準位置との間の変位の大きさを表す並行変位量と、前記試料容器保持部に実際に載置された状態における前記試料容器の理想的な載置状態からの傾きを表す角度とが算出され、
前記調整ステップでは、前記位置ずれ量算出ステップで算出された角度に基づいて前記試料容器保持部の回転が行われるとともに前記位置ずれ量算出ステップで算出された並行変位量に基づいて前記試料容器保持部の移動が行われ、
前記試料容器撮像ステップでは、前記撮像部を移動させながら前記試料容器の撮像が行われることを特徴とする、請求項8に記載の撮像方法。 - 複数の試料収納部を有する試料容器が試料容器保持部に載置された際の前記試料容器の理想的な載置状態からの位置ずれ量を検出する、試料容器の位置ずれ検出装置であって、
前記複数の試料収納部の中から2つの試料収納部を位置ずれ検出用試料収納部として選択する試料収納部選択手段と、
各位置ずれ検出用試料収納部につき、理想的な載置状態における上端、下端、左端、および右端の座標である論理エッジ座標を算出する論理エッジ座標算出手段と、
前記論理エッジ座標算出手段によって算出された各論理エッジ座標を中心位置として所定範囲の撮像を行う撮像手段と、
各位置ずれ検出用試料収納部につき、前記撮像手段による撮像で得られた上端側、下端側、左端側、および右端側の各撮像画像に対して2つの領域間の分離度を求める分離度フィルタを当該分離度フィルタの中心位置をずらしつつ適用し、各撮像画像について分離度のピーク値が得られたときの当該分離度フィルタの中心位置の座標を仮エッジ座標として検出する仮エッジ座標検出手段と、
各位置ずれ検出用試料収納部につき、前記仮エッジ座標検出手段によって検出された上端側、下端側、左端側、および右端側の仮エッジ座標に基づいて実際の中心座標を算出する中心座標算出手段と、
前記中心座標算出手段によって算出された各位置ずれ検出用試料収納部の中心座標に基づいて、前記試料容器の理想的な載置状態からの位置ずれ量を算出する位置ずれ量算出手段と
を備えることを特徴とする、試料容器の位置ずれ検出装置。
Priority Applications (5)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2016183669A JP6684684B2 (ja) | 2016-09-21 | 2016-09-21 | 試料容器の位置ずれ検出方法およびそれを用いた撮像方法、ならびに試料容器の位置ずれ検出装置 |
CN201780047773.7A CN109642785B (zh) | 2016-09-21 | 2017-04-18 | 试料容器的位置偏移的检测方法、装置以及拍摄方法 |
PCT/JP2017/015551 WO2018055823A1 (ja) | 2016-09-21 | 2017-04-18 | 試料容器の位置ずれ検出方法およびそれを用いた撮像方法、ならびに試料容器の位置ずれ検出装置 |
EP17852604.2A EP3517886B1 (en) | 2016-09-21 | 2017-04-18 | Method of detecting positional displacement of sample container, image capturing method employing same, and sample container positional displacement detecting device |
US16/317,453 US10690490B2 (en) | 2016-09-21 | 2017-04-18 | Method of detecting positional displacement of sample container, image capturing method employing same, and sample container positional displacement detecting device |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2016183669A JP6684684B2 (ja) | 2016-09-21 | 2016-09-21 | 試料容器の位置ずれ検出方法およびそれを用いた撮像方法、ならびに試料容器の位置ずれ検出装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2018048869A true JP2018048869A (ja) | 2018-03-29 |
JP6684684B2 JP6684684B2 (ja) | 2020-04-22 |
Family
ID=61689429
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2016183669A Active JP6684684B2 (ja) | 2016-09-21 | 2016-09-21 | 試料容器の位置ずれ検出方法およびそれを用いた撮像方法、ならびに試料容器の位置ずれ検出装置 |
Country Status (5)
Country | Link |
---|---|
US (1) | US10690490B2 (ja) |
EP (1) | EP3517886B1 (ja) |
JP (1) | JP6684684B2 (ja) |
CN (1) | CN109642785B (ja) |
WO (1) | WO2018055823A1 (ja) |
Families Citing this family (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP6598898B2 (ja) * | 2018-02-27 | 2019-10-30 | 株式会社Screenホールディングス | 芯ズレ検出装置および芯ズレ検出方法 |
US11244200B2 (en) * | 2018-03-26 | 2022-02-08 | SCREEN Holdings Co., Ltd. | Image processing method, image processing apparatus, and computer-readable recording medium having recorded thereon image processing program |
JP7076361B2 (ja) * | 2018-03-26 | 2022-05-27 | 株式会社Screenホールディングス | 画像処理方法、画像処理装置、プログラムおよび記憶媒体 |
CN112634344B (zh) * | 2020-12-15 | 2022-08-30 | 西安理工大学 | 一种基于机器视觉的冷轧带卷轴孔中心位置的检测方法 |
CN112629444B (zh) * | 2021-03-08 | 2021-06-22 | 南京航空航天大学 | 一种基于机器视觉的放射库盖板落放误差自动纠正方法 |
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2000174500A (ja) * | 1991-05-07 | 2000-06-23 | Shibaura Mechatronics Corp | 部品実装装置 |
US20080144899A1 (en) * | 2006-11-30 | 2008-06-19 | Manoj Varma | Process for extracting periodic features from images by template matching |
US20120212748A1 (en) * | 2011-02-22 | 2012-08-23 | Hollenbeck Ronald C | Optical reader systems and methods for microplate position detection |
JP2014048153A (ja) * | 2012-08-31 | 2014-03-17 | Dainippon Screen Mfg Co Ltd | 画像切り出し方法および画像取得装置 |
JP2014532856A (ja) * | 2011-10-20 | 2014-12-08 | コーニング インコーポレイテッド | 急速マイクロプレート位置検出の光学読取システム及び方法 |
JP2015152475A (ja) * | 2014-02-17 | 2015-08-24 | 株式会社Screenホールディングス | 変位検出装置、基板処理装置、変位検出方法および基板処理方法 |
Family Cites Families (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH08110206A (ja) * | 1994-10-12 | 1996-04-30 | Ricoh Co Ltd | 位置及び姿勢検出方法と位置及び姿勢検出装置 |
JP3823379B2 (ja) | 1996-07-10 | 2006-09-20 | 松下電工株式会社 | 画像処理方法 |
JP4697192B2 (ja) * | 2007-06-12 | 2011-06-08 | 東京エレクトロン株式会社 | 位置ずれ検出装置及びこれを用いた処理システム |
JP2009032830A (ja) * | 2007-07-25 | 2009-02-12 | Dainippon Screen Mfg Co Ltd | 基板検出装置および基板処理装置 |
CN101832757B (zh) * | 2010-04-29 | 2011-08-24 | 中微半导体设备(上海)有限公司 | 一种探测晶片偏移位置的方法 |
US9087367B2 (en) * | 2011-09-13 | 2015-07-21 | Kla-Tencor Corp. | Determining design coordinates for wafer defects |
CN103033127B (zh) * | 2011-10-09 | 2015-07-22 | 上海微电子装备有限公司 | 一种基板预对准位姿测量方法 |
US9530053B2 (en) * | 2012-07-31 | 2016-12-27 | Tecan Trading Ag | Method and apparatus for detecting or checking an arrangement of laboratory articles on a work area of a laboratory work station |
CN103018015B (zh) * | 2012-12-26 | 2016-01-20 | 青岛歌尔声学科技有限公司 | 检测设备中镜头的光轴偏移的装置和方法 |
EP3511122B1 (en) * | 2017-11-07 | 2020-04-29 | Dalian University of Technology | Monocular vision six-dimensional measurement method for high-dynamic large-range arbitrary contouring error of cnc machine tool |
-
2016
- 2016-09-21 JP JP2016183669A patent/JP6684684B2/ja active Active
-
2017
- 2017-04-18 US US16/317,453 patent/US10690490B2/en active Active
- 2017-04-18 CN CN201780047773.7A patent/CN109642785B/zh active Active
- 2017-04-18 EP EP17852604.2A patent/EP3517886B1/en active Active
- 2017-04-18 WO PCT/JP2017/015551 patent/WO2018055823A1/ja unknown
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2000174500A (ja) * | 1991-05-07 | 2000-06-23 | Shibaura Mechatronics Corp | 部品実装装置 |
US20080144899A1 (en) * | 2006-11-30 | 2008-06-19 | Manoj Varma | Process for extracting periodic features from images by template matching |
US20120212748A1 (en) * | 2011-02-22 | 2012-08-23 | Hollenbeck Ronald C | Optical reader systems and methods for microplate position detection |
JP2014532856A (ja) * | 2011-10-20 | 2014-12-08 | コーニング インコーポレイテッド | 急速マイクロプレート位置検出の光学読取システム及び方法 |
JP2014048153A (ja) * | 2012-08-31 | 2014-03-17 | Dainippon Screen Mfg Co Ltd | 画像切り出し方法および画像取得装置 |
JP2015152475A (ja) * | 2014-02-17 | 2015-08-24 | 株式会社Screenホールディングス | 変位検出装置、基板処理装置、変位検出方法および基板処理方法 |
Also Published As
Publication number | Publication date |
---|---|
WO2018055823A1 (ja) | 2018-03-29 |
EP3517886B1 (en) | 2021-02-24 |
JP6684684B2 (ja) | 2020-04-22 |
CN109642785B (zh) | 2021-02-09 |
EP3517886A4 (en) | 2020-03-25 |
CN109642785A (zh) | 2019-04-16 |
US10690490B2 (en) | 2020-06-23 |
US20190234730A1 (en) | 2019-08-01 |
EP3517886A1 (en) | 2019-07-31 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
WO2018055823A1 (ja) | 試料容器の位置ずれ検出方法およびそれを用いた撮像方法、ならびに試料容器の位置ずれ検出装置 | |
US7630628B2 (en) | Microscope system and microscope observation method | |
JP5335614B2 (ja) | 欠陥画素アドレス検出方法並びに検出装置 | |
US10168346B2 (en) | Method for determining the presence or absence of disposable pipette tips in pipette tip carriers | |
JP2017110991A (ja) | 計測システム、計測方法、ロボット制御方法、ロボット、ロボットシステムおよびピッキング装置 | |
CN109052180B (zh) | 一种基于机器视觉的集装箱自动对位方法及*** | |
CN106097367A (zh) | 一种双目立体相机的标定方法及装置 | |
JP2014190700A (ja) | 目視照合支援装置およびその制御方法 | |
JP5417197B2 (ja) | 検査装置および検査方法 | |
JP2009115566A (ja) | パネルの欠陥位置の特定装置 | |
JP5654801B2 (ja) | 画像測定装置及び画像測定方法 | |
JP6601785B2 (ja) | ウェルアドレス取得システム、ウェルアドレス取得方法、及びプログラム | |
US11321811B2 (en) | Imaging apparatus and driving method of the same | |
EP3629285B1 (en) | Image processing method and image processing apparatus | |
KR101409568B1 (ko) | 표시패널 검사장치 및 그 검사방법 | |
JP2013228232A (ja) | 基板外観検査方法 | |
JP2019051029A (ja) | 遊技釘検査方法 | |
JPH0969973A (ja) | 固体撮像素子の位置調整方法 | |
US20200278523A1 (en) | Observation apparatus, observation method, and observation program | |
WO2016185615A1 (ja) | 部品向き判定データ作成装置及び部品向き判定データ作成方法 | |
WO2018146887A1 (ja) | 外観検査装置 | |
JP2009270984A (ja) | 位置検出装置、位置検出プログラム、位置検出方法 | |
JP3896382B2 (ja) | XYθステージによる位置アライメントシステム | |
JP7485153B2 (ja) | 制御装置、検査システム、制御方法、プログラム | |
JP2008281348A (ja) | 複数のカメラを用いた撮像方法および計測装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20190624 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20200324 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20200330 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6684684 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |