JP2005346393A - ステレオ画像認識装置及びその方法 - Google Patents
ステレオ画像認識装置及びその方法 Download PDFInfo
- Publication number
- JP2005346393A JP2005346393A JP2004165020A JP2004165020A JP2005346393A JP 2005346393 A JP2005346393 A JP 2005346393A JP 2004165020 A JP2004165020 A JP 2004165020A JP 2004165020 A JP2004165020 A JP 2004165020A JP 2005346393 A JP2005346393 A JP 2005346393A
- Authority
- JP
- Japan
- Prior art keywords
- image
- distance information
- color
- degree
- coincidence
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims description 8
- 238000001514 detection method Methods 0.000 abstract description 28
- 230000015654 memory Effects 0.000 description 18
- 230000000052 comparative effect Effects 0.000 description 12
- 238000010586 diagram Methods 0.000 description 6
- 238000003384 imaging method Methods 0.000 description 3
- 239000003086 colorant Substances 0.000 description 2
- 238000007499 fusion processing Methods 0.000 description 2
- 239000003795 chemical substances by application Substances 0.000 description 1
- 230000006866 deterioration Effects 0.000 description 1
- 238000003708 edge detection Methods 0.000 description 1
- 238000011156 evaluation Methods 0.000 description 1
- 230000006870 function Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
Images
Landscapes
- Image Analysis (AREA)
- Measurement Of Optical Distance (AREA)
- Image Processing (AREA)
Abstract
【解決手段】基準カメラ1からのR,G,B基準画像信号及び比較カメラ2からのR,G,B比較画像信号が画像一致度演算部15に与えられる。画像一致度演算部15は、前記基準画像の所定の領域毎に前記参照画像の各領域との差分絶対値を各色画像毎に求め、求めた差分絶対値を合成して一致度を求める。距離情報検出部16は、求めた一致度に基づく視差から、距離情報を求める。カラー画像を用いた一致度計算を行っており、距離の検出精度を向上させることができる。
【選択図】 図1
Description
なお、(1)式において、|An−Bn|Rは、R画像について、基準画像小領域の各画素と、これらの各画素と比較画像小領域中の対応する位置の各画素との輝度差の絶対値を示し、同様に、|An−Bn|Gは、|An−Bn|Bは、夫々G画像、B画像についてのものである。
(2)Hxが所定値以上
(3)エッジ有効と判定された画素が存在する
(1)及び(2)の条件は、得られた最小値Hm がノイズによる揺らぎによるものか否かをチェックするための条件であり、また、最大値Hx をチェック対象とすることにより、曲面等のように緩やかに輝度が変わる物体に対しても距離検出を行うことを可能にしている。
A12,A14,A32,A34
B12,B14,B32,B34
緑色
A11,A13,A22,A24,A31,A33,A42,A44
B11,B13,B22,B24,B31,B33,B42,B44
青色
A21,A23,A41,A43
B21,B23,B41,B43
画像一致度演算部35は、基準色画像の各画像小領域に対して、比較色画像の画像小領域をステレオ基線方向に色配列に従ったサブピクセル数だけずらしながら一致検索(マッチング)演算を行う。例えば、ベイヤー配列の場合には、2×2サブピクセル単位で色表現が可能であるので、画像一致度演算部35は、比較色画像の画像小領域を水平方向に2サブピクセルづつずらしながら一致検索(マッチング)演算を行う。
なお、(2)式において、|An−Bn|は、基準色画像小領域の各サブピクセルと、これらの各サブピクセルと比較色画像小領域中の対応する位置の各サブピクセルとの輝度差の絶対値を示している。
代理人 弁理士 伊 藤 進
Claims (9)
- 複数のカラーカメラで撮像した基準画像と1つ以上の参照画像との間で、前記基準画像の所定の領域毎に前記参照画像の各領域との一致度計算を各色成分毎に行って合成して一致度を求める一致度演算手段と、
前記一致度演算手段の演算結果によって得られる視差から距離情報を求める距離情報取得手段とを具備したことを特徴とするステレオ画像認識装置。 - 前記複数のカラーカメラは、多板式のカラーカメラであり、
前記一致度演算手段は、前記多板式のカラーカメラによって得られる各色画像毎に前記基準画像の所定の領域毎の前記参照画像の各領域との一致度計算を行い、計算結果を合成することで前記一致度を求めることを特徴とする請求項1に記載のステレオ画像認識装置。 - 前記一致度演算手段は、前記基準画像と前記参照画像との間で前記各色成分毎の差分絶対値和を求め、求めた差分絶対値和の総和によって前記一致度を求めることを特徴とする請求項1に記載のステレオ画像認識装置。
- 前記複数のカラーカメラは、単板式のカラーカメラであり、複数のサブピクセルによって色表現が可能な1画素を構成する画像を得るものであって、
前記一致度演算手段は、前記参照画像の各領域を前記1画素単位でずらしながら前記基準画像の所定の領域毎に一致度計算を行うことによって、前記一致度を求めることを特徴とする請求項1に記載のステレオ画像認識装置。 - 前記一致度演算手段は、前記基準画像と前記参照画像との間で前記各色成分毎の差分絶対値和によって前記一致度を求めることを特徴とする請求項4に記載のステレオ画像認識装置。
- 前記距離情報取得手段が求めた前記距離情報の有効,無効を判定する距離情報有効判定手段を更に具備したことを特徴とする請求項1又は4のいずれか一方に記載のステレオ画像認識装置。
- 前記距離情報有効判定手段は、前記基準画像の所定の領域内の輝度変化に基づくエッジ有効判定結果の総数に基づいて前記距離情報の有効,無効を判定することを特徴とする請求項6に記載のステレオ画像認識装置。
- 前記距離情報有効判定手段は、前記基準画像の所定の領域内の同一色成分同士の輝度変化に基づいて前記エッジ有効判定を行うことを特徴とする請求項7に記載のステレオ画像認識装置。
- 複数のカラーカメラで撮像した基準画像と1つ以上の参照画像との間で、前記基準画像の所定の領域毎に前記参照画像の各領域との一致度計算を各色成分毎に行って合成して一致度を求める一致度演算手順と、
前記一致度演算手段の演算結果によって得られる視差から距離情報を求める距離情報取得手順とを具備したことを特徴とするステレオ画像認識方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2004165020A JP4605582B2 (ja) | 2004-06-02 | 2004-06-02 | ステレオ画像認識装置及びその方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2004165020A JP4605582B2 (ja) | 2004-06-02 | 2004-06-02 | ステレオ画像認識装置及びその方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2005346393A true JP2005346393A (ja) | 2005-12-15 |
JP4605582B2 JP4605582B2 (ja) | 2011-01-05 |
Family
ID=35498709
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2004165020A Expired - Fee Related JP4605582B2 (ja) | 2004-06-02 | 2004-06-02 | ステレオ画像認識装置及びその方法 |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP4605582B2 (ja) |
Cited By (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
EP2105882A1 (en) | 2008-03-28 | 2009-09-30 | Fujifilm Corporation | Image processing apparatus, image processing method, and program |
JP2009238075A (ja) * | 2008-03-28 | 2009-10-15 | Fujifilm Corp | 画像処理装置および画像処理方法並びにプログラム |
JP2010251878A (ja) * | 2009-04-13 | 2010-11-04 | National Institute Of Information & Communication Technology | 奥行推定装置、奥行推定方法および奥行推定プログラム |
JP2011101305A (ja) * | 2009-11-09 | 2011-05-19 | Sharp Corp | 画像処理装置、撮像装置 |
JP2011107083A (ja) * | 2009-11-20 | 2011-06-02 | Omron Corp | 姿勢認識方法およびこの方法を用いた3次元視覚センサ |
JP2013174510A (ja) * | 2012-02-24 | 2013-09-05 | Resonant Systems Inc | ステレオカメラユニット及び自動車用モニタシステム |
EP2642759A1 (en) | 2012-03-21 | 2013-09-25 | Ricoh Company, Ltd. | Multi-lens camera system |
JP2022178773A (ja) * | 2021-05-21 | 2022-12-02 | Necプラットフォームズ株式会社 | 画像監視装置、方法及びプログラム |
Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH08201023A (ja) * | 1995-01-31 | 1996-08-09 | Minolta Co Ltd | 三次元計測装置 |
JP2004088149A (ja) * | 2002-08-22 | 2004-03-18 | Olympus Corp | 撮像システムおよび画像処理プログラム |
-
2004
- 2004-06-02 JP JP2004165020A patent/JP4605582B2/ja not_active Expired - Fee Related
Patent Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH08201023A (ja) * | 1995-01-31 | 1996-08-09 | Minolta Co Ltd | 三次元計測装置 |
JP2004088149A (ja) * | 2002-08-22 | 2004-03-18 | Olympus Corp | 撮像システムおよび画像処理プログラム |
Cited By (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
EP2105882A1 (en) | 2008-03-28 | 2009-09-30 | Fujifilm Corporation | Image processing apparatus, image processing method, and program |
JP2009238075A (ja) * | 2008-03-28 | 2009-10-15 | Fujifilm Corp | 画像処理装置および画像処理方法並びにプログラム |
JP2010251878A (ja) * | 2009-04-13 | 2010-11-04 | National Institute Of Information & Communication Technology | 奥行推定装置、奥行推定方法および奥行推定プログラム |
JP2011101305A (ja) * | 2009-11-09 | 2011-05-19 | Sharp Corp | 画像処理装置、撮像装置 |
JP2011107083A (ja) * | 2009-11-20 | 2011-06-02 | Omron Corp | 姿勢認識方法およびこの方法を用いた3次元視覚センサ |
JP2013174510A (ja) * | 2012-02-24 | 2013-09-05 | Resonant Systems Inc | ステレオカメラユニット及び自動車用モニタシステム |
EP2642759A1 (en) | 2012-03-21 | 2013-09-25 | Ricoh Company, Ltd. | Multi-lens camera system |
JP2013224922A (ja) * | 2012-03-21 | 2013-10-31 | Ricoh Co Ltd | 複眼カメラ装置、及びそれを備えた車両 |
JP2022178773A (ja) * | 2021-05-21 | 2022-12-02 | Necプラットフォームズ株式会社 | 画像監視装置、方法及びプログラム |
Also Published As
Publication number | Publication date |
---|---|
JP4605582B2 (ja) | 2011-01-05 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US11570423B2 (en) | System and methods for calibration of an array camera | |
US10043290B2 (en) | Image processing to enhance distance calculation accuracy | |
JP4815807B2 (ja) | Rawデータから倍率色収差を検出する画像処理装置、画像処理プログラム、および電子カメラ | |
TWI383666B (zh) | 多重鏡頭相機系統之先進式動態接圖方法 | |
JP4102854B2 (ja) | 撮像装置 | |
JP2003254748A (ja) | ステレオ画像特性検査システム | |
US20110064298A1 (en) | Apparatus for evaluating images from a multi camera system, multi camera system and process for evaluating | |
US11182918B2 (en) | Distance measurement device based on phase difference | |
US20090060389A1 (en) | Image processing apparatus | |
JP4193342B2 (ja) | 3次元データ生成装置 | |
JP4605582B2 (ja) | ステレオ画像認識装置及びその方法 | |
JP4394487B2 (ja) | ステレオ画像処理装置 | |
JP2004245701A (ja) | 距離分布検知装置 | |
JPH1062154A (ja) | 測定値処理方法、形状の再構成方法および形状の再構成装置 | |
JP5269954B2 (ja) | 撮像装置 | |
JP2000356514A (ja) | ステレオカメラを用いた距離計測方法及び距離計測装置 | |
JP2005091173A (ja) | ステレオ画像処理装置 | |
JPS623585A (ja) | ステレオ視覚装置 | |
JP2004219142A (ja) | 画像処理装置および画像処理方法 | |
JPH11337312A (ja) | 画像処理装置 | |
JP2013065179A (ja) | 画像処理装置及び画像処理方法 | |
JPH01265371A (ja) | マルチプロセッサ方式画像処理装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20070402 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20100401 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20100413 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20100609 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20100921 |
|
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20100929 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 4605582 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20131015 Year of fee payment: 3 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
S531 | Written request for registration of change of domicile |
Free format text: JAPANESE INTERMEDIATE CODE: R313531 |
|
R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
S533 | Written request for registration of change of name |
Free format text: JAPANESE INTERMEDIATE CODE: R313533 |
|
R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
LAPS | Cancellation because of no payment of annual fees |