JP2001116527A - 立体物検出方法及び装置 - Google Patents
立体物検出方法及び装置Info
- Publication number
- JP2001116527A JP2001116527A JP29893399A JP29893399A JP2001116527A JP 2001116527 A JP2001116527 A JP 2001116527A JP 29893399 A JP29893399 A JP 29893399A JP 29893399 A JP29893399 A JP 29893399A JP 2001116527 A JP2001116527 A JP 2001116527A
- Authority
- JP
- Japan
- Prior art keywords
- motion vector
- image
- dimensional object
- plane
- vector calculation
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Landscapes
- Length Measuring Devices By Optical Means (AREA)
- Image Processing (AREA)
- Closed-Circuit Television Systems (AREA)
- Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)
- Image Analysis (AREA)
Abstract
(57)【要約】
【課題】 移動体の移動中に、当該移動体に搭載された
撮像装置の撮像によって得られた画像を処理して、平面
に対して静止している立体物を検出することのできる立
体物検出方法及び装置を提供すること。 【解決手段】 立体物検出方法として、移動体に取り付
けられた撮像手段1により遠景撮像をし、撮像により得
られた複数枚の画像12、14から、この画像中におけ
る動きベクトルを算出する一方、前記画像中に存在する
平面の動きベクトルを求め、前記画像中における動きベ
クトルと前記画像中に存在する平面の動きベクトルとか
ら、前記平面に対して静止している立体物を検出するよ
うにしたため、移動体に取り付けた撮像カメラにより得
られた画像から道路面とその他の立体物とを区別するこ
とができる。
撮像装置の撮像によって得られた画像を処理して、平面
に対して静止している立体物を検出することのできる立
体物検出方法及び装置を提供すること。 【解決手段】 立体物検出方法として、移動体に取り付
けられた撮像手段1により遠景撮像をし、撮像により得
られた複数枚の画像12、14から、この画像中におけ
る動きベクトルを算出する一方、前記画像中に存在する
平面の動きベクトルを求め、前記画像中における動きベ
クトルと前記画像中に存在する平面の動きベクトルとか
ら、前記平面に対して静止している立体物を検出するよ
うにしたため、移動体に取り付けた撮像カメラにより得
られた画像から道路面とその他の立体物とを区別するこ
とができる。
Description
【0001】
【発明の属する技術分野】本発明は立体物検出方法及び
装置、特に、移動体の移動中に、当該移動体に搭載され
た撮像装置の撮像によって得られた画像を処理して、平
面に対して静止している立体物を検出する立体物検出方
法及び装置に関するものである。
装置、特に、移動体の移動中に、当該移動体に搭載され
た撮像装置の撮像によって得られた画像を処理して、平
面に対して静止している立体物を検出する立体物検出方
法及び装置に関するものである。
【0002】
【従来の技術】撮像カメラなどの撮像装置により撮像さ
れた画像をもとに立体物を判別する技術が種々提案され
ている。このような立体物の判別或いは検出技術につい
ての従来例としては、例えば特開平11−164326
号公報に記載されたものがある。この技術は、連続する
撮像画像からスリット状に切り出したスリット画像を結
合し、ステレオ視を行なう際の左目視用及び右目視用の
パノラマ画像を生成して、両眼視差を利用して前記パノ
ラマ画像の立体表示を行なうパノラマステレオ画像の生
成表示技術を提案するものである。そして、この技術で
は、パノラマステレオ画像を生成するに際して、連続す
る2つの撮像画像を比較し、この2つの撮像画像のう
ち、基準となる画像を2当分する中心線から等距離にあ
る2本の基準線上の各画素におけるオプティカルフロー
の大きさを算出し、次に前記算出した各画素のオプティ
カルフローの大きさに基づいて、前記右目用及び左目用
のパノラマ画像を生成するためのスリット画像の幅をそ
れぞれ決定する。次に、前記スリット画像の幅及び前記
基準線に基づいて、前記基準となる画像から前記右目用
および左目用のパノラマ画像を生成するためのスリット
画像をそれぞれ切り出し、前記右目用および左目用のパ
ノラマ画像を生成するためのスリット画像をそれぞれ結
合し、右目用および左目用のパノラマ画像をそれぞれ生
成するというものである。このようにしてパノラマ画像
を生成することにより、厳密な機器や操作を必要としな
くても、より正確なパノラマ画像を結合し、ステレオ視
を行なう際の左目視および右目視用のパノラマ画像が生
成できる。また、そのパノラマ画像内の対象物までの距
離に基づいたステレオ表示が可能になるという利点があ
る。
れた画像をもとに立体物を判別する技術が種々提案され
ている。このような立体物の判別或いは検出技術につい
ての従来例としては、例えば特開平11−164326
号公報に記載されたものがある。この技術は、連続する
撮像画像からスリット状に切り出したスリット画像を結
合し、ステレオ視を行なう際の左目視用及び右目視用の
パノラマ画像を生成して、両眼視差を利用して前記パノ
ラマ画像の立体表示を行なうパノラマステレオ画像の生
成表示技術を提案するものである。そして、この技術で
は、パノラマステレオ画像を生成するに際して、連続す
る2つの撮像画像を比較し、この2つの撮像画像のう
ち、基準となる画像を2当分する中心線から等距離にあ
る2本の基準線上の各画素におけるオプティカルフロー
の大きさを算出し、次に前記算出した各画素のオプティ
カルフローの大きさに基づいて、前記右目用及び左目用
のパノラマ画像を生成するためのスリット画像の幅をそ
れぞれ決定する。次に、前記スリット画像の幅及び前記
基準線に基づいて、前記基準となる画像から前記右目用
および左目用のパノラマ画像を生成するためのスリット
画像をそれぞれ切り出し、前記右目用および左目用のパ
ノラマ画像を生成するためのスリット画像をそれぞれ結
合し、右目用および左目用のパノラマ画像をそれぞれ生
成するというものである。このようにしてパノラマ画像
を生成することにより、厳密な機器や操作を必要としな
くても、より正確なパノラマ画像を結合し、ステレオ視
を行なう際の左目視および右目視用のパノラマ画像が生
成できる。また、そのパノラマ画像内の対象物までの距
離に基づいたステレオ表示が可能になるという利点があ
る。
【0003】
【発明が解決しようとする課題】しかしながら、上記従
来例の技術をはじめとする各種の従来技術においては、
立体物を撮像画像から捉えるには、複数の撮像カメラか
らの画像を結合して両眼視差を作り出さなければなら
ず、単一の撮像カメラにより得られた画像から立体物を
検出することは難しかった。しかも、撮像カメラが車両
などの連続走行する移動体に搭載されているような場
合、撮像画像は時々刻々を変化するものでありその変化
速度もまた変わるから、充分なステレオ画像の生成は困
難であるという不具合があった。
来例の技術をはじめとする各種の従来技術においては、
立体物を撮像画像から捉えるには、複数の撮像カメラか
らの画像を結合して両眼視差を作り出さなければなら
ず、単一の撮像カメラにより得られた画像から立体物を
検出することは難しかった。しかも、撮像カメラが車両
などの連続走行する移動体に搭載されているような場
合、撮像画像は時々刻々を変化するものでありその変化
速度もまた変わるから、充分なステレオ画像の生成は困
難であるという不具合があった。
【0004】本発明は、かかる点に鑑みてなされたもの
であり、移動体の移動中に、当該移動体に搭載された撮
像装置の撮像によって得られた画像を処理して、平面に
対して静止している立体物を検出することのできる立体
物検出方法及び装置を提供することを目的とする。
であり、移動体の移動中に、当該移動体に搭載された撮
像装置の撮像によって得られた画像を処理して、平面に
対して静止している立体物を検出することのできる立体
物検出方法及び装置を提供することを目的とする。
【0005】
【課題を解決するための手段】本発明は、上記目的を達
成するため、立体物検出方法として、移動体に取り付け
られた撮像手段により遠景撮像をし、撮像により得られ
た複数枚の画像から、この画像中における動きベクトル
を算出する一方、前記画像中に存在する平面の動きベク
トルを求め、前記画像中における動きベクトルと前記画
像中に存在する平面の動きベクトルとから、前記平面に
対して静止している立体物を検出するようにしたことを
要旨とする。
成するため、立体物検出方法として、移動体に取り付け
られた撮像手段により遠景撮像をし、撮像により得られ
た複数枚の画像から、この画像中における動きベクトル
を算出する一方、前記画像中に存在する平面の動きベク
トルを求め、前記画像中における動きベクトルと前記画
像中に存在する平面の動きベクトルとから、前記平面に
対して静止している立体物を検出するようにしたことを
要旨とする。
【0006】この方法では、例えば自動車に搭載した撮
像カメラにより得られた画像から道路面とその他の立体
物とを区別することができる。本発明では、上記のよう
な、撮像した画像の処理により立体物検出を行なうた
め、複数の撮像手段を備える必要がなく、しかも処理デ
ータ量が不要に増大しないため、車両などの移動体に搭
載された撮像手段により得られた画像の高速処理が可能
となる。また平面の動きベクトルを基準とした、動きベ
クトルの相違という観点で立体物の検出を行なうから、
平面画像から正確に立体物を検出することができる。
像カメラにより得られた画像から道路面とその他の立体
物とを区別することができる。本発明では、上記のよう
な、撮像した画像の処理により立体物検出を行なうた
め、複数の撮像手段を備える必要がなく、しかも処理デ
ータ量が不要に増大しないため、車両などの移動体に搭
載された撮像手段により得られた画像の高速処理が可能
となる。また平面の動きベクトルを基準とした、動きベ
クトルの相違という観点で立体物の検出を行なうから、
平面画像から正確に立体物を検出することができる。
【0007】本発明はまた、上記立体物検出方法を実施
するための検出装置を、移動体に取り付けられた撮像手
段と、この撮像手段により撮像された複数枚の画像から
動きベクトルを算出する第1の動きベクトル算出手段
と、前記画像中に存在する平面の動きベクトルを求める
第2の動きベクトル算出手段と、前記第1の動きベクト
ル算出手段で得られた動きベクトルと前記第2の動きベ
クトル算出手段で得られた動きベクトルとから、前記平
面に対して静止している立体物を検出する立体物検出手
段とにより構成したことを要旨とする。
するための検出装置を、移動体に取り付けられた撮像手
段と、この撮像手段により撮像された複数枚の画像から
動きベクトルを算出する第1の動きベクトル算出手段
と、前記画像中に存在する平面の動きベクトルを求める
第2の動きベクトル算出手段と、前記第1の動きベクト
ル算出手段で得られた動きベクトルと前記第2の動きベ
クトル算出手段で得られた動きベクトルとから、前記平
面に対して静止している立体物を検出する立体物検出手
段とにより構成したことを要旨とする。
【0008】この立体物検出装置には、撮像手段の撮像
状況を検出する撮像状況検出手段と、前記移動体の移動
状況を検出する移動状況検出手段とをさらに備え、前記
第2の動きベクトル算出手段に、前記撮像状況検出手段
および前記移動状況検出手段からのデータをもとに、前
記画像中の各点に対応する平面の動きベクトルを算出さ
せるようにすることができる。また別の手法として、前
記第2の動きベクトル算出手段は、前記第1の動きベク
トル算出手段からの動きベクトルデータを解析し、その
解析結果から、前記画像中の各点に対応する平面の動き
ベクトルを算出するようにすることもできる。
状況を検出する撮像状況検出手段と、前記移動体の移動
状況を検出する移動状況検出手段とをさらに備え、前記
第2の動きベクトル算出手段に、前記撮像状況検出手段
および前記移動状況検出手段からのデータをもとに、前
記画像中の各点に対応する平面の動きベクトルを算出さ
せるようにすることができる。また別の手法として、前
記第2の動きベクトル算出手段は、前記第1の動きベク
トル算出手段からの動きベクトルデータを解析し、その
解析結果から、前記画像中の各点に対応する平面の動き
ベクトルを算出するようにすることもできる。
【0009】このような各種態様を有する発明として、
本発明の請求項1に記載の発明は、移動体に取り付けら
れた撮像手段と、この撮像手段により撮像された複数枚
の画像から動きベクトルを算出する第1の動きベクトル
算出手段と、前記画像中に存在する平面の動きベクトル
を求める第2の動きベクトル算出手段と、前記第1の動
きベクトル算出手段で得られた動きベクトルと前記第2
の動きベクトル算出手段で得られた動きベクトルとか
ら、前記平面に対して静止している立体物を検出する立
体物検出手段とを備えたものであり、車両などの移動体
に搭載された撮像手段により得られた画像の高速処理が
可能となる。また平面の動きベクトルを基準とした、動
きベクトルの相違という観点で立体物の検出を行なうか
ら、平面画像から正確に立体物を検出することができる
という作用を有する。
本発明の請求項1に記載の発明は、移動体に取り付けら
れた撮像手段と、この撮像手段により撮像された複数枚
の画像から動きベクトルを算出する第1の動きベクトル
算出手段と、前記画像中に存在する平面の動きベクトル
を求める第2の動きベクトル算出手段と、前記第1の動
きベクトル算出手段で得られた動きベクトルと前記第2
の動きベクトル算出手段で得られた動きベクトルとか
ら、前記平面に対して静止している立体物を検出する立
体物検出手段とを備えたものであり、車両などの移動体
に搭載された撮像手段により得られた画像の高速処理が
可能となる。また平面の動きベクトルを基準とした、動
きベクトルの相違という観点で立体物の検出を行なうか
ら、平面画像から正確に立体物を検出することができる
という作用を有する。
【0010】本発明の請求項2に記載の発明は、請求項
1記載の立体物検出装置において、前記第1の動きベク
トル算出手段は、オプティカルフロー処理により動きベ
クトルを算出するようにしたものであり、動きベクトル
の算出が容易且つ正確にオな得るという作用を有する。
1記載の立体物検出装置において、前記第1の動きベク
トル算出手段は、オプティカルフロー処理により動きベ
クトルを算出するようにしたものであり、動きベクトル
の算出が容易且つ正確にオな得るという作用を有する。
【0011】本発明の請求項3に記載の発明は、請求項
1または2記載の立体物検出装置において、前記撮像手
段の撮像状況を検出する撮像状況検出手段と、前記移動
体の移動状況を検出する移動状況検出手段とをさらに備
え、前記第2の動きベクトル算出手段は、前記撮像状況
検出手段および前記移動状況検出手段からのデータをも
とに、前記画像中の各点に対応する平面の動きベクトル
を算出するようにしたものである。
1または2記載の立体物検出装置において、前記撮像手
段の撮像状況を検出する撮像状況検出手段と、前記移動
体の移動状況を検出する移動状況検出手段とをさらに備
え、前記第2の動きベクトル算出手段は、前記撮像状況
検出手段および前記移動状況検出手段からのデータをも
とに、前記画像中の各点に対応する平面の動きベクトル
を算出するようにしたものである。
【0012】本発明の請求項4に記載の発明は、請求項
1または2記載の立体物検出装置において、前記第2の
動きベクトル算出手段は、前記第1の動きベクトル算出
手段からの動きベクトルデータを解析し、その解析結果
から、前記画像中の各点に対応する平面の動きベクトル
を算出するようにしたものである。
1または2記載の立体物検出装置において、前記第2の
動きベクトル算出手段は、前記第1の動きベクトル算出
手段からの動きベクトルデータを解析し、その解析結果
から、前記画像中の各点に対応する平面の動きベクトル
を算出するようにしたものである。
【0013】本発明の請求項5に記載の発明は、請求項
4記載の立体物検出装置において、前記第2の動きベク
トル算出手段は、前記第1の動きベクトル算出手段から
の動きベクトルデータを解析するに当たって、平面であ
ることが明確な部分の動きベクトルからオプティカルフ
ローを算出するようにしたものである。
4記載の立体物検出装置において、前記第2の動きベク
トル算出手段は、前記第1の動きベクトル算出手段から
の動きベクトルデータを解析するに当たって、平面であ
ることが明確な部分の動きベクトルからオプティカルフ
ローを算出するようにしたものである。
【0014】本発明の請求項6に記載の発明は、請求項
4記載の立体物検出装置において、前記第2の動きベク
トル算出手段は、前記第1の動きベクトル算出手段から
の動きベクトルデータを解析するに当たって、前記画像
中で平面の動きベクトル量が充分得られている場合に
は、前記画像より平面のオプティカルフローを算出する
ようにしたものである。
4記載の立体物検出装置において、前記第2の動きベク
トル算出手段は、前記第1の動きベクトル算出手段から
の動きベクトルデータを解析するに当たって、前記画像
中で平面の動きベクトル量が充分得られている場合に
は、前記画像より平面のオプティカルフローを算出する
ようにしたものである。
【0015】本発明の請求項7に記載の発明は、請求項
4記載の立体物検出装置において、前記第2の動きベク
トル算出手段は、前記第1の動きベクトル算出手段から
の動きベクトルデータを解析するに当たって、前記画像
中の所定の高さ位置についての動きベクトルの最小値を
求め、この最小の動きベクトルをその高さ位置に対応す
る平面の動きベクトルとするようにしたものである。
4記載の立体物検出装置において、前記第2の動きベク
トル算出手段は、前記第1の動きベクトル算出手段から
の動きベクトルデータを解析するに当たって、前記画像
中の所定の高さ位置についての動きベクトルの最小値を
求め、この最小の動きベクトルをその高さ位置に対応す
る平面の動きベクトルとするようにしたものである。
【0016】本発明の請求項8に記載の発明は、立体物
検出方法として、移動体に取り付けられた撮像手段によ
り遠景撮像をし、前記撮像により得られた複数枚の画像
から、この画像中における動きベクトルを算出する一
方、前記画像中に存在する平面の動きベクトルを求め、
前記画像中における動きベクトルと前記画像中に存在す
る平面の動きベクトルとから、前記平面に対して静止し
ている立体物を検出するようにしたものであり、平面の
動きベクトルを基準とした、動きベクトルの相違という
観点で立体物の検出を行なうから、平面画像から正確に
立体物を検出することができるという作用を有する。
検出方法として、移動体に取り付けられた撮像手段によ
り遠景撮像をし、前記撮像により得られた複数枚の画像
から、この画像中における動きベクトルを算出する一
方、前記画像中に存在する平面の動きベクトルを求め、
前記画像中における動きベクトルと前記画像中に存在す
る平面の動きベクトルとから、前記平面に対して静止し
ている立体物を検出するようにしたものであり、平面の
動きベクトルを基準とした、動きベクトルの相違という
観点で立体物の検出を行なうから、平面画像から正確に
立体物を検出することができるという作用を有する。
【0017】
【発明の実施の形態】以下、本発明の実施の形態につい
て、図面を参照して詳細に説明する。 (実施の形態1)図1は本発明の実施の形態1における
立体物検出装置の構成を示すブロック図である。なお、
この実施の形態1においては、移動体である自動車に撮
像カメラを搭載し、上記自動車の走行中において、上記
撮像カメラにより自動車の外を撮像(遠景撮像)しなが
ら立体物検出を行なうものとする。
て、図面を参照して詳細に説明する。 (実施の形態1)図1は本発明の実施の形態1における
立体物検出装置の構成を示すブロック図である。なお、
この実施の形態1においては、移動体である自動車に撮
像カメラを搭載し、上記自動車の走行中において、上記
撮像カメラにより自動車の外を撮像(遠景撮像)しなが
ら立体物検出を行なうものとする。
【0018】図1に示す立体物検出装置は、自動車に搭
載される撮像カメラ1と、撮像カメラ1で得られた画像
から動きベクトルを算出する第1の動きベクトル算出部
2と、上記画像中の平面の動きベクトルを求める第2の
動きベクトル算出部3と、上記第1の動きベクトル算出
部2で得られた動きベクトルと前記第2の動きベクトル
算出部3で得られた動きベクトルとを比較する比較器
と、比較器4における比較結果から画像中の対象物が平
面に対して立体物であるかどうかを判定する立体物判定
部5と、撮像カメラ1による撮像状況を検出して上記第
2の動きベクトル算出部3へ送付する撮像状況検出部6
と、自動車の移動距離を検出して上記第2の動きベクト
ル算出部3へ送付する移動距離検出部7と、装置全体の
動作をコントロールする制御部8とから構成されてい
る。
載される撮像カメラ1と、撮像カメラ1で得られた画像
から動きベクトルを算出する第1の動きベクトル算出部
2と、上記画像中の平面の動きベクトルを求める第2の
動きベクトル算出部3と、上記第1の動きベクトル算出
部2で得られた動きベクトルと前記第2の動きベクトル
算出部3で得られた動きベクトルとを比較する比較器
と、比較器4における比較結果から画像中の対象物が平
面に対して立体物であるかどうかを判定する立体物判定
部5と、撮像カメラ1による撮像状況を検出して上記第
2の動きベクトル算出部3へ送付する撮像状況検出部6
と、自動車の移動距離を検出して上記第2の動きベクト
ル算出部3へ送付する移動距離検出部7と、装置全体の
動作をコントロールする制御部8とから構成されてい
る。
【0019】この実施の形態において撮像カメラ1は、
自動車に搭載された状態で、特に旋回動作やチルト動作
を行なうことなく固定した状態で撮像を行なう。またズ
ーム動作なども行なわず一定の画角、一定の方向へ固定
されている。また撮像カメラ1の取り付け位置について
は例えは自動車を中心に側方、フロント方向、リア方
向、或いは斜め方向等どの方向であってもよい。
自動車に搭載された状態で、特に旋回動作やチルト動作
を行なうことなく固定した状態で撮像を行なう。またズ
ーム動作なども行なわず一定の画角、一定の方向へ固定
されている。また撮像カメラ1の取り付け位置について
は例えは自動車を中心に側方、フロント方向、リア方
向、或いは斜め方向等どの方向であってもよい。
【0020】第1の動きベクトル算出部2は、撮像カメ
ラ1により撮像された複数枚の画像から動きベクトルを
算出する。この場合、第1の動きベクトル算出部2は、
例えば、注目画像について1タイミング前(この明細書
においては、「移動前」と表現する)の撮像画像と現在
(同、「移動後」)の撮像画像と間で画素ごとのデータ
の比較を行なう、いわゆるオプティカルフロー算出処理
によって動きベクトルを算出する。第2の動きベクトル
算出部3は撮像状況検出部6および移動距離検出部7か
らの検出結果に基づき画像中に存在する平面の動きベク
トルを求める。撮像状況検出部6は撮像カメラ1による
撮像状況を検出する。この撮像状況検出では、(1)撮
像カメラ1が自動車のどの場所に取り付けられている
か、(2)撮像カメラ1は自動車からどの方向へ向けて
設置されているか(カメラの光軸はどの方向へ向いてい
るか、或いは道路面に対する角度はどれだけか)、
(3)撮像カメラ1の画角、F値など、種々の撮影条
件、などのデータが検出される。
ラ1により撮像された複数枚の画像から動きベクトルを
算出する。この場合、第1の動きベクトル算出部2は、
例えば、注目画像について1タイミング前(この明細書
においては、「移動前」と表現する)の撮像画像と現在
(同、「移動後」)の撮像画像と間で画素ごとのデータ
の比較を行なう、いわゆるオプティカルフロー算出処理
によって動きベクトルを算出する。第2の動きベクトル
算出部3は撮像状況検出部6および移動距離検出部7か
らの検出結果に基づき画像中に存在する平面の動きベク
トルを求める。撮像状況検出部6は撮像カメラ1による
撮像状況を検出する。この撮像状況検出では、(1)撮
像カメラ1が自動車のどの場所に取り付けられている
か、(2)撮像カメラ1は自動車からどの方向へ向けて
設置されているか(カメラの光軸はどの方向へ向いてい
るか、或いは道路面に対する角度はどれだけか)、
(3)撮像カメラ1の画角、F値など、種々の撮影条
件、などのデータが検出される。
【0021】移動距離検出部7は立体物検出動作中にお
ける自動車の移動距離を検出する。これは、自動車の速
度情報と撮像カメラ1による画像取り込みタイミングの
間隔とに基づいて或いはその他の方法により検出され
る。制御部8はCPUなどにより構成される。そして複
数の画像中の同じ点についての動きベクトルを比較する
ために上記第1の動きベクトル算出部2からのデータ出
力と第1の動きベクトル算出部2からのデータ出力の対
応およびタイミング制御を行ない、また立体物判定部5
における判別動作をコントロールする。
ける自動車の移動距離を検出する。これは、自動車の速
度情報と撮像カメラ1による画像取り込みタイミングの
間隔とに基づいて或いはその他の方法により検出され
る。制御部8はCPUなどにより構成される。そして複
数の画像中の同じ点についての動きベクトルを比較する
ために上記第1の動きベクトル算出部2からのデータ出
力と第1の動きベクトル算出部2からのデータ出力の対
応およびタイミング制御を行ない、また立体物判定部5
における判別動作をコントロールする。
【0022】かかる構成を有する立体物検出装置につい
て、以下動作を説明する。図2および図3は本発明にお
ける立体物検出の動作原理を説明する図である。なおこ
の説明では撮像カメラ1は自動車のサイドウインドウか
ら側方へ向けて設置されているものとして説明する。
て、以下動作を説明する。図2および図3は本発明にお
ける立体物検出の動作原理を説明する図である。なおこ
の説明では撮像カメラ1は自動車のサイドウインドウか
ら側方へ向けて設置されているものとして説明する。
【0023】図2は、自動車走行中における撮像カメラ
1による撮像動作および撮像により得られる画像の状態
を表す図である。図2において、10は自動車側方のフ
ィールド(遠景、景色を含む道路面を表す)である。こ
のフィールド10の中には道路上の点Aと立体物Bとが
存在している。図2から明らかなように、撮像カメラ1
側から見て道路上の点Aは立体物Bよりも遠くに存在す
る。11は移動前の撮像カメラ1の位置を表し、この位
置で撮像カメラ1は画像12を撮像している。13は移
動後の撮像カメラ1の位置を表し、この位置で撮像カメ
ラ1は画像14を撮像している。移動前のカメラ位置1
1においては、撮像カメラ1から見ると道路上の点Aと
立体物Bとはちょうど重なって見える。したがって、画
像12の中においては、道路上の点Aの画像 (A1と
する)と立体物Bの画像(B1とする)は1点(A1,
B1)に重なって写る。すなわち画像12では奥行きの
異なる2点が同じ点に投影されていることになる。
1による撮像動作および撮像により得られる画像の状態
を表す図である。図2において、10は自動車側方のフ
ィールド(遠景、景色を含む道路面を表す)である。こ
のフィールド10の中には道路上の点Aと立体物Bとが
存在している。図2から明らかなように、撮像カメラ1
側から見て道路上の点Aは立体物Bよりも遠くに存在す
る。11は移動前の撮像カメラ1の位置を表し、この位
置で撮像カメラ1は画像12を撮像している。13は移
動後の撮像カメラ1の位置を表し、この位置で撮像カメ
ラ1は画像14を撮像している。移動前のカメラ位置1
1においては、撮像カメラ1から見ると道路上の点Aと
立体物Bとはちょうど重なって見える。したがって、画
像12の中においては、道路上の点Aの画像 (A1と
する)と立体物Bの画像(B1とする)は1点(A1,
B1)に重なって写る。すなわち画像12では奥行きの
異なる2点が同じ点に投影されていることになる。
【0024】ここで、移動前の撮像カメラ1から得られ
る画像12と移動後の撮像カメラ1から得られる画像1
4とから、異なる2点の画像上での移動量について考え
る。移動前の撮像カメラ1から得た画像12上で同じ点
に投影されている奥行きの異なる2点は、撮像カメラ1
の移動後は画像14面の上では異なる2点(道路上の点
Aの画像をA2とし、立体物Bの画像をB2とする)に
投影される。このとき、画像14面上で2点A2、B2
の移動量を比べてみると、奥行きの大きい方の道路上の
点Aが奥行きの小さい方の立体物Bの点よりも小さくな
ることが分かる。図3は、このような撮像カメラ1の移
動前と移動後における画像での奥行きの異なる2点の移
動量の違いを説明する図である。
る画像12と移動後の撮像カメラ1から得られる画像1
4とから、異なる2点の画像上での移動量について考え
る。移動前の撮像カメラ1から得た画像12上で同じ点
に投影されている奥行きの異なる2点は、撮像カメラ1
の移動後は画像14面の上では異なる2点(道路上の点
Aの画像をA2とし、立体物Bの画像をB2とする)に
投影される。このとき、画像14面上で2点A2、B2
の移動量を比べてみると、奥行きの大きい方の道路上の
点Aが奥行きの小さい方の立体物Bの点よりも小さくな
ることが分かる。図3は、このような撮像カメラ1の移
動前と移動後における画像での奥行きの異なる2点の移
動量の違いを説明する図である。
【0025】ここで、2点のうち、撮像カメラ1から見
て遠くに位置する方の点(この例ではA)を道路面上の
点、またもう一方の点(同じくB)を道路面の上に存在
する立体物と考えれば、道路上に存在する立体物のオプ
ティカルフローは、そこに物体がなかった場合の道路面
のオプティカルフローより常に大きくなるということが
言える。したがって、何らかの方法で撮像カメラ1の移
動前の画像と移動後の画像上での平面のオプティカルフ
ローが求められれば、同じ画像上の注目部位(注目点)
について、周辺部位のオプティカルフローと比べて大き
なオプティカルフローを持つ点を立体物として検出する
ことができる。本発明における立体物検出の原理はこの
ような思想に基づくものである。
て遠くに位置する方の点(この例ではA)を道路面上の
点、またもう一方の点(同じくB)を道路面の上に存在
する立体物と考えれば、道路上に存在する立体物のオプ
ティカルフローは、そこに物体がなかった場合の道路面
のオプティカルフローより常に大きくなるということが
言える。したがって、何らかの方法で撮像カメラ1の移
動前の画像と移動後の画像上での平面のオプティカルフ
ローが求められれば、同じ画像上の注目部位(注目点)
について、周辺部位のオプティカルフローと比べて大き
なオプティカルフローを持つ点を立体物として検出する
ことができる。本発明における立体物検出の原理はこの
ような思想に基づくものである。
【0026】図4は本実施の形態における立体物検出動
作の処理手順を説明するフロー図である。立体物検出動
作が開始されると、処理ステップ(以下、単にステップ
という)ST1において、撮像カメラ1により撮像が行
なわれ、これにより得られた画像データとして移動前の
画像12および移動後の画像14が第1の動きベクトル
算出部2へ入力される。第1の動きベクトル算出部2に
おいては撮像画像についての動きベクトル、すなわちオ
プティカルフロー(これを第1の動きベクトルとする)
が求められる(ステップST2)。図5は第1の動きベ
クトル算出部2において求められた第1の動きベクトル
の例を示す図である。図5において15は画像である。
また、矢印は第1の動きベクトルでありこの図では立体
物の動きベクトルと平面の動きベクトルとが混在してい
る。そして、動きベクトル16、17、18、19、2
0は平面の動きベクトルであり、画像15中の上方へ行
くほど動きベクトルは小さく、下方へ行くほど動きベク
トルは大きくなっている。これは、画像15中で上方へ
行くほど実際のフィールド(図2の符号10)では遠方
になって動きは小さくなる一方、下方へ行くほど実際の
フィールド10では近接位置になって動きは大きくなる
ことによる。なお、画像中、同じ高さ位置(水平なスリ
ットで画成され得る位置)は撮像カメラ1側から見て同
じ距離にある地点を示し平面の動きベクトルは同じ大き
さになる。また動きベクトル21および22はそれぞれ
立体物23および24の動きベクトルである。画像15
中において同じ高さ位置にある平面の動きベクトル(例
えば動きベクトル18)と立体物の動きベクトル(例え
ば動きベクトル21)とでは、立体物の動きベクトルの
方が大きいことが分かる。
作の処理手順を説明するフロー図である。立体物検出動
作が開始されると、処理ステップ(以下、単にステップ
という)ST1において、撮像カメラ1により撮像が行
なわれ、これにより得られた画像データとして移動前の
画像12および移動後の画像14が第1の動きベクトル
算出部2へ入力される。第1の動きベクトル算出部2に
おいては撮像画像についての動きベクトル、すなわちオ
プティカルフロー(これを第1の動きベクトルとする)
が求められる(ステップST2)。図5は第1の動きベ
クトル算出部2において求められた第1の動きベクトル
の例を示す図である。図5において15は画像である。
また、矢印は第1の動きベクトルでありこの図では立体
物の動きベクトルと平面の動きベクトルとが混在してい
る。そして、動きベクトル16、17、18、19、2
0は平面の動きベクトルであり、画像15中の上方へ行
くほど動きベクトルは小さく、下方へ行くほど動きベク
トルは大きくなっている。これは、画像15中で上方へ
行くほど実際のフィールド(図2の符号10)では遠方
になって動きは小さくなる一方、下方へ行くほど実際の
フィールド10では近接位置になって動きは大きくなる
ことによる。なお、画像中、同じ高さ位置(水平なスリ
ットで画成され得る位置)は撮像カメラ1側から見て同
じ距離にある地点を示し平面の動きベクトルは同じ大き
さになる。また動きベクトル21および22はそれぞれ
立体物23および24の動きベクトルである。画像15
中において同じ高さ位置にある平面の動きベクトル(例
えば動きベクトル18)と立体物の動きベクトル(例え
ば動きベクトル21)とでは、立体物の動きベクトルの
方が大きいことが分かる。
【0027】一方、第2の動きベクトル算出部3には撮
像状況検出部6から、撮像カメラ1の向き或いはその他
の状況に関するデータが入力される。また同様に、移動
距離検出部7は移動前の画像12が撮像されてから移動
後の画像14が撮像されるまでの自動車の移動距離を検
出し、その移動距離データを第2の動きベクトル算出部
3へ送付する。第2の動きベクトル算出部3は上記撮像
状況検出部6および移動距離検出部7からの検出データ
を基に画像中に存在する平面の動きベクトル(これを第
2の動きベクトルとする)を演算により求める(ステッ
プST3)。この実施の形態においては、第2の動きベ
クトル算出部3は、画像12、14の全体が平面である
と推定してその平面の動きベクトルを演算により求め
る。図6は第2の動きベクトル算出部3において求めら
れた第2の動きベクトルの例を示す図である。この図で
は、上記図5のように立体物の動きベクトル(21、2
2)は存在せず、すべてが平面の動きベクトル16〜2
0となっている。
像状況検出部6から、撮像カメラ1の向き或いはその他
の状況に関するデータが入力される。また同様に、移動
距離検出部7は移動前の画像12が撮像されてから移動
後の画像14が撮像されるまでの自動車の移動距離を検
出し、その移動距離データを第2の動きベクトル算出部
3へ送付する。第2の動きベクトル算出部3は上記撮像
状況検出部6および移動距離検出部7からの検出データ
を基に画像中に存在する平面の動きベクトル(これを第
2の動きベクトルとする)を演算により求める(ステッ
プST3)。この実施の形態においては、第2の動きベ
クトル算出部3は、画像12、14の全体が平面である
と推定してその平面の動きベクトルを演算により求め
る。図6は第2の動きベクトル算出部3において求めら
れた第2の動きベクトルの例を示す図である。この図で
は、上記図5のように立体物の動きベクトル(21、2
2)は存在せず、すべてが平面の動きベクトル16〜2
0となっている。
【0028】上記第1の動きベクトル算出部位2および
第2の動きベクトル算出部3は制御部8のコントロール
の下でそれぞれ第1の動きベクトルおよび第2の動きベ
クトルを比較器4に出力し、比較器4は第1および第2
の動きベクトルを比較する(ステップST4)。この比
較結果は立体物判定部5に送られて画像12、14中に
立体物が存在するか否かがチェックされる(ステップS
T5)。このチェック動作においては、第1の動きベク
トルと第2の動きベクトルとの差が所定の閾値より大き
いか否かがチェックされる。そして、上記第1の動きベ
クトルと第2の動きベクトルとの差が所定の閾値より大
きい場合は立体物検出が行なわれて検出信号が出力され
る一方(ステップST6)、第1の動きベクトルと第2
の動きベクトルとの差が所定の閾値より大きくない場合
は立体物が検出されなかったことを表す非検出信号が出
力される(ステップST7)。このようにして画像中に
おける立体物の検出が行なわれる。
第2の動きベクトル算出部3は制御部8のコントロール
の下でそれぞれ第1の動きベクトルおよび第2の動きベ
クトルを比較器4に出力し、比較器4は第1および第2
の動きベクトルを比較する(ステップST4)。この比
較結果は立体物判定部5に送られて画像12、14中に
立体物が存在するか否かがチェックされる(ステップS
T5)。このチェック動作においては、第1の動きベク
トルと第2の動きベクトルとの差が所定の閾値より大き
いか否かがチェックされる。そして、上記第1の動きベ
クトルと第2の動きベクトルとの差が所定の閾値より大
きい場合は立体物検出が行なわれて検出信号が出力され
る一方(ステップST6)、第1の動きベクトルと第2
の動きベクトルとの差が所定の閾値より大きくない場合
は立体物が検出されなかったことを表す非検出信号が出
力される(ステップST7)。このようにして画像中に
おける立体物の検出が行なわれる。
【0029】図7は本実施の形態の変更例として、撮像
カメラ1を自動車のフロント部分に、この自動車の進行
方向に向けて設置した場合の第1の動きベクトル算出部
2において求められた第1の動きベクトルの例を示す図
である。このように、撮像カメラ1を自動車のフロント
部分に設置した場合は、動きベクトルは放射状に、且つ
遠い地点ではゆっくりと近づき、近い地点では高速で近
づく形の動きベクトルが得られる。このような撮像カメ
ラ1の設置状態でも、上述の態様と同様に立体物検出を
行なうことができる。
カメラ1を自動車のフロント部分に、この自動車の進行
方向に向けて設置した場合の第1の動きベクトル算出部
2において求められた第1の動きベクトルの例を示す図
である。このように、撮像カメラ1を自動車のフロント
部分に設置した場合は、動きベクトルは放射状に、且つ
遠い地点ではゆっくりと近づき、近い地点では高速で近
づく形の動きベクトルが得られる。このような撮像カメ
ラ1の設置状態でも、上述の態様と同様に立体物検出を
行なうことができる。
【0030】(実施の形態2)次に、本発明の第2の実
施の形態について説明する。この実施の形態において
は、第2の動きベクトル算出手段は、第1の動きベクト
ル算出手段からの動きベクトルデータを解析し、その解
析結果から、前記画像中の各点に対応する平面の動きベ
クトルを算出する方式が採用される。
施の形態について説明する。この実施の形態において
は、第2の動きベクトル算出手段は、第1の動きベクト
ル算出手段からの動きベクトルデータを解析し、その解
析結果から、前記画像中の各点に対応する平面の動きベ
クトルを算出する方式が採用される。
【0031】図8は本発明の実施の形態1における立体
物検出装置の構成を示すブロック図である。なお、図8
において図1に示す機能部と同じ機能部には同じ符号を
付して詳細な説明を省略する。図8に示す立体物検出装
置では、図1における撮像状況検出部6と、移動距離検
出部7とが省略されている。また、この立体物検出装置
では、図1における第2の動きベクトル算出手段3とは
異なった動作を行なう第2の動きベクトル算出手段30
が備えられている。そして、第1の動きベクトル算出手
段2と第2の動きベクトル算出手段30とはデータ線3
1によって接続されている。
物検出装置の構成を示すブロック図である。なお、図8
において図1に示す機能部と同じ機能部には同じ符号を
付して詳細な説明を省略する。図8に示す立体物検出装
置では、図1における撮像状況検出部6と、移動距離検
出部7とが省略されている。また、この立体物検出装置
では、図1における第2の動きベクトル算出手段3とは
異なった動作を行なう第2の動きベクトル算出手段30
が備えられている。そして、第1の動きベクトル算出手
段2と第2の動きベクトル算出手段30とはデータ線3
1によって接続されている。
【0032】かかる構成により、立体物検出動作に際し
ては、第2の動きベクトル算出部30は第1の動きベク
トル算出手段から動きベクトルデータを図5に示す画像
15とともに受け取り、その動きベクトル16〜22を
解析し、その解析結果から、平面であることが明確な部
分の動きベクトルからオプティカルフローを算出する。
また、別の態様として、第2の動きベクトル算出手段3
0は、第1の動きベクトル算出手段2からの動きベクト
ルデータを解析するに当たって、画像中で平面の動きベ
クトル量が充分得られている場合には、上記画像より平
面のオプティカルフローを算出し、これを平面の動きベ
クトルとする。これは、先にも述べたように、画像15
中には平面の動きベクトルと立体物の動きベクトルが混
在しており、もし画像15中に立体物が存在するとすれ
ば、その立体物画像の動きベクトルは必ず立体物が無い
とした平面の動きベクトルよりも大きい動きベクトルと
なるはずであるから、画像15中における同一高さ位置
に存在する複数の動きベクトルの最小値を求めれば、そ
れが平面の動きベクトルと認定しても差し支えないこと
による。
ては、第2の動きベクトル算出部30は第1の動きベク
トル算出手段から動きベクトルデータを図5に示す画像
15とともに受け取り、その動きベクトル16〜22を
解析し、その解析結果から、平面であることが明確な部
分の動きベクトルからオプティカルフローを算出する。
また、別の態様として、第2の動きベクトル算出手段3
0は、第1の動きベクトル算出手段2からの動きベクト
ルデータを解析するに当たって、画像中で平面の動きベ
クトル量が充分得られている場合には、上記画像より平
面のオプティカルフローを算出し、これを平面の動きベ
クトルとする。これは、先にも述べたように、画像15
中には平面の動きベクトルと立体物の動きベクトルが混
在しており、もし画像15中に立体物が存在するとすれ
ば、その立体物画像の動きベクトルは必ず立体物が無い
とした平面の動きベクトルよりも大きい動きベクトルと
なるはずであるから、画像15中における同一高さ位置
に存在する複数の動きベクトルの最小値を求めれば、そ
れが平面の動きベクトルと認定しても差し支えないこと
による。
【0033】このようにして、第2の動きベクトル算出
部30による平面の動きベクトルが算出された上で立体
物の検出が行なわれる。
部30による平面の動きベクトルが算出された上で立体
物の検出が行なわれる。
【0034】なお、この実施の形態において、変更例と
して、第2の動きベクトル算出部30は撮像カメラ1に
も接続され、この第2の動きベクトル算出部30は第1
の動きベクトル算出手段から動きベクトルデータのみを
受け取り、画像は撮像カメラ1から受け取るようにする
こともできる。
して、第2の動きベクトル算出部30は撮像カメラ1に
も接続され、この第2の動きベクトル算出部30は第1
の動きベクトル算出手段から動きベクトルデータのみを
受け取り、画像は撮像カメラ1から受け取るようにする
こともできる。
【0035】
【発明の効果】以上説明したように、本発明は、立体物
検出方法として、移動体に取り付けられた撮像手段によ
り遠景撮像をし、撮像により得られた複数枚の画像か
ら、この画像中における動きベクトルを算出する一方、
前記画像中に存在する平面の動きベクトルを求め、前記
画像中における動きベクトルと前記画像中に存在する平
面の動きベクトルとから、前記平面に対して静止してい
る立体物を検出するようにしたため、移動体に取り付け
た撮像カメラにより得られた画像から道路面とその他の
立体物とを区別することができる。また、本発明では、
上記のような、撮像した画像の処理により立体物検出を
行なうため、複数の撮像手段を備える必要がなく、しか
も処理データ量が不要に増大しないため、車両などの移
動体に搭載された撮像手段により得られた画像の高速処
理が可能となる。また平面の動きベクトルを基準とし
た、動きベクトルの相違という観点で立体物の検出を行
なうから、平面画像から正確に立体物を検出することが
できる。
検出方法として、移動体に取り付けられた撮像手段によ
り遠景撮像をし、撮像により得られた複数枚の画像か
ら、この画像中における動きベクトルを算出する一方、
前記画像中に存在する平面の動きベクトルを求め、前記
画像中における動きベクトルと前記画像中に存在する平
面の動きベクトルとから、前記平面に対して静止してい
る立体物を検出するようにしたため、移動体に取り付け
た撮像カメラにより得られた画像から道路面とその他の
立体物とを区別することができる。また、本発明では、
上記のような、撮像した画像の処理により立体物検出を
行なうため、複数の撮像手段を備える必要がなく、しか
も処理データ量が不要に増大しないため、車両などの移
動体に搭載された撮像手段により得られた画像の高速処
理が可能となる。また平面の動きベクトルを基準とし
た、動きベクトルの相違という観点で立体物の検出を行
なうから、平面画像から正確に立体物を検出することが
できる。
【図1】本発明の実施の形態1における立体物検出装置
の構成を示すブロック図
の構成を示すブロック図
【図2】前記実施の形態において自動車の走行中におけ
る撮像カメラによる撮像動作および撮像により得られる
画像の状態を表す図
る撮像カメラによる撮像動作および撮像により得られる
画像の状態を表す図
【図3】前記実施の形態において撮像カメラの移動前と
移動後における画像での奥行きの異なる2点の移動量の
違いを説明する図
移動後における画像での奥行きの異なる2点の移動量の
違いを説明する図
【図4】前記実施の形態における立体物検出動作の処理
手順を説明するフロー図
手順を説明するフロー図
【図5】前記実施の形態において第1の動きベクトル算
出部により求められた第1の動きベクトルの例を示す図
出部により求められた第1の動きベクトルの例を示す図
【図6】前記実施の形態において第2の動きベクトル算
出部により求められた第2の動きベクトルの例を示す図
出部により求められた第2の動きベクトルの例を示す図
【図7】前記実施の形態の変更例として、撮像カメラを
自動車のフロント部分に進行方向に向けて設置した場合
の第1の動きベクトル算出部により求められた第1の動
きベクトルの例を示す図
自動車のフロント部分に進行方向に向けて設置した場合
の第1の動きベクトル算出部により求められた第1の動
きベクトルの例を示す図
【図8】本発明の実施の形態2における立体物検出装置
の構成を示すブロック図
の構成を示すブロック図
1 撮像カメラ 2 第1の動きベクトル算出部 3、30 第2の動きベクトル算出部 4 比較器 5 立体物判定部 6 撮像状況検出部 7 移動距離検出部 8 制御部 10 フィールド(遠景、景色) 11 移動前のカメラ位置 12 画像(移動前) 13 移動後のカメラ位置 14 画像(移動後) 15 画像 16、17、18、19、20 平面の動きベクトル 21、22 立体物の動きベクトル 23、24 立体物
───────────────────────────────────────────────────── フロントページの続き (51)Int.Cl.7 識別記号 FI テーマコート゛(参考) H04N 7/18 G06F 15/62 415 // H04N 13/02 15/70 410 (72)発明者 西澤 眞人 神奈川県横浜市港北区綱島東四丁目3番1 号 松下通信工業株式会社内 Fターム(参考) 2F065 AA53 BB05 FF01 FF04 JJ03 JJ19 JJ26 MM03 QQ31 5B057 AA16 BA02 BA11 CA08 CA13 CB01 CB08 CB13 CC01 DA06 DB03 DB09 DC02 DC03 DC31 5C054 AA01 FC13 FC15 FD02 HA28 HA30 5C061 AB03 AB08 AB12 AB17 5L096 AA09 CA04 EA23
Claims (8)
- 【請求項1】 移動体に取り付けられた撮像手段と、こ
の撮像手段により撮像された複数枚の画像から動きベク
トルを算出する第1の動きベクトル算出手段と、前記画
像中に存在する平面の動きベクトルを求める第2の動き
ベクトル算出手段と、前記第1の動きベクトル算出手段
で得られた動きベクトルと前記第2の動きベクトル算出
手段で得られた動きベクトルとから、前記平面に対して
静止している立体物を検出する立体物検出手段とを備え
た立体物検出装置。 - 【請求項2】 前記第1の動きベクトル算出手段は、オ
プティカルフロー処理により動きベクトルを算出するこ
とを特徴とする請求項1記載の立体物検出装置。 - 【請求項3】 前記撮像手段の撮像状況を検出する撮像
状況検出手段と、前記移動体の移動状況を検出する移動
状況検出手段とをさらに備え、前記第2の動きベクトル
算出手段は、前記撮像状況検出手段および前記移動状況
検出手段からのデータをもとに、前記画像中の各点に対
応する平面の動きベクトルを算出することを特徴とする
請求項1または2記載の立体物検出装置。 - 【請求項4】 前記第2の動きベクトル算出手段は、前
記第1の動きベクトル算出手段からの動きベクトルデー
タを解析し、その解析結果から、前記画像中の各点に対
応する平面の動きベクトルを算出することを特徴とする
請求項1または2記載の立体物検出装置。 - 【請求項5】 前記第2の動きベクトル算出手段は、前
記第1の動きベクトル算出手段からの動きベクトルデー
タを解析するに当たって、平面であることが明確な部分
の動きベクトルからオプティカルフローを算出すること
を特徴とする請求項4記載の立体物検出装置。 - 【請求項6】 前記第2の動きベクトル算出手段は、前
記第1の動きベクトル算出手段からの動きベクトルデー
タを解析するに当たって、前記画像中で平面の動きベク
トル量が充分得られている場合には、前記画像より平面
のオプティカルフローを算出することを特徴とする請求
項4記載の立体物検出装置。 - 【請求項7】 前記第2の動きベクトル算出手段は、前
記第1の動きベクトル算出手段からの動きベクトルデー
タを解析するに当たって、前記画像中の所定の高さ位置
についての動きベクトルの最小値を求め、この最小の動
きベクトルをその高さ位置に対応する平面の動きベクト
ルとすることを特徴とする請求項4記載の立体物検出装
置。 - 【請求項8】 移動体に取り付けられた撮像手段により
遠景撮像をし、 前記撮像により得られた複数枚の画像から、この画像中
における動きベクトルを算出する一方、 前記画像中に存在する平面の動きベクトルを求め、 前記画像中における動きベクトルと前記画像中に存在す
る平面の動きベクトルとから、前記平面に対して静止し
ている立体物を検出する立体物検出方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP29893399A JP2001116527A (ja) | 1999-10-20 | 1999-10-20 | 立体物検出方法及び装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP29893399A JP2001116527A (ja) | 1999-10-20 | 1999-10-20 | 立体物検出方法及び装置 |
Publications (1)
Publication Number | Publication Date |
---|---|
JP2001116527A true JP2001116527A (ja) | 2001-04-27 |
Family
ID=17866074
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP29893399A Pending JP2001116527A (ja) | 1999-10-20 | 1999-10-20 | 立体物検出方法及び装置 |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP2001116527A (ja) |
Cited By (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2002352249A (ja) * | 2001-05-23 | 2002-12-06 | Toshiba Corp | 画像処理装置及びその方法 |
JP2005157779A (ja) * | 2003-11-26 | 2005-06-16 | Gifu Univ | 測距装置 |
WO2007108090A1 (ja) * | 2006-03-20 | 2007-09-27 | Fujitsu Limited | 画像解析プログラム、該プログラムを記録した記録媒体、画像解析装置および画像解析方法 |
JP2007316790A (ja) * | 2006-05-24 | 2007-12-06 | Nissan Motor Co Ltd | 歩行者検出装置および歩行者検出方法 |
CN102679957A (zh) * | 2012-04-26 | 2012-09-19 | 燕山大学 | 融合背景信息与颜色特征的鱼体检测方法 |
CN103029621A (zh) * | 2011-09-30 | 2013-04-10 | 株式会社理光 | 检测前方车辆的方法及设备 |
JP2013149175A (ja) * | 2012-01-22 | 2013-08-01 | Suzuki Motor Corp | オプティカルフロー処理装置及び表示半径マップ生成装置 |
CN104002685A (zh) * | 2010-06-09 | 2014-08-27 | 李尔公司 | 共享存储结构 |
JP2020042831A (ja) * | 2011-12-06 | 2020-03-19 | モービルアイ ヴィジョン テクノロジーズ リミテッド | 道路の垂直輪郭検出 |
US11170466B2 (en) | 2010-09-21 | 2021-11-09 | Mobileye Vision Technologies Ltd. | Dense structure from motion |
Citations (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH10222679A (ja) * | 1997-02-04 | 1998-08-21 | Toyota Motor Corp | 車両用画像処理装置 |
-
1999
- 1999-10-20 JP JP29893399A patent/JP2001116527A/ja active Pending
Patent Citations (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH10222679A (ja) * | 1997-02-04 | 1998-08-21 | Toyota Motor Corp | 車両用画像処理装置 |
Cited By (12)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2002352249A (ja) * | 2001-05-23 | 2002-12-06 | Toshiba Corp | 画像処理装置及びその方法 |
JP2005157779A (ja) * | 2003-11-26 | 2005-06-16 | Gifu Univ | 測距装置 |
US7286688B2 (en) | 2003-11-26 | 2007-10-23 | Gifu University | Object detection apparatus, distance measuring apparatus and object detection method |
WO2007108090A1 (ja) * | 2006-03-20 | 2007-09-27 | Fujitsu Limited | 画像解析プログラム、該プログラムを記録した記録媒体、画像解析装置および画像解析方法 |
JP2007316790A (ja) * | 2006-05-24 | 2007-12-06 | Nissan Motor Co Ltd | 歩行者検出装置および歩行者検出方法 |
CN104002685A (zh) * | 2010-06-09 | 2014-08-27 | 李尔公司 | 共享存储结构 |
US9195576B2 (en) | 2010-06-09 | 2015-11-24 | Lear Corporation | Shared memory architecture |
US11170466B2 (en) | 2010-09-21 | 2021-11-09 | Mobileye Vision Technologies Ltd. | Dense structure from motion |
CN103029621A (zh) * | 2011-09-30 | 2013-04-10 | 株式会社理光 | 检测前方车辆的方法及设备 |
JP2020042831A (ja) * | 2011-12-06 | 2020-03-19 | モービルアイ ヴィジョン テクノロジーズ リミテッド | 道路の垂直輪郭検出 |
JP2013149175A (ja) * | 2012-01-22 | 2013-08-01 | Suzuki Motor Corp | オプティカルフロー処理装置及び表示半径マップ生成装置 |
CN102679957A (zh) * | 2012-04-26 | 2012-09-19 | 燕山大学 | 融合背景信息与颜色特征的鱼体检测方法 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
EP2824417B1 (en) | Distance calculation device and distance calculation method | |
KR101647370B1 (ko) | 카메라 및 레이더를 이용한 교통정보 관리시스템 | |
EP0762326B1 (en) | Object detecting apparatus in which the position of a planar object is estimated by using Hough transform | |
JP4763250B2 (ja) | 物体検出装置 | |
GB2557465A (en) | Method for calibrating a camera and calibration system | |
JP5293131B2 (ja) | 車両用複眼距離測定装置及び複眼距離測定方法 | |
EP1087204B1 (en) | Range finder using stereoscopic images | |
EP3163506A1 (en) | Method for stereo map generation with novel optical resolutions | |
JP2001092048A (ja) | ステレオカメラの取付構造 | |
KR20170064652A (ko) | 에고모션 추정 시스템 및 방법 | |
JP2001116527A (ja) | 立体物検出方法及び装置 | |
JP3562250B2 (ja) | 先行車両検出装置 | |
JP3988574B2 (ja) | 画像処理装置 | |
JP4123138B2 (ja) | 車両検知方法及び車両検知装置 | |
JP5107154B2 (ja) | 運動推定装置 | |
JP3868915B2 (ja) | 前方監視装置及びその方法 | |
US20130142388A1 (en) | Arrival time estimation device, arrival time estimation method, arrival time estimation program, and information providing apparatus | |
JPH1023311A (ja) | 画像情報入力方法及び装置 | |
JP2002190027A (ja) | 画像認識による速度測定システム及び速度測定方法 | |
JP2018147241A (ja) | 画像処理装置、画像処理方法、及び画像処理プログラム | |
JP4185271B2 (ja) | 位置検出装置及び位置検出プログラム | |
JPH1096607A (ja) | 物体検出装置および平面推定方法 | |
JP2007049278A (ja) | システム用カメラ及び連携カメラシステム | |
US11282223B2 (en) | Signal processing apparatus, signal processing method, and imaging apparatus | |
WO2022249534A1 (ja) | 情報処理装置、情報処理方法およびプログラム |