JP2005276057A - ノーズビューモニタ装置 - Google Patents
ノーズビューモニタ装置 Download PDFInfo
- Publication number
- JP2005276057A JP2005276057A JP2004091667A JP2004091667A JP2005276057A JP 2005276057 A JP2005276057 A JP 2005276057A JP 2004091667 A JP2004091667 A JP 2004091667A JP 2004091667 A JP2004091667 A JP 2004091667A JP 2005276057 A JP2005276057 A JP 2005276057A
- Authority
- JP
- Japan
- Prior art keywords
- vehicle
- flow vector
- turning
- optical flow
- vector
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Landscapes
- Closed-Circuit Television Systems (AREA)
- Traffic Control Systems (AREA)
Abstract
【解決手段】 車両側方の画像を撮像する撮像手段3と、フローベクトルを算出するオプティカルフローベクトル算出手段11と、旋回方向を検出する旋回方向検出手段7と、旋回状態に対応したパラメータを検出する旋回状態対応値検出手段4,7と、旋回によって生じた旋回フローベクトルを設定する旋回オプティカルフローベクトル設定手段14と、フローベクトルから旋回フローベクトルを減算して補正フローベクトルを算出する補正オプティカルフローベクトル算出手段15と、補正フローベクトルに基づいて接近物体を検出する接近物体検出手段12と、該画像を表示し該接近物体の検出を報知する報知手段5とを備える。
【選択図】 図1
Description
また、例えば、車両の前方や後方を撮像するカメラの撮像画像において、移動物体として検出したい対象物のみかけの移動速度は、自車両の走行速度とその対象物の走行速度との差(相対速度)として撮像されるため、実際の対象物の移動速度よりも小さい移動速度で撮像されることになり、撮像画像から検出される対象物のオプティカルフローの大きさも比較的小さくなることが多い。
また、該接近物体検出手段は、該オプティカルフローベクトル補正手段によって補正されたオプティカルフローベクトルのうち該画像中における該車両の進行方向へのベクトル成分を有するオプティカルフローベクトルに基づいて接近物体を検出することが好ましい(請求項3)。
加えて、該報知手段は、該オプティカルフローベクトル補正手段によって補正されたオプティカルフローベクトルのうち該車両の進行方向へのベクトル成分を有するオプティカルフローベクトルの大きさ又は数に応じた複数の報知態様を切り換えて、該画像を表示するとともに該接近物体の検出を報知することが好ましい(請求項6)。
また、本発明のノーズビューモニタ装置(請求項3)によれば、車両旋回時に、車両側方における自車両への接近物体の認識を容易にすることができる。また、自車両への接近物体の認識にかかるオプティカルフローの方向を車両進行方向にすることで、演算量を削減させることができる。さらに、車両が低速で移動した場合であっても撮像した画像における背景画像の移動を自車両への接近物体と誤認識することを防止でき、正確に移動物体を検出して、検出精度を向上させることができる。したがって、自車両への接近物体の誤報知を低減させることができる。
また、本発明のノーズビューモニタ装置(請求項6,8)によれば、オプティカルフローベクトルの大きさ,数に応じた複数の報知態様を切り換えることによって、自車両への接近物体の危険度を判定することができ、危険度に応じた効果的な報知を行うことができるようになり、安全性を向上させることができる。
図1〜図7は、本発明の実施形態としてのノーズビューモニタ装置を示すもので、図1は本発明の第1実施形態としてのノーズビューモニタ装置を備えた車両を示す模式的構成図、図2は本装置によるモニタ表示例としての表示画面内容の模式図、図3(a)〜(f)は本装置の接近物体検出手段における演算処理を説明するための模式図であって、いずれも左半分は車両の左側方のノーズビュー及びフローベクトル、右半分は車両の右側方のノーズビュー及びフローベクトルを示すものであり、また、図4は本装置における制御を説明するためのフローチャート、図5は本装置におけるノーズビューカメラの撮像領域を示す模式的平面図、図6は本発明の第2実施形態としてのノーズビューモニタ装置を備えた車両を示す模式的構成図、図7は本装置における制御を説明するためのフローチャートである。
[第1実施形態]
図1を参照すると、本発明の第1実施形態としてのノーズビューモニタ装置1を搭載した車両2が示されている。車両2は、車両の左右側方を撮像するノーズビューカメラ(撮像手段)3,車両2の走行速度信号を検出する車速センサ(旋回状態対応値検出手段)4,ノーズビューカメラ3の作動スイッチとしてのノーズカメラスイッチ6,乗員によるステアリングホイールの操舵角(又は操舵輪の舵角)信号を検出する操舵角センサ(旋回方向検出手段・旋回状態対応値検出手段)7,電子制御ユニット(ECU)10及びノーズビューカメラ3によって撮像された画像を表示するためのモニタ(報知手段)5を備えて構成されている。
また、モニタ5は、ノーズビューカメラ3で撮像された左右側方の画像を表示するようになっている。本実施形態では、図2に示すように、車両2の右側方の画像をモニタ画面における右半分の領域に表示すると同時に、車両2の左側方の画像をモニタ画面における左半分の領域に表示するようになっている。これにより、乗員は車両の左右側方を同時に確認することができるようになっている。
ノーズカメラスイッチ6は、ノーズビューカメラ3の作動のオン/オフを切り換えるスイッチになっており、ノーズカメラスイッチ6がオフに操作されているときにはノーズビューカメラ3が作動しないようになっている。また、ノーズカメラスイッチ6がオンに操作されているときには、所定の条件(ノーズビューカメラ作動条件)が成立するとノーズビューカメラ3が作動するようになっている。
通常の走行時において、テレビ画像やカーナビゲーション画像を継続的に表示させた状態で、ノーズカメラスイッチ6がオンになっていれば、車両2が交差点やT字路へ進入しようとするとき、舵角θが所定角度θ0よりも小さく、且つ、所定速度V0より車両の速度が減速した時点で、自動的にノーズビューカメラ3が作動し、左右側方の画像がモニタ5に表示されるようになっている。つまり、乗員が意識しなくても、自動的に画像がテレビ画像やカーナビゲーション画像から左右側方の画像に切り換わるようになっている。また、舵角θが所定角度θ0以上のときや走行速度Vが所定速度V0以上のときには、ノーズビューカメラ3が作動せず、一般的な車載モニタとしてテレビ画像やカーナビゲーション画像の表示を継続するようになっている。
また、ノーズカメラスイッチ6をオフにしておけば、上述のノーズビューカメラ作動条件が成立したとしても、ノーズビューカメラ3を作動させないことができるようになっている。
次に、旋回フローベクトルの方向は、車両2の旋回方向の外側方向〔ここでは、画像上における水平方向(真横方向)〕に設定される。例えば、舵角θの符号が正のときには、車両2が右側へ旋回しているので、旋回フローベクトルの方向が撮像画像における左方向(左水平方向)に設定され、また、舵角θの符号が負のときには、車両2が左側へ旋回しているので、旋回フローベクトルの方向が撮像画像における右方向(右水平方向)に設定される。
また同様に、自車両2への接近物体が多い、又は、自車両2と接近物体との距離が近いときには、車両2の進行方向側へのベクトル成分を有する補正フローベクトルの数が増大することになるため、補正フローベクトルの数の増大に伴って、接近物体の車両2に対する危険度が上昇するものとして、その危険度に応じた複数の報知モードを切り換えて、画面表示,報知を実施する。
すなわち、車両2の進行方向側へのベクトル成分を有する補正フローベクトルについて、その大きさが予め設定された所定の大きさよりも大きなものが検出された場合、又は、予め設定された所定数以上検出された場合には、出力部13が「危険度大報知モード」に設定され、それ以外の場合には、出力部13が「危険度小報知モード」に設定される。
また、「危険度大報知モード」において、出力部13は、接近物体検出部12が検出した接近物体に対応する画面上の領域を強調表示(例えば、輝度や色調を変化させる等)するとともに、接近物体による全ての補正フローベクトルを矢印で画面表示し、さらに音声によって危険度が高いことを乗員へ報知する(例えば、「接近している車両がありますので注意してください」とアナウンスする等)ようになっている。
なお、出力部13は、ノーズビューカメラ作動条件が成立しなくなった(V≧V0またはθ≧θ0)ときにも、その旨を乗員へ報知するようになっている。
まず、ステップA10では、ノーズカメラスイッチ6がオンになっているか否かが判定される。オンになっていればステップA20へ進み、オフになっていればこのフローを終了する。次に、ステップA20では、車両の走行速度Vが所定速度V0よりも小さいか否かが判定され、V<V0の場合にはステップA30へ進み、V≧V0の場合にはこのフローを終了する。続いて、ステップA30では、操舵輪の舵角θが所定角度θ0よりも小さいか否かが判定され、θ<θ0の場合にはステップA40へ進み、θ≧θ0の場合にはこのフローを終了する。
ステップA40では、オプティカルフロー算出部11において、ノーズビューカメラ3が撮像した左右側方の画像における特徴点を個別に算出し、ステップA50で全ての特徴点についてのフローベクトルを算出する。つまりここでは、左右側方のの各々の画像内における移動物体が認識されることになる。
ステップA60で検出された接近物体の補正フローベクトルのうち、その大きさが予め設定された所定の大きさよりも大きいものが検出された場合、又は、予め設定された所定数以上の接近物体の補正フローベクトルが検出された場合には、出力部13が「危険度大報知モード」に設定され、接近物体に対応する画面上の領域が強調表示されるとともに、接近物体による全ての補正フローベクトルが矢印で画面表示され、さらに音声によって危険度が高いことが、乗員へ報知され、このフローを終了する。
図5に示すようなT字路において、車両2が左右確認しながら幹線道路へ進入しようとする場合、まず車両2のノーズカメラスイッチ6がオンに操作されていると、車両2が幹線道路の手前で走行速度を所定速度V0よりも小さくしたときに、自動的にノーズビューカメラ3が作動し、左右側方の画像がモニタ5に表示される。これにより、乗員にモニタ5の画像の切り換えを意識させることなく、自動的に左右側方の画像をモニタ5へ表示させることができる。また、ノーズビューカメラ3が作動すると、ECU10において、撮像した画像におけるオプティカルフローの算出を開始する。
ここで、車両2が図5に示す位置にステアリングがニュートラルの状態で停止している場合には、図3(a)に示すように、ノーズビューカメラ3の位置が固定されているため、撮像した画像中において背景部分(画像上において車両21,22の背景となっている部分であり、ここでは、道路や建物,ガードレール,空といった移動しない対象を指す)にはフローベクトルが発生せず、車両2に接近する接近物体としての車両21,22によるフローベクトル(図3(a)中における黒矢印)のみが発生することになる。なお、このとき、舵角θと走行速度Vとから算出される旋回速度は0であり車両2は旋回していないため、旋回フローベクトルの大きさが0に設定され、車両2に接近する接近物体としての車両21,22によるフローベクトルがそのまま補正フローベクトルとなる。
したがって、接近物体検出部12において、左右側方の画像中において、車両の進行方向側へのベクトル成分を有するフローベクトルに基づいて、接近物体としての車両21,22を検出することができる。
また、車両2が図5に示す位置から低速(走行速度V<V0)で右旋回している場合、つまり、乗員が左右確認を行いながらゆっくりと車両2を前進させつつ、進行したい右方向へ操舵している場合には、図3(d)に示すように、ノーズビューカメラ3の撮像位置の移動によって、撮像された画像中において背景部分にもフローベクトル(図3(d)中における白抜き矢印)が発生することになる。そして、車両21,22によるフローベクトルは、車両2が停止している場合に発生するであろうフローベクトル(すなわち、図3(a)に示された黒矢印のフローベクトル)と、ノーズビューカメラ3の位置移動によって発生する背景部分のフローベクトル(白抜き矢印のフローベクトル)との和としてのフローベクトル(図3(d)中における黒矢印)が発生することになる。また、背景部分のフローベクトルは、車両2が右旋回することによって、画像上において車両2の左方向へのベクトル成分を有するフローベクトルとして発生することになる。
また、出力部13は、接近物体の自車両2に対する危険度に応じて、報知モードを切り換えるようになっているため、危険度を乗員へ効果的に報知することができ、安全性を向上させることができる。
なお、所定速度V0及び所定角度θ0の大きさの設定については、実施の形態に応じて任意であるが、車両2が旋回したときに、その走行速度V,操舵角θが大きいほど、上記の背景部分のフローベクトルは大きくなる。したがって、接近速度の速い物体を検出するためには、所定速度V0及び所定角度θ0の設定値を大きくしても何ら問題はなく、一方、接近速度の遅い物体を検出するためには、車両2が停止していることが望ましいことになる。しかし、車両2が旋回している場合には、一般公道を走行する接近物体としての車両21,22によるフローベクトルと、背景部分に発生するフローベクトルとの方向性の相違を利用することによって(すなわち、上述のようなロジックによって)、接近物体としての車両21,22を背景部分と区別して認識できるのである。
また、上述の第1実施形態においては、接近物体検出部12が補正フローベクトルのうち画像中における車両の進行方向へのベクトルを有するものに基づいて接近物体を検出するようになっているが、別のロジックによって接近物体を検出するような構成にしてもよく、接近物体の検出方法についても任意である。
次に、本発明の第2実施形態としてのノーズビューモニタ装置21を説明する。以下、第1実施形態と同一の構成要素については、説明を省略して同一の符号を付している。
図6には、本ノーズビューモニタ装置21を搭載した車両2が示されており、車両2は、車両の左右側方を撮像するノーズビューカメラ(撮像手段)3,車両2の走行速度信号を検出する車速センサ4,ノーズビューカメラ3の作動スイッチとしてのノーズカメラスイッチ6,乗員によるステアリングホイールの操舵角(又は操舵輪の舵角)信号を検出する操舵角センサ(旋回方向検出手段)7,電子制御ユニット(ECU)10及びノーズビューカメラ3によって撮像された画像を表示するためのモニタ(報知手段)5を備えて構成されている。
具体的には、まず、車両2の舵角θが正であり、予め設定された基準値θ1(ただし、θ1<θ0)以上の場合(つまり、右方向への旋回速度がやや大きい場合)には、車両2の左側方領域におけるフローベクトルに基づいて、接近物体を検出する。つまり、左側方領域の画像上で、右方向のベクトル成分を有するフローベクトルを抽出し、その抽出されたフローベクトルが、車両2に接近する接近物体(すなわち、フローベクトルを有する移動物体のうち、自車両2に接近する物体)によるフローベクトルであると判断し、接近物体を認識する。このとき、車両2の右側方領域におけるフローベクトルを参照しない。つまり、右側方に関しては、接近物体の検出を行わない。
このように接近物体検出部32が構成されるのは、以下の理由による。すなわち、車両2の左右側方を撮像したノーズビュー画像から、オプティカルフローを利用して自車両2へ接近する車両等の移動物体を認識することを考えた場合、仮に、自車両2が停止した状態であれば、自車両2に対する相対位置を変化させない対象にはフローベクトルが発生しないため、フローベクトルが発生した位置が場所に移動物体が存在するということになり、フローベクトルの有無によって正確に移動物体を検出することができる。
ステップB10からステップB30は、オプティカルフローを算出するための前提として、ノーズビューカメラ3が作動しているか否かを判定するフローとなっている。
ステップB40では、オプティカルフロー算出部11において、ノーズビューカメラ3が撮像した左右側方の画像における特徴点を個別に算出し、ステップB50で全ての特徴点についてのフローベクトルを算出する。つまりここでは、左右側方のの各々の画像内における移動物体が認識されることになる。
ここで、|θ|<θ1の場合には、操舵角が小さいものとしてステップB70へ進んで、接近物体検出部32が、オプティカルフロー算出部11で算出された左右両側方の画像のフローベクトルを抽出し、ステップB110へ進む。また、|θ|<θ1の場合には、操舵角が左右いずれかの方向に対してやや大きいものとしてステップB80の判定フローへ進む。
ステップB120では、出力部13において、接近物体を認識したことがモニタ5に表示されるとともに、音声によって乗員へ報知される。ここで、出力部13における乗員への報知は、ステップB110で検出された車両2の進行方向側へのベクトル成分を有するフローベクトルの大きさと数に応じて、報知モードが切り換えられる。
図5に示すようなT字路において、車両2が左右確認しながら幹線道路へ進入しようとする場合、まず車両2のノーズカメラスイッチ6がオンに操作されていると、車両2が幹線道路の手前で走行速度を所定速度V0よりも小さくしたときに、自動的にノーズビューカメラ3が作動し、左右側方の画像がモニタ5に表示される。これにより、乗員にモニタ5の画像の切り換えを意識させることなく、自動的に左右側方の画像をモニタ5へ表示させることができる。また、ノーズビューカメラ3が作動すると、ECU10において、撮像した画像におけるオプティカルフローの算出を開始する。
ここで、車両2が図5に示す位置に停止している場合には、図3(a)に示すように、ノーズビューカメラ3の位置が固定されているため、撮像した画像中において背景部分(画像上において車両21,22の背景となっている部分であり、ここでは、道路や建物,ガードレール,空といった移動しない対象を指す)にはフローベクトルが発生せず、車両2に接近する接近物体としての車両21,22によるフローベクトル(図3(a)中における黒矢印)のみが発生することになる。そして、このとき、車両21,22によるフローベクトルの方向は、車両21は左側方の画像内において右方向へのベクトル成分を有し、すなわち、画像内における車両2の進行方向側へのベクトル成分を持つことになる。一方、車両22は、右側方の画面内において左方向へのベクトル成分を有し、画像内における車両2の進行方向側へのベクトル成分を持つことになる。
したがって、接近物体検出部12において、左右側方の画像中において、車両の進行方向側へのベクトル成分を有するフローベクトルに基づいて、接近物体としての車両21,22を検出することができる。
また、車両2が図5に示す位置を低速で(走行速度V<V0で)走行している場合、つまり、乗員が左右確認を行いながらゆっくりと車両2を前進させている場合には、図3(b)に示すように、ノーズビューカメラ3の撮像位置の移動によって、撮像された画像中において背景部分にもフローベクトル(図3(b)中における白抜き矢印)が発生することになる。そして、車両21,22によるフローベクトルは、車両2が停止している場合に発生するであろうフローベクトル(すなわち、図3(a)に示された黒矢印のフローベクトル)と、ノーズビューカメラ3の位置移動によって発生する背景部分のフローベクトル(白抜き矢印のフローベクトル)との和としてのフローベクトル(図3(b)中における黒矢印)が発生することになる。また、背景部分のフローベクトルは、車両2が前進することによって、画像上において車両2の前進方向と逆方向へのベクトル成分を有するフローベクトルとして発生することになる。
また、出力部13は、接近物体の自車両2に対する危険度に応じて、報知モードを切り換えるようになっているため、危険度を乗員へ効果的に報知することができ、安全性を向上させることができる。
なお、所定速度V0及び所定角度θ0の大きさの設定については、実施の形態に応じて任意であるが、車両2が移動したときに、その走行速度V,操舵角θが大きいほど、上記の背景部分のフローベクトルは大きくなる。したがって、接近速度の速い物体を検出するためには、所定速度V0及び所定角度θ0の設定値を大きくしても何ら問題はなく、一方、接近速度の遅い物体を検出するためには、車両2が停止していることが望ましいことになる。しかし、車両2が移動している場合には、一般公道を走行する接近物体としての車両21,22によるフローベクトルと、背景部分に発生するフローベクトルとの方向性の相違を利用することによって(すなわち、上述のようなロジックによって)、接近物体としての車両21,22を背景部分と区別して認識できるのである。
また、車両2が図5に示す位置から低速(走行速度V<V0)で右旋回している場合、つまり、乗員が左右確認を行いながらゆっくりと車両2を前進させつつ、進行したい右方向へ操舵している場合には、図3(d)に示すように、ノーズビューカメラ3の撮像位置の移動によって、撮像された画像中において背景部分にもフローベクトル(図3(d)中における白抜き矢印)が発生することになる。そして、車両21,22によるフローベクトルは、車両2が停止している場合に発生するであろうフローベクトル(すなわち、図3(a)に示された黒矢印のフローベクトル)と、ノーズビューカメラ3の位置移動によって発生する背景部分のフローベクトル(白抜き矢印のフローベクトル)との和としてのフローベクトル(図3(d)中における黒矢印)が発生することになる。また、背景部分のフローベクトルは、車両2が右旋回することによって、画像上において車両2の左方向へのベクトル成分を有するフローベクトルとして発生することになる。
例えば、上述の第1,第2実施形態では、撮像手段としてのノーズビューカメラ3が、車両2のノーズ部の左右端部に各々設けられているが、いずれか一方のみを備えた構成であってもよく、また、広範な撮像領域を有する広角カメラを用いて車両の左右側方を同時に撮像するように構成してもよい。
また、上述の第1,第2実施形態における所定速度V0及び所定角度θ0は、認識したい移動物体のフローベクトルの大きさに応じて任意に設定されるものである。例えば、車両2の走行速度Vが所定速度V0よりも大きくても、車両2(ノーズビューカメラ3)の位置移動によって発生する背景部分のフローベクトルよりも大きなフローベクトルを有して移動する移動物体については、上述の構成によって認識することができる。
また、危険度に応じた複数の報知モードが多段階的に設定されるように構成してもよい。例えば、接近物体検出部12が検出した接近物体のフローベクトルの大きさ及び数に基づいて切り換える報知モードをさらに増やし、接近物体の自車両2への危険である可能性を多段階的に判定することで、よりきめの細かい報知を実施することができ、安全性を向上させることができるとともに、危険度判定にかかる装置自体の信頼性を向上させることができる。
2 車両(自車両)
3 ノーズビューカメラ(撮像手段)
4 車速センサ(旋回状態対応値検出手段)
5 モニタ(報知手段)
6 ノーズカメラスイッチ
7 操舵角センサ(旋回方向検出手段・旋回状態対応値検出手段)
10 電子制御ユニット(ECU)
11 オプティカルフロー算出部(オプティカルフローベクトル算出手段)
11A 左側方領域オプティカルフロー算出部
11B 右側方領域オプティカルフロー算出部
12,32 接近物体検出部(接近物体検出手段)
13 出力部
14 旋回フローベクトル設定部(旋回オプティカルフローベクトル設定手段)
15 フローベクトル補正部(オプティカルフローベクトル補正手段)
Claims (8)
- 車両のノーズ前面に設けられて車両側方の画像を撮像する撮像手段と、
該画像に基づきオプティカルフローベクトルを算出するオプティカルフローベクトル算出手段と、
該車両の旋回方向を検出する旋回方向検出手段と、
該車両の旋回状態に対応したパラメータを検出する旋回状態対応値検出手段と、
該旋回方向と該パラメータとに基づき、該車両側方の画像において該車両の旋回によって発生した旋回オプティカルフローベクトルを設定する旋回オプティカルフローベクトル設定手段と、
該オプティカルフローベクトル算出手段で算出されたオプティカルフローベクトルから該旋回オプティカルフローベクトル設定手段で設定された旋回オプティカルフローベクトルを減算して補正するオプティカルフローベクトル補正手段と、
該オプティカルフローベクトル補正手段によって補正されたオプティカルフローベクトルに基づいて接近物体を検出する接近物体検出手段と、
該画像を表示するとともに該接近物体の検出を報知する報知手段とを備えた
ことを特徴とする、ノーズビューモニタ装置。 - 該旋回オプティカルフローベクトル設定手段は、旋回オプティカルフローベクトルの方向を水平方向に、且つ、該旋回方向検出手段で検出された該旋回方向の外側方向に設定するとともに、該旋回オプティカルフローベクトルの大きさを該旋回状態対応値検出手段で検出された該パラメータの値に対応させて設定する
ことを特徴とする、請求項1記載のノーズビューモニタ装置。 - 該接近物体検出手段は、該オプティカルフローベクトル補正手段によって補正されたオプティカルフローベクトルのうち該画像中における該車両の進行方向へのベクトル成分を有するオプティカルフローベクトルに基づいて接近物体を検出する
ことを特徴とする、請求項1又は2記載のノーズビューモニタ装置。 - 該旋回状態対応値検出手段は、該車両の旋回状態に対応したパラメータとして、該車両の旋回時の角速度を検出する
ことを特徴とする、請求項1〜3のいずれか1項に記載のノーズビューモニタ装置。 - 該旋回状態対応値検出手段は、該車両の旋回状態に対応したパラメータとして、該車両の走行速度及び操舵角を検出する
ことを特徴とする、請求項1〜3のいずれか1項に記載のノーズビューモニタ装置。 - 該報知手段は、該オプティカルフローベクトル補正手段によって補正されたオプティカルフローベクトルのうち該車両の進行方向へのベクトル成分を有するオプティカルフローベクトルの大きさ又は数に応じた複数の報知態様を切り換えて、該画像を表示するとともに該接近物体の検出を報知する
ことを特徴とする、請求項1〜5のいずれか1項に記載のノーズビューモニタ装置。 - 車両のノーズ前面に設けられて車両側方の画像を撮像する撮像手段と、
該画像に基づきオプティカルフローベクトルを算出するオプティカルフローベクトル算出手段と、
該車両の旋回方向を検出する旋回方向検出手段と、
該車両の旋回時において、該オプティカルフローベクトル算出手段によって算出されたオプティカルフローベクトルのうち、該旋回方向検出手段によって検出された該車両の旋回外側方向の側方領域に存在し且つ該画像中における該車両の進行方向へのベクトル成分を有するオプティカルフローベクトルに基づいて接近物体を検出し、また、該接近物体の検出に際し、該旋回方向検出手段によって検出された該車両の旋回内側方向の側方領域に存在するオプティカルフローベクトルを参照しない接近物体検出手段と、
該画像を表示するとともに該接近物体の検出を報知する報知手段とを備えた
ことを特徴とする、ノーズビューモニタ装置。 - 該報知手段は、該車両の進行方向へのベクトル成分を有するオプティカルフローベクトルの大きさ又は数に応じた複数の報知態様を切り換えて、該画像を表示するとともに該接近物体の検出を報知する
ことを特徴とする、請求項7項記載のノーズビューモニタ装置。
Priority Applications (4)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2004091667A JP4193740B2 (ja) | 2004-03-26 | 2004-03-26 | ノーズビューモニタ装置 |
DE102005013920A DE102005013920B4 (de) | 2004-03-26 | 2005-03-24 | Frontsicht-Überwachungsvorrichtung |
US11/087,873 US7190282B2 (en) | 2004-03-26 | 2005-03-24 | Nose-view monitoring apparatus |
CNB200510063703XA CN100471263C (zh) | 2004-03-26 | 2005-03-25 | 前视监视设备 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2004091667A JP4193740B2 (ja) | 2004-03-26 | 2004-03-26 | ノーズビューモニタ装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2005276057A true JP2005276057A (ja) | 2005-10-06 |
JP4193740B2 JP4193740B2 (ja) | 2008-12-10 |
Family
ID=35175636
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2004091667A Expired - Fee Related JP4193740B2 (ja) | 2004-03-26 | 2004-03-26 | ノーズビューモニタ装置 |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP4193740B2 (ja) |
Cited By (16)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2007286724A (ja) * | 2006-04-13 | 2007-11-01 | Hitachi Ltd | 車載情報処理方法、車載情報処理プログラム、車載情報処理装置および車載情報処理システム |
JP2007300181A (ja) * | 2006-04-27 | 2007-11-15 | Denso Corp | 周辺認識装置、周辺認識方法、プログラム |
JP2008187580A (ja) * | 2007-01-31 | 2008-08-14 | Optrex Corp | 障害物検出装置、車両用表示装置及び障害物検出方法 |
WO2009005025A1 (ja) * | 2007-07-03 | 2009-01-08 | Konica Minolta Holdings, Inc. | 移動物体検出装置 |
JP2009055436A (ja) * | 2007-08-28 | 2009-03-12 | Pioneer Electronic Corp | 撮影方向判定装置及び撮影方向判定プログラム |
JP2009277021A (ja) * | 2008-05-15 | 2009-11-26 | Hitachi Ltd | 接近物検出装置および接近物検出方法 |
JP2010073036A (ja) * | 2008-09-19 | 2010-04-02 | Mitsubishi Motors Corp | 車両周辺監視装置 |
JP2012160103A (ja) * | 2011-02-02 | 2012-08-23 | Stanley Electric Co Ltd | 物体検出システム |
JP2014044521A (ja) * | 2012-08-24 | 2014-03-13 | Fuji Heavy Ind Ltd | 車外環境認識装置および車外環境認識方法 |
WO2014054198A1 (ja) * | 2012-10-01 | 2014-04-10 | 株式会社デンソー | 車両の移動方向検出装置 |
JP2015106227A (ja) * | 2013-11-29 | 2015-06-08 | 富士通テン株式会社 | 物体検出装置、物体検出システム、物体検出方法及びプログラム |
KR20150089677A (ko) * | 2014-01-28 | 2015-08-05 | 엘지이노텍 주식회사 | 카메라 시스템, 캘리브레이션 장치 및 캘리브레이션 방법 |
JP2015158874A (ja) * | 2014-02-25 | 2015-09-03 | トヨタ自動車株式会社 | 周辺監視装置及び方法 |
JP2016057698A (ja) * | 2014-09-05 | 2016-04-21 | トヨタ自動車株式会社 | 車両の接近物体検出装置及び車両の接近物体検出方法 |
JP2021135680A (ja) * | 2020-02-26 | 2021-09-13 | いすゞ自動車株式会社 | 報知装置 |
JPWO2022064641A1 (ja) * | 2020-09-25 | 2022-03-31 |
-
2004
- 2004-03-26 JP JP2004091667A patent/JP4193740B2/ja not_active Expired - Fee Related
Cited By (22)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2007286724A (ja) * | 2006-04-13 | 2007-11-01 | Hitachi Ltd | 車載情報処理方法、車載情報処理プログラム、車載情報処理装置および車載情報処理システム |
JP2007300181A (ja) * | 2006-04-27 | 2007-11-15 | Denso Corp | 周辺認識装置、周辺認識方法、プログラム |
JP4676373B2 (ja) * | 2006-04-27 | 2011-04-27 | 株式会社デンソー | 周辺認識装置、周辺認識方法、プログラム |
JP2008187580A (ja) * | 2007-01-31 | 2008-08-14 | Optrex Corp | 障害物検出装置、車両用表示装置及び障害物検出方法 |
WO2009005025A1 (ja) * | 2007-07-03 | 2009-01-08 | Konica Minolta Holdings, Inc. | 移動物体検出装置 |
JPWO2009005025A1 (ja) * | 2007-07-03 | 2010-08-26 | コニカミノルタホールディングス株式会社 | 移動物体検出装置 |
JP2009055436A (ja) * | 2007-08-28 | 2009-03-12 | Pioneer Electronic Corp | 撮影方向判定装置及び撮影方向判定プログラム |
JP2009277021A (ja) * | 2008-05-15 | 2009-11-26 | Hitachi Ltd | 接近物検出装置および接近物検出方法 |
JP2010073036A (ja) * | 2008-09-19 | 2010-04-02 | Mitsubishi Motors Corp | 車両周辺監視装置 |
JP2012160103A (ja) * | 2011-02-02 | 2012-08-23 | Stanley Electric Co Ltd | 物体検出システム |
JP2014044521A (ja) * | 2012-08-24 | 2014-03-13 | Fuji Heavy Ind Ltd | 車外環境認識装置および車外環境認識方法 |
WO2014054198A1 (ja) * | 2012-10-01 | 2014-04-10 | 株式会社デンソー | 車両の移動方向検出装置 |
JP2015106227A (ja) * | 2013-11-29 | 2015-06-08 | 富士通テン株式会社 | 物体検出装置、物体検出システム、物体検出方法及びプログラム |
KR20150089677A (ko) * | 2014-01-28 | 2015-08-05 | 엘지이노텍 주식회사 | 카메라 시스템, 캘리브레이션 장치 및 캘리브레이션 방법 |
KR102234376B1 (ko) | 2014-01-28 | 2021-03-31 | 엘지이노텍 주식회사 | 카메라 시스템, 캘리브레이션 장치 및 캘리브레이션 방법 |
JP2015158874A (ja) * | 2014-02-25 | 2015-09-03 | トヨタ自動車株式会社 | 周辺監視装置及び方法 |
JP2016057698A (ja) * | 2014-09-05 | 2016-04-21 | トヨタ自動車株式会社 | 車両の接近物体検出装置及び車両の接近物体検出方法 |
JP2021135680A (ja) * | 2020-02-26 | 2021-09-13 | いすゞ自動車株式会社 | 報知装置 |
JP7318562B2 (ja) | 2020-02-26 | 2023-08-01 | いすゞ自動車株式会社 | 報知装置 |
JPWO2022064641A1 (ja) * | 2020-09-25 | 2022-03-31 | ||
WO2022064641A1 (ja) * | 2020-09-25 | 2022-03-31 | 日本電気株式会社 | 車両行動推定装置、不安全運転検出装置、方法、及びコンピュータ可読媒体 |
JP7416276B2 (ja) | 2020-09-25 | 2024-01-17 | 日本電気株式会社 | 不安全運転検出装置、方法、及びプログラム |
Also Published As
Publication number | Publication date |
---|---|
JP4193740B2 (ja) | 2008-12-10 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US7190282B2 (en) | Nose-view monitoring apparatus | |
US8896687B2 (en) | Lane departure prevention support apparatus, method of displaying a lane boundary line and program | |
JP4193740B2 (ja) | ノーズビューモニタ装置 | |
JP4259368B2 (ja) | ノーズビューモニタ装置 | |
JP6307895B2 (ja) | 車両用周辺監視装置 | |
JP5345350B2 (ja) | 車両の運転支援装置 | |
JP6485328B2 (ja) | 車両の運転支援装置 | |
JP2011118482A (ja) | 車載装置および認知支援システム | |
JP2007221200A (ja) | 車両周辺監視装置 | |
JP2005173882A (ja) | 後側方画像制御装置および方法 | |
JP2006227811A (ja) | 運転支援装置 | |
JP2009116723A (ja) | 車線変更支援装置 | |
JP5054612B2 (ja) | 接近物検出装置および接近物検出方法 | |
JP2008293122A (ja) | 障害物監視装置 | |
JP2011114467A (ja) | 車両表示装置および表示方法 | |
CN113895433B (zh) | 通过传感器角度调整的前向避撞***及其方法 | |
JP2007124097A (ja) | 車両周辺視認装置 | |
JP4986070B2 (ja) | 車両用周囲監視装置 | |
JP2009051346A (ja) | 周辺監視用表示制御装置及び画像表示制御システム | |
JP2005182753A (ja) | 車両運転支援装置 | |
JP4930432B2 (ja) | 車両用周辺監視装置 | |
JP2006268224A (ja) | 車両用運転支援装置 | |
JP5416193B2 (ja) | 障害物監視装置 | |
JP2005309660A (ja) | 車両用右左折支援装置 | |
JP2004252550A (ja) | 運転支援装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20060324 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20080527 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20080529 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20080724 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20080902 |
|
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20080915 |
|
R151 | Written notification of patent or utility model registration |
Ref document number: 4193740 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20111003 Year of fee payment: 3 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20111003 Year of fee payment: 3 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20121003 Year of fee payment: 4 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20121003 Year of fee payment: 4 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20131003 Year of fee payment: 5 |
|
S531 | Written request for registration of change of domicile |
Free format text: JAPANESE INTERMEDIATE CODE: R313531 |
|
R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
LAPS | Cancellation because of no payment of annual fees |