JP2007257286A - 車両用表示システム - Google Patents

車両用表示システム Download PDF

Info

Publication number
JP2007257286A
JP2007257286A JP2006080772A JP2006080772A JP2007257286A JP 2007257286 A JP2007257286 A JP 2007257286A JP 2006080772 A JP2006080772 A JP 2006080772A JP 2006080772 A JP2006080772 A JP 2006080772A JP 2007257286 A JP2007257286 A JP 2007257286A
Authority
JP
Japan
Prior art keywords
sign
vehicle
image
visibility
information database
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2006080772A
Other languages
English (en)
Other versions
JP4788426B2 (ja
Inventor
Ichiro Yoshida
一郎 吉田
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Denso Corp
Original Assignee
Denso Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Denso Corp filed Critical Denso Corp
Priority to JP2006080772A priority Critical patent/JP4788426B2/ja
Publication of JP2007257286A publication Critical patent/JP2007257286A/ja
Application granted granted Critical
Publication of JP4788426B2 publication Critical patent/JP4788426B2/ja
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Traffic Control Systems (AREA)
  • Navigation (AREA)
  • Instrument Panels (AREA)

Abstract

【課題】運転者の視界が悪い場合に、見え難い標識等の情報を表示できると共に、運転者が視線を移動させることなく表示された標識等の情報を見ることを可能にする。
【解決手段】本発明の車両用表示システム1は、車両の現在位置と進行方向を検知し、車両に搭載された画像撮像手段10により撮像されたデータから気象や視界に関する安全度を判定し、現在位置と進行方向に基づいて標識情報データベース5と道路情報データベース6から仮想的な景色等の画像を作成し、そして、安全度が低いと判定されたとき、近くの現実の画像と上記仮想的な画像を視界距離に応じて両画像が違和感なくつながるように透過度を変化させて重ね合わせて車両のフロントガラスに表示するように構成したものである。
【選択図】図1

Description

本発明は、車両に搭載して使用するものであって、運転者の視認性を高めることができる車両用表示システムに関する。
交通事故を少なくするために、車両にはいくつかの安全運転支援機能が搭載されている。ナイトビジョンと呼ばれる夜間の歩行者を検知して、表示器を用いて運転者に歩行者がどこにいるかを教える視覚支援システムがある。このシステムでは、自動車に搭載された赤外線等のセンサが歩行者を認識すると、運転者に対してその歩行者に衝突しないように運転を行うための情報を提供するように構成されている。また、カメラで標識を認識して運転者に標識情報を提供することも検討されている。
標識には、通常反射板が表面に設置されており、夜間でも車両のランプの光の反射で標識の位置が把握できる。しかし、標識の(高さ)位置や周囲の環境(電柱、植え込み)や天候条件によっては標識が見えない場合がある。その場合、運転者は標識を見逃し、事故が発生するおそれがある。そのため、標識がどこに建てられているかを運転者に確実に知らせる方法が必要である。
特開2004−61259号公報 特許第3360400号公報
特許文献1には、ユーザの視線の先に標識がある場合、その画像を拡大表示する構成が開示されている。この構成では、運転者が標識を見つけられない場合、標識が拡大表示されないため、運転者が標識を見落とした場合には効果がない。
また、特許文献2には、気象情報と発光受光装置のセンシング結果に基づいて視認性を判定し、視認性が悪くなったと判定されると、VICSセンターから情報送信をし、VICS情報として送信されたデータをナビが受信すると、ナビの表示器に標識を表示するようにした構成が記載されている。
この構成においては、運転者は視界が悪い場合に、見え難い標識があることはわかるが、どの位置にそれがあるか明確に知ることができない。特に、標識が停止標識の場合、近くにある停止線の位置がわからないと、安全運転を行う(安全に停止する)ためには不十分な情報である。
また、上記した2つの構成においては、標識を車内に配設された表示器に表示する構成であるため、標識の確認をするために運転者は視線を移動しなければならず、安全運転上好ましくなかった。
そこで、本発明の目的は、運転者の視界が悪い場合に、見え難い標識等の情報を表示できると共に、運転者が視線を移動させることなく表示された標識等の情報を見ることができる車両用表示システムを提供するにある。
本発明の車両用表示システムは、現在位置を計測する手段と、進行方向を検知するする手段と、車両に搭載された画像撮像手段と、撮像されたデータから気象や視界に関する安全度を判定する外界安全度判定手段と、標識情報データベースと、道路情報データベースと、現在位置と進行方向に基づいて標識情報データベースと道路情報データベースから仮想的な景色等の画像を描画する仮想画像描画手段と、近くの現実の画像と仮想的な画像を視界距離に応じて両画像が違和感なくつながるように透過度を変化させて重ね合わせを補正した視界距離補正仮想画像生成手段と、前記外界安全度判定手段の結果に基づいて安全度が低いと判定されたとき、視界距離補正仮想画像生成手段の生成した画像を、車両のフロントガラスに表示する表示装置とを備えてなるところに特徴を有する。
上記構成によれば、運転者の視界が悪い場合、外界安全度判定手段により安全度が低いと判定されることから、視界距離補正仮想画像生成手段の生成した画像、即ち、見え難い標識等の情報が車両のフロントガラスに表示されるようになる。これにより、運転者は、視線を移動させることなく表示された標識等の情報を見ることができる。
本発明の他の車両用表示システムは、現在位置を計測する手段と、進行方向を検知するする手段と、車両に搭載された画像撮像手段と、撮像されたデータから気象や視界に関する安全度を判定する外界安全度判定手段と、車外の物体を検知する車外物体検出手段と、標識情報データベースと、道路情報データベースと、現在位置と進行方向に基づいて標識情報データベースと道路情報データベースから仮想的な景色等の画像を描画する仮想画像描画手段と、検知された車外の物体をその計測された位置に対応するように仮想的な物体の画像として描画する車外物体描画手段と、近くの現実の画像と仮想的な画像を視界距離に応じて両画像が違和感なくつながるように透過度を変化させて重ね合わせを補正した視界距離補正仮想画像生成手段と、外界安全度判定手段の結果に基づいて安全度が低いと判定されたとき、視界距離補正仮想画像生成手段と車外物***置描画手段とが作成した画像を重ね合わせて、車両のフロントガラスに表示する表示装置とを備えてなるところに特徴を有する。
上記構成の場合、撮像されたデータから気象や視界に関する外界安全度は、標識情報データベースの標識位置と車両の現在位置から得られた車両標識間距離における標識撮影画像の認識度で決定されるように構成されていることが好ましい。
また、前記車外物体検出手段は、レーザレーダ、マイクロ波レーダー、超音波センサ、車車間通信装置、路車間通信装置であることが良い構成である。更に、前記標識情報データベースは、標識の種類、設置位置、設置方向、表示面の設置高さ、補助標識、通信機能の有無や種類等の情報を含むように構成されていることが好ましい。
更にまた、道路情報データベースは、道路両端の位置を示す情報と、道路の表面状態を示す情報とを含むように構成されていることがより一層好ましい。また、前記仮想画像描画手段は、道路情報データベースに基づいて進行方向の道路付帯設備を含む道路画像を運転者の視野上に重畳して描画し、運転者の視認度に応じて描画結果の表示の強さを変更可能なように構成されていることが良い。
更に、車両の停車位置、停止標識の位置及び停止線の位置を記憶する手段と、標識の視認性を検出する標識視認性確認手段とを備え、前記表示装置は、前記標識視認性確認手段の計測の結果、車両が停止すべき位置の標識の視認性が低いと判断されたとき、視認性の低いと判断された標識とその標識に応じた補助画像を運転者の視野の景色に重畳して表示するように構成されていることが好ましい。
本発明の他の車両用表示システムは、車両の停車位置、停止標識の位置及び停止線の位置を記憶する手段と、現在位置を計測する手段と、進行方向を測定する手段と、標識の視認性を検出する標識視認性確認手段と、前記標識視認性確認手段の計測の結果、車両が停止すべき位置の標識の視認性が低いと判断されたとき、視認性の低いと判断された標識とその標識に応じた補助画像を運転者の視野の景色に重畳して表示する表示装置とを備えたところに特徴を有する。
また、上記構成の場合、前記標識視認性確認手段は、標識の位置情報に基づき標識の存在位置を撮影した画像の標識の輪郭検出の結果に基づいて視認性の判定を行うように構成されていることが好ましい。更に、前記標識に応じた補助画像は、仮想的な画像であることを明示する表示形式であることがより一層好ましい。
本発明の他の車両用表示システムは、現在位置を計測する手段と、進行方向を検知するする手段と、車両に搭載された画像撮像手段と、撮像されたデータから気象や視界に関する安全度を判定する外界安全度判定手段と、標識情報データベースと、道路情報データベースと、表示効果データベースと、現在位置と進行方向に基づいて標識情報データベースと道路情報データベースと表示効果データベースとから仮想的な景色等の画像を描画する仮想画像描画手段と、近くの現実の画像と仮想的な画像を視界距離に応じて両画像が違和感なくつながるように透過度を変化させて重ね合わせを補正した視界距離補正仮想画像生成手段と、前記外界安全度判定手段の結果に基づいて安全度が低いと判定されたとき、視界距離補正仮想画像生成手段の生成した画像を、車両のフロントガラスに表示する表示装置とを備えたところに特徴を有する。
また、本発明の他の車両用表示システムは、現在位置を計測する手段と、進行方向を検知するする手段と、車両に搭載された画像撮像手段と、撮像されたデータから気象や視界に関する安全度を判定する外界安全度判定手段と、車外の物体を検知する車外物体検出手段と、標識情報データベースと、道路情報データベースと、表示効果データベースと、現在位置と進行方向に基づいて標識情報データベースと道路情報データベースと表示効果データベースとから仮想的な景色等の画像を描画する仮想画像描画手段と、検知された車外の物体をその計測された位置に対応するように仮想的な物体の画像として描画する車外物体描画手段と、近くの現実の画像と仮想的な画像を視界距離に応じて両画像が違和感なくつながるように透過度を変化させて重ね合わせを補正した視界距離補正仮想画像生成手段と、外界安全度判定手段の結果に基づいて安全度が低いと判定されたとき、視界距離補正仮想画像生成手段と車外物***置描画手段とが作成した画像を重ね合わせて、車両のフロントガラスに表示する表示装置とを備えたところに特徴を有する。
更に、本発明の他の車両用表示システムは、車両の停車位置、停止標識の位置及び停止線の位置を記憶する手段と、現在位置を計測する手段と、進行方向を測定する手段と、標識情報データベースと、表示効果データベースと、標識の視認性を検出する標識視認性確認手段と、前記標識視認性確認手段の計測の結果、車両が停止すべき位置の標識の視認性が低いと判断されたとき、標識情報データベースと表示効果データベースとに基づいて視認性の低いと判断された標識とその標識に応じた補助画像を運転者の視野の景色に重畳して表示する表示装置とを備えたところに特徴を有する。
以下、本発明の一実施例について、図面を参照しながら説明する。まず、図1は、本実施例の車両用表示システム1の電気的構成を概略的に示すブロック図である。この図1に示すように、車両用表示システム1は、カーナビゲーションシステム2と、外界計測システム3と、表示制御器4と、3D固定物配置データベース(3D固定物配置DB)5と、道路情報データベース(道路情報DB)6と、表示効果データベース(表示効果DB)7と、表示器8と、視線検知手段9とを備えて構成されている。
カーナビゲーションシステム2は、自動車等の車両に搭載される周知のカーナビゲーションシステムで構成されており、内蔵する高精度GPS通信機からの検知信号と、外界計測システム3の車外カメラシステム10からの画像データ等を用いることにより、車両の現在位置と進行方向とを測定する機能を有している。この場合、カーナビゲーションシステム2は、位置検知手段11及び進行方向検知手段12としての機能を有している。
外界計測システム3は、外界安全度判定手段13と、車外カメラシステム(画像撮像手段)10とを備えて構成されている。外界安全度判定手段13は、車外カメラシステム10により撮影されたカメラ撮影情報と、3D固定物配置DB5内に記録されている情報(標識、分離帯等の固定物の形状、設置位置、設置位置の地形(国土地理院の等高線図)等の情報)に従って作成した仮想的な画像情報とに基づいて、運転者の視界の良否を判定するように構成されている。この場合、外界安全度判定手段13は、仮想画像描画手段としての機能を有している。
3D固定物配置DB5には、それぞれの標識や固定物の作用範囲を地図上に表示するための情報が記録されている。道路情報DB6には、道路両端の位置を示す情報である道路両端(歩道と車道の境界)の位置座標(x、y、z)のグループ(あるいは道路中心位置と道路幅と幅方向角度パラメータ)と、道路の表面状態の情報(摩擦係数、設定サイズ以上の凹凸の位置等の情報)とが記録されている。
表示制御器4は、外界安全度判定手段13によって判定(計測)された視界に基づいて、ユーザの視界が何m先から悪くなるかが判定されると、判定された距離よりも遠くの視野(ユーザの視野)に、3D固定物配置DB5及び道路情報DB6内の情報に基づいて作成された仮想的な画像を表示器8を用いて重畳表示を行なう機能を有している。この場合、表示制御器4は、外界安全度判定手段13からの視界判定情報に加えて、視線検知手段9により検出された視線情報を加味することにより、違和感のない重畳表示を行うように構成されている。尚、重畳表示の具体的動作については、後述する。上記表示制御器4は、視界距離補正仮想画像生成手段としての機能を有している。
表示器8は、例えばHUD(ヘッドアップディスプレイ)や有機ELや半透過液晶等から構成されており、画像を車両のフロントガラス(運転者の視野)に表示することが可能な表示装置である。
尚、表示効果DB7には、ユーザ(運転者等)の注意を引くために用いるさまざまな表示効果用の情報(点滅、ハイライト、スポット、スクリーン表示、看板、ブラインド等の情報)が記録されている。表示効果DB7に記録されているデータにより、表示制御器4は、標識の周囲を明るくしたり、滑りやすい道路をハイライト表示したり、標識に応じた補助画像を表示したりすることが可能となる。
次に、上記構成の動作について、図2ないし図6を参照して説明する。
車両の周囲に霧が存在している場合、車外カメラシステム10により撮影したカメラ画像(実際の視界のイメージ)は、図2(a)に示すような画像となり、遠くの物体(例えば「止まれ」の標識)を認知することができない。ここで、外界計測システム3の仮想画像描画手段により、3D固定物配置DB5内に記録されている情報と、道路情報DB6内に記録されている情報とに従って仮想的な画像を作成すると、その仮想的な画像は、図2(b)に示すような画像となる。
この仮想的な画像は、図3に示すような方法で作成することができる。まず、3D画像を描画するために、車両が現在走行している道路の両端座標で構成された道路オブジェクトデータと周辺の建造物のオブジェクトデータをそれぞれの配置場所に配置して、進行方向に向かって仮想カメラを向け、ワイヤフレーム画像の描画を行なう。この描画画像を、図3(a)に示す。このワイヤフレーム画像は、仮想カメラの位置、カメラの向きを設定することで描画する範囲を設定できる。
また、実際のカメラにはレンズのゆがみがある。そのため、本実施例においては、ワイヤフレーム画像と、車外カメラシステム10の撮影画像とを比較して、仮想カメラのレンズの光学特性を補正するように構成されている。
具体的には、車外カメラシステム10の車外カメラで撮影(認識)された道路の画像(図3(d)参照)から、道路の両端の輪郭を計測する(図3(e)に示すように、例えば道路の両端の白線を認識して計測する)。次に、仮想カメラの位置と方向を設定して描画し、近くの道路の幅について、ワイヤフレーム画像と車外カメラの撮影画像とが一致するように、仮想カメラのレンズ設定を行う。
この場合、走行中の道路が直線道路であれば、車外カメラ撮影画像から設定距離離れた道路幅を計測し、その道路幅が一致するように仮想カメラのレンズ特性を調整する。また、走行中の道路が曲がっていれば、車外カメラの撮影画像中の特徴点(たとえば標識が設置された場所)を探し、仮想カメラの描画画像と一致するように仮想カメラのレンズ設定を行う。このような処理(仮想画像の調整(キャリブレーション)処理)を定期的に繰り返すことで、車外カメラの撮影画像と仮想カメラの描画画像とが一致(マッチング)するように制御される。図3(b)は、マッチング途中の近距離設定済みの仮想画像を示す。また、図3(c)(及び図2(b))は、マッチング後の遠距離設定済みの仮想画像を示す。仮想カメラの補正(調整)したレンズ特性は、内部のメモリに記憶しておく。
尚、上述した仮想画像の調整(キャリブレーション)処理の制御をフローチャートにすると、図5に示すようなフローチャート(ステップS10〜ステップS110)となる。
また、本実施例では、標識のプロパティがわかっている場合、例えば「止まれ」の標識の場合、止まれという文字表示(図2(c)参照、この文字表示は標識に応じた補助画像を構成する)や、止まれという音声出力が、車両の速度に応じた設定距離手前で実行されるように構成されている。
図2(d)、(e)は、標識に定義された関係情報を表示した例である。停止標識に関しては、その標識に対応する停止線が存在する。運転者は、停止標識を見逃すと停止しないまま進んでしまい、事故が起こる可能性がある。そのため、停止する場合、停止線位置に半透過のスクリーンのようなイメージを描画して、運転者に標識を認識させる。この表示を行なう際に、表示効果DB7を用いる。表示効果DB7には、制限速度、駐車違反、停止、徐行等をユーザが認識しやすいようにする種々の表示パターン(標識に応じた補助画像を描画するためのデータが含まれている)が記録されている。
図2(d)は、標識が遠くにある場合に、停止線位置に仮想的な壁(1点鎖線参照)を描画する画像(標識に応じた補助画像)を示す例である。この場合、仮想的な壁を、せりあがる動画として描画しても良い。図2(e)は、標識が近くにある場合に、停止線位置に仮想的な壁、具体的には、半透明なスクリーンのような壁(斜線領域参照)を描画する画像(標識に応じた補助画像)を示す例である。
また、図4は、霧等が発生して先行車が見にくい場合の仮想画像の表示例である。レーダ等で先行車を発見し、それが視認できない状況(図4(a)参照)と判断されると、先行車の仮想画像(イメージ)を作成し、その仮想画像をユーザの視野に車間距離に応じて表示するように構成されている(図4(b)参照)。この場合、レーダ等が車外物体検出手段としての機能を有し、表示制御器4が車外物体描画手段としての機能を有している。
次に、標識の視認性を支援する表示制御器4の表示動作の制御内容について、図6のフローチャートを参照して説明する。まず、図6のステップS210において、表示制御器4は、位置検知手段11及び進行方向検知手段12からの検知信号に基づいて現在走行位置と進行方向を測定する。次に、外界計測システム3の車外カメラシステム10によって、3D固定配置DB5から前方の固定物を複数選定して、それぞれの固定物が車外カメラシステム10により撮影されているか否かを確認する(ステップS220)。この場合、設定された距離以上離れた固定物を認識できれば、視界は安全と判定し、ステップS230にて、「YES」へ進み、ステップS210へ戻る。
これに対して、設定された距離以上離れた固定物が認識できない場合、どの距離まで固定物が認識できるかを計測し、それを視界距離Lとして設定する(ステップS220)。そして、視界(視界距離L)が設定距離確保できない場合には、ステップS230にて、「NO」へ進み、車両前方の設定距離内の固定物(標識)を含む道路周辺の仮想的な画像を生成する(ステップS240)。
この場合、画像生成は、直線走行では、高精度の静止画を定期的にレンダリングし(仮想カメラで撮影して画像生成し)、その画像を進行方向に向かって拡大する表示処理を行なう。また、道路が曲がっていた場合、その曲率に応じて画像生成タイミングを変える。具体的には、道路の曲率が小さいほど、前方の景色の変化が早いため、画像生成の時間間隔を短くするように制御する。
そして、前方に標識が有るか否かを判断する(ステップS250)。ここで、前方に標識が有る場合、ステップS250にて「YES」へ進み、その標識に応じた表示効果が設定されているかをチェックする(ステップS260)。この場合、表示効果があれば、ステップS260にて「YES」へ進み、その描画処理を行なう(ステップS270)。
続いて、ステップS280へ進み、仮想画像・実画像切り替え距離を設定すると共に、表示データを作成して(ステップS290)、その作成した画像を表示する(ステップS300)。この場合、画像切り替え距離として視界距離Lを設定し、視界距離Lよりも近いところから徐々に実画像に仮想画像を重ね合わせる表示処理を行なう。
具体的には、透過度グラデーションマスクを用いて、遠くは完全な仮想画像、近くは実画像(車両のフロントガラスを通して運転者が見ている画像)になるように仮想画像の透過度を変更する。これにより、視界距離L付近では、透過度が高いため実画像が見えるが、遠くは仮想画像のみとなる。また、車両の走行に従って、標識までの距離に応じて、仮想画像及び表示効果を拡大表示するように構成されている。
そして、上記描画表示処理は、例えば標識を通り過ぎるまで標識画像の描画が継続される。即ち、ステップS310へ進み、標識を通過したか否かを判断し、標識を通過していない場合は、「NO」へ進み、描画表示処理を続ける。そして、標識を通過すると、ステップS310にて「YES」へ進み、最初のステップS210へ戻る。
また、上記した表示動作においては、3D固定物配置DB5に記録されている固定物の視認性を向上させる例を示したが、車外カメラシステム10により車外の物体や歩行者等を検知する機能(車外物体検出手段としての機能)を備えている場合には、物体や歩行者等の検知位置に応じて、注意を引く仮想画像情報を実画像に重畳表示するように構成してもよい。
上記構成の本実施例によれば、運転者の視界が悪い場合、外界安全度判定手段13により安全度が低いと判定されることから、表示制御器4によって、見え難い標識等の仮想画像を生成して、その仮想画像を車両のフロントガラスに表示するように構成したので、運転者は、環境条件が悪くても、視線を移動させることなく表示された標識等の情報を見ることができるため、安全運転を実行可能となる。
尚、上記実施例においては、車両のフロントガラスのほぼ全面を使って、仮想画像を実画像に重畳表示するように構成したが、これに限られるものではなく、フロントガラスの一部の領域(比較的小さい領域)に仮想画像を重畳表示するように構成しても良い。この構成の場合、仮想画像だけを表示するように構成しても良い。
また、上記実施例では、仮想画像の調整(キャリブレーション)を実行する場合に、道路の両端の白線を用いてキャリブレーションを行なうように構成したが、これに限られるものではなく、例えば標識や地名の看板等を用いてキャリブレーションを行なうように構成しても良い。更に、車外カメラシステム10の文字画像の読取能力のキャリブレーションも標識や地名の看板等を用いて定期的に行なうように構成しても良い。
尚、上記実施例に置いては、車外物体検出手段を、レーダ(例えばレーザレーダやマイクロ波レーダ)または車外カメラシステム10(車外カメラ)で構成したが、これに限られるものではなく、例えば超音波センサや車車間通信装置や路車間通信装置等で構成しても良い。
本発明の一実施例を示す車両用表示システムのブロック図 (a)は実画像を示す図、(b)〜(e)は仮想画像を実画像に重畳した例を示す図 (a)〜(c)は仮想画像を作成して調整する例を示す図、(d)は実画像を示す図、(e)は仮想画像を実画像に重畳した例を示す図 (a)は実画像を示す図、(b)は仮想画像を実画像に重畳した例を示す図 仮想画像の調整(キャリブレーション)処理の制御内容を示すフローチャート 標識の視認性を支援する表示動作の制御内容を示すフローチャート
符号の説明
図面中、1は車両用表示システム、2はカーナビゲーションシステム、3は外界計測システム、4は表示制御器(視界距離補正仮想画像生成手段)、5は3D固定物配置データベース、6は道路情報データベース、7は表示効果データベース、8は表示器(表示装置)、9は視線検知手段、10は車外カメラシステム(画像撮像手段)、11は位置検知手段、12は進行方向検知手段、13は外界安全度判定手段(仮想画像描画手段)を示す。

Claims (14)

  1. 現在位置を計測する手段と、
    進行方向を検知するする手段と、
    車両に搭載された画像撮像手段と、
    撮像されたデータから気象や視界に関する安全度を判定する外界安全度判定手段と、
    標識情報データベースと、
    道路情報データベースと、
    現在位置と進行方向に基づいて標識情報データベースと道路情報データベースから仮想的な景色等の画像を描画する仮想画像描画手段と、
    近くの現実の画像と仮想的な画像を視界距離に応じて両画像が違和感なくつながるように透過度を変化させて重ね合わせを補正した視界距離補正仮想画像生成手段と、
    前記外界安全度判定手段の結果に基づいて安全度が低いと判定されたとき、視界距離補正仮想画像生成手段の生成した画像を、車両のフロントガラスに表示する表示装置とを備えたことを特徴とする車両用表示システム。
  2. 現在位置を計測する手段と、
    進行方向を検知するする手段と、
    車両に搭載された画像撮像手段と、
    撮像されたデータから気象や視界に関する安全度を判定する外界安全度判定手段と、
    車外の物体を検知する車外物体検出手段と、
    標識情報データベースと、
    道路情報データベースと、
    現在位置と進行方向に基づいて標識情報データベースと道路情報データベースから仮想的な景色等の画像を描画する仮想画像描画手段と、
    検知された車外の物体をその計測された位置に対応するように仮想的な物体の画像として描画する車外物体描画手段と、
    近くの現実の画像と仮想的な画像を視界距離に応じて両画像が違和感なくつながるように透過度を変化させて重ね合わせを補正した視界距離補正仮想画像生成手段と、
    外界安全度判定手段の結果に基づいて安全度が低いと判定されたとき、視界距離補正仮想画像生成手段と車外物***置描画手段とが作成した画像を重ね合わせて、車両のフロントガラスに表示する表示装置とを備えたことを特徴とする車両用表示システム。
  3. 撮像されたデータから気象や視界に関する外界安全度は、標識情報データベースの標識位置と車両の現在位置から得られた車両標識間距離における標識撮影画像の認識度で決定されることを特徴とする請求項2記載の車両用表示システム。
  4. 前記車外物体検出手段は、車外カメラ、レーザレーダ、マイクロ波レーダ、超音波センサ、車車間通信装置、路車間通信装置であることを特徴とする請求項2記載の車両用表示システム。
  5. 前記標識情報データベースは、標識の種類、設置位置、設置方向、表示面の設置高さ、補助標識、通信機能の有無や種類等の情報を含むことを特徴とする請求項2記載の車両用表示システム。
  6. 道路情報データベースは、道路両端の位置を示す情報と、道路の表面状態を示す情報とを含むことを特徴とする請求項2記載の車両用表示システム。
  7. 前記仮想画像描画手段は、道路情報データベースに基づいて進行方向の道路付帯設備を含む道路画像を運転者の視野上に重畳して描画し、運転者の視認度に応じて描画結果の表示の強さを変更可能なように構成されていることを特徴とする請求項2記載の車両用表示システム。
  8. 車両の停車位置、停止標識の位置及び停止線の位置を記憶する手段と、
    標識の視認性を検出する標識視認性確認手段とを備え、
    前記表示装置は、前記標識視認性確認手段の計測の結果、車両が停止すべき位置の標識の視認性が低いと判断されたとき、視認性の低いと判断された標識とその標識に応じた補助画像を運転者の視野の景色に重畳して表示するように構成されていることを特徴とする請求項2記載の車両用表示システム。
  9. 車両の停車位置、停止標識の位置及び停止線の位置を記憶する手段と、
    現在位置を計測する手段と、
    進行方向を測定する手段と、
    標識の視認性を検出する標識視認性確認手段と、
    前記標識視認性確認手段の計測の結果、車両が停止すべき位置の標識の視認性が低いと判断されたとき、視認性の低いと判断された標識とその標識に応じた補助画像を運転者の視野の景色に重畳して表示する表示装置とを備えたことを特徴とする車両用表示システム。
  10. 前記標識視認性確認手段は、標識の位置情報に基づき標識の存在位置を撮影した画像の標識の輪郭検出の結果に基づいて視認性の判定を行うように構成されていることを特徴とする請求項9記載の車両用表示システム。
  11. 前記標識に応じた補助画像は、仮想的な画像であることを明示する表示形式であることを特徴とする請求項9記載の車両用表示システム。
  12. 現在位置を計測する手段と、
    進行方向を検知するする手段と、
    車両に搭載された画像撮像手段と、
    撮像されたデータから気象や視界に関する安全度を判定する外界安全度判定手段と、
    標識情報データベースと、
    道路情報データベースと、
    表示効果データベースと、
    現在位置と進行方向に基づいて標識情報データベースと道路情報データベースと表示効果データベースとから仮想的な景色等の画像を描画する仮想画像描画手段と、
    近くの現実の画像と仮想的な画像を視界距離に応じて両画像が違和感なくつながるように透過度を変化させて重ね合わせを補正した視界距離補正仮想画像生成手段と、
    前記外界安全度判定手段の結果に基づいて安全度が低いと判定されたとき、視界距離補正仮想画像生成手段の生成した画像を、車両のフロントガラスに表示する表示装置とを備えたことを特徴とする車両用表示システム。
  13. 現在位置を計測する手段と、
    進行方向を検知するする手段と、
    車両に搭載された画像撮像手段と、
    撮像されたデータから気象や視界に関する安全度を判定する外界安全度判定手段と、
    車外の物体を検知する車外物体検出手段と、
    標識情報データベースと、
    道路情報データベースと、
    表示効果データベースと、
    現在位置と進行方向に基づいて標識情報データベースと道路情報データベースと表示効果データベースとから仮想的な景色等の画像を描画する仮想画像描画手段と、
    検知された車外の物体をその計測された位置に対応するように仮想的な物体の画像として描画する車外物体描画手段と、
    近くの現実の画像と仮想的な画像を視界距離に応じて両画像が違和感なくつながるように透過度を変化させて重ね合わせを補正した視界距離補正仮想画像生成手段と、
    外界安全度判定手段の結果に基づいて安全度が低いと判定されたとき、視界距離補正仮想画像生成手段と車外物***置描画手段とが作成した画像を重ね合わせて、車両のフロントガラスに表示する表示装置とを備えたことを特徴とする車両用表示システム。
  14. 車両の停車位置、停止標識の位置及び停止線の位置を記憶する手段と、
    現在位置を計測する手段と、
    進行方向を測定する手段と、
    標識情報データベースと、
    表示効果データベースと、
    標識の視認性を検出する標識視認性確認手段と、
    前記標識視認性確認手段の計測の結果、車両が停止すべき位置の標識の視認性が低いと判断されたとき、標識情報データベースと表示効果データベースとに基づいて視認性の低いと判断された標識とその標識に応じた補助画像を運転者の視野の景色に重畳して表示する表示装置とを備えたことを特徴とする車両用表示システム。
JP2006080772A 2006-03-23 2006-03-23 車両用表示システム Expired - Fee Related JP4788426B2 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2006080772A JP4788426B2 (ja) 2006-03-23 2006-03-23 車両用表示システム

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2006080772A JP4788426B2 (ja) 2006-03-23 2006-03-23 車両用表示システム

Publications (2)

Publication Number Publication Date
JP2007257286A true JP2007257286A (ja) 2007-10-04
JP4788426B2 JP4788426B2 (ja) 2011-10-05

Family

ID=38631472

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2006080772A Expired - Fee Related JP4788426B2 (ja) 2006-03-23 2006-03-23 車両用表示システム

Country Status (1)

Country Link
JP (1) JP4788426B2 (ja)

Cited By (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2011161111A (ja) * 2010-02-13 2011-08-25 Brother Industries Ltd ストライクゾーン提示システム
JP2012066750A (ja) * 2010-09-27 2012-04-05 Nippon Seiki Co Ltd 車両用表示装置
JP2012091531A (ja) * 2010-10-22 2012-05-17 Denso Corp 表示制御装置及び車載表示システム
JP2012098609A (ja) * 2010-11-04 2012-05-24 Ns Solutions Corp 情報処理装置、自動車、情報処理方法及びプログラム
JP2012162109A (ja) * 2011-02-03 2012-08-30 Toyota Motor Corp 車両用表示装置
JP2015112953A (ja) * 2013-12-10 2015-06-22 株式会社デンソー 車両用投影装置
WO2015163205A1 (ja) * 2014-04-25 2015-10-29 日本精機株式会社 車両用表示システム
JP2016503918A (ja) * 2012-12-21 2016-02-08 ハーマン ベッカー オートモーティブ システムズ ゲーエムベーハー 車両のためのシステム
JP2016511860A (ja) * 2013-01-06 2016-04-21 アイオンロード テクノロジーズ リミテッドIonroad Technologies Ltd. 運転サポート
JP2016537792A (ja) * 2013-09-13 2016-12-01 フィリップス ライティング ホールディング ビー ヴィ 拡張現実を支援するためのシステム及び方法
WO2017134861A1 (ja) * 2016-02-05 2017-08-10 日立マクセル株式会社 ヘッドアップディスプレイ装置
CN108473055A (zh) * 2016-02-05 2018-08-31 麦克赛尔株式会社 平视显示器装置
WO2018180122A1 (ja) * 2017-03-30 2018-10-04 ソニー株式会社 運転支援装置と運転支援方法
US10127820B2 (en) 2015-08-05 2018-11-13 Lg Electronics Inc. Driver assistance apparatus and vehicle including the same
JP2019027996A (ja) * 2017-08-02 2019-02-21 日産自動車株式会社 車両用表示方法及び車両用表示装置
JP2019064318A (ja) * 2017-09-28 2019-04-25 株式会社Subaru 車両の対象物情報提供装置
JP2019064319A (ja) * 2017-09-28 2019-04-25 株式会社Subaru 車両の対象物情報提供装置
JP2020190942A (ja) * 2019-05-22 2020-11-26 株式会社デンソー 表示制御装置

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102163774B1 (ko) * 2018-05-25 2020-10-08 (주)에이다스원 영상 인식 장치 및 그 방법

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH10339646A (ja) * 1997-06-10 1998-12-22 Toyota Motor Corp 車両用案内表示装置
JPH11263145A (ja) * 1998-03-17 1999-09-28 Isuzu Motors Ltd 夜間運転視界支援装置
JP2002230558A (ja) * 2001-02-02 2002-08-16 Toru Hagiwara 視環境評価方法
JP2005149175A (ja) * 2003-11-17 2005-06-09 Casio Comput Co Ltd 表示制御装置およびプログラム
JP2005182306A (ja) * 2003-12-17 2005-07-07 Denso Corp 車両用表示装置
JP2006042147A (ja) * 2004-07-29 2006-02-09 Honda Motor Co Ltd 車両の認知支援装置

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH10339646A (ja) * 1997-06-10 1998-12-22 Toyota Motor Corp 車両用案内表示装置
JPH11263145A (ja) * 1998-03-17 1999-09-28 Isuzu Motors Ltd 夜間運転視界支援装置
JP2002230558A (ja) * 2001-02-02 2002-08-16 Toru Hagiwara 視環境評価方法
JP2005149175A (ja) * 2003-11-17 2005-06-09 Casio Comput Co Ltd 表示制御装置およびプログラム
JP2005182306A (ja) * 2003-12-17 2005-07-07 Denso Corp 車両用表示装置
JP2006042147A (ja) * 2004-07-29 2006-02-09 Honda Motor Co Ltd 車両の認知支援装置

Cited By (27)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2011161111A (ja) * 2010-02-13 2011-08-25 Brother Industries Ltd ストライクゾーン提示システム
JP2012066750A (ja) * 2010-09-27 2012-04-05 Nippon Seiki Co Ltd 車両用表示装置
JP2012091531A (ja) * 2010-10-22 2012-05-17 Denso Corp 表示制御装置及び車載表示システム
JP2012098609A (ja) * 2010-11-04 2012-05-24 Ns Solutions Corp 情報処理装置、自動車、情報処理方法及びプログラム
JP2012162109A (ja) * 2011-02-03 2012-08-30 Toyota Motor Corp 車両用表示装置
JP2016503918A (ja) * 2012-12-21 2016-02-08 ハーマン ベッカー オートモーティブ システムズ ゲーエムベーハー 車両のためのシステム
US10081370B2 (en) 2012-12-21 2018-09-25 Harman Becker Automotive Systems Gmbh System for a vehicle
US10083613B2 (en) 2013-01-06 2018-09-25 Ionroad Technologies Ltd. Driving support
JP2016511860A (ja) * 2013-01-06 2016-04-21 アイオンロード テクノロジーズ リミテッドIonroad Technologies Ltd. 運転サポート
JP2016537792A (ja) * 2013-09-13 2016-12-01 フィリップス ライティング ホールディング ビー ヴィ 拡張現実を支援するためのシステム及び方法
US10546422B2 (en) 2013-09-13 2020-01-28 Signify Holding B.V. System and method for augmented reality support using a lighting system's sensor data
JP2015112953A (ja) * 2013-12-10 2015-06-22 株式会社デンソー 車両用投影装置
WO2015163205A1 (ja) * 2014-04-25 2015-10-29 日本精機株式会社 車両用表示システム
JP2015210644A (ja) * 2014-04-25 2015-11-24 日本精機株式会社 車両用表示システム
US20170039438A1 (en) * 2014-04-25 2017-02-09 Nippon Seiki Co., Ltd. Vehicle display system
EP3136369A4 (en) * 2014-04-25 2018-01-24 Nippon Seiki Co., Ltd. Vehicle display system
US10127820B2 (en) 2015-08-05 2018-11-13 Lg Electronics Inc. Driver assistance apparatus and vehicle including the same
CN108473055A (zh) * 2016-02-05 2018-08-31 麦克赛尔株式会社 平视显示器装置
WO2017134861A1 (ja) * 2016-02-05 2017-08-10 日立マクセル株式会社 ヘッドアップディスプレイ装置
WO2018180122A1 (ja) * 2017-03-30 2018-10-04 ソニー株式会社 運転支援装置と運転支援方法
JP2019027996A (ja) * 2017-08-02 2019-02-21 日産自動車株式会社 車両用表示方法及び車両用表示装置
JP7019239B2 (ja) 2017-08-02 2022-02-15 日産自動車株式会社 車両用表示方法及び車両用表示装置
JP2019064318A (ja) * 2017-09-28 2019-04-25 株式会社Subaru 車両の対象物情報提供装置
JP2019064319A (ja) * 2017-09-28 2019-04-25 株式会社Subaru 車両の対象物情報提供装置
JP7164941B2 (ja) 2017-09-28 2022-11-02 株式会社Subaru 車両の対象物情報提供装置
JP7193911B2 (ja) 2017-09-28 2022-12-21 株式会社Subaru 車両の対象物情報提供装置
JP2020190942A (ja) * 2019-05-22 2020-11-26 株式会社デンソー 表示制御装置

Also Published As

Publication number Publication date
JP4788426B2 (ja) 2011-10-05

Similar Documents

Publication Publication Date Title
JP4788426B2 (ja) 車両用表示システム
US11535155B2 (en) Superimposed-image display device and computer program
JP6658905B2 (ja) 走行支援装置及びコンピュータプログラム
JP5817927B2 (ja) 車両用表示装置、車両用表示方法及び車両用表示プログラム
US11511627B2 (en) Display device and computer program
CN107848416B (zh) 显示控制装置、显示装置及显示控制方法
JP6775188B2 (ja) ヘッドアップディスプレイ装置および表示制御方法
US11525694B2 (en) Superimposed-image display device and computer program
US20110228980A1 (en) Control apparatus and vehicle surrounding monitoring apparatus
JP2005182306A (ja) 車両用表示装置
JP2016020876A (ja) 車両用表示装置
US20230135641A1 (en) Superimposed image display device
US20210063185A1 (en) Superimposed image display device, superimposed image drawing method, and computer program
JP2007102691A (ja) 車両用視界支援装置
US20170028917A1 (en) Driving assistance device and driving assistance method
JP2010185761A (ja) ナビゲーションシステム、道路地図表示方法
CN110546026A (zh) 调整装置、显示***及调整方法
JP2018173399A (ja) 表示装置及びコンピュータプログラム
CN111273765A (zh) 车辆用显示控制装置、车辆用显示控制方法以及存储介质
CN113165510B (zh) 显示控制装置、方法和计算机程序
JP6186905B2 (ja) 車載表示装置およびプログラム
JP2019056884A (ja) 重畳画像表示装置
JP2010262665A (ja) 車載装置及び車両認識方法
US20240101138A1 (en) Display system
JP2019087259A (ja) 重畳画像表示装置及びコンピュータプログラム

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20080513

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20100803

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20100805

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20100929

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20110405

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20110602

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20110621

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20110704

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20140729

Year of fee payment: 3

R151 Written notification of patent or utility model registration

Ref document number: 4788426

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R151

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

LAPS Cancellation because of no payment of annual fees