JP7100421B2 - 表示装置 - Google Patents

表示装置 Download PDF

Info

Publication number
JP7100421B2
JP7100421B2 JP2016071120A JP2016071120A JP7100421B2 JP 7100421 B2 JP7100421 B2 JP 7100421B2 JP 2016071120 A JP2016071120 A JP 2016071120A JP 2016071120 A JP2016071120 A JP 2016071120A JP 7100421 B2 JP7100421 B2 JP 7100421B2
Authority
JP
Japan
Prior art keywords
vehicle
risk
area
display device
display
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2016071120A
Other languages
English (en)
Other versions
JP2017182588A (ja
Inventor
広隆 齊藤
淳也 関
一文 鈴木
勇輝 長田
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Subaru Corp
Original Assignee
Subaru Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Subaru Corp filed Critical Subaru Corp
Priority to JP2016071120A priority Critical patent/JP7100421B2/ja
Publication of JP2017182588A publication Critical patent/JP2017182588A/ja
Application granted granted Critical
Publication of JP7100421B2 publication Critical patent/JP7100421B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Traffic Control Systems (AREA)

Description

本発明は、自車両周辺の環境に関する情報を画像表示する表示装置に関し、特にリスクが存在し得る領域を直感的かつ容易に把握可能なものに関する。
自動車等の車両において、自車両前方の状況を、例えばカメラ、レーザスキャナ、レーダ等の各種の周辺認識手段によって認識し、認識結果に基づいて車線形状や障害物等に関する情報を画像表示する表示装置が各種提案されている。
このような表示装置を用いると、乗員自らが目視により得られる以上の情報を得ることができ、乗員が運転者として運転する場合の運転支援としても、また、自動運転を行う車両において乗員が自動運転制御の妥当性を監視するためにも有用である。
このような車両の周辺環境認識に関する従来技術として、例えば特許文献1には、ミリ波センサが物体を検出した場合に、自車両を制御して衝突回避を図る車両用衝突危険回避システムにおいて、可視光によって検出不可能な物体は危険度がより高いものとし、強くドライバに警告を与えることが記載されている。
特許文献2には、自車両からは死角領域に入り認識できない領域の他車両の存在を、先行車両の挙動に基づいて推定する車両環境推定装置が記載されている。
特開2013-156793号公報 特開2010-267211号公報
近年、カメラやレーダ等のセンサ類を用いた環境認識技術が進化し、センサの検知範囲内においては、環境認識結果に基づく情報で安全を担保することが可能となっている。
しかし、環境認識結果に基づく全ての情報をユーザ(手動運転時におけるドライバ)に表示すると、ドライバの認識負荷が高まり、監視負担が重いものとなる。
これに対し、環境認識手段によって認識可能な領域と、認識不可能な領域とをユーザが認識することができれば、認識不可能な領域からリスク対象物が出現することを警戒したり、認識可能な領域において環境認識結果が妥当であるか判別することが容易となる。
本発明の課題は、リスクが存在し得る領域を直感的かつ容易に把握可能な表示装置を提供することである。
本発明は、以下のような解決手段により、上述した課題を解決する。
請求項1に係る発明は、自車両周囲の環境を認識するとともに認識が可能な領域内においてリスク対象物を抽出する環境認識手段と、予め準備された地図データを用いて自車両周囲の道路形状を示す画像を生成する画像生成手段と、前記画像生成手段が生成した前記画像を表示する画像表示手段とを備える表示装置であって、前記画像生成手段は、前記画像において前記環境認識手段による認識が不可能である領域及び前記リスク対象物の推定進路を含むリスク可能性領域を、所定の色彩一色による塗潰し表示又は所定の色彩一色を用いたグラデーション表示に統一し、前記リスク可能性領域以外の領域を複数の色彩を用いて描画し、前記リスク可能性領域及び前記リスク可能性領域以外の領域を同一画面内で同時に表示することを特徴とする表示装置である。
これによれば、環境認識手段による認識が不可能な領域及び前記リスク対象物の推定進路を他の領域とは異なる所定の色彩一色による塗潰し表示又は所定の色彩一色を用いたグラデーション表示に統一し、同一画面内で同時に表示することによって、環境認識手段によって安全が確認できない領域及び前記リスク対象物の推定進路をユーザが容易に認識することができる。
これによって、どの領域にリスクが生じることが懸念されるかを認識し、ユーザに適切な監視を行わせることができる。
また、環境認識手段によって認識が可能な領域内においても、安全であるか確定しない領域はリスク可能性領域の一部として、環境認識手段による認識を行えない領域と同様に表示することによって、ユーザにより適切に注意を喚起することができる。
請求項2に係る発明は、前記環境認識手段は、自車両に搭載されたセンサの出力に基づいて環境を認識することを特徴とする請求項1に記載の表示装置である。
これによれば、自車両に搭載された構成要素のみで成立可能なスタンドアローンの構成とすることができ、構成の複雑化を防止するとともに信頼性の確保が容易となる。
請求項3に係る発明は、前記環境認識手段は、自車両に搭載されたセンサの出力、及び、自車両の近隣を走行しかつ自車両と通信可能な車車間通信装置を有する他車両に搭載されたセンサの出力に基づいて環境を認識することを特徴とする請求項1に記載の表示装置である。
これによれば、車車間通信を介して他車両のセンサが検出した情報を利用することによって、環境認識手段による認識が可能な領域を拡大し、リスク可能性領域を縮小することができる。
請求項に係る発明は、前記リスク対象物は他車両又は歩行者であり、前記環境認識手段は、前記リスク対象物が交通法規を遵守した場合に進行が可能である領域を前記リスク対象物の推定進路として設定することを特徴とする請求項1から請求項までのいずれか1項に記載の表示装置である。
これによれば、リスク対象物が交通法規を遵守しない(例えば、赤信号無視など)場合を考慮することにより、リスク可能性領域が過度に多くなり、現実的に発生する可能性がきわめて低いリスクに対する監視が煩雑となり、かえってユーザの負担が増大することを防止できる。
以上説明したように、本発明によれば、リスクが存在し得る領域を直感的かつ容易に把握可能な表示装置を提供することができる。
本発明を適用した表示装置の実施例が設けられる車両の構成を模式的に示すブロック図である。 実施例の車両において車両周囲を認識するセンサ類の配置を示す模式図である。 実施例の表示装置の動作を示すフローチャートである。 実施例の表示装置における画面表示の一例を模式的に示す図である。
本発明は、リスクが存在し得る領域を直感的かつ容易に把握可能な表示装置を提供する課題を、車両に搭載されたセンサを用いる直接環境認識手段による認識が不可能な領域、及び、他車両等が自車両の進路に進入し得る領域を、リスク可能性領域を示す同系色によって表示することによって解決した。
以下、本発明を適用した表示装置の実施例について説明する。
図1は、本発明を適用した表示装置の実施例が設けられる車両の構成を模式的に示すブロック図である。
実施例の表示装置は、例えば、自動運転機能を有する乗用車等の自動車である車両1に設けられ、ユーザ(例えば手動運転時のドライバ)等のユーザ等に対して、自車両周辺の道路形状(車線形状)や、他車両、歩行者、建造物等の障害物に関する情報等を画像表示するものである。
ユーザは、表示装置が提示する情報に基づいて、自車両前方の車線形状や障害物を監視するとともに、自動運転制御の実行時においては、自動運転制御の妥当性を検証することができる。
図1に示すように、車両1は、エンジン制御ユニット10、トランスミッション制御ユニット20、挙動制御ユニット30、電動パワーステアリング(EPS)制御ユニット40、自動運転制御ユニット50、環境認識ユニット60、ステレオカメラ制御ユニット70、レーザスキャナ制御ユニット80、後側方レーダ制御ユニット90、ナビゲーション装置100、路車間通信装置110、車車間通信装置120、画像生成ユニット200、ディスプレイ210等を備えている。
上述した各ユニットは、例えば、CPU等の情報処理手段、RAMやROM等の記憶手段、入出力インターフェイス、及び、これらを接続するバス等を有するユニットとして構成される。これらの各ユニットは、例えばCAN通信システム等の車載LANシステムを介して相互に通信が可能となっている。
エンジン制御ユニット10は、車両1の走行用動力源であるエンジン及びその補機類を統括的に制御するものである。
エンジンとして、例えば、4ストロークガソリンエンジンが用いられる。
エンジン制御ユニット(ECU)10は、エンジンのスロットルバルブ開度、燃料噴射量及び噴射時期、点火時期等を制御することによって、エンジンの出力トルクを制御することが可能である。
車両1がドライバの運転操作に応じて運転される状態においては、エンジン制御ユニット10は、アクセルペダルの操作量等に基いて設定されるドライバ要求トルクに、エンジンの実際のトルクが近づくようエンジンの出力を制御する。
また、車両1が自動運転を行う場合には、エンジン制御ユニット10は、自動運転制御ユニット50からの指令に応じてエンジンの出力を制御する。
トランスミッション制御ユニット(TCU)20は、エンジンの回転出力を変速するとともに、車両の前進、後退を切り替える図示しない変速機及び補機類を統括的に制御するものである。
車両1が自動運転を行う場合には、トランスミッション制御ユニット20は、自動運転制御ユニット50からの指令に応じて、前後進等のレンジ切替や変速比の設定を行う。
変速機として、例えば、チェーン式、ベルト式、トロイダル式等のCVTや、複数のプラネタリギヤセットを有するステップAT、DCT、AMT等の各種自動変速機を用いることができる。
変速機は、バリエータ等の変速機構部のほか、例えばトルクコンバータ、乾式クラッチ、湿式クラッチ等の発進デバイスや、前進走行レンジと後退走行レンジとを切替える前後進切替機構等を有して構成されている。
トランスミッション制御ユニット20には、前後進切替アクチュエータ21、レンジ検出センサ22等が接続されている。
前後進切替アクチュエータ21は、前後進切替機構に油圧を供給する油路を切り替える前後進切替バルブを駆動し、車両の前後進を切替えるものである。
前後進切替アクチュエータ21は、例えば、ソレノイド等の電動アクチュエータである。
レンジ検出センサ22は、変速機において現在選択されているレンジが前進用のものであるか、後退用のものであるかを判別するセンサ(スイッチ)である。
挙動制御ユニット30は、左右前後輪にそれぞれ設けられた液圧式サービスブレーキのホイルシリンダ液圧を個別に制御することによって、アンダーステアやオーバステア等の車両挙動を抑制する挙動制御や、制動時のホイルロックを回復させるアンチロックブレーキ制御を行うものである。
挙動制御ユニット30には、ハイドロリックコントロールユニット(HCU)31、車速センサ32等が接続されている。
HCU31は、液圧式サービスブレーキの作動流体であるブレーキフルードを加圧する電動ポンプ、及び、各車輪のホイルシリンダに供給される液圧を個別に調節するバルブ等を有する。
車両1が自動運転を行う場合には、HCU31は、自動運転制御ユニット50からの制動指令に応じて、各車輪のホイルシリンダに制動力を発生させる。
車速センサ32は、各車輪のハブ部に設けられ、車輪の回転速度に比例する周波数の車速パルス信号を発生するものである。
車速パルス信号の周波数を検出し、所定の演算処理を施すことによって、車両の走行速度(車速)を算出することが可能である。
電動パワーステアリング(EPS)制御ユニット40は、ドライバによる操舵操作を電動モータによってアシストする電動パワーステアリング装置、及び、その補機類を統括的に制御するものである。
EPS制御ユニット40には、モータ41、舵角センサ42等が接続されている。
モータ41は、車両の操舵系にアシスト力を付与してドライバによる操舵操作をアシストし、あるいは、自動運転時に舵角を変更する電動アクチュエータである。
車両1が自動運転を行う場合には、モータ41は、自動運転制御ユニット50からの操舵指令に応じて、操舵系の舵角が所定の目標舵角に近づくように操舵系にトルクを付与して転舵を行わせる。
舵角センサ42は、車両の操舵系における現在の舵角を検出するものである。
舵角センサ42は、例えば、ステアリングシャフトの角度位置を検出する位置エンコーダを備えている。
自動運転制御ユニット50は、自動運転モードが選択されている場合に、上述したエンジン制御ユニット10、トランスミッション制御ユニット20、挙動制御ユニット30、EPS制御ユニット40等に制御指令を出力し、車両を自動的に走行させる自動運転制御を実行するものである。
自動運転制御ユニット50は、自動運転モードが選択された時に、環境認識ユニット60から提供される自車両周辺の状況に関する情報、及び、図示しないドライバからの指令等に応じて、自車両が進行すべき目標走行軌跡を設定し、車両の加速(発進)、減速(停止)、前後進切替、転舵などを自動的に行い、予め設定された目的地まで車両を自動的に走行させる自動運転を実行する。
また、自動運転モードは、ユーザが手動運転を希望する場合、あるいは、自動運転の続行が困難である場合等に、ユーザからの所定の解除操作に応じて中止され、ドライバによる手動運転を行う手動運転モードへの復帰が可能となっている。
自動運転制御ユニットは、環境認識ユニット60から自車両周囲の環境に関する情報を取得し、他車両等のリスク対象物を回避可能な目標走行ラインを設定するとともに、自車両1の実際の走行ラインが目標走行ラインに沿うように車両の走行制御を行う。
自動運転制御ユニット50には、入出力装置51が接続されている。
入出力装置51は、自動運転制御ユニット50からユーザへの警報や各種メッセージ等の情報を出力するとともに、ユーザからの各種操作の入力を受け付けるものである。
入出力装置51は、例えば、LCD等の画像表示装置、スピーカ等の音声出力装置、タッチパネル等の操作入力装置等を有して構成されている。
環境認識ユニット60は、自車両周囲の情報を認識するものである。
環境認識ユニット60は、ステレオカメラ制御ユニット70、レーザスキャナ制御ユニット80、後側方レーダ制御ユニット90、ナビゲーション装置100、路車間通信装置110、車車間通信装置120等からそれぞれ提供される情報に基づいて、自車両周辺の駐車車両、走行車両、建築物、地形、歩行者、サイクリスト等の障害物や、自車両が走行する道路の車線形状等を認識するものである。
また、環境認識ユニット60は、後述する画像生成ユニット200、ディスプレイ210等と協働して、本発明の表示装置を構成する。
ステレオカメラ制御ユニット70は、車両の周囲に複数組設けられるステレオカメラ71を制御するとともに、ステレオカメラ71から伝達される画像を画像処理するものである。
個々のステレオカメラ71は、例えば、レンズ等の撮像用光学系、CMOS等の固体撮像素子、駆動回路、及び、信号処理装置等からなるカメラユニットを、並列に例えば一対配列して構成されている。
ステレオカメラ制御ユニット70は、公知のステレオ画像処理技術を利用した画像処理結果に基づいて、ステレオカメラ71によって撮像された被写体の形状及び自車両に対する相対位置を認識する。
ステレオカメラ制御ユニット70は、例えば、自車両前方の車線両端部の白線を検出し、車線形状を認識することが可能である。
レーザスキャナ制御ユニット80は、レーザスキャナ81を制御するとともに、レーザスキャナ81の出力に基づいて車両周囲の車両や障害物等の各種物体を3D点群データとして認識するものである。
後側方レーダ制御ユニット90は、車両の左右側部にそれぞれ設けられる後側方レーダ91を制御するとともに、後側方レーダ91の出力に基づいて自車両後側方に存在する物体を検出するものである。
後側方レーダ91は、例えば、自車両の後側方から接近する他車両を検知可能となっている。
後側方レーダ91として、例えば、レーザレーダ、ミリ波レーダ等のレーダが用いられる。
図2は、実施例の車両において車両周囲を認識するセンサ類の配置を示す模式図である。
ステレオカメラ71は、車両1の前部、後部、左右側部にそれぞれ設けられている。
レーザスキャナ81は、車両1の周囲に実質的に死角が生じないよう分布して複数設けられている
後側方レーダ91は、例えば、車両1の車体左右側部に配置され、検知範囲を車両後方側かつ車幅方向外側に向けて配置されている。
ナビゲーション装置100は、例えばGPS受信機等の自車両位置測位手段、予め準備された地図データを蓄積したデータ蓄積手段、自車両の前後方向の方位を検出するジャイロセンサ等を有する。
地図データは、道路、交差点、インターチェンジ等の道路情報を車線レベルで有する。
道路情報は、3次元の車線形状データのほか、各車線(レーン)の右左折可否や、一時停止位置、制限速度等の走行上の制約となる情報も含む。
ナビゲーション装置100は、インストルメントパネルに組み込まれたディスプレイ101を有する。
ディスプレイ101は、ナビゲーション装置100がドライバに対して出力する各種情報が表示される画像表示装置である。
ディスプレイ101は、タッチパネルを有して構成され、ドライバからの各種操作入力が行われる入力部としても機能する。
路車間通信装置110は、所定の規格に準拠する通信システムによって、図示しない地上局と通信し、渋滞情報、交通信号機点灯状態、道路工事、事故現場、車線規制、天候、路面状況などに関する情報を取得するものである。
車車間通信装置120は、所定の規格に準拠する通信システムによって、図示しない他車両と通信し、他車両の位置、方位角、加速度、速度等の車両状態に関する情報や、車種、車両サイズ等の車両属性に関する情報を取得するものである。
上述した各種の環境認識手段において、車両1自体に搭載されたセンサによって環境認識を行うステレオカメラ71、レーザスキャナ81、後側方レーダ91等の車両に搭載されたセンサによって直接車線形状や障害物等の検知を行うものが、本発明にいう環境認識手段(直接環境認識手段)である。
画像生成ユニット200は、環境認識ユニット60から伝達される環境認識結果に基づいて、ディスプレイ210により表示される自車両周辺の環境に関する情報を含む画像(環境画像)を生成するものである。
ディスプレイ210は、車両の乗員と対向して配置された画像表示装置である。
ディスプレイ210は、例えば、インストルメントパネル等の内装部材に組み込まれたLCDを有する。
次に、実施例の表示装置における画像表示時の動作、及び、表示画面の例について説明する。
図3は、実施例の表示装置の動作を示すフローチャートである。
以下、ステップ毎に順を追って説明する。
<ステップS01:地図データ取得>
環境認識ユニット60は、ナビゲーション装置100から、自車両1が走行している地点近傍の道路形状、車線形状、地形、建築物等に関する情報を含む地図データを取得する。
その後、ステップS02に進む。
<ステップS02:目標走行ライン情報取得>
環境認識ユニット60は、自動運転制御ユニット50から、自車両1の予定走行経路である目標走行ラインに関する情報を取得する。
その後、ステップS03に進む。
<ステップS03:車両周囲環境認識>
環境認識ユニット60は、自車両1の周囲の環境を認識する。
環境認識ユニット60は、例えば、車線形状及び地形や、他車両、歩行者、建築物などの各種物体を検出する。
これらの物体に関する情報は、例えば、その種類、自車両からの相対位置、大きさ、形状、さらに、移動している場合は自車両に対する相対速度等を含む。
その後、ステップS04に進む。
<ステップS04:環境認識不可領域判定>
環境認識ユニット60は、ステレオカメラ71、レーザスキャナ81等のセンサ類による環境認識が不可能な領域(環境認識不可領域)を判定する。
環境認識不可領域として、各センサの検出限界距離以遠の領域、及び、建築物や他車両等の遮蔽物により遮蔽され、死角となっている領域が含まれる。
その後、ステップS05に進む。
<ステップS05:リスク対象物抽出>
環境認識ユニット60は、ステップS03において検出された物体のうち、自車両との衝突リスクが想定されるものを抽出し、リスク対象物として設定する。
リスク対象物は、自車両1の目標走行ラインに隣接する物体や、自車両1の目標走行ラインに接近、進入する可能性のある移動体を含む。
その後、ステップS06に進む。
<ステップS06:リスク対象物有無判定>
環境認識ユニット60がステップS05において少なくとも一つのリスク対象物を抽出した場合はステップS07に進む。
また、リスク対象物が抽出されなかった場合はステップS09に進む。
<ステップS07:リスク対象物移動・移動可能性判断>
環境認識ユニット60は、ステップS05において抽出されたリスク対象物が、現在移動中である移動体、あるいは、現在停止しているが移動を開始する可能性がある物体であるか、移動しない物体であるかを判別する。
例えば、停止中の他車両は、移動を開始する可能性がある物体として認識される。
リスク対象物が移動体、あるいは、移動を開始する可能性がある物体である場合はステップS08に進み、その他の場合はステップS09に進む。
<ステップS08:リスク対象物進路推定>
環境認識ユニット60は、リスク対象物が今後とり得る進路を推定する。
リスク対象物が移動体である場合は、現在の速度及び進行方向に基づいて、進路が推定される。
また、リスク対象物が移動を開始する可能性がある物体である場合は、リスク対象物が交通法規(信号機、標識、車線区分等)を遵守した場合にとり得る進路を推定進路とする。
例えば、赤信号や一時停止標識により停車している他車両は、今後前進する可能性を有する。また、ステレオカメラ71によってターンシグナルランプの点滅が検出された場合には、当該方向への右左折、車線変更などが予想される。
リスク対象物の進路推定を終了後、ステップS09に進む。
<ステップS09:リスク可能性領域設定>
環境認識ユニット60は、ステップ04において判定された環境認識不可領域、及び、抽出されたリスク対象物推定進路を、衝突リスクの発生の可能性が存在するリスク可能性領域として設定する。
その後、ステップS10に進む。
<ステップS10:表示画像データ生成>
画像生成ユニット200は、環境認識ユニット60から提供される情報に基づいて、ディスプレイ210に表示される表示画像の画像データを生成する。
表示画像については、後に詳細に説明する。
その後、ステップS11に進む。
<ステップS11:表示画像出力>
画像生成ユニット210は、ステップS10において生成した画像データをディスプレイ210に伝達し、表示画像を表示させる。
その後、一連の処理を終了(リターン)する。
以下、実施例の表示装置における表示画像について説明する。
図4は、実施例の表示装置における表示画像の一例を示す図である。
図4に示すように、表示画像は、自車両周辺の環境を、ディテール等を省略して簡素化し、コンピュータグラフィックスにより生成した俯瞰図として表示する。
この俯瞰図においては、自車両の上方かつ後方に設定された仮想視点からの視野を示している。
また、俯瞰図には、自車両のほか、他車両、歩行者、自転車、建造物等の各種リスク対象物を示す図柄が、各リスク対象物の位置を示す箇所に重畳して表示されている。
図4に示す例では、自車両1は、市街地内で片側一車線左側通行の道路を走行している。
自車両1の前方には、自車両が走行中の道路と、自車両1の車幅方向にほぼ沿った片側一車線左側通行の道路とが交差する交差点Jが存在する。
交差点Jは、自車両1から見て、手前側、奥側に自車両1の車幅方向に沿った横断歩道が設けられるとともに、左右に自車両1の進行方向に沿った横断歩道が設けられている。
自車両1は、図4に破線矢印で図示する目標走行ラインLのように、交差点Jを左折することを予定している。
表示画像には、建築物であるビルB1乃至B4が表示されている。
ビルB1は、交差点Jの左手前側に配置されている。
ビルB2は、交差点Jの右手前側に配置されている。
ビルB3は、交差点Jの左奥側に配置されている。
ビルB4は、交差点Jの右奥側に配置されている。
各ビルB1乃至B4と、各道路の車道との間には、それぞれ歩道が形成されている。
表示画像には、他車両V1、歩行者PE1、PE2が表示されている。
他車両V1は、交差点Jよりも奥側の対向車線を自車両1側へ走行しており、さらに、ステレオカメラ71によって右折方向へのターンシグナルランプ(不図示)の点滅が検出されている。
歩行者PE1は、ビルB1の近傍の歩道上におり、横断歩道を歩行してビルB2側の歩道へ移動しようとしている。
歩行者PE2は、ビルB4側からビルB2側へ横断歩道を歩行して移動中である。
サイクリストCYは、ビルB1側の歩道上を自車両1と同じ方向へ並走している。
自車両1の右折先の道路上において、ビルB1、B2によって遮られる死角部分は、ステレオカメラ71等による環境認識が不可能な領域であることから、その路面上はリスク可能性領域R1、R2となっている。
このようなリスク可能性領域R1、R2には、例えば、他車両V2、V3、歩行者PE3などが存在し得る。
このような死角内のリスク対象物は、少なくとも自車両1の現在位置からは直接環境認識手段によって認識することはできないため、リスク可能性領域R1、R2は、安全であると確定判断することができない安全未確認状態となっている。
ただし、図4に示す例においては、自車両1の前方側の信号が進行を許可しているため、他車両V2、V3、歩行者PE3は、これらが交通法規を遵守している限りは信号待ち状態で停止していることから、自車両1の目標走行ラインLに干渉するリスクは比較的低い。
また、歩行者PE1も同様に信号待ち状態で停止しており、比較的リスクは低い。
歩行者PE2に関しては、横断歩道を歩行中であるが、自車両1の目標走行ラインLとは干渉しないため、安全であると認識される。
これに対し、対向車である他車両V1は、自車両1の直前で右折を行い、他車両V1の推定進路と自車両1の目標走行ラインLが近接し、さらには交錯することが懸念される。
そこで、他車両V1が右折時に通過する推定進路に、リスク可能性領域R3が設定されている。
また、自車両1と並走するサイクリストCYは、直進して交差点J内をビルB1側からビルB3側へ走行することが推定され得る。
この場合、自車両1の目標走行ラインLを横切ることになるため、サイクリストCYの前方にもリスク可能性領域R4が設定される。
上述したリスク可能性領域R1乃至R4は、表示画像上において、他の領域とは異なった共通する表示態様で表示される。
例えば、リスク可能性領域R1乃至R4は、例えば所定の色彩一色(一例としてグレー等)を用いたグラデーション表示としたり、所定の色彩一色で塗りつぶした表示とすることができる。
これに対し、リスク可能性領域以外の領域は、複数の色彩を用いて描画する構成とすることによって、リスク可能性領域R1乃至R4と視覚的な差を設けて、一目瞭然に判別可能とすることができる。
以上説明した実施例によれば、以下の効果を得ることができる。
(1)ステレオカメラ71、レーザスキャナ81等の車載センサによる認識が不可能な領域R1、R2を、他の領域とは異なる表示態様に統一して表示することによって、車載センサによって安全が確認できない領域をユーザが容易に認識することができる。
これによって、どの領域にリスクが生じることが懸念されるかを認識し、ユーザに適切な監視を行わせることができる。
(2)環境認識手段として自車両1に搭載されたステレオカメラ71、レーザスキャナ81等の車載センサを用いることにより、自車両に搭載された構成要素のみで成立可能なスタンドアローンの構成とすることができ、構成の複雑化を防止するとともに信頼性の確保が容易となる。
(3)リスク可能性領域R1乃至R4を所定の色彩一色による塗潰し表示又は所定の色彩一色を用いたグラデーション表示とすることによって、簡単な構成によって上述した効果を確実に得ることができる。
(4)抽出されたリスク対象物の推定進路をリスク可能性領域R3、R4とすることによって、車載センサによって認識が可能な領域内においても、安全であるか確定しない領域はリスク可能性領域R1~R4の一部として、認識を行えない領域と同様に表示することによって、ユーザにより適切に注意を喚起することができる。
(5)他車両V1やサイクリストCYが信号機の指示を遵守した場合に進入が可能な領域にリスク可能性領域R3,R4を設定することによって、リスク対象物が交通法規を遵守しない場合まで考慮することにより、リスク可能性領域が過度に多くなり、現実的に発生することが希であるリスクに対する監視が煩雑となり、かえってユーザの負担が増大することを防止できる。
(変形例)
本発明は、以上説明した実施例に限定されることなく、種々の変形や変更が可能であって、それらも本発明の技術的範囲内である。
(1)表示装置の構成や、車両の構成は、上述した実施例に限定されず適宜変更することが可能である。また、実施例において車両は乗用車であるが、本発明は貨物車等の商用車、トラック、バス、自動二輪車、その他各種特殊車両などにも適用することが可能である。
(2)実施例において、車両はエンジンを走行用動力源とするものであったが、本発明はこれに限らず、電動モータや、エンジンと電動モータとを組み合わせたハイブリッドシステムを走行用動力源として用いることも可能である。
(3)自車両周辺の環境認識を行うセンサの種類や配置は、上述した実施例には限定されず、適宜変更することが可能である。例えば、実施例におけるセンサ類と併用あるいは代用して、ミリ波レーザ、レーザレーダ、単眼カメラ、超音波ソナー等の各種センサを用いることが可能である。
また、車両自体に搭載されているセンサ類などと併用あるいは代用して、路車間通信や車車間通信によって得た情報や、GPS等の測位手段及びナビゲーション装置等が有する地図データを用いて環境認識を行ってもよい。
(4)実施例においては、表示画像を俯瞰図(鳥瞰図)としているが、これに限らず、例えば平面図や、仮想ドライバ視点から見たドライバーズビューとすることも可能である。また、3D表示が可能なディスプレイを用いて、3D表示を行ってもよい。また、インストルメントパネルに設けたディスプレイによる表示に限らず、例えば、フロントガラスに像を投影するヘッドアップディスプレイによって表示してもよい。
(5)実施例においては、環境認識手段として自車両に搭載されたステレオカメラ、レーダスキャナ等のセンサを用いているが、これに限らず、例えば隣接して走行する他車両(典型的には先行車)に搭載されているセンサの出力を、車車間通信によって取得し、これに基づいて環境認識を行ってもよい。
(6)実施例の表示装置は、自動運転を行う車両に適用されるものであったが、本発明はこれに限らず、手動運転を行う車両の運転支援用としても有用である。
1 車両 10 エンジン制御ユニット
20 トランスミッション制御ユニット 21 前後進切替アクチュエータ
22 レンジ検出センサ 30 挙動制御ユニット
31 ハイドロリックコントロールユニット(HCU)
32 車速センサ
40 電動パワーステアリング(EPS)制御ユニット
41 モータ 42 舵角センサ
50 自動運転制御ユニット 51 入出力装置
60 環境認識ユニット 70 カメラ制御ユニット
71 ステレオカメラ
80 レーザスキャナ制御ユニット
81 レーザスキャナ 90 後側方レーダ制御ユニット
91 後側方レーダ 100 ナビゲーション装置
101 ディスプレイ
110 路車間通信装置 120 車車間通信装置
200 画像生成ユニット 210 ディスプレイ
J 交差点 S 信号
V1~V3 他車両 PE1~PE3 歩行者
CY サイクリスト B1~B4 ビル
R1~R4 リスク可能性領域 L 目標走行ライン

Claims (4)

  1. 自車両周囲の環境を認識するとともに認識が可能な領域内においてリスク対象物を抽出する環境認識手段と、
    予め準備された地図データを用いて自車両周囲の道路形状を示す画像を生成する画像生成手段と、
    前記画像生成手段が生成した前記画像を表示する画像表示手段と
    を備える表示装置であって、
    前記画像生成手段は、前記画像において前記環境認識手段による認識が不可能である領域及び前記リスク対象物の推定進路を含むリスク可能性領域を、所定の色彩一色による塗潰し表示又は所定の色彩一色を用いたグラデーション表示に統一し、前記リスク可能性領域以外の領域を複数の色彩を用いて描画し、前記リスク可能性領域及び前記リスク可能性領域以外の領域を同一画面内で同時に表示すること
    を特徴とする表示装置。
  2. 前記環境認識手段は、自車両に搭載されたセンサの出力に基づいて環境を認識すること
    を特徴とする請求項1に記載の表示装置。
  3. 前記環境認識手段は、自車両に搭載されたセンサの出力、及び、自車両の近隣を走行しかつ自車両と通信可能な車車間通信装置を有する他車両に搭載されたセンサの出力に基づいて環境を認識すること
    を特徴とする請求項1に記載の表示装置。
  4. 前記リスク対象物は他車両又は歩行者であり、
    前記環境認識手段は、前記リスク対象物が交通法規を遵守した場合に進行が可能である領域を前記リスク対象物の推定進路として設定すること
    を特徴とする請求項1から請求項3までのいずれか1項に記載の表示装置。
JP2016071120A 2016-03-31 2016-03-31 表示装置 Active JP7100421B2 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2016071120A JP7100421B2 (ja) 2016-03-31 2016-03-31 表示装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2016071120A JP7100421B2 (ja) 2016-03-31 2016-03-31 表示装置

Publications (2)

Publication Number Publication Date
JP2017182588A JP2017182588A (ja) 2017-10-05
JP7100421B2 true JP7100421B2 (ja) 2022-07-13

Family

ID=60007375

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2016071120A Active JP7100421B2 (ja) 2016-03-31 2016-03-31 表示装置

Country Status (1)

Country Link
JP (1) JP7100421B2 (ja)

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP7149199B2 (ja) * 2019-02-13 2022-10-06 株式会社Subaru 自動運転システム
JP2020144417A (ja) * 2019-03-04 2020-09-10 アイシン・エィ・ダブリュ株式会社 リスク取得システム、リスク表示システムおよびリスク取得プログラム
JP2020164045A (ja) * 2019-03-29 2020-10-08 マツダ株式会社 車両走行制御装置
JP7420008B2 (ja) * 2020-08-20 2024-01-23 株式会社デンソー 表示制御装置
JPWO2022162909A1 (ja) * 2021-01-29 2022-08-04

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005165555A (ja) 2003-12-01 2005-06-23 Nissan Motor Co Ltd 危険個所表示システム
JP2007233770A (ja) 2006-03-01 2007-09-13 Alpine Electronics Inc 車載周辺状況提示装置
JP2012192878A (ja) 2011-03-17 2012-10-11 Toyota Motor Corp 危険度判定装置
JP2015146142A (ja) 2014-02-04 2015-08-13 三菱自動車工業株式会社 情報出力装置

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH11108684A (ja) * 1997-08-05 1999-04-23 Harness Syst Tech Res Ltd カーナビゲーションシステム
JP2010073026A (ja) * 2008-09-19 2010-04-02 Toyota Motor Corp 車両走行支援装置
JP5573617B2 (ja) * 2010-11-12 2014-08-20 トヨタ自動車株式会社 危険度算出装置
JP5704239B2 (ja) * 2011-08-10 2015-04-22 トヨタ自動車株式会社 運転支援装置
JP6690194B2 (ja) * 2015-11-05 2020-04-28 株式会社デンソー 運転支援送信装置、運転支援受信装置、プログラム

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005165555A (ja) 2003-12-01 2005-06-23 Nissan Motor Co Ltd 危険個所表示システム
JP2007233770A (ja) 2006-03-01 2007-09-13 Alpine Electronics Inc 車載周辺状況提示装置
JP2012192878A (ja) 2011-03-17 2012-10-11 Toyota Motor Corp 危険度判定装置
JP2015146142A (ja) 2014-02-04 2015-08-13 三菱自動車工業株式会社 情報出力装置

Also Published As

Publication number Publication date
JP2017182588A (ja) 2017-10-05

Similar Documents

Publication Publication Date Title
JP6294905B2 (ja) 表示装置
JP6383376B2 (ja) 周辺リスク表示装置
CN107264399B (zh) 车辆周围监视装置
JP6688655B2 (ja) 車両状態監視装置
JP6305456B2 (ja) 表示装置
JP6773433B2 (ja) 周辺リスク表示装置
JP6542708B2 (ja) 表示装置
JP7100421B2 (ja) 表示装置
JP6688656B2 (ja) 周辺リスク表示装置
US11338821B2 (en) Display system, display method, and storage medium
CN109455137B (zh) 驾驶支援装置及驾驶支援方法
JP6757585B2 (ja) 表示装置
JP6744744B2 (ja) 表示装置
JP6757586B2 (ja) 異常報知装置
JP6889587B2 (ja) 画像表示装置
JP6667346B2 (ja) 周辺リスク表示装置
JP6633957B2 (ja) 周辺リスク表示装置
JP6959893B2 (ja) 車両制御システム
JP2017182566A (ja) 周辺リスク表示装置
JP6667347B2 (ja) 表示装置
JP6894744B2 (ja) 画像表示装置
JP2021028777A (ja) 表示制御装置

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20181225

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20191122

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20191224

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20200221

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20200804

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20201001

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20210309

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20210607

C60 Trial request (containing other claim documents, opposition documents)

Free format text: JAPANESE INTERMEDIATE CODE: C60

Effective date: 20210607

A911 Transfer to examiner for re-examination before appeal (zenchi)

Free format text: JAPANESE INTERMEDIATE CODE: A911

Effective date: 20210615

C21 Notice of transfer of a case for reconsideration by examiners before appeal proceedings

Free format text: JAPANESE INTERMEDIATE CODE: C21

Effective date: 20210616

A912 Re-examination (zenchi) completed and case transferred to appeal board

Free format text: JAPANESE INTERMEDIATE CODE: A912

Effective date: 20210917

C211 Notice of termination of reconsideration by examiners before appeal proceedings

Free format text: JAPANESE INTERMEDIATE CODE: C211

Effective date: 20210928

C22 Notice of designation (change) of administrative judge

Free format text: JAPANESE INTERMEDIATE CODE: C22

Effective date: 20211122

C13 Notice of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: C13

Effective date: 20220125

C302 Record of communication

Free format text: JAPANESE INTERMEDIATE CODE: C302

Effective date: 20220317

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20220318

C22 Notice of designation (change) of administrative judge

Free format text: JAPANESE INTERMEDIATE CODE: C22

Effective date: 20220426

C23 Notice of termination of proceedings

Free format text: JAPANESE INTERMEDIATE CODE: C23

Effective date: 20220510

C03 Trial/appeal decision taken

Free format text: JAPANESE INTERMEDIATE CODE: C03

Effective date: 20220607

C30A Notification sent

Free format text: JAPANESE INTERMEDIATE CODE: C3012

Effective date: 20220607

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20220701

R150 Certificate of patent or registration of utility model

Ref document number: 7100421

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150