JP6172059B2 - Display control device for vehicle - Google Patents
Display control device for vehicle Download PDFInfo
- Publication number
- JP6172059B2 JP6172059B2 JP2014118740A JP2014118740A JP6172059B2 JP 6172059 B2 JP6172059 B2 JP 6172059B2 JP 2014118740 A JP2014118740 A JP 2014118740A JP 2014118740 A JP2014118740 A JP 2014118740A JP 6172059 B2 JP6172059 B2 JP 6172059B2
- Authority
- JP
- Japan
- Prior art keywords
- display
- angle
- vehicle
- image
- wide
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Landscapes
- Closed-Circuit Television Systems (AREA)
Description
本発明は、自車両の外界を撮影して車載表示器に表示させる車両用表示制御装置に、関する。 The present invention relates to a vehicle display control device that captures an image of the outside world of a host vehicle and displays the image on a vehicle-mounted display.
従来、自車両において進行方向の外界を広角カメラにより撮影した広角映像から、車載表示器に表示させる映像を生成する車両用表示制御装置は、広く知られている。 2. Description of the Related Art Conventionally, a vehicular display control device that generates an image to be displayed on an in-vehicle display device from a wide-angle image obtained by capturing an external environment in the traveling direction of the host vehicle with a wide-angle camera is widely known.
例えば特許文献１に開示される車両用表示制御装置では、複数の広角カメラにより撮影されて車載表示器に表示される複数の表示映像に対し、それら各表示映像での自車両の進行方向を示した図形を、重畳して表示させている。かかる重畳表示により自車両の乗員は、各表示映像に映り込んだ進行方向の障害物を把握可能となる。
For example, in the vehicle display control device disclosed in
しかし、特許文献１に開示される車両用表示制御装置では、自車両のうち進行方向の前端部が表示映像に映り込まないと、障害物と当該前端部との衝突可能性を乗員が把握することは、困難となる。ここで、前端部が映像に映り込まない状況は、例えば広角カメラの実撮影画角から前端部が外れている場合や、自車両のうち広角カメラに対して死角を形成する死角形成部により前端部が隠れている場合等に、生じる。したがって、衝突可能性まで把握可能にする技術の提案が、望まれていた。
However, in the vehicle display control device disclosed in
本発明は、以上説明した問題に鑑みてなされたものであって、その目的は、障害物と自車両との衝突可能性を乗員により把握可能にする車両用表示制御装置を、提供することにある。 The present invention has been made in view of the above-described problems, and an object of the present invention is to provide a vehicle display control device that enables a passenger to grasp the possibility of a collision between an obstacle and the host vehicle. is there.
上述した課題を解決するために開示された発明は、自車両（１，２０１）において進行方向の外界（２）を広角カメラ（３）により撮影した広角映像（４，４ａ，２０４，２０４ａ）から切り出される表示映像（６，２０６）を、車載表示器（７）に表示させる車両用表示制御装置（１０）であって、自車両において操舵状態に関連する情報（Ｉｓ）を取得する情報取得手段（２０）と、広角映像のうち表示映像として切り出す切出領域（Ａｃ）を、情報取得手段により取得された操舵状態の関連情報に応じて、可変選定する領域選定手段（４０）と、自車両のうち進行方向の前端部（１ｓ，２０１ｂ）を示したインジケータ表示（９，２０９）を、領域選定手段により選定された切出領域の表示映像と位置合わせして、車載表示器に表示させる表示位置制御手段（５０）とを備え、車載表示器におけるインジケータ表示の位置を、情報取得手段により取得された操舵状態の関連情報に応じて、可変制御する表示位置制御手段は、車載表示器における表示映像よりも下方のうち、表示映像に映った外界における前端部の位置と対応した範囲（Ｒｌ）に、インジケータ表示を形成することを特徴とする。 The invention disclosed in order to solve the above-described problem is based on a wide-angle image (4, 4a, 204, 204a) obtained by photographing the external world (2) in the traveling direction in the own vehicle (1, 201) with the wide-angle camera (3). The vehicle display control device (10) for displaying the cut-out display image (6, 206) on the in-vehicle display (7), and information acquisition means for acquiring information (Is) related to the steering state in the host vehicle (20), an area selection means (40) for variably selecting a cut-out area (Ac) to be cut out as a display image from the wide-angle video in accordance with the steering state related information acquired by the information acquisition means, and the host vehicle The indicator display (9, 209) indicating the front end portion (1s, 201b) in the traveling direction is aligned with the display image of the cut-out area selected by the area selecting means and displayed on the vehicle-mounted display. And a display position control means (50) that the position of the indicator display in the vehicle mounting the display unit, in accordance with the relevant information acquired steering state by the information acquisition means, the display position control means for variably controlling the vehicle display The indicator display is formed in a range (Rl) corresponding to the position of the front end portion in the outside world shown in the display image below the display image in the container .
この発明によると、広角映像のうち車載表示器に表示させる表示映像として切り出される切出領域は、自車両における操舵状態の関連情報に応じて可変選定される。このとき車載表示器では、自車両のうち進行方向の前端部を示したインジケータ表示についても、その位置が操舵状態の関連情報に応じて可変制御されることで、切出領域の表示映像に位置合わせして表示される。これにより自車両の乗員は、表示映像に映り込んだ障害物とインジケータ表示との位置関係から、当該障害物と前端部との衝突可能性を把握可能となる。 According to the present invention, the cut-out area cut out as a display image to be displayed on the vehicle-mounted display device in the wide-angle image is variably selected according to the related information on the steering state in the host vehicle. At this time, in the on-vehicle display, the indicator display indicating the front end portion in the traveling direction of the host vehicle is also variably controlled according to the related information of the steering state, so that the position is displayed in the display image of the cutout area. Displayed together. As a result, the passenger of the own vehicle can grasp the possibility of collision between the obstacle and the front end portion from the positional relationship between the obstacle reflected in the display image and the indicator display.
また、開示された別の発明において情報取得手段は、自車両において現在の操舵角（ψｓ）から将来の転舵角（ψｔ）を、操舵状態の関連情報として予測し、領域設定手段は、情報取得手段により予測された将来の転舵角に合わせて、切出領域を選定し、表示位置制御手段は、領域選定手段により予測された将来の転舵角に合わせて、インジケータ表示の位置を制御することを特徴とする。 In another disclosed invention, the information acquisition means predicts the future turning angle (ψt) from the current steering angle (ψs) in the host vehicle as related information of the steering state, and the region setting means includes information The cutout area is selected according to the future turning angle predicted by the acquisition means, and the display position control means controls the position of the indicator display according to the future turning angle predicted by the area selection means. It is characterized by doing.
この発明によると、広角映像から表示映像を切り出す切出領域の選定も、インジケータ表示の位置制御も、自車両における操舵状態の関連情報として現在の操舵角から予測される将来の転舵角に、合わせたものとなる。これによれば、乗員の操舵に従う自車両の転舵に先取りして、当該操舵により進行方向を遮る可能性のある障害物を、インジケータ表示との正確な位置関係を保って表示映像に映り込ませ得る。故に乗員は、表示映像に映り込んだ障害物とインジケータ表示との位置関係から、自車両の転舵先に存在する障害物との衝突可能性を把握して、衝突の回避運転へと繋げることが可能となる。 According to the present invention, selection of a cut-out area for cutting a display image from a wide-angle image, position control of an indicator display, and a future turning angle predicted from a current steering angle as related information of a steering state in the host vehicle, Combined. According to this, in advance of steering of the host vehicle following the steering of the occupant, obstacles that may block the traveling direction by the steering are reflected in the display image while maintaining an accurate positional relationship with the indicator display. Not get. Therefore, the occupant must grasp the possibility of collision with the obstacle existing at the steering destination of the own vehicle from the positional relationship between the obstacle reflected in the display image and the indicator display, and lead to the collision avoidance driving. Is possible.
以下、本発明の複数の実施形態を図面に基づいて説明する。尚、各実施形態において対応する構成要素には同一の符号を付すことにより、重複する説明を省略する場合がある。各実施形態において構成の一部分のみを説明している場合、当該構成の他の部分については、先行して説明した他の実施形態の構成を適用することができる。また、各実施形態の説明において明示している構成の組み合わせばかりではなく、特に組み合わせに支障が生じなければ、明示していなくても複数の実施形態の構成同士を部分的に組み合せることができる。 Hereinafter, a plurality of embodiments of the present invention will be described with reference to the drawings. In addition, the overlapping description may be abbreviate | omitted by attaching | subjecting the same code | symbol to the corresponding component in each embodiment. When only a part of the configuration is described in each embodiment, the configuration of the other embodiment described above can be applied to the other part of the configuration. In addition, not only combinations of configurations explicitly described in the description of each embodiment, but also the configurations of a plurality of embodiments can be partially combined even if they are not explicitly specified unless there is a problem with the combination. .
（第一実施形態）
図１，２に示すように、本発明の第一実施形態による車両用表示制御装置１０は、自動車である自車両１に搭載されている。車両用表示制御装置１０は、自車両１において進行方向前方の外界２を広角カメラ３により撮影した広角映像４（図３参照）から、ステアリングユニット５の操舵に基づき切り出される表示映像６を、車載表示器７に表示させる。尚、以下の説明では、「進行方向前方」を単に前方という。また、以下の説明において「水平方向」及び「鉛直方向」とは、水平面上における自車両１の水平方向及び鉛直方向を、それぞれ意味している。
(First embodiment)
As shown in FIGS. 1 and 2, the vehicle
まず、広角カメラ３について説明する。図１，２に示すように広角カメラ３は、例えばＣＣＤ又はＣＭＯＳ等の撮像素子３ｄにより外界２を撮影して広角映像４を生成するために、自車両１のフロントグリル１ｇに設置されている。広角カメラ３は、本実施形態では一素子３ｄからの信号を画像処理回路３ｃ（図４参照）により処理して広角映像４を生成するが、複数素子３ｄからの信号を画像処理回路３ｃにより処理して広角映像４を生成してもよい。広角カメラ３の実撮影画角として、水平方向のうち図１に示す左右方向での水平画角θｆｈは、１３０度以上の広角、例えば１８０度程度に設定されている。それと共に広角カメラ３の実撮影画角として、図２に示す鉛直方向での垂直画角θｆｖは、１３０度以上の広角、例えば１３５度程度に設定されている。
First, the wide-
但し、鉛直方向における垂直画角θｆｖの画角中心Ｃｆｖは、水平面に対して例えば１５度〜２０度程度の俯角θｄをもって、設定されている。こうした俯角θｄの設定により垂直画角θｆｖの範囲内には、自車両１のうちフロントスポイラー１ｓよりも上方にて、フロントバンパー１ｂが位置している。その結果としてフロントバンパー１ｂは、広角カメラ３に対してフロントスポイラー１ｓを隠す死角ＢＳを、前方の斜め下方に形成している。ここでフロントスポイラー１ｓは、自車両１のスカートとも呼ばれるエアロパーツであり、図１，２に示すように、フロントバンパー１ｂよりも進行方向に張り出した「前端部」となっている。しかしながら、本実施形態において死角ＢＳの存在する広角カメラ３により撮影された広角映像４には、図３に示すように、フロントスポイラー１ｓがフロントバンパー１ｂに隠れて映り込まない。
However, the field angle center Cfv of the vertical field angle θfv in the vertical direction is set with a depression angle θd of, for example, about 15 degrees to 20 degrees with respect to the horizontal plane. The
尚、図３では、フロントバンパー１ｂにより実際には広角映像４に映っていないフロントスポイラー１ｓを、二点鎖線により示している。また、図３では、外界２に存在して広角画像４に映る障害物８の一例も、実線により併せて示している。
In FIG. 3, the
次に、ステアリングユニット５について説明する。図１に示すようにステアリングユニット５は、例えば電動式又は油圧式のパワーステアリング機能を有し、自車両１の車室１ｒ内のうち運転席１ｄの前方に配置されている。運転席１ｄに着座した乗員は、ステアリングユニット５のステアリングハンドル５ｈを操舵することで、自車両１の転舵輪１ｔを転舵させる。このとき、ステアリングハンドル５ｈの回転角である操舵角ψｓが乗員により調整されることに従って、転舵輪１ｔの転舵角ψｔがステアリングユニット５により制御される。そこで、ステアリングユニット５では、操舵角ψｓが操舵角センサ５ｓ（図４参照）により検出される。尚、操舵角ψｓは、自車両１の進行方向に沿う軸線Ｌｓを基準として、左側と右側とにそれぞれ設定される。また、同様に転舵角ψｔは、自車両１の進行方向に沿う軸線Ｌｔを基準として、左側と右側とにそれぞれ設定される。
Next, the steering unit 5 will be described. As shown in FIG. 1, the steering unit 5 has an electric or hydraulic power steering function, for example, and is disposed in front of the driver's
次に、車載表示器７について説明する。車載表示器７は、画面７ｐを有する例えば液晶ディスプレイ等であり、車室１ｒ内のうち運転席１ｄに対して斜め前方のセンターコンソール１ｃに設置されている。車載表示器７は、車両用表示制御装置１０により広角映像４から切り出されて、後に詳述の映像処理が施された表示映像６を、画面７ｐの全域に表示する。運転席１ｄに着座した乗員は、画面７ｐに表示された表示映像６を視認することで、外界２に存在する障害物８（例えば図１，２の一例参照）との衝突可能性を把握する。ここで障害物８は、自車両１の進行を妨げて衝突するおそれのある障害物、例えば自転車を含んだ他車両、人工構造物、人間、動物等である。また、画面７ｐにおける表示映像６の上下方向及び左右方向は、自車両１の前後方向及び左右方向とそれぞれ一致していることから、当該表示映像６に映る障害物８と自車両１との距離に基づき、衝突可能性の把握が可能となっている。
Next, the in-
次に、車両用表示制御装置１０について説明する。図４に示すように車両用表示制御装置１０は、マイクロコンピュータを主体に構成され、例えばＬＡＮ等の車内通信網を介して広角カメラ３と操舵角センサ５ｓと車載表示器７とに接続されている。車両用表示制御装置１０は、処理プログラムの実行により、複数のブロック２０，３０，４０，５０を機能的に構築する。
Next, the vehicle
「情報取得手段」として情報取得ブロック２０は、操舵角センサ５ｓの出力信号に基づき、ステアリングユニット５の操舵状態に関連する情報Ｉｓ（以下、「操舵状態関連情報Ｉｓ」という）を取得する。具体的に情報取得ブロック２０は、操舵角センサ５ｓの出力信号から現在の操舵角ψｓを逐次抽出し、当該抽出毎に現在の操舵角ψｓから将来の転舵角ψｔを予測する。このとき情報取得ブロック２０は、現在の操舵角ψｓをそのまま利用して将来の転舵角ψｔを予測してもよいし、現在及び過去の操舵角ψｓから算出した角速度や各加速度等に基づき将来の転舵角ψｔを予測してもよい。さらに、本実施形態の情報取得ブロック２０は、自車両１が将来辿ると予測される軌跡線Ｌｌ（図５〜７の二点鎖線参照）を、将来の転舵角ψｔから算出する。こうして逐次予測される将来の転舵角ψｔ及び軌跡線Ｌｌは、本実施形態の操舵状態関連情報Ｉｓとして取得されることになる。
As an “information acquisition unit”, the
「視点変換手段」として図４に示す視点変換ブロック３０は、フロントバンパー１ｂでフロントスポイラー１ｓの隠れた図３の広角映像４を、視点変換する。具体的に視点変換ブロック３０では、図８に示すようにフロントバンパー１ｂ及びフロントスポイラー１ｓを上方から俯瞰する視点として、視点変換用の仮想視点Ｐｖを設定する。視点変換ブロック３０は、例えば座標変換行列等による視点変換処理を広角映像４に施すことで、図５〜７の如く仮想視点Ｐｖから視た広角映像４（以下、特に変換前と区別する場合には、「変換広角映像４ａ」ともいう）を生成する。かかる変換広角映像４ａでは、死角ＢＳのうち少なくともフロントスポイラー１ｓに対応する隠れ領域Ａｓがフロントバンパー１ｂよりも前方に想定される。ここで隠れ領域Ａｓは、変換広角映像４ａに映った外界２でのフロントスポイラー１ｓの前後位置に、対応している。また、変換広角映像４ａにおいて隠れ領域Ａｓの画素データとしては、所定の補完データが割り当てられて領域選定ブロック４０に提供される。
The
尚、図５〜７では、フロントバンパー１ｂにより実際には変換広角映像４ａに映っていないフロントスポイラー１ｓを、二点鎖線により示している。また、図５〜７では、外界２に存在して変換広角画像４ａに映る障害物８の一例も、実線により併せて示している。
5 to 7, the
「領域選定手段」として図４に示す領域選定ブロック４０は、視点変換ブロック３０により視点変換された変換広角映像４ａのうち、表示映像６として切り出す切出領域Ａｃを、情報取得ブロック２０により取得の操舵状態関連情報Ｉｓに応じて可変選定する。具体的に領域選定ブロック４０は、図５〜７の如くフロントバンパー１ｂ及び隠れ領域Ａｓの含まれる領域を、切出領域Ａｃに選定する。
The
但し、切出領域Ａｃを水平方向に二等分する中心線Ｃｃｈの位置は、操舵状態関連情報Ｉｓとして逐次予測される将来の転舵角ψｔ及び将来の軌跡線Ｌｌに合わせて、領域選定ブロック４０での演算処理により設定される。即ち、将来の転舵角ψｔが軸線Ｌｔの左右いずれにも０度であると予測される場合、図５に二点鎖線で示す将来の軌跡線Ｌｌが切出領域Ａｃ内にて収まるように、中心線Ｃｃｈは、変換広角映像４ａを水平方向に二等分する軸線Ｌｗと位置合わせされる。また、将来の転舵角ψｔが軸線Ｌｔよりも左側に生じると予測される場合、図６に二点鎖線で示す将来の軌跡線Ｌｌが切出領域Ａｃ内にて収まるように、軸線Ｌｗに対して中心線Ｃｃｈも、当該転舵角ψｔと同じ左側へ振られる。さらにまた、将来の転舵角ψｔが軸線Ｌｔよりも右側に生じると予測される場合、図７に二点鎖線で示す将来の軌跡線Ｌｌが切出領域Ａｃ内にて収まるように、軸線Ｌｗに対して中心線Ｃｃｈも、当該転舵角ψｔと同じ右側へ振られる。こうした中心線Ｃｃｈの設定により切出領域Ａｃは、将来の転舵角ψｔ及び将来の軌跡線Ｌｌに合わせて選定される。
However, the position of the center line Cch that bisects the cutout area Ac in the horizontal direction is set in accordance with the future turning angle ψt and the future trajectory line Ll that are sequentially predicted as the steering state related information Is. It is set by the arithmetic processing at 40. That is, when the future turning angle ψt is predicted to be 0 degrees on either side of the axis Lt, the future locus line L1 indicated by the two-dot chain line in FIG. The center line Cch is aligned with an axis Lw that bisects the converted wide-
尚、図５〜７では、実際には変換広角映像４ａに映っていない軌跡線Ｌｌを、二点鎖線により示している。また、図５〜７では、変換広角映像４ａに想定される仮想的な隠れ領域Ａｓ及び切出領域Ａｃについて、説明の理解が容易となるよう、実線により併せて示している。
5-7, the locus line Ll that is not actually shown in the converted wide-
「表示位置制御手段」として図４に示す表示位置制御ブロック５０は、図９〜１１の如くフロントスポイラー１ｓを示したインジケータ表示９を、領域選定ブロック４０により選定された切出領域Ａｃの表示映像６と位置合わせして、車載表示器７に表示させる。このとき特に表示位置制御ブロック５０は、画面７ｐの全域に表示される表示映像６に対してインジケータ表示９を重畳させる重畳位置を、情報取得ブロック２０により取得の操舵状態関連情報Ｉｓに応じて可変制御する。具体的に表示位置制御ブロック５０は、表示状態での表示映像６の下部６ｌのうち、最下部６ｅのフロントバンパー１ｂよりも上方に位置する隠れ領域Ａｓに、インジケータ表示９を重畳させる。ここでインジケータ表示９は、フロントスポイラー１ｓを模した図形画像となっていることから、当該スポイラー１ｓの隠れ領域Ａｓ内に収まって表示映像６と合成表示される。
The display
但し、車載表示器７においてインジケータ表示９を水平方向に二等分する中心線Ｃｉｈの位置は、操舵状態関連情報Ｉｓとして逐次予測される将来の転舵角ψｔに合わせて、表示位置制御ブロック５０での演算処理により設定される。即ち、将来の転舵角ψｔが軸線Ｌｔの左右いずれにも０度であると予測される場合、図９に示すようにインジケータ表示９の中心線Ｃｉｈは、表示映像６を水平方向に二等分する軸線Ｌａと位置合わせされる。また、将来の転舵角ψｔが軸線Ｌｔよりも左側に生じると予測される場合、図１０に示すように中心線Ｃｉｈは、軸線Ｌａに対して当該転舵角ψｔとは反対の右側へ振られる。さらにまた、将来の転舵角ψｔが軸線Ｌｔよりも右側に生じると予測される場合、図１１に示すように中心線Ｃｉｈは、軸線Ｌａに対して当該転舵角ψｔとは反対の左側へ振られる。こうした中心線Ｃｉｈの設定により表示映像６は、実際には隠れ領域Ａｓの死角ＢＳに隠れているフロントスポイラー１ｓの水平方向位置を示すように、インジケータ表示９の位置が制御されたものとなる。
However, the position of the center line Cih that bisects the
尚、図９〜１１では、フロントバンパー１ｂにより実際には表示映像６に映っていないフロントスポイラー１ｓを、二点鎖線により示している。また、図９〜１１では、表示映像６に想定される仮想的な隠れ領域Ａｓ及び切出領域Ａｃについて、説明の理解が容易となるよう、実線により併せて示している。さらにまた、図９〜１１では、外界２に存在して表示映像６に映る障害物８の一例も、実線により併せて示している。
9 to 11, the
さて、ここまで説明した車両用表示制御装置１０による表示制御フローを、図１２に基づき以下に説明する。本表示制御フローは、自車両１のエンジンスイッチがオンされるのに応じて開始され、同エンジンスイッチがオフされるのに応じて終了する。
Now, the display control flow by the vehicle
具体的に支援表示フローのＳ１０１では、自車両１におけるステアリングユニット５の操舵状態関連情報Ｉｓを、情報取得ブロック２０により取得する。このとき操舵状態関連情報Ｉｓとしては、自車両１において現在の操舵角ψｓから予測した将来の転舵角ψｔ及び将来の軌跡線Ｌｌを、取得する。
Specifically, in S 101 of the support display flow, the
次のＳ１０２では、広角カメラ３により撮影の広角映像４を、Ｓ１０１にて取得の操舵状態関連情報Ｉｓに応じて、視点変換ブロック３０により視点変換することで、フロントスポイラー１ｓの隠れ領域Ａｓをフロントバンパー１ｂよりも前方に想定する。これにより、視点変換された変換広角映像４ａに映る外界２でのフロントスポイラー１ｓの前後位置に、隠れ領域Ａｓを対応させる。
In the next S102, the wide-
続くＳ１０３では、変換広角映像４ａのうち表示映像６として切り出す切出領域Ａｃを、Ｓ１０１にて取得の操舵状態関連情報Ｉｓに応じて、領域選定ブロック４０により可変選定する。このとき切出領域Ａｃとしては、Ｓ１０１にて予測された将来の転舵角ψｔ及び将来の軌跡線Ｌｌに合わせて、フロントバンパー１ｂ及び隠れ領域Ａｓを含む領域を選定する。
In subsequent S103, the cutout area Ac cut out as the
さらにＳ１０４では、Ｓ１０３にて切り出された切出領域Ａｃの表示映像６に対して、フロントスポイラー１ｓを示したインジケータ表示９を、表示位置制御ブロック５０により位置合わせして車載表示器７に合成表示させる。このときには、表示映像６の下部６ｌのうち隠れ領域Ａｓに重畳されるインジケータ表示９の位置を、Ｓ１０１にて取得の操舵状態関連情報Ｉｓに応じて可変制御する。ここで特に本実施形態では、インジケータ表示９としてフロントスポイラー１ｓを模した図形画像の位置を、Ｓ１０１にて予測された将来の転舵角ψｔに合わせて制御する。
Further, in S104, the
（作用効果）
以上説明した第一実施形態の作用効果を、以下に説明する。
(Function and effect)
The effects of the first embodiment described above will be described below.
第一実施形態によると、広角映像４のうち車載表示器７に表示させる表示映像６として切り出される切出領域Ａｃは、自車両１における操舵状態関連情報Ｉｓに応じて可変選定される。このとき、自車両１のうち進行方向の「前端部」であるフロントスポイラー１ｓを示したインジケータ表示９についても、その位置が操舵状態関連情報Ｉｓに応じて可変制御されることで、切出領域Ａｃの表示映像６に位置合わせして表示される。これにより自車両１の乗員は、表示映像６に映り込んだ障害物８とインジケータ表示９との位置関係から、当該障害物８とフロントスポイラー１ｓとの衝突可能性を把握可能となる。
According to the first embodiment, the cut-out area Ac cut out as the
また、第一実施形態によると、広角映像４から表示映像６を切り出す切出領域Ａｃの選定も、インジケータ表示９の位置制御も、操舵状態関連情報Ｉｓとして現在の操舵角ψｓから予測される将来の転舵角ψｔに、合わせたものとなる。これによれば、乗員の操舵に従う自車両１の転舵に先取りして、当該操舵により進行方向を遮る可能性のある障害物８を、インジケータ表示９との正確な位置関係を保って表示映像６に映り込ませ得る。故に乗員は、表示映像６に映り込んだ障害物８とインジケータ表示９との位置関係から、自車両１の転舵先に存在する障害物８との衝突可能性を把握して、衝突の回避運転へと繋げることが可能となる。
Further, according to the first embodiment, the selection of the cutout area Ac for cutting out the
さらに第一実施形態によると、表示映像６に映った外界２でのフロントスポイラー１ｓの前後位置と対応した領域Ａｓにおいて、インジケータ表示９は、表示映像６の下部６ｌに重畳される。これによれば、外界２における障害物８とフロントスポイラー１ｓとの前後位置関係を、表示映像６における障害物８とインジケータ表示９との上下位置関係により、正確に示し得る。故に乗員は、障害物８とフロントスポイラー１ｓとの衝突可能性を適確に把握可能となる。
Further, according to the first embodiment, the
またさらに第一実施形態のように、フロントスポイラー１ｓを模した図形画像がインジケータ表示９として表示映像６に重畳されることで、乗員は、障害物８と当該スポイラー１ｓとの衝突可能性を直感的に且つ適確に把握可能となる。
Furthermore, as in the first embodiment, the graphic image imitating the
加えて第一実施形態によると、広角カメラ３により撮影された広角映像４では、自車両１のうち当該カメラ３に対して死角ＢＳを形成するフロントバンパー１ｂにより、フロントスポイラー１ｓの隠れる隠れ領域Ａｓが形成される。そこで、広角カメラ３により撮影された広角映像４を視点変換してなる変換広角映像４ａでは、フロントスポイラー１ｓの隠れ領域Ａｓがフロントバンパー１ｂよりも前方に想定される。故に、そうした変換広角映像４ａから、フロントバンパー１ｂ及び隠れ領域Ａｓを含んだ切出領域Ａｃが選定されることで、当該切出領域Ａｃのうち隠れ領域Ａｓにフロントスポイラー１ｓが重畳されることになる。これによれば、切出領域Ａｃの表示映像６に映った外界２において、実際には隠れ領域Ａｓに存在するフロントスポイラー１ｓの前後位置を、フロントバンパー１ｂを基準として正確に示し得る。故に、広角カメラ３に対してはフロントバンパー１ｂにより隠れたフロントスポイラー１ｓと障害物８との衝突可能性であっても、乗員により適確に把握可能となる。
In addition, according to the first embodiment, in the wide-
（第二実施形態）
図１３〜２１に示すように本発明の第二実施形態は、第一実施形態の変形例である。図１３に示す第二実施形態の自車両２０１では、第一実施形態のフロントスポイラー１ｓが設けられていないことから、フロントバンパー２０１ｂが進行方向の「前端部」となっている。そこで、広角カメラ３により撮影された広角映像２０４には、図１４に示すように、フロントバンパー２０１ｂが映り込むようになっている。
(Second embodiment)
As shown in FIGS. 13-21, 2nd embodiment of this invention is a modification of 1st embodiment. In the
第二実施形態の視点変換ブロック３０は、視点変換処理を広角映像４に施すことで、仮想視点Ｐｖから視た図１５〜１７の如き広角映像２０４（以下、特に変換前と区別する場合には、「変換広角映像２０４ａ」ともいう）を生成する。
The
第二実施形態の領域選定ブロック４０は、フロントバンパー２０１ｂが含まれない領域を、図１５〜１７の如く切出領域Ａｃに選定する。ここで図１５は、将来の転舵角ψｔが軸線Ｌｔの左右いずれにも０度の場合、図１６は、将来の転舵角ψｔが軸線Ｌｔよりも左側に生じる場合、図１７は、将来の転舵角ψｔが軸線Ｌｔよりも右側に生じる場合を、それぞれ示している。これらの図示から明らかなように、中心線Ｃｃｈの設定については、第一実施形態と同様となっている。
The
尚、図１５〜１７では、実際には変換広角映像２０４ａに映っていない軌跡線Ｌｌを、二点鎖線により示している。また、図１５〜１７では、変換広角映像２０４ａに想定される仮想的な切出領域Ａｃについて、説明の理解が容易となるよう、実線により併せて示している。さらにまた、図１５〜１７では、外界２に存在して変換広角画像２０４ａに映る障害物８の一例も、実線により併せて示している。
15 to 17, the locus line Ll that is not actually shown in the converted wide-angle video image 204a is indicated by a two-dot chain line. 15 to 17, the virtual cutout area Ac assumed in the converted wide-angle video image 204a is also shown by a solid line so that the explanation can be easily understood. Furthermore, in FIGS. 15 to 17, an example of the
第二実施形態の表示位置制御ブロック５０は、図１８〜２０の如くフロントバンパー２０１ｂを示したインジケータ表示２０９を、領域選定ブロック４０により選定された切出領域Ａｃの表示映像２０６と位置合わせして、車載表示器７に表示させる。このとき特に第二実施形態では、表示映像２０６に映る外界２でのフロントバンパー２０１ｂの前後位置に対応するように、車載表示器７の画面７ｐにおいて表示映像２０６よりも下方には、所定の下方範囲Ｒｌが確保される。即ち、第二実施形態では、画面７ｐのうち表示映像２０６よりも下方の下方範囲Ｒｌを除く一部に、表示映像２０６が表示される。ここで、下方範囲Ｒｌの画素データとしては、インジケータ表示２０９の形成部分では図形画像の画素データが割り当てられる一方、インジケータ表示２０９の非形成部分では所定の補完データが割り当てられる。
The display
さらに、第二実施形態の表示位置制御ブロック５０は、下方範囲Ｒｌのうちインジケータ表示２０９を形成する表示形成位置を、操舵状態関連情報Ｉｓに応じて可変制御する。ここでインジケータ表示２０９は、フロントバンパー２０１ｂを模した図形画像となっていることから、当該バンパー２０１ｂに対応する下方範囲Ｒｌ内に収まった状態で、表示映像２０６と同時に表示される。また、図１８は、将来の転舵角ψｔが軸線Ｌｔの左右いずれにも０度の場合、図１９は、将来の転舵角ψｔが軸線Ｌｔよりも左側に生じる場合、図２０は、将来の転舵角ψｔが軸線Ｌｔよりも右側に生じる場合を、それぞれ示している。これらの図示から明らかなように、中心線Ｃｉｈの設定については、第一実施形態と同様となっている。
Further, the display
尚、図１８〜２０では、表示映像２０６に想定される仮想的な下方範囲Ａｌ及び切出領域Ａｃについて、説明の理解が容易となるよう、実線により併せて示している。また、図１８〜２０では、外界２に存在して表示映像２０６に映る障害物８の一例も、実線により併せて示している。
18 to 20, the hypothetical lower range Al and the cutout region Ac assumed in the
このような第二実施形態の表示制御フローでは、第一実施形態のＳ１０２〜Ｓ１０４に代えて、図２１に示すＳ２０２〜Ｓ２０４が実行される。 In such a display control flow of the second embodiment, S202 to S204 shown in FIG. 21 are executed instead of S102 to S104 of the first embodiment.
Ｓ２０２では、広角カメラ３により撮影の広角映像２０４を、Ｓ１０１にて取得の操舵状態関連情報Ｉｓに応じて、視点変換ブロック３０により視点変換することで、変換広角映像２０４ａを生成する。
In S202, the wide-
続くＳ２０３では、変換広角映像４ａのうち表示映像２０６として切り出す切出領域Ａｃを、Ｓ１０１にて取得の操舵状態関連情報Ｉｓに応じて、領域選定ブロック４０により可変選定する。このとき切出領域Ａｃとしては、Ｓ１０１にて予測された将来の転舵角ψｔ及び将来の軌跡線Ｌｌに合わせて、フロントバンパー２０１ｂを含まない領域を選定する。
In subsequent S203, the cutout area Ac cut out as the
さらにＳ２０４では、Ｓ２０３にて切り出された切出領域Ａｃの表示映像２０６に対して、フロントバンパー２０１ｂを示したインジケータ表示２０９を、表示位置制御ブロック５０により位置合わせして車載表示器７に表示させる。このときには、車載表示器７において表示映像２０６よりも下方の下方範囲Ｒｌを、表示映像２０６に映った外界２でのフロントバンパー２０１ｂの前後位置に、対応させる。またこのときには、かかる下方範囲Ｒｌにて形成するインジケータ表示２０９の位置を、Ｓ１０１にて取得の操舵状態関連情報Ｉｓに応じて可変制御する。ここで特に第二実施形態では、インジケータ表示２０９としてフロントバンパー２０１ｂを模した図形画像の位置を、Ｓ１０１にて予測された将来の転舵角ψｔに合わせて制御する。
Further, in S204, the
以上説明した第二実施形態によると、広角映像２０４のうち車載表示器７に表示させる表示映像２０６として切り出される切出領域Ａｃは、自車両２０１における操舵状態関連情報Ｉｓに応じて可変選定される。このとき車載表示器７では、自車両２０１のうち進行方向の「前端部」であるフロントバンパー２０１ｂを示したインジケータ表示２０９についても、その位置が操舵状態関連情報Ｉｓに応じて可変制御されることで、切出領域Ａｃの表示映像２０６に位置合わせして表示される。これにより乗員は、表示映像２０６に映り込んだ障害物８とインジケータ表示２０９との位置関係から、当該障害物８とフロントバンパー２０１ｂとの衝突可能性を把握可能となる。
According to the second embodiment described above, the cut-out area Ac cut out as the
また、第二実施形態によると、広角映像２０４から表示映像２０６を切り出す切出領域Ａｃの選定も、インジケータ表示２０９の位置制御も、操舵状態関連情報Ｉｓとして現在の操舵角ψｓから予測される将来の転舵角ψｔに、合わせたものとなる。故に、第一実施形態と同様の原理により乗員は、表示映像２０６に映り込んだ障害物８とインジケータ表示２０９との位置関係から、自車両２０１の転舵先に存在する障害物８との衝突可能性を把握して、衝突の回避運転へと繋げることが可能となる。
In addition, according to the second embodiment, both the selection of the cutout area Ac for cutting out the
さらに第二実施形態の車載表示器７によると、表示映像２０６に映った外界２でのフロントバンパー２０１ｂの前後位置と対応した範囲Ｒｌにおいて、インジケータ表示２０９は、表示映像２０６よりも下方に形成される。これによれば、外界２における障害物８とフロントバンパー２０１ｂとの前後位置関係を、車載表示器７における障害物８とインジケータ表示２０９との上下位置関係により、正確に示し得る。故に乗員は、障害物８とフロントバンパー２０１ｂとの衝突可能性を適確に把握可能となる。
Further, according to the vehicle-mounted
またさらに第二実施形態のように、フロントバンパー２０１ｂを模した図形画像がインジケータ表示２０９として表示映像２０６よりも下方に形成されることで、乗員は、障害物８と当該バンパー２０１ｂとの衝突可能性を直感的に且つ適確に把握可能となる。
Further, as in the second embodiment, a graphic image imitating the
（他の実施形態）
以上、本発明の複数の実施形態について説明したが、本発明は、それらの実施形態に限定して解釈されるものではなく、本発明の要旨を逸脱しない範囲内において種々の実施形態及び組み合わせに適用することができる。
(Other embodiments)
Although a plurality of embodiments of the present invention have been described above, the present invention is not construed as being limited to these embodiments, and various embodiments and combinations can be made without departing from the scope of the present invention. Can be applied.
第一実施形態に関する変形例１では、図２２に示すように、フロントバンパー１ｂは映らない表示映像６の下部６ｌのうち、フロントスポイラー１ｓの隠れ領域Ａｓに、当該スポイラー１ｓを示すインジケータ表示９を重畳させてもよい。また、第一実施形態に関する変形例２では、図２３に示すように第二実施形態に準じて、車載表示器７の表示映像６よりも下方のうち、表示映像６に映った外界２でのフロントスポイラー１ｓの前後位置と対応した範囲Ｒｌに、当該スポイラー１ｓを示すインジケータ表示９を形成してもよい。さらにまた、第二実施形態に関する変形例３では、図２４に示すように第一実施形態に準じて、表示映像２０６の下部２０６ｌのうち、表示映像２０６に映った外界２でのフロントバンパー２０１ｂの前後位置と対応した領域Ａｂに、当該バンパー２０１ｂを示すインジケータ表示２０９を重畳させてもよい。
In the first modification related to the first embodiment, as shown in FIG. 22, the
第二実施形態に関する変形例４では、図２５に示すように、車載表示器７の表示映像２０６よりも下方の下方範囲Ｒｌに、例えばＬＥＤ等の光源２０９ｌを複数並べて、それら光源２０９ｌの協働により、インジケータ表示２０９を実現してもよい。この変形例４の場合、画面７ｐの全域に表示映像２０６が表示され、当該映像２０６に映った外界２でのフロントバンパー２０１ｂの前後位置と対応した下方範囲Ｒｌに、複数光源２０９ｌが配置される。それと共に、複数光源２０９ｌのうち点灯対象を、将来の転舵角ψｔに合わせて切り替えることで、第二実施形態に準じた作用効果の発揮が可能となる。尚、図２５では、点灯対象の光源２０９ｌを白抜きの矩形図形で示す一方、消灯対象の光源２０９ｌを塗潰しの矩形図形で示している。
In
第一及び第二実施形態に関する変形例５では、切出領域Ａｃを選定してから、切出領域Ａｃの表示映像６，２０６を視点変換させてもよい。また、第一及び第二実施形態に関する変形例６では、「前端部」としてのフロントスポイラー１ｓ又はフロントバンパー２０１ｂを示すことが乗員により判別可能な限りにおいて、例えば「前端部」としての要素１ｓ，２０１ｂを模してはいない図形画像等から、インジケータ表示９，２０９を構成してもよい。
In the modified example 5 regarding the first and second embodiments, the cut-out area Ac may be selected, and then the
第二実施形態に関する変形例７では、視点変換していない広角映像４に対して、切出領域Ａｃを設定してもよい。この変形例７の場合、視点変換されていない広角映像４から切り出された表示映像２０６よりも下方に形成されるインジケータ表示２０９の形状としては、当該表示映像２０６に合わせて湾曲する形状を採用することが好ましい。
In the modified example 7 regarding the second embodiment, the cutout area Ac may be set for the wide-
第一及び第二実施形態に関する変形例８では、図２６（同図は第一実施形態の変形例８）に示すように、操舵状態関連情報Ｉｓとして取得した将来の軌跡線Ｌｌを、表示映像６，２０６に合成表示させてもよい。また、第一及び第二実施形態に関する変形例９では、操舵状態関連情報Ｉｓとして将来の軌跡線Ｌｌを予測算出しないで、将来の転舵角ψｔのみに合わせて切出領域Ａｃを選定してもよい。さらにまた、第一及び第二実施形態に関する変形例１０では、操舵状態関連情報Ｉｓとして現在の操舵角ψｓのみを取得し、切出領域Ａｃの選定及びインジケータ表示２０９の位置制御を当該現在の操舵角ψｓに応じて実行してもよい。
In the
１，２０１ 自車両、１ｂ，２０１ｂ フロントバンパー、１ｓ フロントスポイラー、２ 外界、３ 広角カメラ、４，２０４ 広角映像、４ａ，２０４ａ 変換広角映像、６，２０６ 表示映像、６ｌ 下部、７ 車載表示器、８ 障害物、９，２０９ インジケータ表示、１０ 車両用表示制御装置、２０ 情報取得ブロック、３０ 視点変換ブロック、４０ 領域選定ブロック、５０ 表示位置制御ブロック、Ａｃ 切出領域、Ａｓ 隠れ領域、ＢＳ 死角、Ｉｓ 操舵状態関連情報、Ｒｌ 下方範囲、ψｓ 操舵角、ψｔ 転舵角 1,201 Self-vehicle, 1b, 201b Front bumper, 1s Front spoiler, 2 Outside world, 3 Wide-angle camera, 4,204 Wide-angle video, 4a, 204a Converted wide-angle video, 6,206 Display video, 6l Lower part, 7 In-vehicle display, 8 Fault Object, 9, 209 Indicator display, 10 Vehicle display control device, 20 Information acquisition block, 30 View point conversion block, 40 Area selection block, 50 Display position control block, Ac cutting area, As hidden area, BS blind spot, Is steering State-related information, Rl lower range, ψs steering angle, ψt turning angle
Claims (3)
前記自車両において操舵状態に関連する情報（Ｉｓ）を取得する情報取得手段（２０）と、
前記広角映像のうち前記表示映像として切り出す切出領域（Ａｃ）を、前記情報取得手段により取得された前記操舵状態の関連情報に応じて、可変選定する領域選定手段（４０）と、
前記自車両のうち前記進行方向の前端部（１ｓ，２０１ｂ）を示したインジケータ表示（９，２０９）を、前記領域選定手段により選定された前記切出領域の前記表示映像と位置合わせして、前記車載表示器に表示させる表示位置制御手段（５０）とを備え、
前記車載表示器における前記インジケータ表示の位置を、前記情報取得手段により取得された前記操舵状態の関連情報に応じて、可変制御する前記表示位置制御手段は、前記車載表示器における前記表示映像よりも下方のうち、前記表示映像に映った前記外界における前記前端部の位置と対応した範囲（Ｒｌ）に、前記インジケータ表示を形成することを特徴とする車両用表示制御装置。 A display image (6,206) cut out from a wide-angle image (4,4a, 204,204a) obtained by photographing the outside world (2) in the traveling direction in the own vehicle (1,201) with the wide-angle camera (3) A vehicle display control device (10) to be displayed in (7),
Information acquisition means (20) for acquiring information (Is) related to the steering state in the host vehicle;
An area selection means (40) for variably selecting a cut-out area (Ac) to be cut out as the display image from the wide-angle video according to the related information of the steering state acquired by the information acquisition means;
The indicator display (9, 209) showing the front end portion (1s, 201b) in the traveling direction of the host vehicle is aligned with the display image of the cut-out area selected by the area selecting means, Display position control means (50) for displaying on the in-vehicle display,
The position of the indicator display before SL-vehicle display device in accordance with the relevant information of the steering state acquired by the information acquisition means, the display position control means for variably controlling, from the display image in the vehicle display device The indicator display is formed in a range (Rl) corresponding to the position of the front end portion in the outside world reflected in the display image .
前記領域選定手段は、前記情報取得手段により予測された前記将来の転舵角に合わせて、前記切出領域を選定し、
前記表示位置制御手段は、前記領域選定手段により予測された前記将来の転舵角に合わせて、前記インジケータ表示の位置を制御することを特徴とする請求項１に記載の車両用表示制御装置。 The information acquisition means predicts a future steering angle (ψt) from the current steering angle (ψs) in the host vehicle as related information of the steering state,
The area selection means selects the cut area according to the future turning angle predicted by the information acquisition means,
The vehicle display control apparatus according to claim 1, wherein the display position control unit controls the position of the indicator display in accordance with the future turning angle predicted by the region selection unit.
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2014118740A JP6172059B2 (en) | 2014-06-09 | 2014-06-09 | Display control device for vehicle |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2014118740A JP6172059B2 (en) | 2014-06-09 | 2014-06-09 | Display control device for vehicle |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2015231760A JP2015231760A (en) | 2015-12-24 |
| JP6172059B2 true JP6172059B2 (en) | 2017-08-02 |
Family
ID=54933557
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2014118740A Active JP6172059B2 (en) | 2014-06-09 | 2014-06-09 | Display control device for vehicle |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP6172059B2 (en) |
Families Citing this family (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP6601422B2 (en) * | 2017-01-11 | 2019-11-06 | トヨタ自動車株式会社 | Image display device |
Family Cites Families (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP4561512B2 (en) * | 2005-07-22 | 2010-10-13 | アイシン・エィ・ダブリュ株式会社 | Parking support method and parking support device |
| JP4927514B2 (en) * | 2006-12-12 | 2012-05-09 | クラリオン株式会社 | Driving assistance device |
-
2014
- 2014-06-09 JP JP2014118740A patent/JP6172059B2/en active Active
Also Published As
| Publication number | Publication date |
|---|---|
| JP2015231760A (en) | 2015-12-24 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CA3069114C (en) | Parking assistance method and parking assistance device | |
| JP6806156B2 (en) | Peripheral monitoring device | |
| US9479740B2 (en) | Image generating apparatus | |
| JP4883977B2 (en) | Image display device for vehicle | |
| JP6254554B2 (en) | Information presentation system | |
| JP5454934B2 (en) | Driving assistance device | |
| WO2018012299A1 (en) | Image generation device, image generation method, and program | |
| US10477102B2 (en) | Method and device for determining concealed regions in the vehicle environment of a vehicle | |
| US11087438B2 (en) | Merging of partial images to form an image of surroundings of a mode of transport | |
| JP2010183170A (en) | Display apparatus for vehicle | |
| JP5516998B2 (en) | Image generation device | |
| US20150296140A1 (en) | Panoramic view blind spot eliminator system and method | |
| WO2017057006A1 (en) | Periphery monitoring device | |
| JP6998360B2 (en) | Vehicle display device and parking support system | |
| JP6876236B2 (en) | Display control device | |
| JP2009171129A (en) | Parking support device for vehicle and image display method | |
| JP2011155651A (en) | Apparatus and method for displaying vehicle perimeter image | |
| JP6720729B2 (en) | Display controller | |
| JP6589991B2 (en) | Human interface | |
| JP2016213708A (en) | Vehicle display device | |
| JP2023165721A (en) | display control device | |
| JP6172059B2 (en) | Display control device for vehicle | |
| JP2013211035A (en) | Vehicle periphery display device | |
| WO2022250117A1 (en) | Vehicle display system, vehicle display method, and vehicle display program | |
| JP7342926B2 (en) | Display control device and display control program |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20160725 |
|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20170405 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20170411 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20170516 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20170606 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20170619 |
|
| R151 | Written notification of patent or utility model registration |
Ref document number: 6172059 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |