JP2017187955A - Line of sight guiding device - Google Patents
Line of sight guiding device Download PDFInfo
- Publication number
- JP2017187955A JP2017187955A JP2016076824A JP2016076824A JP2017187955A JP 2017187955 A JP2017187955 A JP 2017187955A JP 2016076824 A JP2016076824 A JP 2016076824A JP 2016076824 A JP2016076824 A JP 2016076824A JP 2017187955 A JP2017187955 A JP 2017187955A
- Authority
- JP
- Japan
- Prior art keywords
- line
- target
- visual stimulus
- sight
- visual
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000001514 detection method Methods 0.000 claims abstract description 22
- 230000000007 visual effect Effects 0.000 claims description 263
- 238000004364 calculation method Methods 0.000 claims description 7
- 230000000694 effects Effects 0.000 abstract description 22
- 238000000034 method Methods 0.000 description 15
- 239000000470 constituent Substances 0.000 description 9
- 230000006870 function Effects 0.000 description 9
- 230000001965 increasing effect Effects 0.000 description 8
- 230000008569 process Effects 0.000 description 6
- 238000013459 approach Methods 0.000 description 3
- 238000010586 diagram Methods 0.000 description 3
- 230000000052 comparative effect Effects 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 238000012545 processing Methods 0.000 description 2
- 210000001747 pupil Anatomy 0.000 description 2
- 238000012887 quadratic function Methods 0.000 description 2
- 239000004065 semiconductor Substances 0.000 description 2
- 230000004397 blinking Effects 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 230000003247 decreasing effect Effects 0.000 description 1
- 230000002708 enhancing effect Effects 0.000 description 1
- 230000001939 inductive effect Effects 0.000 description 1
- 230000010365 information processing Effects 0.000 description 1
- 230000001537 neural effect Effects 0.000 description 1
- 238000003909 pattern recognition Methods 0.000 description 1
- 230000000638 stimulation Effects 0.000 description 1
- 238000012360 testing method Methods 0.000 description 1
- 239000010409 thin film Substances 0.000 description 1
- 230000009466 transformation Effects 0.000 description 1
Images
Landscapes
- Fittings On The Vehicle Exterior For Carrying Loads, And Devices For Holding Or Mounting Articles (AREA)
- Control Of Driving Devices And Active Controlling Of Vehicle (AREA)
- Instrument Panels (AREA)
- User Interface Of Digital Computer (AREA)
- Traffic Control Systems (AREA)
Abstract
Description
本発明は視線誘導装置に関する。 The present invention relates to a line-of-sight guidance device.
車外に危険な物標が存在する場合、ヘッドアップディスプレイを用い、ドライバの視点から見て物標が存在する方向に視覚刺激を表示し、ドライバの視線をその物標の方向に誘導する視線誘導装置が知られている。そのような視線誘導装置を開示する先行技術文献として、特許文献1がある。 When there is a dangerous target outside the vehicle, a head-up display is used to display a visual stimulus in the direction in which the target is present from the driver's viewpoint and guide the driver's line of sight in the direction of the target The device is known. Patent Document 1 is a prior art document disclosing such a line-of-sight guidance device.
ドライバの視点から物標に向う方向と、ドライバの視線方向とが成す角度が大きい場合、物標の方向に視覚刺激を表示しても、ドライバの視線を物標の方向に誘導できないことがある。本発明は、こうした問題にかんがみてなされたものであり、ドライバの視線を物標の方向に誘導する効果が高い視線誘導装置を提供することを目的としている。 If the angle between the direction from the driver's viewpoint to the target and the driver's line of sight is large, the driver's line of sight may not be guided in the target direction even if a visual stimulus is displayed in the target direction. . The present invention has been made in view of these problems, and an object of the present invention is to provide a gaze guidance device that is highly effective in guiding the gaze of a driver in the direction of a target.
本発明の第1の視線誘導装置(1)は、ドライバ(35)の視線を誘導する視線誘導装置である。本発明の第1の視線誘導装置は、自車両前方の画像(27)を取得する画像取得ユニット(7)と、画像取得ユニットが取得した画像において、認識対象として予め設定された物標(31)を認識する物標認識ユニット(9)と、ドライバの視線方向(33)を検出する視線検出ユニット(11)と、物標認識ユニットが物標を認識したとき、ドライバの視点(37)から見て、自車両のフロントガラス(39)と重畳する位置に視覚刺激(51)を表示する表示ユニット(13)とを備える。 The first line-of-sight guidance device (1) of the present invention is a line-of-sight guidance device for guiding the line of sight of a driver (35). The first gaze guidance device of the present invention includes an image acquisition unit (7) that acquires an image (27) in front of the host vehicle, and a target (31 that is set in advance as a recognition target in the image acquired by the image acquisition unit. ), A gaze detection unit (11) for detecting the driver's gaze direction (33), and when the target recognition unit recognizes the target, from the driver's viewpoint (37). The display unit (13) displays the visual stimulus (51) at a position overlapping the windshield (39) of the host vehicle.
本発明の第1の視線誘導装置において、表示ユニットは、ドライバの視点から視覚刺激に向う視覚刺激方向(43)と、視線検出ユニットで検出した視線方向とが成す角度が予め設定された値以下となる初期位置(P0)に視覚刺激を表示し、その後、ドライバの視点から見て物標に近づく方向(45)に、視覚刺激の位置を移動させる。 In the first line-of-sight guidance device of the present invention, the display unit has an angle formed by the visual stimulus direction (43) directed from the driver's viewpoint toward the visual stimulus and the line-of-sight direction detected by the line-of-sight detection unit equal to or less than a preset value. The visual stimulus is displayed at the initial position (P 0 ), and then the position of the visual stimulus is moved in a direction (45) approaching the target as seen from the driver's viewpoint.
本発明の第1の視線誘導装置は、ドライバの視線を物標の方向に誘導する効果が高い。特に、当初、ドライバの視点から物標に向う方向と、ドライバの視線方向とが成す角度が大きい場合でも、ドライバの視線を物標の方向に誘導する効果が高い。 The first line-of-sight guidance device of the present invention is highly effective in guiding the driver's line of sight toward the target. In particular, even when the angle between the direction from the driver's viewpoint toward the target and the driver's line-of-sight direction is large, the effect of guiding the driver's line of sight toward the target is high.
本発明の第2の視線誘導装置(1)は、ドライバ(35)の視線を誘導する視線誘導装置である。本発明の第2の視線誘導装置は、自車両前方の画像(27)を取得する画像取得ユニット(7)と、画像取得ユニットが取得した画像において、認識対象として予め設定された物標(31)を認識する物標認識ユニット(9)と、ドライバの視線方向(33)を検出する視線検出ユニット(11)と、物標認識ユニットが物標を認識したとき、ドライバの視点(37)から見て、自車両のフロントガラス(39)と重畳する位置に視覚刺激(51)を表示する表示ユニット(13)とを備える。 The second line-of-sight guidance device (1) of the present invention is a line-of-sight guidance device for guiding the line of sight of the driver (35). The second gaze guidance device of the present invention includes an image acquisition unit (7) that acquires an image (27) in front of the host vehicle, and a target (31 that is set in advance as a recognition target in the image acquired by the image acquisition unit. ), A gaze detection unit (11) for detecting the driver's gaze direction (33), and when the target recognition unit recognizes the target, from the driver's viewpoint (37). The display unit (13) displays the visual stimulus (51) at a position overlapping the windshield (39) of the host vehicle.
本発明の第2の視線誘導装置において、表示ユニットは、ドライバの視点から視覚刺激に向う視覚刺激方向(43)と、視線検出ユニットで検出した視線方向とが成す角度が予め設定された値以下となる初期位置(P0)に視覚刺激を表示し、その後、ドライバの視点から見て初期位置よりも物標に近い位置に、視覚刺激を追加して表示する。 In the second line-of-sight guidance device of the present invention, the display unit has an angle formed by the visual stimulus direction (43) from the driver's viewpoint toward the visual stimulus and the line-of-sight direction detected by the line-of-sight detection unit equal to or less than a preset value. The visual stimulus is displayed at the initial position (P 0 ), and then the visual stimulus is added and displayed at a position closer to the target than the initial position as seen from the driver's viewpoint.
本発明の第2の視線誘導装置は、ドライバの視線を物標の方向に誘導する効果が高い。特に、当初、ドライバの視点から物標に向う方向と、ドライバの視線方向とが成す角度が大きい場合でも、ドライバの視線を物標の方向に誘導する効果が高い。 The second gaze guidance device of the present invention is highly effective in guiding the driver's gaze in the direction of the target. In particular, even when the angle between the direction from the driver's viewpoint toward the target and the driver's line-of-sight direction is large, the effect of guiding the driver's line of sight toward the target is high.
なお、この欄及び特許請求の範囲に記載した括弧内の符号は、一つの態様として後述する実施形態に記載の具体的手段との対応関係を示すものであって、本発明の技術的範囲を限定するものではない。 In addition, the code | symbol in the parenthesis described in this column and a claim shows the correspondence with the specific means as described in embodiment mentioned later as one aspect, Comprising: The technical scope of this invention is shown. It is not limited.
本開示の実施形態を図面に基づき説明する。
<第1実施形態>
1.視線誘導装置1の構成
視線誘導装置1の構成を図1、図2に基づき説明する。視線誘導装置1は車両に搭載される車載装置である。視線誘導装置1を搭載する車両を以下では自車両とする。
An embodiment of the present disclosure will be described with reference to the drawings.
<First Embodiment>
1. Configuration of the line-of-sight guidance device 1 The configuration of the line-of-sight guidance device 1 will be described with reference to FIGS. 1 and 2. The line-of-sight guidance device 1 is a vehicle-mounted device mounted on a vehicle. Hereinafter, a vehicle on which the line-of-sight guidance device 1 is mounted is referred to as a host vehicle.
視線誘導装置1は、CPU3と、RAM、ROM、フラッシュメモリ等の半導体メモリ(以下、メモリ5とする)と、を有する周知のマイクロコンピュータを中心に構成される。視線誘導装置1の各種機能は、CPU3が非遷移的実体的記録媒体に格納されたプログラムを実行することにより実現される。この例では、メモリ5が、プログラムを格納した非遷移的実体的記録媒体に該当する。また、このプログラムの実行により、プログラムに対応する方法が実行される。なお、視線誘導装置1を構成するマイクロコンピュータの数は1つでも複数でもよい。
The line-of-sight guidance device 1 is configured around a known microcomputer having a
視線誘導装置1は、CPU3がプログラムを実行することで実現される機能の構成として、図2に示すように、画像取得ユニット7と、物標認識ユニット9と、視線検出ユニット11と、表示ユニット13と、算出ユニット15と、を備える。視線誘導装置1を構成するこれらの要素を実現する手法はソフトウェアに限るものではなく、その一部又は全部の要素を、論理回路やアナログ回路等を組み合わせたハードウェアを用いて実現してもよい。
As shown in FIG. 2, the line-of-sight guidance device 1 has a function realized by the
図1に示すように、自車両は、視線誘導装置1に加えて、走行環境用カメラ17、視線検出用カメラ19、測距センサ21、及びヘッドアップディスプレイ25を備える。走行環境用カメラ17は、自車両の前方の風景を撮影し、画像を作成する。この画像を以下では前方画像とする。前方画像には、自車両の前方の風景が表されている。走行環境用カメラ17は、視線誘導装置1により制御される。走行環境用カメラ17は、前方画像を視線誘導装置1に送る。 As shown in FIG. 1, in addition to the line-of-sight guidance device 1, the host vehicle includes a traveling environment camera 17, a line-of-sight detection camera 19, a distance measuring sensor 21, and a head-up display 25. The traveling environment camera 17 captures a landscape in front of the host vehicle and creates an image. This image is hereinafter referred to as a front image. The front image shows the scenery in front of the host vehicle. The traveling environment camera 17 is controlled by the line-of-sight guidance device 1. The traveling environment camera 17 sends a front image to the line-of-sight guidance device 1.
視線検出用カメラ19は、自車両のルームミラー付近に設けられ、自車両の車室内を撮影し、画像を作成する。この画像を以下では車室内画像とする。車室内画像には、ドライバの顔が含まれる。視線検出用カメラ19は、視線誘導装置1により制御される。視線検出用カメラ19は、車室内画像を視線誘導装置1に送る。 The line-of-sight detection camera 19 is provided in the vicinity of the room mirror of the host vehicle, and images the interior of the host vehicle to create an image. This image is hereinafter referred to as a vehicle interior image. The vehicle interior image includes the driver's face. The line-of-sight detection camera 19 is controlled by the line-of-sight guidance device 1. The line-of-sight detection camera 19 sends the vehicle interior image to the line-of-sight guidance device 1.
測距センサ21は、自車両の周囲に存在する物標を検出する。また、測距センサ21は、検出した物標の方位、自車両から物標までの距離、及び自車両を基準とする物標の相対速度を算出する。測距センサ21は、視線誘導装置1により制御される。測距センサ21は、物標の検出結果と、方位、距離、及び相対速度の算出結果とを視線誘導装置1に送る。測距センサ21としては、例えば、ミリ波レーダ、ライダー等が挙げられる。 The distance measuring sensor 21 detects a target existing around the host vehicle. The distance measuring sensor 21 calculates the orientation of the detected target, the distance from the host vehicle to the target, and the relative speed of the target with respect to the host vehicle. The distance measuring sensor 21 is controlled by the line-of-sight guidance device 1. The distance measuring sensor 21 sends the detection result of the target and the calculation result of the azimuth, distance, and relative speed to the line-of-sight guidance device 1. Examples of the distance measuring sensor 21 include a millimeter wave radar and a rider.
ヘッドアップディスプレイ25は、画像を表示するための表示光を、自車両のフロントガラスの下方からフロントガラスに向けて照射する。表示光はフロントガラスで反射し、ドライバの目に入射する。その結果、ドライバは、表示光による虚像を自車両前方の実際の風景に重畳して視認することができる。ヘッドアップディスプレイ25は、視線誘導装置1により制御される。 The head-up display 25 irradiates display light for displaying an image from below the windshield of the host vehicle toward the windshield. The display light is reflected by the windshield and enters the driver's eyes. As a result, the driver can visually recognize the virtual image generated by the display light superimposed on the actual scenery in front of the host vehicle. The head-up display 25 is controlled by the line-of-sight guidance device 1.
2.視線誘導装置1が実行する処理
視線誘導装置1が所定時間ごとに繰り返し実行する処理を図3〜図6に基づき説明する。図3のステップ1では、画像取得ユニット7が、走行環境用カメラ17を用いて、前方画像を取得する。図4に、前方画像27の例を示す。前方画像27には、自車両の前方に存在する道路29等、自車両の前方の風景が表されている。
2. Processing Performed by the Line-of-Sight Guidance Device 1 The processing performed repeatedly by the line-of-sight guidance device 1 every predetermined time will be described with reference to FIGS. In step 1 of FIG. 3, the image acquisition unit 7 acquires a front image using the traveling environment camera 17. FIG. 4 shows an example of the
ステップ2では、物標認識ユニット9が、前記ステップ1で取得した前方画像において、認識対象として予め設定された物標を認識する処理を実行する。認識対象として予め設定された物標としては、例えば、歩行者、自転車、他の車両、二輪車、固定物、信号機、交通標識等が挙げられる。物標を認識する処理としては、周知のパターン認識の処理が挙げられる。図4に、認識した物標31の例を示す。
In step 2, the
ステップ3では、前記ステップ2で物標を認識できたか否かを物標認識ユニット9が判断する。物標を認識できた場合はステップ4に進み、物標を認識できなかった場合は本処理を終了する。
In
ステップ4では、視線検出ユニット11が、視線検出用カメラ19を用いて車室内画像を取得する。
ステップ5では、視線検出ユニット11が、前記ステップ4で取得した車室内画像において、ドライバの目と、その目における瞳孔とをそれぞれ認識する。次に、視線検出ユニット11は、目の全体に対する瞳孔の相対的な位置から、ドライバの視線方向を検出する。
In step 4, the line-of-sight detection unit 11 acquires a vehicle interior image using the line-of-sight detection camera 19.
In
図5に、検出した視線方向33の例を示す。視線方向33は、ドライバ35の視点37を通り、ドライバ35が見ている方向に平行な方向である。視線方向33は、後述する視覚刺激を未だ表示していない時点におけるドライバ35の視線方向である。視線方向33と自車両のフロントガラス39との交点を41とする。
FIG. 5 shows an example of the detected line-of-
ステップ6では、表示ユニット13が初期位置P0を設定する。初期位置P0とは、後述するステップ12で視覚刺激を表示するとき、視覚刺激を最初に表示する位置である。図5、図6に示すように、初期位置P0は、視点37から見て、視線方向33上にある位置である。また、図6に示すように、視点37から初期位置P0に向う視覚刺激方向43と、視線方向33とが成す角度をαとした場合、角度αは0度である。
In step 6, the display unit 13 sets the initial position P 0. The initial position P 0 is a position where the visual stimulus is first displayed when the visual stimulus is displayed in step 12 described later. As shown in FIGS. 5 and 6, the initial position P 0 is a position on the line-of-
ステップ7では、表示ユニット13が移動方向を設定する。移動方向とは、後述するステップ12で視覚刺激を表示するとき、視覚刺激の位置を移動する方向である。図5、図6に示すように、移動方向45は、視点37から見て、初期位置P0から、物標31に近づく方向である。
In step 7, the display unit 13 sets the moving direction. The moving direction is a direction in which the position of the visual stimulus is moved when the visual stimulus is displayed in step 12 described later. As shown in FIGS. 5 and 6, the moving
ステップ8では、表示ユニット13が移動速度を設定する。移動速度とは、後述するステップ12で視覚刺激を表示し、その位置を移動させるときにおける視覚刺激の移動速度である。 In step 8, the display unit 13 sets the moving speed. The moving speed is the moving speed of the visual stimulus when the visual stimulus is displayed and moved in step 12 described later.
表示ユニット13は移動速度を以下のように設定する。図5に示すように、視点37から物標31に向う方向を物標方向47とする。表示ユニット13は、物標方向47と視線方向33とが成す角度θiを算出する。
The display unit 13 sets the moving speed as follows. As shown in FIG. 5, a direction from the
表示ユニット13は、予め、角度θiを入力すると移動速度を出力するマップを備えている。このマップは、入力する角度θiが大きいほど、大きい移動速度を出力する。表示ユニット13は、このマップに角度θiを入力して得られた移動速度を設定する。 The display unit 13 includes a map that outputs a moving speed when the angle θ i is input in advance. This map outputs a larger moving speed as the input angle θ i is larger. The display unit 13 sets the moving speed obtained by inputting the angle θ i to this map.
ステップ9では、図4に示すように、表示ユニット13が、前方画像27のうち、後述するステップ12で視覚刺激を表示する範囲に対応する領域49を選択する。領域49は、交点41、及び物標31を含む領域である。そして、表示ユニット13は、領域49の視覚的顕著性を算出する。
In
視覚的顕著性とは、人間の注視の引きつけやすさを示す周知の指標である。視覚的顕著性の算出方法は近年広く研究され、様々な手法がある。例えば、「L.Itti, C.Koch, and E.Niebur. A model of saliency-based visual attention for rapid scene analysis. IEEE Transactions on Pattern Analysis and Machine Intelligence, Vol.20, No.11, pp. 1254-1259, 1998.」や、「J. Harel, C. Koch, and P. Perona, "Graph-based visual saliency," Advances in Neural Information Processing Systems, pp. 545-552, 2007. 」等に開示された手法がある。 Visual saliency is a well-known index that indicates how easily human attention is attracted. Visual saliency calculation methods have been widely studied in recent years, and there are various methods. For example, `` L. Itti, C. Koch, and E. Niebur. A model of saliency-based visual attention for rapid scene analysis.IEEE Transactions on Pattern Analysis and Machine Intelligence, Vol. 20, No. 11, pp. 1254- 1259, 1998. "and J. Harel, C. Koch, and P. Perona," Graph-based visual saliency, "Advances in Neural Information Processing Systems, pp. 545-552, 2007. There is a technique.
ステップ10では、算出ユニット15が、測距センサ21を用いて、自車両から物標31までの距離Rと、自車両を基準とする物標31の相対速度vとを取得する。次に、算出ユニット15は、距離Rを相対速度vで割ることで、物標31と自車両との衝突余裕時間を算出する。また、物標31が固定物である場合は、車速センサ23を用いて取得した自車両の速度を相対速度vとしてもよい。
In
ステップ11では、表示ユニット13が、後述するステップ12で表示する視覚刺激の視覚的顕著性を以下のようにして設定する。表示ユニット13は、予め、前記ステップ9で算出した領域49の視覚的顕著性と、前記ステップ10で算出した衝突余裕時間とを入力すると、視覚刺激の視覚的顕著性を出力するマップを備えている。
In step 11, the display unit 13 sets the visual saliency of the visual stimulus displayed in step 12 described later as follows. The display unit 13 includes a map that outputs the visual saliency of the visual stimulus when the visual saliency of the
このマップは、衝突余裕時間が同一の条件下では、領域49の視覚的顕著性が高いほど、視覚刺激の視覚的顕著性を高くする。また、上記のマップは、領域49の視覚的顕著性が同一の条件下では、衝突余裕時間が短いほど、視覚刺激の視覚的顕著性を高くする。また、上記のマップは、常に、領域49の視覚的顕著性よりも、視覚刺激の視覚的顕著性を高くする。また、上記のマップは、常に、領域49の輝度よりも、視覚刺激の輝度を高くする。
This map increases the visual saliency of the visual stimulus as the visual saliency of the
表示ユニット13は、上記のマップに、前記ステップ9で算出した領域49の視覚的顕著性と、前記ステップ10で算出した衝突余裕時間とを入力して得られた、視覚刺激の視覚的顕著性を設定する。
The display unit 13 receives the visual saliency of the visual stimulus obtained by inputting the visual saliency of the
ステップ12では、表示ユニット13が、ヘッドアップディスプレイ25を用いて視覚刺激を表示する。視覚刺激とは、視覚によりその周囲と区別できる表示物を意味する。視覚刺激は、例えば、その周囲より輝度が高い表示物であってもよいし、その周囲とは色が異なる表示物であってもよいし、輪郭線により囲まれた領域であってもよいし、それらの組み合わせであってもよい。また、視覚刺激は、一定の面積を有する図形であってもよいし、点であってもよいし、線分であってもよいし、それらの組み合わせであってもよい。 In step 12, the display unit 13 displays a visual stimulus using the head-up display 25. The visual stimulus means a display object that can be visually distinguished from its surroundings. The visual stimulus may be, for example, a display object with higher brightness than the surrounding area, a display object having a color different from the surrounding area, or an area surrounded by a contour line. Or a combination thereof. Further, the visual stimulus may be a graphic having a certain area, a point, a line segment, or a combination thereof.
表示ユニット13は、具体的には、以下のように視覚刺激を表示する。まず、図6に示すように、前記ステップ6で設定した初期位置P0に視覚刺激51を表示する。その後、前記ステップ7で設定した移動方向に、視覚刺激51の位置を移動させる。視覚刺激51は、初期位置P0から、位置P1、位置P2、及び位置P3を経て、位置P4に至る。位置P4は、視点37から見て、物標31と重複する位置である。視覚刺激51の位置は、視点37から見て、自車両のフロントガラス39と重畳する位置にある。表示ユニット13は、視覚刺激51が位置P4に到達してから所定時間が経過すると、視覚刺激51を消去する。
Specifically, the display unit 13 displays a visual stimulus as follows. First, as shown in FIG. 6, the
表示ユニット13は、初期位置P0から位置P4に至る経路の全てで視覚刺激51を表示してもよいし、その経路の一部で視覚刺激51を表示し、他の部分では表示しなくてもよい。例えば、表示ユニット13は、視覚刺激51が初期位置P0、位置P1、位置P2、位置P3、及び位置P4にあるときは視覚刺激51を表示し、その他の位置にあるときは視覚刺激51を表示しなくてもよい。
Display unit 13, to at any path from the initial position P 0 to the position P 4 may display a
表示ユニット13は、前記ステップ8で設定した移動速度で、視覚刺激51を初期位置P0から位置P4まで移動させる。その移動速度は、視点37から見て、視覚刺激51の位置によらず一定である。
The display unit 13 moves the
表示ユニット13は、視覚刺激51を表示するとき、その視覚的顕著性を、前記ステップ11で設定したものにする。視覚刺激51の視覚的顕著性は、領域49の視覚的顕著性よりも高い。また、視覚刺激51の輝度は、領域49の輝度よりも高い。
When displaying the
なお、領域49の視覚的顕著性は、視覚刺激51を表示する前の時点における同じ位置の視覚的顕著性に対応する。また、領域49の輝度は、視覚刺激51を表示する前の時点における同じ位置の輝度に対応する。
Note that the visual saliency of the
3.視線誘導装置1が奏する効果
(1A)視線誘導装置1は、視覚刺激51を表示することにより、ドライバ35の視線を物標31の方向に誘導することができる。特に、視線誘導装置1は、まず、視覚刺激51を初期位置P0に表示し、その後、物標31に近づく方向に視覚刺激51を移動させるので、ドライバ35の視線を物標31の方向に誘導する効果が一層高い。
3. Effects produced by the line-of-sight guidance device 1 (1A) The line-of-sight guidance device 1 can guide the line of sight of the
(1B)視覚刺激51の視覚的顕著性は、それが表示される前の時点における同じ位置の視覚的顕著性よりも高い。そのため、ドライバ35の視線を物標31の方向に誘導する効果が一層高い。
(1B) The visual saliency of the
(1C)視覚刺激51の輝度は、それが表示される前の時点における同じ位置の輝度よりも高い。そのため、ドライバ35の視線を物標31の方向に誘導する効果が一層高い。
(1D)初期位置P0は、視点37から見て、視線方向33上にある。そのため、ドライバ35の視線を物標31の方向に誘導する効果が一層高い。
(1C) The luminance of the
(1D) The initial position P 0 is on the line-of-
(1E)視線誘導装置1は、視点37から見て、視覚刺激51が一定の速度で物標31に近づくように、視覚刺激51の位置を移動させる。そのため、ドライバ35は、視覚刺激51を一層容易に視認することができる。その結果、ドライバ35の視線を物標31の方向に誘導する効果が一層高い。
(1E) The line-of-sight guidance device 1 moves the position of the
(1F)視線誘導装置1は、物標31と自車両との衝突余裕時間が短いほど、視覚刺激51の視覚的顕著性を高くする。そのため、衝突余裕時間が短く、ドライバ35にとって重要度が高い物標31に対し、ドライバ35の視線を一層確実に誘導することができる。
(1F) The line-of-sight guidance device 1 increases the visual saliency of the
(1G)視線誘導装置1は、角度θiが大きいほど、視覚刺激51の移動速度を大きくする。そのため、角度θiが大きい場合でも、視覚刺激51が位置P4に達するまでの時間を短縮することができる。その結果、ドライバ35の視線を迅速に物標31の方向に誘導することができる。
(1G) The line-of-sight guidance device 1 increases the moving speed of the
4.視線誘導装置1が奏する効果を確かめるための試験
視線誘導装置1を使用し、視覚刺激51を表示したとき、物標方向47に最も接近した、ドライバ35の視線方向を、最接近視線方向53とする。最接近視線方向53と、物標方向47とが成す角度をθfとする。最接近視線方向53及び角度をθfの例を図8に示す。角度θfが小さいほど、ドライバの視線を物標方向47に誘導する効果が高い。
4). Test for confirming the effect of the visual guidance device 1 When the
図7に示すように、角度θiの値が異なる4条件で視線誘導装置1を使用し、それぞれの条件において角度θfを測定した。その結果を図7において「P0→P4表示」として示す。 As shown in FIG. 7, the visual line guidance device 1 was used under four conditions with different values of the angle θ i , and the angle θ f was measured under each condition. The result is shown as “P 0 → P 4 display” in FIG.
また、比較例として、視覚刺激51を最初から最後まで位置P4に表示した場合においても、角度θfを測定した。その結果を図7において、「P4のみ表示」として示す。
また、別の比較例として、視覚刺激51を表示しない場合においても、角度θfを測定した。その結果を図7において「無表示」として示す。
As a comparative example, in the case of displaying the
As another comparative example, the angle θf was measured even when the
「P0→P4表示」の場合は、角度θfが顕著に小さくなった。すなわち、ドライバの視線を物標方向47に誘導する効果が高かった。それに対し、「P4のみ表示」、及び「無表示」の場合は、角度θfが大きかった。すなわち、ドライバの視線を物標方向47に誘導する効果が低かった。
<第2実施形態>
1.第1実施形態との相違点
第2実施形態は、基本的な構成は第1実施形態と同様であるため、共通する構成については説明を省略し、相違点を中心に説明する。なお、第1実施形態と同じ符号は、同一の構成を示すものであって、先行する説明を参照する。
In the case of “P 0 → P 4 display”, the angle θ f was remarkably reduced. That is, the effect of guiding the driver's line of sight in the
Second Embodiment
1. Differences from the First Embodiment Since the basic configuration of the second embodiment is the same as that of the first embodiment, description of the common configuration will be omitted, and differences will be mainly described. Note that the same reference numerals as those in the first embodiment indicate the same configuration, and the preceding description is referred to.
前述した第1実施形態では、初期位置P0は、視点37から見て、視線方向33上にある位置であった。これに対し、第2実施形態では、図9に示すように、初期位置P0は、視点37から見て、視線方向33上にはなく、視線方向33よりも物標31側に変位した位置にある。視線誘導装置1は、角度αについて予め設定された上限値を保持している。視線誘導装置1は、角度αが0度より大きく、且つ上限値以下となるように、初期位置P0の位置を設定する。
In the first embodiment described above, the initial position P 0 is a position on the line-of-
2.視線誘導装置1が奏する効果
以上詳述した第2実施形態によれば、前述した第1実施形態の効果(1A)〜(1C)、(1E)〜(1G)に加え、以下の効果が得られる。
2. Effects produced by the line-of-sight guidance device 1
According to the second embodiment described in detail above, in addition to the effects (1A) to (1C) and (1E) to (1G) of the first embodiment described above, the following effects are obtained.
(2A)本実施形態では、視点37から見て、初期位置P0が、視線方向33よりも物標31側に変位した位置にある。そのため、初期位置P0から位置P4までの距離が短くなる。その結果、視覚刺激51を初期位置P0から位置P4まで移動させるために要する時間を短縮することができる。
<第3実施形態>
1.第1実施形態との相違点
第3実施形態は、基本的な構成は第1実施形態と同様であるため、共通する構成については説明を省略し、相違点を中心に説明する。なお、第1実施形態と同じ符号は、同一の構成を示すものであって、先行する説明を参照する。
(2A) In the present embodiment, when viewed from the
<Third Embodiment>
1. Differences from the First Embodiment Since the basic configuration of the third embodiment is the same as that of the first embodiment, the description of the common configurations will be omitted, and differences will be mainly described. Note that the same reference numerals as those in the first embodiment indicate the same configuration, and the preceding description is referred to.
前記ステップ12において、表示ユニット13は、以下のように視覚刺激51を表示する。表示ユニット13は、まず、初期位置P0に視覚刺激51を表示する。初期位置P0の設定方法は前記第1実施形態と同様である。初期位置P0に視覚刺激51を表示し始めた時点をT0とする。初期位置P0における視覚刺激51の表示は、T0から、後述する表示終了時点Teまで継続する。
In step 12, the display unit 13 displays the
T0から100msec後の時点をT1とする。表示ユニット13は、T1において、位置P1に、視覚刺激51を追加して表示する。位置P1における視覚刺激51の表示は、T1から、表示終了時点Teまで継続する。位置P1は視点37から見て初期位置P0よりも物標31に近い位置に対応する。
A time point after 100 msec from T 0 is defined as T 1 . Display unit 13 is, in T 1, the position P 1, and displays the added
T1から100msec後の時点をT2とする。表示ユニット13は、T2において、位置P2に、視覚刺激51を追加して表示する。位置P2における視覚刺激51の表示は、T2から、表示終了時点Teまで継続する。位置P2は視点37から見て初期位置P0及び位置P1よりも物標31に近い位置に対応する。
The time after 100msec from T 1 to T 2. Display unit 13 is, at T 2, the position P 2, and displays the added
T2から100msec後の時点をT3とする。表示ユニット13は、T3において、位置P3に、視覚刺激51を追加して表示する。位置P3における視覚刺激51の表示は、T3から、表示終了時点Teまで継続する。位置P3は視点37から見て初期位置P0、位置P1、及び位置P2よりも物標31に近い位置に対応する。
The time after 100msec from T 2 to T 3. Display unit 13 is, at T 3, the position P 3, and displays the added
T3から100msec後の時点をT4とする。表示ユニット13は、T4において、位置P4に、視覚刺激51を追加して表示する。位置P4における視覚刺激51の表示は、T4から、表示終了時点Teまで継続する。位置P4は視点37から見て初期位置P0、位置P1、位置P2、及び位置P3よりも物標31に近い位置に対応する。
The time after 100msec and T 4 from T 3. Display unit 13 is, at T 4, the position P 4, and displays the added
T4から100msec経過した時点が、表示終了時点Teである。表示ユニット13は、表示終了時点Teにおいて、初期位置P0、位置P1、位置P2、位置P3、及び位置P4における視覚刺激51の表示を終了する。初期位置P0、位置P1、位置P2、位置P3、及び位置P4における視覚刺激51の表示タイミングを図10に示す。図10において輝度が高い時間帯は、視覚刺激51が表示されている時間帯である。
Time from T 4 has elapsed 100msec is a display end time T e. Display unit 13 is a display end time T e, the initial position P 0, the position P 1, the position P 2, to end the display of the
なお、本実施形態でも、初期位置P0、位置P1、位置P2、位置P3、及び位置P4は、図6に示すように、移動方向45に沿って配列されている。移動方向45は、視点37から見て、初期位置P0から、物標31に近づく方向である。また、初期位置P0、位置P1、位置P2、位置P3、及び位置P4における視覚刺激51の視覚的顕著性及び輝度は、前記第1実施形態と同様に設定される。
In this embodiment as well, the initial position P 0 , position P 1 , position P 2 , position P 3 , and position P 4 are arranged along the
2.視線誘導装置1が奏する効果
以上詳述した第3実施形態によれば、前述した第1実施形態の効果(1B)〜(1D)、(1F)、(1G)に加え、以下の効果が得られる。
2. Effects produced by the line-of-sight guidance device 1
According to the third embodiment described in detail above, the following effects are obtained in addition to the effects (1B) to (1D), (1F), and (1G) of the first embodiment described above.
(3A)視線誘導装置1は、視覚刺激51を表示することにより、ドライバ35の視線を物標31の方向に誘導することができる。特に、視線誘導装置1は、まず、視覚刺激51を初期位置P0に表示し、その後、位置P1、位置P2、位置P3、及び位置P4に順次追加して視覚刺激51を表示するので、ドライバ35の視線を物標31の方向に誘導する効果が一層高い。
<他の実施形態>
以上、本発明を実施するための形態について説明したが、本発明は上述の実施形態に限定されることなく、種々変形して実施することができる。
(3A) The line-of-sight guidance device 1 can guide the line of sight of the
<Other embodiments>
As mentioned above, although the form for implementing this invention was demonstrated, this invention is not limited to the above-mentioned embodiment, It can implement in various deformation | transformation.
(1)視線方向33を検出する方法は、公知の方法の中から適宜選択することができる。
(2)ヘッドアップディスプレイ25は、フロントガラス39ではなく、コンバイナに表示光を照射するものであってもよい。
(1) A method for detecting the line-of-
(2) The head-up display 25 may irradiate the combiner with display light instead of the
(3)視覚刺激51の移動速度は、初期位置P0から位置P4までの間で変化してもよい。また、視覚刺激51の視覚的顕著性は、初期位置P0から位置P4までの間で変化してもよい。また、視覚刺激51の輝度は、初期位置P0から位置P4までの間で変化してもよい。
(3) the moving speed of the
(4)視覚刺激51が移動する経路の形状は適宜設定できる。例えば、視覚刺激51が移動する経路の形状は、視点37から見て直線であってもよいし、曲線であってもよい。曲線としては、例えば、円弧状の曲線、ジグザグ形状の曲線等が挙げられる。
(4) The shape of the path along which the
(5)位置P4は、視点37から見て、物標31と重複する位置以外の位置であってもよい。例えば、位置P4は、視点37から見て、物標31よりも位置P0側の位置であってもよいし、その反対側の位置であってもよい。
(5) The position P 4 may be a position other than the position overlapping the
(6)視線誘導装置1は、視覚刺激51を、初期位置P0以外の位置に表示してから、初期位置P0に表示してもよい。
(7)視線誘導装置1は、単数の視覚刺激51を表示してもよいし、複数の視覚刺激51を表示してもよい。また、表示する視覚刺激51の数を表示の途中で増減してもよい。
(6) visual guidance device 1, the
(7) The line-of-sight guidance device 1 may display a single
(8)視線誘導装置1は、ヘッドアップディスプレイ25以外の表示装置を用いて視覚刺激51を表示してもよい。例えば、視線誘導装置1は、ヘッドマウントディスプレイ、フロントガラス39に貼り付けられた薄膜状のディスプレイ等を用いて視覚刺激51を表示してもよい。
(8) The line-of-sight guidance device 1 may display the
(9)第1、第2実施形態において、視覚刺激51の位置を移動させた後、それまで視覚刺激51を表示していた位置にも、視覚刺激を表示し続けてもよい。例えば、視覚刺激51を初期位置P0から位置P1に移動させた後、初期位置P0にも視覚刺激を表示してもよい。同様に、視覚刺激51を位置Piから位置Pi+1に移動させた後、初期位置P0〜位置Piにも視覚刺激を表示してもよい。ここで、iは1〜3のうちのいずれかの自然数である。
(9) In the first and second embodiments, after the position of the
(10)第3実施形態において、初期位置P0は、第2実施形態における初期位置P0であってもよい。
(11)第1、第2実施形態において、視覚刺激の視覚的顕著性を以下のように設定してもよい。設定する視覚的顕著性として、例えば、輝度が挙げられる。前記ステップ11において、第1実施形態と同様に、視覚的顕著性を設定する。ただし、ここで設定する視覚的顕著性は、視覚刺激が初期位置P0にあるときの視覚的顕著性である。
(10) In the third embodiment, the initial position P 0 may be an initial position P 0 in the second embodiment.
(11) In the first and second embodiments, the visual saliency of the visual stimulus may be set as follows. The visual saliency to be set includes, for example, luminance. In step 11, the visual saliency is set as in the first embodiment. However, the visual saliency set here is the visual saliency when the visual stimulus is at the initial position P 0 .
前記ステップ12において、表示ユニット13は、まず、初期位置P0に視覚刺激を表示する。このときの視覚刺激の視覚的顕著性は、前記ステップ11で設定したものである。次に、表示ユニット13は、前記ステップ7で設定した移動方向に、視覚刺激の位置を移動させる。このとき、表示ユニット13は、視覚刺激の位置が移動し、物標に近づくほど、視覚刺激の視覚的顕著性を徐々に高くする。すなわち、表示ユニット13は、視点37から見て、視覚刺激の位置と物標とが近いほど、視覚刺激の視覚的顕著性を高くする。また、換言すれば、視点37から見て、視覚刺激の位置が初期位置P0から遠いほど、視覚刺激の視覚的顕著性を高くする。視覚刺激の視覚的顕著性は、視覚刺激が位置P4に至ったとき、最高となる。
In step 12, the display unit 13 first displays a visual stimulus to the initial position P 0. The visual saliency of the visual stimulus at this time is set in step 11 above. Next, the display unit 13 moves the position of the visual stimulus in the movement direction set in step 7. At this time, the display unit 13 gradually increases the visual saliency of the visual stimulus as the position of the visual stimulus moves and approaches the target. That is, as viewed from the
視点37から見た視覚刺激の位置と、視覚的顕著性との関係は、例えば、図11に示すものとなる。図11における横軸は、視点37から見た、移動方向45における視覚刺激の位置であり、縦軸は視覚的顕著性である。図11におけるグラフの傾きが一定である場合、位置P4における視覚的顕著性は、θiが大きいほど高くなる。なお、視覚刺激の位置と、視覚的顕著性との関係は、図11に示すように、比例関係であってもよいし、他の関係であってもよい。他の関係としては、例えば、2次関数の関係、指数関数の関係等が挙げられる。
The relationship between the position of the visual stimulus viewed from the
上記のように視覚刺激の移動につれて視覚的顕著性を変化させると、ドライバ35の視線を物標31の方向に誘導する効果が一層高い。
(12)第3実施形態において、視覚刺激の視覚的顕著性を以下のように設定してもよい。設定する視覚的顕著性として、例えば、輝度が挙げられる。前記ステップ11において、第1実施形態と同様に、視覚的顕著性を設定する。ただし、ここで設定する視覚的顕著性は、初期位置P0に表示する視覚刺激の視覚的顕著性である。
When the visual saliency is changed as the visual stimulus moves as described above, the effect of guiding the line of sight of the
(12) In the third embodiment, the visual saliency of the visual stimulus may be set as follows. The visual saliency to be set includes, for example, luminance. In step 11, the visual saliency is set as in the first embodiment. However, visual saliency set here is the visual saliency of the visual stimulus to be displayed in the initial position P 0.
前記ステップ12において、表示ユニット13は、まず、初期位置P0に視覚刺激を表示する。この視覚刺激の視覚的顕著性は、前記ステップ11で設定したものである。
次に、表示ユニット13は、位置P1に視覚刺激を追加して表示する。位置P1に表示する視覚刺激の視覚的顕著性は、初期位置P0に表示する視覚刺激の視覚的顕著性より高い。
In step 12, the display unit 13 first displays a visual stimulus to the initial position P 0. The visual saliency of the visual stimulus is set in step 11 above.
Next, the display unit 13 displays by adding a visual stimulus to the position P 1. Visual saliency of the visual stimuli displayed at the position P 1 is higher than the visual saliency of the visual stimulus to be displayed in the initial position P 0.
次に、表示ユニット13は、位置P2に視覚刺激を追加して表示する。位置P2に表示する視覚刺激の視覚的顕著性は、位置P1に表示する視覚刺激の視覚的顕著性よりさらに高い。 Next, the display unit 13 displays by adding a visual stimulus to the position P 2. Visual saliency of the visual stimuli displayed at the position P 2 is even higher than the visual saliency of the visual stimuli displayed at the position P 1.
次に、表示ユニット13は、位置P3に視覚刺激を追加して表示する。位置P3に表示する視覚刺激の視覚的顕著性は、位置P2に表示する視覚刺激の視覚的顕著性よりさらに高い。 Next, the display unit 13 displays by adding a visual stimulus to the position P 3. Visual saliency of the visual stimuli displayed at the position P 3 is even higher than the visual saliency of the visual stimuli displayed at the position P 2.
次に、表示ユニット13は、位置P4に視覚刺激を追加して表示する。位置P4に表示する視覚刺激の視覚的顕著性は、位置P3に表示する視覚刺激の視覚的顕著性よりさらに高い。 Next, the display unit 13 displays by adding a visual stimulus to the position P 4. Visual saliency of the visual stimuli displayed at the position P 4 is higher than the visual saliency of the visual stimuli displayed at the position P 3.
よって、視点37から見て、視覚刺激の位置と物標とが近いほど、視覚刺激の視覚的顕著性は高い。また、換言すれば、視点37から見て、視覚刺激の位置が初期位置P0から遠いほど、視覚刺激の視覚的顕著性は高い。全ての視覚刺激のうち、位置P4に表示される視覚刺激の視覚的顕著性が最も高い。
Therefore, the visual saliency of the visual stimulus is higher as the position of the visual stimulus is closer to the target when viewed from the
視点37から見た視覚刺激の位置と、視覚的顕著性との関係は、例えば、図12に示すものとなる。図12における横軸は、視点37から見た、移動方向45における視覚刺激の位置であり、縦軸は視覚的顕著性である。図12におけるグラフの傾きが一定である場合、位置P4における視覚的顕著性は、θiが大きいほど高くなる。なお、視覚刺激の位置と、視覚的顕著性との関係は、図12に示すように、比例関係であってもよいし、他の関係であってもよい。他の関係としては、例えば、2次関数の関係、指数関数の関係等が挙げられる。
The relationship between the position of the visual stimulus viewed from the
上記のように視覚刺激の表示位置に応じて視覚的顕著性を変化させると、ドライバ35の視線を物標31の方向に誘導する効果が一層高い。
(13)上記各実施形態においては、視覚的顕著性を高める方法として視覚刺激の輝度について述べてきたがこれに限るものではない。例えば、視覚刺激の位置を初期位置P0からP4へ移動させる際に視覚刺激の面積を徐々に大きくしても視覚的顕著性を高めることができる。また、視覚刺激の面積は変えず、又は面積の変化に加えて、視覚刺激の輪郭の太さを太くしても視覚的顕著性を高めることができる。また、視覚刺激の色を変化させることで視覚的顕著性を高めてもよい。この場合には、初期位置P0を寒色系の色とし、P4に移動するに従って暖色系に変化させればよい。初期位置P0からP4へ移動させる際に、徐々に点滅周期を短くしても視覚的顕著性を高めることができる。
When the visual saliency is changed according to the display position of the visual stimulus as described above, the effect of guiding the line of sight of the
(13) In each of the above embodiments, the luminance of the visual stimulus has been described as a method for enhancing visual saliency, but the present invention is not limited to this. For example, even when the area of the visual stimulus is gradually increased when the position of the visual stimulus is moved from the initial position P 0 to P 4 , the visual saliency can be increased. Further, the visual saliency can be increased even if the thickness of the outline of the visual stimulus is increased without changing the area of the visual stimulus or in addition to the change of the area. Further, visual saliency may be increased by changing the color of the visual stimulus. In this case, the initial position P 0 may be a cold color, and may be changed to a warm color as it moves to P 4 . When moving from the initial position P 0 to P 4 , visual saliency can be increased even if the blinking cycle is gradually shortened.
(14)上記実施形態における1つの構成要素が有する複数の機能を、複数の構成要素によって実現したり、1つの構成要素が有する1つの機能を、複数の構成要素によって実現したりしてもよい。また、複数の構成要素が有する複数の機能を、1つの構成要素によって実現したり、複数の構成要素によって実現される1つの機能を、1つの構成要素によって実現したりしてもよい。また、上記実施形態の構成の一部を省略してもよい。また、上記実施形態の構成の少なくとも一部を、他の上記実施形態の構成に対して付加又は置換してもよい。なお、特許請求の範囲に記載した文言のみによって特定される技術思想に含まれるあらゆる態様が本発明の実施形態である。 (14) A plurality of functions of one constituent element in the above embodiment may be realized by a plurality of constituent elements, or a single function of one constituent element may be realized by a plurality of constituent elements. . Further, a plurality of functions possessed by a plurality of constituent elements may be realized by one constituent element, or one function realized by a plurality of constituent elements may be realized by one constituent element. Moreover, you may abbreviate | omit a part of structure of the said embodiment. In addition, at least a part of the configuration of the above embodiment may be added to or replaced with the configuration of the other embodiment. In addition, all the aspects included in the technical idea specified only by the wording described in the claim are embodiment of this invention.
(15)上述した視線誘導装置1の他、当該視線誘導装置1を構成要素とするシステム、当該視線誘導装置1としてコンピュータを機能させるためのプログラム、このプログラムを記録した半導体メモリ等の非遷移的実態的記録媒体、視線誘導方法等、種々の形態で本発明を実現することもできる。 (15) In addition to the above-described line-of-sight guidance apparatus 1, a system including the line-of-sight guidance apparatus 1 as a constituent element, a program for causing a computer to function as the line-of-sight guidance apparatus 1, and a non-transitional memory such as a semiconductor memory storing the program The present invention can also be realized in various forms such as an actual recording medium and a line-of-sight guidance method.
1…視線誘導装置、7…画像取得ユニット、9…物標認識ユニット、11…視線検出ユニット、13…表示ユニット、27…前方画像、31…物標、33…視線方向、35…ドライバ、37…視点、39…フロントガラス、43…視覚刺激方向、45…移動方向、51…視覚刺激、P0…初期位置 DESCRIPTION OF SYMBOLS 1 ... Gaze guidance apparatus, 7 ... Image acquisition unit, 9 ... Target recognition unit, 11 ... Gaze detection unit, 13 ... Display unit, 27 ... Front image, 31 ... Target, 33 ... Gaze direction, 35 ... Driver, 37 ... viewpoint, 39 ... windshield, 43 ... visual stimulus direction, 45 ... moving direction, 51 ... visual stimulus, P 0 ... initial position
Claims (9)
自車両前方の画像(27)を取得する画像取得ユニット(7)と、
前記画像取得ユニットが取得した前記画像において、認識対象として予め設定された物標(31)を認識する物標認識ユニット(9)と、
前記ドライバの視線方向(33)を検出する視線検出ユニット(11)と、
前記物標認識ユニットが前記物標を認識したとき、前記ドライバの視点(37)から見て、自車両のフロントガラス(39)と重畳する位置に視覚刺激(51)を表示する表示ユニット(13)と、
を備え、
前記表示ユニットは、前記視点から前記視覚刺激に向う視覚刺激方向(43)と、前記視線検出ユニットで検出した前記視線方向とが成す角度が予め設定された値以下となる初期位置(P0)に前記視覚刺激を表示し、その後、前記視点から見て前記物標に近づく方向(45)に、前記視覚刺激の位置を移動させるように構成された視線誘導装置。 A gaze guidance device (1) for guiding the gaze of a driver (35),
An image acquisition unit (7) for acquiring an image (27) in front of the host vehicle;
A target recognition unit (9) for recognizing a target (31) preset as a recognition target in the image acquired by the image acquisition unit;
A gaze detection unit (11) for detecting the gaze direction (33) of the driver;
When the target recognition unit recognizes the target, the display unit (13) displays a visual stimulus (51) at a position overlapping the windshield (39) of the host vehicle as viewed from the driver's viewpoint (37). )When,
With
The display unit has an initial position (P 0 ) at which an angle formed by the visual stimulus direction (43) from the viewpoint toward the visual stimulus and the line-of-sight direction detected by the line-of-sight detection unit is equal to or less than a preset value. The visual line guidance device is configured to display the visual stimulus on the screen and then move the position of the visual stimulus in a direction (45) approaching the target as viewed from the viewpoint.
前記視覚刺激の位置が移動するときの移動速度は、前記視点から見て一定である線誘導装置。 The line-of-sight guidance device according to claim 1,
A line guiding apparatus in which a moving speed when the position of the visual stimulus moves is constant when viewed from the viewpoint.
前記表示ユニットは、前記視点から前記物標に向う物標方向(47)と、前記視線検出ユニットで検出した前記視線方向とが成す角度が大きいほど、前記視覚刺激の位置を移動させるときの移動速度を大きくするように構成された視線誘導装置。 The line-of-sight guidance device according to claim 1 or 2,
The display unit moves when moving the position of the visual stimulus as the angle formed by the target direction (47) from the viewpoint toward the target and the line-of-sight direction detected by the line-of-sight detection unit increases. A line-of-sight guidance device configured to increase speed.
自車両前方の画像(27)を取得する画像取得ユニット(7)と、
前記画像取得ユニットが取得した前記画像において、認識対象として予め設定された物標(31)を認識する物標認識ユニット(9)と、
前記ドライバの視線方向(33)を検出する視線検出ユニット(11)と、
前記物標認識ユニットが前記物標を認識したとき、前記ドライバの視点(37)から見て、自車両のフロントガラス(39)と重畳する位置に視覚刺激(51)を表示する表示ユニット(13)と、
を備え、
前記表示ユニットは、前記視点から前記視覚刺激に向う視覚刺激方向(43)と、前記視線検出ユニットで検出した前記視線方向とが成す角度が予め設定された値以下となる初期位置(P0)に前記視覚刺激を表示し、その後、前記視点から見て前記初期位置よりも前記物標に近い位置に、前記視覚刺激を追加して表示するように構成された視線誘導装置。 A gaze guidance device (1) for guiding the gaze of a driver (35),
An image acquisition unit (7) for acquiring an image (27) in front of the host vehicle;
A target recognition unit (9) for recognizing a target (31) preset as a recognition target in the image acquired by the image acquisition unit;
A gaze detection unit (11) for detecting the gaze direction (33) of the driver;
When the target recognition unit recognizes the target, the display unit (13) displays a visual stimulus (51) at a position overlapping the windshield (39) of the host vehicle as viewed from the driver's viewpoint (37). )When,
With
The display unit has an initial position (P 0 ) at which an angle formed by the visual stimulus direction (43) from the viewpoint toward the visual stimulus and the line-of-sight direction detected by the line-of-sight detection unit is equal to or less than a preset value. The visual line guidance device is configured to display the visual stimulus on the screen and then display the visual stimulus in a position closer to the target than the initial position when viewed from the viewpoint.
前記視覚刺激の視覚的顕著性は、前記視覚刺激を表示する前の時点における同じ位置の視覚的顕著性よりも高い視線誘導装置。 The line-of-sight guidance device according to any one of claims 1 to 4,
The line-of-sight guidance device in which the visual saliency of the visual stimulus is higher than the visual saliency at the same position before the visual stimulus is displayed.
前記視覚刺激の輝度は、前記視覚刺激を表示する前の時点における同じ位置の輝度よりも高い視線誘導装置。 The line-of-sight guidance device according to any one of claims 1 to 4,
The line-of-sight guidance device in which the luminance of the visual stimulus is higher than the luminance at the same position before the visual stimulus is displayed.
前記初期位置は、前記視点から見て、前記視線検出ユニットで検出した前記視線方向上にある視線誘導装置。 The line-of-sight guidance device according to any one of claims 1 to 6,
The line-of-sight guidance device in which the initial position is on the line-of-sight direction detected by the line-of-sight detection unit as seen from the viewpoint.
前記物標認識ユニットで認識した前記物標と自車両との衝突余裕時間を算出する算出ユニット(15)をさらに備え、
前記表示ユニットは、前記算出ユニットで算出した前記衝突余裕時間が短いほど、前記視覚刺激の視覚的顕著性を高くするように構成された視線誘導装置。 It is a gaze guidance device according to any one of claims 1 to 7,
A calculation unit (15) for calculating a margin time for collision between the target recognized by the target recognition unit and the host vehicle;
The line-of-sight guidance device configured to increase the visual saliency of the visual stimulus as the collision unit time calculated by the calculation unit is shorter.
前記表示ユニットは、前記視点から見て、前記視覚刺激の位置と前記物標とが近いほど、前記視覚刺激の視覚的顕著性を高くするように構成された視線誘導装置。 The line-of-sight guidance device according to any one of claims 1 to 8,
The line-of-sight guidance device configured to increase the visual saliency of the visual stimulus as the position of the visual stimulus is closer to the target as viewed from the viewpoint.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2016076824A JP2017187955A (en) | 2016-04-06 | 2016-04-06 | Line of sight guiding device |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2016076824A JP2017187955A (en) | 2016-04-06 | 2016-04-06 | Line of sight guiding device |
Publications (1)
Publication Number | Publication Date |
---|---|
JP2017187955A true JP2017187955A (en) | 2017-10-12 |
Family
ID=60046440
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2016076824A Pending JP2017187955A (en) | 2016-04-06 | 2016-04-06 | Line of sight guiding device |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP2017187955A (en) |
Cited By (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
GB2567164A (en) * | 2017-10-04 | 2019-04-10 | Continental Automotive Gmbh | Display system in a vehicle |
JP2019077325A (en) * | 2017-10-24 | 2019-05-23 | パイオニア株式会社 | Light-emitting device, vehicle, light emission control method, and program |
JP2019093806A (en) * | 2017-11-20 | 2019-06-20 | アルパイン株式会社 | Automatic operation system |
WO2019175922A1 (en) * | 2018-03-12 | 2019-09-19 | 三菱電機株式会社 | Driving assistance device, driving assistance method, and driving assistance program |
WO2019175923A1 (en) * | 2018-03-12 | 2019-09-19 | 三菱電機株式会社 | Driving assistance device, driving assistance method, and driving assistance program |
JP2021039554A (en) * | 2019-09-03 | 2021-03-11 | 株式会社デンソー | Gazing guidance device for vehicle |
JP7479260B2 (en) | 2020-09-23 | 2024-05-08 | 三菱電機株式会社 | Visual guidance device, visual guidance method and program |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2003291688A (en) * | 2002-04-03 | 2003-10-15 | Denso Corp | Display method, driving support device and program |
JP2009009446A (en) * | 2007-06-29 | 2009-01-15 | Denso Corp | Information display apparatus for vehicle |
JP2009051338A (en) * | 2007-08-27 | 2009-03-12 | Mazda Motor Corp | Driving support device for vehicle |
JP2010126135A (en) * | 2008-12-01 | 2010-06-10 | Toyota Motor Corp | Sight line guiding device |
JP2010160606A (en) * | 2009-01-07 | 2010-07-22 | Mazda Motor Corp | Information presentation system for vehicle |
-
2016
- 2016-04-06 JP JP2016076824A patent/JP2017187955A/en active Pending
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2003291688A (en) * | 2002-04-03 | 2003-10-15 | Denso Corp | Display method, driving support device and program |
JP2009009446A (en) * | 2007-06-29 | 2009-01-15 | Denso Corp | Information display apparatus for vehicle |
JP2009051338A (en) * | 2007-08-27 | 2009-03-12 | Mazda Motor Corp | Driving support device for vehicle |
JP2010126135A (en) * | 2008-12-01 | 2010-06-10 | Toyota Motor Corp | Sight line guiding device |
JP2010160606A (en) * | 2009-01-07 | 2010-07-22 | Mazda Motor Corp | Information presentation system for vehicle |
Cited By (13)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
GB2567164A (en) * | 2017-10-04 | 2019-04-10 | Continental Automotive Gmbh | Display system in a vehicle |
US11449294B2 (en) | 2017-10-04 | 2022-09-20 | Continental Automotive Gmbh | Display system in a vehicle |
JP2019077325A (en) * | 2017-10-24 | 2019-05-23 | パイオニア株式会社 | Light-emitting device, vehicle, light emission control method, and program |
JP7007055B2 (en) | 2017-11-20 | 2022-01-24 | アルパイン株式会社 | Autonomous driving system |
JP2019093806A (en) * | 2017-11-20 | 2019-06-20 | アルパイン株式会社 | Automatic operation system |
WO2019175922A1 (en) * | 2018-03-12 | 2019-09-19 | 三菱電機株式会社 | Driving assistance device, driving assistance method, and driving assistance program |
JPWO2019175922A1 (en) * | 2018-03-12 | 2020-08-20 | 三菱電機株式会社 | Driving support device, driving support method, and driving support program |
CN111886154A (en) * | 2018-03-12 | 2020-11-03 | 三菱电机株式会社 | Driving support device, driving support method, and driving support program |
JPWO2019175923A1 (en) * | 2018-03-12 | 2020-07-30 | 三菱電機株式会社 | Driving support device, driving support method, and driving support program |
WO2019175923A1 (en) * | 2018-03-12 | 2019-09-19 | 三菱電機株式会社 | Driving assistance device, driving assistance method, and driving assistance program |
JP2021039554A (en) * | 2019-09-03 | 2021-03-11 | 株式会社デンソー | Gazing guidance device for vehicle |
JP7287199B2 (en) | 2019-09-03 | 2023-06-06 | 株式会社デンソー | Vehicle gaze guidance device |
JP7479260B2 (en) | 2020-09-23 | 2024-05-08 | 三菱電機株式会社 | Visual guidance device, visual guidance method and program |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN107848415B (en) | Display control device, display device, and display control method | |
JP2017187955A (en) | Line of sight guiding device | |
US11194154B2 (en) | Onboard display control apparatus | |
JP6344417B2 (en) | Vehicle display device | |
JP6459205B2 (en) | Vehicle display system | |
EP3125212B1 (en) | Vehicle warning device | |
US10166998B2 (en) | Image processing device | |
CN107848416B (en) | Display control device, display device, and display control method | |
JP4879189B2 (en) | Safe driving support device | |
US9463743B2 (en) | Vehicle information display device and vehicle information display method | |
CN109311480A (en) | For running the method and driver assistance system of driver assistance system | |
JP2016020876A (en) | Vehicular display apparatus | |
WO2016067545A1 (en) | Gaze guidance device | |
TWI522257B (en) | Vehicle safety system and operating method thereof | |
JP6277933B2 (en) | Display control device, display system | |
CN108621940A (en) | The control method of the display system of vehicle and the display system of vehicle | |
JP2017052364A (en) | Head up display device | |
JP2015226304A (en) | Projection device for vehicle and head-up display system | |
CN111936345A (en) | Sight line guiding device and sight line guiding method | |
CN113635833A (en) | Vehicle-mounted display device, method and system based on automobile A column and storage medium | |
JP2009248812A (en) | Driving assistance device | |
US20160117802A1 (en) | Display control device, display control method, non-transitory recording medium, and projection device | |
JP6365409B2 (en) | Image display device for vehicle driver | |
JP2022072972A (en) | Visual line guidance device | |
JP2005284797A (en) | Drive safety device |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20190322 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20200212 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20200218 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20200316 |
|
A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20200901 |