JP2018016119A - Visual field control device - Google Patents
Visual field control device Download PDFInfo
- Publication number
- JP2018016119A JP2018016119A JP2016145887A JP2016145887A JP2018016119A JP 2018016119 A JP2018016119 A JP 2018016119A JP 2016145887 A JP2016145887 A JP 2016145887A JP 2016145887 A JP2016145887 A JP 2016145887A JP 2018016119 A JP2018016119 A JP 2018016119A
- Authority
- JP
- Japan
- Prior art keywords
- saliency
- operator
- visual field
- visual
- control device
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 230000000007 visual effect Effects 0.000 title claims abstract description 75
- 230000002093 peripheral effect Effects 0.000 claims abstract description 21
- 230000008859 change Effects 0.000 claims abstract description 16
- 238000001514 detection method Methods 0.000 claims description 27
- 230000001629 suppression Effects 0.000 claims description 23
- 238000003384 imaging method Methods 0.000 claims description 6
- 230000001934 delay Effects 0.000 claims description 2
- 239000005357 flat glass Substances 0.000 abstract description 28
- 239000004973 liquid crystal related substance Substances 0.000 abstract description 7
- 230000003247 decreasing effect Effects 0.000 abstract 1
- 230000001105 regulatory effect Effects 0.000 abstract 1
- 238000000034 method Methods 0.000 description 13
- 210000001508 eye Anatomy 0.000 description 9
- 230000008569 process Effects 0.000 description 5
- 238000013507 mapping Methods 0.000 description 3
- 230000008921 facial expression Effects 0.000 description 2
- PEDCQBHIVMGVHV-UHFFFAOYSA-N Glycerine Chemical compound OCC(O)CO PEDCQBHIVMGVHV-UHFFFAOYSA-N 0.000 description 1
- 230000008901 benefit Effects 0.000 description 1
- 210000005252 bulbus oculi Anatomy 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 239000000284 extract Substances 0.000 description 1
- 230000006870 function Effects 0.000 description 1
- 239000011521 glass Substances 0.000 description 1
- 238000005286 illumination Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 210000004243 sweat Anatomy 0.000 description 1
Images
Landscapes
- Fittings On The Vehicle Exterior For Carrying Loads, And Devices For Holding Or Mounting Articles (AREA)
- Instrument Panels (AREA)
Abstract
Description
本発明は、視界制御装置に関するものである。 The present invention relates to a visibility control device.
移動物体の操作者、例えば車両の運転者は、フロントウインドガラスを通して車外状況を確認しつつ運転を行うことになる。特許文献１には、フロントウインドガラスの窓枠形状を視覚的に変更できるようにしたものが開示されている。すなわち、特許文献１には、フロントウインドガラスの周縁部に、液晶等を利用して視界制限の有無を変更可能な視界変更領域を設定して、例えば車両の走行状態、道路状態、車両周辺状態に応じて部分的に視界制限して、フロントウインドガラスの窓枠形状を視覚的に変更できるようにしたものが開示されている。 An operator of a moving object, for example, a vehicle driver, performs driving while confirming the situation outside the vehicle through the front window glass. Japanese Patent Application Laid-Open No. H10-228667 discloses a window frame shape of a front window glass that can be visually changed. That is, in Patent Document 1, a view changing region that can change the presence or absence of view restriction using a liquid crystal or the like is set at the periphery of the front window glass, for example, a vehicle running state, a road state, a vehicle peripheral state Accordingly, there is disclosed a technique in which the window frame shape of the front window glass can be visually changed by partially limiting the field of view.
ところで、人間がある状況を目視した際に、サリエンシーと呼ばれる視覚特徴量が大きい（サリエンシーが高い）と、その特定部位に視線誘導されやすいものとなる。サリエンシーは、色、輝度、エッジの傾き、動きなどにより刻一刻と変化する顕著性からなる視覚特徴量である。すなわち、車両の運転者がフロントウインドガラスを通して前方状況を目視した際に、サリエンシーの高い方向へと自然発生的に（無意識のうちに）視線誘導されやすいものとなる。 By the way, when a person visually observes a certain situation, if the visual feature amount called saliency is large (the saliency is high), the line of sight is easily guided to the specific part. The saliency is a visual feature amount consisting of saliency that changes every moment depending on the color, brightness, edge inclination, movement, and the like. That is, when the driver of the vehicle visually observes the front situation through the front window glass, the line of sight is likely to be spontaneously (unconsciously) guided toward a high saliency.
一方、移動物体としての例えば車両においては、視界領域となる例えばフロントウインドガラスを通して前方状況を視認する際に、運転者の視線方向が注視すべき視認対象物から大きく外れたわき見状態となってしまうことが応々にして生じる。例えば、直進走行時に、左右の道路脇にある目立つ物（例えば点灯している大きな看板）に対して無意識に視線が向いてしまう等のことが生じやすいものとなる。このため、運転者の視線を注視すべき視認対象物へ誘導することは、安全運転等の上で好ましいものとなるが、例えば音声によって視線誘導方向を案内することは運転者に対して煩わしさを与えてしまうことになり、好ましくないものとなる。 On the other hand, in a vehicle as a moving object, for example, when the front situation is visually confirmed through a front window glass serving as a field of view, the driver's line-of-sight direction is greatly deviated from the object to be watched. It happens at random. For example, when driving straight ahead, it is likely that the line of sight is unconsciously turned toward a conspicuous object (eg, a large signboard that is lit) on the left and right roads. For this reason, guiding the driver's line of sight to the visual target to be watched is preferable for safe driving, etc. However, for example, guiding the direction of the line of sight by voice is bothersome for the driver. This is undesirable.
本発明は以上のような事情を勘案してなされたもので、その目的は、移動物体の操作者に対して煩わしさを与えることなく所望方向へ視線誘導できるようにした視界制御装置を提供することにある。 The present invention has been made in view of the above circumstances, and an object of the present invention is to provide a visual field control device that can guide the line of sight in a desired direction without bothering the operator of the moving object. There is.
前記目的を達成するため、本発明にあっては次のような解決手法を採択してある。すなわち、請求項１に記載のように、
移動物体における視界領域の外縁が枠体によって規定されてなる視界制御装置であって、
前記視界領域の周縁部付近でのサリエンシーを高める方向に変更するためのサリエンシー変更手段と、
前記サリエンシー変更手段を制御して、該視界領域の周縁部付近のうち前記操作者に対する視線誘導方向にある周縁部付近のサリエンシーを高める制御手段と、
前記操作者の状態を検出する操作者状態検出手段と、
前記操作者状態検出手段により検出された操作者の状態に応じて、前記制御手段によるサリエンシーを高める制御を抑制させる抑制手段と、
を備えているようにしてある。
In order to achieve the above object, the following solution is adopted in the present invention. That is, as described in claim 1,
A visual field control device in which an outer edge of a visual field area in a moving object is defined by a frame,
A saliency changing means for changing the saliency in the direction of increasing the saliency in the vicinity of the peripheral edge of the viewing area;
Control means for controlling the saliency changing means to increase the saliency in the vicinity of the peripheral edge in the direction of the line of sight with respect to the operator, in the vicinity of the peripheral edge of the visual field area;
An operator state detecting means for detecting the state of the operator;
In accordance with the operator state detected by the operator state detection means, suppression means for suppressing the control to increase the saliency by the control means,
It is supposed to be equipped with.
上記解決手法によれば、視界領域のうち視線誘導したい方向にある所定部位のサリエンシーを高めることにより、高められたサリエンシーの方向へと操作者の視線を自然発生的に（無意識のうちに）誘導することができる。そして、サリエンシーを高めることによる視線誘導は、音声による視線誘導の場合に比して、穏やかな視線誘導となるので、操作者に対して煩わしさを与えてしまうことが防止あるいは抑制されることになる。また、運転者状態に応じてサリエンシーを高める制御を抑制するので、例えば、操作者が視界領域を通して周辺状況をしっかりと確認しているような状況であるときは、サリエンシーを高める制御を抑制して、不必要に高いレベルでもって視線誘導してしまう事態を防止して、操作者に対して煩わしさを与えてしまう事態をより一層防止あるいは抑制することができる。 According to the above-described solution method, the operator's line of sight is naturally (unconsciously) guided in the direction of the increased saliency by increasing the saliency of a predetermined part in the direction in which the sight line is to be guided in the visual field region. can do. Further, the line-of-sight guidance by increasing the saliency is a gentle line-of-sight guidance as compared with the case of the line-of-sight guidance by voice, so that it is prevented or suppressed from bothering the operator. Become. In addition, since the control to increase the saliency is suppressed according to the driver's condition, for example, when the operator is confirming the surrounding situation through the visual field area, the control to increase the saliency is suppressed. Thus, it is possible to prevent a situation in which the line of sight is guided at an unnecessarily high level, and to further prevent or suppress a situation in which the operator is bothered.
上記解決手法を前提とした好ましい態様は、請求項２以下に記載のとおりである。すなわち、
前記視界領域を通して移動物体の操作者が視認する周辺状況を撮像する撮像手段と、
前記撮像手段で撮像された画像に基づいて、前記視界領域におけるサリエンシーの分布状態を検出する分布状態検出手段と、
をさらに備え、
前記制御手段は、前記分布状態検出手段によって検出された前記視界領域でのサリエンシーの分布状態に応じて、視線誘導する方向のサリエンシーを高めるための制御を行う、
ようにしてある（請求項２対応）。この場合、視界領域におけるサリエンシーの分布状態に基づいて、視線誘導のためのサリエンシーを高める制御が行われるので、サリエンシーを高める度合いを適正に設定することができる。例えば、視界領域のうち視線誘導する方向の周縁部が暗いときに、サリエンシーを不必要に大きく高めてしまうこともなく、逆に視界領域のうち視線誘導する方向の周縁部が明るいときに、サリエンシーを高める度合いが不足してしまう等のこともなく、適正なサリエンシーの高さでもって視線誘導する上で極めて好ましいものとなる。
A preferred mode based on the above solution is as described in
Imaging means for imaging a peripheral situation visually recognized by an operator of the moving object through the viewing area;
A distribution state detection unit that detects a distribution state of saliency in the field of view based on an image captured by the imaging unit;
Further comprising
The control means performs control for increasing the saliency in the direction of gaze guidance according to the saliency distribution state in the visual field area detected by the distribution state detection means.
(Corresponding to claim 2). In this case, since the control for increasing the saliency for gaze guidance is performed based on the distribution state of the saliency in the visual field region, the degree of increasing the saliency can be appropriately set. For example, when the peripheral part of the visual field region in the direction of gaze guidance is dark, the saliency is not increased unnecessarily, and conversely, when the peripheral part of the visual field region in the direction of gaze guidance is bright, This is extremely preferable for guiding the line of sight with an appropriate height of saliency without causing a lack of the degree of increasing the image quality.
前記サリエンシー変更手段は、前記視界領域の左側側縁部と右側側縁部と上縁部との少なくとも３箇所についてサリエンシーを高めることができるように設定され、
前記制御手段は、前記３箇所のうち選択された少なくとも１箇所についてのサリエンシーを高めるように制御する、
ようにしてある（請求項３対応）。この場合、前方、左、右の各方向への視線誘導を行う上で好ましいものとなる。
The saliency changing means is set so that saliency can be increased at least at three locations of the left side edge, the right side edge and the upper edge of the field of view,
The control means controls to increase the saliency of at least one selected from the three locations;
(Corresponding to claim 3). In this case, it is preferable to perform line-of-sight guidance in the forward, left, and right directions.
前記操作者検出手段は、操作者が移動物体の操作に集中している集中状態であることを検出するものとされ、
前記抑制手段は、前記操作者検出手段によって操作者が前記集中状態であることが検出されたときは、該集中状態でないときに比して、サリエンシーを高める制御を抑制させる、
用スリップ制御４対応）。この場合、視線誘導の要求レベルが低いと考えられる操作に集中しているときにおいて、不必要にサリエンシーを高めてしまう事態を防止する上で好ましいものとなる。
The operator detection means detects that the operator is in a concentrated state where the operator is concentrated on the operation of the moving object,
The suppression means suppresses control to increase saliency when the operator detection means detects that the operator is in the concentrated state, compared to when the operator is not in the concentrated state,
For slip control 4). In this case, it is preferable to prevent a situation where the saliency is unnecessarily increased when the user is concentrating on an operation that is considered to have a low level of gaze guidance.
前記制御手段は、サリエンシーの上限強度の範囲内でサリエンシーを高める制御を行い、
前記抑制手段は、前記集中状態のときは該集中状態でないときに比して、前記上限強度を低下させる、
ようにしてある（請求項５対応）。この場合、上限強度の変更という簡単な手法によって、サリエンシーを高めることの抑制を行うことができる。
The control means performs control to increase saliency within the range of the upper limit strength of saliency,
The suppression means reduces the upper limit strength in the concentrated state as compared to when not in the concentrated state,
(Corresponding to claim 5). In this case, it is possible to suppress the increase in saliency by a simple method of changing the upper limit strength.
前記操作者検出手段は、操作者が移動物体の操作を能動的に行っている能動状態であることを検出するものとされ、
前記抑制手段は、前記操作者検出手段によって操作者が前記能動状態であることが検出されたときは、該能動状態でないときに比してサリエンシーを高める制御を遅延して行わせる、
ようにしてある（請求項６対応）。この場合、視線誘導の要求レベルが低いと考えられる能動状態のときに、いたずらにサリエンシーを高めてしまう事態を防止する上で好ましいものとなる。また、遅延という簡単な手法によって、サリエンシーを高めることの抑制を行うことができる。
The operator detection means detects that the operator is in an active state where the operator is actively operating a moving object,
When the operator detecting unit detects that the operator is in the active state, the suppressing unit delays the control for increasing the saliency as compared to when the operator is not in the active state.
(Corresponding to claim 6). In this case, it is preferable to prevent a situation in which the saliency is unnecessarily increased in an active state where the required level of gaze guidance is considered to be low. Further, it is possible to suppress the increase in saliency by a simple technique called delay.
前記操作者検出手段は、操作者が移動物体の操作を能動的に行っている能動状態であることを検出するものとされ、
前記抑制手段は、前記操作者検出手段によって操作者が前記能動状態であることが検出されたときは、該能動状態でないときに比して、サリエンシーを高めることをゆっくりと行わせる、
ようにしてある（請求項７対応）。この場合、視線誘導の要求レベルが低いと考えられる能動状態のときに、いたずらにサリエンシーを高めてしまう事態を防止する上で好ましいものとなる。また、ゆっくりとサリエンシーを高めるという簡単な手法によって、その抑制を行うことができる。
The operator detection means detects that the operator is in an active state where the operator is actively operating a moving object,
The suppression means slowly increases the saliency when the operator detection means detects that the operator is in the active state, as compared to when the operator is not in the active state.
(Corresponding to claim 7). In this case, it is preferable to prevent a situation in which the saliency is unnecessarily increased in an active state where the required level of gaze guidance is considered to be low. Moreover, the suppression can be performed by a simple technique of slowly increasing saliency.
前記操作者の視線方向を検出する視線方向検出手段と、
前記視界領域中において操作者が視認すべき視認対象物を検出する視認対象物検出手段と、
をさらに備え、
前記制御手段は、前記視認対象物検出手段によって検出された視認対象物の方向についてサリエンシーを高める制御を行うようにされ、
前記抑制手段は、前記視認対象物検出手段によって検出された視認対象物の方向に操作者の視線方向が向いているときは、サリエンシーを高める制御を抑制させる、
ようにしてある（請求項８対応）。この場合、視線誘導する必要性が極めて低いときに、不必要にサリエンシーを高めてしまう事態を防止あるいは抑制することができる。
Gaze direction detection means for detecting the gaze direction of the operator;
A visual object detection means for detecting a visual object to be visually recognized by the operator in the visual field area;
Further comprising
The control means is configured to perform control to increase saliency with respect to the direction of the visual object detected by the visual object detection means,
The suppression means suppresses control to increase saliency when the line-of-sight direction of the operator is directed to the direction of the visual object detected by the visual object detection means,
This is done (corresponding to claim 8). In this case, it is possible to prevent or suppress the situation where the saliency is unnecessarily increased when the necessity of guiding the line of sight is extremely low.
前記視界領域が、車両のフロントウインドガラスとされ、
前記操作者が、車両の運転者とされている、
ようにしてある（請求項９対応）。この場合、車両における視線誘導として好ましいものとなる。特に、車両は走行している数が多い一方、歩行者、二輪車、他車両等と混在した状態で走行する機会が多くて、視線誘導すべき機会も多くなることから、運転者に対して煩わしさを与えることなく視線誘導できることは極めて好ましいものとなる。
The field of view is the front windshield of the vehicle,
The operator is a vehicle driver;
(Corresponding to claim 9). In this case, it is preferable as the line-of-sight guidance in the vehicle. In particular, while there are many vehicles traveling, there are many opportunities to travel in a mixed state with pedestrians, motorcycles, other vehicles, etc. It is extremely preferable to be able to guide the line of sight without giving a thickness.
前記視界領域が、車両におけるバックミラー、サイドミラー、設定された所定方向を映し出すディスプレイのいずれかとされ、
前記操作者が、車両の運転者とされている、
ようにしてある（請求項１０対応）。この場合、間接視界となる視界領域について、請求項１に対応した効果を得ることができる。
The field of view is one of a rear mirror, a side mirror, and a display that displays a set predetermined direction in a vehicle,
The operator is a vehicle driver;
(Corresponding to claim 10). In this case, the effect corresponding to claim 1 can be obtained for the visual field region serving as the indirect visual field.
前記サリエンシー変更手段が、輝度を変更するものとされ、
前記制御手段が、前記視界領域内の情景に対して輝度差を高めるように制御し、
前記抑制手段が、輝度差が小さくなるように制御する、
ようにしてある（請求項１１対応）。この場合、目立ち易い輝度差を有効に利用して、効果的にサリエンシーを高めることやその抑制を行うことができる。
The saliency changing means is to change the brightness,
The control means controls to increase the brightness difference with respect to the scene in the field of view;
The suppression means controls the brightness difference to be small;
(Corresponding to claim 11). In this case, it is possible to effectively use the conspicuous luminance difference and effectively increase or suppress the saliency.
前記サリエンシー変更手段が、色を変更可能とされている、ようにしてある（請求項１２対応）。この場合、色をも利用して、より効果的にサリエンシーを高めることやその抑制を行うことができる。 The saliency changing means can change the color (corresponding to claim 12). In this case, color can also be used to increase or suppress saliency more effectively.
前記抑制手段は、サリエンシーを高める部分の面積範囲を小さくさせる、ようにしてある（請求項１３対応）。この場合、サリエンシーを高める部位の面積を変更するという簡単な手法によって、サリエンシーを抑制することができる。 The suppression means reduces the area range of the portion that increases saliency (corresponding to claim 13). In this case, the saliency can be suppressed by a simple method of changing the area of the part that increases the saliency.
本発明によれば、人間の目に付きやすいサリエンシーを有効に利用して、操作者に対して煩わしさを与えることなく所望方向に視線誘導することができる。 According to the present invention, it is possible to guide the line of sight in a desired direction without making the operator bothersome by effectively using the saliency that is easily visible to human eyes.
以下本発明の実施形態について説明するが、実施形態では、移動物体として、車両の一種となる自動車の場合を例してしてある。まず、図１において、１は、自動車のフロントウインドガラスである。フロントウインドガラス１の外縁つまり窓枠形状が、左右一対のフロントピラー２とルーフ３とインストルメントパネル４とによって規定されている。図１中、５はバックミラー、６はサイドミラー、７はナビゲーション装置用のディスプレイである。ディスプレイ７は、通常時は地図情報を表示しているが、後退ギアが選択されたときには、自動的に後方視界を映し出すようになっている（後方カメラにより撮像された画像の表示）。また、バックミラー５、サイドミラー６等の間接視界を映し出すものは、実施形態では鏡を用いてあるが、カメラによって撮像された映像を映し出す電子表示式のもの（つまりディスプレイ）であってもよい。
Hereinafter, embodiments of the present invention will be described. In the embodiments, a moving object is an example of an automobile which is a kind of vehicle. First, in FIG. 1, reference numeral 1 denotes a front window glass of an automobile. An outer edge of the front window glass 1, that is, a window frame shape, is defined by a pair of left and right
図２に示すように、フロントウインドガラス１には、その全周縁部において、サリエンシーを高めることが可能な変更領域Ｓ１１が設定されている。この変更領域Ｓ１１は、特許文献１に開示されているように、液晶フィルムを用いたり、プロジェクションマッピングを用いることに構成されて、この変更領域Ｓ１１の任意の部分についてのサリエンシーを高めることが可能となっている。 As shown in FIG. 2, the front window glass 1 is provided with a change area S <b> 11 capable of increasing saliency at the entire peripheral edge thereof. The change area S11 is configured to use a liquid crystal film or projection mapping, as disclosed in Patent Document 1, and can increase the saliency of an arbitrary part of the change area S11. It has become.
変更領域Ｓ１１でのサリエンシーを高めるために、フロントウインドガラス１内における周辺状況（特に周辺状況が示しているサリエンシーの分布状況）や周縁部付近に存在する部材を背景としたときの輝度差を高めるようになっており、これに加えて色をも変更可能とされている。例えば、背景が灰色系や黒色系が主体であるときには、変更領域Ｓ１１においては明度差の大きくなる明るい色（例えば黄色等）でもって、かつ輝度が高くされるような表示とされる。なお、フロントウインドガラス１の周縁部のサリエンシーを高めるための構成としては、フロントウインドガラス１の周縁部そのものに対して液晶フィルムを設定したりプロジェクションマッピングにより光を映し出すことにより行う他、例えばルーフ３の前縁部、フロントピラー２の車幅方向内縁部、インストルメントパネル４の前縁部に例えば液晶フィルムやＬＥＤ照明を設置したり、プロジェクションマッピングを行う等、適宜の手法を採択し得る。
In order to increase the saliency in the change area S11, the peripheral situation in the front window glass 1 (especially, the saliency distribution state indicated by the peripheral situation) and the luminance difference when a member existing in the vicinity of the peripheral portion is used as the background are increased. In addition to this, the color can be changed. For example, when the background is mainly gray or black, the change area S11 is displayed with a bright color (for example, yellow) with a large difference in brightness and with high brightness. The configuration for increasing the saliency of the peripheral portion of the front window glass 1 is performed by setting a liquid crystal film on the peripheral portion of the front window glass 1 or projecting light by projection mapping. For example, a liquid crystal film or LED illumination may be installed on the front edge of the
図３は、変更領域Ｓ１１を制御して、フロントウインドガラス１の右側縁部についてのサリエンシーを高めた（視覚的顕著性を高めた）部位ＨＲ１を形成した状態を示す。運転者の視線は、サリエンシーが高い部分とされた部位ＨＲ側に誘導されることになる。つまり、サリエンシーを高くした部位ＨＲの設定は、運転者の視線を右方向に誘導する例えば右旋回時において好ましものとなる。左旋回時には、図３一点鎖線で示すように、フロントウインドガラス１の左側縁部について、サリエンシーを高くした部位ＨＬ１を設定すればよい。左右いずれかの方向への視線誘導は、例えば幅寄せの際にも行うことができる（幅寄せ方向のサリエンシーを高める制御を実行）。 FIG. 3 shows a state in which the change region S11 is controlled to form a portion HR1 in which the saliency for the right edge of the front window glass 1 is increased (visual saliency is increased). The driver's line of sight is guided to the part HR that is considered to have a high saliency. That is, the setting of the part HR with high saliency is preferable when the driver's line of sight is guided to the right, for example, when turning right. When turning left, as shown by a one-dot chain line in FIG. 3, a portion HL <b> 1 with high saliency may be set for the left edge of the front window glass 1. The line-of-sight guidance in either the left or right direction can also be performed, for example, at the time of width adjustment (execution of control for increasing the saliency in the width alignment direction).
また、右方側に注視すべき視認対象物が存在する一方、運転者の視線が右方向から大きくずれているときは、サリエンシーの高い部位ＨＲ１を設定することもできる。逆に、左方側に注視すべき視認対象物が存在する一方、運転者の視線が左方向から大きくずれているときは、サリエンシーの高い部位ＨＬ１を設定することもできる。 Further, when there is an object to be visually observed on the right side, and the driver's line of sight is greatly deviated from the right direction, the part HR1 with high saliency can be set. Conversely, when there is a visual target to be watched on the left side, and the driver's line of sight is greatly deviated from the left direction, the part HL1 with high saliency can be set.
図４は、変更領域Ｓ１１を制御して、フロントウインドガラス１の上縁部についてサリエンシーを高くした部位ＨＵを形成した状態を示す。この部位ＨＵのサリエンシーが高くなることにより、運転者は、フロントウインドガラス１の上縁部つまり前遠方に向けて視線誘導されることになる。図４のような設定は、直進走行時、特に高速道路（自動車専用道路を含む）での直進走行時において好ましいものとなる。特に、高速道路では、走行路に沿って道路を照らす照明灯が数多く設置されていることが多いが、この左右にある照明灯に邪魔されることなく、前遠方に視線誘導する上で好ましいものとなる。 FIG. 4 shows a state in which the change area S11 is controlled to form a part HU having high saliency for the upper edge of the front window glass 1. By increasing the saliency of the part HU, the driver is guided to the line of sight toward the upper edge of the front window glass 1, that is, the front side. The setting as shown in FIG. 4 is preferable when traveling straight, particularly when traveling straight on an expressway (including a motorway). In particular, on highways, there are many lighting lamps that illuminate the road along the road, but it is preferable to guide the line of sight ahead without being disturbed by the lighting lamps on the left and right It becomes.
図５は、変更領域Ｓ１１を利用して視線誘導を行うための制御系統例が示される。この図５において、Ｕは、マイクロコンピュータを利用して構成されたコントローラ（制御ユニット）である。この制御ユニットＵには、各種センサあるいは機器類Ｓ１〜Ｓ６からの信号が入力される。Ｓ１は、車速を検出する車速センサである。Ｓ２は舵角を検出する舵角センサである。Ｓ３は、ナビゲーション装置であり、自車位置情報（ＧＰＳ機能）と地図情報とが取得される。Ｓ４は、アイカメラであり、例えばルーフ３の前端部に設けられて、運転者の視線方向および運転者の表情を検出（撮像）するものとなっている。Ｓ５は、自車両前方の状況を撮像する車外カメラであり、この車外カメラＳ５により撮像された画像中におけるサリエンシーを検出するためのものとなっている。Ｓ６は、運転者の生体情報を検出するセンサであり、例えば、心拍、発汗量を検出するものとなっている。
FIG. 5 shows an example of a control system for performing line-of-sight guidance using the change area S11. In FIG. 5, U is a controller (control unit) configured using a microcomputer. Signals from various sensors or devices S1 to S6 are input to the control unit U. S1 is a vehicle speed sensor that detects the vehicle speed. S2 is a steering angle sensor that detects the steering angle. S3 is a navigation device, and the vehicle position information (GPS function) and map information are acquired. S4 is an eye camera, which is provided at the front end of the
コントローラＵは、前述した変更領域Ｓ１１（を構成する液晶等）を制御する他、スピーカＳ１２を制御する。スピーカＳ１２は、注視すべき視認対象物を運転者が視認していないときでかつ危険なときに限って、音声により警報を行うためのものとなっている。 The controller U controls the speaker S12 in addition to controlling the above-described change area S11 (such as liquid crystal constituting the change area). The speaker S12 is used to issue a warning by voice only when the driver is not visually recognizing the visual object to be watched and when it is dangerous.
コントローラＵは、２種類のデータベースＤ１、Ｄ２を有している。各データベースＤ１、Ｄ２は、それぞれ大容量のフラッシュメモリやハードディスクによって構成されている。データベースＤ１には、サリエンシーのうち、運転者が注視すべき視認対象物について数多くのデータを記憶している。例えば、先行車両のブレーキランプ、信号機の表示、特に点灯式の道路標識、対向車両、二輪車、歩行者等について、視認対象物として記憶されている。 The controller U has two types of databases D1 and D2. Each of the databases D1 and D2 is configured by a large-capacity flash memory or hard disk. The database D1 stores a lot of data regarding the visual recognition object that the driver should pay attention to in the saliency. For example, the brake lamps of the preceding vehicle, the display of traffic lights, particularly the lighting-type road signs, oncoming vehicles, two-wheeled vehicles, pedestrians, etc. are stored as visual recognition objects.
一方、データベースＤ２には、視認対象物とはならないサリエンシーについて数多く記憶されている。運転者による視認対象物とはならないサリエンシーとしては、例えば、道路脇の点灯式の看板、街灯、照明灯、建物の窓明かり、街路樹、太陽、月、星等々について、視認不要なサリエンシーとして記憶されている。なお、データベースＤ１、Ｄ２での記憶は、各種の走行シーン（例えば直進走行、旋回走行、市街地走行、高速道路走行等々）毎に場合分けして行われている。 On the other hand, the database D2 stores a large number of saliencies that are not visually recognized objects. Examples of saliency that cannot be recognized by the driver are stored as saliency that is not required to be visually recognized, such as lighting signs beside the road, street lights, lighting, building windows, street trees, the sun, the moon, and stars. Has been. Note that the storage in the databases D1 and D2 is performed for each of various traveling scenes (for example, straight traveling, turning traveling, urban traveling, highway traveling, etc.).
コントローラＵは、車外カメラＳ５により撮像された画像中から、サリエンシーを抽出して、抽出したサリエンシーをデータベースＤ１、Ｄ２に照合して、運転者が注視すべき視認対象物と視認不要な対象物とに区分けする。そして、この区分けに応じて、走行シーンに応じて運転者が注視すべき視認対象物が特定される。 The controller U extracts the saliency from the image captured by the outside camera S5, collates the extracted saliency with the databases D1 and D2, and recognizes the visual object to be watched by the driver and the object that is unnecessary to be visually recognized. Divide into And according to this division, the visual recognition target object which a driver should look at according to a run scene is specified.
次に、コントローラＵによる視界制限に関する制御例について、図６のフローチャートを参照しつつ説明する。なお、以下の説明でＱはステップを示す。まず、図６のＱ１において、各種センサあるいは機器類Ｓ１〜Ｓ６からの信号が入力される。この後Ｑ２において、アイカメラＳ４およびセンサＳ６での検出結果に基づいて、運転者状態（運転に集中しているかや、運転を能動的に行っているか等）が演算される。この後、Ｑ３において、アイカメラＳ４での検出結果に基づいて、運転者の視線方向が演算される。 Next, a control example related to the view restriction by the controller U will be described with reference to the flowchart of FIG. In the following description, Q indicates a step. First, in Q1 of FIG. 6, signals from various sensors or devices S1 to S6 are input. Thereafter, in Q2, based on the detection results of the eye camera S4 and the sensor S6, the driver state (whether concentrated on driving, actively driving, etc.) is calculated. Thereafter, in Q3, the line-of-sight direction of the driver is calculated based on the detection result of the eye camera S4.
Ｑ３の後、Ｑ４において、サリエンシーが演算される。このＱ４での処理は、前述したように、車外カメラＳ５で撮像された画像中のサリエンシーについて、運転者が注視すべき視認対象物と視認不要な対象物とに区分けして、特に注視すべき視認対象物を決定する処理となる。また、この処理において、注視すべき視認対象物の位置（フロントウインドガラス１の視界領域における位置で、視認すべき方向に対応）も決定される。 After Q3, saliency is calculated in Q4. As described above, the processing in Q4 should be particularly focused on dividing the saliency in the image captured by the outside camera S5 into a visual object to be watched by the driver and an object that is unnecessary to be visually recognized. This is a process for determining the visual recognition object. Further, in this process, the position of the visual target object to be watched (corresponding to the direction to be visually recognized at the position in the visual field region of the front window glass 1) is also determined.
Ｑ４の後、Ｑ５において、走行シーンが判定される。このＱ５での処理は、自車両の現在の走行状況を判定するもので、実施形態では少なくとも直進走行と旋回（カーブ）走行の有無について判定される。なお、上記走行シーンの判定に際しては、既知の適宜の手法により行うことができ、図５では図示略のセンサやスイッチ等の作動状況をも加味して判定することができる。 After Q4, the driving scene is determined at Q5. The processing in Q5 is to determine the current traveling state of the host vehicle. In the embodiment, at least whether or not the vehicle travels straight and turns (curves) is determined. The travel scene can be determined by a known appropriate method, and can be determined in consideration of operating conditions of sensors and switches not shown in FIG.
Ｑ５の後、Ｑ６において、運転者が注視すべき視線方向（穏やかに視線誘導する方向）が演算される。このＱ６で処理は、Ｑ４での処理により取得された運転者が注視すべき視認対象物の方向を設定する処理となる。注視すべき視線方向は、視認対象物が複数存在する場合は、もっとも重視すべき視認対象物に対する方向とされる。特に視認対象物とすべき物体が存在しないときは、Ｑ５での走行シーンに応じて注視すべき視線方向が設定される。具体的には、例えば、カーブを走行するときは、カーブの曲がり方向を注視すべき視線方向として設定することができ、また高速道路を直進走行しているときは前遠方を注視すべき視線方向として設定することができる。 After Q5, in Q6, the line-of-sight direction (direction in which the line-of-sight is gently guided) to be watched by the driver is calculated. The process in Q6 is a process of setting the direction of the visual target that the driver acquired by the process in Q4 should watch. The line-of-sight direction to be watched is the direction with respect to the visual object to be emphasized most when there are a plurality of visual objects. In particular, when there is no object to be viewed, the line-of-sight direction to be watched is set according to the traveling scene in Q5. Specifically, for example, when driving on a curve, the curve direction of the curve can be set as the line-of-sight direction to be watched, and when driving straight on the highway, the line-of-sight direction to be focused on the far distance Can be set as
Ｑ６の後、Ｑ７において、運転者が運転に集中している状態であるか否かが判別される。このＱ７での判別は、アイカメラＳ４による眼球の状態や顔の表情、さらにセンサＳ６での生体情報の検出結果を総合して、集中状態であるか否かが判別される。このＱ７の判別でＮＯのときは、Ｑ８において、運転者が能動的に運転を行っている状態であるか否かが判別される。このＱ８での判別は、運転者が、積極的にあるいは運転に対して前向きであるか否かの判別で、渋滞時のように周辺状況に合わせて運転しているときは受動的な運転状態となる。 After Q6, in Q7, it is determined whether or not the driver is concentrated in driving. In the determination in Q7, it is determined whether or not the eye is in a concentrated state by combining the eyeball state and facial expression by the eye camera S4 and the detection result of the biological information by the sensor S6. When the determination in Q7 is NO, it is determined in Q8 whether or not the driver is actively driving. The determination in Q8 is a determination of whether the driver is positive or positive about driving, and when driving according to the surrounding situation as in traffic jams, the driving state is passive. It becomes.
上記Ｑ８の判別でＮＯのときは、Ｑ９において、Ｑ３で演算された運転者の視線方向が、Ｑ６で演算された注視すべき視線方向とほぼ一致しているか否かが判別される。このＱ９の判別でＮＯのときは、Ｑ１０において、運転者に対して視線誘導を行うべく、視線誘導する方向のサリエンシーが高められる（例えば図３のＨＲ１のようなサリエンシー高める通常の制御の実行）。 When the determination in Q8 is NO, it is determined in Q9 whether or not the driver's line-of-sight direction calculated in Q3 substantially matches the line-of-sight direction to be watched calculated in Q6. When the determination in Q9 is NO, in Q10, the saliency in the direction in which the line of sight is guided is increased in order to perform the line of sight guidance for the driver (for example, execution of normal control for increasing the saliency such as HR1 in FIG. 3). .
上記Ｑ７の判別でＹＥＳのとき、Ｑ８の判別でＹＥＳのとき、あるいはＱ９の判別でＹＥＳのときは、視線誘導する必要性が相対的に低いものとなる。この場合は、Ｑ１１において、Ｑ１０の場合と同様にして視線誘導する方向のサリエンシーが高めれる制御が実行されるが、サリエンシーを高める度合いが抑制される（Ｑ１０の場合に比してサリエンシーを高める度合いが低いものとされる（抑制制御の実行）。 When YES is determined in Q7, YES is determined in Q8, or YES is determined in Q9, the need for visual line guidance is relatively low. In this case, in Q11, control for increasing the saliency in the direction in which the line of sight is guided is performed in the same manner as in Q10, but the degree of increasing the saliency is suppressed (the degree of increasing the saliency compared to the case of Q10). Is assumed to be low (execution of suppression control).
サリエンシーを高める度合いを抑制するには、実施形態では、例えば次のように行うようにしてある。すなわち、フロントウインドガラス１の情景に対する輝度差を高めることによってサリエンシーを高める制御を行うようにする一方、あらかじめ上限輝度（輝度差）を決定しておき、Ｑ１１ではＱ１０の場合に比して上限輝度が低いものとされる。また、上記の他、Ｑ１０の通常制御では瞬時にサリエンシーを高める一方、Ｑ１１の抑制制御ではゆっくりとサリエンシーを高めることもできる（例えばゆっくりと輝度差を高める）。また、Ｑ１１での抑制制御では、サリエンシーを所定輝度差となるように高めることを遅延して行う（サリエンシーを高める制御の開始時期の遅延）こともできる。 In order to suppress the degree of increasing saliency, in the embodiment, for example, the following is performed. That is, while controlling to increase the saliency by increasing the luminance difference with respect to the scene of the windshield 1, an upper limit luminance (luminance difference) is determined in advance, and in Q11, the upper limit luminance is compared with Q10. Is considered to be low. In addition to the above, the normal control of Q10 can increase the saliency instantaneously, while the suppression control of Q11 can increase the saliency slowly (for example, the luminance difference is slowly increased). Further, in the suppression control in Q11, it is possible to delay the increase of the saliency so as to be a predetermined luminance difference (delay of the start time of the control to increase the saliency).
なお、視認対象物が特に危険な存在であり、しかも運転者がこの危険な視認対象物を視認していないと判断されたときは、図６による制御に加えて、スピーカＳ１２から警報を発生させることもできる。 When it is determined that the visually recognized object is particularly dangerous and the driver does not visually recognize the dangerous visually recognized object, an alarm is generated from the speaker S12 in addition to the control according to FIG. You can also.
図７、図８は、それぞれ、サリエンシーを高める制御の別の例を示す。すなわち、図６におけるＱ１０での通常制御のときは、図３のＨＲ１のように相対的に大きな面積（大きな幅）でもって行う。これに対して、図６におけるＱ１１での抑制制御の場合は、図７のＨＲ１−２で示すように、図３のＨＲ１に比してその幅が小さくされて、サリエンシーが高められた部位の面積が小さくされる。 7 and 8 show another example of control for increasing saliency, respectively. That is, the normal control at Q10 in FIG. 6 is performed with a relatively large area (large width) like HR1 in FIG. On the other hand, in the case of the suppression control at Q11 in FIG. 6, as shown by HR1-2 in FIG. 7, the width is reduced compared with HR1 in FIG. The area is reduced.
図８においては、サリエンシーが高められた部位がＨＲ１−３として示される。図８は、図６におけるＱ１０での通常制御に対応したもので、図３の部位ＨＲ１の内周縁部にぎざぎざとされた凹凸を付することにより、図３のＨＲ１の場合に比して、よりサリエンシーが高められた状態とされる。そして、図６におけるＱ１１での抑制制御の場合は、図３のＨＲ１のようにされる（ぎざぎざの凹凸なし）。勿論、サリエンシーを高める制御の抑制は、前述した場合に限らず適宜行うことができ、複数種の抑制制御を合わせて実行することもできる。具体的には、例えば、輝度差低減と、相対的に目立たない色への変更と、エッジ部の有る状態から無い状態への変更と、ゆっくりとサリエンシーを高めることと、サリエンシーを高めることを遅延することと、の中から任意の２種類以上を同時に行うこともできる。なお、抑制制御のときは、サリエンシーを高める制御無し（禁止）とすることもできる。 In FIG. 8, the part where the saliency is increased is shown as HR1-3. FIG. 8 corresponds to the normal control in Q10 in FIG. 6, and by adding jagged irregularities to the inner peripheral edge of the part HR1 in FIG. 3, compared to the case of HR1 in FIG. The saliency is further increased. And in the case of the suppression control in Q11 in FIG. 6, it is made like HR1 of FIG. 3 (there is no jagged unevenness). Of course, the suppression of the control for increasing the saliency is not limited to the case described above, and can be performed as appropriate, and a plurality of types of suppression control can be performed together. Specifically, for example, delay in reducing brightness difference, changing to a relatively inconspicuous color, changing from an edged state to a state without an edge, slowly increasing saliency, and increasing saliency And any two or more of them can be performed simultaneously. In the case of suppression control, it is possible to have no control (prohibition) to increase saliency.
走行シーンに応じて視線誘導している（例えばカーブの曲がり方向に視線誘導している）状態で、運転者が注視すべき視認対象物が出現したときは、この視認対象物に向かう方向へ視線誘導するためのサリエンシーを高める制御を合わせて行うこともできる。具体的には、例えば、右カーブを走行するときであることからフロントウインドガラス１の右側縁部のサリエンシーを高めている状態で、左方側に注視すべき視認対象物が出現すると共にこの視認対象物に対して運転者の視線が向いていないときは、フロントウインドガラス１の左側縁部のサリエンシーを高めるようにしてもよい。この場合、左側縁部のサリエンシーを高めた際には、一時的に右側縁部のサリエンシーを高める制御を中断するのが好ましい。 When a visual target to be watched by the driver appears in a state in which the visual line is guided according to the driving scene (for example, the visual line is guided in a curve direction), the visual line is directed toward the visual target object. Controls that increase saliency for guidance can also be performed. Specifically, for example, when the vehicle is traveling on a right curve, a visual object to be watched appears on the left side in a state where the saliency of the right edge of the front window glass 1 is increased, and this visual recognition is performed. When the driver's line of sight is not facing the object, the saliency of the left edge of the windshield 1 may be increased. In this case, when increasing the saliency of the left edge, it is preferable to temporarily interrupt the control for increasing the saliency of the right edge.
以上実施形態について説明したが、本発明は、実施形態に限定されるものではなく、特許請求の範囲の記載された範囲において適宜の変更が可能である。サリエンシーを高める度合いは、視界領域内の背景（周辺状況）との関係から、例えば少なくとも所定分の輝度差を有するように変更することができる。視界領域（例えばフロントウインドガラス１）の下縁部についても、サリエンシーを高める制御を行うことができる（例えば自車両の周囲に歩行者や二輪車が多く存在する市街地走行時に、自車両の近く付近に視線誘導する場合）。バックミラー５、サイドミラー６、ディスプレイ７等の間接視界についても同様に、その周縁部におけるサリエンシーを部分的に高める制御を行うことができる。サリエンシーを高めるために、色・輝度差に代えてあるいは加えて、例えば「動き」を利用したもの等、適宜の手法を採択し得るとすることもできる（例えばフロントウインドガラス１の周縁部について、部分的に明るくした部分を往復移動させたり、点滅表示させる等）。
Although the embodiments have been described above, the present invention is not limited to the embodiments, and appropriate modifications can be made within the scope of the claims. The degree of increasing the saliency can be changed so as to have at least a predetermined luminance difference, for example, from the relationship with the background (peripheral situation) in the visual field region. The lower edge of the field of view (for example, the front window glass 1) can also be controlled to increase the saliency (for example, when driving in an urban area where many pedestrians and motorcycles exist around the host vehicle, To guide your eyes). Similarly, the indirect fields of view of the
サリエンシーを高める部位としては、種々設定できる。例えば、フロントウインドガラス１（視界領域）の側縁部の全長に渡ることなく、上下方向中間部位、上端部位、下端部位等、側縁部の長さ方向において部分的にサリエンシーを高めることもできる。同様に、上縁部あるいは下縁部についても、その全長に渡ることなく、左右方向中間部位、左端部位、右端部位等、長さ方向において部分的にサリエンシーを高めることもできる。また、フロントウインドガラス１を例にした場合で、「上縁部の車幅方向左端部＋左側縁部の上端部」とした場合は、斜め左上方向への視線誘導とすることができ、「上縁部の車幅方向右端部＋右側縁部の上端部」として場合は、斜め右上方向への視線誘導とすることができる。同様に、サリエンシーを高める部位を、「下縁部の車幅方向左端部＋左側縁部の下端部」として場合は、斜め左下方向への視線誘導とすることができ、「上縁部の車幅方向右端部＋右側縁部の下端部」として場合は、斜め左下方向への視線誘導とすることができる。車両（自動車）以外の各種の移動物体（航空機、船舶、列車等）についても同様に適用できる。勿論、本発明の目的は、明記されたものに限らず、実質的に好ましいあるいは利点として表現されたものを提供することをも暗黙的に含むものである。 Various parts can be set as a part for increasing saliency. For example, it is possible to partially increase the saliency in the length direction of the side edge portion such as the intermediate portion in the vertical direction, the upper end portion, and the lower end portion without extending over the entire length of the side edge portion of the front window glass 1 (viewing area). . Similarly, with respect to the upper edge portion or the lower edge portion, the saliency can be partially increased in the length direction such as the intermediate portion in the left-right direction, the left end portion, and the right end portion without extending over the entire length. Further, in the case of the front window glass 1 as an example, when “the upper edge portion in the vehicle width direction left end portion + the left edge portion upper end portion” is used, it is possible to guide the line of sight in the diagonally upper left direction. In the case of “the upper edge portion of the upper edge portion in the vehicle width direction + the upper edge portion of the right edge portion”, it is possible to guide the line of sight in the diagonally upper right direction. Similarly, when the part that increases the saliency is “the left edge of the lower edge in the vehicle width direction + the lower edge of the left edge”, the line of sight can be guided diagonally to the lower left. In the case of “width direction right end portion + right end portion lower end portion”, the line of sight can be guided diagonally to the lower left. The present invention can be similarly applied to various moving objects (aircrafts, ships, trains, etc.) other than vehicles (automobiles). Of course, the object of the present invention is not limited to what is explicitly stated, but also implicitly includes providing what is substantially preferred or expressed as an advantage.
本発明は、人間の目に付きやすいサリエンシーを有効に利用して、操作者に対して煩わしさを与えることなく所望方向に視線誘導することができる。 The present invention makes it possible to guide the line of sight in a desired direction without making the operator bothersome by effectively using the saliency that is easily visible to human eyes.
１：フロントウインドガラス（視界領域）
２：フロントピラー
３：ルーフ
４：インストルメントパネル
５：バックミラー
６：サイドミラー
７：ディスプレイ（視界領域）
Ｕ：コントローラ
Ｓ１：車速センサ
Ｓ２：舵角センサ
Ｓ３：ナビゲーション装置
Ｓ４：アイカメラ
Ｓ５：車外カメラ（サリエンシー検出用）
Ｓ６：センサ（生体情報）
Ｓ１１：変更領域（液晶）
Ｓ１２：スピーカ（警報用）
Ｄ１：データベース（視認対象物となるサリエンシーを記憶）
Ｄ２：データベース（視認不要なサリエンシーを記憶）
ＨＲ１：（サリエンシーが高くされた部位）
ＨＬ１：（サリエンシーが高くされた部位）
ＨＵ：（サリエンシーが高くされた部位）
ＨＲ１−２：（サリエンシーが高くされた部位）
ＨＲ１−３：（サリエンシーが高くされた部位）
1: Front window glass (field of view)
2: Front pillar 3: Roof 4: Instrument panel 5: Rearview mirror 6: Side mirror 7: Display (field of view)
U: Controller S1: Vehicle speed sensor S2: Rudder angle sensor S3: Navigation device S4: Eye camera S5: Outside camera (for detecting saliency)
S6: Sensor (biological information)
S11: Change area (liquid crystal)
S12: Speaker (for alarm)
D1: Database (stores the saliency that is the object of visual recognition)
D2: Database (stores saliency that is not visible)
HR1: (site with high saliency)
HL1: (site with high saliency)
HU: (site with high saliency)
HR1-2: (site with increased saliency)
HR1-3: (site with high saliency)
Claims (13)
前記視界領域の周縁部付近でのサリエンシーを高める方向に変更するためのサリエンシー変更手段と、
前記サリエンシー変更手段を制御して、該視界領域の周縁部付近のうち前記操作者に対する視線誘導方向にある周縁部付近のサリエンシーを高める制御手段と、
前記操作者の状態を検出する操作者状態検出手段と、
前記操作者状態検出手段により検出された操作者の状態に応じて、前記制御手段によるサリエンシーを高める制御を抑制させる抑制手段と、
を備えていることを特徴とする視界制御装置。 A visual field control device in which an outer edge of a visual field area in a moving object is defined by a frame,
A saliency changing means for changing the saliency in the direction of increasing the saliency in the vicinity of the peripheral edge of the viewing area;
Control means for controlling the saliency changing means to increase the saliency in the vicinity of the peripheral edge in the direction of the line of sight with respect to the operator, in the vicinity of the peripheral edge of the visual field area;
An operator state detecting means for detecting the state of the operator;
In accordance with the operator state detected by the operator state detection means, suppression means for suppressing the control to increase the saliency by the control means,
A visual field control device comprising:
前記視界領域を通して移動物体の操作者が視認する周辺状況を撮像する撮像手段と、
前記撮像手段で撮像された画像に基づいて、前記視界領域におけるサリエンシーの分布状態を検出する分布状態検出手段と、
をさらに備え、
前記制御手段は、前記分布状態検出手段によって検出された前記視界領域でのサリエンシーの分布状態に応じて、視線誘導する方向のサリエンシーを高めるための制御を行う、
ことを特徴とする視界制御装置。 In claim 1,
Imaging means for imaging a peripheral situation visually recognized by an operator of the moving object through the viewing area;
A distribution state detection unit that detects a distribution state of saliency in the field of view based on an image captured by the imaging unit;
Further comprising
The control means performs control for increasing the saliency in the direction of gaze guidance according to the saliency distribution state in the visual field area detected by the distribution state detection means.
A visual field control device characterized by that.
前記サリエンシー変更手段は、前記視界領域の左側側縁部と右側側縁部と上縁部との少なくとも３箇所についてサリエンシーを高めることができるように設定され、
前記制御手段は、前記３箇所のうち選択された少なくとも１箇所についてのサリエンシーを高めるように制御する、
ことを特徴とする視界制御装置。 In claim 1 or claim 2,
The saliency changing means is set so that saliency can be increased at least at three locations of the left side edge, the right side edge and the upper edge of the field of view,
The control means controls to increase the saliency of at least one selected from the three locations;
A visual field control device characterized by that.
前記操作者検出手段は、操作者が移動物体の操作に集中している集中状態であることを検出するものとされ、
前記抑制手段は、前記操作者検出手段によって操作者が前記集中状態であることが検出されたときは、該集中状態でないときに比して、サリエンシーを高める制御を抑制させる、
ことを特徴とする視界制御装置。 In any one of Claims 1 thru | or 3,
The operator detection means detects that the operator is in a concentrated state where the operator is concentrated on the operation of the moving object,
The suppression means suppresses control to increase saliency when the operator detection means detects that the operator is in the concentrated state, compared to when the operator is not in the concentrated state,
A visual field control device characterized by that.
前記制御手段は、サリエンシーの上限強度の範囲内でサリエンシーを高める制御を行い、
前記抑制手段は、前記集中状態のときは該集中状態でないときに比して、前記上限強度を低下させる、
ことを特徴とする視界制御装置。 In claim 4,
The control means performs control to increase saliency within the range of the upper limit strength of saliency,
The suppression means reduces the upper limit strength in the concentrated state as compared to when not in the concentrated state,
A visual field control device characterized by that.
前記操作者検出手段は、操作者が移動物体の操作を能動的に行っている能動状態であることを検出するものとされ、
前記抑制手段は、前記操作者検出手段によって操作者が前記能動状態であることが検出されたときは、該能動状態でないときに比してサリエンシーを高める制御を遅延して行わせる、
ことを特徴とする視界制御装置。 In any one of Claims 1 thru | or 5,
The operator detection means detects that the operator is in an active state where the operator is actively operating a moving object,
When the operator detecting unit detects that the operator is in the active state, the suppressing unit delays the control for increasing the saliency as compared to when the operator is not in the active state.
A visual field control device characterized by that.
前記操作者検出手段は、操作者が移動物体の操作を能動的に行っている能動状態であることを検出するものとされ、
前記抑制手段は、前記操作者検出手段によって操作者が前記能動状態であることが検出されたときは、該能動状態でないときに比して、サリエンシーを高めることをゆっくりと行わせる、
ことを特徴とする視界制御装置。 In any one of Claims 1 thru | or 5,
The operator detection means detects that the operator is in an active state where the operator is actively operating a moving object,
The suppression means slowly increases the saliency when the operator detection means detects that the operator is in the active state, as compared to when the operator is not in the active state.
A visual field control device characterized by that.
前記操作者の視線方向を検出する視線方向検出手段と、
前記視界領域中において操作者が視認すべき視認対象物を検出する視認対象物検出手段と、
をさらに備え、
前記制御手段は、前記視認対象物検出手段によって検出された視認対象物の方向についてサリエンシーを高める制御を行うようにされ、
前記抑制手段は、前記視認対象物検出手段によって検出された視認対象物の方向に操作者の視線方向が向いているときは、サリエンシーを高める制御を抑制させる、
ことを特徴とする視界制御装置。 In claim 1 or claim 2,
Gaze direction detection means for detecting the gaze direction of the operator;
A visual object detection means for detecting a visual object to be visually recognized by the operator in the visual field area;
Further comprising
The control means is configured to perform control to increase saliency with respect to the direction of the visual object detected by the visual object detection means,
The suppression means suppresses control to increase saliency when the line-of-sight direction of the operator is directed to the direction of the visual object detected by the visual object detection means,
A visual field control device characterized by that.
前記視界領域が、車両のフロントウインドガラスとされ、
前記操作者が、車両の運転者とされている、
ことを特徴とする視界制御装置。 In any one of Claims 1 thru | or 8,
The field of view is the front windshield of the vehicle,
The operator is a vehicle driver;
A visual field control device characterized by that.
前記視界領域が、車両におけるバックミラー、サイドミラー、設定された所定方向を映し出すディスプレイのいずれかとされ、
前記操作者が、車両の運転者とされている、
ことを特徴とする視界制御装置。 In any one of Claim 1 thru | or Claim 9,
The field of view is one of a rear mirror, a side mirror, and a display that displays a set predetermined direction in a vehicle,
The operator is a vehicle driver;
A visual field control device characterized by that.
前記サリエンシー変更手段が、輝度を変更するものとされ、
前記制御手段が、前記視界領域内の情景に対して輝度差を高めるように制御し、
前記抑制手段が、輝度差が小さくなるように制御する、
ことを特徴とする視界制御装置。 In any one of Claims 1 thru | or 10,
The saliency changing means is to change the brightness,
The control means controls to increase the brightness difference with respect to the scene in the field of view;
The suppression means controls the brightness difference to be small;
A visual field control device characterized by that.
前記サリエンシー変更手段が、色を変更可能とされている、ことを特徴とする視界制御装置。 In claim 11,
The field of view control device characterized in that the saliency changing means is capable of changing a color.
前記抑制手段は、サリエンシーを高める部分の面積範囲を小さくさせる、ことを特徴とする視界制御装置。 In any one of Claims 1 thru | or 12,
The field-of-view control device characterized in that the suppression means reduces the area range of the portion that increases saliency.
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2016145887A JP6384528B2 (en) | 2016-07-26 | 2016-07-26 | Visibility control device |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2016145887A JP6384528B2 (en) | 2016-07-26 | 2016-07-26 | Visibility control device |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2018016119A true JP2018016119A (en) | 2018-02-01 |
| JP6384528B2 JP6384528B2 (en) | 2018-09-05 |
Family
ID=61081309
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2016145887A Active JP6384528B2 (en) | 2016-07-26 | 2016-07-26 | Visibility control device |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP6384528B2 (en) |
Citations (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2002264689A (en) * | 2001-03-12 | 2002-09-18 | Nissan Motor Co Ltd | Display device for vehicle |
| JP2003054334A (en) * | 2001-08-13 | 2003-02-26 | Nissan Motor Co Ltd | Display for vehicle |
| JP2007086880A (en) * | 2005-09-20 | 2007-04-05 | Denso Corp | Information-providing device for vehicle |
| JP2016086355A (en) * | 2014-10-28 | 2016-05-19 | 株式会社デンソー | Gaze guide device |
| JP2016084019A (en) * | 2014-10-27 | 2016-05-19 | マツダ株式会社 | View adjustment device of vehicle |
-
2016
- 2016-07-26 JP JP2016145887A patent/JP6384528B2/en active Active
Patent Citations (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2002264689A (en) * | 2001-03-12 | 2002-09-18 | Nissan Motor Co Ltd | Display device for vehicle |
| JP2003054334A (en) * | 2001-08-13 | 2003-02-26 | Nissan Motor Co Ltd | Display for vehicle |
| JP2007086880A (en) * | 2005-09-20 | 2007-04-05 | Denso Corp | Information-providing device for vehicle |
| JP2016084019A (en) * | 2014-10-27 | 2016-05-19 | マツダ株式会社 | View adjustment device of vehicle |
| JP2016086355A (en) * | 2014-10-28 | 2016-05-19 | 株式会社デンソー | Gaze guide device |
Also Published As
| Publication number | Publication date |
|---|---|
| JP6384528B2 (en) | 2018-09-05 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP6354804B2 (en) | Visibility control device | |
| US20190315275A1 (en) | Display device and operating method thereof | |
| US10144289B2 (en) | Display apparatus and method for controlling the same | |
| JP5341402B2 (en) | In-vehicle display system | |
| US10269331B2 (en) | Display control device for vehicle | |
| US20170269370A1 (en) | Display control device for vehicle | |
| JP6460019B2 (en) | Vehicle control device | |
| JP2008001182A (en) | Vehicular visual information presenting device and method | |
| JP2008037167A (en) | Vehicular information display device | |
| JP3931343B2 (en) | Route guidance device | |
| JP2008030729A (en) | Vehicular display device | |
| JP3931342B2 (en) | Route guidance device | |
| KR20200142571A (en) | Method and apparatus for operating vehicle camera monitor system | |
| JP2016088187A (en) | Vehicular transmission display device | |
| US20200346692A1 (en) | Method for Assisting a Use of a Motor Vehicle When Swerving Around an Obstacle, Driver Assistance Device, and a Motor Vehicle | |
| JP6653184B2 (en) | Display device for vehicles | |
| JP2007230491A (en) | Visual sense information presentation device and visual sense information presentation method | |
| JP2006347451A (en) | Device and method for presenting visual information | |
| JP2016022919A (en) | Head-up display device and vehicle | |
| JP6354805B2 (en) | Visibility control device | |
| JP6384528B2 (en) | Visibility control device | |
| JP6658358B2 (en) | Vehicle control device | |
| JP6380480B2 (en) | Visibility control device | |
| JP3890598B2 (en) | Vehicle information providing apparatus, vehicle information providing method, and vehicle information providing program | |
| JP6384529B2 (en) | Visibility control device |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20180213 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20180412 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20180515 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20180615 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20180710 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20180723 |
|
| R150 | Certificate of patent or registration of utility model |
Ref document number: 6384528 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |