JP2018120267A - On-vehicle display method and on-vehicle display device - Google Patents
On-vehicle display method and on-vehicle display device Download PDFInfo
- Publication number
- JP2018120267A JP2018120267A JP2017009250A JP2017009250A JP2018120267A JP 2018120267 A JP2018120267 A JP 2018120267A JP 2017009250 A JP2017009250 A JP 2017009250A JP 2017009250 A JP2017009250 A JP 2017009250A JP 2018120267 A JP2018120267 A JP 2018120267A
- Authority
- JP
- Japan
- Prior art keywords
- display
- image
- vehicle
- occupant
- displayed
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims abstract description 167
- 230000007177 brain activity Effects 0.000 claims abstract description 29
- 210000004556 brain Anatomy 0.000 abstract description 42
- 230000015556 catabolic process Effects 0.000 abstract 1
- 238000006731 degradation reaction Methods 0.000 abstract 1
- 238000012545 processing Methods 0.000 description 29
- 238000001514 detection method Methods 0.000 description 11
- 230000007423 decrease Effects 0.000 description 10
- 238000004891 communication Methods 0.000 description 9
- 230000000694 effects Effects 0.000 description 8
- 238000012986 modification Methods 0.000 description 8
- 230000004048 modification Effects 0.000 description 8
- 238000010586 diagram Methods 0.000 description 7
- 210000005252 bulbus oculi Anatomy 0.000 description 6
- 230000000875 corresponding effect Effects 0.000 description 6
- 230000003247 decreasing effect Effects 0.000 description 5
- 230000001276 controlling effect Effects 0.000 description 3
- 238000013461 design Methods 0.000 description 3
- 230000003727 cerebral blood flow Effects 0.000 description 2
- 230000006866 deterioration Effects 0.000 description 2
- 210000003128 head Anatomy 0.000 description 2
- 230000001133 acceleration Effects 0.000 description 1
- 230000033228 biological regulation Effects 0.000 description 1
- 230000003920 cognitive function Effects 0.000 description 1
- 238000004590 computer program Methods 0.000 description 1
- 230000002596 correlated effect Effects 0.000 description 1
- 230000003111 delayed effect Effects 0.000 description 1
- 230000004424 eye movement Effects 0.000 description 1
- 230000008921 facial expression Effects 0.000 description 1
- 230000006870 function Effects 0.000 description 1
- 239000000463 material Substances 0.000 description 1
- 238000005259 measurement Methods 0.000 description 1
- 230000029058 respiratory gaseous exchange Effects 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
Images
Landscapes
- Control Of Driving Devices And Active Controlling Of Vehicle (AREA)
- Instrument Panels (AREA)
- Traffic Control Systems (AREA)
- Navigation (AREA)
Abstract
Description
本発明は、車両の乗員へ提供する画像を制御する、車載用表示方法及び車載用表示装置に関する。 The present invention relates to an in-vehicle display method and an in-vehicle display device that control an image provided to a vehicle occupant.
従来、車両の乗員へ提供する画像を制御する技術として、例えば、特許文献1に記載されている技術がある。特許文献1に記載されている技術では、ディスプレイにナビゲーション画像として表示している情報量が相対的に少なく、且つ画面変化も相対的に少ないときに、ナビゲーション画像に代えて、情報を提供する画像をディスプレイに表示する。
Conventionally, as a technique for controlling an image provided to a vehicle occupant, for example, there is a technique described in
しかしながら、ディスプレイに表示する情報量は、運転負荷等によって見やすさが変わる。このため、特許文献1に記載されている技術では、乗員の状態によっては情報が煩雑になり、利便性が低下する場合があるという問題点があった。
本発明は、上記のような問題点に着目してなされたもので、利便性の低下を抑制することが可能な、車載用表示方法及び車載用表示装置を提供することを目的とする。
However, the amount of information displayed on the display changes depending on the driving load and the like. For this reason, in the technique described in
The present invention has been made paying attention to the above-described problems, and an object thereof is to provide an in-vehicle display method and an in-vehicle display device that can suppress a decrease in convenience.
本発明の一態様によれば、車両の乗員が視認可能なディスプレイに画像を表示しているときに検出した乗員の脳活動から、乗員の違和感が有ると判定すると、ディスプレイに表示している画像を変更する。 According to one aspect of the present invention, when it is determined that there is a sense of incongruity of the occupant from the brain activity of the occupant detected when the image is displayed on a display that is visible to the occupant of the vehicle, the image displayed on the display To change.
本発明によれば、ディスプレイに表示している画像に対して乗員の違和感が有ると、ディスプレイに表示している画像を変更することで、利便性の低下を抑制することが可能な、車載用表示方法及び車載用表示装置を提供することが可能となる。 According to the present invention, when there is a sense of incongruity with an occupant with respect to an image displayed on the display, the deterioration of convenience can be suppressed by changing the image displayed on the display. It becomes possible to provide a display method and a vehicle-mounted display device.
以下に、図面を参照して、本発明の実施形態を説明する。以下の図面の記載において、同一または類似の部分には、同一または類似の符号を付与している。ただし、図面は模式的なものである。また、図面相互間においても、互いの寸法の関係や比率が異なる部分が含まれていることは勿論である。また、以下に示す実施形態は、本発明の技術的思想を具体化するための装置や方法を例示するものであって、本発明の技術的思想は、構成部品の材質、形状、構造、配置等を下記のものに特定するものではない。本発明の技術的思想は、特許請求の範囲に記載された請求項が規定する技術的範囲内において、種々の変更を加えることが可能である。 Embodiments of the present invention will be described below with reference to the drawings. In the following description of the drawings, the same or similar reference numerals are given to the same or similar parts. However, the drawings are schematic. Moreover, it is a matter of course that the drawings include portions having different dimensional relationships and ratios. Further, the following embodiments exemplify apparatuses and methods for embodying the technical idea of the present invention, and the technical idea of the present invention is the material, shape, structure, and arrangement of components. Etc. are not specified as follows. The technical idea of the present invention can be variously modified within the technical scope defined by the claims described in the claims.
(第一実施形態)
以下、本発明の第一実施形態について、図面を参照しつつ説明する。
(車載用表示装置の構成)
図1から図4を用いて、車載用表示装置1の構成について説明する。
車載用表示装置1は、車両に搭載されており、図1に表すように、周囲状況センサ2と、運転状態センサ4と、生体情報センサ6と、ディスプレイDPと、スピーカSPと、コントローラ10と、を備える。
周囲状況センサ2は、車両の周囲状況を検出し、検出した周囲状況を示す情報を、逐次、コントローラ10に出力する。周囲状況センサ2は、例えば、車両の周囲状況の情報をそれぞれ取得する複数のセンサを備える。第一実施形態では、一例として、周囲状況センサ2が、地図データベース20と、GPS受信機22と、通信機24と、を備える場合について説明する。
(First embodiment)
Hereinafter, a first embodiment of the present invention will be described with reference to the drawings.
(Configuration of in-vehicle display device)
The configuration of the in-
The in-
The
地図データベース20は、地図データを格納する記憶装置である。地図データベース20は、例えば、半導体メモリやディスクメディア等の記憶媒体から構成される。地図データベース20は、曲率や幅を含む道路形状、道路種別、車線数等の一般的なカーナビゲーション装置における地図データに加えて、車線境界線の位置、通行帯区分、道路周辺の地物の位置及び形状等に関する情報を含む高精細な地図データを格納する。
GPS受信機22は、人工衛星から受信する電波に基づいて、車両の緯度、経度及び高度を算出し、地図データベース20に格納される地図データと整合させることにより、地図データにおける車両の現在位置を取得する。すなわち、GPS受信機22は、地図データベース20と共に、地図データにおける車両の現在位置を検出する測位装置を構成する。
The
The
通信機24は、無線通信により、外部から車両の周囲状況を取得する通信インターフェースである。通信機24は、例えば、車線単位の渋滞情報、交通規制情報等の交通情報や、天気情報等をリアルタイムに送信する高度道路交通システム(ITS)から、種々の情報を受信し得る。ITSは、車々間通信、路車間通信、VICS(登録商標)(Vehicle Information and Communication System)、テレマティクス等を含む。通信機24は、例えば、車々間通信により、車両の周囲の他車両の加減速度や、車両に対する相対位置等を検出する。
The
運転状態センサ4は、車両の運転状態を検出し、検出した運転状態を示す情報を、逐次、コントローラ10に出力する。運転状態センサ4は、例えば、車両の運転状態の情報をそれぞれ取得する複数のセンサから構成される。第一実施形態では、一例として、運転状態センサ4が、アクセル開度センサ40と、ブレーキスイッチ42と、ステアリング操作量センサ44と、を備える場合について説明する。
アクセル開度センサ40は、例えば車両のアクセルペダルの踏み込み量から、車両のアクセル開度を検出する。ブレーキスイッチ42は、運転者による車両のブレーキの操作状態、すなわち、ブレーキの作動状態を検出する。ステアリング操作量センサ44は、車両のステアリングホイールの操作角、または、操向輪の操舵角を検出する。
The driving state sensor 4 detects the driving state of the vehicle, and sequentially outputs information indicating the detected driving state to the
The
生体情報センサ6は、車両の乗員(運転者)の生体情報を検出し、検出した生体情報を、逐次、コントローラ10に出力する。乗員の生体情報は、脳の活動情報を含み、乗員が感じる違和感を推定可能な生体情報である。なお、乗員の生体情報は、乗員の脳波、脳血流、心拍数、呼吸、発汗量及び顔画像のうち少なくとも一つに基づいて、検出することが可能である。これらの生体情報のうち、脳波や脳血流より乗員の脳活動を検出する。第一実施形態では、一例として、生体情報センサ6が、脳波センサ60と、カメラ62と、心拍センサ64と、を備える場合について説明する。
The biological information sensor 6 detects biological information of a vehicle occupant (driver) and sequentially outputs the detected biological information to the
脳波センサ60は、乗員の脳波を、車両の運転中にリアルタイムで検出するセンサである。また、脳波センサ60は、乗員の頭部に取り付ける複数の電極を備える。複数の電極は、例えば、国際10−20法に準拠し、図2中に表すように、乗員の頭頂部のうち、認知機能に関わる位置である、Fz,Fcz,Cz,CPzに配置する。図2中では、Fz,Fcz,Cz,CPzに配置した電極8を、それぞれ、電極8Fz,電極8Fcz,電極8Cz,電極8CPzと表す。なお、複数の電極8は、乗員の頭部に配置しやすいように、例えば、装着型の電極帽子やヘッドホンで形成してもよく、また、ヘッドレストに設けられた複数の電極で形成してもよい。
The
カメラ62は、車両Pの車室内において、乗員(運転者)の顔を正面から撮影する位置に配置され、例えば、CCDカメラや、近赤外LEDと赤外線カメラとの組み合わせ等を用いることが可能である。カメラ62は、乗員の視線、表情、動作等を検出するために、乗員の画像を撮像する。
心拍センサ64は、心拍数センサは、乗員の心拍数を、車両の運転中にリアルタイムで測定するセンサであり、車両が備えるステアリングや座席に取り付ける電極を備える。また、心拍センサ64は、車両の乗員に対し、乗員(運転者)が受ける運転負荷(運転ワークロード)を推定可能な生体情報として、乗員の心拍数を測定する。
The
The
ディスプレイDPは、コントローラ10に接続されており、乗員が視認可能となるように、車室内のコンソール等に配置されている。なお、ディスプレイDPとしては、例えば、ナビゲーションシステムが備えるディスプレイや、インストルメントパネルに配置されたディスプレイを用いる。また、ディスプレイDPは、コントローラ10から出力画像信号(後述)の入力を受けると、出力画像信号が含む画像(ナビゲーション画像等)を表示する。
スピーカSPは、コントローラ10に接続されており、車室内のコンソール等に配置されている。また、スピーカSPは、出力画像信号が含む画像(ナビゲーション画像等)に応じた音声を出力する。
The display DP is connected to the
The speaker SP is connected to the
コントローラ10は、例えば、マイクロコンピュータで構成する。マイクロコンピュータは、例えば、CPU(Central Processing Unit)、RAM(Random Access Memory)、ROM(Read Only Memory)等を備えた構成である。
なお、図1にはコントローラ10の機能構成例を示す。コントローラ10は、ROMに格納されたコンピュータプログラムをCPUで実現することにより、脳情報取得部10Aと、注意状態取得部10Bと、違和感データベース10Cと、違和感判定部10Dと、表示状態取得部10Eと、情報量判定部10Fと、画像制御部10Gの機能を実現する。
The
FIG. 1 shows a functional configuration example of the
脳情報取得部10Aは、生体情報センサ6から入力を受けた生体情報を用いて、乗員の脳情報を取得する。乗員の脳情報を取得した脳情報取得部10Aは、取得した脳情報を含む情報信号(以降の説明では、「脳情報信号」と記載する場合がある)を、違和感判定部10Dへ出力する。第一実施形態では、乗員の生体情報として、複数の電極8で測定した、乗員の脳波のパターンを取得する場合について説明する。したがって、脳情報信号は、複数の電極8で測定した脳波のパターンを含む。
注意状態取得部10Bは、乗員の注意状態を測定する。乗員の注意状態を測定した注意状態取得部10Bは、測定した注意状態を含む情報信号(以降の説明では、「注意状態信号」と記載する場合がある)を、違和感判定部10Dへ出力する。乗員の注意状態は、乗員の注意がディスプレイDPの画面へ向いたことを推定可能な生体情報である。また、乗員の注意状態は、乗員の脳波に応じた眼電図及び顔画像のうち少なくとも一方を用いて、検出することが可能である。
The brain
The attention
眼電図は、眼球前後間で発生する定常電位の記録や、眼球運動に相関する電位の変化を表す図であり、眼球近くの皮膚に配置した電極(例えば、図2中で位置Fzに配置した電極8Fz)で測定する。第一実施形態では、一例として、注意状態取得部10Bの構成を、脳波センサ60により検出した脳波に応じた眼電図を用いて、乗員の注意状態を測定する構成とした場合を説明する。眼電図を用いて注意状態を測定する際には、例えば、図3中に表すように、電極8Fzで測定した電位Vの変化を計測し、混入する眼電図の動きから、眼球が停留していることを表す電位Vを検出する。なお、図3中には、眼球が停留していることを表す電位Vを検出した時点を、符号PTで表す。
The electrooculogram is a diagram showing a recording of a steady potential generated between before and after the eyeball and a change in potential correlated with eye movement, and an electrode placed on the skin near the eyeball (for example, placed at a position Fz in FIG. 2). Electrode 8Fz). In the first embodiment, as an example, the case where the configuration of the attention
違和感データベース10Cには、乗員の違和感を検出するために使用される脳波パターンが記憶されている。違和感データベース10Cに記憶されている脳波パターンは、過去に乗員の違和感が有ると判定したときの脳波パターンである。すなわち、違和感データベース10Cには、過去に違和感が有ると判定したときの脳活動を蓄積しておく。
違和感判定部10Dは、脳情報信号と注意状態信号の入力を受ける。そして、時点PTの注意状態を含む注意状態信号の入力を受けたタイミングで、脳情報信号が含む脳波のパターン、すなわち、リアルタイムで測定された脳波のパターンのうち、時点PTにおける脳波のパターンを参照する。さらに、時点PTにおける脳波のパターンを、違和感データベース10Cに記憶されている脳波パターンに照合することで、乗員が受ける違和感の有無(違和感を覚えているか否か)を判定する。違和感の有無を判定した違和感判定部10Dは、判定結果を含む情報信号(以降の説明では、「違和感判定信号」と記載する場合がある)を、情報量判定部10Fと画像制御部10Gへ出力する。なお、違和感判定部10Dは、例えば、時点PTにおける脳波のパターンと、違和感データベース10Cに記憶されている脳波パターンとの合致度が、予め設定した合致度閾値よりも高い場合に、違和感が有ると判定する。
In the
The
すなわち、違和感データベース10Cには、過去に違和感が有ると判定したときの脳活動を蓄積しておく。そして、違和感判定部10Dは、脳情報取得部10Aで検出した脳情報と違和感データベース10Cに蓄積している脳情報との比較に応じて、違和感の有無を判定する。
表示状態取得部10Eは、ディスプレイDPに表示されている画像の表示状態を取得する。表示状態を取得した表示状態取得部10Eは、取得した表示状態を含む情報信号(以降の説明では、「表示状態信号」と記載する場合がある)を、情報量判定部10Fへ出力する。第一実施形態では、一例として、表示状態取得部10Eが取得する表示状態を、ディスプレイDPに表示されている画像が含む文字数とした場合について説明する。
That is, the brain activity when it is determined that there is a sense of discomfort in the past is stored in the
The display
情報量判定部10Fは、予め設定した情報量閾値α1を記憶している。第一実施形態では、表示状態を文字数とするため、情報量閾値α1は、予め設定した文字数である。また、情報量判定部10Fは、違和感判定結果信号と表示状態信号の入力を受ける。そして、違和感判定結果信号が、違和感が有るとの判定結果を含む場合、表示状態信号が含む文字数が、情報量閾値α1を超えているか否かを判定する。文字数が情報量閾値α1を超えているか否かを判定した情報量判定部10Fは、判定結果を含む情報信号(以降の説明では、「情報量判定信号」と記載する場合がある)を、画像制御部10Gへ出力する。
The information
なお、情報量閾値α1の設定は、例えば、以下の手順で行う。
当初(出荷時等)は、一般的に表示される全国平均のデータ等の情報量(文字数)を設定しておく。そして、違和感が有るとの判定結果を取得した時点で、その時点の情報量(文字数)に情報量閾値α1を加算した値の平均値を、次回以降に情報量判定部10Fで用いる情報量閾値α1として設定(更新)する。
画像制御部10Gは、違和感判定信号と情報量判定信号の入力を受け、入力装置IFから指令信号の入力を受ける。そして、違和感判定信号、情報量判定信号、指令信号に応じて出力画像信号を生成し、生成した出力画像信号を、ディスプレイDPに出力する。
入力装置IFは、例えば、ナビゲーションシステムのタッチパネル(ディスプレイDPと兼用)である。また、入力装置IFとしては、例えば、リモコン等を用いることも可能である。指令信号は、例えば、乗員が目的地を入力した場合に、現在地から目的地へのナビゲーション画像をディスプレイDPに出力させるための信号である。
The information amount threshold value α1 is set by the following procedure, for example.
Initially (at the time of shipment, etc.), an information amount (number of characters) such as nationwide average data generally displayed is set. Then, when the determination result that there is a sense of incongruity is acquired, the average value of the value obtained by adding the information amount threshold value α1 to the information amount (number of characters) at that time is the information amount threshold value used in the information
The
The input device IF is, for example, a navigation system touch panel (also used as a display DP). Further, as the input device IF, for example, a remote controller or the like can be used. The command signal is, for example, a signal for causing the display DP to output a navigation image from the current location to the destination when the occupant inputs the destination.
出力画像信号の生成は、以下の手順で行う。
違和感判定結果信号が、違和感が無いとの判定結果を含む場合、指令信号に応じて、例えば、ナビゲーション画像等をディスプレイDPに表示させるための出力画像信号を生成する。
違和感判定結果信号が、違和感が有るとの判定結果を含む場合、情報量判定信号に応じて、ディスプレイDPに表示されている画像の情報量を制御するための出力画像信号を生成する。具体的には、情報量判定信号が、表示状態信号が含む文字数が情報量閾値α1を超えているとの判定結果を含む場合、ディスプレイDPに表示されている画像の情報量を減少させる出力画像信号を生成する。第一実施形態では、表示状態を文字数とするため、ディスプレイDPに表示されている画像の情報量を減少させる処理は、例えば、図4中に表すように、ディスプレイDPに表示されている画像が含む文字数を減少させる処理である。なお、図4Aは、情報量を減少させる処理を行う前の画像(処理前の画像)を表す図である。また、図4Bは、図4Aに表す画像に対して、情報量を減少させる処理を行った画像(処理後の画像)を表す図である。一方、情報量判定信号が、表示状態信号が含む文字数が情報量閾値α1以下であるとの判定結果を含む場合、ディスプレイDPに表示されている画像の情報量を増加させる出力画像信号を生成する。第一実施形態では、表示状態を文字数とするため、ディスプレイDPに表示されている画像の情報量を増加させる処理は、ディスプレイDPに表示されている画像が含む文字数を増加させる処理である。
The output image signal is generated in the following procedure.
When the uncomfortable feeling determination result signal includes a determination result that there is no uncomfortable feeling, for example, an output image signal for displaying a navigation image or the like on the display DP is generated according to the command signal.
When the uncomfortable feeling determination result signal includes a determination result that there is a sense of incongruity, an output image signal for controlling the information amount of the image displayed on the display DP is generated according to the information amount determining signal. Specifically, when the information amount determination signal includes a determination result that the number of characters included in the display state signal exceeds the information amount threshold value α1, an output image that reduces the information amount of the image displayed on the display DP. Generate a signal. In the first embodiment, since the display state is the number of characters, the process of reducing the information amount of the image displayed on the display DP is, for example, as shown in FIG. This is a process to reduce the number of characters included. FIG. 4A is a diagram illustrating an image (an image before the process) before performing the process of reducing the information amount. FIG. 4B is a diagram illustrating an image (processed image) obtained by performing a process of reducing the information amount on the image illustrated in FIG. 4A. On the other hand, when the information amount determination signal includes a determination result that the number of characters included in the display state signal is equal to or less than the information amount threshold value α1, an output image signal that increases the information amount of the image displayed on the display DP is generated. . In the first embodiment, since the display state is the number of characters, the process of increasing the information amount of the image displayed on the display DP is a process of increasing the number of characters included in the image displayed on the display DP.
(車載用表示装置1が行う処理)
図1から図4を参照しつつ、図5を用いて、車載用表示装置1が行う処理の一例を説明する。なお、以降の説明では、車載用表示装置1が行う処理を、「表示制御処理」と記載する場合がある。
図2中に表すように、表示制御処理を開始(START)すると、まず、ステップS100の処理を行う。
ステップS100では、乗員が要求する情報を提供するために、ディスプレイDPに、ナビゲーション画像等を表示する処理(図に表す「ディスプレイ表示」)を行う。ステップS100の処理を行うと、表示制御処理は、ステップS102へ移行する。ステップS102では、違和感の有無を判定するために、違和感判定部10Dにより、ディスプレイDPに表示されている画像に対して、乗員が違和感を受けているか否かを判定する処理(図に表す「表示中に違和感有り」)を行う。
(Processing performed by the in-vehicle display device 1)
One example of processing performed by the in-
As shown in FIG. 2, when the display control process is started (START), first, the process of step S100 is performed.
In step S100, in order to provide information required by the occupant, a process of displaying a navigation image or the like on the display DP ("display display" shown in the figure) is performed. When the process of step S100 is performed, the display control process proceeds to step S102. In step S102, in order to determine whether or not there is a sense of discomfort, the
ステップS102において、乗員が違和感を受けている(図に表す「Yes」)と判定した場合、表示制御処理は、ステップS104へ移行する。一方、ステップS102において、乗員が違和感を受けていない(図に表す「No」)と判定した場合、表示制御処理は、ステップS100へ移行する。
ステップS104では、画像を変更するためのパラメータを取得するために、表示状態取得部10Eにより、ディスプレイDPに表示されている画像に対し、情報量を取得する処理(図に表す「情報量を取得」)を行う。ステップS104の処理を行うと、表示制御処理は、ステップS106へ移行する。ステップS106では、画像を変更するためのパラメータを取得するために、情報量判定部10Fにより、ステップS104で取得した文字数である情報量が、情報量閾値α1を超えているか否かを判定する処理(図に表す「情報量>情報量閾値α1」)を行う。
If it is determined in step S102 that the occupant is feeling uncomfortable (“Yes” shown in the figure), the display control process proceeds to step S104. On the other hand, if it is determined in step S102 that the occupant does not feel uncomfortable ("No" shown in the figure), the display control process proceeds to step S100.
In step S104, in order to obtain parameters for changing the image, the display
ステップS106において、情報量が情報量閾値α1を超えている(図に表す「Yes」)と判定した場合、表示制御処理は、ステップS108へ移行する。一方、ステップS106において、情報量が情報量閾値α1以下である(図に表す「No」)と判定した場合、表示制御処理は、ステップS110へ移行する。
ステップS108では、画像制御部10Gにより、ディスプレイDPに表示されている画像の情報量を減少させる処理(図に表す「情報量を減少」)を行う(例えば、図4Aの状態から図4Bの状態へ移行)。これにより、ステップS108では、乗員に提供する情報が煩雑となることを抑制する。ステップS108の処理を行うと、表示制御処理は、ステップS100の処理へ復帰(RETURN)する。
ステップS110では、画像制御部10Gにより、ディスプレイDPに表示されている画像の情報量を増加させる処理(図に表す「情報量を増加」)を行う(例えば、図4Bの状態から図4Aの状態へ移行)。これにより、ステップS110では、運転中の情報取得における利便性を向上させることが可能となる。ステップS110の処理を行うと、表示制御処理は、ステップS100の処理へ復帰(RETURN)する。
If it is determined in step S106 that the information amount exceeds the information amount threshold value α1 (“Yes” shown in the figure), the display control process proceeds to step S108. On the other hand, when it is determined in step S106 that the information amount is equal to or less than the information amount threshold value α1 (“No” shown in the figure), the display control process proceeds to step S110.
In step S108, the
In step S110, the
(動作)
図1から図5を参照して、第一実施形態の車載用表示装置1を用いて行なう動作の一例を説明する。
車両の走行時には、脳波センサ60により、乗員の脳波を測定する。これに加え、車両の走行時には、例えば、乗員による入力装置IFの操作に応じて、現在地から目的地までの移動経路を表すナビゲーション画像を、ディスプレイDPに表示する。ディスプレイDPに画像が表示されている状態で、電極8Fzが、眼球が停留していることを表す電位Vを検出すると、違和感判定部10Dが、ディスプレイDPに表示されている画像に対して、乗員が違和感を受けているか否かを判定する。なお、ディスプレイDPに表示する画像は、乗員による入力装置IFの操作に応じた、手動で提供する画像に限定するものではなく、例えば、観光施設の情報を表す画像等、地図データと車両の現在位置に応じて自動的に提供される画像であってもよい。
(Operation)
With reference to FIGS. 1 to 5, an example of an operation performed using the vehicle-mounted
When the vehicle is running, the brain wave of the occupant is measured by the
そして、違和感判定部10Dが、乗員が違和感を受けていると判定すると、情報量判定部10Fが、表示状態取得部10Eが取得した情報量が情報量閾値α1を超えているか否かを判定する。情報量判定部10Fが、表示状態取得部10Eが取得した情報量が情報量閾値α1を超えていると判定すると、画像制御部10Gが、ディスプレイDPに表示されている画像の情報量を減少させる処理(図4A、図4Bを参照)を行う。
すなわち、第一実施形態の車載用表示装置1では、コントローラ10により、ディスプレイDPに画像を表示しているときに脳波センサ60が検出した脳活動から乗員の違和感の有無を判定し、違和感が有ると判定すると、表示している画像を変更する。
When the uncomfortable
That is, in the in-
したがって、第一実施形態の車載用表示装置1であれば、ディスプレイDPに表示されている画像に対し、運転者等の乗員が違和感を受けていると判定すると、乗員が違和感を受けている画像を変更することが可能となる。なお、上述した脳波センサ60は、乗員の脳活動を検出するセンサに対応する。
また、上述したように、第一実施形態の車載用表示装置1の動作で実施する車載用表示方法では、ディスプレイDPに画像を表示しているときに乗員の脳活動を検出し、検出した脳活動から乗員の違和感の有無を判定する。そして、違和感が有ると判定すると、ディスプレイDPに表示している画像を変更する。
Therefore, in the case of the in-
Further, as described above, in the in-vehicle display method implemented by the operation of the in-
また、第一実施形態の車載用表示方法では、乗員の注意状態を検出し、ディスプレイDPに表示している画像に対する注意状態を検出した時点で、違和感の有無を判定する。
さらに、第一実施形態の車載用表示方法では、ディスプレイDPに表示している画像の表示状態(文字数)を変更(減少、増加)することで、ディスプレイDPに表示している画像を変更する。
また、第一実施形態の車載用表示方法では、過去に違和感が有ると判定したときの脳活動を蓄積しておき、検出した脳活動と蓄積している脳活動との比較に応じて、違和感の有無を判定する。
なお、上述した第一実施形態は、本発明の一例であり、本発明は、上述した第一実施形態に限定されることはなく、この実施形態以外の形態であっても、本発明に係る技術的思想を逸脱しない範囲であれば、設計等に応じて種々の変更が可能である。
In the in-vehicle display method of the first embodiment, the caution state of the occupant is detected, and when the caution state with respect to the image displayed on the display DP is detected, it is determined whether or not there is a sense of discomfort.
Furthermore, in the vehicle-mounted display method according to the first embodiment, the image displayed on the display DP is changed by changing (decreasing or increasing) the display state (number of characters) of the image displayed on the display DP.
In addition, in the in-vehicle display method of the first embodiment, brain activity when it is determined that there is a sense of incongruity in the past is accumulated, and the sense of incongruity is determined according to the comparison between the detected brain activity and the accumulated brain activity. The presence or absence of is determined.
The above-described first embodiment is an example of the present invention, and the present invention is not limited to the above-described first embodiment, and the present invention may be applied to other forms than this embodiment. Various modifications can be made according to the design or the like as long as they do not depart from the technical idea.
(第一実施形態の効果)
第一実施形態の車載用表示装置1を用いた車載用表示方法であれば、以下に記載する効果を奏することが可能となる。
(1)ディスプレイDPに画像を表示しているときに乗員の脳活動を検出し、検出した脳活動から乗員の違和感の有無を判定し、違和感が有ると判定すると、ディスプレイDPに表示している画像を変更する。
このため、ディスプレイDPに表示している画像に対して乗員の違和感が有ると、ディスプレイDPに表示している画像を変更することで、乗員の状態に応じた画像を、ディスプレイDPに表示することが可能となる。その結果、乗員に提供する情報が煩雑となることを抑制することが可能となり、利便性の低下を抑制することが可能な、車載用表示方法を提供することが可能となる。
(Effects of the first embodiment)
If it is the vehicle-mounted display method using the vehicle-mounted
(1) When an image is displayed on the display DP, the occupant's brain activity is detected, the presence / absence of the occupant's discomfort is determined from the detected brain activity, and when it is determined that there is a discomfort, the display DP displays Change the image.
For this reason, if there is a sense of incongruity with the passenger on the image displayed on the display DP, the image displayed on the display DP can be displayed on the display DP by changing the image displayed on the display DP. Is possible. As a result, it is possible to prevent the information provided to the passenger from becoming complicated, and it is possible to provide an in-vehicle display method capable of suppressing a decrease in convenience.
(2)乗員の注意状態を検出し、ディスプレイDPに表示している画像に対する注意状態を検出した時点で、違和感の有無を判定する。その結果、ディスプレイDPに表示している画像に対する乗員の違和感の有無を、適切なタイミングで判定することが可能となり、違和感の有無を判定する精度を向上させることが可能となる。
(3)ディスプレイDPに表示している画像の表示状態を変更することで、ディスプレイDPに表示している画像を変更する。その結果、複雑な処理を必要とせずに、乗員の状態に応じた画像を、ディスプレイDPに表示することが可能となる。
(2) When the caution state of the passenger is detected and the caution state with respect to the image displayed on the display DP is detected, it is determined whether or not there is a sense of discomfort. As a result, it is possible to determine whether or not the passenger feels uncomfortable with respect to the image displayed on the display DP at an appropriate timing, and it is possible to improve the accuracy of determining the presence or absence of the uncomfortable feeling.
(3) The image displayed on the display DP is changed by changing the display state of the image displayed on the display DP. As a result, an image corresponding to the occupant's state can be displayed on the display DP without requiring complicated processing.
(4)過去に違和感が有ると判定したときの脳活動を蓄積しておき、検出した脳活動と蓄積している脳活動との比較に応じて、違和感の有無を判定する。その結果、過去に判定した実績の有るデータと、現時点で検出したデータとの比較により、違和感の有無を判定することが可能となり、違和感の有無を判定する精度を向上させることが可能となる。
また、第一実施形態の車載用表示装置1であれば、以下に記載する効果を奏することが可能となる。
(5)乗員が視認可能なディスプレイDPに画像を表示しているときに、乗員の脳活動を検出する脳波センサ60が検出した脳活動から乗員の違和感の有無を判定する。そして、違和感が有ると判定すると、ディスプレイDPに表示している画像を変更するコントローラ10を備える。
(4) The brain activity when it is determined that there is a sense of discomfort in the past is accumulated, and the presence or absence of discomfort is determined according to the comparison between the detected brain activity and the accumulated brain activity. As a result, it is possible to determine whether or not there is a sense of incompatibility by comparing the data with a past record determined in the past and the data detected at the present time, and it is possible to improve the accuracy of determining whether or not there is a sense of discomfort.
Moreover, if it is the vehicle-mounted
(5) When an image is displayed on the display DP visible to the occupant, the presence or absence of the occupant's discomfort is determined from the brain activity detected by the
このため、ディスプレイDPに表示している画像に対して乗員の違和感が有ると、ディスプレイDPに表示している画像を変更することで、乗員の状態に応じた画像を、ディスプレイDPに表示することが可能となる。その結果、乗員に提供する情報が煩雑となることを抑制することが可能となり、利便性の低下を抑制することが可能な、車載用表示装置1を提供することが可能となる。
For this reason, if there is a sense of incongruity with the passenger on the image displayed on the display DP, the image displayed on the display DP can be displayed on the display DP by changing the image displayed on the display DP. Is possible. As a result, it is possible to prevent the information provided to the occupant from being complicated, and it is possible to provide the vehicle-mounted
(第一実施形態の変形例)
(1)第一実施形態では、ディスプレイDPに表示している画像の表示状態を変更することで、ディスプレイDPに表示している画像を変更したが、これに限定するものではない。すなわち、ディスプレイDPに表示している画像の視認性を変更することで、ディスプレイDPに表示している画像を変更してもよい。また、ディスプレイDPに表示している画像の表示内容を変更することで、ディスプレイDPに表示している画像を変更してもよい。したがって、ディスプレイDPに表示している画像の視認性、表示状態及び表示内容のうち少なくとも一つを変更することで、ディスプレイDPに表示している画像を変更する構成であればよい。
(Modification of the first embodiment)
(1) In the first embodiment, the image displayed on the display DP is changed by changing the display state of the image displayed on the display DP. However, the present invention is not limited to this. That is, the image displayed on the display DP may be changed by changing the visibility of the image displayed on the display DP. Further, the image displayed on the display DP may be changed by changing the display content of the image displayed on the display DP. Therefore, the image displayed on the display DP may be changed by changing at least one of the visibility, display state, and display content of the image displayed on the display DP.
(2)第一実施形態では、ディスプレイDPに表示している画像に対して乗員の違和感が有ると、乗員の違和感が有ると判定したタイミングで、ディスプレイDPに表示している画像を変更したが、これに限定するものではない。すなわち、ディスプレイDPに表示している画像を変更した時点で乗員の違和感が有ると判定すると、ディスプレイDPに表示している画像を変更するタイミングを変化させる構成としてもよい。なお、ディスプレイDPに表示している画像を変更した時点とは、例えば、図4A中に表す、情報量を減少させる処理を行う前の画像から、図4B中に表す、図4Aに表す画像に対して、情報量を減少させる処理を行った画像に変更した時点である。
この場合、ディスプレイDPに表示している画像を変更するタイミングを、乗員の違和感が有ると判定したタイミングよりも遅らせることで、違和感を受けた画像が含む情報を乗員が視認する時間を確保することが可能となる。
(2) In the first embodiment, the image displayed on the display DP is changed at the timing when it is determined that there is an uncomfortable feeling of the occupant when the occupant feels uncomfortable with respect to the image displayed on the display DP. However, the present invention is not limited to this. That is, if it is determined that the passenger feels uncomfortable when the image displayed on the display DP is changed, the timing for changing the image displayed on the display DP may be changed. Note that the time point when the image displayed on the display DP is changed is, for example, from the image before the process of reducing the amount of information shown in FIG. 4A to the image shown in FIG. 4A shown in FIG. 4B. On the other hand, it is the time when the image is changed to the image on which the processing for reducing the information amount is performed.
In this case, the time for changing the image displayed on the display DP is delayed from the timing at which it is determined that there is a sense of incongruity of the occupant, thereby ensuring time for the occupant to visually recognize the information included in the image that has experienced the sense of discomfort. Is possible.
(3)第一実施形態では、表示状態を文字数とし、ディスプレイDPに表示されている画像の情報量を変化させる処理を、画像が含む文字数を変化させる処理としたが、これに限定するものではない。すなわち、例えば、図6中に表すように、画像の情報量を変化させる処理を、ナビゲーション画像が含む地図の拡大率を変化させる処理としてもよい。なお、図6Aは、情報量を減少させる処理を行う前の画像(処理前の画像)を表す図である。また、図6Bは、図6Aに表す画像に対して、情報量を減少させる処理を行った画像(処理後の画像)を表す図である。
この場合、情報量閾値α1は、予め設定した地図の拡大率や、予め設定した地図上に表示されているアイコンの数等としてもよい。
(3) In the first embodiment, the display state is the number of characters, and the process of changing the information amount of the image displayed on the display DP is the process of changing the number of characters included in the image. However, the present invention is not limited to this. Absent. That is, for example, as shown in FIG. 6, the process of changing the information amount of the image may be a process of changing the enlargement ratio of the map included in the navigation image. FIG. 6A is a diagram illustrating an image before the process of reducing the information amount (an image before the process). FIG. 6B is a diagram illustrating an image (processed image) obtained by performing a process of reducing the information amount on the image illustrated in FIG. 6A.
In this case, the information amount threshold α1 may be a preset map enlargement ratio, the number of icons displayed on the preset map, or the like.
(4)第一実施形態では、注意状態取得部10Bの構成を、脳波センサ60により検出した脳波に応じた眼電図を用いて、乗員の注意状態を測定する構成としたが、これに限定するものではない。すなわち、注意状態取得部10Bの構成を、カメラ62により撮影した乗員の顔画像から、乗員の視線を検出することで、乗員の注意がディスプレイDPの画面へ向いたことを推定し、乗員の注意状態を測定する構成としてもよい。
(5)第一実施形態では、ディスプレイDPに表示されている画像の表示状態(画像が含む文字数)が、情報量閾値α1未満である場合、ディスプレイDPに表示されている画像の情報量を増加させるが、これに限定するものではない。すなわち、ディスプレイDPに表示されている画像の表示状態が情報量閾値α1未満である場合に、ディスプレイDPに表示されている画像の情報量を維持してもよい。
(4) In the first embodiment, the configuration of the attention
(5) In the first embodiment, when the display state of the image displayed on the display DP (the number of characters included in the image) is less than the information amount threshold α1, the information amount of the image displayed on the display DP is increased. However, the present invention is not limited to this. That is, when the display state of the image displayed on the display DP is less than the information amount threshold α1, the information amount of the image displayed on the display DP may be maintained.
(第二実施形態)
以下、本発明の第二実施形態について、図面を参照しつつ説明する。
(車載用表示装置の構成)
図1から図6を参照しつつ、図7を用いて、第二実施形態の構成を説明する。なお、図中及び以降の説明では、上述した第一実施形態と同様の構成について、同一の符合を付して示す。また、以降の説明では、上述した第一実施形態と同様の構成については、説明を省略する場合がある。
(Second embodiment)
Hereinafter, a second embodiment of the present invention will be described with reference to the drawings.
(Configuration of in-vehicle display device)
The configuration of the second embodiment will be described with reference to FIGS. 1 to 6 and FIG. In the drawings and the following description, the same components as those in the first embodiment described above are denoted by the same reference numerals. Moreover, in the following description, description may be abbreviate | omitted about the structure similar to 1st embodiment mentioned above.
図7に表すように、車載用表示装置1は、周囲状況センサ2と、運転状態センサ4と、生体情報センサ6と、ディスプレイDPと、スピーカSPと、コントローラ10と、を備える。なお、コントローラ10以外の構成は、上述した第一実施形態と同様であるため、説明を省略する。
コントローラ10は、脳情報取得部10Aと、注意状態取得部10Bと、違和感データベース10Cと、違和感判定部10Dと、表示状態取得部10Eと、運転負荷検出部10Hと、画像制御部10Gと、を備える。なお、脳情報取得部10Aと、注意状態取得部10Bと、違和感データベース10Cの構成は、上述した第一実施形態と同様である。
As shown in FIG. 7, the in-
The
違和感判定部10Dは、脳情報信号と、注意状態信号と、出力画像信号の入力を受ける。そして、出力画像信号の入力を受けたタイミングで、脳情報信号が含む脳波のパターンを参照する。さらに、出力画像信号の入力を受けたタイミングにおける脳波のパターンを、違和感データベース10Cに記憶されている脳波パターンに照合することで、乗員が受ける違和感の有無を判定する。違和感の有無を判定した違和感判定部10Dは、違和感判定信号を、運転負荷検出部10Hと画像制御部10Gへ出力する。なお、出力画像信号の入力を受けたタイミングとは、例えば、乗員が入力装置IFを用いて目的地を入力し、現在地から目的地へのナビゲーション画像をディスプレイDPに出力させるための出力画像信号の入力を受けたタイミングである。
The uncomfortable
表示状態取得部10Eは、ディスプレイDPに表示されている画像の表示状態を取得し、表示状態信号を、画像制御部10Gへ出力する。
運転負荷検出部10Hは、違和感判定結果信号の入力を受ける。そして、違和感判定結果信号が、違和感が有るとの判定結果を含む場合、乗員(運転者)による車両の運転状態を取得する。さらに、取得した運転状態を用いて、乗員(運転者)が受ける運転負荷を検出する。運転負荷を検出した運転負荷検出部10Hは、検出した運転負荷を含む情報信号(以降の説明では、「運転負荷信号」と記載する場合がある)を、画像制御部10Gへ出力する。
The display
The driving
乗員による運転状態は、例えば、ステアリングの操舵角、乗員の心拍数、乗員の脳波のうち少なくとも一つを用いて取得することが可能である。
ステアリングの操舵角を用いて運転負荷を検出する場合には、操作状態信号が含む操舵角と、ステアリングのふらつきを定量化したステアリングエントロピー(例えば、特開平11−227491号公報を参照)等を用いる。この場合、ステアリング操作(操舵角)の滑らかさから運転者の不安定度を算出するステアリングエントロピー法を用いて、運転負荷の高低を検出する。
The driving state by the occupant can be acquired using, for example, at least one of the steering angle of the steering wheel, the occupant's heart rate, and the occupant's brain wave.
When the driving load is detected using the steering angle of the steering, the steering angle included in the operation state signal, the steering entropy obtained by quantifying the steering fluctuation (for example, see Japanese Patent Application Laid-Open No. 11-227491), and the like are used. . In this case, the level of the driving load is detected using a steering entropy method for calculating the degree of instability of the driver from the smoothness of the steering operation (steering angle).
乗員の心拍数を用いて運転負荷を検出する場合には、心拍数信号が含む心拍数を参照し、心拍数の増加や減少によって、運転負荷を検出する。この場合、心拍数が増加すると運転負荷が高いと検出し、心拍数が減少すると運転負荷が低いと検出する。
乗員の脳波を用いて運転負荷を検出する場合には、脳波信号が含む脳波の周波数分析を行う。そして、β波の出現頻度が高いほど、運転に集中しており、運転負荷が高いと検出する。一方、β波の出現頻度が低いほど、運転に集中する必要性が低く、運転負荷が低いと検出する。
When the driving load is detected using the occupant's heart rate, the driving load is detected by referring to the heart rate included in the heart rate signal and by increasing or decreasing the heart rate. In this case, when the heart rate increases, it is detected that the driving load is high, and when the heart rate decreases, it is detected that the driving load is low.
When detecting the driving load using the occupant's brain wave, frequency analysis of the brain wave included in the brain wave signal is performed. Then, the higher the appearance frequency of the β wave, the more concentrated on driving, and it is detected that the driving load is high. On the other hand, the lower the appearance frequency of the β wave, the lower the necessity of concentrating on driving and detecting that the driving load is low.
第二実施形態では、一例として、運転負荷検出部10Hの構成を、予め設定した運転負荷閾値α2を記憶しており、取得した運転状態と運転負荷閾値α2との比較により、運転負荷の高低を検出する場合について説明する。したがって、第二実施形態では、運転負荷閾値α2を、舵角エントロピー(例えば、特開平11−227491号公報を参照)、予め設定した心拍数、予め設定したβ波の出現頻度とする。そして、取得した運転状態に応じて、対応する運転負荷閾値α2を用いる。
画像制御部10Gは、違和感判定信号と、運転負荷信号と、表示状態信号の入力を受け、入力装置IFから指令信号の入力を受ける。そして、違和感判定信号、運転負荷信号、表示状態信号、指令信号に応じて出力画像信号を生成し、生成した出力画像信号を、違和感判定部10DとディスプレイDPに出力する。なお、入力装置IFの構成は、上述した第一実施形態と同様である。
In the second embodiment, as an example, the configuration of the driving
The
出力画像信号の生成は、以下の手順で行う。
違和感判定結果信号が、違和感が無いとの判定結果を含む場合、指令信号に応じて、例えば、ナビゲーション画像等をディスプレイDPに表示させるための出力画像信号を生成する。
違和感判定結果信号が、違和感が有るとの判定結果を含む場合、運転負荷信号と表示状態信号に応じて、ディスプレイDPに表示されている画像の情報量を制御するための出力画像信号を生成する。具体的には、運転負荷信号が、取得した運転負荷が運転負荷閾値α2を超えているとの判定結果を含む場合、ディスプレイDPに表示されている画像の情報量を減少させる出力画像信号を生成する(例えば、図4A及び図4B、図6A及び図6Bを参照)。一方、運転負荷信号が、取得した運転負荷が運転負荷閾値α2以下であるとの判定結果を含む場合、ディスプレイDPに表示されている画像の情報量を増加させる出力画像信号を生成する(例えば、図4A及び図4B、図6A及び図6Bを参照)。
The output image signal is generated in the following procedure.
When the uncomfortable feeling determination result signal includes a determination result that there is no uncomfortable feeling, for example, an output image signal for displaying a navigation image or the like on the display DP is generated according to the command signal.
When the uncomfortable feeling determination result signal includes a determination result that there is uncomfortable feeling, an output image signal for controlling the information amount of the image displayed on the display DP is generated according to the driving load signal and the display state signal. . Specifically, when the driving load signal includes a determination result that the acquired driving load exceeds the driving load threshold α2, an output image signal that reduces the information amount of the image displayed on the display DP is generated. (See, eg, FIGS. 4A and 4B, FIGS. 6A and 6B). On the other hand, when the driving load signal includes a determination result that the acquired driving load is equal to or less than the driving load threshold α2, an output image signal that increases the information amount of the image displayed on the display DP is generated (for example, (See FIGS. 4A and 4B and FIGS. 6A and 6B).
(車載用表示装置1が行う処理)
図1から図7を参照しつつ、図8を用いて、車載用表示装置1が行う表示制御処理の一例を説明する。
図8中に表すように、表示制御処理を開始(START)すると、まず、ステップS200の処理を行う。ステップS200からステップS204の処理は、上述した第一実施形態におけるステップS100からステップS104の処理と同様であるため、説明を省略する。
(Processing performed by the in-vehicle display device 1)
An example of the display control process performed by the in-
As shown in FIG. 8, when the display control process is started (START), first, the process of step S200 is performed. Since the processing from step S200 to step S204 is the same as the processing from step S100 to step S104 in the first embodiment described above, description thereof will be omitted.
ステップS206では、運転負荷を検出するためのパラメータを取得するために、運転負荷検出部10Hにより、運転者による車両の運転状態を取得する処理(図に表す「運転状態を取得」)を行う。ステップS206の処理を行うと、表示制御処理は、ステップS208へ移行する。ステップS208では、運転負荷検出部10Hにより、ステップS206で取得した運転状態を用いて検出した運転負荷が、運転負荷閾値α2を超えているか否かを判定する処理(図に表す「運転負荷>運転負荷閾値α2」)を行う。
ステップS208において、運転負荷が運転負荷閾値α2を超えている(図に表す「Yes」)と判定した場合、表示制御処理は、ステップS210へ移行する。一方、ステップS208において、運転負荷が運転負荷閾値α2以下である(図に表す「No」)と判定した場合、表示制御処理は、ステップS212へ移行する。
In step S206, in order to acquire a parameter for detecting the driving load, the driving
If it is determined in step S208 that the driving load exceeds the driving load threshold value α2 (“Yes” shown in the figure), the display control process proceeds to step S210. On the other hand, if it is determined in step S208 that the driving load is equal to or less than the driving load threshold α2 (“No” shown in the figure), the display control process proceeds to step S212.
ステップS210では、画像制御部10Gにより、ディスプレイDPに表示されている画像の情報量を減少させる処理(図に表す「情報量を減少」)を行う(例えば、図4Aの状態から図4Bの状態へ移行)。これにより、ステップS210では、乗員に提供する情報が煩雑となることを抑制する。ステップS210の処理を行うと、表示制御処理は、ステップS200の処理へ復帰(RETURN)する。
ステップS212では、画像制御部10Gにより、ディスプレイDPに表示されている画像の情報量を増加させる処理(図に表す「情報量を増加」)を行う(例えば、図4Bの状態から図4Aの状態へ移行)。これにより、ステップS212では、運転中の情報取得における利便性を向上させることが可能となる。ステップS212の処理を行うと、表示制御処理は、ステップS200の処理へ復帰(RETURN)する。
In step S210, the
In step S212, the
(動作)
図1から図8を参照して、第二実施形態の車載用表示装置1を用いて行なう動作の一例を説明する。
車両の走行時には、脳波センサ60により、乗員の脳波を測定する。これに加え、車両の走行時には、例えば、乗員による入力装置IFの操作に応じて、現在地から目的地までの移動経路を表すナビゲーション画像を、ディスプレイDPに表示する。ディスプレイDPにナビゲーション画像が表示されたタイミングで、違和感判定部10Dが、ディスプレイDPに表示されている画像に対して、乗員が違和感を受けているか否かを判定する。
そして、違和感判定部10Dが、乗員が違和感を受けていると判定すると、運転負荷検出部10Hが、運転者による車両の運転状態を取得し、さらに、運転者の運転負荷を検出する。これに加え、検出した運転負荷が運転負荷閾値α2を超えているか否かを判定する。
(Operation)
With reference to FIGS. 1-8, an example of the operation | movement performed using the vehicle-mounted
When the vehicle is running, the brain wave of the occupant is measured by the
When the uncomfortable
運転負荷検出部10Hが、運転負荷が運転負荷閾値α2を超えていると判定すると、画像制御部10Gが、ディスプレイDPに表示されている画像の情報量を減少させる処理(図4A、図4Bを参照)を行う。これにより、運転負荷が高く、運転操作が忙しい状況であっても、ディスプレイDPに表示される情報を見やすくすることが可能となる。一方、運転負荷検出部10Hが、運転負荷が運転負荷閾値α2以下であると判定すると、画像制御部10Gが、ディスプレイDPに表示されている画像の情報量を増加させる処理(図4A、図4Bを参照)を行う。これにより、運転負荷が低い状況では、運転中の情報取得における利便性を向上させることが可能となる。
When the driving
すなわち、第二実施形態の車載用表示装置1では、コントローラ10により、ディスプレイDPに画像を表示しているときに脳波センサ60が検出した脳活動から、乗員の違和感の有無を判定する。そして、違和感が有ると判定すると、乗員が受ける運転負荷に応じて、ディスプレイDPに表示している画像を変更する。
上述したように、第二実施形態の車載用表示装置1の動作で実施する車載用表示方法では、ディスプレイDPに画像を表示しているときに乗員の違和感が有ると判定すると、乗員が受ける運転負荷に応じて、ディスプレイDPに表示している画像を変更する。
That is, in the vehicle-mounted
As described above, in the in-vehicle display method implemented by the operation of the in-
また、第二実施形態の車載用表示方法では、ディスプレイDPに表示した画像の情報量を検出し、ディスプレイDPに画像を表示したタイミングで乗員の違和感が有ると判定すると、検出した情報量に応じて、ディスプレイDPに表示している画像を変更する。
なお、上述した第二実施形態は、本発明の一例であり、本発明は、上述した第二実施形態に限定されることはなく、この実施形態以外の形態であっても、本発明に係る技術的思想を逸脱しない範囲であれば、設計等に応じて種々の変更が可能である。
Further, in the in-vehicle display method of the second embodiment, when the information amount of the image displayed on the display DP is detected and it is determined that there is a sense of incongruity of the passenger at the timing when the image is displayed on the display DP, The image displayed on the display DP is changed.
The above-described second embodiment is an example of the present invention, and the present invention is not limited to the above-described second embodiment, and the present invention may be applied to other forms than this embodiment. Various modifications can be made according to the design or the like as long as they do not depart from the technical idea.
(第二実施形態の効果)
第一実施形態の車載用表示装置1を用いた車載用表示方法であれば、以下に記載する効果を奏することが可能となる。
(1)ディスプレイDPに表示した画像の情報量を検出し、ディスプレイDPに画像を表示したタイミングで、乗員の違和感が有ると判定すると、検出した情報量に応じて、ディスプレイDPに表示している画像を変更する。その結果、乗員がディスプレイDPに表示した画像を視認している可能性がある状況において、乗員の違和感が有ると判定すると、ディスプレイDPに表示した画像の情報量に応じて、ディスプレイDPに表示している画像を変更することが可能となる。
(Effect of the second embodiment)
If it is the vehicle-mounted display method using the vehicle-mounted
(1) When the information amount of the image displayed on the display DP is detected, and it is determined that the passenger feels uncomfortable at the timing when the image is displayed on the display DP, the information is displayed on the display DP according to the detected information amount. Change the image. As a result, if there is a possibility that the occupant is visually recognizing the image displayed on the display DP, it is displayed on the display DP according to the amount of information of the image displayed on the display DP. It is possible to change the image.
(2)乗員(運転者)が受ける運転負荷を検出し、検出した運転負荷に応じて、ディスプレイDPに表示している画像を変更する。その結果、運転負荷によって変わる見やすさに応じて、ディスプレイDPに表示している画像を変更するため、ディスプレイDPに表示される情報を見やすくすることが可能となるとともに、運転中の情報取得における利便性を向上させることが可能となる。 (2) The driving load received by the occupant (driver) is detected, and the image displayed on the display DP is changed according to the detected driving load. As a result, since the image displayed on the display DP is changed according to the visibility that changes depending on the driving load, it is possible to make the information displayed on the display DP easier to see and the convenience in obtaining information during driving. It becomes possible to improve the property.
(第二実施形態の変形例)
(1)第二実施形態では、ディスプレイDPに画像を表示したタイミングで、乗員の違和感が有ると判定すると、ディスプレイDPに表示している画像を変更したが、これに限定するものではない。すなわち、ディスプレイDPに画像を表示してから予め設定した閾値時間が経過した後に、乗員の違和感が有ると判定すると、ディスプレイDPに表示している画像を変更する構成としてもよい。
この場合、乗員がディスプレイDPに表示した画像を視認している可能性がある時間が、閾値時間まで経過した状況において、乗員の違和感が有ると判定すると、ディスプレイDPに表示している画像を変更することが可能となる。なお、ディスプレイDPに表示している画像の変更には、ディスプレイDPに表示している画像の消去も含む。
(Modification of the second embodiment)
(1) In the second embodiment, the image displayed on the display DP is changed when it is determined that the passenger feels uncomfortable at the timing when the image is displayed on the display DP. However, the present invention is not limited to this. In other words, the image displayed on the display DP may be changed when it is determined that the passenger feels uncomfortable after a predetermined threshold time has elapsed since the image was displayed on the display DP.
In this case, if it is determined that there is a sense of incongruity of the occupant in a situation in which the occupant may be viewing the image displayed on the display DP until the threshold time has elapsed, the image displayed on the display DP is changed. It becomes possible to do. Note that changing the image displayed on the display DP includes erasing the image displayed on the display DP.
(第三実施形態)
以下、本発明の第三実施形態について、図面を参照しつつ説明する。
(車載用表示装置の構成)
図1から図8を参照して、第三実施形態の構成を説明する。なお、以降の説明では、上述した第一実施形態と同様の構成について、同一の符合を付して示す。また、以降の説明では、上述した第一実施形態と同様の構成については、説明を省略する場合がある。
第三実施形態の車載用表示装置1は、画像制御部10Gの構成を除き、上述した第一実施形態と同様である。このため、画像制御部10G以外の構成については、説明を省略する。
(Third embodiment)
Hereinafter, a third embodiment of the present invention will be described with reference to the drawings.
(Configuration of in-vehicle display device)
The configuration of the third embodiment will be described with reference to FIGS. In the following description, the same components as those in the first embodiment described above are shown with the same reference numerals. Moreover, in the following description, description may be abbreviate | omitted about the structure similar to 1st embodiment mentioned above.
The in-
画像制御部10Gは、違和感判定信号と、情報量判定信号と、指令信号の入力を受ける。そして、違和感判定信号、情報量判定信号、指令信号に応じて出力画像信号を生成し、生成した出力画像信号を、ディスプレイDPに出力する。また、画像制御部10Gは、輝度、彩度、色相、拡大率、文字数、フォントサイズのパラメータを、数段階で設定することが可能である。また、画像制御部10Gは、違和感判定信号に応じて、画像の内容に係らず、ディスプレイDPに表示されている画像の視認性、ディスプレイDPに表示されている画像の表示状態、ディスプレイDPに表示されている画像の表示内容を調整する。
The
なお、以降の説明では、画像の視認性を調整する処理を、「視認性調整処理」と記載する場合がある。また、画像の表示状態を調整する処理を、「表示状態調整処理」と記載する場合がある。さらに、画像の表示内容を調整する処理を、「表示内容調整処理」と記載する場合がある。 In the following description, the process for adjusting the visibility of an image may be referred to as a “visibility adjustment process”. In addition, the process for adjusting the display state of an image may be referred to as “display state adjustment process”. Further, the process of adjusting the display content of the image may be described as “display content adjustment process”.
(視認性調整処理)
視認性調整処理では、まず、輝度のパラメータを、現在の輝度値から明るくなるように段階を上げる。輝度のパラメータの段階を上げた状態で、違和感が有るとの判定結果を含む違和感判定結果信号の入力を受けると、輝度のパラメータを、現在の輝度値から暗くなるように段階を下げる。輝度のパラメータの段階を上げた状態でも、輝度のパラメータの段階を下げた状態でも、違和感が有るとの判定結果を含む違和感判定結果信号の入力を受ける場合には、輝度値を最初の状態に戻し、次に、彩度の調整を行う。
(Visibility adjustment processing)
In the visibility adjustment process, first, the level of the brightness parameter is increased so as to become brighter than the current brightness value. When an input of an uncomfortable feeling determination result signal including a determination result that there is a sense of incongruity is received in a state where the brightness parameter level is raised, the brightness parameter is lowered so that the brightness parameter becomes darker than the current brightness value. When receiving a discomfort determination result signal including a determination result that there is a sense of incongruity in either a state where the brightness parameter level is raised or a state where the brightness parameter level is lowered, the brightness value is set to the initial state. Next, adjust the saturation.
彩度の調整は、まず、画像の鮮やかさを増加させる方向に調整する。そして、画像の鮮やかさを増加させる方向に彩度を調整した状態で、違和感が有るとの判定結果を含む違和感判定結果信号の入力を受けると、彩度を、画像の鮮やかさを減少させる方向に調整する。画像の鮮やかさを増加させる方向に彩度を調整した状態でも、画像の鮮やかさを減少させる方向に彩度を調整した状態でも、違和感が有るとの判定結果を含む違和感判定結果信号の入力を受ける場合には、彩度を最初の状態に戻し、次に、色相の調整を行う。 The saturation is first adjusted in the direction of increasing the vividness of the image. And, in the state where the saturation is adjusted in the direction to increase the vividness of the image, upon receiving an input of the uncomfortable determination result signal including the determination result that there is an uncomfortable feeling, the saturation is reduced in the direction of decreasing the vividness of the image Adjust to. Input the discomfort judgment result signal including the judgment result that there is a sense of incongruity whether the saturation is adjusted to increase the vividness of the image or the saturation is adjusted to decrease the vividness of the image. When receiving, the saturation is returned to the initial state, and then the hue is adjusted.
色相の調整は、まず、画像を暖色系とする方向に調整する。そして、画像を暖色系とする方向に色相を調整した状態で、違和感が有るとの判定結果を含む違和感判定結果信号の入力を受けると、色相を、画像を寒色系とする方向に調整する。画像を暖色系とする方向に色相を調整した状態でも、画像を寒色系とする方向に色相を調整した状態でも、違和感が有るとの判定結果を含む違和感判定結果信号の入力を受ける場合には、色相を最初の状態に戻し、視認性調整処理を終了する。
すなわち、輝度、彩度、色相のパラメータを調整した状況であっても、乗員の違和感が有ると判定される状態では、視認性には違和感が無いと判断し、視認性調整処理を終了して、表示状態調整処理へ移行する。
To adjust the hue, first, the image is adjusted in the direction of making the color warm. Then, in the state where the hue is adjusted in the direction in which the image is in the warm color system, upon receiving an input of the unnatural feeling determination result signal including the determination result that there is a sense of incongruity, the hue is adjusted in the direction in which the image is in the cold color system. When receiving a discomfort judgment result signal including a judgment result that there is a sense of incongruity in either a state in which the hue is adjusted in the direction to make the image warm, or a state in which the hue is adjusted in the direction to make the image cool The hue is returned to the initial state, and the visibility adjustment process is terminated.
In other words, even when the parameters of brightness, saturation, and hue are adjusted, it is determined that there is no sense of incongruity in the state where it is determined that there is a sense of incongruity of the occupant, and the visibility adjustment processing is terminated. The process proceeds to the display state adjustment process.
(表示状態調整処理)
表示状態調整処理では、まず、画像の拡大率を、現在の拡大率から大きくする。現在の拡大率から大きくした状態で、違和感が有るとの判定結果を含む違和感判定結果信号の入力を受けると、画像の拡大率を、現在の拡大率から小さくする。画像の拡大率を現在の拡大率から大きくした状態でも、画像の拡大率を現在の拡大率から小さくした状態でも、違和感が有るとの判定結果を含む違和感判定結果信号の入力を受ける場合には、画像の拡大率を最初の状態に戻し、次に、文字数の調整を行う。
(Display state adjustment processing)
In the display state adjustment process, first, the enlargement ratio of the image is increased from the current enlargement ratio. When an uncomfortable feeling determination result signal including a determination result that there is a sense of incongruity is received in a state where the current enlargement ratio is increased, the enlargement ratio of the image is reduced from the current enlargement ratio. When receiving a discomfort judgment result signal including a judgment result that there is a sense of incongruity even when the enlargement ratio of the image is increased from the current enlargement ratio or the enlargement ratio of the image is reduced from the current enlargement ratio The image enlargement ratio is returned to the initial state, and then the number of characters is adjusted.
文字数の調整は、まず、文字数を減少させる方向に調整する。そして、文字数を減少させる方向に彩度を調整した状態で、違和感が有るとの判定結果を含む違和感判定結果信号の入力を受けると、文字数を増加させる方向に調整する。文字数を減少させる方向に調整した状態でも、文字数を増加させる方向に調整した状態でも、違和感が有るとの判定結果を含む違和感判定結果信号の入力を受ける場合には、文字数を最初の状態に戻し、次に、フォントサイズの調整を行う。 The adjustment of the number of characters is first adjusted in the direction of decreasing the number of characters. When the input of a sense of incongruity determination result including a determination result that there is a sense of incongruity is received in a state where the saturation is adjusted in the direction of decreasing the number of characters, the number of characters is adjusted in the direction of increasing. If you receive a discomfort judgment result signal that includes the judgment result that there is a sense of incongruity, whether you are adjusting the direction to decrease the number of characters or adjusting the number of characters, return the number of characters to the initial state. Next, the font size is adjusted.
フォントサイズの調整は、まず、フォントサイズを大きくする方向に調整する。そして、フォントサイズを大きくする方向に調整した状態で、違和感が有るとの判定結果を含む違和感判定結果信号の入力を受けると、フォントサイズを小さくする方向に調整する。フォントサイズを大きく方向に調整した状態でも、フォントサイズを小さくする方向に調整した状態でも、違和感が有るとの判定結果を含む違和感判定結果信号の入力を受ける場合には、フォントサイズを最初の状態に戻し、表示状態調整処理を終了する。
すなわち、拡大率、文字数、フォントサイズのパラメータを調整した状況であっても、乗員の違和感が有ると判定される状態では、表示状態には違和感が無いと判断し、表示状態調整処理を終了して、表示内容調整処理へ移行する。
The font size is first adjusted in the direction of increasing the font size. Then, when an input of an uncomfortable feeling determination result signal including a result of determining that there is a sense of incongruity is received in a state where the font size is adjusted to increase, the font size is adjusted to decrease. Whether the font size is adjusted to a larger direction or the font size is adjusted to a smaller size, if you receive a discomfort judgment result signal that includes the judgment result that there is a sense of discomfort, change the font size to the initial state. The display state adjustment process is terminated.
That is, even when the parameters of the enlargement ratio, the number of characters, and the font size are adjusted, if it is determined that the passenger feels uncomfortable, it is determined that the display state is not uncomfortable, and the display state adjustment process is terminated. To display content adjustment processing.
(表示内容調整処理)
表示内容調整処理では、まず、表示内容を蓄積しているデータベース(図示せず)から取得した画像をディスプレイDPに表示することで、表示内容を調整する。データベースから取得した画像をディスプレイDPに表示する際には、例えば、一般的に人気の高い表示を順番に提示する。また、例えば、カテゴリー毎に分類された情報の内容を表す画像を順番に提示することで、違和感のない情報を確定し、類似情報を提示してもよい。データベースから取得した画像をディスプレイDPに表示している状態で、違和感が有るとの判定結果を含む違和感判定結果信号の入力を受けると、画像の表示を停止し、表示内容調整処理を終了する。
(Display content adjustment processing)
In the display content adjustment process, first, the display content is adjusted by displaying an image acquired from a database (not shown) that stores the display content on the display DP. When displaying the image acquired from the database on the display DP, for example, generally popular displays are presented in order. Further, for example, by presenting images representing the contents of information classified for each category in order, information that does not feel uncomfortable may be determined and similar information may be presented. When an image obtained from the database is displayed on the display DP and an input of an uncomfortable feeling determination result signal including a result of determining that there is an uncomfortable feeling is received, the display of the image is stopped and the display content adjustment process is ended.
(車載用表示装置1が行う処理)
図1から図8を参照しつつ、図9から図12を用いて、車載用表示装置1が行う表示制御処理の一例を説明する。
図9中に表すように、表示制御処理を開始(START)すると、まず、ステップS300の処理を行う。
ステップS300では、乗員が要求する情報を提供するために、ディスプレイDPに、ナビゲーション画像等を表示する処理(図に表す「ディスプレイ表示」)を行う。ステップS100の処理を行うと、表示制御処理は、ステップS400へ移行する。ステップS400では、違和感の有無を判定するために、違和感判定部10Dにより、ディスプレイDPに表示されている画像に対して、乗員が違和感を受けているか否かを判定する処理(図に表す「表示中に違和感有り」)を行う。
(Processing performed by the in-vehicle display device 1)
An example of display control processing performed by the in-
As shown in FIG. 9, when the display control process is started (START), first, the process of step S300 is performed.
In step S300, in order to provide information required by the occupant, a process of displaying a navigation image or the like on the display DP ("display display" shown in the figure) is performed. When the process of step S100 is performed, the display control process proceeds to step S400. In step S400, in order to determine whether or not there is a sense of incongruity, the
ステップS400において、乗員が違和感を受けている(図に表す「Yes」)と判定した場合、表示制御処理は、ステップS500へ移行する。一方、ステップS400において、乗員が違和感を受けていない(図に表す「No」)と判定した場合、表示制御処理は、ステップS300へ移行する。
ステップS500では、画像制御部10Gにより、視認性調整処理(図に表す「視認性調整処理」)を行う。ステップS500の処理を行うと、表示制御処理は、ステップS600へ移行する。
If it is determined in step S400 that the occupant is feeling uncomfortable ("Yes" shown in the figure), the display control process proceeds to step S500. On the other hand, if it is determined in step S400 that the occupant does not feel uncomfortable ("No" shown in the figure), the display control process proceeds to step S300.
In step S500, the
図10中に表すように、視認性調整処理を開始(START)すると、まず、ステップS510の処理を行う。
ステップS510では、ディスプレイDPに表示されている画像の輝度を変更するために、輝度のパラメータを調整する処理(図に表す「輝度調整」)を行う。ステップS510の処理を行った状態で、乗員が違和感を受けていると判定した場合、視認性調整処理は、ステップS520へ移行する。ステップS520では、ディスプレイDPに表示されている画像の彩度を変更するために、彩度のパラメータを調整する処理(図に表す「彩度調整」)を行う。ステップS520の処理を行った状態で、乗員が違和感を受けていると判定した場合、視認性調整処理は、ステップS530へ移行する。ステップS530では、ディスプレイDPに表示されている画像の色相を変更するために、色相のパラメータを調整する処理(図に表す「色相調整」)を行う。ステップS530の処理を行うと、視認性調整処理を終了(END)する。
As shown in FIG. 10, when the visibility adjustment process is started (START), first, the process of step S510 is performed.
In step S510, in order to change the luminance of the image displayed on the display DP, processing for adjusting the luminance parameter ("luminance adjustment" shown in the figure) is performed. When it is determined that the occupant feels uncomfortable in the state where the process of step S510 is performed, the visibility adjustment process proceeds to step S520. In step S520, in order to change the saturation of the image displayed on the display DP, a process for adjusting the saturation parameter ("saturation adjustment" shown in the figure) is performed. When it is determined that the occupant has a sense of discomfort in the state where the process of step S520 is performed, the visibility adjustment process proceeds to step S530. In step S530, in order to change the hue of the image displayed on the display DP, a process for adjusting the hue parameter ("hue adjustment" shown in the drawing) is performed. When the process of step S530 is performed, the visibility adjustment process is ended (END).
ステップS600では、ステップS400と同様の処理(図に表す「表示中に違和感有り」)を行う。ステップS600において、乗員が違和感を受けている(図に表す「Yes」)と判定した場合、表示制御処理は、ステップS700へ移行する。一方、ステップS600において、乗員が違和感を受けていない(図に表す「No」)と判定した場合、表示制御処理は、ステップS300へ移行する。
ステップS700では、画像制御部10Gにより、表示状態調整処理(図に表す「表示状態調整処理」)を行う。ステップS700の処理を行うと、表示制御処理は、ステップS800へ移行する。
In step S600, processing similar to that in step S400 ("discomfort during display" shown in the figure) is performed. If it is determined in step S600 that the occupant is feeling uncomfortable ("Yes" shown in the figure), the display control process proceeds to step S700. On the other hand, if it is determined in step S600 that the occupant does not feel uncomfortable ("No" shown in the figure), the display control process proceeds to step S300.
In step S700, the
図11中に表すように、表示状態調整処理を開始(START)すると、まず、ステップS710の処理を行う。
ステップS710では、ディスプレイDPに表示されている画像の拡大率を変更するために、画像の拡大率を調整する処理(図に表す「拡大率調整」)を行う。ステップS710の処理を行った状態で、乗員が違和感を受けていると判定した場合、表示状態調整処理は、ステップS720へ移行する。ステップS720では、ディスプレイDPに表示されている画像の文字数を変更するために、画像が含む文字数を調整する処理(図に表す「文字数調整」)を行う。ステップS720の処理を行った状態で、乗員が違和感を受けていると判定した場合、表示状態調整処理は、ステップS730へ移行する。ステップS730では、ディスプレイDPに表示されている画像が含む文字のフォントサイズを変更するために、画像が含む文字のフォントサイズを調整する処理(図に表す「フォントサイズ調整」)を行う。ステップS730の処理を行うと、表示状態調整処理を終了(END)する。
As shown in FIG. 11, when the display state adjustment process is started (START), first, the process of step S710 is performed.
In step S710, in order to change the enlargement ratio of the image displayed on the display DP, a process of adjusting the enlargement ratio of the image (“enlargement ratio adjustment” shown in the figure) is performed. When it is determined that the occupant feels uncomfortable in the state where the process of step S710 is performed, the display state adjustment process proceeds to step S720. In step S720, in order to change the number of characters of the image displayed on the display DP, a process of adjusting the number of characters included in the image ("character number adjustment" shown in the figure) is performed. When it is determined that the occupant feels uncomfortable in the state where the process of step S720 is performed, the display state adjustment process proceeds to step S730. In step S730, in order to change the font size of the character included in the image displayed on the display DP, a process of adjusting the font size of the character included in the image ("font size adjustment" shown in the drawing) is performed. When the process of step S730 is performed, the display state adjustment process is ended (END).
ステップS800では、ステップS400と同様の処理(図に表す「表示中に違和感有り」)を行う。ステップS800において、乗員が違和感を受けている(図に表す「Yes」)と判定した場合、表示制御処理は、ステップS900へ移行する。一方、ステップS800において、乗員が違和感を受けていない(図に表す「No」)と判定した場合、表示制御処理は、ステップS300へ移行する。
ステップS900では、画像制御部10Gにより、表示内容調整処理(図に表す「表示内容調整処理」)を行う。ステップS900の処理を行うと、表示制御処理は、ステップS300の処理へ復帰(RETURN)する。
In step S800, the same processing as in step S400 ("discomfort during display" shown in the figure) is performed. If it is determined in step S800 that the occupant is feeling uncomfortable ("Yes" shown in the figure), the display control process proceeds to step S900. On the other hand, when it is determined in step S800 that the occupant does not feel uncomfortable ("No" shown in the figure), the display control process proceeds to step S300.
In step S900, display content adjustment processing ("display content adjustment processing" shown in the figure) is performed by the
図12中に表すように、表示内容調整処理を開始(START)すると、まず、ステップS910の処理を行う。
ステップS910では、需要の高い画像を提供するために、ディスプレイDPへ、データベースから取得した画像のうち、一般的に人気の高い表示を順番に表示する処理(図に表す「人気の高い画像を表示」)を行う。ステップS910の処理を行った状態で、乗員が違和感を受けていると判定した場合、表示内容調整処理は、ステップS920へ移行する。ステップS920では、乗員の違和感を解消するために、ディスプレイDPへの画像の表示を停止する処理(図に表す「表示の停止」)を行う。ステップS920の処理を行うと、表示内容調整処理を終了(END)する。
As shown in FIG. 12, when the display content adjustment process is started (START), first, the process of step S910 is performed.
In step S910, in order to provide a high-demand image, a process of displaying generally popular displays in order from the images acquired from the database on the display DP ("display popular images" shown in the figure). ")I do. When it is determined that the occupant feels uncomfortable in the state where the process of step S910 is performed, the display content adjustment process proceeds to step S920. In step S920, a process of stopping the display of the image on the display DP ("stop display" shown in the figure) is performed in order to eliminate the discomfort of the passenger. When the process of step S920 is performed, the display content adjustment process is ended (END).
(動作)
図1から図12を参照して、第三実施形態の車載用表示装置1を用いて行なう動作の一例を説明する。
車両の走行時には、脳波センサ60により、乗員の脳波を測定する。これに加え、車両の走行時には、例えば、乗員による入力装置IFの操作に応じて、現在地から目的地までの移動経路を表すナビゲーション画像を、ディスプレイDPに表示する。ディスプレイDPにナビゲーション画像が表示されている状態で、違和感判定部10Dが、ディスプレイDPに表示されている画像に対して、乗員が違和感を受けているか否かを判定する。
(Operation)
With reference to FIGS. 1-12, an example of the operation | movement performed using the vehicle-mounted
When the vehicle is running, the brain wave of the occupant is measured by the
そして、違和感判定部10Dが、乗員が違和感を受けていると判定すると、画像制御部10Gが、画像の内容に係らず、視認性調整処理を行う。視認性調整処理を行った状態で、乗員が違和感を受けていると判定すると、画像制御部10Gが、画像の内容に係らず、表示状態調整処理を行う。表示状態調整処理を行った状態で、乗員が違和感を受けていると判定すると、画像制御部10Gが、画像の内容に係らず、表示内容調整処理を行う。
すなわち、第三実施形態の車載用表示装置1では、コントローラ10により、ディスプレイDPに画像を表示しているときに脳波センサ60が検出した脳活動から、乗員の違和感の有無を判定する。そして、違和感が有ると判定すると、画像制御部10Gが、画像の内容に係らず、違和感が有るか否かの判定結果に応じて、視認性調整処理、表示状態調整処理、表示内容調整処理を順番に行う。
When the uncomfortable
That is, in the in-
上述したように、第三実施形態の車載用表示装置1の動作で実施する車載用表示方法では、乗員の違和感が有ると判定すると、ディスプレイDPに表示している画像の視認性を調整する。そして、画像の視認性を調整した後に乗員の違和感が有ると判定すると、ディスプレイDPに表示している画像の表示状態を調整する。さらに、画像の表示状態を調整した後に乗員の違和感が有ると判定すると、ディスプレイDPに表示している画像の表示内容を調整する。
なお、上述した第三実施形態は、本発明の一例であり、本発明は、上述した第三実施形態に限定されることはなく、この実施形態以外の形態であっても、本発明に係る技術的思想を逸脱しない範囲であれば、設計等に応じて種々の変更が可能である。
As described above, in the in-vehicle display method implemented by the operation of the in-
The above-described third embodiment is an example of the present invention, and the present invention is not limited to the above-described third embodiment, and the present invention is not limited to the above-described third embodiment. Various modifications can be made according to the design or the like as long as they do not depart from the technical idea.
(第三実施形態の効果)
第三実施形態の車載用表示装置1を用いた車載用表示方法であれば、以下に記載する効果を奏することが可能となる。
(1)ディスプレイDPに画像を表示しているときに乗員の違和感が有ると判定すると、ディスプレイDPに表示している画像の視認性を調整する。そして、画像の視認性を調整した後に乗員の違和感が有ると判定すると、ディスプレイDPに表示している画像の表示状態を調整する。さらに、画像の表示状態を調整した後に乗員の違和感が有ると判定すると、ディスプレイDPに表示している画像の表示内容を調整する。
(Effect of the third embodiment)
If it is a vehicle-mounted display method using the vehicle-mounted
(1) If it is determined that the passenger feels uncomfortable when an image is displayed on the display DP, the visibility of the image displayed on the display DP is adjusted. If it is determined that the passenger feels uncomfortable after adjusting the visibility of the image, the display state of the image displayed on the display DP is adjusted. Further, if it is determined that the passenger feels uncomfortable after adjusting the display state of the image, the display content of the image displayed on the display DP is adjusted.
このため、ディスプレイDPに画像を表示しているときに乗員の違和感が有ると判定すると、画像の内容に係らず、違和感が有るか否かの判定結果に応じて、ディスプレイDPに表示している画像を、乗員の違和感の有無に応じて調整することが可能となる。その結果、乗員が違和感を受けている画像に対し、視認性、表示状態、表示内容を順番に調整することで、乗員が受けている違和感を低減させることが可能となり、利便性の低下を抑制することが可能な、車載用表示方法を提供することが可能となる。 For this reason, when it is determined that there is a sense of incongruity when the image is displayed on the display DP, the image is displayed on the display DP according to the determination result of whether or not there is a sense of incongruity regardless of the content of the image. The image can be adjusted according to the presence or absence of the passenger's discomfort. As a result, it is possible to reduce the sense of incongruity experienced by passengers by adjusting the visibility, display status, and display content in order for images in which the passenger feels uncomfortable, and suppress the deterioration in convenience. It is possible to provide an in-vehicle display method that can be performed.
(第三実施形態の変形例)
(1)第三実施形態では、視認性調整処理において、輝度、彩度、色相のパラメータを調整したが、これに限定するものではない。すなわち、例えば、ディスプレイDPの構成が、角度を変化させることが可能な構成である場合、ディスプレイDPの角度を調整可能な装置等を用いて、視認性調整処理を行ってもよい。なお、ディスプレイDPの角度を調整可能な装置としては、例えば、特開平7−319398号公報に開示されているように、ステップモータ等を備える構成を用いることが可能である。
(Modification of the third embodiment)
(1) In the third embodiment, the parameters of brightness, saturation, and hue are adjusted in the visibility adjustment process, but the present invention is not limited to this. That is, for example, when the configuration of the display DP is a configuration that can change the angle, the visibility adjustment processing may be performed using a device that can adjust the angle of the display DP. As an apparatus that can adjust the angle of the display DP, for example, as disclosed in Japanese Patent Laid-Open No. 7-319398, a configuration including a step motor or the like can be used.
以上説明したように、本発明は、ここでは記載していない様々な実施の形態等を含むことは勿論である。したがって、本発明の技術的範囲は、上記の説明から妥当な特許請求の範囲に係る発明特定事項によってのみ定められるものである。 As described above, the present invention naturally includes various embodiments that are not described herein. Accordingly, the technical scope of the present invention is defined only by the invention specifying matters according to the scope of claims reasonable from the above description.
1…車載用表示装置、2…周囲状況センサ、4…運転状態センサ、6…生体情報センサ、8…電極、10…コントローラ、10A…脳情報取得部、10B…注意状態取得部、10C…違和感データベース、10D…違和感判定部、10E…表示状態取得部、10F…情報量判定部、10G…画像制御部、10H…運転負荷検出部、20…地図データベース、22…GPS受信機22…通信機、40…アクセル開度センサ、42…ブレーキスイッチ、44…ステアリング操作量センサ、60…脳波センサ、62…カメラ、64…心拍センサ、DP…ディスプレイ、SP…スピーカ、IF…入力装置
DESCRIPTION OF
Claims (10)
前記検出した脳活動から前記乗員の違和感の有無を判定し、
前記違和感が有ると判定すると、前記ディスプレイに表示している画像を変更することを特徴とする車載用表示方法。 Detecting the occupant's brain activity while displaying an image on a display that is visible to the occupant of the vehicle,
From the detected brain activity to determine the presence or absence of the passenger discomfort,
An on-vehicle display method characterized by changing an image displayed on the display when it is determined that the discomfort is present.
前記表示している画像に対する前記注意状態を検出した時点で、前記違和感の有無を判定することを特徴とする請求項1に記載した車載用表示方法。 Detecting the occupant's attention state;
The vehicle-mounted display method according to claim 1, wherein the presence or absence of the uncomfortable feeling is determined when the attention state with respect to the displayed image is detected.
前記違和感が有ると判定すると、前記検出した情報量に応じて前記表示している画像を変更することを特徴とする請求項1または請求項2に記載した車載用表示方法。 Detecting the amount of information in the image displayed on the display;
The in-vehicle display method according to claim 1 or 2, wherein when it is determined that there is a sense of incongruity, the displayed image is changed according to the detected amount of information.
前記検出した運転負荷に応じて、前記表示している画像を変更することを特徴とする請求項1から請求項3のうちいずれか1項に記載した車載用表示方法。 Detecting the driving load received by the passenger,
The in-vehicle display method according to any one of claims 1 to 3, wherein the displayed image is changed according to the detected driving load.
前記視認性を調整した後に前記違和感が有ると判定すると前記表示している画像の表示状態を調整し、
前記表示状態を調整した後に前記違和感が有ると判定すると前記表示している画像の表示内容を調整することを特徴とする請求項1から請求項7のうちいずれか1項に記載した車載用表示方法。 When it is determined that there is a sense of incongruity, the visibility of the displayed image is adjusted,
When it is determined that there is the uncomfortable feeling after adjusting the visibility, the display state of the displayed image is adjusted,
The in-vehicle display according to any one of claims 1 to 7, wherein when the display state is adjusted, the display content of the displayed image is adjusted when it is determined that the discomfort is present. Method.
前記検出した脳活動と前記蓄積している脳活動との比較に応じて前記違和感の有無を判定することを特徴とする請求項1から請求項8のうちいずれか1項に記載した車載用表示方法。 Accumulating the brain activity when it is determined that there is a sense of discomfort in the past,
The vehicle-mounted display according to any one of claims 1 to 8, wherein the presence or absence of the uncomfortable feeling is determined according to a comparison between the detected brain activity and the accumulated brain activity. Method.
前記乗員が視認可能なディスプレイと、
前記ディスプレイに画像を表示しているときに前記センサが検出した脳活動から前記乗員の違和感の有無を判定し、前記違和感が有ると判定すると前記表示している画像を変更するコントローラと、を備えることを特徴とする車載用表示装置。 A sensor that detects the occupant's brain activity;
A display visible to the occupant;
A controller that determines whether or not the passenger feels uncomfortable from the brain activity detected by the sensor when an image is displayed on the display, and changes the displayed image when it is determined that the discomfort is present. A vehicle-mounted display device.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2017009250A JP6965520B2 (en) | 2017-01-23 | 2017-01-23 | In-vehicle display method and in-vehicle display device |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2017009250A JP6965520B2 (en) | 2017-01-23 | 2017-01-23 | In-vehicle display method and in-vehicle display device |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2018120267A true JP2018120267A (en) | 2018-08-02 |
JP6965520B2 JP6965520B2 (en) | 2021-11-10 |
Family
ID=63043762
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2017009250A Active JP6965520B2 (en) | 2017-01-23 | 2017-01-23 | In-vehicle display method and in-vehicle display device |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP6965520B2 (en) |
Cited By (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2020062990A (en) * | 2018-10-18 | 2020-04-23 | 日産自動車株式会社 | Parking assisting method and parking assisting device |
JP2020062962A (en) * | 2018-10-17 | 2020-04-23 | 日産自動車株式会社 | Parking assisting method and parking assisting device |
JP2020062963A (en) * | 2018-10-17 | 2020-04-23 | 日産自動車株式会社 | Parking assisting method and parking assisting device |
JP2020093621A (en) * | 2018-12-11 | 2020-06-18 | 日産自動車株式会社 | Automatic parking control method and automatic parking control device |
JP2020104734A (en) * | 2018-12-27 | 2020-07-09 | 日産自動車株式会社 | Vehicle control method and vehicle control device |
JP2021090136A (en) * | 2019-12-03 | 2021-06-10 | 富士フイルムビジネスイノベーション株式会社 | Information processing system and program |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2003248541A (en) * | 2002-02-22 | 2003-09-05 | Mitsubishi Electric Corp | Control device using brain wave signal and control method |
JP2005098912A (en) * | 2003-09-26 | 2005-04-14 | Mazda Motor Corp | On-vehicle information providing apparatus |
JP2008282224A (en) * | 2007-05-10 | 2008-11-20 | Toyota Motor Corp | Onboard information retrieval device |
JP2011180873A (en) * | 2010-03-02 | 2011-09-15 | Panasonic Corp | Driving support device and driving support method |
US20210319869A1 (en) * | 2019-12-06 | 2021-10-14 | Meghana Kaipa | Methods and Systems for Interactive Children's Medication and Wellness Tracking |
-
2017
- 2017-01-23 JP JP2017009250A patent/JP6965520B2/en active Active
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2003248541A (en) * | 2002-02-22 | 2003-09-05 | Mitsubishi Electric Corp | Control device using brain wave signal and control method |
JP2005098912A (en) * | 2003-09-26 | 2005-04-14 | Mazda Motor Corp | On-vehicle information providing apparatus |
JP2008282224A (en) * | 2007-05-10 | 2008-11-20 | Toyota Motor Corp | Onboard information retrieval device |
JP2011180873A (en) * | 2010-03-02 | 2011-09-15 | Panasonic Corp | Driving support device and driving support method |
US20210319869A1 (en) * | 2019-12-06 | 2021-10-14 | Meghana Kaipa | Methods and Systems for Interactive Children's Medication and Wellness Tracking |
Cited By (12)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2020062962A (en) * | 2018-10-17 | 2020-04-23 | 日産自動車株式会社 | Parking assisting method and parking assisting device |
JP2020062963A (en) * | 2018-10-17 | 2020-04-23 | 日産自動車株式会社 | Parking assisting method and parking assisting device |
JP7206785B2 (en) | 2018-10-17 | 2023-01-18 | 日産自動車株式会社 | Parking assistance method and parking assistance device |
JP7206786B2 (en) | 2018-10-17 | 2023-01-18 | 日産自動車株式会社 | Parking assistance method and parking assistance device |
JP2020062990A (en) * | 2018-10-18 | 2020-04-23 | 日産自動車株式会社 | Parking assisting method and parking assisting device |
JP7268321B2 (en) | 2018-10-18 | 2023-05-08 | 日産自動車株式会社 | Parking assistance method and parking assistance device |
JP2020093621A (en) * | 2018-12-11 | 2020-06-18 | 日産自動車株式会社 | Automatic parking control method and automatic parking control device |
JP7155978B2 (en) | 2018-12-11 | 2022-10-19 | 日産自動車株式会社 | AUTOMATIC PARKING CONTROL METHOD AND AUTOMATIC PARKING CONTROL DEVICE |
JP2020104734A (en) * | 2018-12-27 | 2020-07-09 | 日産自動車株式会社 | Vehicle control method and vehicle control device |
JP7188072B2 (en) | 2018-12-27 | 2022-12-13 | 日産自動車株式会社 | Vehicle control method and vehicle control device |
JP2021090136A (en) * | 2019-12-03 | 2021-06-10 | 富士フイルムビジネスイノベーション株式会社 | Information processing system and program |
US11856355B2 (en) | 2019-12-03 | 2023-12-26 | Agama-X Co., Ltd. | Information processing system and non-transitory computer readable medium storing program |
Also Published As
Publication number | Publication date |
---|---|
JP6965520B2 (en) | 2021-11-10 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6965520B2 (en) | In-vehicle display method and in-vehicle display device | |
US10317900B2 (en) | Controlling autonomous-vehicle functions and output based on occupant position and attention | |
US10398368B2 (en) | Onboard system, vehicle control device, and program product for vehicle control device | |
US10723365B2 (en) | Driving assistance device | |
US9956963B2 (en) | Apparatus for assessing, predicting, and responding to driver fatigue and drowsiness levels | |
EP3067827B1 (en) | Driver distraction detection system | |
US8698639B2 (en) | System and method for responding to driver behavior | |
US8593519B2 (en) | Field watch apparatus | |
CN111048171B (en) | Method and device for solving motion sickness | |
US20160031479A1 (en) | Coordinated vehicle response system and method for driver behavior | |
WO2015151243A1 (en) | Vehicular information presentation device | |
JP2014167438A (en) | Information notification device | |
US20180326850A1 (en) | Responsive human machine interface | |
DE102015101560A1 (en) | Systems and methods for a vehicle-based display projection of a mobile device | |
JP2008068664A (en) | Vehicle control apparatus and vehicle control method | |
JP6756174B2 (en) | Vehicle control device | |
US20240043031A1 (en) | Presentation control device, autonomous driving control device, and storage mediums | |
CN115923832A (en) | Handover assistant for machine-to-driver transition | |
JP6776681B2 (en) | Driver status determination device and driver status determination program | |
KR102417514B1 (en) | Vehicle, and control method for the same | |
JP6673070B2 (en) | Driver state guidance device and driver state guidance program | |
JP5664202B2 (en) | Driving assistance device | |
JP7253708B2 (en) | Information processing device, vehicle, and information processing method | |
JP6648788B1 (en) | Operation control adjustment device and operation control adjustment method | |
US11801858B1 (en) | System and method for monitoring cervical measurement of a driver and modifying vehicle functions based on changes in the cervical measurement of the driver |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20190913 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20200928 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20201006 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20201029 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20210323 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20210416 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20210921 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20211004 |
|
R151 | Written notification of patent or utility model registration |
Ref document number: 6965520 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |