JP2024067905A - Method and device for changing color of front shield - Google Patents

Abstract

【課題】車両のフロントシールドにおいて、車両の周辺で発生しているシーンを反映した表示を車両の乗員に提供する。
【解決手段】フロントシールドの色味変更方法は、車両３００の周辺情報を取得し、周辺情報に基づいて、車両３００のフロントシールド３１０の色味を変更する範囲を算出する。周辺情報に基づいて、車両３００の周辺に存在する交通情報の表示部４００を判定し、車両３００の乗員の目の位置をアイポイントとして検出する。表示部４００の判定結果とアイポイントの検出結果とに基づいて、フロントシールド３１０の色味を変更する範囲のうち、アイポイントから表示部４００への乗員の視線上に位置する部分を、除外部分３５０として算出する。フロントシールド３１０の色味を変更する範囲のうち、除外部分３５０を除く対象部分３２０の色味を変更する。
【選択図】図４Ａ

A display reflecting a scene occurring around the vehicle is provided to vehicle occupants on the vehicle's windshield.
[Solution] A method for changing the color of a front shield acquires peripheral information of a vehicle 300, and calculates a range in which to change the color of a front shield 310 of the vehicle 300 based on the peripheral information. A traffic information display unit 400 present around the vehicle 300 is determined based on the peripheral information, and the eye position of an occupant of the vehicle 300 is detected as an eye point. Based on the determination result of the display unit 400 and the detection result of the eye point, a portion of the range in which to change the color of the front shield 310 that is located on the line of sight of the occupant from the eye point to the display unit 400 is calculated as an excluded portion 350. Of the range in which to change the color of the front shield 310, a target portion 320 excluding the excluded portion 350 is changed in color.
[Selected Figure] Figure 4A

Description

本発明は、フロントシールドの色味変更方法及びフロントシールドの色味変更装置に関する。 The present invention relates to a method for changing the color of a front shield and a device for changing the color of a front shield.

特許文献１には、車室の天井に対して垂直又は傾斜した使用状態の液晶サンバイザーに、光源の位置と運転者の目の位置とを結ぶ直線との交点を含む位置及び大きさの遮光部を、スイッチの操作により設定した濃度で形成する装置が記載されている。 Patent document 1 describes a device that forms a light-shielding section in a position and size that includes the intersection point with a line connecting the position of the light source and the position of the driver's eyes on a liquid crystal sun visor that is in use and is vertical or inclined to the ceiling of the vehicle cabin, with a density that is set by operating a switch.

特許第６９６３２０７号公報Patent No. 6963207

特許文献１の液晶サンバイザーに形成される遮光部は、単に、光源の光を遮る防眩機能を発揮するものに過ぎず、光源以外の、車両の周辺で発生しているシーンは、遮光部の形成において何ら反映されていない。 The light-shielding portion formed in the liquid crystal sun visor of Patent Document 1 merely performs an anti-glare function by blocking light from the light source, and the formation of the light-shielding portion does not reflect any scenes occurring around the vehicle other than the light source.

本発明は前記事情に鑑みなされたもので、本発明の目的は、車両のフロントシールドにおいて、車両の周辺で発生しているシーンを反映した表示を車両の乗員に提供することにある。 The present invention has been made in consideration of the above circumstances, and an object of the present invention is to provide vehicle occupants with a display on the vehicle's windshield that reflects the scene occurring around the vehicle.

上述した課題を解決するために、本発明の一つの態様に係るフロントシールドの色味変更方法では、車両の周辺情報を取得し、周辺情報に基づいて、車両のフロントシールドの色味を変更する範囲を算出する。周辺情報に基づいて、車両の周辺に存在する交通情報の表示部を判定し、車両の乗員の目の位置をアイポイントとして検出する。表示部の判定結果とアイポイントの検出結果とに基づいて、フロントシールドの色味を変更する範囲のうち、アイポイントから表示部への乗員の視線上に位置する部分を、除外部分として算出する。フロントシールドの色味を変更する範囲のうち、除外部分を除く対象部分の色味を変更する。 In order to solve the above-mentioned problems, a method for changing the color of a windshield according to one embodiment of the present invention acquires information about the surroundings of a vehicle, and calculates the range in which the color of the vehicle's windshield is to be changed based on the surrounding information. Based on the surrounding information, a display unit for traffic information present around the vehicle is determined, and the position of the eyes of the vehicle's occupants is detected as the eye point. Based on the determination result of the display unit and the detection result of the eye point, the part of the range in which the color of the windshield is to be changed that is located on the occupant's line of sight from the eye point to the display unit is calculated as the excluded part. Of the range in which the color of the windshield is to be changed, the color of the target part excluding the excluded part is changed.

本発明によれば、車両のフロントシールドにおいて、車両の周辺で発生しているシーンを反映した表示を車両の乗員に提供することができる。 The present invention makes it possible to provide vehicle occupants with a display on the vehicle's windshield that reflects the scene occurring around the vehicle.

図１は、本発明の一実施形態に係る色味変更方法が適用されるフロントシールドの色味変更装置の構成を示す図である。FIG. 1 is a diagram showing the configuration of a color changing device for a front shield to which a color changing method according to an embodiment of the present invention is applied. 図２は、図１の色味変更装置が行うフロントシールドの色味変更処理における手順の一例を示すフローチャートである。FIG. 2 is a flow chart showing an example of a procedure for a color change process of a front shield performed by the color change device of FIG. 図３Ａは、図１の周辺環境判定部が車内に日差しが入りやすくなるシーンであると判定した場合の対象部分の例を示す図である。FIG. 3A is a diagram showing an example of a target portion when the surrounding environment determination unit in FIG. 1 determines that the scene is one in which sunlight is likely to enter the vehicle interior. 図３Ｂは、図１の周辺環境判定部が車内に日差しが入りにくくなるシーンであると判定した場合の対象部分の例を示す図である。FIG. 3B is a diagram showing an example of a target portion when the surrounding environment determination unit in FIG. 1 determines that the scene is one in which sunlight is less likely to enter the vehicle interior. 図３Ｃは、図１の周辺環境判定部が、対向車のヘッドライトの光が車内に入りやすくなる日没後のシーンであると判定した場合の対象部分の例を示す図である。FIG. 3C is a diagram showing an example of a target portion when the surrounding environment determination unit in FIG. 1 determines that the scene is after sunset, when light from the headlights of oncoming vehicles is likely to enter the vehicle interior. 図４Ａは、対象部分のうち、除外部分の外縁部の色味を交通信号機の点灯色（青）に対応する同じ色味に変更した例を示す図である。FIG. 4A is a diagram showing an example in which the color of the outer edge of the excluded part of the target part is changed to the same color that corresponds to the illuminated color (green) of a traffic signal. 図４Ｂは、対象部分のうち、除外部分の外縁部の色味を交通信号機の点灯色（赤）に対応する同じ色味に変更した例を示す図である。FIG. 4B is a diagram showing an example in which the color of the outer edge of the excluded part of the target part is changed to the same color that corresponds to the illuminated color (red) of a traffic signal. 図５Ａは、対象部分のうち上縁部の色味を交通信号機の点灯色（青）に対応する同じ色味に変更した例を示す図である。FIG. 5A is a diagram showing an example in which the color of the upper edge of the target portion is changed to the same color that corresponds to the lighting color (green) of a traffic signal. 図５Ｂは、対象部分のうち上縁部の色味を交通信号機の点灯色（赤）に対応する同じ色味に変更した例を示す図である。FIG. 5B is a diagram showing an example in which the color of the upper edge of the target portion is changed to the same color as the color (red) of a traffic signal. 図６は、図１の周辺環境判定部が、車両のフロントピラーによってアイポイントから死角となる乗員の視野に歩行者が存在するシーンであると判定した場合の対象部分の例を示す図である。FIG. 6 is a diagram showing an example of a target portion when the surrounding environment determination unit in FIG. 1 determines that a pedestrian is present in the visual field of the occupant that is in a blind spot from the eye point due to the front pillar of the vehicle.

以下、本発明の実施形態について、図面を参照して説明する。 The following describes an embodiment of the present invention with reference to the drawings.

図１を参照して、本発明の一実施形態に係るフロントシールドの色味変更装置の構成を説明する。 The configuration of a front shield color change device according to one embodiment of the present invention will be described with reference to FIG. 1.

本実施形態に係る色味変更装置１００は、サンバイザ装置２００が出力する画像の色味を変更して、本実施形態に係る色味変更方法を実施することができる。サンバイザ装置２００は、例えば、車両のフロントシールドにおける室内側の表面上に配置した透過ディスプレイであってもよい。車両の乗員は、透過ディスプレイに表示された画像を、フロントシールドを通して見える車外の風景に重ねて視認することができる。 The color changing device 100 according to this embodiment can change the color of the image output by the sun visor device 200 to implement the color changing method according to this embodiment. The sun visor device 200 may be, for example, a transparent display arranged on the interior surface of the vehicle's windshield. Vehicle occupants can view the image displayed on the transparent display superimposed on the scenery outside the vehicle that can be seen through the windshield.

フロントシールドは、フロントガラス、フロントウィンド、ウィンドシールド、ウィンドスクリーン等と呼ばれることもある。透過ディスプレイは、例えば、液晶パネル、有機ＥＬ（Electroluminescent）ディスプレイ、無機ＥＬディスプレイを用いて構成することができる。サンバイザ装置２００は、透過ディスプレイに画像を表示しない不使用時に、フロントシールドを通した視界と重ならない位置に移動させ、透過ディスプレイに画像を表示する使用時にだけ、フロントシールドの表面上に配置するものであってもよい。 The windshield may also be called a windshield, front wind, windshield, windscreen, etc. The transparent display may be configured using, for example, a liquid crystal panel, an organic EL (Electroluminescent) display, or an inorganic EL display. The sun visor device 200 may be moved to a position that does not overlap with the field of view through the windshield when not in use and no image is displayed on the transparent display, and may be positioned on the surface of the windshield only when in use and an image is displayed on the transparent display.

サンバイザ装置２００は、例えば、車両のフロントシールドと協働してヘッドアップディスプレイを構成する投影用のディスプレイであってもよい。サンバイザ装置２００は、ヘッドアップディスプレイにおいて表示する画像をフロントシールドに投影する。 The sun visor device 200 may be, for example, a projection display that cooperates with the vehicle's windshield to form a head-up display. The sun visor device 200 projects an image to be displayed on the head-up display onto the windshield.

車両の乗員は、サンバイザ装置２００が出力した画像をフロントシールド上で視認することができる。 The vehicle occupants can view the image output by the sun visor device 200 on the windshield.

色味変更装置１００は、例えば、汎用のマイクロコントローラを有している。マイクロコントローラは、ＣＰＵ（Central Processing Unit ）及びメモリを備える。メモリは、ＲＯＭ（Read Only Memory）及びＲＡＭ（Random Access Memory）を含む。 The color change device 100 has, for example, a general-purpose microcontroller. The microcontroller has a CPU (Central Processing Unit) and a memory. The memory includes a ROM (Read Only Memory) and a RAM (Random Access Memory).

マイクロコントローラは、メモリに記憶させたプログラムをＣＰＵが実行することで、複数の情報処理回路を仮想的に構築することができる。複数の情報処理回路は、色味変更装置１００の後述する各部１０１～１１３を構成するのに用いることができる。 The microcontroller can virtually construct multiple information processing circuits by having the CPU execute a program stored in the memory. The multiple information processing circuits can be used to configure each of the units 101 to 113 of the color change device 100, which will be described later.

本実施形態では、マイクロコントローラに構築される複数の情報処理回路をソフトウェアによって実現する例を示す。もちろん、以下に示す各情報処理を実行するための専用のハードウェアを用意して、情報処理回路を構成することも可能である。また、複数の情報処理回路を個別のハードウェアにより構成してもよい。専用のハードウェアは、各部１０１～１１３の機能を実行するようにアレンジされた特定用途向け集積回路（ＡＳＩＣ；Application Specific Integrated Circuit ）、従来型の回路部品のような装置を含む。 In this embodiment, an example is shown in which multiple information processing circuits built in a microcontroller are realized by software. Of course, it is also possible to prepare dedicated hardware for executing each of the information processes shown below and configure the information processing circuits. Also, multiple information processing circuits may be configured by individual hardware. Dedicated hardware includes devices such as application specific integrated circuits (ASICs) arranged to execute the functions of each of the units 101 to 113, and conventional circuit components.

色味変更装置１００のマイクロコントローラは、仮想的に構築する複数の情報処理回路により、周辺情報取得部１０１、周辺環境判定部１０３、色味変更判定部１０５及び色味変更位置判定部１０７を構成することができる。色味変更装置１００のマイクロコントローラは、複数の情報処理回路により、アイポイント検出部１０９、色味情報生成部１１１及び制御部１１３をさらに構成することができる。 The microcontroller of the color change device 100 can configure a surrounding information acquisition unit 101, a surrounding environment determination unit 103, a color change determination unit 105, and a color change position determination unit 107 using multiple virtually constructed information processing circuits. The microcontroller of the color change device 100 can further configure an eye point detection unit 109, a color information generation unit 111, and a control unit 113 using multiple information processing circuits.

周辺情報取得部１０１は、車両の周辺の情報を周辺情報として取得する。周辺情報取得部１０１は、センサ部１１５、交通装置認識部１１７及び天気情報取得部１１９を有している。 The surrounding information acquisition unit 101 acquires information about the surroundings of the vehicle as surrounding information. The surrounding information acquisition unit 101 has a sensor unit 115, a traffic device recognition unit 117, and a weather information acquisition unit 119.

センサ部１１５は、周辺情報を収集するセンサ類が出力した信号を取得する。センサ類は、車両に搭載されたデバイスであり、例えば、補助カメラとしての車外カメラ、センサ及びソナー（Sonar ）のうち少なくとも一方、ＩＴＳ（Intelligent Transport Systems ：高度道路交通システム）を利用した通信設備等を含んでいる。 The sensor unit 115 acquires signals output by sensors that collect surrounding information. The sensors are devices mounted on the vehicle, and include, for example, an external camera as an auxiliary camera, at least one of a sensor and a sonar, and communication equipment that uses ITS (Intelligent Transport Systems).

車外カメラは、車両の周辺の画像を撮影する。車外カメラの撮影画像は、例えば、車両の乗員が車内から見る視界の画像を含んでいる。車外カメラの撮影画像は、車両がいる場所の天候を判定するのに用いることができる。車両がいる場所の天候は、例えば、車両がいる場所における日照の有無、車両がいる場所から見た地平線に対する太陽の高さ等を含むものとすることができる。 The exterior camera captures images of the vehicle's surroundings. The images captured by the exterior camera include, for example, images of the field of view seen by vehicle occupants from inside the vehicle. The images captured by the exterior camera can be used to determine the weather where the vehicle is located. The weather where the vehicle is located can include, for example, the presence or absence of sunlight where the vehicle is located, the height of the sun relative to the horizon as seen from the vehicle's location, etc.

センサ及びソナーは、車両の周辺の物体を検出する。センサは、電波を用いて対象物までの距離を測定するレーダー（Rader ）、レーザ光を用いて対象物までの距離を測定するライダー（LiDAR ）を含んでいてもよい。ソナーは、超音波を用いて対象物までの距離を測定する。センサ及びソナーのうち少なくとも一方の出力は、車両の周辺に存在する障害物を検出するのに用いることができる。 Sensors and sonar detect objects around the vehicle. Sensors may include radar, which uses radio waves to measure the distance to an object, and lidar, which uses laser light to measure the distance to an object. Sonar measures the distance to an object using ultrasound. The output of at least one of the sensors and sonar can be used to detect obstacles around the vehicle.

ＩＴＳを利用した通信設備は、車車間通信によって他の車両から情報を受信し、あるいは、路車間通信により路側機から情報を受信する。 Communication equipment using ITS receives information from other vehicles through vehicle-to-vehicle communication, or receives information from roadside units through road-to-vehicle communication.

車車間通信では、通信設備を搭載した自車両と周辺に存在する他の車両との間で、互いの車両の情報が送受される。車両の情報は、車両の位置及び走行速度のうち少なくとも一方を含む。他の車両の位置又は走行速度により、例えば、他の車両である救急車等の緊急車両が自車両に接近するのを認識することができる。他の車両の位置及び走行速度は、自車両に対する相対的な位置及び走行速度であってもよい。 In vehicle-to-vehicle communication, information about the vehicle is sent between the vehicle equipped with communication equipment and other vehicles in the vicinity. The vehicle information includes at least one of the vehicle's position and traveling speed. For example, the vehicle can recognize that an emergency vehicle such as an ambulance is approaching the vehicle based on the position or traveling speed of the other vehicle. The position and traveling speed of the other vehicle may be the relative position and traveling speed with respect to the vehicle.

路車間通信では、路側機から自車両に交通情報が送信される。交通情報は、自車両の周辺の道路の情報を含んでいてもよい。道路の情報は、例えば、交差点、カーブ、車線数等、道路の形状の情報を含む。道路の情報は、例えば、交差点の右折時に右折先の道路の対向車線にいる他の車両、横断歩道上の歩行者等の情報を含んでいてもよい。 In road-to-vehicle communication, traffic information is transmitted from a roadside unit to the vehicle. The traffic information may include information about the roads around the vehicle. The road information may include, for example, information about the shape of the road, such as intersections, curves, and the number of lanes. The road information may also include, for example, information about other vehicles in the oncoming lane of the road to which the vehicle is turning right when turning right at an intersection, pedestrians on crosswalks, etc.

交通装置認識部１１７は、センサ部１１５が取得した車外カメラの撮影画像中に存在する交通装置を、交通情報の表示部として認識する。交通装置は、交通信号機を含んでいる。交通信号機は、例えば、青、黄、赤の３つの点灯色で信号を表示する。交通装置は、交通信号機の他、例えば、道路標識、文字等の可変情報を表示する道路情報板等を含んでいてもよい。交通装置認識部１１７は、例えば、車外カメラの撮影画像中に存在する交通装置を認識する。 The traffic device recognition unit 117 recognizes traffic devices present in the image captured by the outside-vehicle camera acquired by the sensor unit 115 as traffic information display units. Traffic devices include traffic lights. Traffic lights display signals in three lighting colors, for example, green, yellow, and red. In addition to traffic lights, traffic devices may also include road signs, road information boards that display variable information such as text, etc. The traffic device recognition unit 117 recognizes traffic devices present in the image captured by the outside-vehicle camera, for example.

交通装置が交通信号機である場合、交通装置認識部１１７は、車外カメラの撮影画像中に存在する交通信号機を認識し、かつ、交通信号機の点灯色を識別する。交通装置認識部１１７は、撮影画像中に存在する交通信号機の信号の点灯色を、路車間通信によって取得した情報から特定してもよい。 If the traffic device is a traffic signal, the traffic device recognition unit 117 recognizes the traffic signal present in the image captured by the exterior camera and identifies the color of the traffic signal. The traffic device recognition unit 117 may identify the color of the traffic signal present in the captured image from information acquired by road-to-vehicle communication.

天気情報取得部１１９は、電気通信回線を介して車両と通信する通信相手から通信設備が受信してセンサ部１１５が取得した情報から、車両がいる場所の気象情報を取得する。通信相手は、例えば、電気通信回線を介して接続されたインターネット上の、車両がいる場所を含む地域の気象情報を提供するサイトの運営者が運用するサーバであってもよい。 The weather information acquisition unit 119 acquires meteorological information for the location of the vehicle from information received by the communication equipment from a communication partner that communicates with the vehicle via a telecommunication line and acquired by the sensor unit 115. The communication partner may be, for example, a server operated by the operator of a site on the Internet connected via a telecommunication line that provides meteorological information for the area including the location of the vehicle.

周辺情報取得部１０１は、センサ部１１５、交通装置認識部１１７及び天気情報取得部１１９のうち１又は２以上の要素から、車両の周辺情報に当たる信号、認識結果、情報等を取得することができる。 The surrounding information acquisition unit 101 can acquire signals, recognition results, information, etc., which correspond to information about the surroundings of the vehicle, from one or more elements of the sensor unit 115, the traffic device recognition unit 117, and the weather information acquisition unit 119.

周辺環境判定部１０３は、周辺情報取得部１０１が取得した周辺情報に基づいて、車両の周辺環境を判定する。周辺環境判定部１０３は、車両の周辺環境として、車両がいる場所のシーン（scene ）がどんなシーンであるかを判定してもよい。 The surrounding environment determination unit 103 determines the surrounding environment of the vehicle based on the surrounding information acquired by the surrounding information acquisition unit 101. The surrounding environment determination unit 103 may determine the type of scene in the location where the vehicle is located as the surrounding environment of the vehicle.

周辺環境判定部１０３が判定するシーンは、時間帯に対応した天気の状態で分類したシーンであってもよい。晴天日の朝又は夕方に対応する、太陽の位置が低く車内に日差しが入りやすくなるシーン、晴天日の日中に対応する、太陽の位置が高く車内に日差しが入りにくくなるシーンは、時間帯に対応した天気の状態で分類したシーンの一例となり得る。日没後の夜間に対応する、対向車のヘッドライトの光が車内に入りやすくなるシーンも、時間帯に対応した天気の状態で分類したシーンの一例となり得る。 The scene determined by the surrounding environment determination unit 103 may be a scene classified by weather conditions corresponding to a time period. A scene corresponding to a sunny morning or evening, where the sun is low in the position and sunlight is likely to enter the vehicle interior, and a scene corresponding to a sunny day during the day, where the sun is high in the position and sunlight is unlikely to enter the vehicle interior, are examples of scenes classified by weather conditions corresponding to a time period. A scene corresponding to nighttime after sunset, where the light from the headlights of oncoming vehicles is likely to enter the vehicle interior, is also an example of a scene classified by weather conditions corresponding to a time period.

周辺環境判定部１０３は、センサ部１１５の、ＩＴＳによる通信で得た情報、車外カメラの撮影画像、又は、天気情報取得部１１９が取得した気象情報等に基づいて、車両がいる場所のシーンを判定することができる。例えば、周辺環境判定部１０３は、車両がいる場所のシーンを、太陽又はヘッドライトが映った室外カメラの撮影画像に基づいて判定してもよく、当日の気象情報と現在時刻とに基づいて判定してもよい。 The surrounding environment determination unit 103 can determine the scene where the vehicle is located based on information obtained by the sensor unit 115 through ITS communication, images captured by an exterior camera, or weather information acquired by the weather information acquisition unit 119. For example, the surrounding environment determination unit 103 may determine the scene where the vehicle is located based on an image captured by an exterior camera showing the sun or headlights, or may determine the scene based on the weather information of the day and the current time.

周辺環境判定部１０３が判定するシーンは、時間帯に対応した天気の状態に加えて、交通装置の有無で分類したシーンであってもよい。例えば、周辺環境判定部１０３は、車両がいる場所のシーンの判定に用いた車外カメラの撮影画像中に、交通装置が存在することを交通装置認識部１１７が認識したか否かによって、交通装置が存在するシーンであるか否かを判定することができる。 The scene determined by the surrounding environment determination unit 103 may be classified according to the presence or absence of a traffic device, in addition to the weather conditions corresponding to the time of day. For example, the surrounding environment determination unit 103 can determine whether the scene contains a traffic device based on whether the traffic device recognition unit 117 recognizes the presence of a traffic device in the image captured by the exterior camera used to determine the scene where the vehicle is located.

車外カメラの撮影画像中に交通信号機が存在する場合、周辺環境判定部１０３は、交通信号機の位置及び信号の点灯色を撮影画像から特定して、位置及び点灯色を特定した交通信号機が存在するシーンであると判定してもよい。周辺環境判定部１０３は、周辺情報に基づいて車両の周辺に存在する交通情報の表示部を判定する表示部判定部として機能することができる。 When a traffic signal is present in an image captured by the exterior camera, the surrounding environment determination unit 103 may identify the position of the traffic signal and the color of the signal from the captured image and determine that the scene includes a traffic signal with the identified position and color. The surrounding environment determination unit 103 can function as a display unit determination unit that determines which traffic information display units are present around the vehicle based on the surrounding information.

色味変更判定部１０５は、サンバイザ装置２００が出力して車両の乗員がフロントシールド上で視認する画像に色味を付けるか否かを、周辺環境判定部１０３が判定した車両の周辺環境に基づいて判定する。色味変更判定部１０５は、周辺環境判定部１０３が判定した車両の周辺環境に基づいて、乗員がフロントシールド上で視認する画像の色味を変更するか否かも判定する。 The color change determination unit 105 determines whether or not to add color to the image output by the sun visor device 200 and viewed by the vehicle occupant on the windshield, based on the vehicle's surrounding environment determined by the surrounding environment determination unit 103. The color change determination unit 105 also determines whether or not to change the color of the image viewed by the vehicle occupant on the windshield, based on the vehicle's surrounding environment determined by the surrounding environment determination unit 103.

色味変更位置判定部１０７は、色味変更判定部１０５が色味を付けると判定した、あるいは、色味を変更すると判定した、車両の乗員がフロントシールド上で視認する画像について、色味を付ける範囲又は色味を変更する範囲を算出する。色味変更位置判定部１０７は、周辺環境に基づいて、車両のフロントシールドの色味を変更する範囲を算出する変更範囲算出部として機能することができる。 The color change position determination unit 107 calculates the range to be tinted or the range to be changed for the image viewed by the vehicle occupant on the windshield, which the color change determination unit 105 has determined to be tinted or changed in color. The color change position determination unit 107 can function as a change range calculation unit that calculates the range to be changed in color of the vehicle's windshield, based on the surrounding environment.

アイポイント検出部１０９は、例えば、車内カメラが撮影する車内の画像から、車両の乗員の目を抽出し、抽出した目の画像における位置に基づいて、車両における乗員の目の位置をアイポイントとして検出する。 The eye point detection unit 109, for example, extracts the eyes of the vehicle occupant from an image of the interior of the vehicle captured by an in-vehicle camera, and detects the position of the occupant's eyes in the vehicle as the eye point based on the position of the extracted eyes in the image.

色味変更位置判定部１０７は、交通装置認識部１１７が交通装置を認識した場合に、フロントシールドの色味を変更する範囲のうち、交通装置に対する乗員の視線と重なる部分を、色味の変更対象から除外する。フロントシールドの色味を変更する範囲は、フロントシールドに色味を付ける範囲を含んでもよく、色味の変更対象は色味を付ける対象を含んでもよい。交通装置に対する乗員の視線と重なる部分を色味の変更対象から除外することで、交通装置の視認性がフロントシールドの色味によって低下することが抑制される。色味変更位置判定部１０７は、除外部分算出部として機能することができる。 When the traffic device recognition unit 117 recognizes a traffic device, the color change position determination unit 107 excludes from the range in which the color of the front shield is to be changed any portion that overlaps with the line of sight of the occupant toward the traffic device from the target for color change. The range in which the color of the front shield is to be changed may include the range in which the front shield is to be tinted, and the target for color change may include the target to be tinted. By excluding the portion that overlaps with the line of sight of the occupant toward the traffic device from the target for color change, the visibility of the traffic device is prevented from being reduced by the color of the front shield. The color change position determination unit 107 can function as an excluded portion calculation unit.

除外部分算出部は、フロントシールドの色味を変更する範囲又はフロントシールドに色味を付ける範囲のうち、乗員のアイポイントから交通装置への視線上に位置する部分を、除外部分として算出する。除外部分算出部は、交通装置認識部１１７による交通情報の表示部の判定結果と、アイポイント検出部１０９によるアイポイントの検出結果とに基づいて、除外部分を算出することができる。 The excluded portion calculation unit calculates the portion of the range in which the windshield color is changed or the range in which the windshield is tinted that is located on the line of sight from the occupant's eye point to the traffic device as the excluded portion. The excluded portion calculation unit can calculate the excluded portion based on the judgment result of the traffic information display unit by the traffic device recognition unit 117 and the detection result of the eye point by the eye point detection unit 109.

色味情報生成部１１１は、車両のフロントシールドの色味を変更する部分について、変更後の色味の情報を生成する。色味を付けていないフロントシールドに新しく色味を付ける場合は、色味情報生成部１１１は、フロントシールドに付ける色味の情報を生成する。 The color information generating unit 111 generates information on the changed color for the portion of the vehicle's front shield where the color is to be changed. When adding a new color to an untinted front shield, the color information generating unit 111 generates information on the color to be added to the front shield.

制御部１１３は、フロントシールドの色味を変更する範囲又は色味を付ける範囲のうち、除外部分を除く対象部分について、フロントシールドの色味を変更し、又は、フロントシールドに色味を付ける。色味情報生成部１１１及び制御部１１３は、色味変更部として機能することができる。 The control unit 113 changes the color of the front shield or colors the front shield for the target portion, excluding the excluded portion, of the range in which the color of the front shield is to be changed or colored. The color information generation unit 111 and the control unit 113 can function as a color change unit.

次に、色味変更装置１００が行うフロントシールドの色味変更処理における手順の一例を、図２のフローチャートを参照して説明する。色味変更装置１００のマイクロコントローラは、図２のフローチャートの手順による処理を、所定の制御周期の度に繰り返して行う。 Next, an example of the procedure for the color change process of the front shield performed by the color change device 100 will be described with reference to the flowchart in FIG. 2. The microcontroller of the color change device 100 repeats the process according to the procedure in the flowchart in FIG. 2 at every predetermined control period.

まず、ステップＳ１０１において、図１の周辺情報取得部１０１が、センサ部１１５、交通装置認識部１１７及び天気情報取得部１１９を用いて、車両の周辺情報を取得する。次に、ステップＳ１０２において、周辺情報取得部１０１が取得した周辺情報に基づいて、周辺環境判定部１０３が、車両の周辺環境を判定する。 First, in step S101, the surrounding information acquisition unit 101 in FIG. 1 acquires surrounding information about the vehicle using the sensor unit 115, the traffic device recognition unit 117, and the weather information acquisition unit 119. Next, in step S102, the surrounding environment determination unit 103 determines the surrounding environment of the vehicle based on the surrounding information acquired by the surrounding information acquisition unit 101.

例えば、日照があり、地平線に対する太陽の位置が低い場合、周辺環境判定部１０３は、車両の周辺環境が、晴天日の朝又は夕方に対応する、太陽の位置が低く車内に日差しが入りやすくなるシーンであると判定する。日照があり、地平線に対する太陽の位置が高い場合、周辺環境判定部１０３は、車両の周辺環境が、晴天日の日中に対応する、太陽の位置が高く車内に日差しが入りにくくなるシーンであると判定する。日照がなく車両の周辺が暗い場合、周辺環境判定部１０３は、車両の周辺環境が、日没後の夜間に対応する、対向車のヘッドライトの光が車内に入りやすくなるシーンであると判定する。 For example, when there is sunlight and the sun is low relative to the horizon, the surrounding environment determination unit 103 determines that the surrounding environment of the vehicle is a scene that corresponds to a sunny morning or evening, where the sun is low and sunlight is likely to enter the vehicle interior. When there is sunlight and the sun is high relative to the horizon, the surrounding environment determination unit 103 determines that the surrounding environment of the vehicle is a scene that corresponds to a sunny day during the day, where the sun is high and sunlight is unlikely to enter the vehicle interior. When there is no sunlight and the surroundings of the vehicle are dark, the surrounding environment determination unit 103 determines that the surrounding environment of the vehicle is a scene that corresponds to nighttime after sunset, where light from the headlights of oncoming vehicles is likely to enter the vehicle interior.

周辺環境判定部１０３は、交通装置認識部１１７が認識した車外カメラの撮影画像内の、フロントシールドを通した乗員の視界内に対応する部分に、交通装置が存在する場合、車両の周辺環境が、視界内に交通装置が存在するシーンであると判定する。 When a traffic device is present in a portion of the image captured by the exterior camera recognized by the traffic device recognition unit 117 that corresponds to the field of view of the occupant through the windshield, the surrounding environment determination unit 103 determines that the surrounding environment of the vehicle is a scene in which a traffic device is present within the field of view.

次に、ステップＳ１０３に進み、色味変更判定部１０５が、周辺環境判定部１０３が判定した車両の周辺環境に基づいて、車両の乗員がフロントシールド上で視認する画像の色味を変更する、又は、画像に色味を付ける必要があるか否かを判定する。色味変更判定部１０５は、周辺環境判定部１０３が前回及び今回の各制御周期に判定したシーンの間に、画像の色味を変える必要、又は、画像に色味を付ける必要が生じるような変化があるか否かに基づいて、ステップＳ１０３の判定を行うことができる。 Next, the process proceeds to step S103, where the color change determination unit 105 determines whether or not it is necessary to change the color of the image viewed by the vehicle occupant on the windshield or to add color to the image, based on the vehicle's surrounding environment determined by the surrounding environment determination unit 103. The color change determination unit 105 can make the determination in step S103 based on whether or not there is a change between the scenes determined by the surrounding environment determination unit 103 in the previous and current control cycles that creates the need to change the color of the image or to add color to the image.

乗員がフロントシールド上で視認する画像の色味を変更する、又は、画像に色味を付ける必要がない場合は（ステップＳ１０３でＮＯ）、一連の処理を終了する。乗員がフロントシールド上で視認する画像の色味を変更する、又は、画像に色味を付ける必要がある場合は（ステップＳ１０３でＹＥＳ）、ステップＳ１０５に進み、色味変更位置判定部１０７が、色味を変更する、又は、色味を付ける範囲を算出する。 If there is no need to change the color of the image the occupant sees on the windshield or to tint the image (NO in step S103), the process ends. If there is no need to change the color of the image the occupant sees on the windshield or to tint the image (YES in step S103), the process proceeds to step S105, where the color change position determination unit 107 calculates the range for changing the color or tinting.

ステップＳ１０７に進み、周辺環境判定部１０３が、ステップＳ１０５で算出した範囲内のフロントシールドを通した乗員の視界内に、乗員がフロントシールド上で視認する画像の色味に関連する交通装置が存在するか否かを判定する。 Then, proceeding to step S107, the surrounding environment determination unit 103 determines whether or not there is a traffic device within the occupant's field of vision through the windshield within the range calculated in step S105 that is related to the color of the image viewed by the occupant on the windshield.

例えば、交通信号機は、乗員がフロントシールド上で視認する画像の色味に関連する交通装置に該当するものの１つである。乗員がフロントシールドを通して視認する交通信号機は、乗員がフロントシールド上で視認する画像に色味が付いていても、視認しやすいことが好ましい。視認しやすさについて交通信号機と同様の事情を有する交通装置も、乗員がフロントシールド上で視認する画像の色味に関連する交通装置に該当するものとすることができる。 For example, a traffic signal is one of the traffic devices related to the color of the image that the occupant sees on the windshield. It is preferable that a traffic signal that is seen by an occupant through the windshield is easy to see, even if the image that the occupant sees on the windshield is colored. Traffic devices that have similar circumstances to traffic signals in terms of ease of seeing can also be considered to be traffic devices related to the color of the image that the occupant sees on the windshield.

周辺環境判定部１０３は、ステップＳ１０７の判定を、例えば、２段階に分けて行うことができる。１段階目では、車両の周辺環境として判定したシーンが、フロントシールド上の色味を付けた画像を通して乗員が視認する位置の、１又は２以上の交通装置を含んでいるか否かを判定する。上記位置の交通装置を含む場合は、２段階目において、その交通装置が、フロントシールド上で視認される画像の色味によって、視認しやすさが損なわれるか否かを判定する。画像の色味によって交通装置の視認しやすさが損なわれる場合、ステップＳ１０７の判定は、画像の色味に関連する交通装置が存在するという判定結果となる。 The surrounding environment determination unit 103 can perform the determination in step S107 in, for example, two stages. In the first stage, it is determined whether the scene determined as the surrounding environment of the vehicle includes one or more traffic devices in a position that is visible to the occupant through the tinted image on the windshield. If a traffic device in the above position is included, in the second stage, it is determined whether the visibility of the traffic device is impaired by the color of the image viewed on the windshield. If the visibility of the traffic device is impaired by the color of the image, the determination in step S107 results in a determination that a traffic device related to the color of the image is present.

画像の色味に関連する交通装置が存在しない場合は（ステップＳ１０７でＮＯ）、後述するステップＳ１１５に処理を移行する。画像の色味に関連する交通装置が存在する場合（ステップＳ１０７でＹＥＳ）、色味変更装置１００のマイクロコントローラは、後述するステップＳ１０９～ステップＳ１１３の各処理を行う。ステップＳ１０９～ステップＳ１１３の各処理は、画像に色味を付ける範囲から、交通装置に向けた視線と重なる部分を除外するための処理である。 If there is no traffic device related to the color of the image (NO in step S107), the process proceeds to step S115 described below. If there is a traffic device related to the color of the image (YES in step S107), the microcontroller of the color modification device 100 performs each process of steps S109 to S113 described below. Each process of steps S109 to S113 is for excluding the part of the image that overlaps with the line of sight toward the traffic device from the range in which the image is to be colored.

ステップＳ１０９では、アイポイント検出部１０９が、車両の乗員の目の位置をアイポイントとして検出する。 In step S109, the eye point detection unit 109 detects the eye positions of the vehicle occupants as the eye points.

ステップＳ１１１では、色味変更位置判定部１０７が「くり抜き位置」を算出する。「くり抜き位置」とは、ステップＳ１０５で算出されたフロントシールド上の画像の色味を変更する、又は、画像に色味を付ける範囲のうち、ステップＳ１０７で存在すると判定された交通装置に向けた視線上に位置する除外部分のことである。色味変更位置判定部１０７が算出する「くり抜き位置」は、ステップＳ１０９で検出したアイポイントに対応した位置となる。 In step S111, the color change position determination unit 107 calculates a "cut-out position." The "cut-out position" refers to an excluded portion located on the line of sight toward a traffic device determined to exist in step S107 within the range in which the color of the image on the windshield calculated in step S105 is changed or colored. The "cut-out position" calculated by the color change position determination unit 107 corresponds to the eye point detected in step S109.

ステップＳ１１３では、色味情報生成部１１１が「くり抜き」を実行する。「くり抜き」とは、ステップＳ１０５で算出されたフロントシールド上の画像の色味を変更する、又は、画像に色味を付ける範囲から、ステップＳ１１１で算出された「くり抜き位置」を除外する処理である。「くり抜き」の実行後は、ステップＳ１１５に処理を移行する。 In step S113, the color information generation unit 111 executes "cutting out." "Cutting out" is a process that changes the color of the image on the windshield calculated in step S105, or excludes the "cutout position" calculated in step S111 from the range in which the image is to be colored. After "cutting out" is executed, the process proceeds to step S115.

ステップＳ１１５では、色味情報生成部１１１が色味情報を作成する。色味情報とは、フロントシールド上の画像における、ステップＳ１１３で「くり抜き」された後の対象部分に対する、変更によって付ける色味、又は、新たに付ける色味を示す情報である。色味情報生成部１１１が作成する色味情報は、乗員がフロントシールドの対象部分上で視認する画像を、ステップＳ１０１で取得された周辺情報から判定した車両の周辺環境の内容に合わせた色味に変更又は色味付けする内容となる。 In step S115, the color information generating unit 111 creates color information. The color information is information that indicates the color to be applied by modifying or newly applying to the target portion of the image on the windshield after it has been "cut out" in step S113. The color information created by the color information generating unit 111 changes or colors the image that the occupant visually recognizes on the target portion of the windshield to a color that matches the vehicle's surrounding environment determined from the surrounding information acquired in step S101.

ステップＳ１１７では、制御部１１３が、ステップＳ１１５で作成された色味情報を用いて、ステップＳ１１３で「くり抜き」された後の対象部分に対する色味の変更又は色味付けを行う。その後、一連の処理を終了する。 In step S117, the control unit 113 uses the color information created in step S115 to change or add color to the target portion after "cutting out" in step S113. Then, the process ends.

本実施形態では、周辺環境判定部１０３が、例えば、図３Ａ～図３Ｃに示す車両３００の周辺環境を判定すると、車両３００のフロントシールド３１０の上部に対象部分３２０が設けられる。 In this embodiment, when the surrounding environment determination unit 103 determines the surrounding environment of the vehicle 300 shown in, for example, Figures 3A to 3C, a target portion 320 is provided on the upper part of the front shield 310 of the vehicle 300.

対象部分３２０は、周辺環境判定部１０３が判定したシーンに基づいて、色味変更位置判定部１０７が算出した、フロントシールド３１０上で乗員に視認される画像の色味を変更する、又は、画像に色味を付ける範囲である。対象部分３２０の範囲及び位置の少なくとも一方は、周辺環境判定部１０３が判定するシーンによって変更されてもよい。 The target portion 320 is a range calculated by the color change position determination unit 107 based on the scene determined by the surrounding environment determination unit 103, in which the color of the image viewed by the occupant on the windshield 310 is changed or a color is added to the image. At least one of the range and the position of the target portion 320 may be changed depending on the scene determined by the surrounding environment determination unit 103.

図３Ａは、周辺環境判定部１０３が、車両３００の周辺環境を、地平線Ｈからの太陽Ｓの位置が低く車内に日差しが入りやすくなるシーンであると判定した場合の、対象部分３２０の例を示している。 Figure 3A shows an example of a target portion 320 when the surrounding environment determination unit 103 determines that the surrounding environment of the vehicle 300 is a scene in which the sun S is low above the horizon H, making it easier for sunlight to enter the vehicle interior.

図３Ｂは、周辺環境判定部１０３が、車両３００の周辺環境を、地平線Ｈからの太陽Ｓの位置が高く車内に日差しが入りにくくなるシーンであると判定した場合の、対象部分３２０の例を示している。図３Ｂでは、車両３００の天井に隠れてフロントシールド３１０越しに見えない太陽Ｓの図示を省略している。 Figure 3B shows an example of the target portion 320 when the surrounding environment determination unit 103 determines that the surrounding environment of the vehicle 300 is a scene in which the sun S is high above the horizon H, making it difficult for sunlight to enter the vehicle interior. Figure 3B omits the illustration of the sun S, which is hidden by the ceiling of the vehicle 300 and cannot be seen through the windshield 310.

図３Ｃは、周辺環境判定部１０３が、車両３００の周辺環境を、対向車ＯＣがヘッドライトを点灯し、ヘッドライトの光が車内に入りやすくなる日没後のシーンであると判定した場合の、対象部分３２０の例を示している。 Figure 3C shows an example of the target portion 320 when the surrounding environment determination unit 103 determines that the surrounding environment of the vehicle 300 is a scene after sunset when an oncoming vehicle OC has its headlights turned on and the headlight light is more likely to enter the vehicle interior.

図３Ａ～図３Ｃは、車両３００の乗員が不図示のアイポイントから見る車内及び車外の視界を示している。図３Ａ～図３Ｃでは、車外の視界を、フロントシールド３１０を通して乗員が見る視界のみ示している。 Figures 3A to 3C show the field of view inside and outside the vehicle as seen by an occupant of the vehicle 300 from an eye point (not shown). In Figures 3A to 3C, the field of view outside the vehicle is shown only as seen by the occupant through the windshield 310.

図３Ａ～図３Ｃでは、周辺環境判定部１０３が車両３００の周辺環境として判定したシーンが、フロントシールド３１０上の色味を付けた画像を通して乗員が視認する交通装置が存在しないシーンである場合の例を示している。この場合、フロントシールド３１０上の画像の色味を変更する、又は、画像に色味を付ける範囲に対する「くり抜き」は実行されない。 Figures 3A to 3C show an example of a case where the scene determined by the surrounding environment determination unit 103 as the surrounding environment of the vehicle 300 is a scene in which there is no traffic device visible to the occupant through the tinted image on the windshield 310. In this case, the color of the image on the windshield 310 is not changed, and "cutting out" is not performed on the area in which the image is tinted.

車内に日差しが入りやすい図３Ａのシーンでは、図１のサンバイザ装置２００が出力し、対象部分３２０において車両３００の乗員が視認する画像の色味が、例えば、ブラック、グレー等、光透過率が比較的低い色味とされる。対象部分３２０の色味を、光透過率が比較的低い色味とすれば、車内に入る日差しを対象部分３２０において遮光するだけでなく、強い日差しが車内に入ることへの乗員の注意を、対象部分３２０の色味によって喚起することができる。 In the scene of FIG. 3A where sunlight is likely to enter the vehicle interior, the color of the image output by the sun visor device 200 of FIG. 1 and viewed by the occupant of the vehicle 300 in the target portion 320 is a color with a relatively low light transmittance, such as black or gray. If the color of the target portion 320 is a color with a relatively low light transmittance, not only can the target portion 320 block sunlight from entering the vehicle interior, but the color of the target portion 320 can also alert the occupant to the strong sunlight entering the vehicle interior.

車内に日差しが入りにくい図３Ｂのシーンでは、図１のサンバイザ装置２００が出力し、対象部分３２０において車両３００の乗員が視認する画像の色味が、例えば、ブルー、グリーン等、光透過率が比較的高い色味とされる。対象部分３２０の色味を、光透過率が比較的高い色味とすれば、対象部分３２０における車外の見通しを確保しやすくし、また、車内に入る日差しが強くないことを対象部分３２０の色味で乗員に認識させて、乗員に安心感を与えることができる。 In the scene of FIG. 3B where sunlight is not strong enough to enter the vehicle interior, the color of the image output by the sun visor device 200 of FIG. 1 and viewed by the occupant of the vehicle 300 in the target portion 320 is a color with a relatively high light transmittance, such as blue or green. If the color of the target portion 320 is a color with a relatively high light transmittance, it becomes easier to ensure visibility outside the vehicle in the target portion 320, and the color of the target portion 320 allows the occupant to recognize that the sunlight entering the vehicle interior is not strong, providing the occupant with a sense of security.

対向車ＯＣのヘッドライトの光が車内に入りやすい図３Ｃのシーンでは、図１のサンバイザ装置２００が出力し、対象部分３２０において車両３００の乗員が視認する画像の色味が、例えば、ブラウン等、中間的な光透過率の色味とされる。対象部分３２０の色味を、中間的な光透過率の色味とすれば、車内に入る対向車ＯＣのヘッドライトの光を対象部分３２０において遮光するだけでなく、対象部分３２０における車外の見通しの大幅な低下を抑制し、乗員に安心感を与えることができる。 In the scene of FIG. 3C where the light from the headlights of the oncoming vehicle OC is likely to enter the vehicle interior, the color of the image output by the sun visor device 200 of FIG. 1 and viewed by the occupants of the vehicle 300 in the target portion 320 is set to a color with intermediate light transmittance, such as brown. Setting the color of the target portion 320 to a color with intermediate light transmittance not only blocks the light from the headlights of the oncoming vehicle OC entering the vehicle interior in the target portion 320, but also prevents a significant decrease in visibility outside the vehicle in the target portion 320, providing the occupants with a sense of security.

各シーンに対応して変更する対象部分３２０の色味は、車両３００において乗員の操作により設定された内容に基づいて、設定することができる。色味の設定は、例えば、図３Ａ～図３Ｃに示す車両３００のセンターコンソールの情報表示装置３３０のタッチパネルに表示させた色情報の設定画面３４０上で、乗員の操作により設定することができる。 The color of the target portion 320 that changes for each scene can be set based on the settings made by the occupant in the vehicle 300. The color can be set by the occupant on a color information setting screen 340 displayed on the touch panel of the information display device 330 in the center console of the vehicle 300 shown in Figures 3A to 3C, for example.

タッチパネルは、例えば、情報表示装置３３０のとしてのカーナビゲーション装置、ディスプレイオーディオ装置等にユーザインタフェースとして設けられたものを利用することができる。タッチパネルは、乗員による情報の入力操作を受け付け、あるいは、乗員に対する情報の出力を行う。タッチパネルは、液晶パネルのような表示部と位置入力装置とを組み合わせて構成することができる。位置入力装置には、例えば、タッチパッドを用いることができる。タッチパッドは、タッチスクリーン、タッチ画面、又は接触画面等と呼称される場合もある。 The touch panel may be provided as a user interface in, for example, a car navigation device or a display audio device serving as the information display device 330. The touch panel accepts information input operations by the occupant, or outputs information to the occupant. The touch panel may be configured by combining a display unit such as a liquid crystal panel with a position input device. The position input device may be, for example, a touchpad. The touchpad may also be called a touch screen, touch display, or contact screen.

色情報の設定画面３４０は、例えば、Ｒ（赤）、Ｇ（緑）、Ｂ（青）の各値を個別に入力する従来公知のユーザインタフェース画面とすることができる。 The color information setting screen 340 can be, for example, a conventionally known user interface screen in which the values of R (red), G (green), and B (blue) are input individually.

対象部分３２０の色味は、対象部分３２０の全体に亘って均一の色、濃度であってもよく、例えば、グラデーションのように、色及び濃度の少なくとも一方が対象部分３２０の中で連続的又は段階的に変化するものであってもよい。 The color of the target portion 320 may be a uniform color and density throughout the entire target portion 320, or at least one of the color and density may change continuously or stepwise within the target portion 320, for example, like a gradation.

図１の周辺環境判定部１０３が車両３００の周辺環境として判定したシーンが、フロントシールド３１０上の色味を付けた画像を通して乗員が視認する交通装置の表示部が存在するシーンである場合は、「くり抜き」が行われる。 When the scene that the surrounding environment determination unit 103 in FIG. 1 determines as the surrounding environment of the vehicle 300 is a scene in which a traffic device display unit that is visible to the occupant through a colored image on the windshield 310 is present, "cutting out" is performed.

図４Ａ、図４Ｂ、図５Ａ、図５Ｂは、車内のアイポイントから車外の交通信号機４００に向けた乗員の視線がフロントシールド３１０の上部と重なる場合の、フロントシールド３１０の上部に設けられる対象部分３２０の一例を示している。 Figures 4A, 4B, 5A, and 5B show an example of a target portion 320 provided on the upper part of the windshield 310 when the line of sight of an occupant from the eye point inside the vehicle toward a traffic signal 400 outside the vehicle overlaps with the upper part of the windshield 310.

図４Ａ、図４Ｂ、図５Ａ、図５Ｂの例では、フロントシールド３１０の上部に、「くり抜き」によって除外部分３５０が設けられている。除外部分３５０は、交通信号機４００に向けた乗員の視線が通過する部分である。除外部分３５０は、図１のサンバイザ装置２００が出力する画像によって色味を変更する対象から除外される部分である。 In the examples of Figures 4A, 4B, 5A, and 5B, an excluded portion 350 is provided by "hollowing out" the upper portion of the windshield 310. The excluded portion 350 is a portion through which the line of sight of the occupant toward the traffic signal 400 passes. The excluded portion 350 is a portion that is excluded from the target for which the color is changed by the image output by the sun visor device 200 in Figure 1.

図４Ａ、図４Ｂの例では、フロントシールド３１０の上部のうち除外部分３５０を除く部分に、対象部分３２０が設けられている。対象部分３２０のうち、除外部分３５０の外縁部３６０を除く部分の色味は、図１のサンバイザ装置２００が出力する画像によって、車内に日差しが入りにくくなる日中のシーンに対応する色味に変更する。 In the example of Figures 4A and 4B, a target portion 320 is provided on the upper portion of the windshield 310 excluding an excluded portion 350. The color of the target portion 320 excluding an outer edge 360 of the excluded portion 350 is changed to a color corresponding to a daytime scene in which sunlight is less likely to enter the vehicle interior, based on the image output by the sun visor device 200 of Figure 1.

対象部分３２０のうち、除外部分３５０の外縁部３６０を除く部分の色味は、朝又は夕方のシーンに対応する色味、又は、夜間のシーンに対応する色味に変更してもよい。対象部分３２０のうち外縁部３６０の色味は、図１のサンバイザ装置２００が出力する画像によって、交通信号機４００の点灯色に対応する同じ色味に変更する。 The color of the target portion 320, excluding the outer edge 360 of the excluded portion 350, may be changed to a color corresponding to a morning or evening scene, or a color corresponding to a nighttime scene. The color of the outer edge 360 of the target portion 320 is changed to the same color corresponding to the lighting color of the traffic light 400, based on the image output by the sun visor device 200 in FIG. 1.

図４Ａは、交通信号機４００の点灯色が「青」である場合、図４Ｂは、交通信号機４００の点灯色が「赤」である場合をそれぞれ示している。図１のサンバイザ装置２００が出力する画像によって、乗員は、図４Ａの外縁部３６０において「青」の色味の画像を視認し、図４Ｂの外縁部３６０において「赤」の色味の画像を視認する。 Figure 4A shows a case where the traffic light 400 is illuminated in "green," and Figure 4B shows a case where the traffic light 400 is illuminated in "red." Due to the image output by the sun visor device 200 in Figure 1, the occupant sees an image with a "blue" color at the outer edge 360 in Figure 4A, and sees an image with a "red" color at the outer edge 360 in Figure 4B.

図５Ａ、図５Ｂの例では、フロントシールド３１０の上部のうち除外部分３５０を除く部分に、対象部分３２０が設けられている。対象部分３２０のうち、フロントシールド３１０の上縁部３７０を除く部分の色味は、図１のサンバイザ装置２００が出力する画像によって、車内に日差しが入りにくくなる日中のシーンに対応する色味に変更する。対象部分３２０のうち上縁部３７０の色味は、図１のサンバイザ装置２００が出力する画像によって、交通信号機４００の点灯色と同じ色味に変更する。 In the example of Figs. 5A and 5B, a target portion 320 is provided on the upper portion of the windshield 310 excluding the excluded portion 350. The color of the target portion 320 excluding the upper edge portion 370 of the windshield 310 is changed to a color corresponding to a daytime scene when it is difficult for sunlight to enter the vehicle, based on the image output by the sun visor device 200 of Fig. 1. The color of the upper edge portion 370 of the target portion 320 is changed to the same color as the lit color of the traffic light 400, based on the image output by the sun visor device 200 of Fig. 1.

図５Ａは、交通信号機４００の点灯色が「青」である場合、図５Ｂは、交通信号機４００の点灯色が「赤」である場合をそれぞれ示している。図１のサンバイザ装置２００が出力する画像によって、乗員は、図５Ａの上縁部３７０において「青」の色味の画像を視認し、図５Ｂの上縁部３７０において「赤」の色味の画像を視認する。 Figure 5A shows a case where the traffic light 400 is illuminated in green, and Figure 5B shows a case where the traffic light 400 is illuminated in red. Due to the image output by the sun visor device 200 in Figure 1, the occupant sees an image with a blue tint at the upper edge 370 in Figure 5A, and sees an image with a red tint at the upper edge 370 in Figure 5B.

図４Ａ及び図４Ｂの外縁部３６０と図５Ａ及び図５Ｂの上縁部３７０との色味は、車外カメラの撮影画像から交通装置認識部１１７が認識する交通信号機４００の点灯色が変わると、色味情報生成部１１１が生成する情報の更新によって変更される。 The color of the outer edge 360 in Figures 4A and 4B and the upper edge 370 in Figures 5A and 5B is changed by updating the information generated by the color information generation unit 111 when the color of the traffic signal 400 recognized by the traffic device recognition unit 117 from the image captured by the exterior camera changes.

図４Ａ、図４Ｂ、図５Ａ、図５Ｂの例では、交通信号機４００の視線と重なる除外部分３５０を、図１のサンバイザ装置２００が出力する画像によって色味を変更する対象から除外する。除外部分３５０を色味の変更対象から除外することで、フロントシールド３１０の対象部分３２０を通して交通信号機４００を視認する場合でも、交通信号機４００の点灯色を視認しやすくし、乗員に安心感を与えることができる。 In the examples of Figures 4A, 4B, 5A, and 5B, the excluded portion 350 that overlaps with the line of sight of the traffic signal 400 is excluded from the target for color change by the image output by the sun visor device 200 of Figure 1. By excluding the excluded portion 350 from the target for color change, the illuminated color of the traffic signal 400 can be easily seen even when the traffic signal 400 is viewed through the target portion 320 of the windshield 310, providing a sense of security to the occupants.

図４Ａ、図４Ｂの例では、除外部分３５０の外縁部３６０の色味を、図５Ａ、図５Ｂの例では、フロントシールド３１０の上縁部３７０の色味を、図１のサンバイザ装置２００が出力する画像によって、交通信号機４００の点灯色に変更する。外縁部３６０又は上縁部３７０の色味を交通信号機４００の点灯色に変更することで、外縁部３６０又は上縁部３７０の色味によって、交通信号機４００の点灯色を視認しやすくし、乗員に安心感を与えることができる。 In the example of Figs. 4A and 4B, the color of the outer edge 360 of the excluded portion 350, and in the example of Figs. 5A and 5B, the color of the upper edge 370 of the windshield 310, are changed to the lighting color of the traffic signal 400 by the image output by the sun visor device 200 of Fig. 1. By changing the color of the outer edge 360 or the upper edge 370 to the lighting color of the traffic signal 400, the color of the outer edge 360 or the upper edge 370 makes it easier to see the lighting color of the traffic signal 400, providing a sense of security to the occupants.

車内のアイポイントからの乗員の視線がフロントシールド３１０の上部と重なるのが、交通信号機４００を含まないそれ以外の交通情報の表示部である場合は、外縁部３６０又は上縁部３７０の色味を、交通情報の表示部の表示内容に対応する色味に変更する。この変更により、交通情報の表示部の表示内容を、外縁部３６０又は上縁部３７０の色味によって認識しやすくし、乗員に安心感を与えることができる。 When the line of sight of the occupant from the eye point inside the vehicle overlaps with the upper part of the windshield 310 on a traffic information display unit other than the traffic signal 400, the color of the outer edge 360 or upper edge 370 is changed to a color that corresponds to the display content of the traffic information display unit. This change makes it easier to recognize the display content of the traffic information display unit based on the color of the outer edge 360 or upper edge 370, providing a sense of security to the occupant.

フロントシールド３１０の上部と重なる乗員の視線が、交通情報の表示部に向けたものでない場合は、外縁部３６０又は上縁部３７０の色味を、周辺情報取得部１０１が取得した周辺情報に対応する予め定められた色味に変更させる。この変更により、外縁部３６０又は上縁部３７０の色味によって、交通情報の表示部を視認しやすくし、乗員に安心感を与えることができる。 If the line of sight of the occupant overlapping with the upper part of the windshield 310 is not directed toward the traffic information display unit, the color of the outer edge 360 or upper edge 370 is changed to a predetermined color that corresponds to the surrounding information acquired by the surrounding information acquisition unit 101. This change makes the traffic information display unit easier to see depending on the color of the outer edge 360 or upper edge 370, providing the occupant with a sense of security.

図６では、図１の周辺環境判定部１０３が車両３００の周辺環境として判定したシーンが、車両３００のフロントピラー３８０によってアイポイントから死角となる乗員の視野に歩行者５００が存在するシーンである場合の例を示している。フロントピラー３８０は、フロントシールド３１０に隣接している。図６では、フロントシールド３１０の右側に隣接するフロントピラー３８０を示している。 Figure 6 shows an example of a scene determined by the surrounding environment determination unit 103 in Figure 1 as the surrounding environment of the vehicle 300, where a pedestrian 500 is present in the field of view of the occupant, which is in a blind spot from the eye point due to the front pillar 380 of the vehicle 300. The front pillar 380 is adjacent to the windshield 310. Figure 6 shows the front pillar 380 adjacent to the right side of the windshield 310.

図６に示す例では、右側のフロントピラー３８０により死角となる視野を撮影した死角画像３９０を、サンバイザ装置２００が出力する画像によって、対象部分３２０のうち右側のフロントピラー３８０に近い一部の部分に表示させている。左側のフロントピラー３８０により死角となる視野を撮影した死角画像３９０を、サンバイザ装置２００が出力する画像によって、例えば、対象部分３２０のうち左側のフロントピラー３８０に近い一部の部分に表示させてもよい。 In the example shown in FIG. 6, a blind spot image 390 captured of the field of view that is a blind spot due to the right front pillar 380 is displayed in a portion of the target portion 320 that is close to the right front pillar 380 by an image output by the sun visor device 200. A blind spot image 390 captured of the field of view that is a blind spot due to the left front pillar 380 may also be displayed in a portion of the target portion 320 that is close to the left front pillar 380 by an image output by the sun visor device 200.

死角画像３９０には、例えば、センサ部１１５の補助カメラとしての車外カメラで撮影した映像を用いてもよい。死角画像３９０は、対象部分３２０のうちフロントピラー３８０から離れた部分に表示させてもよい。 For example, the blind spot image 390 may be an image captured by an external camera serving as an auxiliary camera for the sensor unit 115. The blind spot image 390 may be displayed in a portion of the target portion 320 that is distant from the front pillar 380.

図６の例では、フロントシールド３１０の上部のうち死角画像３９０の表示部分を除く部分に、対象部分３２０が設けられている。対象部分３２０のうち、死角画像３９０を除く部分の色味は、図１のサンバイザ装置２００が出力する画像によって、車内に日差しが入りにくくなる日中のシーンに対応する色味に変更する。 In the example of FIG. 6, a target portion 320 is provided in the upper portion of the windshield 310, excluding the portion displaying the blind spot image 390. The color of the target portion 320, excluding the blind spot image 390, is changed to a color corresponding to a daytime scene in which sunlight is less likely to enter the vehicle, based on the image output by the sun visor device 200 of FIG. 1.

対象部分３２０のうち、死角画像３９０を除く部分の色味は、朝又は夕方のシーンに対応する色味、又は、夜間のシーンに対応する色味に変更してもよい。対象部分３２０の死角画像３９０を表示する部分の色味は、図１のサンバイザ装置２００が出力する画像によって、死角画像３９０に対応する色味に変更する。 The color of the target portion 320, excluding the blind spot image 390, may be changed to a color corresponding to a morning or evening scene, or a color corresponding to a nighttime scene. The color of the portion of the target portion 320 that displays the blind spot image 390 is changed to a color corresponding to the blind spot image 390 by the image output by the sun visor device 200 in FIG. 1.

図６の例では、フロントピラー３８０により死角となる視野を撮影した死角画像３９０を、図１のサンバイザ装置２００が出力する画像によって、フロントシールド３１０の対象部分３２０の一部に表示する。死角画像３９０を対象部分３２０に表示することで、フロントピラー３８０により視野に死角が発生する場合でも、死角の空間にいる歩行者５００等を認識しやすくし、乗員に安心感を与えることができる。 In the example of FIG. 6, a blind spot image 390 captured of the field of view that is a blind spot caused by a front pillar 380 is displayed on a part of the target portion 320 of the windshield 310 by the image output by the sun visor device 200 of FIG. 1. By displaying the blind spot image 390 on the target portion 320, it becomes easier to recognize pedestrians 500 and the like in the blind spot space even when a blind spot occurs in the field of view due to the front pillar 380, and this gives the occupants a sense of security.

なお、図１のサンバイザ装置２００が出力する画像によって、対象部分３２０の一部に表示される死角画像３９０の範囲を、例えば、車内のスイッチ３９５を乗員が操作することで、操作により指定された方向に移動させることができるようにしてもよい。死角画像３９０を対象部分３２０に表示するのは、例えば、不図示の方向指示器の操作中に限るようにしてもよい。 The range of the blind spot image 390 displayed on a part of the target portion 320 by the image output by the sun visor device 200 in FIG. 1 may be moved in a direction specified by an occupant operating, for example, a switch 395 inside the vehicle. The blind spot image 390 may be displayed on the target portion 320 only when, for example, a turn signal (not shown) is being operated.

上述の実施形態は本発明の一例である。このため、本発明は、上述の実施形態に限定されることはなく、この実施形態以外の形態であっても、本発明に係る技術的思想を逸脱しない範囲であれば、設計などに応じて種々の変更が可能であることは勿論である。 The above-described embodiment is one example of the present invention. Therefore, the present invention is not limited to the above-described embodiment, and various modifications can be made to the design, etc., even if the embodiment is different from the above-described embodiment, as long as the modifications do not deviate from the technical concept of the present invention.

１００ 色味変更装置
１０１ 周辺情報取得部
１０３ 周辺環境判定部（表示部判定部）
１０７ 色味変更位置判定部（変更範囲算出部、除外部分算出部）
１０９ アイポイント検出部
１１１ 色味情報生成部（色味変更部）
１１３ 制御部（色味変更部）
１１５ センサ部（補助カメラ、センサ及びソナー）
３００ 車両
３１０ フロントシールド
３２０ 対象部分
３４０ 設定画面
３５０ 除外部分
３６０ 外縁部
３８０ フロントピラー
３９０ 死角画像
３９５ スイッチ
４００ 交通信号機（交通情報の表示部） 100: Color change device 101: Surrounding information acquisition unit 103: Surrounding environment determination unit (display unit determination unit)
107 Color change position determination unit (change range calculation unit, excluded portion calculation unit)
109 Eye point detection unit 111 Color information generation unit (color change unit)
113 Control unit (color change unit)
115 Sensor unit (auxiliary camera, sensor and sonar)
300 Vehicle 310 Front shield 320 Target portion 340 Setting screen 350 Excluded portion 360 Outer edge 380 Front pillar 390 Blind spot image 395 Switch 400 Traffic signal (traffic information display portion)

Claims (11)

車両の周辺情報を取得し、
前記周辺情報に基づいて、前記車両のフロントシールドの色味を変更する範囲を算出し、
前記周辺情報に基づいて、前記車両の周辺に存在する交通情報の表示部を判定し、
前記車両の乗員の目の位置をアイポイントとして検出し、
前記表示部の判定結果と前記アイポイントの検出結果とに基づいて、前記フロントシールドの前記範囲のうち、前記アイポイントから前記表示部への前記乗員の視線上に位置する部分を、除外部分として算出し、
前記フロントシールドの前記範囲のうち、前記除外部分を除く対象部分の色味を変更する、
フロントシールドの色味変更方法。 Acquire information about the vehicle's surroundings,
Calculating an area in which to change the color of the front shield of the vehicle based on the surrounding information;
Determining a traffic information display unit present around the vehicle based on the surrounding information;
Detecting the eye positions of the vehicle occupants as eye points;
calculating, as an excluded portion, a portion of the range of the windshield that is located on the line of sight of the occupant from the eye point to the display portion based on the judgment result of the display portion and the detection result of the eye point;
changing the color of a target portion of the range of the front shield excluding the excluded portion;
How to change the color of the front shield. 前記対象部分のうち前記除外部分の外縁部の色味を、前記表示部の表示内容に対応する色味に変更する請求項１に記載のフロントシールドの色味変更方法。 The method for changing the color of the front shield according to claim 1, wherein the color of the outer edge of the excluded portion of the target portion is changed to a color corresponding to the display content of the display unit. 前記表示部が交通信号機を含んでいる場合、前記外縁部の色味を、前記交通信号機の点灯色に対応する色味に変更する処理を実行する請求項２に記載のフロントシールドの色味変更方法。 The method for changing the color of the front shield according to claim 2, wherein, when the display unit includes a traffic signal, a process is executed to change the color of the outer edge to a color corresponding to the illumination color of the traffic signal. 前記対象部分の色味を、前記周辺情報に対応する予め定められた色味に変更する請求項１に記載のフロントシールドの色味変更方法。 The method for changing the color of the front shield according to claim 1, which changes the color of the target portion to a predetermined color that corresponds to the surrounding information. 前記表示部が交通信号機を含んでいる場合、前記対象部分の色味を、前記交通信号機の点灯色に対応する色味に変更する請求項４に記載のフロントシールドの色味変更方法。 The method for changing the color of a front shield according to claim 4, wherein, when the display unit includes a traffic signal, the color of the target portion is changed to a color corresponding to the illumination color of the traffic signal. 前記車両の周辺の画像を撮影する車外カメラ、前記車両の周辺の物体を検出するセンサ及びソナーのうち少なくとも一方、車車間通信により前記車両と通信する他の車両、電気通信回線を介して前記車両と通信する通信相手のうち、１又は２以上の要素から、前記周辺情報を取得する請求項１に記載のフロントシールドの色味変更方法。 The method for changing the color of the front shield according to claim 1, wherein the surrounding information is obtained from one or more of the following: an external camera that captures images of the surroundings of the vehicle; at least one of a sensor and a sonar that detects objects around the vehicle; another vehicle that communicates with the vehicle through vehicle-to-vehicle communication; and a communication partner that communicates with the vehicle via a telecommunication line. 前記車両において前記乗員の操作により設定された内容に基づいて、前記対象部分の色味を変更する請求項１に記載のフロントシールドの色味変更方法。 The method for changing the color of the front shield according to claim 1, which changes the color of the target part based on the content set by the driver of the vehicle. 前記車両の情報表示装置に表示した色情報の設定画面上で、前記乗員の操作により設定された色情報に対応する色味に、前記対象部分の色味を変更する請求項７に記載のフロントシールドの色味変更方法。 The method for changing the color of the front shield according to claim 7, wherein the color of the target part is changed to a color corresponding to the color information set by the driver on a color information setting screen displayed on the vehicle information display device. 前記周辺情報は、前記車両の前記フロントシールドに隣接するフロントピラーによって前記アイポイントから死角となる前記乗員の視野の補助カメラにより撮影した死角画像を含んでおり、前記対象部分の色味の変更により、前記対象部分の少なくとも一部に前記死角画像を表示する請求項１に記載のフロントシールドの色味変更方法。 The method for changing the color of a front shield according to claim 1, wherein the surrounding information includes a blind spot image captured by an auxiliary camera in the field of view of the occupant that is a blind spot from the eye point due to a front pillar adjacent to the front shield of the vehicle, and the method displays the blind spot image on at least a part of the target portion by changing the color of the target portion. 前記死角画像の範囲を、前記車両において前記乗員の操作により指定された方向に移動させる請求項９に記載のフロントシールドの色味変更方法。 The method for changing the color of the front shield according to claim 9, wherein the range of the blind spot image is moved in a direction specified by an operation of the occupant in the vehicle. 車両の周辺情報を取得する周辺情報取得部と、
前記周辺情報に基づいて、前記車両のフロントシールドの色味を変更する範囲を算出する変更範囲算出部と、
前記周辺情報に基づいて、前記車両の周辺に存在する交通情報の表示部を判定する表示部判定部と、
前記車両の乗員の目の位置をアイポイントとして検出するアイポイント検出部と、
前記表示部の判定結果と前記アイポイントの検出結果とに基づいて、前記フロントシールドの前記範囲のうち、前記アイポイントから前記表示部への前記乗員の視線上に位置する部分を、除外部分として算出する除外部分算出部と、
前記フロントシールドの前記範囲のうち、前記除外部分を除く対象部分の色味を変更する色味変更部と、
フロントシールドの色味変更装置。 A surrounding information acquisition unit that acquires surrounding information of the vehicle;
a change range calculation unit that calculates a range in which a color of the front shield of the vehicle is to be changed based on the peripheral information;
a display unit determination unit that determines a display unit for traffic information present around the vehicle based on the surrounding information;
an eye point detection unit that detects an eye position of an occupant of the vehicle as an eye point;
an excluded portion calculation unit that calculates, based on a determination result of the display unit and a detection result of the eye point, a portion of the range of the windshield that is located on the line of sight of the occupant from the eye point to the display unit as an excluded portion;
a color changing unit that changes the color of a target portion of the range of the front shield excluding the excluded portion;
Front shield color changing device.

Images