JP6582143B2 - 投写型表示装置、投写型表示装置の制御方法、投写型表示装置の制御プログラム - Google Patents

投写型表示装置、投写型表示装置の制御方法、投写型表示装置の制御プログラム Download PDF

Info

Publication number
JP6582143B2
JP6582143B2 JP2018556205A JP2018556205A JP6582143B2 JP 6582143 B2 JP6582143 B2 JP 6582143B2 JP 2018556205 A JP2018556205 A JP 2018556205A JP 2018556205 A JP2018556205 A JP 2018556205A JP 6582143 B2 JP6582143 B2 JP 6582143B2
Authority
JP
Japan
Prior art keywords
image
projection display
light
unit
projection
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2018556205A
Other languages
English (en)
Other versions
JPWO2018110041A1 (ja
Inventor
広大 藤田
広大 藤田
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Fujifilm Corp
Original Assignee
Fujifilm Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Fujifilm Corp filed Critical Fujifilm Corp
Application granted granted Critical
Publication of JP6582143B2 publication Critical patent/JP6582143B2/ja
Publication of JPWO2018110041A1 publication Critical patent/JPWO2018110041A1/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/20Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor
    • B60K35/21Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor using visual output, e.g. blinking lights or matrix displays
    • B60K35/23Head-up displays [HUD]
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • G02B27/0101Head-up displays characterised by optical features
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/20Optical features of instruments
    • B60K2360/21Optical features of instruments using cameras
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • G02B27/0101Head-up displays characterised by optical features
    • G02B2027/013Head-up displays characterised by optical features comprising a combiner of particular shape, e.g. curvature
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • G02B27/0101Head-up displays characterised by optical features
    • G02B2027/0138Head-up displays characterised by optical features comprising image capture systems, e.g. camera
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • G02B27/0101Head-up displays characterised by optical features
    • G02B2027/014Head-up displays characterised by optical features comprising information/image processing systems
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • G02B27/0101Head-up displays characterised by optical features
    • G02B2027/0141Head-up displays characterised by optical features characterised by the informative content of the display

Landscapes

  • Physics & Mathematics (AREA)
  • Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Optics & Photonics (AREA)
  • Chemical & Material Sciences (AREA)
  • Combustion & Propulsion (AREA)
  • Transportation (AREA)
  • Mechanical Engineering (AREA)
  • Instrument Panels (AREA)

Description

本発明は、投写型表示装置、投写型表示装置の制御方法、投写型表示装置の制御プログラムに関する。
自動車、電車、船舶、重機、建機、航空機、又は、農作用機械等の乗り物のウインドシールド、又は、ウインドシールドの付近に配置されるコンバイナをスクリーンとして用い、これに光を投写して画像を表示させる乗り物用のHUD(Head−up Display)が知られている。このHUDを用いれば、HUDから投写された光に基づく画像を、スクリーン上で実像として、又は、スクリーン前方において虚像として、運転者に視認させることができる。
特許文献1には、スクリーンに投写される画像光の通路となる筐体の開口部に開閉自在なシャッター部が設けられ、不使用時にはシャッター部が閉じることによって、異物又は直射日光等が開口部内に入り込むのを防止する車載用のHUDが開示されている。
特許文献2には、装置内部への異物の侵入を防ぐために、筐体の開口部に透明カバーが設けられた車載用のHUDが開示されている。
特許文献3には、HUDではないが、車載カメラのレンズにゴミが付着して一部が撮像不能となっていることを、撮像画像を解析して検出し、撮像不能領域がどこであるかをユーザに通知するシステムが記載されている。
特開2003−237411号公報 特開2008−040091号公報 特開2016−058912号公報
乗り物用のHUDでは、画像光が出射される出射面が車内空間に露出するため、利用者が出射面に触れて出射面が汚れたり、出射面に水滴又はゴミ等が付着して出射面が汚れたりする可能性がある。特に、建機又は重機の場合には出射面が汚れる可能性は高い。
HUDの出射面に汚れが付着すると、その汚れによって画像光の一部が遮られることになり、表示される情報の一部が欠落することになる。HUDの場合、表示可能な全範囲にわたって情報を常時表示するのではなく、必要な情報を必要な場合にのみ表示させることが多い。このため、情報の欠落があっても、利用者が情報の欠落を認識することは難しい。特に、出射面の大型化が進んだ場合には、表示可能範囲のどの部分において情報の欠落が起こっているのかを把握することは難しい。
こういった汚れによる情報の欠落を防ぐためには、利用者が、出射面を細めに清掃する必要がある。しかし、出射面が大型化されると、出射面の清掃は容易ではない。また、どこが汚れているかを把握することなく、漫然と出射面を清掃していると、汚れた部分を綺麗にできていない可能性が生じ、情報の欠落を防げない場合もある。
特許文献1,2に記載されたHUDは、出射面に汚れが付着した場合の対応については考慮していない。
特許文献3は、撮像装置の撮像不能領域を可視化するものであり、表示装置としてのHUDにおいて情報が欠落した場合の技術を開示するものではない。
本発明は、上記事情に鑑みてなされたものであり、情報の欠落している領域を可視化して清掃を容易にすることができる投写型表示装置、投写型表示装置の制御方法、及び、投写型表示装置の制御プログラムを提供することを目的とする。
本発明の投写型表示装置は、光源から出射される光を、入力される画像情報に基づいて空間変調する光変調部を含み、前記空間変調された画像光を乗り物の投写面に投写して前記画像光に基づく画像を表示する投写表示部と、前記投写表示部を収容し、前記画像光が出射される開口部を有する筐体と、前記開口部を塞ぐカバーと、前記カバーにおいて物体が付着している物体付着領域を検出する領域検出部と、前記光変調部に入力する前記画像情報を制御して前記投写表示部により表示させる前記画像を制御する表示制御部と、を備え、前記表示制御部は、前記投写表示部によって前記画像を表示可能な表示可能範囲のうちの前記物体付着領域によって前記画像光が遮られる領域の輪郭と前記表示可能範囲の外周を示す枠を前記投写表示部に表示させるものである。
本発明の投写型表示装置の制御方法は、光源から出射される光を、入力される画像情報に基づいて空間変調する光変調部を含み、前記空間変調された画像光を乗り物の投写面に投写して前記画像光に基づく画像を表示する投写表示部と、前記投写表示部を収容し、前記画像光が出射される開口部を有する筐体と、前記開口部を塞ぐカバーと、を有する投写型表示装置の制御方法であって、前記カバーにおいて物体が付着している物体付着領域を検出する領域検出ステップと、前記光変調部に入力する前記画像情報を制御して前記投写表示部によって前記画像を表示可能な表示可能範囲のうちの前記物体付着領域によって前記画像光が遮られる領域の輪郭と前記表示可能範囲の外周を示す枠を前記投写表示部に表示させる表示制御ステップと、を備えるものである。
本発明の投写型表示装置の制御プログラムは、光源から出射される光を、入力される画像情報に基づいて空間変調する光変調部を含み、前記空間変調された画像光を乗り物の投写面に投写して前記画像光に基づく画像を表示する投写表示部と、前記投写表示部を収容し、前記画像光が出射される開口部を有する筐体と、前記開口部を塞ぐカバーと、を有する投写型表示装置の制御プログラムであって、前記カバーにおいて物体が付着している物体付着領域を検出する領域検出ステップと、前記光変調部に入力する前記画像情報を制御して前記投写表示部によって前記画像を表示可能な表示可能範囲のうちの前記物体付着領域によって前記画像光が遮られる領域の輪郭と前記表示可能範囲の外周を示す枠を前記投写表示部に表示させる表示制御ステップと、をコンピュータに実行させるためのものである。
本発明を用いれば、情報の欠落している領域を可視化して清掃を容易にすることができる投写型表示装置、投写型表示装置の制御方法、及び、投写型表示装置の制御プログラムを提供することができる。
本発明の投写型表示装置の一実施形態であるHUD100の概略構成を示す図である。 図1に示す連結部8の外観を示す図である。 図1に示すHUD100の筐体3に収容された制御ユニット5の内部構成例を示す模式図である。 図3に示すシステム制御部47の機能ブロック図である。 HUD100の通常モード時の表示イメージを示す模式図である。 HUD100の通常モード時の表示イメージを示す模式図であり、図5に示す状態においてカバー9の表面に物体が付着して物体付着領域91が発生した状態を示す図である。 HUD100の点検モード時の表示イメージを示す模式図である。 HUD100の点検モード時の表示イメージの別の例を示す模式図である。 HUD100の点検モード時の表示イメージの更に別の例を示す模式図である。 図1に示すHUD100の動作を説明するためのフローチャートである。
以下、本発明の実施形態について図面を参照して説明する。
図1は、本発明の投写型表示装置の一実施形態であるHUD100の概略構成を示す図である。
HUD100は、自動車1に搭載され、自動車1のウインドシールド2の一部の範囲を投写面とし、投写面に投写される画像光により、自動車1の運転者によって虚像又は実像を視認可能にするものである。
HUD100は、自動車以外にも、例えば電車、重機、建機、航空機、船舶、又は、農作機械等の乗り物に搭載して用いることができる。
HUD100は、自動車1のダッシュボード4に一部が露出し内蔵されている。ダッシュボード4は、自動車1のスピードメータ、タコメータ、燃料計、水温計、又は、距離計等の走行に必要な情報を通知するための計器類等を含む内装部品を内蔵する部材である。
HUD100は、光源及びこの光源から出射される光を画像情報に基づいて空間変調する光変調部を含む制御ユニット5と、光変調部により空間変調された画像光をウインドシールド2に投写する投写光学系を構成する拡散部材6及び凹面鏡7と、を収容する箱状の筐体3と、筐体3とダッシュボード4の開口部とを連結する筒状の連結部8と、撮像部10と、を備える。投写光学系の構成は一例であり、図1に示すものに限定されない。
筐体3には開口部Kが形成されており、筐体3の開口部Kの周囲の部分と、ダッシュボード4の開口部とが連結部8によって連結されている。
拡散部材6は、制御ユニット5の光変調部により空間変調された画像光を拡散させて面光源化する部材である。拡散部材6は、表面に微細構造を有するマイクロミラーアレイ、拡散ミラー、MLA(Microlens−Array)ディフューザー、又は、反射ホログラフィクディフューザー等が用いられる。
凹面鏡7は、拡散部材6によって拡散された画像光を拡大してウインドシールド2の投写面に向けて反射する。凹面鏡7によって反射された画像光は、筐体3の開口部K及び連結部8の中空部を通ってウインドシールド2の投写面に向けて投写される。
ウインドシールド2には、開口部K及び連結部8の中空部を通して投写された画像光が運転者の眼Eの方向に反射されるような加工がなされおり、この画像光はウインドシールド2によって反射されて運転者の眼Eに入射される。これにより、運転者は画像光に基づく画像(虚像又は実像)を視認可能となる。
筐体3の開口部Kは、画像光を透過可能な樹脂又はガラス等のカバー9によって塞がれている。開口部Kは、凹面鏡7によって反射された画像光を筐体3から出射させるための出射窓であり、カバー9は、開口部Kを通して筐体3内に塵、埃、又は、液体等が混入するのを防いでいる。
撮像部10は、撮像素子と、撮像素子によって撮像して得られる撮像画像信号を処理して撮像画像データを生成する画像処理部とを含む。撮像部10は、連結部8の内壁においてカバー9よりも上方の位置に固定されており、カバー9の表面(筐体3の内部側とは反対の面)を撮像可能に配置されている。撮像部10によって撮像して得られた撮像画像データは、制御ユニット5の後述するシステム制御部47に転送される。
HUD100は、ウインドシールド2に対して画像光を投写する方式を採用しているが、ウインドシールド2の付近に配置したコンバイナ(図示せず)に画像光を投写する方式を採用してもよい。この場合は、コンバイナが投写面を構成する。
図2は、図1に示す連結部8の外観を示す図である。
図2に示すように、連結部8は、中空部が略直方体となっており、連結部8の基端にあるカバー9の画像光の出射される方向から見た平面形状は、自動車1の運転席と助手席の並ぶ方向Xが長手方向となる矩形となっている。このように、カバー9が方向Xに長い形状となっていることで、ウインドシールド2の広範囲にて画像の表示が可能となる。
自動車1は、図2に示したハンドルHと対向する位置に運転席が配置され、この運転席の左隣または右隣(例は左隣である)に助手席が配置される構成である。自動車1の運転席と助手席の並ぶ方向Xは、自動車1が直進する場合の自動車1の進行方向と略直交する方向と同義である。2つの方向が略直交するとは、この2つの方向のなす角度が70度〜110度の範囲にあることを言う。
図3は、図1に示すHUD100の筐体3に収容された制御ユニット5の内部構成例を示す模式図である。
図3に示すように、HUD100の制御ユニット5は、光源ユニット40と、光変調素子44と、光変調素子44を駆動する駆動部45と、HUD100全体を統括制御するシステム制御部47と、を備える。図3に示す投写光学系48は、図1に示す拡散部材6及び凹面鏡7によって構成される。
システム制御部47は、プロセッサと、このプロセッサの実行するプログラム等が記憶されるROM(Read Only Memory)と、このプロセッサのワークメモリとして機能するRAM(Random Access Memory)と、を含む。このROMに記憶されるプログラムは、HUD100の制御プログラムを含む。
光源ユニット40は、光源制御部46と、赤色光を出射する赤色光源であるR光源41rと、緑色光を出射する緑色光源であるG光源41gと、青色光を出射する青色光源であるB光源41bと、ダイクロイックプリズム43と、R光源41rとダイクロイックプリズム43の間に設けられたコリメータレンズ42rと、G光源41gとダイクロイックプリズム43の間に設けられたコリメータレンズ42gと、B光源41bとダイクロイックプリズム43の間に設けられたコリメータレンズ42bと、を備える。R光源41rとG光源41gとB光源41bはHUD100の光源を構成する。
ダイクロイックプリズム43は、R光源41r、G光源41g、及び、B光源41bの各々から出射される光を同一光路に導くための光学部材である。ダイクロイックプリズム43は、コリメータレンズ42rによって平行光化された赤色光を透過させて光変調素子44に出射する。また、ダイクロイックプリズム43は、コリメータレンズ42gによって平行光化された緑色光を反射させて光変調素子44に出射する。さらに、ダイクロイックプリズム43は、コリメータレンズ42bによって平行光化された青色光を反射させて光変調素子44に出射する。このような機能を持つ光学部材としては、ダイクロイックプリズムに限らない。例えば、クロスダイクロイックミラーを用いてもよい。
R光源41r、G光源41g、及び、B光源41bは、それぞれ、レーザ又はLED(Light Emitting Diode)等の発光素子が用いられる。HUD100の光源は、R光源41rとG光源41gとB光源41bの3つの例に限らず、1つの光源、2つの光源、又は、4つ以上の光源によって構成されていてもよい。
光源制御部46は、R光源41r、G光源41g、及び、B光源41bの各々を制御し、R光源41r、G光源41g、及び、B光源41bから光を出射させる制御を行う。
光変調素子44は、R光源41r、G光源41g、及び、B光源41bから出射され、ダイクロイックプリズム43から出射された光を、システム制御部47により入力される画像情報に基づいて空間変調する。
光変調素子44としては、例えば、LCOS(Liquid crystal on silicon)、DMD(Digital Micromirror Device)、MEMS(Micro Electro Mechanical Systems)素子、又は、液晶表示素子等を用いることができる。
駆動部45は、システム制御部47から入力される画像情報に基づいて光変調素子44を駆動し、この画像情報に基づいて空間変調された画像光(赤色画像光、青色画像光、及び、緑色画像光)を、光変調素子44から投写光学系48の拡散部材6に出射させる。光変調素子44と駆動部45はHUD100の光変調部を構成する。
図1に示した拡散部材6及び凹面鏡7から構成される投写光学系48は、ウインドシールド2に投写された画像光に基づく画像が、ウインドシールド2前方の位置において虚像として運転者に視認可能となるように光学設計がなされている。この画像光に基づく画像が、ウインドシールド2において実像として運転者に視認可能となるように投写光学系48の光学設計がなされていてもよい。
システム制御部47は、光源制御部46及び駆動部45を制御して、画像情報に基づいて空間変調された画像光を拡散部材6に出射させる。
投写光学系48と、光変調素子44及び駆動部45から構成される光変調部と、光源ユニット40とにより、投写表示部49が構成されている。
図4は、図3に示すシステム制御部47の機能ブロック図である。
システム制御部47は、表示制御部47Aと、領域検出部47Bと、を備える。表示制御部47Aと領域検出部47Bは、システム制御部47のプロセッサがROMに記憶される制御プログラムを含むプログラムを実行することにより形成される機能ブロックである。
領域検出部47Bは、点検モードが設定されている場合には、撮像部10から入力される撮像画像データを解析して、カバー9の表面において物体が付着している領域(以下、物体付着領域という)を検出する。物体とは、HUD100の表示品質に影響を与える程度に大きなゴミ、埃、塵、液体、又は、皮脂等のことを言う。点検モードとは、カバー9の表面に表示に影響のある汚れがあるか否かを判定し、汚れがある場合にはユーザに清掃を促すモードを言う。
例えば、物体が全く付着していない綺麗な状態のカバー9の表面を撮像部10により撮像して得られた基準撮像画像データをシステム制御部47のROMに記憶しておき、領域検出部47Bは、この基準撮像画像データと、撮像部10から入力される撮像画像データとの比較により物体付着領域を検出する。
具体的には、領域検出部47Bは、基準撮像画像データと撮像部10から入力される撮像画像データとを比較して、撮像部10から入力される撮像画像データにおいて基準撮像画像データに対し濃淡の変化が大きい変化領域を検出する。そして、領域検出部47Bは、この変化領域のうち、面積が閾値以上となる変化領域を物体付着領域として検出する。
領域検出部47Bは、面積が閾値未満となる変化領域しか存在しない場合でも、この変化領域が複数個近傍に存在している場合には、この複数個の変化領域を包含する領域を物体付着領域として検出してもよい。
表示制御部47Aは、駆動部45に入力する画像情報を制御して、投写表示部49により表示させる画像を制御する。
また、表示制御部47Aは、点検モードが設定されている場合には、領域検出部47Bによって検出された物体付着領域によって画像光が遮られて表示不可となる領域の輪郭を表示するための輪郭情報を含む画像情報を駆動部45に入力し、この輪郭情報に基づく画像を投写表示部49に表示させる。
表示制御部47Aは、通常モードが設定されている場合には、目的地までの経路案内を行うための経路案内情報、自動車1の走行速度の情報、自動車1の計器の状態を示す情報、又は、自動車1の運転者に警告を行うための情報等の運転支援情報を含む画像情報を駆動部45に入力し、運転支援情報に基づく画像を投写表示部49に表示させる。
図5は、HUD100の通常モード時の表示イメージを示す模式図である。図5の上段には、自動車1の運転席に着座する運転者から視認される画像20a,20b,20cと、投写表示部49によって画像を表示させることのできる最大の範囲を示す表示可能範囲20と、が示されている。図5の下段には、カバー9を方向Xとこれに直交する方向Yの各々に垂直な方向から見た平面図が示されている。
画像20aは、自動車1の走行速度を示す文字である。画像20bは、経路案内を示す文字及び矢印である。画像20cは、警告を行うアイコンである。
カバー9の表面には、投写光学系48を通った画像光が出射される範囲である光出射範囲90が示されている。光出射範囲90から出射された画像光がウインドシールド2に投写されることによって、表示可能範囲20において画像20a、画像20b、及び、画像20cが表示される。なお、表示可能範囲20において、運転支援情報に基づく画像(画像20a、画像20b、及び、画像20c)以外の領域は透明となっており、ウインドシールド2前方の景色が確認可能となっている。
図6は、HUD100の通常モード時の表示イメージを示す模式図であり、図5に示す状態においてカバー9の表面に物体が付着して物体付着領域91が発生した状態を示している。
図6に示す状態では、図5に示されていた画像20cを表示するための画像光が光出射範囲90にある物体付着領域91によって遮られており、画像20cが表示されるべき領域は透明になっている。このため、運転者は警告に気付くことができなくなる。
このような事態を防ぐためには、カバー9に付着している物体を取り除く必要がある。しかし、表示可能範囲20のうち物体付着領域91によって画像光が遮られる(表示が不可となる)領域は透明表示になるだけである。このため、運転者は、HUD100によって表示される画像を見るだけでは、カバー9のどの部分が汚れているのかを判断するのが難しい。そこで、HUD100では、カバー9のどこを綺麗にすればよいかを運転者に直感的に知らせるべく、上記の点検モードを搭載している。
図7は、HUD100の点検モード時の表示イメージを示す模式図である。図7の上段には、上述した表示可能範囲20が示されている。図7の下段には、カバー9を方向Xとこれに直交する方向Yの各々に垂直な方向から見た平面図が示されている。
図7に示すように、点検モードでは、表示制御部47Aは、領域検出部47Bにより光出射範囲90において物体付着領域91が検出されると、表示可能範囲20のうちのこの物体付着領域91によって画像光が遮られる領域の輪郭を有色して表示するための輪郭情報を含む画像情報を生成して駆動部45に入力する。
これにより、図7の上段に示すように、表示可能範囲20には、物体付着領域91によって表示不可となる欠落領域91aの輪郭21が表示される。なお、表示可能範囲20において輪郭21以外の部分は透明表示となっている。
運転者は、ウインドシールド2上において表示可能範囲20がどのあたりにあるかを理解しておくことで、この輪郭21によって、カバー9のどのあたりが汚れているのかを把握することができる。したがって、運転者は、カバー9の表面を効率的に清掃することができる。
なお、表示制御部47Aは、領域検出部47Bにより光出射範囲90において物体付着領域91が検出されると、表示可能範囲20の外周を示す枠と、表示可能範囲20のうちのこの物体付着領域91によって画像光が遮られる領域の輪郭とを有色して表示するための画像情報を生成して駆動部45に入力してもよい。
これにより、図8の上段に示すように、表示可能範囲20には、物体付着領域91によって表示不可となる欠落領域91aを取り囲む輪郭21と、表示可能範囲20の外周を示す枠22とが表示される。なお、表示可能範囲20において輪郭21と枠22以外の部分は透明表示となっている。
この構成によれば、運転者は、カバー9の光出射範囲90と物体付着領域91との位置関係を把握することができ、カバー9のどのあたりが汚れているのかをより直感的に把握することができる。
また、表示制御部47Aは、領域検出部47Bにより光出射範囲90において物体付着領域91が検出されると、表示可能範囲20のうちの、この物体付着領域91によって画像光が遮られる領域以外の部分を有色(例えば赤一色又は青一色等)して表示するための画像情報を生成して駆動部45に入力してもよい。
これにより、図9の上段に示すように、表示可能範囲20には、物体付着領域91によって表示不可となる欠落領域91aを除く部分に単色の画像23が表示される。
この構成によれば、画像23によってウインドシールド2前方の背景像が見えにくくなるため、物体付着領域91によって表示不可となる領域の輪郭の視認性を向上させることができる。
次に、HUD100の動作について説明する。
図10は、図1に示すHUD100の動作を説明するためのフローチャートである。
自動車1のイグニッションキーが操作されることによってHUD100の電源がオンしてHUD100が起動すると、システム制御部47は、動作モードを点検モードに設定する(ステップS1)。
点検モードが設定されると、撮像部10によってカバー9の表面が撮像され(ステップS2)、撮像画像データがシステム制御部47に入力される。システム制御部47の領域検出部47Bは、撮像画像データが入力されると、この撮像画像データと基準撮像画像データとに基づいて、カバー9の表面の物体付着領域を検出する。
物体付着領域が検出されると(ステップS3:YES)、表示制御部47Aは、物体付着領域によって表示不可となる領域の輪郭と、カバー9の清掃を促すメッセージとを表示するための画像情報を生成し、この輪郭とメッセージを表示可能範囲20に表示させる(ステップS4)。ステップS4の後はステップS2に処理が戻る。
メッセージの例としては、“HUDのカバーが汚れています。表示像を参考にカバーを清掃してください”といったものが挙げられる。また、メッセージは、画像ではなく音声出力によって運転者に伝達してもよい。なお、メッセージの表示又は音声出力は必須ではない。
ステップS3において物体付着領域が検出されなかった場合には、表示制御部47Aは、動作モードを通常モードに設定し(ステップS5)、運転支援情報に基づく画像の表示を開始する。
以上のようにHUD100では、点検モード時に、カバー9に物体が付着している場合には、この物体の付着している領域に対応する輪郭が投写表示部49によって表示される。このため、運転者は、表示される輪郭を参考にして、カバー9のどのあたりが汚れているのかを直感的に把握することができる。したがって、カバー9における必要な箇所だけを清掃すればすむようになり、清掃を効率的に行うことができる。今後、HUDの大画面化が進み、カバー9の表面積が大きくなると、そのすべての表面を清掃するには労力を有する。このため、物体付着領域の位置を表示画像によって把握できる本技術は有効となる。
なお、図10に示す動作例では、HUD100が起動すると点検モードに自動で移行するものとしているが、これに限らない。例えば、マニュアル操作によって任意のタイミングにおいて点検モードに移行できるようにしてもよい。
また、図10に示す動作例では、物体付着領域が検出されなくなった時点において動作モードが通常モードに自動で移行しているが、マニュアル操作によって点検モードから通常モードに移行できるようにしてもよい。図10に示す動作例によれば、物体付着領域が存在する状態から、カバー9の表面が清掃されて物体付着領域が検出されなくなると自動で通常モードが開始されるため、通常モードに移行したことによってカバー9の汚れが取れたことを運転者に認識させることができ、利便性を向上させることができる。
以上の説明では、撮像部10がカバー9の上方に設けられているが、筐体3の内部に撮像部10を配置して物体付着領域を検出できるようにしてもよい。
また、カバー9が開口部Kに嵌め込まれる構成としたが、カバー9は開口部Kを塞ぐことができる構成であればよい。例えば、カバー9を筐体3の外周面に固定し、カバー9の裏面で開口部K全体を覆うことで、開口部Kを塞ぐ構成としてもよい。
以上説明してきたように、本明細書には以下の事項が開示されている。
(1) 光源から出射される光を、入力される画像情報に基づいて空間変調する光変調部を含み、上記空間変調された画像光を乗り物の投写面に投写して上記画像光に基づく画像を表示する投写表示部と、上記投写表示部を収容し、上記画像光が出射される開口部を有する筐体と、上記開口部を塞ぐカバーと、上記カバーにおいて物体が付着している物体付着領域を検出する領域検出部と、上記光変調部に入力する上記画像情報を制御して上記投写表示部により表示させる上記画像を制御する表示制御部と、を備え、上記表示制御部は、上記投写表示部によって上記画像を表示可能な表示可能範囲のうちの上記物体付着領域によって上記画像光が遮られる領域の輪郭を上記投写表示部に表示させる投写型表示装置。
(2) (1)記載の投写型表示装置であって、上記表示制御部は、上記表示可能範囲の外周を示す枠を上記輪郭と併せて上記投写表示部に表示させる投写型表示装置。
(3) (1)記載の投写型表示装置であって、上記表示制御部は、上記表示可能範囲のうちの上記物体付着領域により上記画像光が遮られる領域以外を有色表示にすることによって上記輪郭を上記投写表示部に表示させる投写型表示装置。
(4) (1)〜(3)のいずれか1項記載の投写型表示装置であって、上記表示制御部は、上記投写型表示装置が起動したタイミングにおいて上記輪郭を表示させる投写型表示装置。
(5) 光源から出射される光を、入力される画像情報に基づいて空間変調する光変調部を含み、上記空間変調された画像光を乗り物の投写面に投写して上記画像光に基づく画像を表示する投写表示部と、上記投写表示部を収容し、上記画像光が出射される開口部を有する筐体と、上記開口部を塞ぐカバーと、を有する投写型表示装置の制御方法であって、上記カバーにおいて物体が付着している物体付着領域を検出する領域検出ステップと、上記光変調部に入力する上記画像情報を制御して上記投写表示部によって上記画像を表示可能な表示可能範囲のうちの上記物体付着領域によって上記画像光が遮られる領域の輪郭を上記投写表示部に表示させる表示制御ステップと、を備える投写型表示装置の制御方法。
(6) (5)記載の投写型表示装置の制御方法であって、上記表示制御ステップでは、上記表示可能範囲の外周を示す枠を上記輪郭と併せて上記投写表示部に表示させる投写型表示装置の制御方法。
(7) (5)記載の投写型表示装置の制御方法であって、上記表示制御ステップでは、上記表示可能範囲のうちの上記物体付着領域により上記画像光が遮られる領域以外を有色表示にすることによって上記輪郭を上記投写表示部に表示させる投写型表示装置の制御方法。
(8) (5)〜(7)のいずれか1項記載の投写型表示装置の制御方法であって、上記表示制御ステップでは、上記投写型表示装置が起動したタイミングにおいて上記輪郭を表示させる投写型表示装置の制御方法。
(9) 光源から出射される光を、入力される画像情報に基づいて空間変調する光変調部を含み、上記空間変調された画像光を乗り物の投写面に投写して上記画像光に基づく画像を表示する投写表示部と、上記投写表示部を収容し、上記画像光が出射される開口部を有する筐体と、上記開口部を塞ぐカバーと、を有する投写型表示装置の制御プログラムであって、上記カバーにおいて物体が付着している物体付着領域を検出する領域検出ステップと、上記光変調部に入力する上記画像情報を制御して上記投写表示部によって上記画像を表示可能な表示可能範囲のうちの上記物体付着領域によって上記画像光が遮られる領域の輪郭を上記投写表示部に表示させる表示制御ステップと、をコンピュータに実行させるための投写型表示装置の制御プログラム。
本発明を用いれば、情報の欠落している領域を可視化して画像光が出射するカバーの清掃を容易にすることができる。
100 HUD
1 自動車
2 ウインドシールド
3 筐体
4 ダッシュボード
5 制御ユニット
6 拡散部材
7 凹面鏡
8 連結部
9 カバー
10 撮像部
20 表示可能範囲
20a,20b,20c 画像
21 輪郭
22 枠
23 画像
40 光源ユニット
41r R光源
41g G光源
41b B光源
42r、42g、42b コリメータレンズ
43 ダイクロイックプリズム
44 光変調素子
45 駆動部
46 光源制御部
47 システム制御部
47A 表示制御部
47B 領域検出部
48 投写光学系
49 投写表示部
90 光出射範囲
91 物体付着領域
91a 欠落領域
H ハンドル
K 開口部
E 眼
X、Y 方向

Claims (5)

  1. 光源から出射される光を、入力される画像情報に基づいて空間変調する光変調部を含み、前記空間変調された画像光を乗り物の投写面に投写して前記画像光に基づく画像を表示する投写表示部と、
    前記投写表示部を収容し、前記画像光が出射される開口部を有する筐体と、
    前記開口部を塞ぐカバーと、
    前記カバーにおいて物体が付着している物体付着領域を検出する領域検出部と、
    前記光変調部に入力する前記画像情報を制御して前記投写表示部により表示させる前記画像を制御する表示制御部と、を備え、
    前記表示制御部は、前記投写表示部によって前記画像を表示可能な表示可能範囲のうちの前記物体付着領域によって前記画像光が遮られる領域の輪郭と前記表示可能範囲の外周を示す枠を前記投写表示部に表示させる投写型表示装置。
  2. 請求項記載の投写型表示装置であって、
    前記表示制御部は、前記投写型表示装置が起動したタイミングにおいて前記輪郭を表示させる投写型表示装置。
  3. 光源から出射される光を、入力される画像情報に基づいて空間変調する光変調部を含み、前記空間変調された画像光を乗り物の投写面に投写して前記画像光に基づく画像を表示する投写表示部と、前記投写表示部を収容し、前記画像光が出射される開口部を有する筐体と、前記開口部を塞ぐカバーと、を有する投写型表示装置の制御方法であって、
    前記カバーにおいて物体が付着している物体付着領域を検出する領域検出ステップと、
    前記光変調部に入力する前記画像情報を制御して前記投写表示部によって前記画像を表示可能な表示可能範囲のうちの前記物体付着領域によって前記画像光が遮られる領域の輪郭と前記表示可能範囲の外周を示す枠を前記投写表示部に表示させる表示制御ステップと、を備える投写型表示装置の制御方法。
  4. 請求項記載の投写型表示装置の制御方法であって、
    前記表示制御ステップでは、前記投写型表示装置が起動したタイミングにおいて前記輪郭を表示させる投写型表示装置の制御方法。
  5. 光源から出射される光を、入力される画像情報に基づいて空間変調する光変調部を含み、前記空間変調された画像光を乗り物の投写面に投写して前記画像光に基づく画像を表示する投写表示部と、前記投写表示部を収容し、前記画像光が出射される開口部を有する筐体と、前記開口部を塞ぐカバーと、を有する投写型表示装置の制御プログラムであって、
    前記カバーにおいて物体が付着している物体付着領域を検出する領域検出ステップと、
    前記光変調部に入力する前記画像情報を制御して前記投写表示部によって前記画像を表示可能な表示可能範囲のうちの前記物体付着領域によって前記画像光が遮られる領域の輪郭と前記表示可能範囲の外周を示す枠を前記投写表示部に表示させる表示制御ステップと、をコンピュータに実行させるための投写型表示装置の制御プログラム。
JP2018556205A 2016-12-12 2017-10-04 投写型表示装置、投写型表示装置の制御方法、投写型表示装置の制御プログラム Active JP6582143B2 (ja)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2016240497 2016-12-12
JP2016240497 2016-12-12
PCT/JP2017/036057 WO2018110041A1 (ja) 2016-12-12 2017-10-04 投写型表示装置、投写型表示装置の制御方法、投写型表示装置の制御プログラム

Publications (2)

Publication Number Publication Date
JP6582143B2 true JP6582143B2 (ja) 2019-09-25
JPWO2018110041A1 JPWO2018110041A1 (ja) 2019-10-24

Family

ID=62558381

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2018556205A Active JP6582143B2 (ja) 2016-12-12 2017-10-04 投写型表示装置、投写型表示装置の制御方法、投写型表示装置の制御プログラム

Country Status (4)

Country Link
US (1) US10746992B2 (ja)
JP (1) JP6582143B2 (ja)
CN (1) CN110073273B (ja)
WO (1) WO2018110041A1 (ja)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP7504387B2 (ja) * 2020-03-31 2024-06-24 パナソニックオートモーティブシステムズ株式会社 撮像表示システム
CN115113391A (zh) * 2021-03-18 2022-09-27 中强光电股份有限公司 光机模块与投影装置
DE102021123814A1 (de) * 2021-09-15 2023-03-16 Bayerische Motoren Werke Aktiengesellschaft Reflexionsanzeigesystem sowie Verfahren zum Betreiben eines Reflexionsanzeigesystems mit einer Abdeckerkennung

Family Cites Families (20)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0618902B2 (ja) 1986-12-19 1994-03-16 東洋紡績株式会社 熱収縮性ポリエステル系フイルム
JPS63156833U (ja) * 1987-04-03 1988-10-14
JP2003237411A (ja) * 2002-02-12 2003-08-27 Denso Corp ヘッドアップディスプレイ装置
US7199767B2 (en) * 2002-03-07 2007-04-03 Yechezkal Evan Spero Enhanced vision for driving
DE10245334A1 (de) * 2002-09-27 2004-04-08 Robert Bosch Gmbh Navigationsvorrichtung
JP2005075230A (ja) * 2003-09-02 2005-03-24 Nissan Motor Co Ltd 車両用ヘッドアップディスプレイ装置
DE102005025572A1 (de) * 2005-06-03 2006-06-08 Daimlerchrysler Ag Selbstreinigende Bedien- und Anzeigeeinrichtung
JP5080763B2 (ja) * 2006-08-04 2012-11-21 矢崎総業株式会社 ヘッドアップディスプレイ用カバー及び車両用表示ユニット
JP2010033222A (ja) * 2008-07-28 2010-02-12 Seiko Epson Corp ディスプレイを有する電子機器
DE102009054194A1 (de) * 2009-11-24 2011-05-26 Conti Temic Microelectronic Gmbh Nutzung der optischen Elemente eines Head-up-Displays zur kamerabasierten Regen- und Schmutzsensorik, Fahreridentifikation, Müdigkeitserkennung
JP2012026857A (ja) * 2010-07-23 2012-02-09 Fujitsu Ltd 清掃作業支援装置
US9443429B2 (en) * 2012-01-24 2016-09-13 GM Global Technology Operations LLC Optimum gaze location on full windscreen display
US9170474B2 (en) * 2012-06-21 2015-10-27 Qualcomm Mems Technologies, Inc. Efficient spatially modulated illumination system
US20140034806A1 (en) * 2012-08-01 2014-02-06 Delphi Technologies, Inc. Windshield display with obstruction detection
FR3000571B1 (fr) * 2012-12-28 2016-04-29 Valeo Etudes Electroniques Afficheur, notamment afficheur tete haute, pour vehicule
JP5969973B2 (ja) * 2013-12-18 2016-08-17 富士重工業株式会社 車載画像表示装置
CN105022167B (zh) * 2014-04-24 2018-04-03 惠州市德赛西威汽车电子股份有限公司 一种双模式抬头显示装置及其显示方法
JP6398501B2 (ja) * 2014-09-10 2018-10-03 株式会社デンソー 車載カメラ診断装置
CN105528577B (zh) * 2015-12-04 2019-02-12 深圳大学 基于智能眼镜的识别方法
JP6272375B2 (ja) * 2016-03-18 2018-01-31 株式会社Subaru 車両用表示制御装置

Also Published As

Publication number Publication date
US10746992B2 (en) 2020-08-18
CN110073273A (zh) 2019-07-30
WO2018110041A1 (ja) 2018-06-21
US20190271842A1 (en) 2019-09-05
CN110073273B (zh) 2021-06-01
JPWO2018110041A1 (ja) 2019-10-24

Similar Documents

Publication Publication Date Title
JP6462194B2 (ja) 投写型表示装置、投写表示方法、及び、投写表示プログラム
JP6255537B2 (ja) 投写型表示装置及び投写制御方法
WO2017033566A1 (ja) 投写型表示装置、投写表示方法、及び投写表示プログラム
CN109789783B (zh) 投影型显示装置、显示控制方法及计算机可读取存储介质
JP6582143B2 (ja) 投写型表示装置、投写型表示装置の制御方法、投写型表示装置の制御プログラム
JP2006106254A (ja) 車両用ヘッドアップディスプレイ
JP6446595B2 (ja) 投写型表示装置、投写表示方法、及び、投写表示プログラム
WO2017149995A1 (ja) 投写型表示装置、投写制御方法、及び、投写制御プログラム
JP6531226B2 (ja) 投写型表示装置、投写型表示装置の作動方法及び作動プログラム
JP6582140B2 (ja) 投写型表示装置
US10412354B2 (en) Projection type display device and projection control method
US10823957B2 (en) Projection display device, and operation method and operation program for projection display device
US10761413B2 (en) Projection display device, control method for projection display device, and control program for projection display device
WO2018051734A1 (ja) 投写型表示装置及びその制御方法
WO2017145565A1 (ja) 投写型表示装置、投写表示方法、及び、投写表示プログラム
JP2018086900A (ja) ヘッドアップディスプレイ装置、表示方法およびプログラム

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20190510

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20190510

A871 Explanation of circumstances concerning accelerated examination

Free format text: JAPANESE INTERMEDIATE CODE: A871

Effective date: 20190510

A975 Report on accelerated examination

Free format text: JAPANESE INTERMEDIATE CODE: A971005

Effective date: 20190627

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20190806

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20190902

R150 Certificate of patent or registration of utility model

Ref document number: 6582143

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250