JP7347406B2 - 画像表示装置、プログラム及び画像表示方法 - Google Patents

画像表示装置、プログラム及び画像表示方法 Download PDF

Info

Publication number
JP7347406B2
JP7347406B2 JP2020199182A JP2020199182A JP7347406B2 JP 7347406 B2 JP7347406 B2 JP 7347406B2 JP 2020199182 A JP2020199182 A JP 2020199182A JP 2020199182 A JP2020199182 A JP 2020199182A JP 7347406 B2 JP7347406 B2 JP 7347406B2
Authority
JP
Japan
Prior art keywords
parking
image display
display device
real space
spots
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2020199182A
Other languages
English (en)
Other versions
JP2022086905A (ja
Inventor
豊和 中嶋
俊介 相良
尚哉 岡
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Toyota Motor Corp
Original Assignee
Toyota Motor Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Toyota Motor Corp filed Critical Toyota Motor Corp
Priority to JP2020199182A priority Critical patent/JP7347406B2/ja
Priority to CN202111416956.6A priority patent/CN114582154B/zh
Priority to US17/537,065 priority patent/US11801751B2/en
Priority to EP21211082.9A priority patent/EP4006873A1/en
Publication of JP2022086905A publication Critical patent/JP2022086905A/ja
Application granted granted Critical
Publication of JP7347406B2 publication Critical patent/JP7347406B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • GPHYSICS
    • G08SIGNALLING
    • G08GTRAFFIC CONTROL SYSTEMS
    • G08G1/00Traffic control systems for road vehicles
    • G08G1/14Traffic control systems for road vehicles indicating individual free spaces in parking areas
    • G08G1/141Traffic control systems for road vehicles indicating individual free spaces in parking areas with means giving the indication of available parking spaces
    • G08G1/143Traffic control systems for road vehicles indicating individual free spaces in parking areas with means giving the indication of available parking spaces inside the vehicles
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/50Context or environment of the image
    • G06V20/56Context or environment of the image exterior to a vehicle by using sensors mounted on the vehicle
    • G06V20/58Recognition of moving objects or obstacles, e.g. vehicles or pedestrians; Recognition of traffic objects, e.g. traffic signs, traffic lights or roads
    • G06V20/586Recognition of moving objects or obstacles, e.g. vehicles or pedestrians; Recognition of traffic objects, e.g. traffic signs, traffic lights or roads of parking space
    • GPHYSICS
    • G07CHECKING-DEVICES
    • G07BTICKET-ISSUING APPARATUS; FARE-REGISTERING APPARATUS; FRANKING APPARATUS
    • G07B15/00Arrangements or apparatus for collecting fares, tolls or entrance fees at one or more control points
    • G07B15/02Arrangements or apparatus for collecting fares, tolls or entrance fees at one or more control points taking into account a variable factor such as distance or time, e.g. for passenger transport, parking systems or car rental systems
    • GPHYSICS
    • G07CHECKING-DEVICES
    • G07FCOIN-FREED OR LIKE APPARATUS
    • G07F17/00Coin-freed apparatus for hiring articles; Coin-freed facilities or services
    • G07F17/24Coin-freed apparatus for hiring articles; Coin-freed facilities or services for parking meters
    • G07F17/246Coin-freed apparatus for hiring articles; Coin-freed facilities or services for parking meters provided with vehicle proximity-detectors
    • GPHYSICS
    • G08SIGNALLING
    • G08GTRAFFIC CONTROL SYSTEMS
    • G08G1/00Traffic control systems for road vehicles
    • G08G1/14Traffic control systems for road vehicles indicating individual free spaces in parking areas
    • G08G1/145Traffic control systems for road vehicles indicating individual free spaces in parking areas where the indication depends on the parking areas
    • G08G1/147Traffic control systems for road vehicles indicating individual free spaces in parking areas where the indication depends on the parking areas where the parking area is within an open public zone, e.g. city centre
    • GPHYSICS
    • G08SIGNALLING
    • G08GTRAFFIC CONTROL SYSTEMS
    • G08G1/00Traffic control systems for road vehicles
    • G08G1/14Traffic control systems for road vehicles indicating individual free spaces in parking areas
    • G08G1/145Traffic control systems for road vehicles indicating individual free spaces in parking areas where the indication depends on the parking areas
    • G08G1/148Management of a network of parking areas
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/18Information management
    • B60K2360/186Displaying information according to relevancy
    • B60K2360/1868Displaying information according to relevancy according to driving situations
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/20Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor
    • B60K35/21Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor using visual output, e.g. blinking lights or matrix displays
    • B60K35/23Head-up displays [HUD]
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/20Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor
    • B60K35/29Instruments characterised by the way in which information is handled, e.g. showing information on plural displays or prioritising information according to driving conditions
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/80Arrangements for controlling instruments
    • B60K35/81Arrangements for controlling instruments for controlling displays

Landscapes

  • General Physics & Mathematics (AREA)
  • Physics & Mathematics (AREA)
  • Engineering & Computer Science (AREA)
  • Automation & Control Theory (AREA)
  • Chemical & Material Sciences (AREA)
  • Combustion & Propulsion (AREA)
  • Transportation (AREA)
  • Mechanical Engineering (AREA)
  • Finance (AREA)
  • Business, Economics & Management (AREA)
  • Multimedia (AREA)
  • Theoretical Computer Science (AREA)
  • Traffic Control Systems (AREA)
  • Controls And Circuits For Display Device (AREA)
  • Navigation (AREA)

Description

本開示は、画像表示装置、プログラム及び画像表示方法に関する。
従来、車両の現在位置の周辺の駐車場を地図上に表示する際に、駐車場の利用状況又は料金に応じて駐車場アイコンの背景色又は文字色を白色、緑色及びオレンジ色のいずれかの色に決定する技術が知られている(例えば特許文献1)。
特開2004-69549号公報
上記従来技術では、駐車場の場所は分かるものの、車両が駐車可能な位置までは分からない。
かかる事情に鑑みてなされた本開示の目的は、車両が駐車可能な位置を運転者が視覚的に判別することを可能にする画像表示装置、プログラム及び画像表示方法を提供することにある。
本開示の一実施形態に係る画像表示装置は、
画像表示装置であって、制御部とセンサと表示部とを含み、前記制御部は、
前記センサからセンサ情報を取得し、
前記センサ情報から周囲の実空間を認識し、
前記実空間内で駐車可能なスポットを抽出し、
前記表示部を用いて、前記スポットを示す虚像を前記実空間に投影する。
本開示の一実施形態に係るプログラムは、
センサと表示部とを含む画像表示装置としてのコンピュータに、
前記センサからセンサ情報を取得し、
前記センサ情報から周囲の実空間を認識し、
前記実空間内で駐車可能なスポットを抽出し、
前記表示部を用いて、前記スポットを示す虚像を前記実空間に投影する
ことを含む動作を実行させる。
本開示の一実施形態に係る画像表示方法は、
制御部とセンサと表示部とを含む画像表示装置による画像表示方法であって、
前記センサからセンサ情報を取得することと、
前記センサ情報から周囲の実空間を認識することと、
前記実空間内で駐車可能なスポットを抽出することと、
前記表示部を用いて、前記スポットを示す虚像を前記実空間に投影することと、
を含む。
本開示の一実施形態による画像表示装置、プログラム及び画像表示方法によれば、車両が駐車可能な位置を運転者が視覚的に判別することが可能である。
本実施形態の画像表示装置及び車両の概略図である。 画像表示装置の構成を示すブロック図である。 駐車スポットDB(database)のデータ構造を示す図である。 投影された駐車可能なスポットを示す図である。 画像表示装置の動作を示すフローチャートである。
図1は、本実施形態の画像表示装置1と車両2との概略図である。本実施形態の画像表示装置1は車両2に搭載されたHUD(Head-Up Display:ヘッドアップディスプレイ)である。代替例として画像表示装置1は、車両2の運転者によって装着及び操作されるAR(Augmented Reality)グラスであってよい。画像表示装置1は画像を投影することができる任意の携帯端末であってよい。
図1の画像表示装置1は1つだけ示される。代替例として、画像表示装置1の後述される各機能部は分散配置されてよい。例えば画像表示装置1を制御する制御部11は画像表示装置1の外部に設けられてよい。
本実施形態の画像表示装置1が実行する処理の概要が説明される。画像表示装置1は、センサ14からセンサ情報を取得し、センサ情報から周囲の実空間を認識し、実空間内で駐車可能なスポットを抽出し、表示部15を用いて、スポットを示す虚像を実空間に投影する。この構成により画像表示装置1は、駐車可能なスポットを実空間に投影するので、個々の車両が駐車可能な位置を運転者が視覚的に判別することを可能にする。更に画像表示装置1は、駐車スポットの提供者が白線を引く手間及び駐車場の看板を設置する手間等を低減することができるので、駐車スポットの提供者による初期の設備投資負担を低減する。もって画像表示装置1は、一般の人が容易に駐車場ビジネスを開始することを支援することができる。
図2を参照して画像表示装置1の内部構成が詳細に説明される。
画像表示装置1は、制御部11と通信部12と記憶部13とセンサ14と表示部15とを含む。画像表示装置1の各構成要素は、例えば専用線を介して互いに通信可能に接続される。
制御部11は例えば、CPU(Central Processing Unit)又はMPU(Micro Processing Unit)を含む1つ以上の汎用プロセッサを含む。制御部11は、特定の処理に特化した1つ以上の専用プロセッサを含んでよい。制御部11は、プロセッサを含む代わりに、1つ以上の専用回路を含んでもよい。専用回路は例えば、FPGA(Field-Programmable Gate Array)、又はASIC(Application Specific Integrated Circuit)であってよい。制御部11は、ECU(Electronic Control Unit)を含んでもよい。
通信部12は、ネットワークに接続するための、1つ以上の有線又は無線LAN(Local Area Network)規格に対応する通信モジュールを含む。通信部12は、LTE(Long Term Evolution)、4G(4th Generation)、又は5G(5th Generation)を含む1つ以上の移動体通信規格に対応するモジュールを含んでよい。通信部12は、Bluetooth(登録商標)、AirDrop(登録商標)、IrDA、ZigBee(登録商標)、Felica(登録商標)、又はRFIDを含む1つ以上の近距離通信の規格又は仕様に対応する通信モジュール等を含んでよい。通信部12は、ネットワークを介して任意の情報を送信及び受信する。
記憶部13は、例えば半導体メモリ、磁気メモリ、光メモリ、又はこれらのうち少なくとも2種類の組み合わせが含まれるが、これらに限られない。半導体メモリは、例えば、RAM又はROMである。RAMは、例えば、SRAM又はDRAMである。ROMは、例えば、EEPROMである。記憶部13は、例えば主記憶装置、補助記憶装置、又はキャッシュメモリとして機能してもよい。記憶部13は、制御部11によって分析又は処理された結果の情報を記憶してよい。記憶部13は、画像表示装置1の動作又は制御に関する各種情報等を記憶してよい。記憶部13は、システムプログラム、アプリケーションプログラム、及び組み込みソフトウェア等を記憶してよい。記憶部13は、後述する駐車スポットDBを含む。
センサ14は、画像センサ、加速度センサ、及び位置情報センサの少なくとも1つであってよい。センサ14は、画像表示装置1の位置を検出する。センサ14は更に、画像表示装置1の姿勢、向き等を検出してよい。センサ14は、検出した情報を、センサ情報として制御部11に出力する。
センサ14としての位置情報センサは、少なくとも1つのGNSS受信機を含む。「GNSS」は、Global Navigation Satellite Systemの略語である。GNSSには、例えば、GPS、QZSS、BeiDou、GLONASS、及びGalileoの少なくともいずれかが含まれる。「GPS」は、Global Positioning Systemの略語である。「QZSS」は、Quasi-Zenith Satellite Systemの略語である。QZSSの衛星は、準天頂衛星と呼ばれる。「GLONASS」は、Global Navigation Satellite Systemの略語である。センサ14は、画像表示装置1の位置を測定する。センサ14による測定の結果は、制御部11によって画像表示装置1の位置情報として取得される。「位置情報」とは、画像表示装置1の位置を特定可能な情報であり、例えば座標を含む。
表示部15は、少なくとも1つの出力用インタフェースを含む。画像表示装置1がHUDである場合、出力用インタフェースは、例えばコンバイナである。画像表示装置1がARグラスである場合、出力用インタフェースは例えば、LCD又は有機ELディスプレイである。「LCD」は、liquid crystal displayの略語である。「EL」は、electro luminescenceの略語である。表示部15は、画像表示装置1の動作によって得られる情報を出力する。表示部15は、画像表示装置1に備えられる代わりに、外部の出力機器として画像表示装置1に接続されてもよい。接続方式としては、例えば、USB、HDMI(登録商標)、又はBluetooth(登録商標)等の任意の方式を用いることができる。
車両2は、例えば、マイクロモビリティ、ガソリン車、ディーゼル車、HV、PHV、EV、又はFCVなどの任意の種類の自動車を含む。車両2の各構成要素は、例えばCAN(Controller Area Network)等の車載ネットワーク又は専用線を介して、互いに通信可能に接続される。「HV」は、Hybrid Vehicleの略語である。「PHV」は、Plug-in Hybrid Vehicleの略語である。「EV」は、Electric Vehicleの略語である。「FCV」は、Fuel Cell Vehicleの略語である。車両2はユーザによって運転される。代替例として、車両2は、任意のレベルでその運転が自動化されてよい。自動化のレベルは、例えば、SAEのレベル分けにおけるレベル1からレベル5のいずれかである。「SAE」は、Society of Automotive Engineersの略語である。車両2は、MaaS専用車両でもよい。「MaaS」は、Mobility as a Serviceの略語である。
以下、本実施形態の画像表示装置1で実行される処理が詳細に説明される。ここでは一例として、画像表示装置1が搭載された車両2を運転しているユーザが、駐車可能なスポットを探す場面が説明される。
画像表示装置1の制御部11は、投影開始条件が満たされたか否かを判定する。投影開始条件は例えば次のうち少なくとも1つを含む。
・車両2が目的地に着いたこと
・車両2の駐車が指示されたこと(例:駐車ボタンが押下されたこと)
・交差点ではない場所で車両2の方向指示器(例:ウィンカ又はハザードランプ)が起動(例:点滅)されたこと
制御部11は、投影開始条件が満たされたと判定すると、センサ14から、センサ情報を取得する。
制御部11は、取得したセンサ情報から、周囲の実空間を認識する。例えば制御部11は、画像表示装置1が存在する位置を認識する。更に制御部11は、画像表示装置1の姿勢、向き等を認識することができる。
制御部11は、記憶部13の駐車スポットDBを参照して、画像表示装置1の周辺(例えば所定距離内)に存在する駐車可能な駐車スポットを検索する。
図3に示されるように、駐車スポットDBには、駐車スポットIDに対応付けて、駐車スポットの位置と、駐車料金と、駐車スポットが他車両によって利用されているか否かを示す情報(図3の「利用中?」に対応)とが記憶される。
駐車料金は駐車スポットの提供者が自由に設定可能である。例えば駐車料金は次のように設定されてよい。
・単位時間(例:分、時、日、月、年)あたりの料金
・最大料金
図3の例では、駐車スポットP01と駐車スポットP02とは他車両によって利用されていない。制御部11は、駐車スポットP01と駐車スポットP02とを駐車可能なスポットとして抽出する。
制御部11は、表示部15を用いて、駐車スポットP01と駐車スポットP02とを示す虚像を実空間に投影する。各スポットの大きさは車両1台分の大きさであってよい。図4に示されるように、駐車スポットP01と駐車スポットP02とが道路Rに投影される。代替例として駐車スポットP01と駐車スポットP02とは空中に投影されてよい。駐車スポットP01と駐車スポットP02とは枠線で示される。枠線の形状は、駐車スポットの提供者(例えば駐車スポットの所有者)が任意に設定可能である。枠線は実線でもよいし、破線又は点線等の別の種類の線であってもよい。
制御部11は更に、表示部15を用いて、駐車スポットP01と駐車スポットP02とのそれぞれに関連付けられた注釈を示す虚像を投影することができる。例えば制御部11は、駐車スポットDBにおいて駐車スポットP01に関連付けられた駐車料金(「1時間500円」)を注釈として識別する。図4に示されるように制御部11は、注釈A01を投影する。制御部11は注釈A01と同じ方法で、注釈A02を投影する。
制御部11は、複数の駐車可能なスポットを抽出した場合、複数の駐車可能なスポットを、形状、模様及び色彩の少なくとも1つによって互いに識別可能に投影してよい。例えば制御部11は、駐車料金の高さに応じてスポットの枠線の形状を変化させてよい。制御部11は図4に示されるように、駐車料金が1時間500円である駐車スポットP01の枠線を通常の太さで投影する。一方制御部11は、駐車料金が1時間400円である駐車スポットP02の枠線を、駐車スポットP01の枠線よりも太く投影する。
代替例として制御部11は、ヒートマップを用いて、駐車料金の高さに応じて各駐車スポットの模様又は色彩を変化させてよい。例えば制御部11は、1時間あたりの料金が500円から1000円までの駐車スポットと、1時間あたりの料金が1000円を超える駐車スポットとを、異なる模様又は色彩で投影してよい。
追加的に又は大体的に、駐車料金は、近隣の店舗での買い物等を行うことを条件として、駐車スポットの提供者によって安く設定されてよい。この場合、制御部11は次のうち少なくとも1つの情報を注釈に含めてよい。
・いずれの店舗で買い物等を行えば駐車料金が割引されるか
・割引される場合の割引幅、又は、割引後の金額
代替例として又は追加例として、制御部11は、記憶部13を参照して、車両2の運転者の目的地が店舗であるか否かを判定してよい。制御部11は、目的地が店舗であることを検出すると、その店舗での買い物での割引を提供する駐車スポットを駐車スポットDBから抽出する。制御部11は、抽出された駐車スポットを、形状、模様及びは色彩の少なくとも1つによって他の駐車スポットから識別可能に投影してよい。代替例として制御部11は、抽出された駐車スポットを他の駐車スポットよりも優先的に投影してよい。
図4に示されるように、駐車スポットP01と駐車スポットP02とは別々のスポットとして個別に投影される。代替例として画像表示装置1から駐車スポットP01及び駐車スポットP02までの距離が基準値を超えている場合、制御部11は、2つのスポットを比較的な大きな1つにまとめて実空間に投影してよい。制御部11は、車両2が2つのスポットに接近することによって画像表示装置1から2つのスポットまでの距離が基準値を超えないと判定すると、2つのスポットのそれぞれを個別に投影してよい。
図4に示されるように制御部11は、表示部15を用いて、駐車スポットP01と駐車スポットP02とのそれぞれにつき、車両2が駐車を完了した場合の占有エリアS01と占有エリアS02とを投影する。占有エリアS01と占有エリアS02とは2次元で投影される。代替例として占有エリアS01と占有エリアS02とは、3次元で投影されてよい。
制御部11は、占有エリアS01と占有エリアS02との大きさに応じて、駐車スポットP01と駐車スポットP02とのそれぞれの駐車料金を変動させてよい。
代替例として制御部11は、所定の条件を満たす駐車料金に関連付けられたスポットのみを投影してよい。例えば制御部11は、1時間あたりの料金が450円を超えないスポットのみを投影してよい。図3の例では、制御部11は、駐車料金が1時間400円である駐車スポットP02のみを投影してよい。代替例として所定の条件は、周辺の駐車スポットの駐車料金の平均値、最低値、又は最大値であってよい。所定の料金は、運転者が過去に駐車した駐車スポットの駐車料金の平均値であってよい。所定の料金は、運転者が任意に設定可能である。
図5を参照して、本実施形態の画像表示装置1による画像表示方法が説明される。
ステップS1にて画像表示装置1は、センサ14からセンサ情報を取得する。
ステップS2にて画像表示装置1は、センサ情報から、周囲の実空間を認識する。
ステップS3にて画像表示装置1は、実空間内で駐車可能なスポットを抽出する。
ステップS4にて画像表示装置1は、抽出されたスポットを示す虚像を実空間に投影する。
以上述べたように本実施形態によれば、画像表示装置1は、センサ14からセンサ情報を取得し、センサ情報から周囲の実空間を認識し、実空間内で駐車可能なスポットを抽出し、表示部15を用いて、スポットを示す虚像を実空間に投影する。この構成により画像表示装置1は、駐車可能なスポットを実空間に投影するので、個々の車両が駐車可能な位置を運転者が視覚的に判別することを可能にする。
また本実施形態によれば、制御部11は、投影開始条件が満たされたか否かを判定し、投影開始条件が満たされたと判定すると、駐車可能なスポットを実空間に投影する。投影開始条件は、車両2が設定された目的地に到着したこと、車両2の駐車が指示されたこと、及び、交差点ではない場所で車両2の方向指示器が起動されたことの少なくとも1つを含む。この構成により制御部11は、投影が必要なときにのみ投影を行うので、不要な投影によって運転者の運転を妨害することを低減することができる。
また本実施形態によれば、制御部11は、実空間内で複数の駐車可能なスポットを抽出すると、画像表示装置1から複数の駐車可能なスポットまでの距離が基準値を超えている場合、複数の駐車可能なスポットを1つのスポットにまとめて実空間に投影する。制御部11は、距離が基準値を超えていない場合、複数の駐車可能なスポットのそれぞれを個別に実空間に投影する。この構成により制御部11は、画像表示装置1が複数のスポットに近い場合、すなわちいずれのスポットに駐車するかを選択する必要がある場合にのみ複数のスポットのそれぞれを個別に投影する。制御部11は、画像表示装置1が複数のスポットから比較的遠い場合には複数のスポットを1つにまとめて投影するので、処理負荷を低減すると共に、煩雑な表示を低減することができる。
また本実施形態によれば、制御部11は、抽出された駐車可能なスポットのうち、所定の条件を満たす駐車料金に関連付けられたスポットのみを実空間に投影する。また本実施形態によれば、制御部11は、実空間内で複数の駐車可能なスポットを抽出すると、複数の駐車可能なスポットを、駐車料金に応じて形状、模様及び色彩の少なくとも1つによって互いに識別可能に投影する。この構成により制御部11は、運転者のニーズに沿った投影を行うので、利便性及び満足度を向上させることができる。
また本実施形態によれば、制御部11は、駐車可能なスポットとともに、車両2が駐車可能なスポットへの駐車を完了した場合の占有エリアを投影する。この構成により制御部11は、駐車前に、駐車が完了したときのイメージを運転者に提供することができるので、どのスポットに駐車するかの選択を支援することができる。
本開示が諸図面及び実施例に基づき説明されるが、当業者であれば本開示に基づき種々の変形及び改変を行ってもよいことに注意されたい。その他、本開示の趣旨を逸脱しない範囲での変更が可能である。例えば、各手段又は各ステップに含まれる機能等は論理的に矛盾しないように再配置可能であり、複数の手段又はステップを1つに組み合わせたり、或いは分割したりすることが可能である。
例えば、上記の実施形態において、画像表示装置1の機能又は処理の全部又は一部を実行するプログラムは、コンピュータで読取り可能な記録媒体に記録しておくことができる。コンピュータで読取り可能な記録媒体は、非一時的なコンピュータ読取可能な媒体を含み、例えば、磁気記録装置、光ディスク、光磁気記録媒体、又は半導体メモリである。プログラムの流通は、例えば、プログラムを記録したDVD(Digital Versatile Disc)又はCD-ROM(Compact Disc Read Only Memory)などの可搬型記録媒体を販売、譲渡、又は貸与することによって行う。またプログラムの流通は、プログラムを任意のサーバのストレージに格納しておき、任意のサーバから他のコンピュータにプログラムを送信することにより行ってもよい。またプログラムはプログラムプロダクトとして提供されてもよい。本開示は、プロセッサが実行可能なプログラムとしても実現可能である。
コンピュータは、例えば、可搬型記録媒体に記録されたプログラム又はサーバから転送されたプログラムを、一旦、主記憶装置に格納する。そして、コンピュータは、主記憶装置に格納されたプログラムをプロセッサで読み取り、読み取ったプログラムに従った処理をプロセッサで実行する。コンピュータは、可搬型記録媒体から直接プログラムを読み取り、プログラムに従った処理を実行してもよい。コンピュータは、コンピュータにサーバからプログラムが転送される度に、逐次、受け取ったプログラムに従った処理を実行してもよい。サーバからコンピュータへのプログラムの転送は行わず、実行指示及び結果取得のみによって機能を実現する、いわゆるASP型のサービスによって処理を実行してもよい。「ASP」は、application service providerの略語である。プログラムには、電子計算機による処理の用に供する情報であってプログラムに準ずるものが含まれる。例えば、コンピュータに対する直接の指令ではないがコンピュータの処理を規定する性質を有するデータは、「プログラムに準ずるもの」に該当する。
1 画像表示装置
11 制御部
12 通信部
13 記憶部
14 センサ
15 表示部
2 車両

Claims (16)

  1. 画像表示装置であって、制御部とセンサと表示部とを含み、前記制御部は、
    前記センサからセンサ情報を取得し、
    前記センサ情報から周囲の実空間を認識し、
    前記実空間内で駐車可能なスポットを抽出し、
    前記表示部を用いて、前記スポットを示す虚像を前記実空間に投影し、
    前記制御部は、投影開始条件が満たされたか否かを判定し、前記投影開始条件が満たされたと判定すると、前記駐車可能なスポットを前記実空間に投影し、
    前記画像表示装置は車両に搭載され、又は、前記車両の運転者によって操作され、
    前記投影開始条件は、交差点ではない場所で前記車両の方向指示器が起動されたことを含む、
    画像表示装置。
  2. 請求項1に記載の画像表示装置において、
    前記制御部は、前記実空間内で複数の駐車可能なスポットを抽出すると、
    前記画像表示装置から前記複数の駐車可能なスポットまでの距離が基準値を超えている場合、前記複数の駐車可能なスポットを1つのスポットにまとめて前記実空間に投影し、
    前記距離が前記基準値を超えていない場合、前記複数の駐車可能なスポットのそれぞれを個別に前記実空間に投影する、
    画像表示装置。
  3. 請求項1又は2に記載の画像表示装置において、
    前記制御部は、抽出された前記駐車可能なスポットのうち、所定の条件を満たす駐車料金に関連付けられたスポットのみを前記実空間に投影する、
    画像表示装置。
  4. 請求項1乃至のいずれか一項に記載の画像表示装置において、
    前記制御部は、前記実空間内で複数の駐車可能なスポットを抽出すると、前記複数の駐車可能なスポットを、駐車料金に応じて形状、模様及び色彩の少なくとも1つによって互いに識別可能に投影する、
    画像表示装置。
  5. 請求項1乃至のいずれか一項に記載の画像表示装置において、
    前記画像表示装置は車両に搭載され、又は、前記車両の運転者によって操作され、
    前記制御部は、前記駐車可能なスポットとともに、前記車両が前記駐車可能なスポットへの駐車を完了した場合の占有エリアを投影する、
    画像表示装置。
  6. センサと表示部とを含む画像表示装置としてのコンピュータに、
    前記センサからセンサ情報を取得し、
    前記センサ情報から周囲の実空間を認識し、
    前記実空間内で駐車可能なスポットを抽出し、
    前記表示部を用いて、前記スポットを示す虚像を前記実空間に投影する
    ことを含む動作を実行させ、
    前記動作は、投影開始条件が満たされたか否かを判定し、前記投影開始条件が満たされたと判定すると、前記駐車可能なスポットを前記実空間に投影することを含み、
    前記画像表示装置は車両に搭載され、又は、前記車両の運転者によって操作され、
    前記投影開始条件は、交差点ではない場所で前記車両の方向指示器が起動されたことを含む、
    プログラム。
  7. 請求項に記載のプログラムにおいて、
    前記実空間内で複数の駐車可能なスポットを抽出すると、
    前記画像表示装置から前記複数の駐車可能なスポットまでの距離が基準値を超えている場合、前記複数の駐車可能なスポットを1つのスポットにまとめて前記実空間に投影し、
    前記距離が前記基準値を超えていない場合、前記複数の駐車可能なスポットのそれぞれを個別に前記実空間に投影する、
    ことを前記コンピュータに更に実行させる、プログラム。
  8. 請求項6又は7に記載のプログラムにおいて、
    抽出された前記駐車可能なスポットのうち、所定の条件を満たす駐車料金に関連付けられたスポットのみを前記実空間に投影することを前記コンピュータに更に実行させる、プログラム。
  9. 請求項6乃至8のいずれか一項に記載のプログラムにおいて、
    前記実空間内で複数の駐車可能なスポットを抽出すると、前記複数の駐車可能なスポットを、駐車料金に応じて形状、模様及び色彩の少なくとも1つによって互いに識別可能に投影する、
    ことを前記コンピュータに更に実行させる、プログラム。
  10. 請求項6乃至9のいずれか一項に記載のプログラムにおいて、
    前記画像表示装置は車両に搭載され、又は、前記車両の運転者によって操作され、
    前記駐車可能なスポットとともに、前記車両が前記駐車可能なスポットへの駐車を完了した場合の占有エリアを投影する、
    ことを前記コンピュータに更に実行させる、プログラム。
  11. 制御部とセンサと表示部とを含む画像表示装置による画像表示方法であって、
    前記センサからセンサ情報を取得することと、
    前記センサ情報から周囲の実空間を認識することと、
    前記実空間内で駐車可能なスポットを抽出することと、
    前記表示部を用いて、前記スポットを示す虚像を前記実空間に投影することと、
    を含み、
    投影開始条件が満たされたか否かを判定し、前記投影開始条件が満たされたと判定すると、前記駐車可能なスポットを前記実空間に投影することを更に含み、
    前記画像表示装置は車両に搭載され、又は、前記車両の運転者によって操作され、
    前記投影開始条件は、交差点ではない場所で前記車両の方向指示器が起動されたことを含む、画像表示方法。
  12. 請求項11に記載の画像表示方法において、
    前記実空間内で複数の駐車可能なスポットを抽出すると、
    前記画像表示装置から前記複数の駐車可能なスポットまでの距離が基準値を超えている場合、前記複数の駐車可能なスポットを1つのスポットにまとめて前記実空間に投影し、
    前記距離が前記基準値を超えていない場合、前記複数の駐車可能なスポットのそれぞれを個別に前記実空間に投影する、
    ことを更に含む画像表示方法。
  13. 請求項11又は12に記載の画像表示方法において、
    抽出された前記駐車可能なスポットのうち、所定の条件を満たす駐車料金に関連付けられたスポットのみを前記実空間に投影することを更に含む、画像表示方法。
  14. 請求項11乃至13のいずれか一項に記載の画像表示方法において、
    前記実空間内で複数の駐車可能なスポットを抽出すると、前記複数の駐車可能なスポットを、駐車料金に応じて形状、模様及び色彩の少なくとも1つによって互いに識別可能に投影する、
    ことを更に含む、画像表示方法。
  15. 請求項5に記載の画像表示装置において、
    前記占有エリアは3次元で投影される、画像表示装置。
  16. 請求項1に記載の画像表示装置において、
    前記制御部は、前記車両の目的地が店舗であることを検出すると、前記店舗での買い物での割引を提供する駐車スポットを抽出し、抽出された前記駐車スポットを、形状、模様及び色彩の少なくとも1つによって他の駐車スポットから識別可能に投影する、画像表示装置。
JP2020199182A 2020-11-30 2020-11-30 画像表示装置、プログラム及び画像表示方法 Active JP7347406B2 (ja)

Priority Applications (4)

Application Number Priority Date Filing Date Title
JP2020199182A JP7347406B2 (ja) 2020-11-30 2020-11-30 画像表示装置、プログラム及び画像表示方法
CN202111416956.6A CN114582154B (zh) 2020-11-30 2021-11-26 图像显示装置及方法、非临时性的计算机可读取的介质
US17/537,065 US11801751B2 (en) 2020-11-30 2021-11-29 Image display apparatus, non-transitory computer readable medium, and image display method
EP21211082.9A EP4006873A1 (en) 2020-11-30 2021-11-29 Image display apparatus, program, and image display method

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2020199182A JP7347406B2 (ja) 2020-11-30 2020-11-30 画像表示装置、プログラム及び画像表示方法

Publications (2)

Publication Number Publication Date
JP2022086905A JP2022086905A (ja) 2022-06-09
JP7347406B2 true JP7347406B2 (ja) 2023-09-20

Family

ID=78821730

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2020199182A Active JP7347406B2 (ja) 2020-11-30 2020-11-30 画像表示装置、プログラム及び画像表示方法

Country Status (4)

Country Link
US (1) US11801751B2 (ja)
EP (1) EP4006873A1 (ja)
JP (1) JP7347406B2 (ja)
CN (1) CN114582154B (ja)

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005326956A (ja) 2004-05-12 2005-11-24 Alpine Electronics Inc 駐車場空きスペース案内装置及び駐車場空きスペース案内方法
JP2016118851A (ja) 2014-12-19 2016-06-30 アイシン・エィ・ダブリュ株式会社 虚像表示装置
JP2019128644A (ja) 2018-01-22 2019-08-01 トヨタ自動車株式会社 位置探索支援システム
JP2020135103A (ja) 2019-02-14 2020-08-31 パナソニックIpマネジメント株式会社 表示制御装置、表示制御方法、および表示制御プログラム

Family Cites Families (25)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3488679B2 (ja) * 2000-08-16 2004-01-19 松下電器産業株式会社 車載カメラ映像合成透視装置
JP3970718B2 (ja) 2002-08-07 2007-09-05 アルパイン株式会社 車載用ナビゲーション装置
JP4345391B2 (ja) 2003-08-29 2009-10-14 トヨタ自動車株式会社 駐車支援装置
DE102007045562A1 (de) * 2007-09-24 2009-04-02 Robert Bosch Gmbh Steuereinrichtung für eine Anzeigeeinrichtung einer Einparkeinrichtung und Verfahren zur Darstellung
TWI315271B (en) * 2007-12-27 2009-10-01 Ind Tech Res Inst Parking guidance device and method thereof
US8363727B2 (en) * 2008-09-30 2013-01-29 Microsoft Corporation Techniques to perform fast motion estimation
US20150294431A1 (en) * 2012-10-22 2015-10-15 Jean-Louis Fiorucci Apparatus and methods for providing city services
US9761139B2 (en) * 2012-12-20 2017-09-12 Wal-Mart Stores, Inc. Location based parking management system
DE102013001308A1 (de) * 2013-01-26 2014-07-31 Audi Ag Verfahren und Navigationsvorrichtung zum Bereitstellen von Informationen über einen Parkplatz
JP5999032B2 (ja) * 2013-06-14 2016-09-28 株式会社デンソー 車載表示装置およびプログラム
US20150154669A1 (en) * 2013-12-03 2015-06-04 Xerox Corporation Actual time based parking management methods, systems and processor-readable media
JP2015231818A (ja) * 2014-06-10 2015-12-24 株式会社デンソー 運転支援装置
DE102014212843A1 (de) * 2014-07-02 2016-01-07 Robert Bosch Gmbh Verfahren zur Parkplatzvermittlung und Freier-Parkplatz-Assistenzsystem
US10458809B2 (en) * 2016-02-11 2019-10-29 International Business Machines Corporation Cognitive parking guidance
KR101832466B1 (ko) * 2016-06-14 2018-04-13 엘지전자 주식회사 자동주차 보조장치 및 이를 포함하는 차량
KR101979694B1 (ko) * 2016-11-04 2019-05-17 엘지전자 주식회사 차량에 구비된 차량 제어 장치 및 그의 제어방법
KR101982774B1 (ko) * 2016-11-29 2019-05-27 엘지전자 주식회사 자율 주행 차량
JP2019029757A (ja) * 2017-07-27 2019-02-21 株式会社Jvcケンウッド 表示制御装置、表示システム、表示制御方法、及び、プログラム
US20190385449A1 (en) * 2018-06-13 2019-12-19 Christos Pateropoulos System and method for providing automatic on-street parking control and unoccupied parking spot availability detection
CN109445592B (zh) * 2018-10-30 2020-07-31 北京小米移动软件有限公司 通行确定方法及装置、电子设备、计算机可读存储介质
CN111127938A (zh) * 2018-10-30 2020-05-08 长城汽车股份有限公司 车辆的安全预警方法、***及车辆
CN111464978A (zh) * 2019-01-22 2020-07-28 岳秀兰 主次无线设备通过物联网连接建立的车辆远程驾驶体系
KR20200102013A (ko) * 2019-02-01 2020-08-31 주식회사 만도 주차공간 알림 장치 및 방법
CN112428915A (zh) * 2019-08-26 2021-03-02 宝马股份公司 用于机动车的停车辅助方法、装置和***以及机动车
JP7347327B2 (ja) * 2020-05-26 2023-09-20 トヨタ自動車株式会社 情報処理装置、情報処理システム、及び情報処理方法

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005326956A (ja) 2004-05-12 2005-11-24 Alpine Electronics Inc 駐車場空きスペース案内装置及び駐車場空きスペース案内方法
JP2016118851A (ja) 2014-12-19 2016-06-30 アイシン・エィ・ダブリュ株式会社 虚像表示装置
JP2019128644A (ja) 2018-01-22 2019-08-01 トヨタ自動車株式会社 位置探索支援システム
JP2020135103A (ja) 2019-02-14 2020-08-31 パナソニックIpマネジメント株式会社 表示制御装置、表示制御方法、および表示制御プログラム

Also Published As

Publication number Publication date
CN114582154B (zh) 2023-12-29
US20220169118A1 (en) 2022-06-02
CN114582154A (zh) 2022-06-03
JP2022086905A (ja) 2022-06-09
EP4006873A1 (en) 2022-06-01
US11801751B2 (en) 2023-10-31

Similar Documents

Publication Publication Date Title
EP2378249B1 (en) Navigation system for a vehicle and method of route searching
JP6601942B2 (ja) 車載器、車載システム、車載器の制御方法および車載器の制御プログラム
CN112805762B (zh) 提高交通状况可视化的***和方法
US20230286509A1 (en) Hmi control apparatus and driving control apparatus
JP7347406B2 (ja) 画像表示装置、プログラム及び画像表示方法
US11465453B2 (en) Computer system with tire wear measurement mechanism and method of operation thereof
JP7468463B2 (ja) 画像投影装置、プログラム及び画像投影方法
US11631098B2 (en) Control apparatus, system, non-transitory computer readable medium, and discount determination method
JP7468398B2 (ja) 情報処理装置、プログラム及び情報処理方法
JP7415978B2 (ja) 情報処理装置、プログラム及び情報処理方法
US20220172519A1 (en) Information processing apparatus, non-transitory computer readable medium, and information processing method
US20230049922A1 (en) Control apparatus, control method, and non-transitory computer readable medium
JP7484802B2 (ja) 情報処理装置、プログラム及び情報処理方法
US20220406173A1 (en) Information processing apparatus, program, and information processing method
US20220351299A1 (en) Information processing apparatus, method, and non-transitory computer readable medium
US20220406100A1 (en) Information processing device, program, and information processing method
JP2023058379A (ja) 車両
CN115204548A (zh) 信息处理装置、记录介质以及信息处理方法
CN117917680A (zh) 信息处理装置
JP2023071541A (ja) 情報処理装置、プログラム及び情報処理方法
JP2024061496A (ja) 情報処理方法
CN117095557A (zh) 基于ar-hud的停车导航方法及装置、存储介质

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20220920

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20230524

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20230530

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20230612

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20230808

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20230821

R151 Written notification of patent or utility model registration

Ref document number: 7347406

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R151