JP2019203762A - 表示制御装置及びプログラム - Google Patents

表示制御装置及びプログラム Download PDF

Info

Publication number
JP2019203762A
JP2019203762A JP2018098324A JP2018098324A JP2019203762A JP 2019203762 A JP2019203762 A JP 2019203762A JP 2018098324 A JP2018098324 A JP 2018098324A JP 2018098324 A JP2018098324 A JP 2018098324A JP 2019203762 A JP2019203762 A JP 2019203762A
Authority
JP
Japan
Prior art keywords
vehicle
imaging
target point
unit
route
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2018098324A
Other languages
English (en)
Other versions
JP7063723B2 (ja
Inventor
片山 睦
Mutsumi Katayama
睦 片山
祐史 西川
Yushi Nishikawa
祐史 西川
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Honda Motor Co Ltd
Original Assignee
Honda Motor Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Honda Motor Co Ltd filed Critical Honda Motor Co Ltd
Priority to JP2018098324A priority Critical patent/JP7063723B2/ja
Priority to CN201910264836.5A priority patent/CN110519555B/zh
Priority to US16/417,660 priority patent/US10785454B2/en
Publication of JP2019203762A publication Critical patent/JP2019203762A/ja
Application granted granted Critical
Publication of JP7063723B2 publication Critical patent/JP7063723B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R16/00Electric or fluid circuits specially adapted for vehicles and not otherwise provided for; Arrangement of elements of electric or fluid circuits specially adapted for vehicles and not otherwise provided for
    • B60R16/02Electric or fluid circuits specially adapted for vehicles and not otherwise provided for; Arrangement of elements of electric or fluid circuits specially adapted for vehicles and not otherwise provided for electric constitutive elements
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/18Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • H04N7/181Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a plurality of remote sources
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01CMEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
    • G01C21/00Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
    • G01C21/26Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
    • G01C21/34Route searching; Route guidance
    • G01C21/36Input/output arrangements for on-board computers
    • G01C21/3605Destination input or retrieval
    • G01C21/3623Destination input or retrieval using a camera or code reader, e.g. for optical or magnetic codes
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/94Hardware or software architectures specially adapted for image or video understanding
    • G06V10/95Hardware or software architectures specially adapted for image or video understanding structured as a network, e.g. client-server architectures
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/50Context or environment of the image
    • G06V20/56Context or environment of the image exterior to a vehicle by using sensors mounted on the vehicle
    • GPHYSICS
    • G08SIGNALLING
    • G08GTRAFFIC CONTROL SYSTEMS
    • G08G1/00Traffic control systems for road vehicles
    • G08G1/09Arrangements for giving variable traffic instructions
    • G08G1/0962Arrangements for giving variable traffic instructions having an indicator mounted inside the vehicle, e.g. giving voice messages
    • G08G1/0968Systems involving transmission of navigation instructions to the vehicle
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/695Control of camera direction for changing a field of view, e.g. pan, tilt or based on tracking of objects
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/18Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • H04N7/183Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a single remote source
    • H04N7/185Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a single remote source from a mobile camera, e.g. for remote control
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W4/00Services specially adapted for wireless communication networks; Facilities therefor
    • H04W4/30Services specially adapted for particular environments, situations or purposes
    • H04W4/40Services specially adapted for particular environments, situations or purposes for vehicles, e.g. vehicle-to-pedestrians [V2P]
    • H04W4/46Services specially adapted for particular environments, situations or purposes for vehicles, e.g. vehicle-to-pedestrians [V2P] for vehicle-to-vehicle communication [V2V]
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01CMEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
    • G01C21/00Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
    • G01C21/26Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
    • G01C21/34Route searching; Route guidance
    • G01C21/36Input/output arrangements for on-board computers

Landscapes

  • Engineering & Computer Science (AREA)
  • Signal Processing (AREA)
  • Multimedia (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Remote Sensing (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Theoretical Computer Science (AREA)
  • Automation & Control Theory (AREA)
  • Mechanical Engineering (AREA)
  • Software Systems (AREA)
  • Traffic Control Systems (AREA)
  • Navigation (AREA)
  • Closed-Circuit Television Systems (AREA)
  • Studio Devices (AREA)

Abstract

【課題】ユーザによる撮像対象の設定の負荷を、軽減可能な技術を提供することが望ましい。【解決手段】撮像対象地点を示す位置情報を取得する位置情報取得部と、第1の車両の目的地までの間のルートを示すルート情報を取得するルート情報取得部と、位置情報及びルート情報に基づいて、撮像対象地点を撮像する撮像方向を決定する撮像方向決定部と、撮像対象地点を撮像方向で撮像する第2の車両から、撮像対象地点を撮像した撮像画像を受信する撮像画像受信部と、撮像画像を表示させる表示制御部とを備える表示制御装置を提供する。【選択図】図1

Description

本発明は、表示制御装置及びプログラムに関する。
ユーザから観測地点の設定を受け付けて、他の車載システムに観測地点の撮影を依頼し、他の車載システムから観測地点の画像を受信して表示する手段を有する車載システムが知られていた(例えば、特許文献1参照)。
[先行技術文献]
[特許文献]
[特許文献1]特開2006−031583号公報
ユーザによる撮像対象の設定の負荷を、軽減可能な技術を提供することが望ましい。
本発明の第1の態様によれば、表示制御装置が提供される。表示制御装置は、撮像対象地点を示す位置情報を取得する位置情報取得部を備えてよい。表示制御装置は、第1の車両の目的地までの間のルートを示すルート情報を取得するルート情報取得部を備えてよい。表示制御装置は、位置情報及びルート情報に基づいて、撮像対象地点を撮像する撮像方向を決定する撮像方向決定部を備えてよい。表示制御装置は、撮像対象地点を撮像方向で撮像する第2の車両から、撮像対象地点を撮像した撮像画像を受信する撮像画像受信部を備えてよい。表示制御装置は、撮像画像を表示させる表示制御部を備えてよい。
上記表示制御部は、上記第1の車両が備える表示部に上記撮像画像を表示させてよい。上記表示制御部は、予め指定された通信端末に上記撮像画像を送信して、上記通信端末に上記撮像画像を表示させてよい。上記表示制御装置は、上記撮像対象地点及び上記撮像方向を含む依頼情報をブロードキャストする依頼情報送信部を備えてよく、上記撮像画像受信部は、上記依頼情報を受信した上記第2の車両によって送信された上記撮像画像を受信してよい。上記撮像画像受信部は、上記第1の車両と上記第2の車両との間の車車間通信を介して、上記第2の車両から上記撮像画像を受信してよい。
上記撮像方向決定部は、上記撮像対象地点が上記ルート情報によって示されるルートに含まれると判定した場合、上記ルートにおいて上記第1の車両が上記撮像対象地点に向かう方向を上記撮像方向として決定してよい。上記撮像方向決定部は、上記撮像対象地点が上記ルート情報によって示されるルートに含まれないと判定した場合、上記撮像対象地点を上記第1の車両の目的地とした場合のルートにおいて上記第1の車両が上記撮像対象地点に向かう方向を上記撮像方向として決定してよい。上記撮像方向決定部は、上記撮像対象地点が上記ルート情報によって示されるルートに含まれず、かつ、上記撮像対象地点が道路上でない場合、上記撮像対象地点の周辺道路から上記撮像対象地点への経路を推定し、推定した経路において、上記撮像対象地点に向かう方向を上記撮像方向として決定してよい。
本発明の第2の態様によれば、コンピュータを、上記表示制御装置として機能させるためのプログラムが提供される。
なお、上記の発明の概要は、本発明の必要な特徴の全てを列挙したものではない。また、これらの特徴群のサブコンビネーションもまた、発明となりうる。
車両100の通信環境の一例を概略的に示す。 車両100の構成の一例を概略的に示す。 撮像対象地点330に対して決定される撮像方向340の一例を概略的に示す。 撮像画像の通信経路について説明する説明図である。 撮像対象地点330に対して決定される撮像方向340の一例を概略的に示す。 撮像対象地点330に対して決定される撮像方向340の一例を概略的に示す。 制御装置200の機能構成の一例を概略的に示す。 制御装置200による処理の流れの一例を概略的に示す。 制御装置200として機能するコンピュータ1000のハードウェア構成の一例を概略的に示す。 通信端末500の機能構成の一例を概略的に示す。 通信端末500として機能するコンピュータ1100のハードウェア構成の一例を概略的に示す。
以下、発明の実施の形態を通じて本発明を説明するが、以下の実施形態は特許請求の範囲にかかる発明を限定するものではない。また、実施形態の中で説明されている特徴の組み合わせの全てが発明の解決手段に必須であるとは限らない。
図1は、本実施形態に係る車両100の通信環境の一例を概略的に示す。車両100は、他の車両100と無線通信する。車両100は、ネットワーク10を介した他の車両100との無線通信、他の車両100との直接の無線通信(車車間直接通信と記載する場合がある。)、及び路車間通信を介した他の車両100との無線通信(車路車間通信と記載する場合がある。)の少なくともいずれかによって、他の車両100と無線通信してよい。
ネットワーク10は、任意のネットワークであってよい。例えば、ネットワーク10は、インターネットと、いわゆる3G(3rd Generation)、LTE(Long Term Evolution)、4G(4th Generation)及び5G(5th Generation)等の携帯電話網と、公衆無線LAN(Local Area Network)と、専用網との少なくともいずれかを含んでよい。
車両100は、公知の任意の車車間通信技術、路車間通信技術を用いて、車車間直接通信、車路車間通信を実行してよい。例えば、車両100は、700MHz帯及び5.8GHz帯等の所定の周波数帯を利用した通信によって、車車間直接通信、車路車間通信を実行する。車両100は、他の車両100を経由してさらに他の車両100と無線通信してもよい。例えば、複数の車両100が車車間直接通信、車路車間通信によって連携することにより車両間ネットワークを形成してよく、車両間ネットワークを介して、遠隔地の車両100同士が通信を実行してもよい。
本実施形態に係る車両100は、車両100の周囲を撮像する撮像部を備え、撮像部によって撮像した撮像画像を他の車両100に送信したり、他の車両100の撮像部によって撮像された撮像画像を他の車両100から受信したりする。撮像画像は、静止画像であっても、映像(動画像)であってもよい。例えば、車両100は、車両100のユーザによって指定された撮像対象地点を含む依頼情報を他の車両100にブロードキャストし、撮像対象地点を撮像可能な他の車両100から、撮像対象地点を撮像した撮像画像を受信する。これにより、撮像対象地点のリアルタイムな状況を車両100のユーザに把握させることができる。
また、車両100は、撮像対象地点と、撮像対象地点を撮像する撮像方向を含む依頼情報を他の車両100にブロードキャストし、当該撮像方向で当該撮像対象地点を撮像可能な他の車両100から、当該撮像対象地点を当該撮像方向で撮像した撮像画像を他の車両100から受信してよい。これにより、特定の方向からみた撮像対象地点のリアルタイムな状況を車両100のユーザに把握させることができる。
ここで、撮像対象地点及び撮像方向は、容易に設定可能であることが望ましい。特に、このような設定が車両100を運転しているユーザによって行われることを想定した場合、当該ユーザの運転に対する集中度を低下させないためにも、容易に設定できることが望まれる。
本実施形態に係る車両100は、撮像対象地点の指定を受け付けた場合に、そのときの車両100の状況に応じて、撮像方向を自動設定する。例えば、車両100は、車両100が撮像対象地点を通過する場合に撮像対象地点に向かう方向を特定し、当該方向を撮像方向として自動設定する。これにより、車両100のユーザが所望する蓋然性が高い撮像方向を自動的に設定することができる。
図2は、車両100の構成の一例を概略的に示す。車両100は、操作部110、表示部120、無線通信部130、撮像部140、GNSS(Global Navigation Satellite System)受信部150、センサ部160、及び制御装置200を備える。これらの構成の少なくとも一部は、いわゆるカーナビゲーションシステムに含まれる構成であってよい。
操作部110は、車両100のユーザによる操作を受け付ける。操作部110は、物理的な操作ボタン類を含んでよい。操作部110及び表示部120は、タッチパネルディスプレイであってもよい。操作部110は、音声操作を受け付けてもよい。操作部110は、マイク及びスピーカを含んでよい。
無線通信部130は、他の車両100との無線通信を実行する。無線通信部130は、携帯電話網の無線基地局を介してネットワーク10と通信する通信ユニットを含んでよい。また、無線通信部130は、WiFi(登録商標)アクセスポイントを介してネットワーク10と通信する通信ユニットを含んでよい。また、無線通信部130は、車車間通信を実行する通信ユニットを含んでよい。また、無線通信部130は、路車間通信を実行する通信ユニットを含んでよい。
撮像部140は、1又は複数のカメラを含む。カメラは、ドライブレコーダであってもよい。撮像部140が複数のカメラを含む場合、複数のカメラのそれぞれは、車両100の異なる位置に配置される。また、複数のカメラのそれぞれは、異なる撮像方向を撮像する。
GNSS受信部150は、GNSS衛星から発信された電波を受信する。GNSS受信部150は、GNSS衛星から受信した信号に基づいて、車両100の位置を特定してもよい。
センサ部160は、1又は複数のセンサを含む。センサ部160は、例えば、加速度センサを含む。センサ部160は、例えば、角速度センサ(ジャイロセンサ)を含む。センサ部160は、例えば、地磁気センサを含む。センサ部160は、例えば、車速センサを含む。
制御装置200は、操作部110、表示部120、無線通信部130、撮像部140、GNSS受信部150、及びセンサ部160を制御して、各種処理を実行する。制御装置200は、例えば、ナビゲーション処理を実行する。制御装置200は、公知のカーナビゲーションシステムが実行するナビゲーション処理と同様のナビゲーション処理を実行してよい。
例えば、制御装置200は、GNSS受信部150及びセンサ部160からの出力に基づいて車両100の現在位置を特定して、現在位置に対応する地図データを読み出して表示部120に表示させる。また、制御装置200は、操作部110を介して目的地の入力を受け付け、車両100の現在位置から目的地までの推奨ルートを特定して、表示部120に表示させる。制御装置200は、ルートの選択を受け付けた場合、選択されたルートに従って、表示部120及びスピーカを介して、車両100が走行すべき進路のガイダンスを行う。
本実施形態に係る制御装置200は、撮像対象地点の撮像画像の送信を他の車両100に依頼する依頼処理を実行する。例えば、制御装置200は、操作部110を介して、ユーザによる撮像対象地点の指定を受け付ける。制御装置200は、例えば、表示部120に表示された地図に対するポインティング入力を受け付ける。また、制御装置200は、例えば、撮像対象地点を指定する音声入力を受け付ける。
制御装置200は、指定された撮像対象地点と、車両100の目的地までのルートとに基づいて、撮像方向を決定する。制御装置200は、例えば、撮像対象地点が、車両100のルートに含まれる場合、当該ルートにおいて車両100が撮像対象地点に向かう方向を撮像方向として決定する。そして、制御装置200は、決定した撮像方向及び撮像対象地点と、車両100を識別する識別情報とを含む依頼情報を他の車両100に向けてブロードキャストする。制御装置200は、無線通信部130に、依頼情報をブロードキャストさせてよい。
また、本実施形態に係る制御装置200は、依頼情報を受信した他の車両100によって送信された撮像画像を表示する表示処理を実行する。制御装置200は、無線通信部130が他の車両100から受信した撮像画像を、表示部120に表示させてよい。制御装置200は、例えば、表示部120が表示する地図上の撮像対象地点に対応する位置に、撮像画像を表示させる。制御装置200は、表示制御装置の一例であってよい。
図3は、撮像対象地点330に対して決定される撮像方向340の一例を概略的に示す。地図300は、表示部120に表示される地図の一例であり、現在位置312、目的地314、ルート320、及び撮像対象地点330を含む。制御装置200は、撮像対象地点の指定を受け付けた場合に、地図300上に撮像対象地点330を配置してよい。
図3に示す例では、撮像対象地点330が車両100のルート320に含まれる。この場合、制御装置200は、ルート320において車両100が撮像対象地点330に向かう方向340を、撮像方向として決定してよい。制御装置200は、車両100を識別する識別情報と、撮像対象地点及び撮像方向とを含む依頼情報を他の車両100に向けてブロードキャストする。
制御装置200は、ネットワーク10を介して依頼情報をブロードキャストしてよい。また、制御装置200は、車車間直接通信及び車路車間通信の少なくともいずれかを介して、依頼情報をブロードキャストしてよい。制御装置200によって送信された依頼情報を受信した車両100が、他の車両100に対して当該依頼情報を送信することによって、複数の車両100に依頼情報が送信される。
依頼情報を受信した車両100は、依頼情報に含まれる撮像対象位置及び撮像方向を参照して、当該撮像対象位置を当該撮像方向で撮像できるか否かを判定する。例えば、車両100は、自車のルート情報によって示されるルートを車両100が走行したと仮定したときに、当該撮像方向に沿って撮像対象地点に向かって走行し、撮像対象地点が撮像部140の撮像範囲に含まれる場合に、撮像可能と判定する。撮像可能と判定した場合、車両100は、依頼情報の送信元の車両100に対して、承認応答を送信する。承認応答を受信した車両100は、承認応答を送信した車両100から、当該車両100が撮像対象地点に向かう間に撮像する撮像画像を受信する。
図4は、撮像画像の通信経路について説明する説明図である。図4では、車両410が、撮像対象地点330に向かう間に撮像する撮像画像を、現在位置312に位置する車両100に送信する場合を例に挙げて説明する。図4に示す車両410、車両420、及び車両430は、車両100と同様の構成を有してよい。
車両410は、車車間直接通信の通信範囲内に車両100が位置する場合、車車間直接通信を介して撮像画像を車両100に送信してよい。また、車両410は、車車間直接通信の通信範囲内に車両100が位置する場合であっても、ネットワーク10を介して撮像画像を車両100に送信してもよい。また、車両410は、車両420及び車両430を経由して、撮像画像を車両100に送信してもよい。
車両410は、車車間直接通信の通信範囲内に車両100が位置しない場合、ネットワーク10を介して撮像画像を車両100に送信してよい。また、車両410は、車両420及び車両430を経由して、撮像画像を車両100に送信してもよい。
図5は、撮像対象地点330に対して決定される撮像方向340の一例を概略的に示す。ここでは、図3と異なる点を主に説明する。
図5に示す例では、撮像対象地点330が車両100のルート320に含まれない。この場合、制御装置200は、撮像対象地点330を車両100の目的地とした場合のルート322を特定し、ルート322において車両100が撮像対象地点330に向かう方向340を撮像方向として決定してよい。
これにより、撮像対象地点330を仮に通過することとした場合の、撮像対象地点330に向けて走行する方向を撮像方向として自動設定することができる。これにより、例えば、車両100のユーザが、ルート320以外のルートを検討している場合に適した撮像方向を適切に自動設定することができる。
図6は、撮像対象地点330に対して決定される撮像方向340の一例を概略的に示す。ここでは、図3と異なる点を主に説明する。
図6に示す例では、撮像対象地点330が車両100のルート320に含まれず、かつ、撮像対象地点330が道路上に位置しない。この場合、制御装置200は、撮像対象地点330の周辺道路から撮像対象地点330への経路を推定し、推定した経路において、撮像対象地点330に向かう方向340を、撮像方向として決定してよい。制御装置200は、例えば、撮像対象地点330からの距離が最も短い道路を特定し、特定した道路のうち、撮像対象地点330までの距離が最も短い地点を特定し、特定した地点と撮像対象地点330とを結ぶ経路を、撮像対象地点330への経路と推定する。
これにより、例えば、撮像対象地点330が大型商業施設であり、道路から当該大型商業施設の駐車場への経路が地図データに登録されていない場合において、当該大型商業施設が撮像対象地点330として指定された場合に、道路から駐車場への経路を示す蓋然性が高い経路に沿った方向を撮像方向として決定することができる。これにより、例えば、大型商業施設の駐車場の入口の状態を示す撮像画像を取得可能にできる。
図7は、制御装置200の機能構成の一例を概略的に示す。制御装置200は、格納部210、指定受付部212、位置情報取得部214、ルート情報取得部216、撮像方向決定部218、依頼情報送信部220、応答受信部222、撮像画像受信部224、表示制御部226、依頼情報受信部242、判定部244、及び撮像画像送信部246を備える。なお、制御装置200がこれらのすべての構成を備えることは必須とは限らない。
格納部210は、各種情報を格納する。格納部210は、地図データを格納してよい。格納部210は、車両100の現在位置を示す位置情報を格納してよい。格納部210は、車両100から車両100の目的地までのルートを示すルート情報を格納してよい。
指定受付部212は、撮像対象地点の指定を受け付ける。指定受付部212は、例えば、操作部110を介したポインティング入力による撮像対象地点の指定を受け付ける。また、指定受付部212は、操作部110を介した音声入力による撮像対象地点の指定を受け付ける。
位置情報取得部214は、指定受付部212が指定を受け付けた撮像対象地点を示す位置情報を取得する。撮像対象地点を示す位置情報は、例えば、撮像対象地点の緯度経度であってよい。
ルート情報取得部216は、ルート情報を取得する。ルート情報取得部216は、格納部210に格納されているルート情報を取得してよい。
撮像方向決定部218は、位置情報取得部214が取得した位置情報と、ルート情報取得部216が取得したルート情報に基づいて、撮像対象地点を撮像する撮像方向を決定する。例えば、撮像方向決定部218は、撮像対象地点がルート情報によって示されるルートに含まれると判定した場合、当該ルートにおいて車両100が撮像対象地点に向かう方向を撮像方向として決定する。
また、例えば、撮像方向決定部218は、撮像対象地点がルート情報によって示されるルートに含まれないと判定した場合、撮像対象地点を車両100の目的地とした場合のルートにおいて車両100が撮像対象地点に向かう方向を撮像方向として決定する。また、例えば、撮像方向決定部218は、撮像対象地点がルート情報によって示されるルートに含まれず、かつ、撮像対象地点が道路上でない場合、撮像対象地点の周辺道路から撮像対象地点への経路を推定し、推定した経路において、撮像対象地点に向かう方向を撮像方向として決定する。
依頼情報送信部220は、車両100を識別する識別情報と、撮像対象地点及び撮像方向決定部218によって決定された撮像方向とを含む依頼情報を他の車両100に対してブロードキャストする。依頼情報送信部220は、無線通信部130に、依頼情報を他の車両100に向けてブロードキャスト送信させてよい。
応答受信部222は、依頼情報送信部220が送信した依頼情報を受信した他の車両100からの応答を受信する。応答受信部222は、例えば、依頼情報に対して撮像対象地点を撮像方向で撮像して送信することを承諾する承諾応答を受信する。
撮像画像受信部224は、応答受信部222が承諾応答を受信した場合に、承諾応答を送信した他の車両100から、撮像画像を受信する。撮像画像受信部224は、無線通信部130を介して撮像画像を受信してよい。
表示制御部226は、撮像画像受信部224が受信した撮像画像を表示させる。表示制御部226は、例えば、撮像画像を表示部120に表示させる。また、表示制御部226は、予め指定された通信端末に撮像画像を送信して、当該通信端末に撮像画像を表示させてもよい。通信端末の例としては、車両100のユーザが所有するスマートフォン等の携帯電話及びタブレット端末等が例示できる。
依頼情報受信部242は、他の車両100によって送信された依頼情報を受信する。判定部244は、依頼情報受信部242が受信した依頼情報に含まれる撮像対象地点及び撮像方向を参照して、当該撮像対象地点を、当該撮像方向で撮像可能か否かを判定する。判定部244は、例えば、格納部210に格納されているルート情報と、撮像部140による撮像可能な撮像可能範囲とに基づいて、撮像可能か否かを判定する。具体例として、判定部244は、ルート情報によって示されるルートを車両100が走行したと仮定したときに、依頼情報に含まれる撮像方向に沿って撮像対象地点に向かって走行し、撮像対象地点が撮像部140の撮像範囲に含まれる場合に、撮像可能と判定する。
撮像画像送信部246は、判定部244によって撮像可能と判定された場合、撮像部140が、依頼情報に含まれる撮像対象地点を依頼情報に含まれる撮像方向で撮像する撮像画像を、依頼情報に含まれる識別情報によって識別される車両100に送信する。
図8は、制御装置200による処理の流れの一例を概略的に示す。ここでは、車両100のユーザが目的地までのルートに沿って車両100を運転しており、車両100が撮像対象地点の指定を待ち受けている状態を開始状態として説明する。図8に示す各処理は、制御装置200が備える制御部が主体となって実行される。
ステップ(ステップをSと省略して記載する場合がある。)102において、指定受付部212が、撮像対象地点の指定を受け付けたと判定した場合、S104に進む。S104では、ルート情報取得部216が、車両100の目的地までのルートを示すルート情報を取得する。S106では、撮像方向決定部218が、ルート情報と撮像対象地点を示す位置情報とに基づいて、撮像対象地点を撮像する撮像方向を決定する。
S108では、依頼情報送信部220が、車両100を識別する識別情報と、撮像対象地点及び撮像方向を含む依頼情報を他の車両100に向けてブロードキャストする。そして、承認応答を待ち受ける。応答受信部222が承認応答を受信した場合(S110でYES)、S112に進む。
S112では、他の車両100による撮像対象地点の撮像の開始を待ち受ける。他の車両100は、撮像対象地点の撮像を開始する場合に、その旨を制御装置200に通知してよい。撮像が開始された場合(S112でYES)、S114に進む。
S114では、撮像画像受信部224が、他の車両100が撮像対象地点に向かって走行しながら撮像する撮像画像を受信する。S116では、表示制御部226が、撮像画像を表示部120に表示させる。S118では、他の車両100による撮像対象地点の撮像が終了したか否かを判定する。他の車両100は、例えば、撮像対象地点を通過した場合に、撮像対象地点の撮像が終了したことを車両100に通知する。
S118において撮像が終了していないと判定した場合、S114に戻り、撮像画像の受信及び表示を実行する。S118において撮像が終了したと判定した場合、処理を終了する。
図9は、制御装置200として機能するコンピュータ1000の一例を概略的に示す。本実施形態に係るコンピュータ1000は、ホストコントローラ1092により相互に接続されるCPU1010、RAM1030、及びグラフィックコントローラ1085を有するCPU周辺部と、入出力コントローラ1094によりホストコントローラ1092に接続されるROM1020、通信I/F1040、ハードディスクドライブ1050、及び入出力チップ1080を有する入出力部を備える。
CPU1010は、ROM1020及びRAM1030に格納されたプログラムに基づいて動作し、各部の制御を行う。グラフィックコントローラ1085は、CPU1010などがRAM1030内に設けたフレーム・バッファ上に生成する画像データを取得し、ディスプレイ上に表示させる。これに代えて、グラフィックコントローラ1085は、CPU1010などが生成する画像データを格納するフレーム・バッファを、内部に含んでもよい。
通信I/F1040は、有線又は無線によりネットワークを介して他の装置と通信する。また、通信I/F1040は、通信を行うハードウェアとして機能する。ハードディスクドライブ1050は、CPU1010が使用するプログラム及びデータを格納する。
ROM1020は、コンピュータ1000が起動時に実行するブート・プログラム及びコンピュータ1000のハードウェアに依存するプログラムなどを格納する。入出力チップ1080は、例えばパラレル・ポート、シリアル・ポート、キーボード・ポート、マウス・ポートなどを介して各種の入出力装置を入出力コントローラ1094へと接続する。
RAM1030を介してハードディスクドライブ1050に提供されるプログラムは、ICカードなどの記録媒体に格納されて利用者によって提供される。プログラムは、記録媒体から読み出され、RAM1030を介してハードディスクドライブ1050にインストールされ、CPU1010において実行される。
コンピュータ1000にインストールされ、コンピュータ1000を制御装置200として機能させるプログラムは、CPU1010などに働きかけて、コンピュータ1000を、制御装置200の各部としてそれぞれ機能させてよい。これらのプログラムに記述された情報処理は、コンピュータ1000に読込まれることにより、ソフトウェアと上述した各種のハードウェア資源とが協働した具体的手段である格納部210、指定受付部212、位置情報取得部214、ルート情報取得部216、撮像方向決定部218、依頼情報送信部220、応答受信部222、撮像画像受信部224、表示制御部226、依頼情報受信部242、判定部244、及び撮像画像送信部246として機能する。そして、これらの具体的手段によって、本実施形態におけるコンピュータ1000の使用目的に応じた情報の演算又は加工を実現することにより、使用目的に応じた特有の制御装置200が構築される。
上記実施形態では、表示制御装置の一例として制御装置200を挙げて説明したが、これに限らず、例えば、車両100に乗車している車両100のユーザが所有する通信端末が表示制御装置として機能してもよい。
図10は、通信端末500の機能構成の一例を概略的に示す。通信端末500は、指定受付部502、位置情報取得部504、ルート情報取得部506、撮像方向決定部508、依頼情報送信部510、応答受信部512、撮像画像受信部514、及び表示制御部516を備える。なお、通信端末500がこれらのすべての構成を備えることは必須とは限らない。
指定受付部502は、撮像対象地点の指定を受け付ける。指定受付部502は、例えば、地図アプリ上で撮像対象地点の指定を受け付けてよい。指定受付部502は、例えば、ポインティング入力による撮像対象地点の指定を受け付ける。また、指定受付部502は、音声入力による撮像対象地点の指定を受け付ける。
位置情報取得部504は、指定受付部502が指定を受け付けた撮像対象地点を示す位置情報を取得する。撮像対象地点を示す位置情報は、例えば、撮像対象地点の緯度経度であってよい。
ルート情報取得部506は、車両100の目的地までの間のルートを示すルート情報を取得する。ルート情報は、車両100の位置から車両100の目的地までの間のルートを示してよい。ルート情報取得部506は、例えば、車両100と通信することによって、車両100からルート情報を受信してよい。
撮像方向決定部508は、位置情報取得部504が取得した位置情報と、ルート情報取得部506が取得したルート情報に基づいて、撮像対象地点を撮像する撮像方向を決定する。撮像方向決定部508は、撮像方向決定部218と同様の手法によって撮像方向を決定してよい。
依頼情報送信部510は、車両100を識別する識別情報と、撮像対象地点及び撮像方向決定部508によって決定された撮像方向とを含む依頼情報を他の車両100に対してブロードキャストする。依頼情報送信部510は、車両100の無線通信部130に、依頼情報を他の車両100に向けてブロードキャスト送信させてよい。また、依頼情報送信部510は、ネットワーク10を介して依頼情報を他の車両100に向けてブロードキャストしてもよい。
応答受信部512は、依頼情報送信部510が送信した依頼情報を受信した他の車両100からの応答を受信する。応答受信部512は、例えば、依頼情報に対して撮像対象地点を撮像方向で撮像して送信することを承諾する承諾応答を受信する。
撮像画像受信部514は、応答受信部512が承諾応答を受信した場合に、承諾応答を送信した他の車両100から、撮像画像を受信する。撮像画像受信部514は、ネットワーク10を介して、撮像画像を受信してよい。また、撮像画像受信部514は、車両100を介して撮像画像を受信してよい。
表示制御部516は、撮像画像受信部514が受信した撮像画像を表示させる。表示制御部516は、例えば、通信端末500のディスプレイに撮像画像を表示させる。また、表示制御部516は、撮像画像を車両100に送信して、車両100の表示部120に撮像画像を表示させてもよい。
図11は、通信端末500として機能するコンピュータ1100のハードウェア構成の一例を示す。本実施形態に係るコンピュータ1100は、SoC1110、メインメモリ1122、フラッシュメモリ1124、アンテナ1132、アンテナ1134、アンテナ1136、ディスプレイ1140、マイク1142、スピーカ1144、USBポート1152、及びカードスロット1154を備える。
SoC1110は、メインメモリ1122及びフラッシュメモリ1124に格納されたプログラムに基づいて動作し、各部の制御を行う。アンテナ1132は、いわゆるセルラーアンテナである。アンテナ1134は、いわゆるWiFi(登録商標)アンテナである。アンテナ1136は、Bluetooth(登録商標)等のいわゆる短距離無線通信用のアンテナである。SoC1110は、アンテナ1132、アンテナ1134、及びアンテナ1136を用いて、各種通信機能を実現してよい。SoC1110は、アンテナ1132、アンテナ1134、又はアンテナ1136を用いてSoC1110が使用するプログラムを受信して、フラッシュメモリ1124に格納してよい。
SoC1110は、ディスプレイ1140を用いて各種表示機能を実現してよい。SoC1110は、マイク1142を用いて各種音声入力機能を実現してよい。SoC1110は、スピーカ1144を用いて各種音声出力機能を実現してよい。
USBポート1152は、USB接続を実現する。カードスロット1154は、SDカード等の各種カードとの接続を実現する。SoC1110は、USBポート1152に接続された機器又はメモリと、カードスロット1154に接続されたカードとから、SoC1110が使用するプログラムを受信して、フラッシュメモリ1124に格納してよい。
コンピュータ1100にインストールされ、コンピュータ1100を通信端末500として機能させるプログラムは、SoC1110等に働きかけて、コンピュータ1100を、通信端末500の各部としてそれぞれ機能させてよい。これらのプログラムに記述された情報処理は、コンピュータ1100に読込まれることにより、ソフトウェアと上述した各種のハードウェア資源とが協働した具体的手段である指定受付部502、位置情報取得部504、ルート情報取得部506、撮像方向決定部508、依頼情報送信部510、応答受信部512、撮像画像受信部514、及び撮像画像受信部514として機能する。そして、これらの具体的手段によって、本実施形態におけるコンピュータ1100の使用目的に応じた情報の演算又は加工を実現することにより、使用目的に応じた特有の通信端末500が構築される。
以上、本発明を実施の形態を用いて説明したが、本発明の技術的範囲は上記実施の形態に記載の範囲には限定されない。上記実施の形態に、多様な変更または改良を加えることが可能であることが当業者に明らかである。その様な変更または改良を加えた形態も本発明の技術的範囲に含まれ得ることが、特許請求の範囲の記載から明らかである。
特許請求の範囲、明細書、および図面中において示した装置、システム、プログラム、および方法における動作、手順、ステップ、および段階などの各処理の実行順序は、特段「より前に」、「先立って」などと明示しておらず、また、前の処理の出力を後の処理で用いるのでない限り、任意の順序で実現しうることに留意すべきである。特許請求の範囲、明細書、および図面中の動作フローに関して、便宜上「まず、」、「次に、」などを用いて説明したとしても、この順で実施することが必須であることを意味するものではない。
10 ネットワーク、100 車両、110 操作部、120 表示部、130 無線通信部、140 撮像部、150 GNSS受信部、160 センサ部、200 制御装置、210 格納部、212 指定受付部、214 位置情報取得部、216 ルート情報取得部、218 撮像方向決定部、220 依頼情報送信部、222 応答受信部、224 撮像画像受信部、226 表示制御部、242 依頼情報受信部、244 判定部、246 撮像画像送信部、300 地図、312 現在位置、314 目的地、320 ルート、322 ルート、330 撮像対象地点、340 方向、410 車両、420 車両、430 車両、1000 コンピュータ、1010 CPU、1020 ROM、1030 RAM、1040 通信I/F、1050 ハードディスクドライブ、1080 入出力チップ、1085 グラフィックコントローラ、1092 ホストコントローラ、1094 入出力コントローラ、1100 コンピュータ、1110 SoC、1122 メインメモリ、1124 フラッシュメモリ、1132 アンテナ、1134 アンテナ、1136 アンテナ、1140 ディスプレイ、1142 マイク、1144 スピーカ、1152 USBポート、1154 カードスロット

Claims (9)

  1. 撮像対象地点を示す位置情報を取得する位置情報取得部と、
    第1の車両の目的地までの間のルートを示すルート情報を取得するルート情報取得部と、
    前記位置情報及び前記ルート情報に基づいて、前記撮像対象地点を撮像する撮像方向を決定する撮像方向決定部と、
    前記撮像対象地点を前記撮像方向で撮像する第2の車両から、前記撮像対象地点を撮像した撮像画像を受信する撮像画像受信部と、
    前記撮像画像を表示させる表示制御部と
    を備える表示制御装置。
  2. 前記表示制御部は、前記第1の車両が備える表示部に前記撮像画像を表示させる、請求項1に記載の表示制御装置。
  3. 前記表示制御部は、予め指定された通信端末に前記撮像画像を送信して、前記通信端末に前記撮像画像を表示させる、請求項1又は2に記載の表示制御装置。
  4. 前記撮像対象地点及び前記撮像方向を含む依頼情報をブロードキャストする依頼情報送信部
    を備え、
    前記撮像画像受信部は、前記依頼情報を受信した前記第2の車両によって送信された前記撮像画像を受信する、請求項1から3のいずれか一項に記載の表示制御装置。
  5. 前記撮像画像受信部は、前記第1の車両と前記第2の車両との間の車車間通信を介して、前記第2の車両から前記撮像画像を受信する、請求項1から4のいずれか一項に記載の表示制御装置。
  6. 前記撮像方向決定部は、前記撮像対象地点が前記ルート情報によって示されるルートに含まれると判定した場合、前記ルートにおいて前記第1の車両が前記撮像対象地点に向かう方向を前記撮像方向として決定する、請求項1から5のいずれか一項に記載の表示制御装置。
  7. 前記撮像方向決定部は、前記撮像対象地点が前記ルート情報によって示されるルートに含まれないと判定した場合、前記撮像対象地点を前記第1の車両の目的地とした場合のルートにおいて前記第1の車両が前記撮像対象地点に向かう方向を前記撮像方向として決定する、請求項1から6のいずれか一項に記載の表示制御装置。
  8. 前記撮像方向決定部は、前記撮像対象地点が前記ルート情報によって示されるルートに含まれず、かつ、前記撮像対象地点が道路上でない場合、前記撮像対象地点の周辺道路から前記撮像対象地点への経路を推定し、推定した経路において、前記撮像対象地点に向かう方向を前記撮像方向として決定する、請求項1から7のいずれか一項に記載の表示制御装置。
  9. コンピュータを、請求項1から8のいずれか一項に記載の表示制御装置として機能せるためのプログラム。
JP2018098324A 2018-05-22 2018-05-22 表示制御装置及びプログラム Active JP7063723B2 (ja)

Priority Applications (3)

Application Number Priority Date Filing Date Title
JP2018098324A JP7063723B2 (ja) 2018-05-22 2018-05-22 表示制御装置及びプログラム
CN201910264836.5A CN110519555B (zh) 2018-05-22 2019-04-03 显示控制装置以及计算机可读存储介质
US16/417,660 US10785454B2 (en) 2018-05-22 2019-05-21 Display control device and computer-readable storage medium for a vehicle

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2018098324A JP7063723B2 (ja) 2018-05-22 2018-05-22 表示制御装置及びプログラム

Publications (2)

Publication Number Publication Date
JP2019203762A true JP2019203762A (ja) 2019-11-28
JP7063723B2 JP7063723B2 (ja) 2022-05-09

Family

ID=68614209

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2018098324A Active JP7063723B2 (ja) 2018-05-22 2018-05-22 表示制御装置及びプログラム

Country Status (3)

Country Link
US (1) US10785454B2 (ja)
JP (1) JP7063723B2 (ja)
CN (1) CN110519555B (ja)

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP7100536B2 (ja) * 2018-08-21 2022-07-13 本田技研工業株式会社 制御装置及びプログラム
US11427195B1 (en) * 2020-02-07 2022-08-30 Ambarella International Lp Automatic collision detection, warning, avoidance and prevention in parked cars
JP2021135967A (ja) * 2020-02-28 2021-09-13 本田技研工業株式会社 通信装置、プログラム、及びシステム
JP7478622B2 (ja) * 2020-08-20 2024-05-07 本田技研工業株式会社 情報処理装置、その情報処理方法、およびプログラム
JP7449206B2 (ja) 2020-09-15 2024-03-13 本田技研工業株式会社 通信制御装置、車両、プログラム、及び通信制御方法

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004145672A (ja) * 2002-10-24 2004-05-20 Alpine Electronics Inc 車両間通信情報処理装置
JP2005017074A (ja) * 2003-06-25 2005-01-20 Nissan Motor Co Ltd 情報送受信装置、情報送受信用プログラム
JP2006031583A (ja) * 2004-07-21 2006-02-02 Alpine Electronics Inc 車載システム及び遠隔地点観測システム
JP2009147851A (ja) * 2007-12-18 2009-07-02 Seiko Epson Corp 車両画像表示システム、車両画像表示装置、および通信遠隔装置
JP2012108586A (ja) * 2010-11-15 2012-06-07 Denso Corp 交通情報システム、交通情報取得装置および交通情報提供装置
JP2013187877A (ja) * 2012-03-12 2013-09-19 Nissan Motor Co Ltd 画像提供装置及び画像提供方法
US20180033305A1 (en) * 2016-08-01 2018-02-01 Hyundai Motor Company System and method for configuring lane node tree

Family Cites Families (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002081941A (ja) * 2000-09-11 2002-03-22 Zenrin Co Ltd 道路の3次元形状を測定するためのシステム及び方法
JP3726239B1 (ja) * 2004-07-13 2005-12-14 有 上條 画像処理プログラム及び装置
JP2009103521A (ja) * 2007-10-22 2009-05-14 Fujitsu Ten Ltd ナビゲーションシステム、携帯端末装置および車載装置
US8068491B2 (en) * 2008-02-13 2011-11-29 Telcordia Technologies, Inc. Methods for reliable multicasting in local peer group (LPG) based vehicle ad hoc networks
US8457881B2 (en) * 2008-09-03 2013-06-04 Mitsubishi Electric Corporation Image capturing system for vehicle
US9140719B2 (en) * 2010-09-16 2015-09-22 Pioneer Corporation Terminal holding device
TW201226237A (en) * 2010-12-16 2012-07-01 Weltrend Semiconductor Inc Calibration circuit for automatically calibrating a view image around a car and method thereof
EP2730890B1 (en) * 2012-11-07 2020-01-15 Volvo Car Corporation Vehicle image capture system
US8914225B2 (en) * 2012-12-04 2014-12-16 International Business Machines Corporation Managing vehicles on a road network
JP6094537B2 (ja) * 2014-07-08 2017-03-15 トヨタ自動車株式会社 ナビゲーションシステム
JP6512793B2 (ja) * 2014-11-07 2019-05-15 キヤノン株式会社 撮像装置、監視カメラシステム、撮像装置の制御方法およびプログラム
CN105973236A (zh) * 2016-04-26 2016-09-28 乐视控股(北京)有限公司 室内定位或导航方法、装置以及地图数据库生成方法
US10984661B2 (en) * 2016-06-02 2021-04-20 Sony Corporation Information processing device and information processing method
KR101737737B1 (ko) * 2016-09-06 2017-05-18 덴소코리아일렉트로닉스 주식회사 차량용 카메라 hud 통합 클러스터 시스템
JP2018128389A (ja) * 2017-02-09 2018-08-16 トヨタ自動車株式会社 画像処理システム及び画像処理方法
CN107933557B (zh) * 2017-11-17 2019-09-13 吉林大学 一种基于多摄像头的车辆直角转弯控制***及其控制方法

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004145672A (ja) * 2002-10-24 2004-05-20 Alpine Electronics Inc 車両間通信情報処理装置
JP2005017074A (ja) * 2003-06-25 2005-01-20 Nissan Motor Co Ltd 情報送受信装置、情報送受信用プログラム
JP2006031583A (ja) * 2004-07-21 2006-02-02 Alpine Electronics Inc 車載システム及び遠隔地点観測システム
JP2009147851A (ja) * 2007-12-18 2009-07-02 Seiko Epson Corp 車両画像表示システム、車両画像表示装置、および通信遠隔装置
JP2012108586A (ja) * 2010-11-15 2012-06-07 Denso Corp 交通情報システム、交通情報取得装置および交通情報提供装置
JP2013187877A (ja) * 2012-03-12 2013-09-19 Nissan Motor Co Ltd 画像提供装置及び画像提供方法
US20180033305A1 (en) * 2016-08-01 2018-02-01 Hyundai Motor Company System and method for configuring lane node tree

Also Published As

Publication number Publication date
US20190364248A1 (en) 2019-11-28
CN110519555A (zh) 2019-11-29
JP7063723B2 (ja) 2022-05-09
CN110519555B (zh) 2020-11-20
US10785454B2 (en) 2020-09-22

Similar Documents

Publication Publication Date Title
JP7063723B2 (ja) 表示制御装置及びプログラム
US10861326B2 (en) Method and device for sharing image information in communication system
US10997853B2 (en) Control device and computer readable storage medium
US11322026B2 (en) Control device and computer readable storage medium
CN110706497B (zh) 图像处理装置以及计算机可读存储介质
CN110620901B (zh) 控制装置以及计算机可读存储介质
CN110581981B (zh) 显示控制装置以及计算机可读存储介质
KR101870284B1 (ko) 전자기기, 그 제어방법 및 전자기기와 통신하는 서버
CN110782686B (zh) 控制装置以及计算机可读存储介质
JP7026003B2 (ja) 表示制御装置及びプログラム
US11606676B2 (en) Information processing device, a recording medium and method that enable sharing, among vehicles, of information about music that is being played back
JP7016773B2 (ja) 表示制御装置及びプログラム
JP6982548B2 (ja) 表示制御装置及びプログラム
JPWO2010001553A1 (ja) 無線装置

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20201130

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20211014

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20211019

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20211216

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20220412

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20220421

R150 Certificate of patent or registration of utility model

Ref document number: 7063723

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150