JP5266426B1 - 情報処理端末、情報処理方法、情報処理プログラム - Google Patents

情報処理端末、情報処理方法、情報処理プログラム Download PDF

Info

Publication number
JP5266426B1
JP5266426B1 JP2013037347A JP2013037347A JP5266426B1 JP 5266426 B1 JP5266426 B1 JP 5266426B1 JP 2013037347 A JP2013037347 A JP 2013037347A JP 2013037347 A JP2013037347 A JP 2013037347A JP 5266426 B1 JP5266426 B1 JP 5266426B1
Authority
JP
Japan
Prior art keywords
information
terminal
display
unit
information processing
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2013037347A
Other languages
English (en)
Other versions
JP2014164673A (ja
Inventor
信幸 村上
Original Assignee
イメージニクス株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Priority to JP2013037347A priority Critical patent/JP5266426B1/ja
Application filed by イメージニクス株式会社 filed Critical イメージニクス株式会社
Publication of JP5266426B1 publication Critical patent/JP5266426B1/ja
Application granted granted Critical
Priority to TW103104374A priority patent/TWI476707B/zh
Priority to KR1020140016054A priority patent/KR101474534B1/ko
Priority to BRBR102014003394-7A priority patent/BR102014003394A2/pt
Priority to US14/190,809 priority patent/US9097893B2/en
Priority to CN201410068214.2A priority patent/CN104007945B/zh
Publication of JP2014164673A publication Critical patent/JP2014164673A/ja
Priority to HK14110375.8A priority patent/HK1196988A1/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • G02B27/017Head mounted
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • G02B27/0101Head-up displays characterised by optical features
    • G02B2027/0138Head-up displays characterised by optical features comprising image capture systems, e.g. camera
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • G02B27/0101Head-up displays characterised by optical features
    • G02B2027/014Head-up displays characterised by optical features comprising information/image processing systems
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • G02B27/0101Head-up displays characterised by optical features
    • G02B2027/0141Head-up displays characterised by optical features characterised by the informative content of the display

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Optics & Photonics (AREA)
  • Human Computer Interaction (AREA)
  • Navigation (AREA)
  • User Interface Of Digital Computer (AREA)
  • Emergency Alarm Devices (AREA)
  • Traffic Control Systems (AREA)

Abstract

【課題】 透過型ヘッドマウントディスプレイの表示部に透過表示される透過画像により容易に被探索端末の探索支援を行うことができる情報処理端末を提供する。
【解決手段】 透過型ヘッドマウントディスプレイ30の表示部に透過表示される透過画像に被探索端末20の存在位置を重畳表示する情報処理端末10であって、被探索端末20までの距離と方角を取得する距離・方角取得部103と、表示部における被探索端末20の存在位置を示す存在位置情報の表示部での表示位置を、距離と方角とに基づいて特定する表示位置特定部106と、特定された表示位置に存在位置情報を重畳表示する重畳表示部108と、を有してなることを特徴とする。
【選択図】図7

Description

本発明は、透過型ヘッドマウントディスプレイの表示部に透過表示される透過画像に被探索端末の位置情報を重畳表示する情報処理端末と、この情報処理端末で実行される情報処理方法と、この情報処理端末に実行させる情報処理プログラムに関するものである。
人込みや入り組んだ場所において、探索対象である人物の探索を携帯情報端末によって支援する技術が知られている。
このような探索対象の探索支援技術として、撮影方位、自機の現在位置、撮影画角ならびに目標物の位置情報に基づいて、撮影画像中の目標物の位置を特定し、特定した目標物の位置を撮影画像に重ねて表示させるものが知られている(例えば、特許文献1参照)。
また、他の探索支援技術として、親機の位置情報と、親機の方位情報と、子機の位置情報とを用いて、基準方向の風景情報に子機の位置を示す情報を重畳させて親機に表示するものが知られている(例えば、特許文献2参照)。
近年、ヘッドアップディスプレイやヘッドマウントディスプレイを用いて、目的物への案内をする技術が知られている(例えば、特許文献3参照)。
特許文献3の技術では、ヘッドアップディスプレイやヘッドマウントディスプレイに、矢印で目的物の方向を示し、矢印の大きさなどを変化させて目的物までの距離を認識させるなどしている。
特許第4508031号公報 特開2007−208414号公報 特開2005−227208号公報
以上説明した技術を用いることで、透過型ヘッドマウントディスプレイのような現実の風景に画像を重畳して表示可能なディスプレイを用いて探索対象の支援を行うことで、探索者が探索対象を発見することが容易になると考えられる。
しかしながら、以上説明した技術では、探索者の情報処理端末が取得した被探索端末の位置情報に基づいて、被探索端末を容易に発見するための透過型ヘッドマウントディスプレイの画面上への具体的な表示技術については提案されていなかった。
本発明は、透過型ヘッドマウントディスプレイの表示部に透過表示される透過画像により容易に被探索端末の探索支援を行うことができる情報処理端末を提供することを目的とする。
本発明は、透過型ヘッドマウントディスプレイの表示部に透過表示される透過画像に被探索端末の存在位置を重畳表示する情報処理端末であって、被探索端末までの距離を取得する距離取得部と、被探索端末への方角を取得する方角取得部と、表示部における被探索端末の存在位置を示す存在位置情報の表示部での表示位置を、距離と方角とに基づいて特定する表示位置特定部と、特定された表示位置に存在位置情報を重畳表示する重畳表示部と、を有してなり、表示位置特定部は、透過画像に含まれる被写体までの距離である第2距離を取得し、被写体への方角である第2方角を取得し、第2距離と第2方角とに基づいて、表示位置を特定する、ことを特徴とする。
本発明によれば、透過型ヘッドマウントディスプレイの表示部に透過表示される透過画像により容易に被探索端末の探索支援を行うことができる。
本発明に係る情報処理端末の実施の形態を示す模式図である。 上記情報処理端末による探索の例を示す模式図である。 被探索端末と上記情報処理端末との距離と方角の関係を示す模式図である。 透過型ヘッドマウントディスプレイの表示部に表示された表示画像の例を示す模式図である。 上記表示画像を構成する透過画像の例を示す模式図である。 上記表示画像を構成する存在位置情報の例を示す模式図である。 上記情報処理端末と上記被探索端末の構成を示すブロック図である。 本発明に係る情報処理方法の実施の形態を示すシーケンス図である。 上記情報処理方法に含まれる特定被写体選択処理のフローチャートである。 上記情報処理方法に含まれる表示位置特定処理のフローチャートである。 上記表示位置特定処理における位置座標算出処理を示す模式図である。 上記情報処理方法に含まれる表示態様変更処理を示すシーケンス図である。
本発明に係る情報処理端末と情報処理方法と情報処理プログラムについて、図面を参照して説明する。ここで、以下探索者(例えば、父親)が被探索者(例えば、迷子になった息子)を探索する場合を例に説明をする。
図1は、本発明に係る情報処理端末と透過型ヘッドマウントディスプレイとを使用する探索者の様子を示す模式図である。同図に示すように、本発明に係る情報処理端末10は、探索者3が着用する透過型ヘッドマウントディスプレイ(以下「HMD」という。)30と電気的に接続されている。
情報処理端末10は、例えばスマートフォンや携帯電話機など、被探索端末20と通信可能な情報処理装置である。
HMD30は、図1に示すように探索者3の頭部の眼前に表示部が位置するように着用することができ、表示部に情報処理端末10から受信した画像と外部からの透過画像とを重畳表示することができる。
なお、情報処理端末10とHMD30との接続は、図1に示すように有線接続であっても、あるいは無線接続であってもよい。
図2は、情報処理端末10による探索の例を示す模式図である。同図に示すように、情報処理端末10は、情報処理端末10からみた方角D1に存在する被探索者2を探索する際に、HMD30の表示部上に被探索者2の位置を示す存在位置情報を表示することで、被探索者2の探索を容易にする。
ここで、被探索者2は、被探索端末20を所持している。被探索端末20は、例えば、スマートフォンや携帯電話機など、情報処理端末10と通信可能な情報処理装置である。また、被探索者2の周囲には、被写体4,5と、特定被写体6とが存在する。
被写体4,5は、探索者3からみて被探索者2の方向とは異なる方向にある。特定被写体6は、探索者3からみて被探索者2と同一方向またはほぼ同一方向にある。また、特定被写体6は、探索者3からみて被探索者2よりも遠方にある。
このような場合に、被写体4,5と特定被写体6は、建造物や車両などの物体や、被探索者2以外の被探索端末20を有しない人物である。周囲に被探索者2以外の人物や物体があるため、探索者3は、目視で被探索者2を発見するのは困難である。
図3は、情報処理端末10と被探索端末20、情報処理端末10と特定被写体6、それぞれとの距離と方角の関係を示す模式図である。探索者3が被探索者2を探索する際には、情報処理端末10は、情報処理端末10から被探索端末20までの距離L1と、情報処理端末10からみた被探索端末20の方角D1とを用いる。
また、情報処理端末10は、探索者3に特定被写体6を目標に被探索者2を探索させる際には、情報処理端末10から特定被写体6までの距離L2と、情報処理端末10からみた特定被写体6の方角D2とを用いる。
図4は、HMD30の表示部に表示された表示画像の例を示す模式図である。また、図5は、表示画像を構成する透過画像32を示す模式図である。また、図6は、表示画像を構成する存在位置情報画像33を示す模式図である。
図4に示すように、HMD30の表示部31には、図5に示す透過画像32と図6に示す情報処理端末10が生成する存在位置情報画像33とが、重畳して表示されている。
ここで、透過画像32には、被写体4,5と、特定被写体6とが表示されている。すなわち、探索者3の視界には、被写体4,5、特定被写体6が存在している。また、存在位置情報画像33には、被探索端末20の位置を示す存在位置情報21が表示されている。
図7は、情報処理端末10と被探索端末20の構成を示すブロック図である。同図に示すように、情報処理端末10は、第1位置情報取得部101、第2位置情報取得部102、距離・方向取得部103、判定部104、方向表示部105、表示位置特定部106、HMD方向取得部107、重畳表示部108、表示態様変更部109を有する。
また、情報処理端末10は、特定情報送信部110、操作部111、通知送信部112、要求送信部113、許諾受信部114を有する。
図7に示すように、被探索端末20は、第1位置情報送信部201、特定情報受信部202、要求受信部203、許諾送信部204、通知受信部205を有する。
以上の構成を有する情報処理端末10は、HMD30の表示部31に透過表示される透過画像32に被探索端末20の存在位置を示す存在位置情報画像33を重畳表示する本発明に係る情報処理方法を実行する。
本発明に係る情報処理方法では、情報処理端末10が、被探索端末20までの距離L1と方角D1とを取得し、存在位置情報21の表示部31での表示位置を、距離L1と方角D1とに基づいて特定する。その上で、情報処理端末10は、透過画像32に存在位置情報21が表示された存在位置情報画像33を重畳表示する。
なお、情報処理端末10以外のコンピュータに前述の情報処理方法を実行させることで、コンピュータを情報処理端末10として機能させることもできる。
第1位置情報取得部101は、第1位置情報送信部201から送信された被探索端末20の現在位置情報を取得する。
ここで、第1位置情報取得部101が取得する被探索端末20の現在位置情報は、被探索端末20が備えるGPS(Global Positioning System)で取得した情報である。なお、第1位置情報取得部101は、被探索端末20の現在位置情報を収集する不図示のサーバから被探索端末20の現在位置情報を取得する構成でもよい。
第2位置情報取得部102は、透過画像32に含まれる特定被写体6までの距離である第2距離と被探索端末20への方角である第2方角とを取得する。ここで、第2位置情報取得部102は、透過画像32に複数の被写体が含まれる場合には、後述のとおり透過画像32に含まれる複数の被写体の中から特定被写体6を選択して、第2距離と第2方角を取得する。
距離・方向取得部103は、情報処理端末10の位置情報と被探索端末20の位置情報とを用いて、被探索端末20までの距離L1と、被探索端末20への方角D1とを取得する。ここで、距離・方向取得部103は、本発明における距離取得部と方角取得部とに相当する。
距離・方向取得部103は、被探索端末20の位置情報と、情報処理端末10の位置情報とを用いて、情報処理端末10から被探索端末20までの距離L1を取得する。また、距離・方向取得部103は、被探索端末20の位置情報と、情報処理端末10の位置情報とを用いて、情報処理端末10から被探索端末20への方角D1を取得する。
判定部104は、第1位置情報取得部101が取得した方角D1と第2位置情報取得部102が取得した方角D2を用いて、表示部31に表示されている透過画像32中での被探索端末20の存否を判定する。
方向表示部105は、判定部104による判定の結果、透過画像32中に被探索端末20が存在しないと判定されたときに、被探索端末20への方角D1とD2に基づいて被探索端末20が存在する方向を示す情報を表示部31に表示する。表示部31に表示される被探索端末20が存在する方向を示す情報としては、矢印や強調表示がある。
表示位置特定部106は、表示部31における被探索端末20の存在位置を示す存在位置情報21の表示部31での表示位置を、距離L1,L2と方角D1,D2とに基づいて特定する。
すなわち、表示位置特定部106は、被探索端末20に対する距離L1や方角D1の少なくともいずれか一方に基づいて、透過画像32に含まれる複数の被写体の中から特定被写体6を選択する。そして、表示位置特定部106は、選択した特定被写体6についての第2距離L2と第2方角D2とを算出する。
ここで、表示位置特定部106は、L2を例えば、HMD30に設けられた2つのカメラからの撮像画像を用いて公知の三角測量の原理により算出する。
また、表示位置特定部106は、D2を、例えば、後述のHMD方向特定部が取得するHMD30の現在の方向と、特定被写体6の表示部ないでの表示位置とを用いて算出する。
すなわち、例えば、HMD30が北を向いていて、特定被写体6が表示部31の左右方向の中心に表示されているとき、D2は「北」と算出できる。つまり、HMD30の向きと、表示部31の中心と特定被写体6が表示されている表示部31内での表示位置との差分とを用いてD2が算出できる。
また、表示位置特定部106は、算出した特定被写体6についての第2距離L2と第2方角D2とに基づいて、表示部31内における存在位置情報21の表示位置を特定する。
HMD方向取得部107は、HMD30の現在の方向、つまり探索者3の視線の方向を取得する。
重畳表示部108は、特定された表示位置に存在位置情報21を重畳表示する。重畳表示部108は、透過画像32に含まれる複数の被写体のうち、特定された表示位置に表示されている特定被写体6を強調表示する。
表示態様変更部109は、表示部31に重畳表示された存在位置情報21の表示態様を変更する。
ここで、表示態様変更部109は、存在位置情報21が表示部31に重畳表示されている間に、情報処理端末10から被探索端末20までの距離が変化したときに、変化に基づいて表示態様を変更する。
また、表示態様変更部109は、許諾受信部114が被探索端末20から許諾情報を受信したときに、表示部31に重畳表示された存在位置情報21の表示態様を変更する。
特定情報送信部110は、表示部31に存在位置情報21が重畳表示されたときに、被探索端末20に特定情報を送信する。
また、特定情報送信部110は、操作部111が操作されたときに、被探索端末20に特定情報を送信する。
操作部111は、ボタンやスイッチなどであって、操作者である探索者3からの各種操作を受け付ける。
通知送信部112は、距離・方向取得部103が取得した情報処理端末10から被探索端末20までの距離L1に基づいて通知情報を被探索端末20に送信する。ここで、通知送信部112は、情報処理端末10から被探索端末20までの距離L1が所定距離(例えば、情報処理端末10内の記憶手段に予め記憶されている)以下のときにのみ、通知情報を通知受信部205に送信する。
要求送信部113は、被探索端末20の位置情報の送信を要求する要求情報を被探索端末20に送信する。
また、要求送信部113は、許諾受信部114が許諾情報を受信したときにのみ、被探索端末20に要求情報を送信してもよい。
許諾受信部114は、特定情報を受信した被探索端末20で所定の操作(例えば、特定のボタンの押下など)がされたときに、被探索端末20から許諾情報を受信する。
第1位置情報送信部201は、被探索端末20の現在位置情報を第1位置情報取得部101に送信する。
特定情報受信部202は、特定情報を特定情報送信部110から受信する。
要求受信部203は、要求送信部113から送信された被探索端末20の位置情報の送信を要求する要求情報を受信する。
許諾送信部204は、特定情報を受信した被探索端末20で所定の操作(例えば、特定のボタンの押下など)がされたときに、許諾情報を許諾受信部114に送信する。
通知受信部205は、情報処理端末10から被探索端末20までの距離L1に基づく通知情報を通知送信部112から受信する。
図8は、本発明に係る情報処理方法の処理を示すシーケンス図である。同図を参照して、本発明に係る情報処理方法における情報処理端末10と被探索端末20とHMD30とが行う処理を説明する。
本発明に係る情報処理方法が開始されると、第2位置情報取得部102は、第1位置情報を取得する(S101)。すなわち、例えば、探索者3が情報処理端末10で動作するコンピュータプログラムを起動させることで、情報処理方法が開始される。
このとき、HMD30は、透過画像32を表示部31に表示し続けている(S301)。
また、被探索端末20は、被探索端末20の位置情報である第2位置情報を取得し続けている(S201)。
第1位置情報を取得後、情報処理端末10は、探索者3の視線方向を送信する(S102)。
被探索端末20は、情報処理端末10への許諾情報の送信を許可する、被探索者2からの許諾操作を受け付ける(S202)。すなわち、例えば、被探索者2は探索者3に探索して欲しいときに、被探索端末20で所定の許諾操作をする。
許諾受信部114は、被探索端末20の許諾送信部204から送信される許諾情報を受信する(S103)。
要求送信部113は、被探索端末20の位置情報の送信を要求する要求情報を被探索端末20に送信する(S104)。
第2位置情報取得部102は、被探索端末20から第2位置情報を受信する(S105)。
距離・方向取得部103は、取得した第1位置情報と第2位置情報とに基づいて、情報処理端末10から被探索端末20までの距離と、情報処理端末10から被探索端末20への方角とを取得する(S106)。
表示位置特定部106は、被探索端末20に対する距離や方角の少なくともいずれか一方に基づいて、透過画像32に含まれる複数の被写体4,5と特定被写体6の中から特定被写体6を選択する(S107)。
図9は、特定被写体選択処理のフローチャートである。同図に基づいて特定被写体選択処理を説明する。表示位置特定部106は、透過画像32に含まれる被写体の抽出処理を行う(S1071)。ここで、透過画像32から被写体を抽出する方法としては、所定の特徴点を抽出する処理などの公知の方法を用いることができる。
次に、表示位置特定部106は、抽出された複数の被写体から特定被写体6の候補となる被写体(候補被写体)を選択する(S1072)。
候補被写体の選択後、表示位置特定部106は、情報処理端末10から各候補被写体までの距離・方角を算出する(S1073)。
表示位置特定部106は、各候補被写体までの距離・方角と、距離・方向取得部103が算出した情報処理端末10から被探索端末20までの距離・方角とを比較し、特定被写体を選択する(S1074)。
すなわち、候補被写体の中から、情報処理端末10からの距離がL1と同程度(L1に近い)、情報処理端末10からの方角がL1と同程度(D1に近い)の被写体が特定被写体6として選択される。
特定被写体選択後、表示位置特定部106は、選択した特定被写体についての第2距離と第2方角とを算出する(S108)。
表示位置特定部106は、算出した第2距離と第2方角とに基づいて、存在位置情報21の存在位置情報画像33内での表示位置、つまり、存在位置情報21の表示部31内での表示位置を特定する(S109)。
図10は、表示位置特定処理のフローチャートである。同図に基づいて表示位置特定処理を説明する。表示位置特定部106は、透過画像32について、所定のサイズに区分された区分画像を生成する、画像マッピング処理を行う(S1091)。
画像マッピング処理後、表示位置特定部106は、表示部31上の特定被写体6付近にある被探索端末20(被探索者2)の位置座標算出処理を行う(S1092)。
図11は、表示位置特定処理における位置座標算出処理を示す模式図である。同図に示すように、表示位置特定部106は、表示部31の複数の区分画像31aから、区分画像を特定し、位置座標を算出する。
被探索者2の位置座標の算出は、例えば、特定被写体6と被探索端末20との相対関係、つまり、L1とL2との差分やD1とD2との差分などを用いて行う。
表示位置特定部106は、位置座標を算出後、被探索端末20の表示位置を特定する(S1093)。
表示位置特定部106は、被探索端末20の表示位置を特定後、特定された表示位置を示す表示位置情報を重畳表示部108に送信する。
重畳表示部108は、特定された表示位置に存在位置情報21が表示された存在位置情報画像33を生成して、HMD30に送信する(S110)。
HMD30は、表示部31に受信した存在位置情報画像33を透過画像32を重畳表示する(S302)。
図12は、情報処理方法の表示態様変更処理を示すシーケンス図である。同図に示すように、存在位置情報21の重畳表示後(S311)、情報処理端末10は、操作部111の操作を受け付けると(S111)、特定情報送信部110を用いて特定情報を送信する(S112)。
すなわち、例えば、情報処理端末10から被探索端末20への特定情報の送信により、探索者3が被探索者2の存在位置を確認できたことを被探索者2に伝えることができる。
特定情報を受信した被探索端末20は、被探索者2の操作を受け付けると(S211)、許諾送信部204を用いて、許諾情報を情報処理端末10に送信する。
すなわち、例えば、被探索端末20から情報処理端末10への許諾情報の送信により、探索者3が被探索者2の存在位置を確認できたことを被探索者2が把握したことを探索者3に伝えることができる。
許諾受信部114が許諾情報を受信すると(S113)、表示態様変更部109は、存在位置情報21の表示態様を変更した新たな存在位置情報画像33を生成し、新たな存在位置情報画像33と共にHMD30に表示態様変更指示を送信する(S114)。
表示態様の変更の例としては、存在位置情報21の色や形を変えることや、存在位置情報21を点灯から点滅に変化させること、などがある。
表示態様変更指示を受け付けると、HMD30では、存在位置情報21の表示態様を変更する(S312)。
すなわち、例えば、存在位置情報21の表示態様を変更することで、探索者3は、探索者3が被探索者2の位置を確認できたことを被探索者2が把握した旨知ることができる。
以上説明した本発明に係る情報処理端末10によれば、HMD30の表示部31に透過表示される透過画像32により被探索端末20を所持する被探索者2の探索支援を行うことができる。
また、以上説明した本発明に係る情報処理端末10によれば、第2距離と第2方角とに基づいて表示位置を特定するため、透過画像32中での被探索端末20の位置を特定することができる。
また、以上説明した本発明に係る情報処理端末10によれば、透過画像32に含まれる複数の被写体から特定被写体6を選択するため、被探索端末20の発見の手掛かりを探索者3に提供できる。
また、以上説明した本発明に係る情報処理端末10によれば、存在位置情報21の表示態様を変更するため、被探索者2の状況を探索者3に把握させることができる。
なお、以上説明した実施の形態は、特定被写体6とは別の存在位置情報21を生成して、透過画像32に重畳表示させるものであった。
これに代えて、例えば、特定被写体6を被探索端末20の存在位置情報として用いるようにしてもよい。すなわち、透過画像32に含まれる被写体の中から被探索端末20の存在位置(の付近)の被写体を特定被写体6として選択するまでは、先に説明した実施の形態と同じである。
その上で、情報処理端末10は、特定被写体6が透過画像32の中で視認可能(他の被写体4,5と区別可能)な表示態様の画像を生成する。情報処理端末10は、先の実施の形態における存在位置情報21の代わりに、生成された画像を存在位置情報として用いて存在位置情報画像を生成する。
情報処理端末10は、表示部31に生成された存在位置情報画像を透過画像32に重畳表示させる。その結果、探索者3は、表示部31に表示されている透過画像32に含まれる特定被写体6付近に被探索者2が存在することを把握できる。
2 :探索者
3 :被探索者
4 :被写体
5 :被写体
10 :情報処理端末
20 :被探索端末
21 :存在位置情報
30 :HMD
31 :表示部
32 :透過画像
33 :存在位置情報画像
101 :第1位置情報取得部
102 :第2位置情報取得部
103 :距離・方向取得部
104 :判定部
105 :方向表示部
106 :表示位置特定部
107 :HMD方向取得部
108 :重畳表示部
109 :表示態様変更部
110 :特定情報送信部
111 :操作部
112 :通知送信部
113 :要求送信部
114 :許諾受信部
201 :第1位置情報送信部
202 :特定情報受信部
203 :要求受信部
204 :許諾送信部
205 :通知受信部

Claims (17)

  1. 透過型ヘッドマウントディスプレイの表示部に透過表示される透過画像に被探索端末の存在位置を重畳表示する情報処理端末であって、
    前記被探索端末までの距離を取得する距離取得部と、
    前記被探索端末への方角を取得する方角取得部と、
    前記表示部における前記被探索端末の存在位置を示す存在位置情報の前記表示部での表示位置を、前記距離と前記方角とに基づいて特定する表示位置特定部と、
    前記特定された表示位置に前記存在位置情報を重畳表示する重畳表示部と、
    を有してなり、
    前記表示位置特定部は、
    前記透過画像に含まれる被写体までの距離である第2距離を取得し、
    前記被写体への方角である第2方角を取得し、
    前記第2距離と前記第2方角とに基づいて、前記表示位置を特定する、
    ことを特徴とする情報処理端末。
  2. 前記表示位置特定部は、
    前記透過画像に含まれる複数の被写体の中から特定の被写体を選択し、
    前記選択された特定の被写体までの距離である第2距離を取得し、
    前記選択された特定の被写体への方角である第2方角を取得し、
    前記第2距離と前記第2方角とに基づいて、前記表示位置を特定する、
    請求項1記載の情報処理端末。
  3. 前記表示位置特定部は、前記被探索端末への方角に基づいて、前記透過画像に含まれる複数の被写体の中から特定の被写体を選択する、
    請求項記載の情報処理端末。
  4. 前記表示位置特定部は、前記被探索端末までの距離に基づいて、前記透過画像に含まれる複数の被写体の中から特定の被写体を選択する、
    請求項記載の情報処理端末。
  5. 前記表示位置特定部は、前記被探索端末までの距離と前記被探索端末への方角とに基づいて、前記透過画像に含まれる複数の被写体の中から特定の被写体を選択する、
    請求項記載の情報処理端末。
  6. 前記表示部に重畳表示された前記存在位置情報の表示態様を変更する表示態様変更部、
    を備え、
    前記表示態様変更部は、前記存在位置情報が前記表示部に重畳表示されている間に、前記被探索端末までの距離が変化したときに、前記変化に基づいて前記表示態様を変更する、
    請求項1乃至のいずれかに記載の情報処理端末。
  7. 前記被探索端末が操作されたときに前記被探索端末から送信される、探索者による被探索者の探索を許諾する情報である許諾情報を受信する許諾受信部と、
    前記許諾受信部が前記許諾情報を受信したときに、前記表示部に重畳表示された前記存在位置情報の表示態様を変更する表示態様変更部と、
    を備える、
    請求項1乃至のいずれかに記載の情報処理端末。
  8. 前記表示部に前記存在位置情報が重畳表示されたときに、前記被探索端末に、探索者が被探索者の存在位置を確認したことを被探索者に伝える情報である特定情報を送信する送信部
    を備え、
    前記許諾受信部は、前記特定情報を受信した前記被探索端末が操作されたときに前記被探索端末から送信される前記許諾情報を受信する
    請求項記載の情報処理端末。
  9. 操作者による操作を受け付ける操作部と、
    前記操作部が操作されたときに、前記被探索端末に、探索者が被探索者の存在位置を確認したことを被探索者に伝える情報である特定情報を送信する送信部と、
    を備える、
    請求項1乃至のいずれかに記載の情報処理端末。
  10. 前記重畳表示部は、前記透過画像に含まれる複数の被写体のうち、前記特定された表示位置に表示されている被写体を強調表示することで前記存在位置情報を重畳表示させる、
    請求項1乃至のいずれかに記載の情報処理端末。
  11. 前記距離取得部は、前記被探索端末の位置情報と、前記透過型ヘッドマウントディスプレイの位置情報とを用いて、前記被探索端末までの距離を取得し、
    前記方角取得部は、前記被探索端末の位置情報と、前記透過型ヘッドマウントディスプレイの位置情報とを用いて、前記被探索端末への方角を取得する、
    請求項1乃至10のいずれかに記載の情報処理端末。
  12. 前記被探索端末の位置情報の送信を前記被探索端末に要求する要求情報を送信する要求送信部、
    を備える、
    請求項11記載の情報処理端末。
  13. 前記要求情報を受信した前記被探索端末から、探索者による被探索者の探索を許諾する情報である許諾情報を受信する許諾受信部と、
    前記許諾受信部が前記許諾情報を受信したときにのみ、前記被探索端末の位置情報の送信を前記被探索端末に要求する要求情報を送信する要求送信部と、
    を備える、
    請求項11記載の情報処理端末。
  14. 前記被探索端末までの距離に基づいて通知情報を前記被探索端末に送信する通知送信部、
    を備え、
    前記通知送信部は、前記被探索端末までの距離が所定距離以下のときにのみ、前記通知情報を前記被探索端末に送信する、
    請求項1乃至13のいずれかに記載の情報処理端末。
  15. 前記方角を用いて、前記表示部に表示されている透過画像中の前記被探索端末の存否を判定する判定部と、
    前記判定部による判定の結果、前記透過画像中に前記被探索端末が存在しないと判定されたときに、前記被探索端末への方角に基づいて前記被探索端末が存在する方向を示す情報を前記表示部に表示する方向表示部と、
    を備える、
    請求項1乃至14のいずれかに記載の情報処理端末。
  16. 透過型ヘッドマウントディスプレイの表示部に透過表示される透過画像に被探索端末の存在位置を重畳表示する情報処理端末により実行される情報処理方法であって、
    前記情報処理端末が、
    前記被探索端末までの距離を取得するステップと、
    前記被探索端末への方角を取得するステップと、
    前記表示部における前記被探索端末の存在位置を示す存在位置情報の前記表示部での表示位置を、前記距離と前記方角とに基づいて特定するステップと、
    前記特定された表示位置に前記存在位置情報を重畳表示するステップと、
    を有してなり、
    前記表示部での表示位置を、前記距離と前記方角とに基づいて特定するステップでは、
    前記透過画像に含まれる被写体までの距離である第2距離を取得し、
    前記被写体への方角である第2方角を取得し、
    前記第2距離と前記第2方角とに基づいて、前記表示位置を特定する、
    ことを特徴とする情報処理方法。
  17. コンピュータを、請求項1乃至15のいずれかに記載の情報処理端末として機能させることを特徴とする情報処理プログラム。
JP2013037347A 2013-02-27 2013-02-27 情報処理端末、情報処理方法、情報処理プログラム Expired - Fee Related JP5266426B1 (ja)

Priority Applications (7)

Application Number Priority Date Filing Date Title
JP2013037347A JP5266426B1 (ja) 2013-02-27 2013-02-27 情報処理端末、情報処理方法、情報処理プログラム
TW103104374A TWI476707B (zh) 2013-02-27 2014-02-11 資訊處理終端裝置、資訊處理方法、資訊處理程式
KR1020140016054A KR101474534B1 (ko) 2013-02-27 2014-02-12 정보 처리 단말, 정보 처리 방법, 정보 처리 프로그램
BRBR102014003394-7A BR102014003394A2 (pt) 2013-02-27 2014-02-13 Terminal de processamento de informações, método para processar informações e programa para processar informações
US14/190,809 US9097893B2 (en) 2013-02-27 2014-02-26 Information processing terminal for superimposing target position on a head mounted display
CN201410068214.2A CN104007945B (zh) 2013-02-27 2014-02-27 信息处理终端、信息处理方法和信息处理程序
HK14110375.8A HK1196988A1 (zh) 2013-02-27 2014-10-17 信息處理終端、信息處理方法和信息處理程序

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2013037347A JP5266426B1 (ja) 2013-02-27 2013-02-27 情報処理端末、情報処理方法、情報処理プログラム

Publications (2)

Publication Number Publication Date
JP5266426B1 true JP5266426B1 (ja) 2013-08-21
JP2014164673A JP2014164673A (ja) 2014-09-08

Family

ID=49179115

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2013037347A Expired - Fee Related JP5266426B1 (ja) 2013-02-27 2013-02-27 情報処理端末、情報処理方法、情報処理プログラム

Country Status (7)

Country Link
US (1) US9097893B2 (ja)
JP (1) JP5266426B1 (ja)
KR (1) KR101474534B1 (ja)
CN (1) CN104007945B (ja)
BR (1) BR102014003394A2 (ja)
HK (1) HK1196988A1 (ja)
TW (1) TWI476707B (ja)

Families Citing this family (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6476781B2 (ja) * 2014-11-17 2019-03-06 セイコーエプソン株式会社 情報処理装置、情報処理装置を制御する方法、コンピュータープログラム
JP2016139168A (ja) * 2015-01-26 2016-08-04 セイコーエプソン株式会社 表示システム、可搬型表示装置、表示制御装置、表示方法
JP2016138908A (ja) * 2015-01-26 2016-08-04 セイコーエプソン株式会社 表示システム、可搬型表示装置、表示制御装置、表示方法
JP6424100B2 (ja) * 2015-01-29 2018-11-14 株式会社ゼンリンデータコム ナビゲーションシステム、ナビゲーション装置、グラス型デバイス及び装置間連携方法
US10096149B2 (en) * 2015-12-21 2018-10-09 Intel Corporation Direct motion sensor input to rendering pipeline
KR102510822B1 (ko) 2016-03-14 2023-03-16 삼성전자주식회사 디스플레이 장치 및 vr 영상 제공 방법
JP6953744B2 (ja) * 2016-05-11 2021-10-27 株式会社リコー 情報共有システム、情報共有方法、端末装置および情報処理プログラム
WO2021100190A1 (ja) * 2019-11-22 2021-05-27 三菱電機株式会社 合流支援装置、合流支援システム、及び、合流支援方法

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH07294842A (ja) * 1994-04-26 1995-11-10 Toyota Motor Corp 自動車用情報表示装置
JPH10103980A (ja) * 1996-09-30 1998-04-24 Mazda Motor Corp ナビゲーション装置
JP2003121162A (ja) * 2001-10-15 2003-04-23 Alpine Electronics Inc 多者間通信装置
JP2005157317A (ja) * 2003-10-28 2005-06-16 Semiconductor Energy Lab Co Ltd 表示装置及び通信システム
WO2006080344A1 (ja) * 2005-01-26 2006-08-03 Matsushita Electric Industrial Co., Ltd. 誘導装置及び誘導方法
JP2007172541A (ja) * 2005-12-26 2007-07-05 Toyota Motor Corp 運転支援装置
JP2008191102A (ja) * 2007-02-07 2008-08-21 Rohm Co Ltd 位置表示装置
JP2010048616A (ja) * 2008-08-20 2010-03-04 Toshiba Corp 移動端末装置

Family Cites Families (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4508031B2 (ja) 2001-08-07 2010-07-21 カシオ計算機株式会社 目標位置探索装置、目標位置探索方法及びプログラム
JP4445283B2 (ja) 2004-02-16 2010-04-07 株式会社リコー 表示システム
TWI237125B (en) * 2004-05-25 2005-08-01 Universal Vision Biotechnology Focus adjustable head mounted display system for displaying digital contents and device for realizing the system
JP2007208414A (ja) 2006-01-31 2007-08-16 Victor Co Of Japan Ltd 捜索システム
TW200901089A (en) * 2007-06-22 2009-01-01 Mo Fz Tang Co Ltd Virtual reality image superimposing system and method thereof
US8427508B2 (en) * 2009-06-25 2013-04-23 Nokia Corporation Method and apparatus for an augmented reality user interface
US8754931B2 (en) * 2010-01-08 2014-06-17 Kopin Corporation Video eyewear for smart phone games
US9710554B2 (en) * 2010-09-23 2017-07-18 Nokia Technologies Oy Methods, apparatuses and computer program products for grouping content in augmented reality
KR101266198B1 (ko) * 2010-10-19 2013-05-21 주식회사 팬택 증강현실 객체정보의 가시성을 높이는 디스플레이 장치 및 디스플레이 방법
US8823513B2 (en) * 2011-01-18 2014-09-02 Radio Systems Corporation Systems and methods to track movement of animals
CN102620731A (zh) * 2011-01-26 2012-08-01 英华达(南京)科技有限公司 可传输定位数据的手持装置及其定位数据传输方法

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH07294842A (ja) * 1994-04-26 1995-11-10 Toyota Motor Corp 自動車用情報表示装置
JPH10103980A (ja) * 1996-09-30 1998-04-24 Mazda Motor Corp ナビゲーション装置
JP2003121162A (ja) * 2001-10-15 2003-04-23 Alpine Electronics Inc 多者間通信装置
JP2005157317A (ja) * 2003-10-28 2005-06-16 Semiconductor Energy Lab Co Ltd 表示装置及び通信システム
WO2006080344A1 (ja) * 2005-01-26 2006-08-03 Matsushita Electric Industrial Co., Ltd. 誘導装置及び誘導方法
JP2007172541A (ja) * 2005-12-26 2007-07-05 Toyota Motor Corp 運転支援装置
JP2008191102A (ja) * 2007-02-07 2008-08-21 Rohm Co Ltd 位置表示装置
JP2010048616A (ja) * 2008-08-20 2010-03-04 Toshiba Corp 移動端末装置

Also Published As

Publication number Publication date
TWI476707B (zh) 2015-03-11
HK1196988A1 (zh) 2014-12-24
BR102014003394A2 (pt) 2014-10-14
CN104007945B (zh) 2016-01-27
JP2014164673A (ja) 2014-09-08
CN104007945A (zh) 2014-08-27
KR101474534B1 (ko) 2014-12-22
TW201437924A (zh) 2014-10-01
US20140240347A1 (en) 2014-08-28
KR20140107122A (ko) 2014-09-04
US9097893B2 (en) 2015-08-04

Similar Documents

Publication Publication Date Title
JP5266426B1 (ja) 情報処理端末、情報処理方法、情報処理プログラム
KR101515484B1 (ko) 증강현실정보 제공 장치 및 그 방법
JP6674914B2 (ja) ナビゲーションシステム、ナビゲーションプログラム、車載装置
JP6866482B2 (ja) 地図表示の方法、システム、端末、および地図サーバ
JP2017126142A (ja) 情報処理装置、情報処理方法及びプログラム
EP3112993B1 (en) Information processing apparatus, setting condition specification method for image forming apparatus
JP5854714B2 (ja) 表示制御装置、表示制御装置の制御方法、プログラム
JP2024022678A (ja) 追跡支援装置、端末、追跡支援システム、追跡支援方法及びプログラム
JP2017084100A (ja) 情報通信端末、共有管理装置、情報共有方法、コンピュータプログラム
CN113467731B (zh) 显示***、信息处理装置和显示***的显示控制方法
JP2016096513A (ja) 情報処理システム、情報処理方法及びプログラム
JP2013085200A (ja) 画像処理装置、画像処理方法、及びプログラム
JP2013142956A (ja) 撮影対象検索システム
JP5514062B2 (ja) 電子機器、情報付き撮像画面表示方法及びプログラム
JP2014222410A (ja) 携帯表示装置及び表示プログラム並びに操作案内システム
JP2016138852A (ja) ナビゲーションシステム、ナビゲーション装置、グラス型デバイス及び装置間連携方法
JP7244649B2 (ja) 軌跡表示装置
JP6208977B2 (ja) 情報処理装置、通信端末およびデータ取得方法
JP2016177565A (ja) 通信制御装置、通信制御方法及びプログラム
JP2021039567A (ja) 作業支援システム及びプログラム
JP6689492B2 (ja) 端末装置、データ処理システム及びプログラム
JP2014021802A (ja) 検索システム、検索サーバ及び携帯型端末用プログラム
JP6523362B2 (ja) サーバ装置、端末装置及びプログラム
JP2023026894A (ja) 情報処理装置、情報処理システム、及び情報処理プログラム
WO2015189974A1 (ja) 画像表示装置および画像表示プログラム

Legal Events

Date Code Title Description
TRDD Decision of grant or rejection written
R150 Certificate of patent or registration of utility model

Ref document number: 5266426

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

LAPS Cancellation because of no payment of annual fees