JP5757791B2 - 入力システム、頭部装着型表示装置、情報端末装置及びプログラム - Google Patents
入力システム、頭部装着型表示装置、情報端末装置及びプログラム Download PDFInfo
- Publication number
- JP5757791B2 JP5757791B2 JP2011125236A JP2011125236A JP5757791B2 JP 5757791 B2 JP5757791 B2 JP 5757791B2 JP 2011125236 A JP2011125236 A JP 2011125236A JP 2011125236 A JP2011125236 A JP 2011125236A JP 5757791 B2 JP5757791 B2 JP 5757791B2
- Authority
- JP
- Japan
- Prior art keywords
- information
- sensor
- head
- terminal device
- mounted display
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Landscapes
- Position Input By Displaying (AREA)
Description
まず本実施形態の手法について説明する。近年、表示装置として用いられている頭部装着型表示装置(HMD、Head Mounted Display)は、頭部に装着するという特性上、大きさ等に制限が加わり、結果として簡素な構成の操作部しか持てないことが多い。そのため、操作のためのインターフェースが充実しておらず、複雑な操作が難しいという問題がある。
水平方向での頭部の動きに対応したメニュー項目選択処理について説明する。具体的には、システム構成例を説明した後、頭部装着型表示装置の表示部に表示される画面の例について説明し、最後にフローチャートを用いて処理の詳細について説明する。
図1に本実施形態に係る入力システムを含む頭部装着型表示装置100及び情報端末装置200の構成例を示す。図1に示したように、頭部装着型表示装置100は、表示部110と、操作部120と、頭部方向検出部130と、通信部140とを含む。また、情報端末装置200は、端末方向検出部210と、記憶部220と、処理部230と、通信部240とを含む。
図2に、本実施形態で用いられる選択メニュー画面の例を示す。選択メニュー画面は、ユーザに項目の選択を促すために、頭部装着型表示装置100の表示部110に表示されるものである。例えば図2に示したように、選択項目を囲う枠線の太さ等により、現在選択されている項目を判別可能にする。
次に、処理の詳細について図3のフローチャートを用いて説明する。この処理が開始されると、まず記憶部220に基準値情報が記憶されているかの判定が行われる(S101)。基準値情報が記憶されていない場合には、頭部方向検出部130及び端末方向検出部210から現在の方向情報の値を取得して、基準値情報として記憶部220の記憶する(S102)。そして処理部230は、基準値情報、現在の頭部の方向情報及び現在の端末の方向情報から選択メニュー画面の選択項目のうちどの項目を選択するかを求め、求めた項目を選択したメニュー画面を表示部110に表示させる処理を行う(S103)。
鉛直方向での頭部の動きに対応したメニュー項目選択処理について説明する。具体的には、システム構成例を説明した後、頭部装着型表示装置の表示部に表示される画面の例について説明し、最後にフローチャートを用いて処理の詳細について説明する。
本実施形態に係る入力システムを含む頭部装着型表示装置100及び情報端末装置200の構成例は図1に示したとおりであり、第1の実施形態と同様であるため詳細な説明は省略する。
図5に、本実施形態で用いられる選択メニュー画面の例を示す。図5に示したように鉛直方向(上下方向)に選択項目が配置され、ユーザの上下方向での頭部の動きにより項目を選択する点以外は、図2を用いて上述した第1の実施形態と同様である。
本実施形態の処理の詳細を図6のフローチャートに示す。S201〜S210は第1の実施形態のS101〜S110に対応し、項目の選択が頭部の上下方向の動きにより行われ(S205,S206)、選択項目の確定処理が頭部の右方向の動きによって行われる(S209)点が異なるのみである。
130 頭部方向検出部、140 通信部、200 情報端末装置、
210 端末方向検出部、220 記憶部、230 処理部、240 通信部、
250 情報記憶媒体
Claims (17)
- 頭部装着型表示装置に設けられた第1のセンサからの第1のセンサ情報と、前記頭部装着型表示装置と通信接続を行う情報端末装置に設けられた第2のセンサからの第2のセンサ情報を取得するセンサ情報取得部と、
前記第1のセンサ情報及び前記第2のセンサ情報の基準値に関する情報である基準値情報を記憶する記憶部と、
前記基準値情報、前記第1のセンサ情報及び前記第2のセンサ情報に基づいて、前記頭部装着型表示装置の方向情報である第1の方向情報及び前記情報端末装置の方向情報である第2の方向情報を取得し、取得した前記第1の方向情報及び前記第2の方向情報に基づいてユーザの入力情報を求める処理部と、
を含むことを特徴とする入力システム。 - 請求項1において、
前記記憶部は、
前記処理部により初期化タイミングであると判定された際に前記センサ情報取得部により取得された前記第1のセンサ情報及び前記第2のセンサ情報を、前記基準値情報として記憶することを特徴とする入力システム。 - 請求項2において、
前記処理部は、
前記記憶部に前記基準値情報が記憶された第1のタイミングでの前記情報端末装置の状態である第1の状態での第1の状態情報と、今回の判定タイミングである第2のタイミングでの前記情報端末装置の状態である第2の状態での第2の状態情報との比較処理を行い、前記比較処理により前記情報端末装置の状態が変化したと判定された場合に、前記第2のタイミングを前記初期化タイミングであると判定することを特徴とする入力システム。 - 請求項3において、
前記処理部は、
前記情報端末装置に設けられた加速度センサにより、前記第1の状態情報として、前記第1のタイミングでの重力方向に対する前記情報端末装置の傾きに関する情報である第1の傾き情報を取得するとともに、前記第2の状態情報として、前記第2のタイミングでの前記重力方向に対する前記情報端末装置の傾きに関する情報である第2の傾き情報を取得し、前記第1の傾き情報と前記第2の傾き情報の比較処理を行い、前記比較処理により前記情報端末装置の状態が変化したと判定された場合に、前記第2のタイミングを前記初期化タイミングであると判定することを特徴とする入力システム。 - 請求項4において、
前記処理部は、
前記情報端末装置を構成する第1〜第N(Nは2以上の整数)の面のうち第i(iは1≦i≦Nの整数)の面が基準方向に向いていると、前記第1の傾き情報に基づき判定され、且つ、前記第1〜第Nの面のうち第j(jは1≦j≦N、i≠jの整数)の面が前記基準方向に向いていると、前記第2の傾き情報に基づき判定された場合に、前記情報端末装置の状態が変化したと判定し、前記第2のタイミングを前記初期化タイミングであると判定することを特徴とする入力システム。 - 請求項2において、
前記処理部は、
前記ユーザにより初期化操作が行われたタイミングを前記初期化タイミングと判定することを特徴とする入力システム。 - 請求項1乃至6のいずれかにおいて、
前記頭部装着型表示装置は、
第1の方向に沿って、複数のアイコンが並んで表示される選択メニュー画面を表示する表示部を含み、
前記処理部は、
前記第1の方向に沿った方向における、前記第2の方向情報に対する前記第1の方向情報の変化量が所与の閾値よりも大きいと判断された場合に、前記選択メニュー画面において選択されるアイコンを、前記複数のアイコンのうちの他のアイコンに変更する処理を行うことを特徴とする入力システム。 - 請求項7において、
前記処理部は、
前記第1の方向とは異なる第2の方向における、前記第2の方向情報に対する前記第1の方向情報の変化量が所与の閾値よりも大きいと判断された場合に、選択されているアイコンの確定処理を行うことを特徴とする入力システム。 - 請求項1乃至6のいずれかにおいて、
前記第1のセンサは前記頭部装着型表示装置に設けられた第1の方位センサであり、前記第2のセンサは前記情報端末装置に設けられた第2の方位センサであって、
前記センサ情報取得部は、
第1のセンサ情報として前記頭部装着型表示装置の方位情報である第1の方位情報を取得するとともに、前記第2のセンサ情報として前記情報端末装置の方位情報である第2の方位情報を取得し、
前記処理部は、
前記第1の方位情報と前記第2の方位情報との差分を表す情報である方位差情報に基づいて、前記入力情報を求めることを特徴とする入力システム。 - 請求項9において、
前記頭部装着型表示装置は、
水平方向に沿って、複数のアイコンが並んで表示される選択メニュー画面を表示する表示部を含み、
前記処理部は、
前記水平方向に沿った方向における、前記方位差情報により表される方位差が所与の閾値よりも大きいと判断された場合に、前記選択メニュー画面において選択されるアイコンを、前記複数のアイコンのうちの他のアイコンに変更する処理を行うことを特徴とする入力システム。 - 請求項10において、
前記処理部は、
前記頭部装着型表示装置の仰角情報と前記情報端末装置の仰角情報との差分を表す情報を、仰角差情報とした場合に、鉛直方向における、前記仰角差情報により表される仰角差が所与の閾値よりも大きいと判断された場合に、選択されているアイコンの確定処理を行うことを特徴とする入力システム。 - 請求項1乃至6のいずれかにおいて、
前記第1のセンサは前記頭部装着型表示装置に設けられた第1の仰角センサであり、前記第2のセンサは前記情報端末装置に設けられた第2の仰角センサであって、
前記センサ情報取得部は、
第1のセンサ情報として前記頭部装着型表示装置の仰角情報である第1の仰角情報を取得するとともに、前記第2のセンサ情報として前記情報端末装置の仰角情報である第2の仰角情報を取得し、
前記処理部は、
前記第1の仰角情報と前記第2の仰角情報との差分を表す情報である仰角差情報に基づいて、前記入力情報を求めることを特徴とする入力システム。 - 請求項12において、
前記頭部装着型表示装置は、
鉛直方向に沿って、複数のアイコンが並んで表示される選択メニュー画面を表示する表示部を含み、
前記処理部は、
前記鉛直方向に沿った方向における、前記仰角差情報により表される仰角差が所与の閾値よりも大きいと判断された場合に、前記選択メニュー画面において選択されるアイコンを、前記複数のアイコンのうちの他のアイコンに変更する処理を行うことを特徴とする入力システム。 - 請求項13において、
前記処理部は、
前記頭部装着型表示装置の方位情報と前記情報端末装置の方位情報との差分を表す情報を、方位差情報とした場合に、水平方向における、前記方位差情報により表される方位差が所与の閾値よりも大きいと判断された場合に、選択されているアイコンの確定処理を行うことを特徴とする入力システム。 - 請求項1乃至14のいずれかに記載の入力システムを含むことを特徴とする頭部装着型表示装置。
- 請求項1乃至14のいずれかに記載の入力システムを含むことを特徴とする情報端末装置。
- 頭部装着型表示装置に設けられた第1のセンサからの第1のセンサ情報と、前記頭部装着型表示装置と通信接続を行う情報端末装置に設けられた第2のセンサからの第2のセンサ情報を取得するセンサ情報取得部と、
前記第1のセンサ情報及び前記第2のセンサ情報の基準値に関する情報である基準値情報を記憶する記憶部と、
前記基準値情報、前記第1のセンサ情報及び前記第2のセンサ情報に基づいて、前記頭部装着型表示装置の方向情報である第1の方向情報及び前記情報端末装置の方向情報である第2の方向情報を取得し、取得した前記第1の方向情報及び前記第2の方向情報に基づいてユーザの入力情報を求める処理部として、
コンピュータを機能させることを特徴とするプログラム。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2011125236A JP5757791B2 (ja) | 2011-06-03 | 2011-06-03 | 入力システム、頭部装着型表示装置、情報端末装置及びプログラム |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2011125236A JP5757791B2 (ja) | 2011-06-03 | 2011-06-03 | 入力システム、頭部装着型表示装置、情報端末装置及びプログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2012252568A JP2012252568A (ja) | 2012-12-20 |
JP5757791B2 true JP5757791B2 (ja) | 2015-07-29 |
Family
ID=47525311
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2011125236A Active JP5757791B2 (ja) | 2011-06-03 | 2011-06-03 | 入力システム、頭部装着型表示装置、情報端末装置及びプログラム |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP5757791B2 (ja) |
Families Citing this family (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
EP2998849A4 (en) * | 2013-05-15 | 2017-01-25 | Sony Corporation | Display control device, display control method, and recording medium |
JP6366240B2 (ja) * | 2013-08-21 | 2018-08-01 | 株式会社Where | 頭部装着型画像表示装置、検出方法、検出プログラム、および、画像表示システム |
JP6316965B2 (ja) * | 2013-12-03 | 2018-04-25 | ノキア テクノロジーズ オーユー | ヘッドマウントディスプレイへの情報の表示 |
JP6197702B2 (ja) * | 2014-03-10 | 2017-09-20 | 富士通株式会社 | 入力方法,プログラム及び入力装置 |
JP7414590B2 (ja) | 2020-03-04 | 2024-01-16 | ソニー・オリンパスメディカルソリューションズ株式会社 | 制御装置および医療用観察システム |
Family Cites Families (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP3403361B2 (ja) * | 1999-09-30 | 2003-05-06 | 川崎重工業株式会社 | ヘッド・マウント・ディスプレイ装置 |
JP2002296028A (ja) * | 2001-04-02 | 2002-10-09 | Japan Aviation Electronics Industry Ltd | 移動体用ヘッドトラッキング装置 |
-
2011
- 2011-06-03 JP JP2011125236A patent/JP5757791B2/ja active Active
Also Published As
Publication number | Publication date |
---|---|
JP2012252568A (ja) | 2012-12-20 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US10330940B1 (en) | Content display methods | |
CN107407964B (zh) | 存储有用于在沉浸型虚拟空间控制目标操作的计算机程序的存储器以及计算机*** | |
EP3042275B1 (en) | Tilting to scroll | |
US8643951B1 (en) | Graphical menu and interaction therewith through a viewing window | |
US9986086B2 (en) | Mobile terminal and method of operating the same | |
JP6121647B2 (ja) | 情報処理装置、情報処理方法およびプログラム | |
US9311883B2 (en) | Recalibration of a flexible mixed reality device | |
JP5790692B2 (ja) | 情報処理装置、情報処理方法および記録媒体 | |
US20160292922A1 (en) | Display control device, display control method, and recording medium | |
JP6547741B2 (ja) | 情報処理システムおよび情報処理方法 | |
JP5757791B2 (ja) | 入力システム、頭部装着型表示装置、情報端末装置及びプログラム | |
KR20170057326A (ko) | 개량된 디스플레이 회전 | |
JP6308214B2 (ja) | 表示制御装置、表示制御方法および記録媒体 | |
EP3042276B1 (en) | Tilting to scroll | |
US20120054690A1 (en) | Apparatus and method for displaying three-dimensional (3d) object | |
KR20140043384A (ko) | 관점 오브젝트 선택 | |
JP6110893B2 (ja) | 仮想空間位置指定方法、プログラム、プログラムを記録した記録媒体、および、装置 | |
US20130286049A1 (en) | Automatic adjustment of display image using face detection | |
JP5964495B2 (ja) | 方向検知コンピューティングデバイス | |
CN111971639A (zh) | 感测计算设备部分的相对定向 | |
JP6197702B2 (ja) | 入力方法,プログラム及び入力装置 | |
CN107209555B (zh) | 具有俯仰角放大的基于头部的定标 | |
JP6366240B2 (ja) | 頭部装着型画像表示装置、検出方法、検出プログラム、および、画像表示システム | |
US20110227945A1 (en) | Information processing device, information processing method, and program | |
JP2018163558A (ja) | 情報処理装置、情報処理方法およびプログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20140509 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20150218 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20150324 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20150424 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20150519 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20150602 |
|
R151 | Written notification of patent or utility model registration |
Ref document number: 5757791 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |
|
S531 | Written request for registration of change of domicile |
Free format text: JAPANESE INTERMEDIATE CODE: R313531 |
|
R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |