JP7498330B2 - 仮想オブジェクト操作方法およびヘッドマウントディスプレイ - Google Patents
仮想オブジェクト操作方法およびヘッドマウントディスプレイ Download PDFInfo
- Publication number
- JP7498330B2 JP7498330B2 JP2023046344A JP2023046344A JP7498330B2 JP 7498330 B2 JP7498330 B2 JP 7498330B2 JP 2023046344 A JP2023046344 A JP 2023046344A JP 2023046344 A JP2023046344 A JP 2023046344A JP 7498330 B2 JP7498330 B2 JP 7498330B2
- Authority
- JP
- Japan
- Prior art keywords
- virtual object
- unit
- external display
- home position
- mounted display
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims description 46
- 238000004891 communication Methods 0.000 claims description 11
- 238000012790 confirmation Methods 0.000 claims description 3
- 238000003384 imaging method Methods 0.000 description 65
- 238000001514 detection method Methods 0.000 description 56
- 238000010586 diagram Methods 0.000 description 38
- 230000000007 visual effect Effects 0.000 description 20
- 238000012545 processing Methods 0.000 description 17
- 230000004044 response Effects 0.000 description 12
- 230000006870 function Effects 0.000 description 8
- 210000000887 face Anatomy 0.000 description 6
- 230000001133 acceleration Effects 0.000 description 5
- 238000005516 engineering process Methods 0.000 description 4
- 230000005057 finger movement Effects 0.000 description 4
- 230000010365 information processing Effects 0.000 description 3
- 230000005236 sound signal Effects 0.000 description 3
- 210000003128 head Anatomy 0.000 description 2
- 238000010191 image analysis Methods 0.000 description 2
- 230000007704 transition Effects 0.000 description 2
- 238000004458 analytical method Methods 0.000 description 1
- 238000012937 correction Methods 0.000 description 1
- 230000002093 peripheral effect Effects 0.000 description 1
Landscapes
- User Interface Of Digital Computer (AREA)
- Digital Computer Display Output (AREA)
- Controls And Circuits For Display Device (AREA)
Description
続いて、図5を用いてホームポジションの設定方法を説明する。図5は、ホームポジションの設定方法を説明する図である。前提として、操作入力部120が受け付けた操作に基づいて、ホームポジションの設定モードとなっているものとする。
続いて、図12~図17を用いて、ヘッドマウントディスプレイ100が表示しているアプリケーションをホームポジションへ移動させる方法について説明する。
続いて、ホームポジションARの位置にモニタがある場合に、当該モニタをホームポジションARとするようにリンクする例を説明する。まず、ホームポジションARを設定する例を説明する。図19(a)は、ユーザ1が椅子602に座った状態を示す図である。ヘッドマウントディスプレイ100を装着したユーザ1は、椅子602に着席した状態で、操作入力部120を操作し、これに応じてホームポジションARを設定する。図19(b)は、上記の状態における、ヘッドマウントディスプレイ100の透過表示部131に表示される画像の例を示す図である。図19(b)に示すように、アプリ制御部77は、透過表示部131にホームポジションARを表示する。
(付記1)
アプリケーションを記憶するヘッドマウントディスプレイであって、
前記ヘッドマウントディスプレイを装着したユーザの部位を撮像する撮像部と、
前記撮像部により撮像された画像に基づいて、前記ユーザが示す位置を検出する検出部と、
前記ヘッドマウントディスプレイの位置および方向を特定する位置特定部と、
前記検出部により検出された結果と、前記位置特定部により特定された位置および方向とに基づいて、前記アプリケーションを操作する領域である操作領域に関する情報を設定する設定部と、
を備える、
ヘッドマウントディスプレイ。
アプリケーションを記憶するヘッドマウントディスプレイで実行する設定方法であって、
ユーザの部位を撮像する撮像ステップと、
前記撮像ステップで撮像した画像に基づいて、前記ヘッドマウントディスプレイを装着したユーザが示す位置を検出する検出ステップと、
前記ヘッドマウントディスプレイの位置および方向を特定する位置特定ステップと、
前記検出ステップで検出した結果と、前記位置特定ステップで特定した位置および方向とに基づいて、前記アプリケーションを操作する領域である操作領域に関する情報を設定する設定ステップと、を含む、
設定方法。
Claims (6)
- 仮想空間の任意の位置に配置された仮想オブジェクトを視認可能なヘッドマウントディスプレイで実行する仮想オブジェクト操作方法であって、
前記仮想空間または前記仮想オブジェクトを操作するための操作入力を受け付ける操作受付ステップと、
前記操作受付ステップにおいて外部ディスプレイ連携操作を受け付けた場合に、実空間にある外部ディスプレイ装置を、前記仮想オブジェクトを操作するための操作領域として設定する外部ディスプレイ連携ステップと、
前記操作受付ステップにおいて仮想オブジェクト選択操作を受け付けた場合に、前記仮想空間の任意の位置に配置された仮想オブジェクトから所定の仮想オブジェクトを選択する仮想オブジェクト選択ステップと、
前記操作受付ステップにおいて仮想オブジェクト編集要求操作を受け付けた場合に、前記仮想オブジェクト選択ステップで選択された前記所定の仮想オブジェクトを前記外部ディスプレイ装置に表示させるための情報を、前記外部ディスプレイ連携ステップで連携させた前記外部ディスプレイ装置に出力する仮想オブジェクト出力ステップと、
を含む、
仮想オブジェクト操作方法。 - 請求項1に記載の仮想オブジェクト操作方法であって、
前記操作受付ステップにおいて操作領域設定操作を受け付けた場合に、前記操作領域設定操作で指定される仮想空間の所定の位置に対応する実空間の位置に前記外部ディスプレイ装置があるか否かを確認する外部ディスプレイ確認ステップを更に備え、
前記外部ディスプレイ連携ステップにおいては、前記外部ディスプレイ確認ステップにおいて前記外部ディスプレイ装置があることが確認された場合に、前記外部ディスプレイ装置を、前記仮想オブジェクトを操作するための操作領域として設定する、
仮想オブジェクト操作方法。 - 請求項1に記載の仮想オブジェクト操作方法であって、
前記操作受付ステップにおいて仮想オブジェクト編集終了操作を受け付けた場合に、前記外部ディスプレイ連携ステップで連携させた前記外部ディスプレイ装置への、前記仮想オブジェクト選択ステップで選択された前記所定の仮想オブジェクトを前記外部ディスプレイ装置に表示させるための情報の出力を終了する仮想オブジェクト出力終了ステップ、
を更に含む、
仮想オブジェクト操作方法。 - 仮想空間の任意の位置に配置された仮想オブジェクトを視認可能なヘッドマウントディスプレイであって、
前記仮想空間または前記仮想オブジェクトを操作するための操作入力を受け付ける操作受付部と、
外部とのデータ送受信を行う通信部と、
制御部と、
を備え、
前記制御部は、
前記操作受付部が外部ディスプレイ連携操作を受け付けた場合に、実空間にある外部ディスプレイ装置を、前記仮想オブジェクトを操作するための操作領域として設定し、
前記操作受付部が仮想オブジェクト選択操作を受け付けた場合に、前記仮想空間の任意の位置に配置された仮想オブジェクトから所定の仮想オブジェクトを選択し、
前記操作受付部が仮想オブジェクト編集要求操作を受け付けた場合に、前記選択された前記所定の仮想オブジェクトを前記外部ディスプレイ装置に表示させるための情報を、前記連携させた前記外部ディスプレイ装置に前記通信部を介して出力する、
ヘッドマウントディスプレイ。 - 請求項4に記載のヘッドマウントディスプレイであって、
前記制御部は、更に、
前記操作受付部が操作領域設定操作を受け付けた場合に、前記操作領域設定操作で指定される仮想空間の所定の位置に対応する実空間の位置に外部ディスプレイ装置があるか否かを確認し、
前記外部ディスプレイ装置があることが確認された場合に、前記外部ディスプレイ装置を、前記仮想オブジェクトを操作するための操作領域として設定する、
ヘッドマウントディスプレイ。 - 請求項4に記載のヘッドマウントディスプレイであって、
前記制御部は、更に、前記操作受付部が仮想オブジェクト編集終了操作を受け付けた場合に、連携させた前記外部ディスプレイ装置への、前記選択された前記所定の仮想オブジェクトを前記外部ディスプレイ装置に表示させるための情報の前記通信部を介した出力を終了する、
ヘッドマウントディスプレイ。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2023046344A JP7498330B2 (ja) | 2018-07-04 | 2023-03-23 | 仮想オブジェクト操作方法およびヘッドマウントディスプレイ |
Applications Claiming Priority (4)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2020528598A JP7077405B2 (ja) | 2018-07-04 | 2018-07-04 | ヘッドマウントディスプレイおよび設定方法 |
PCT/JP2018/025354 WO2020008559A1 (ja) | 2018-07-04 | 2018-07-04 | ヘッドマウントディスプレイおよび設定方法 |
JP2022081421A JP7252398B2 (ja) | 2018-07-04 | 2022-05-18 | 仮想オブジェクト操作方法およびヘッドマウントディスプレイ |
JP2023046344A JP7498330B2 (ja) | 2018-07-04 | 2023-03-23 | 仮想オブジェクト操作方法およびヘッドマウントディスプレイ |
Related Parent Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2022081421A Division JP7252398B2 (ja) | 2018-07-04 | 2022-05-18 | 仮想オブジェクト操作方法およびヘッドマウントディスプレイ |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2023075353A JP2023075353A (ja) | 2023-05-30 |
JP7498330B2 true JP7498330B2 (ja) | 2024-06-11 |
Family
ID=87888388
Family Applications (2)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2022081421A Active JP7252398B2 (ja) | 2018-07-04 | 2022-05-18 | 仮想オブジェクト操作方法およびヘッドマウントディスプレイ |
JP2023046344A Active JP7498330B2 (ja) | 2018-07-04 | 2023-03-23 | 仮想オブジェクト操作方法およびヘッドマウントディスプレイ |
Family Applications Before (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2022081421A Active JP7252398B2 (ja) | 2018-07-04 | 2022-05-18 | 仮想オブジェクト操作方法およびヘッドマウントディスプレイ |
Country Status (1)
Country | Link |
---|---|
JP (2) | JP7252398B2 (ja) |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP7252398B2 (ja) * | 2018-07-04 | 2023-04-04 | マクセル株式会社 | 仮想オブジェクト操作方法およびヘッドマウントディスプレイ |
Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2006267604A (ja) | 2005-03-24 | 2006-10-05 | Canon Inc | 複合情報表示装置 |
JP2012173476A (ja) | 2011-02-21 | 2012-09-10 | Nec Casio Mobile Communications Ltd | 表示システム、端末装置、端末装置の制御方法、および、プログラム |
WO2014002242A1 (ja) | 2012-06-29 | 2014-01-03 | 日立コンシューマエレクトロニクス株式会社 | 画像表示システム、情報端末、情報端末の制御方法及び制御プログラム |
US20160037573A1 (en) | 2014-07-29 | 2016-02-04 | Samsung Electronics Co., Ltd. | Mobile device and method of pairing the same with electronic device |
WO2016199699A1 (ja) | 2015-06-12 | 2016-12-15 | 株式会社ソニー・インタラクティブエンタテインメント | 制御装置、制御方法及びプログラム |
JP2018101019A (ja) | 2016-12-19 | 2018-06-28 | セイコーエプソン株式会社 | 表示装置及び表示装置の制御方法 |
JP2022113692A (ja) | 2018-07-04 | 2022-08-04 | マクセル株式会社 | 仮想オブジェクト操作方法およびヘッドマウントディスプレイ |
Family Cites Families (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US10001645B2 (en) | 2014-01-17 | 2018-06-19 | Sony Interactive Entertainment America Llc | Using a second screen as a private tracking heads-up display |
KR102400900B1 (ko) | 2015-10-26 | 2022-05-23 | 엘지전자 주식회사 | 시스템 |
JP2017187757A (ja) | 2016-03-30 | 2017-10-12 | TsZ株式会社 | 画像表示装置 |
WO2018017993A1 (en) | 2016-07-22 | 2018-01-25 | Google Llc | Detecting user range of motion for virtual reality user interfaces |
JP2022081421A (ja) * | 2020-11-19 | 2022-05-31 | 昭和電工マテリアルズ株式会社 | 亜鉛電池用負極体及び亜鉛電池 |
-
2022
- 2022-05-18 JP JP2022081421A patent/JP7252398B2/ja active Active
-
2023
- 2023-03-23 JP JP2023046344A patent/JP7498330B2/ja active Active
Patent Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2006267604A (ja) | 2005-03-24 | 2006-10-05 | Canon Inc | 複合情報表示装置 |
JP2012173476A (ja) | 2011-02-21 | 2012-09-10 | Nec Casio Mobile Communications Ltd | 表示システム、端末装置、端末装置の制御方法、および、プログラム |
WO2014002242A1 (ja) | 2012-06-29 | 2014-01-03 | 日立コンシューマエレクトロニクス株式会社 | 画像表示システム、情報端末、情報端末の制御方法及び制御プログラム |
US20160037573A1 (en) | 2014-07-29 | 2016-02-04 | Samsung Electronics Co., Ltd. | Mobile device and method of pairing the same with electronic device |
WO2016199699A1 (ja) | 2015-06-12 | 2016-12-15 | 株式会社ソニー・インタラクティブエンタテインメント | 制御装置、制御方法及びプログラム |
JP2018101019A (ja) | 2016-12-19 | 2018-06-28 | セイコーエプソン株式会社 | 表示装置及び表示装置の制御方法 |
JP2022113692A (ja) | 2018-07-04 | 2022-08-04 | マクセル株式会社 | 仮想オブジェクト操作方法およびヘッドマウントディスプレイ |
Also Published As
Publication number | Publication date |
---|---|
JP7252398B2 (ja) | 2023-04-04 |
JP2022113692A (ja) | 2022-08-04 |
JP2023075353A (ja) | 2023-05-30 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US9378592B2 (en) | Apparatus and method of providing user interface on head mounted display and head mounted display thereof | |
US9323343B2 (en) | Information processing method and information processing apparatus | |
CN106066537B (zh) | 头戴式显示器和头戴式显示器的控制方法 | |
KR101430614B1 (ko) | 웨어러블 안경을 이용한 디스플레이 장치 및 그 동작 방법 | |
US11367260B2 (en) | Video synthesis device, video synthesis method and recording medium | |
KR20150054825A (ko) | 헤드 마운트 디스플레이를 위한 사용자 인터페이스 제공 장치 및 방법 | |
US11625858B2 (en) | Video synthesis device, video synthesis method and recording medium | |
JP7498330B2 (ja) | 仮想オブジェクト操作方法およびヘッドマウントディスプレイ | |
US10929083B2 (en) | Resource sharing device and control method thereof | |
US20220291744A1 (en) | Display processing device, display processing method, and recording medium | |
KR101878144B1 (ko) | 헤드 마운트 디스플레이를 위한 사용자 인터페이스 제공 장치 및 방법 | |
WO2017085974A1 (ja) | 情報処理装置 | |
US20240054975A1 (en) | Head mounted display and setting method | |
US10437415B2 (en) | System, method, and device for controlling a display | |
JP2015005823A (ja) | 画像処理装置およびデジタルミラーシステム | |
US20200241633A1 (en) | Display device and display device control method | |
WO2020166140A1 (ja) | ウェアラブルユーザインタフェース制御システム、それを用いた情報処理システム、および、制御プログラム | |
JP6308842B2 (ja) | 表示システム及びプログラム | |
JP6873186B2 (ja) | 情報処理装置、スイッチングシステム、プログラム及び方法 | |
JP6982656B2 (ja) | 眼で操作するアイポインティングシステム | |
JP6779715B2 (ja) | 情報処理システム | |
WO2021131862A1 (ja) | 情報処理装置、方法及びプログラム | |
JP2017151672A (ja) | 眼で操作するポインティングデバイス、および、それを利用した測定システム | |
WO2020110283A1 (ja) | 表示装置 | |
JP4019643B2 (ja) | カーソルを用いた映像選択制御装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20230323 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20231026 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20231128 |
|
A601 | Written request for extension of time |
Free format text: JAPANESE INTERMEDIATE CODE: A601 Effective date: 20240129 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20240327 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20240507 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20240530 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7498330 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |