JP6505556B2 - 情報処理装置および画像生成方法 - Google Patents
情報処理装置および画像生成方法 Download PDFInfo
- Publication number
- JP6505556B2 JP6505556B2 JP2015176034A JP2015176034A JP6505556B2 JP 6505556 B2 JP6505556 B2 JP 6505556B2 JP 2015176034 A JP2015176034 A JP 2015176034A JP 2015176034 A JP2015176034 A JP 2015176034A JP 6505556 B2 JP6505556 B2 JP 6505556B2
- Authority
- JP
- Japan
- Prior art keywords
- image
- angle
- information element
- display
- user
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
- G02B27/017—Head mounted
- G02B27/0172—Head mounted characterised by optical features
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
- G02B27/017—Head mounted
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
- G06F3/012—Head tracking input arrangements
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
- G06F3/04815—Interaction with a metaphor-based environment or interaction object displayed as three-dimensional, e.g. changing the user viewpoint with respect to the environment or object
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
- G06F3/0485—Scrolling or panning
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T19/00—Manipulating 3D models or images for computer graphics
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/64—Constructional details of receivers, e.g. cabinets or dust covers
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
- G02B27/0101—Head-up displays characterised by optical features
- G02B2027/0138—Head-up displays characterised by optical features comprising image capture systems, e.g. camera
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
- G02B27/0101—Head-up displays characterised by optical features
- G02B2027/014—Head-up displays characterised by optical features comprising information/image processing systems
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
- G02B27/0179—Display position adjusting means not related to the information to be displayed
- G02B2027/0187—Display position adjusting means not related to the information to be displayed slaved to motion of at least a part of the body of the user, e.g. head, eye
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/02—Viewing or reading apparatus
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Human Computer Interaction (AREA)
- Computer Hardware Design (AREA)
- Optics & Photonics (AREA)
- Software Systems (AREA)
- Computer Graphics (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Controls And Circuits For Display Device (AREA)
- User Interface Of Digital Computer (AREA)
- Processing Or Creating Images (AREA)
Description
ユーザは入力装置6の所定の入力部を操作することで、メニュー項目を表示パネル130に表示させることができる。たとえば△ボタン75(図10(a)参照)がメニュー表示操作に割り当てられてよい。ユーザが△ボタン75を押下すると、入力装置6は、△ボタン75が押下されたことを示す操作情報を情報処理装置10に送信する。情報処理装置10において指示取得部24は、△ボタン75の押下情報を、メニュー項目の表示指示として取得する。
図14は、情報要素であるメニューウィンドウ204がパノラマ画像とともに動く様子を示す。ユーザが水平方向に首を左回りに回すと、動き検出部30が、HMD100の姿勢を検出し、視線方向決定部32が、検出されたHMD100の姿勢に応じて、視線方向を左回転させる。図14(a)は、初期表示状態から、22.5度左回転した表示画像200dを示す。なお既述したように、22.5度の回転は左アナログスティック77bの操作によっても実現され、ユーザが首を動かすことなく、左アナログスティック77bを左に倒すことで、表示画像200dが表示パネル130に表示されてもよい。
Claims (7)
- ユーザの頭部に装着されたヘッドマウントディスプレイの姿勢を検出する検出部と、
前記検出部により検出されたヘッドマウントディスプレイの姿勢に応じて画像を生成する画像生成部と、
生成した画像をヘッドマウントディスプレイに提供する画像提供部と、を備え、
前記画像生成部は、生成する画像に、情報要素を含めるものであって、
情報要素を含む画像を表示画面に表示中にヘッドマウントディスプレイの姿勢が変化した場合、前記画像生成部は、姿勢の変化量が所定の第1角度よりも小さければ、画像とともに動くように情報要素を表示させ、姿勢の変化量が所定の第1角度に達すると、情報要素を、画像中で、第1角度よりも大きい第2角度分動かした位置に表示させるものであって、第1角度は、情報要素の全てが表示画面から完全に外れることのない角度に設定される、
ことを特徴とする情報処理装置。 - 前記検出部により検出されたヘッドマウントディスプレイの姿勢に応じて、視線方向を定める視線方向決定部を、さらに備え、
前記画像生成部は、定めた視線方向にもとづく画像を生成するものであって、
前記画像生成部は、視線の所定方向の動きが第1角度よりも小さければ、画像とともに動くように情報要素を表示させ、視線の所定方向の動きが第1角度に達すると、情報要素を、画像中で所定方向に第2角度分動かした位置に表示させる、ことを特徴とする請求項1に記載の情報処理装置。 - 前記画像生成部は、水平方向の視線の回転角度に応じて、情報要素の表示制御を行うことを特徴とする請求項2に記載の情報処理装置。
- 第1角度は、ヘッドマウントディスプレイの視野角よりも小さい角度に設定されることを特徴とする請求項1から3のいずれかに記載の情報処理装置。
- 入力装置から視線方向の切替指示を取得する指示取得部を、さらに備え、
前記視線方向決定部は、前記指示取得部が視線方向の切替指示を取得すると、視線方向を所定角度変更する、
ことを特徴とする請求項2に記載の情報処理装置。 - ユーザの頭部に装着されたヘッドマウントディスプレイの姿勢を検出するステップと、
検出したヘッドマウントディスプレイの姿勢に応じて画像を生成するステップと、を有する画像生成方法であって、
画像生成ステップは、生成する画像に、情報要素を含めるものであって、
情報要素を含む画像を表示画面に表示中にヘッドマウントディスプレイの姿勢が変化した場合、画像生成ステップは、姿勢の変化量が所定の第1角度よりも小さければ、画像とともに動くように情報要素を表示させ、姿勢の変化量が所定の第1角度に達すると、情報要素を、画像中で、第1角度よりも大きい第2角度分動かした位置に表示させ、第1角度は、情報要素の全てが表示画面から完全に外れることのない角度である、
ことを特徴とする画像生成方法。 - コンピュータに、
ユーザの頭部に装着されたヘッドマウントディスプレイの姿勢を検出する機能と、
検出したヘッドマウントディスプレイの姿勢に応じて画像を生成する機能と、を実現させるためのプログラムであって、
画像生成機能は、生成する画像に、情報要素を含める機能を有し、
情報要素を含む画像を表示画面に表示中にヘッドマウントディスプレイの姿勢が変化した場合、画像生成機能は、姿勢の変化量が所定の第1角度よりも小さければ、画像とともに動くように情報要素を表示させ、姿勢の変化量が所定の第1角度に達すると、情報要素を、画像中で、第1角度よりも大きい第2角度分動かした位置に表示させる機能を含み、第1角度は、情報要素の全てが表示画面から完全に外れることのない角度である、
ことを特徴とするプログラム。
Priority Applications (4)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2015176034A JP6505556B2 (ja) | 2015-09-07 | 2015-09-07 | 情報処理装置および画像生成方法 |
EP16844260.6A EP3349107B1 (en) | 2015-09-07 | 2016-08-31 | Information processing device and image generation method |
PCT/JP2016/075552 WO2017043399A1 (ja) | 2015-09-07 | 2016-08-31 | 情報処理装置および画像生成方法 |
US15/755,615 US10627628B2 (en) | 2015-09-07 | 2016-08-31 | Information processing apparatus and image generating method |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2015176034A JP6505556B2 (ja) | 2015-09-07 | 2015-09-07 | 情報処理装置および画像生成方法 |
Publications (3)
Publication Number | Publication Date |
---|---|
JP2017054201A JP2017054201A (ja) | 2017-03-16 |
JP2017054201A5 JP2017054201A5 (ja) | 2017-10-26 |
JP6505556B2 true JP6505556B2 (ja) | 2019-04-24 |
Family
ID=58239610
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2015176034A Active JP6505556B2 (ja) | 2015-09-07 | 2015-09-07 | 情報処理装置および画像生成方法 |
Country Status (4)
Country | Link |
---|---|
US (1) | US10627628B2 (ja) |
EP (1) | EP3349107B1 (ja) |
JP (1) | JP6505556B2 (ja) |
WO (1) | WO2017043399A1 (ja) |
Families Citing this family (17)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP6346131B2 (ja) * | 2015-09-07 | 2018-06-20 | 株式会社ソニー・インタラクティブエンタテインメント | 情報処理装置および画像生成方法 |
CN105354820B (zh) * | 2015-09-30 | 2018-05-22 | 深圳多新哆技术有限责任公司 | 调整虚拟现实图像的方法及装置 |
JP2017107482A (ja) * | 2015-12-11 | 2017-06-15 | ソニー株式会社 | 情報処理装置、情報処理方法およびプログラム |
JP2018072604A (ja) | 2016-10-31 | 2018-05-10 | 株式会社コロプラ | Vr酔いを抑制するための方法、当該方法をコンピュータに実行させるためのプログラムおよび、情報処理装置 |
CN110402578B (zh) * | 2017-03-22 | 2022-05-03 | 索尼公司 | 图像处理装置、方法和记录介质 |
JP6330089B1 (ja) * | 2017-06-30 | 2018-05-23 | 株式会社コロプラ | 仮想空間を提供するためにコンピュータで実行されるプログラム、情報処理装置および仮想空間を提供するための方法 |
JP2019040555A (ja) | 2017-08-29 | 2019-03-14 | ソニー株式会社 | 情報処理装置、情報処理方法、およびプログラム |
CN107908278B (zh) | 2017-10-20 | 2020-04-28 | 华为技术有限公司 | 一种虚拟现实vr界面生成的方法和装置 |
TWI633465B (zh) | 2017-11-21 | 2018-08-21 | 瑞軒科技股份有限公司 | 虛擬實境裝置及虛擬實境裝置的操作方法 |
JP7073850B2 (ja) * | 2018-03-29 | 2022-05-24 | 株式会社リコー | 入力装置および入力装置の入力方法 |
US10520739B1 (en) * | 2018-07-11 | 2019-12-31 | Valve Corporation | Dynamic panel masking |
JP7267764B2 (ja) * | 2019-02-08 | 2023-05-02 | キヤノン株式会社 | 電子機器、電子機器の制御方法、プログラム、及び、記憶媒体 |
CN113115023B (zh) * | 2020-01-09 | 2022-09-27 | 百度在线网络技术(北京)有限公司 | 全景场景切换方法、装置及设备 |
CN113407084B (zh) | 2021-06-24 | 2022-05-17 | 杭州灵伴科技有限公司 | 展示内容更新方法、头戴式显示设备和计算机可读介质 |
CN117131225A (zh) * | 2022-05-19 | 2023-11-28 | 影石创新科技股份有限公司 | 视频处理方法、装置、电子设备及存储介质 |
JP2023177422A (ja) * | 2022-06-02 | 2023-12-14 | キヤノン株式会社 | 画像処理装置、画像処理方法及びプログラム |
JP2024003621A (ja) * | 2022-06-27 | 2024-01-15 | 川崎重工業株式会社 | 手術支援システムおよび手術支援システムの制御方法 |
Family Cites Families (12)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2001337645A (ja) * | 2000-05-26 | 2001-12-07 | Fujitsu Ltd | 表示システム及び記憶媒体 |
JP4927631B2 (ja) * | 2006-06-27 | 2012-05-09 | パナソニック株式会社 | 表示装置、その制御方法、プログラム、記録媒体および集積回路 |
JP4922106B2 (ja) * | 2007-08-30 | 2012-04-25 | オリンパスイメージング株式会社 | カメラ及びこれに適用されるパノラマ撮影ガイド表示方法,パノラマ撮影ガイド表示プログラム |
US20110267374A1 (en) * | 2009-02-05 | 2011-11-03 | Kotaro Sakata | Information display apparatus and information display method |
JP2011197736A (ja) * | 2010-03-17 | 2011-10-06 | Mitsubishi Electric Corp | 視界支援装置 |
US8619005B2 (en) * | 2010-09-09 | 2013-12-31 | Eastman Kodak Company | Switchable head-mounted display transition |
JP5996169B2 (ja) * | 2011-07-27 | 2016-09-21 | オリンパス株式会社 | 画像処理システム、情報処理装置及びプログラム |
JP6066037B2 (ja) | 2012-03-27 | 2017-01-25 | セイコーエプソン株式会社 | 頭部装着型表示装置 |
JP5825328B2 (ja) * | 2013-11-07 | 2015-12-02 | コニカミノルタ株式会社 | 透過型hmdを有する情報表示システム及び表示制御プログラム |
JP6353214B2 (ja) | 2013-11-11 | 2018-07-04 | 株式会社ソニー・インタラクティブエンタテインメント | 画像生成装置および画像生成方法 |
JP5884816B2 (ja) * | 2013-12-16 | 2016-03-15 | コニカミノルタ株式会社 | 透過型hmdを有する情報表示システム及び表示制御プログラム |
JP5876607B1 (ja) * | 2015-06-12 | 2016-03-02 | 株式会社コロプラ | フローティング・グラフィカルユーザインターフェース |
-
2015
- 2015-09-07 JP JP2015176034A patent/JP6505556B2/ja active Active
-
2016
- 2016-08-31 US US15/755,615 patent/US10627628B2/en active Active
- 2016-08-31 EP EP16844260.6A patent/EP3349107B1/en active Active
- 2016-08-31 WO PCT/JP2016/075552 patent/WO2017043399A1/ja unknown
Also Published As
Publication number | Publication date |
---|---|
EP3349107B1 (en) | 2020-10-21 |
US20190219824A1 (en) | 2019-07-18 |
WO2017043399A1 (ja) | 2017-03-16 |
JP2017054201A (ja) | 2017-03-16 |
EP3349107A4 (en) | 2019-04-10 |
US10627628B2 (en) | 2020-04-21 |
EP3349107A1 (en) | 2018-07-18 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6505556B2 (ja) | 情報処理装置および画像生成方法 | |
JP6346131B2 (ja) | 情報処理装置および画像生成方法 | |
JP6511386B2 (ja) | 情報処理装置および画像生成方法 | |
US10229541B2 (en) | Methods and systems for navigation within virtual reality space using head mounted display | |
EP3005029B1 (en) | Systems and methods for transitioning between transparent mode and non-transparent mode in a head mounted display | |
JP6668170B2 (ja) | 情報処理装置、情報処理方法、およびコンピュータプログラム | |
JP6518578B2 (ja) | 表示制御装置及び表示制御方法 | |
JP6257826B1 (ja) | 仮想空間を提供するためにコンピュータで実行される方法、プログラム、および、情報処理装置 | |
US10515481B2 (en) | Method for assisting movement in virtual space and system executing the method | |
JP6556295B2 (ja) | 情報処理装置および画像生成方法 | |
JP2019046291A (ja) | 情報処理装置および画像表示方法 | |
JP6529571B1 (ja) | 仮想空間を提供するためにコンピュータで実行されるプログラム、方法、およびプログラムを実行するための情報処理装置 | |
JP2022164728A (ja) | 情報処理装置および画像生成方法 | |
JP6518645B2 (ja) | 情報処理装置および画像生成方法 | |
JP6382928B2 (ja) | 仮想空間における画像の表示を制御するためにコンピュータによって実行される方法、当該方法をコンピュータに実現させるためのプログラム、および、コンピュータ装置 | |
JP2018170013A (ja) | 仮想空間における画像の表示を制御するためにコンピュータによって実行される方法、当該方法をコンピュータに実現させるためのプログラム、および、コンピュータ装置 | |
JP2018206340A (ja) | 仮想空間を提供するためにコンピュータで実行される方法、プログラム、および、情報処理装置 | |
WO2020261945A1 (ja) | プログラム、情報処理方法、及び情報処理装置 | |
JP6921204B2 (ja) | 情報処理装置および画像出力方法 | |
JP6711891B2 (ja) | 表示制御プログラム、表示制御装置、及び表示制御方法 | |
JP6318224B1 (ja) | ヘッドマウントデバイスを用いて仮想空間にコンテンツを表示するためにコンピュータで実行される方法、当該方法をコンピュータに実行させるプログラム、および、情報処理装置 | |
JP2019125397A (ja) | 表示制御装置及び表示制御方法 | |
JPWO2021059370A1 (ja) | アニメーション制作システム | |
JP2018098697A (ja) | コンテンツを提示するためにコンピュータで実行される方法、当該方法をコンピュータに実行させるプログラム、および、情報処理装置 | |
JP2018120521A (ja) | 仮想空間を提供するための方法、当該方法をコンピュータに実行させるためのプログラム、および当該プログラムを実行するための情報処理装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20170913 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20170913 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20180807 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20181003 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20190226 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20190327 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6505556 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |