JP7471497B2 - 画像表示システム、画像表示プログラム、表示制御装置、および画像表示方法 - Google Patents
画像表示システム、画像表示プログラム、表示制御装置、および画像表示方法 Download PDFInfo
- Publication number
- JP7471497B2 JP7471497B2 JP2023099844A JP2023099844A JP7471497B2 JP 7471497 B2 JP7471497 B2 JP 7471497B2 JP 2023099844 A JP2023099844 A JP 2023099844A JP 2023099844 A JP2023099844 A JP 2023099844A JP 7471497 B2 JP7471497 B2 JP 7471497B2
- Authority
- JP
- Japan
- Prior art keywords
- virtual camera
- rotation
- change
- virtual
- image display
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims description 66
- PWPJGUXAGUPAHP-UHFFFAOYSA-N lufenuron Chemical compound C1=C(Cl)C(OC(F)(F)C(C(F)(F)F)F)=CC(Cl)=C1NC(=O)NC(=O)C1=C(F)C=CC=C1F PWPJGUXAGUPAHP-UHFFFAOYSA-N 0.000 title 1
- 230000008859 change Effects 0.000 claims description 142
- 238000001514 detection method Methods 0.000 claims description 60
- 230000001186 cumulative effect Effects 0.000 claims description 37
- 238000003384 imaging method Methods 0.000 claims description 21
- 238000004364 calculation method Methods 0.000 claims description 10
- 230000004044 response Effects 0.000 claims description 6
- 238000013459 approach Methods 0.000 claims description 5
- 230000008569 process Effects 0.000 description 57
- 230000010365 information processing Effects 0.000 description 43
- 238000010586 diagram Methods 0.000 description 34
- 230000001133 acceleration Effects 0.000 description 6
- 238000005192 partition Methods 0.000 description 4
- 230000006870 function Effects 0.000 description 3
- 230000004048 modification Effects 0.000 description 3
- 238000012986 modification Methods 0.000 description 3
- 230000000694 effects Effects 0.000 description 2
- 210000000887 face Anatomy 0.000 description 2
- 230000006872 improvement Effects 0.000 description 2
- 230000009471 action Effects 0.000 description 1
- 230000005484 gravity Effects 0.000 description 1
- 210000003128 head Anatomy 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 206010025482 malaise Diseases 0.000 description 1
- 239000003550 marker Substances 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 238000004088 simulation Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
-
- A—HUMAN NECESSITIES
- A63—SPORTS; GAMES; AMUSEMENTS
- A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
- A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
- A63F13/50—Controlling the output signals based on the game progress
- A63F13/52—Controlling the output signals based on the game progress involving aspects of the displayed game scene
- A63F13/525—Changing parameters of virtual cameras
- A63F13/5258—Changing parameters of virtual cameras by dynamically adapting the position of the virtual camera to keep a game object or game character in its viewing frustum, e.g. for tracking a character or a ball
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
- G02B27/017—Head mounted
- G02B27/0172—Head mounted characterised by optical features
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
- G02B27/0179—Display position adjusting means not related to the information to be displayed
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
- G06F3/012—Head tracking input arrangements
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/017—Gesture based interaction, e.g. based on a set of recognized hand gestures
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
- G06F3/033—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
- G06F3/0346—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor with detection of the device orientation or free movement in a 3D space, e.g. 3D mice, 6-DOF [six degrees of freedom] pointers using gyroscopes, accelerometers or tilt-sensors
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T15/00—3D [Three Dimensional] image rendering
- G06T15/10—Geometric effects
- G06T15/20—Perspective computation
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T19/00—Manipulating 3D models or images for computer graphics
- G06T19/003—Navigation within 3D models or images
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T19/00—Manipulating 3D models or images for computer graphics
- G06T19/006—Mixed reality
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/70—Determining position or orientation of objects or cameras
- G06T7/73—Determining position or orientation of objects or cameras using feature-based methods
- G06T7/74—Determining position or orientation of objects or cameras using feature-based methods involving reference images or patches
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/30—Image reproducers
- H04N13/332—Displays for viewing with the aid of special glasses or head-mounted displays [HMD]
- H04N13/344—Displays for viewing with the aid of special glasses or head-mounted displays [HMD] with head-mounted left-right displays
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
- G02B27/0101—Head-up displays characterised by optical features
- G02B2027/0132—Head-up displays characterised by optical features comprising binocular systems
- G02B2027/0134—Head-up displays characterised by optical features comprising binocular systems of stereoscopic type
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
- G02B27/0101—Head-up displays characterised by optical features
- G02B2027/0132—Head-up displays characterised by optical features comprising binocular systems
- G02B2027/0136—Head-up displays characterised by optical features comprising binocular systems with a single image source for both eyes
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
- G02B27/0179—Display position adjusting means not related to the information to be displayed
- G02B2027/0187—Display position adjusting means not related to the information to be displayed slaved to motion of at least a part of the body of the user, e.g. head, eye
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/0093—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00 with means for monitoring data relating to the user, e.g. head-tracking, eye-tracking
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- General Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Human Computer Interaction (AREA)
- Optics & Photonics (AREA)
- Computer Graphics (AREA)
- Software Systems (AREA)
- Computer Hardware Design (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Signal Processing (AREA)
- Geometry (AREA)
- Computing Systems (AREA)
- Radar, Positioning & Navigation (AREA)
- Remote Sensing (AREA)
- User Interface Of Digital Computer (AREA)
- Controls And Circuits For Display Device (AREA)
- Processing Or Creating Images (AREA)
Description
以下、図面を参照して、本実施形態の画像表示システム1について説明する。本実施形態の画像表示システム1は、ユーザにバーチャルリアリティ(VR)を体験させるシステムである。図1は、本実施形態における画像表示システム1の一例を示す図である。図2は、画像表示システム1に含まれる、表示部21を有する情報処理装置2の外観の一例を示す図である。
次に、ユーザがゴーグル装置10の表示部21を見ながらゴーグル装置10の底面15を左右方向(ヨー方向)に向けたり、上下方向(ピッチ方向)に向けたりしたときのUIオブジェクト30の制御について説明する。
図9は、UIオブジェクト30が移動される領域の一例を示す図である。図9では、UIオブジェクト30が仮想カメラVCの正面に位置している場合、仮想カメラVCを基準として仮想空間を概念的に複数の領域に分けた図が示されている。
次に、情報処理装置2において行われる処理の一例について具体的に説明する。まず、情報処理装置2に記憶されるデータについて説明する。
次に、情報処理装置2において行われるメイン処理の詳細について説明する。図15は、情報処理装置2のプロセッサ20において行われるメイン処理の一例を示すフローチャートである。図15に示す処理は、情報処理装置2のCPU又はGPUが所定のプログラムを実行することによって行われる。なお、図15では、上述したUIオブジェクト30の移動に関する処理のみが示されており、他の処理(例えば、仮想空間において行われるユーザの動作(操作)に応じた処理)は省略されている。
次に、上記ステップS106のB領域における移動処理について説明する。図16は、ステップS106のB領域における移動処理の一例を示すフローチャートである。
以上、本実施形態の画像処理ついて説明したが、上記実施形態は単なる一例であり、例えば以下のような変形が加えられてもよい。
・仮想カメラVCの視線が所定の回転方向における一方向から他方向に反転した場合において、さらに、他方向への回転角又はその累積値(上記Rx又はRy)が所定値以上となること。
・所定の回転方向における仮想カメラVCの視線の反転回数が所定値となること。
・仮想カメラVCの視線が所定の回転方向における一方向から他方向に変化すること。
2 情報処理装置
10 ゴーグル装置
11 上面
12 右側面
13 下面
14 左側面
15 底面
16L 左開口
16R 右開口
17 仕切り面
20 プロセッサ
21 表示部
22 慣性センサ
30 UIオブジェクト
31~34 アイコン
35 情報表示オブジェクト
37 ポインタ
VC 仮想カメラ
VCL 左仮想カメラ
VCR 右仮想カメラ
Claims (28)
- ゴーグル装置と、
仮想空間にオブジェクトを配置するオブジェクト配置手段と、
前記仮想空間の仮想カメラによって撮像される画像を前記ゴーグル装置の表示部に表示させる表示制御手段と、
前記ゴーグル装置の姿勢を取得する姿勢取得手段と、
前記ゴーグル装置の姿勢に基づいて、前記仮想カメラを前記仮想空間において回転させるカメラ回転手段と、
前記仮想カメラの視線が、所定の回転方向における一方向から他方向に変化したことを検知する検知手段と、
前記検知手段によって前記変化が検知されたことに基づいて、前記オブジェクトの少なくとも一部が前記仮想カメラの撮像範囲内に位置するように、前記オブジェクトの移動及び前記仮想カメラの制御の少なくとも何れか一方を行う制御手段と、を備え、
前記制御手段は、
前記オブジェクトが表示されているときに前記仮想カメラが回転した場合において、前記仮想カメラの回転角が所定範囲である場合は、前記オブジェクトの移動及び前記仮想カメラの制御の少なくとも何れか一方を行わず、
前記オブジェクトが表示されているときに前記仮想カメラが回転した場合において、前記仮想カメラの回転角が前記所定範囲外である場合は、前記変化が検知されたことに基づいて、前記オブジェクトの移動及び前記仮想カメラの制御の少なくとも何れか一方を行う、画像表示システム。 - 前記仮想カメラの回転量を算出する算出手段をさらに備え、
前記制御手段は、
少なくとも前記検知手段によって前記変化が検知されたこと、および、前記回転量に基づいて、前記オブジェクトの移動及び前記仮想カメラの制御の少なくとも何れか一方を行う、請求項1に記載の画像表示システム。 - 前記制御手段は、前記検知手段によって前記変化が検知された場合において、当該検知された後の前記回転量が所定値以上である場合、前記オブジェクトの移動及び前記仮想カメラの制御の少なくとも何れか一方を行う、請求項2に記載の画像表示システム。
- 前記算出手段は、前記所定の回転方向における前記他方向及び/又は前記一方向への回転量を算出し、
前記制御手段は、前記所定の回転方向における前記他方向及び/又は前記一方向への回転量に基づいて、前記オブジェクトの移動及び前記仮想カメラの制御の少なくとも何れか一方を行う、請求項2又は3に記載の画像表示システム。 - 前記制御手段は、前記検知手段によって前記変化が検知された場合において、前記他方向及び/又は前記一方向への回転量が所定値以上である場合、前記オブジェクトの移動及び前記仮想カメラの制御の少なくとも何れか一方を行う、請求項4に記載の画像表示システム。
- 前記制御手段は、前記検知手段によって前記変化が検知された後の前記他方向及び/又は前記一方向への回転量の累積値が所定値以上である場合、前記オブジェクトの移動及び前記仮想カメラの制御の少なくとも何れか一方を行う、請求項5に記載の画像表示システム。
- 前記算出手段は、前記所定の回転方向における前記一方向への第1回転量、および、前記所定の回転方向における前記他方向への第2回転量を算出し、
前記第1回転量と前記第2回転量とを比較する比較手段をさらに備え、
前記検知手段は、前記比較手段の比較結果に基づいて、前記変化を検知する、請求項2から6の何れかに記載の画像表示システム。 - 前記検知手段は、前記第1回転量および前記第2回転量のうちの小さい方に基づいて、前記変化を検知する、請求項7に記載の画像表示システム。
- 前記算出手段は、前記第1回転量の累積値、および、前記第2回転量の累積値を算出し、
前記検知手段は、前記第1回転量の累積値、および、前記第2回転量の累積値のうちの小さい方に基づいて、前記変化を検知する、請求項7に記載の画像表示システム。 - 前記カメラ回転手段は、
少なくとも、前記仮想カメラの撮像範囲内に前記オブジェクトの少なくとも一部が位置する第1姿勢、および、前記仮想カメラの撮像範囲外に前記オブジェクトが位置する第2姿勢となるように、前記仮想カメラを回転させ、
前記一方向は、前記仮想カメラが前記第2姿勢に近づく方向であり、
前記他方向は、前記仮想カメラが前記第1姿勢に近づく方向である、請求項1から9の何れかに記載の画像表示システム。 - 前記カメラ回転手段は、
少なくとも、前記仮想カメラが前記オブジェクトを向く第1姿勢、および、前記仮想カメラが前記オブジェクトを向かない第2姿勢となるように、前記仮想カメラを回転させ、
前記一方向は、前記仮想カメラが前記第1姿勢から離れる方向であり、
前記他方向は、前記仮想カメラが前記第1姿勢に近づく方向である、請求項1から9の何れかに記載の画像表示システム。 - 前記検知手段は、
前記仮想カメラが前記第2姿勢である場合において、前記仮想カメラの視線が前記他方向に回転したとき、前記変化を検知し、
前記仮想カメラが前記第2姿勢である場合において、前記仮想カメラの視線が前記他方向に回転することなく前記一方向に回転しているとき、又は、前記仮想カメラの視線が回転していないとき、前記変化を検知せず、
前記制御手段は、前記変化が検知された場合、前記オブジェクトの移動及び前記仮想カメラの制御の少なくとも何れか一方を行い、前記変化が検知されていない場合、前記オブジェクトの移動及び前記仮想カメラの制御の少なくとも何れか一方を行わない、請求項10又は11に記載の画像表示システム。 - 前記第2姿勢は、前記仮想カメラの視線の左右方向に前記オブジェクトが存在する姿勢である、請求項10から12の何れかに記載の画像表示システム。
- 前記所定の回転方向は、前記仮想空間におけるヨー方向である、請求項1から13の何れかに記載の画像表示システム。
- 前記カメラ回転手段は、前記仮想カメラの視線を、前記所定の回転方向と直交する第2の回転方向に回転させることが可能であり、
前記検知手段は、さらに、前記仮想カメラの視線が前記第2の回転方向における一方向から他方向に変化したことを検知する、請求項1から14の何れかに記載の画像表示システム。 - 前記所定の回転方向は、前記仮想空間におけるピッチ方向である、請求項1から15の何れかに記載の画像表示システム。
- 前記オブジェクトは、ユーザが操作可能なユーザインターフェイスである、請求項1から16の何れかに記載の画像表示システム。
- 前記ユーザインターフェイスを指示するポインタを設定するポインタ設定手段をさらに備え、
前記検知手段は、前記ユーザインターフェイスを基準とする所定の領域に前記ポインタがない場合、前記変化を検知する、請求項17に記載の画像表示システム。 - 前記検知手段は、前記所定の領域に前記ポインタがない場合、前記所定の回転方向における前記一方向および前記他方向の回転の変化量を算出する、請求項18に記載の画像表示システム。
- 前記検知手段は、前記ポインタが前記所定の領域に入った場合、前記変化量をリセットする、請求項19に記載の画像表示システム。
- 前記一方向は、前記ポインタが前記所定の領域から離れる方向であり、
前記検知手段は、前記ポインタが前記所定の領域から離れる方向への移動中に前記ポインタの移動方向が反転した場合に、前記変化を検知する、請求項18から20の何れかに記載の画像表示システム。 - 前記検知手段は、前記オブジェクトを基準とした前記仮想カメラの視線が所定の角度である場合に、前記変化を検知する、請求項1から21の何れかに記載の画像表示システム。
- 前記仮想カメラの姿勢に応じて前記オブジェクトを選択する選択手段をさらに備え、
前記制御手段は、前記選択手段によって前記オブジェクトが選択されていない場合に、前記オブジェクトの移動及び前記仮想カメラの制御の少なくとも何れか一方を行う、請求項1から22の何れかに記載の画像表示システム。 - 前記検知手段によって前記変化が検知されていない場合でも、ユーザによる所定の操作に応じて、前記オブジェクトの少なくとも一部が前記仮想カメラの撮像範囲内に位置するように、前記オブジェクトの移動又は前記仮想カメラの制御を行う第2制御手段をさらに備える、請求項1から23の何れかに記載の画像表示システム。
- 前記検知手段は、前記仮想カメラの視線の前記一方向から前記他方向への反転、および、前記他方向から前記一方向への反転の回数が所定回数になったことを検知し、
前記制御手段は、前記検知手段によって前記反転の回数が所定回数になったことが検知された場合、前記オブジェクトの移動及び前記仮想カメラの制御の少なくとも何れか一方を行う、請求項1から24の何れかに記載の画像表示システム。 - ゴーグル装置の表示部に画像を表示させる装置のプロセッサにおいて実行される画像表示プログラムであって、前記プロセッサを、
仮想空間にオブジェクトを配置するオブジェクト配置手段、
前記仮想空間の仮想カメラによって撮像される画像を前記表示部に表示させる表示制御手段、
前記ゴーグル装置の姿勢を取得する姿勢取得手段、
前記ゴーグル装置の姿勢に基づいて、前記仮想カメラを前記仮想空間において回転させるカメラ回転手段、
前記仮想カメラの視線が、所定の回転方向における一方向から他方向に変化したことを検知する検知手段、および、
前記検知手段によって前記変化が検知されたことに基づいて、前記オブジェクトの少なくとも一部が前記仮想カメラの撮像範囲内に位置するように、前記オブジェクトの移動及び前記仮想カメラの制御の少なくとも何れか一方を行う制御手段、として機能させ、
前記制御手段は、
前記オブジェクトが表示されているときに前記仮想カメラが回転した場合において、前記仮想カメラの回転角が所定範囲である場合は、前記オブジェクトの移動及び前記仮想カメラの制御の少なくとも何れか一方を行わず、
前記オブジェクトが表示されているときに前記仮想カメラが回転した場合において、前記仮想カメラの回転角が前記所定範囲外である場合は、前記変化が検知されたことに基づいて、前記オブジェクトの移動及び前記仮想カメラの制御の少なくとも何れか一方を行う、画像表示プログラム。 - ゴーグル装置の表示部に画像を表示させる表示制御装置であって、
仮想空間にオブジェクトを配置するオブジェクト配置手段と、
前記仮想空間の仮想カメラによって撮像される画像を前記表示部に表示させる表示制御手段と、
前記ゴーグル装置の姿勢を取得する姿勢取得手段と、
前記ゴーグル装置の姿勢に基づいて、前記仮想カメラを前記仮想空間において回転させるカメラ回転手段と、
前記仮想カメラの視線が、所定の回転方向における一方向から他方向に変化したことを検知する検知手段と、
前記検知手段によって前記変化が検知されたことに基づいて、前記オブジェクトの少なくとも一部が前記仮想カメラの撮像範囲内に位置するように、前記オブジェクトの移動及び前記仮想カメラの制御の少なくとも何れか一方を行う制御手段と、を備え、
前記制御手段は、
前記オブジェクトが表示されているときに前記仮想カメラが回転した場合において、前記仮想カメラの回転角が所定範囲である場合は、前記オブジェクトの移動及び前記仮想カメラの制御の少なくとも何れか一方を行わず、
前記オブジェクトが表示されているときに前記仮想カメラが回転した場合において、前記仮想カメラの回転角が前記所定範囲外である場合は、前記変化が検知されたことに基づいて、前記オブジェクトの移動及び前記仮想カメラの制御の少なくとも何れか一方を行う、表示制御装置。 - ゴーグル装置を含む画像表示システムにおいて行われる画像表示方法であって、前記画像表示システムに、
仮想空間にオブジェクトを配置するオブジェクト配置ステップと、
前記仮想空間の仮想カメラによって撮像される画像を前記ゴーグル装置の表示部に表示させる表示制御ステップと、
前記ゴーグル装置の姿勢を取得する姿勢取得ステップと、
前記ゴーグル装置の姿勢に基づいて、前記仮想カメラを前記仮想空間において回転させるカメラ回転ステップと、
前記仮想カメラの視線が、所定の回転方向における一方向から他方向に変化したことを検知する検知ステップと、
前記検知ステップで前記変化が検知されたことに基づいて、前記オブジェクトの少なくとも一部が前記仮想カメラの撮像範囲内に位置するように、前記オブジェクトの移動及び前記仮想カメラの制御の少なくとも何れか一方を行う制御ステップと、を実行させ、
前記制御ステップでは、
前記オブジェクトが表示されているときに前記仮想カメラが回転した場合において、前記仮想カメラの回転角が所定範囲である場合は、前記オブジェクトの移動及び前記仮想カメラの制御の少なくとも何れか一方を行わず、
前記オブジェクトが表示されているときに前記仮想カメラが回転した場合において、前記仮想カメラの回転角が前記所定範囲外である場合は、前記変化が検知されたことに基づいて、前記オブジェクトの移動及び前記仮想カメラの制御の少なくとも何れか一方を行う、画像表示方法。
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2023099844A JP7471497B2 (ja) | 2019-03-20 | 2023-06-19 | 画像表示システム、画像表示プログラム、表示制御装置、および画像表示方法 |
JP2024062788A JP2024091707A (ja) | 2019-03-20 | 2024-04-09 | 画像表示システム、画像表示プログラム、表示制御装置、および画像表示方法 |
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2019053213A JP7300287B2 (ja) | 2019-03-20 | 2019-03-20 | 画像表示システム、画像表示プログラム、表示制御装置、および画像表示方法 |
JP2023099844A JP7471497B2 (ja) | 2019-03-20 | 2023-06-19 | 画像表示システム、画像表示プログラム、表示制御装置、および画像表示方法 |
Related Parent Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2019053213A Division JP7300287B2 (ja) | 2019-03-20 | 2019-03-20 | 画像表示システム、画像表示プログラム、表示制御装置、および画像表示方法 |
Related Child Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2024062788A Division JP2024091707A (ja) | 2019-03-20 | 2024-04-09 | 画像表示システム、画像表示プログラム、表示制御装置、および画像表示方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2023121780A JP2023121780A (ja) | 2023-08-31 |
JP7471497B2 true JP7471497B2 (ja) | 2024-04-19 |
Family
ID=69784213
Family Applications (3)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2019053213A Active JP7300287B2 (ja) | 2019-03-20 | 2019-03-20 | 画像表示システム、画像表示プログラム、表示制御装置、および画像表示方法 |
JP2023099844A Active JP7471497B2 (ja) | 2019-03-20 | 2023-06-19 | 画像表示システム、画像表示プログラム、表示制御装置、および画像表示方法 |
JP2024062788A Pending JP2024091707A (ja) | 2019-03-20 | 2024-04-09 | 画像表示システム、画像表示プログラム、表示制御装置、および画像表示方法 |
Family Applications Before (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2019053213A Active JP7300287B2 (ja) | 2019-03-20 | 2019-03-20 | 画像表示システム、画像表示プログラム、表示制御装置、および画像表示方法 |
Family Applications After (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2024062788A Pending JP2024091707A (ja) | 2019-03-20 | 2024-04-09 | 画像表示システム、画像表示プログラム、表示制御装置、および画像表示方法 |
Country Status (3)
Country | Link |
---|---|
US (2) | US11752430B2 (ja) |
EP (1) | EP3712750A1 (ja) |
JP (3) | JP7300287B2 (ja) |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US11281005B2 (en) * | 2019-08-08 | 2022-03-22 | Sharp Kabushiki Kaisha | Compact head-mounted display system with orthogonal panels |
Citations (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2014197066A (ja) | 2013-03-29 | 2014-10-16 | ソニー株式会社 | 表示制御装置、表示制御方法、およびプログラム |
JP2015150063A (ja) | 2014-02-12 | 2015-08-24 | 株式会社バンダイナムコエンターテインメント | プログラムおよびゲーム装置 |
JP2016514314A (ja) | 2013-03-14 | 2016-05-19 | クアルコム,インコーポレイテッド | ヘッドマウントディスプレイ用ユーザインターフェース |
JP2016110319A (ja) | 2014-12-04 | 2016-06-20 | ソニー株式会社 | 表示制御装置、表示制御方法およびプログラム |
US20170199565A1 (en) | 2016-01-13 | 2017-07-13 | Huawei Technologies Co., Ltd. | Interface Interaction Apparatus and Method |
JP2017228322A (ja) | 2017-09-27 | 2017-12-28 | 株式会社コロプラ | 仮想空間を提供する方法、プログラム、および記録媒体 |
WO2018204419A1 (en) | 2017-05-01 | 2018-11-08 | Magic Leap, Inc. | Matching content to a spatial 3d environment |
JP2018192272A (ja) | 2018-07-05 | 2018-12-06 | 株式会社カプコン | ゲームプログラム及びゲーム装置 |
Family Cites Families (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US8179366B2 (en) * | 2004-12-06 | 2012-05-15 | Naturalpoint, Inc. | Systems and methods for using a movable object to control a computer |
US20130246967A1 (en) * | 2012-03-15 | 2013-09-19 | Google Inc. | Head-Tracked User Interaction with Graphical Interface |
JP6228392B2 (ja) | 2013-05-31 | 2017-11-08 | 任天堂株式会社 | パノラマ画像表示プログラム、パノラマ画像表示装置、パノラマ画像表示システム、および、パノラマ画像表示方法 |
JP6319952B2 (ja) * | 2013-05-31 | 2018-05-09 | 任天堂株式会社 | 情報処理プログラム、情報処理装置、情報処理システム、および情報処理方法 |
JP6357023B2 (ja) * | 2014-06-06 | 2018-07-11 | 任天堂株式会社 | 情報処理プログラム、情報処理装置、情報処理装置の制御方法および情報処理システム |
US20180359462A1 (en) * | 2015-08-06 | 2018-12-13 | Sony Interactive Entertainment Inc. | Information processing apparatus |
JP6346131B2 (ja) | 2015-09-07 | 2018-06-20 | 株式会社ソニー・インタラクティブエンタテインメント | 情報処理装置および画像生成方法 |
JP6276434B1 (ja) * | 2017-02-03 | 2018-02-07 | 株式会社コロプラ | 仮想空間における移動を支援するための方法、当該方法をコンピュータに実行させるためのプログラム、および当該プログラムを実行するための情報処理装置 |
JP7307568B2 (ja) * | 2019-03-20 | 2023-07-12 | 任天堂株式会社 | 画像表示システム、画像表示プログラム、表示制御装置、および画像表示方法 |
-
2019
- 2019-03-20 JP JP2019053213A patent/JP7300287B2/ja active Active
-
2020
- 2020-03-04 US US16/808,761 patent/US11752430B2/en active Active
- 2020-03-09 EP EP20161878.2A patent/EP3712750A1/en active Pending
-
2023
- 2023-06-19 JP JP2023099844A patent/JP7471497B2/ja active Active
- 2023-07-26 US US18/359,118 patent/US12029979B2/en active Active
-
2024
- 2024-04-09 JP JP2024062788A patent/JP2024091707A/ja active Pending
Patent Citations (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2016514314A (ja) | 2013-03-14 | 2016-05-19 | クアルコム,インコーポレイテッド | ヘッドマウントディスプレイ用ユーザインターフェース |
JP2014197066A (ja) | 2013-03-29 | 2014-10-16 | ソニー株式会社 | 表示制御装置、表示制御方法、およびプログラム |
JP2015150063A (ja) | 2014-02-12 | 2015-08-24 | 株式会社バンダイナムコエンターテインメント | プログラムおよびゲーム装置 |
JP2016110319A (ja) | 2014-12-04 | 2016-06-20 | ソニー株式会社 | 表示制御装置、表示制御方法およびプログラム |
US20170199565A1 (en) | 2016-01-13 | 2017-07-13 | Huawei Technologies Co., Ltd. | Interface Interaction Apparatus and Method |
WO2018204419A1 (en) | 2017-05-01 | 2018-11-08 | Magic Leap, Inc. | Matching content to a spatial 3d environment |
JP2017228322A (ja) | 2017-09-27 | 2017-12-28 | 株式会社コロプラ | 仮想空間を提供する方法、プログラム、および記録媒体 |
JP2018192272A (ja) | 2018-07-05 | 2018-12-06 | 株式会社カプコン | ゲームプログラム及びゲーム装置 |
Also Published As
Publication number | Publication date |
---|---|
US20230364511A1 (en) | 2023-11-16 |
JP2023121780A (ja) | 2023-08-31 |
JP2020154792A (ja) | 2020-09-24 |
US12029979B2 (en) | 2024-07-09 |
US11752430B2 (en) | 2023-09-12 |
JP2024091707A (ja) | 2024-07-05 |
US20200298114A1 (en) | 2020-09-24 |
EP3712750A1 (en) | 2020-09-23 |
JP7300287B2 (ja) | 2023-06-29 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US9325961B2 (en) | Computer-readable storage medium having information processing program stored therein, information processing method, information processing apparatus, and information processing system | |
JP7459334B2 (ja) | 画像表示システム、画像表示プログラム、表示制御装置、および画像表示方法 | |
JP5981591B1 (ja) | 没入型仮想空間でオブジェクト操作を制御するためのコンピュータ・プログラムおよびコンピュータ・システム | |
JP5959047B2 (ja) | 表示制御システム、表示制御方法、表示制御プログラム、および表示制御装置 | |
JP5586545B2 (ja) | ゲームシステム、携帯型ゲーム装置、情報処理部の制御方法、および情報処理部の制御プログラム | |
JP7491300B2 (ja) | 情報処理装置、情報処理方法、及びコンピュータが読み取り可能な記録媒体 | |
JP2024091707A (ja) | 画像表示システム、画像表示プログラム、表示制御装置、および画像表示方法 | |
JP2013258614A (ja) | 画像生成装置および画像生成方法 | |
US20220291744A1 (en) | Display processing device, display processing method, and recording medium | |
JP6099237B2 (ja) | 表示制御システム、表示制御方法、表示制御プログラム、および表示制御装置 | |
JP6549066B2 (ja) | 没入型仮想空間でオブジェクト操作を制御するためのコンピュータ・プログラムおよびコンピュータ・システム | |
JP6159455B1 (ja) | 仮想空間を提供する方法、プログラム、および記録媒体 | |
WO2014008438A1 (en) | Systems and methods for tracking user postures and motions to control display of and navigate panoramas | |
JP6776155B2 (ja) | 仮想現実を提供するための方法、および当該方法をコンピュータに実行させるためのプログラム、および当該プログラムを実行するための情報処理装置 | |
JP2024103522A (ja) | 情報処理装置、情報処理方法、及びコンピュータが読み取り可能な記録媒体 | |
JP2022062578A (ja) | プログラムおよび視野制御方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20230628 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20230628 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20231220 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20240112 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20240306 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20240315 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20240409 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7471497 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |