JP2020155980A - 画像表示システム、画像表示プログラム、画像表示装置、および画像表示方法 - Google Patents
画像表示システム、画像表示プログラム、画像表示装置、および画像表示方法 Download PDFInfo
- Publication number
- JP2020155980A JP2020155980A JP2019053702A JP2019053702A JP2020155980A JP 2020155980 A JP2020155980 A JP 2020155980A JP 2019053702 A JP2019053702 A JP 2019053702A JP 2019053702 A JP2019053702 A JP 2019053702A JP 2020155980 A JP2020155980 A JP 2020155980A
- Authority
- JP
- Japan
- Prior art keywords
- image
- angle
- view
- virtual camera
- parallax
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims description 54
- 230000008859 change Effects 0.000 claims description 64
- 230000002093 peripheral effect Effects 0.000 claims description 48
- 238000012937 correction Methods 0.000 claims description 42
- 230000008569 process Effects 0.000 claims description 33
- 230000006870 function Effects 0.000 claims description 18
- 238000001514 detection method Methods 0.000 claims description 8
- 230000004044 response Effects 0.000 claims description 5
- 230000009467 reduction Effects 0.000 claims description 3
- 206010025482 malaise Diseases 0.000 abstract description 44
- 230000036544 posture Effects 0.000 description 161
- 238000004891 communication Methods 0.000 description 45
- 230000001133 acceleration Effects 0.000 description 27
- 238000012545 processing Methods 0.000 description 25
- 238000010586 diagram Methods 0.000 description 21
- 230000010365 information processing Effects 0.000 description 15
- 238000013459 approach Methods 0.000 description 10
- 238000003860 storage Methods 0.000 description 10
- 230000006641 stabilisation Effects 0.000 description 9
- 238000011105 stabilization Methods 0.000 description 9
- 230000007423 decrease Effects 0.000 description 7
- 230000000694 effects Effects 0.000 description 7
- 210000003128 head Anatomy 0.000 description 5
- 230000004048 modification Effects 0.000 description 3
- 238000012986 modification Methods 0.000 description 3
- 239000013598 vector Substances 0.000 description 3
- 230000000007 visual effect Effects 0.000 description 3
- 238000005520 cutting process Methods 0.000 description 2
- 230000006872 improvement Effects 0.000 description 2
- 239000004973 liquid crystal related substance Substances 0.000 description 2
- 230000003287 optical effect Effects 0.000 description 2
- 238000005192 partition Methods 0.000 description 2
- 230000000903 blocking effect Effects 0.000 description 1
- 230000003111 delayed effect Effects 0.000 description 1
- 210000000887 face Anatomy 0.000 description 1
- 239000003550 marker Substances 0.000 description 1
- 238000010422 painting Methods 0.000 description 1
- 238000003825 pressing Methods 0.000 description 1
- 238000004904 shortening Methods 0.000 description 1
- 230000009466 transformation Effects 0.000 description 1
- 208000008918 voyeurism Diseases 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B30/00—Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images
- G02B30/20—Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images by providing first and second parallax images to an observer's left and right eyes
- G02B30/22—Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images by providing first and second parallax images to an observer's left and right eyes of the stereoscopic type
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/20—Image signal generators
- H04N13/275—Image signal generators from 3D object models, e.g. computer-generated stereoscopic image signals
- H04N13/279—Image signal generators from 3D object models, e.g. computer-generated stereoscopic image signals the virtual viewpoint locations being selected by the viewers or determined by tracking
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
- G02B27/017—Head mounted
- G02B27/0172—Head mounted characterised by optical features
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T19/00—Manipulating 3D models or images for computer graphics
- G06T19/006—Mixed reality
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/70—Determining position or orientation of objects or cameras
- G06T7/73—Determining position or orientation of objects or cameras using feature-based methods
- G06T7/74—Determining position or orientation of objects or cameras using feature-based methods involving reference images or patches
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/30—Image reproducers
- H04N13/332—Displays for viewing with the aid of special glasses or head-mounted displays [HMD]
- H04N13/344—Displays for viewing with the aid of special glasses or head-mounted displays [HMD] with head-mounted left-right displays
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/30—Image reproducers
- H04N13/366—Image reproducers using viewer tracking
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
- G02B27/0101—Head-up displays characterised by optical features
- G02B2027/0129—Head-up displays characterised by optical features comprising devices for correcting parallax
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
- G02B27/0101—Head-up displays characterised by optical features
- G02B2027/0132—Head-up displays characterised by optical features comprising binocular systems
- G02B2027/0134—Head-up displays characterised by optical features comprising binocular systems of stereoscopic type
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
- G02B27/0101—Head-up displays characterised by optical features
- G02B2027/0132—Head-up displays characterised by optical features comprising binocular systems
- G02B2027/0136—Head-up displays characterised by optical features comprising binocular systems with a single image source for both eyes
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
- G02B27/0101—Head-up displays characterised by optical features
- G02B2027/0138—Head-up displays characterised by optical features comprising image capture systems, e.g. camera
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/64—Imaging systems using optical elements for stabilisation of the lateral and angular position of the image
- G02B27/646—Imaging systems using optical elements for stabilisation of the lateral and angular position of the image compensating for small deviations, e.g. due to vibration or shake
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
- H04N13/106—Processing image signals
- H04N13/111—Transformation of image signals corresponding to virtual viewpoints, e.g. spatial image interpolation
- H04N13/117—Transformation of image signals corresponding to virtual viewpoints, e.g. spatial image interpolation the virtual viewpoint locations being selected by the viewers or determined by viewer tracking
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/30—Image reproducers
- H04N13/366—Image reproducers using viewer tracking
- H04N13/383—Image reproducers using viewer tracking for tracking with gaze detection, i.e. detecting the lines of sight of the viewer's eyes
Landscapes
- Physics & Mathematics (AREA)
- Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Optics & Photonics (AREA)
- Theoretical Computer Science (AREA)
- Computer Graphics (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Computer Hardware Design (AREA)
- General Engineering & Computer Science (AREA)
- Software Systems (AREA)
- Processing Or Creating Images (AREA)
- Controls And Circuits For Display Device (AREA)
- User Interface Of Digital Computer (AREA)
- Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)
- Control Of Indicators Other Than Cathode Ray Tubes (AREA)
Abstract
Description
ゲームシステム1の一例は、本体装置(情報処理装置;本実施形態ではゲーム装置本体として機能する)2と左コントローラ3および右コントローラ4とを含む。本体装置2は、左コントローラ3および右コントローラ4がそれぞれ着脱可能である。つまり、ゲームシステム1は、左コントローラ3および右コントローラ4をそれぞれ本体装置2に装着して一体化された装置として利用できる。また、ゲームシステム1は、本体装置2と左コントローラ3および右コントローラ4とを別体として利用することもできる(図2参照)。以下では、本実施形態のゲームシステム1のハードウェア構成について説明し、その後に本実施形態の画像表示システム100について説明する。
次に、図7〜図11を参照して、画像表示システム100の一例について説明する。本実施形態の画像表示システム100は、本体装置2が装着されたゴーグル装置150(図7)と、カメラ装置200(図9)とにより構成される。以下、ゴーグル装置150およびカメラ装置200のそれぞれについて説明し、ゴーグル装置150およびカメラ装置200によって構成される画像表示システム100について説明する。
次に、本実施形態の画像表示システム100において表示される画像について説明する。本実施形態の画像表示システム100は、ユーザにVRを体験させるとともに、VR空間の一部を拡大するズームイン(クローズアップ)機能を提供する。以下では、まず、本体装置2によって定義される仮想空間について説明した後、VR空間におけるズームイン機能について説明する。
本実施形態の画像表示システム100では、ユーザは、筒状部205を回転させることで仮想空間の一部を拡大することができる。具体的には、筒状部205が回転されることで、筒状部205の内部に設けられた左コントローラ3(右コントローラ4でもよい)が回転する。本体装置2は、左コントローラ3からの操作データに基づいて、左コントローラ3の姿勢を取得し、取得した左コントローラ3の姿勢に応じて、左仮想カメラVCLおよび右仮想カメラVCRの画角を狭くする。これにより、仮想空間の一部が拡大(ズームイン)される。
次に、本実施形態の手振れ補正機能について説明する。本実施形態では、仮想カメラVCの画角を小さくすることによって仮想空間の一部を拡大する場合、手振れ補正が行われる。手振れ補正は、手振れによる仮想カメラVCの姿勢の変化を軽減する機能である。以下、この手振れ補正について説明する。
次に、本体装置2において行われる処理の一例について具体的に説明する。まず、本体装置2に記憶されるデータについて説明する。
次に、本体装置2において行われる処理の詳細について説明する。図27は、本体装置2のプロセッサ81において行われる処理の一例を示すフローチャートである。なお、図27では、上述した処理のみが示されており、他の処理(例えば、仮想空間において行われるユーザの動作に応じたゲーム処理等)は省略されている。
次に、ステップS107の拡大画像表示処理の詳細について説明する。図28は、ステップS107の拡大画像表示処理の一例を示すフローチャートである。
以上、本実施形態の画像表示システムついて説明したが、上記実施形態は単なる一例であり、例えば以下のような変形が加えられてもよい。
2 本体装置
3 左コントローラ
4 右コントローラ
12 ディスプレイ
81 プロセッサ
89 加速度センサ
90 角速度センサ
100 画像表示システム
150 ゴーグル装置
200 カメラ装置
205 筒状部
VC 仮想カメラ
VCL 左仮想カメラ
VCR 右仮想カメラ
Claims (25)
- ゴーグル装置と、
仮想空間に仮想カメラを配置する仮想カメラ配置手段と、
前記仮想カメラの画角を、少なくとも第1画角および前記第1画角よりも小さい第2画角のうちの何れかに設定する画角設定手段と、
前記仮想カメラの画角に含まれる前記仮想空間の画像であって、互いに視差を有する左目用画像および右目用画像を生成する画像生成手段と、
前記左目用画像および前記右目用画像を前記ゴーグル装置の表示部に表示させる表示制御手段と、
前記仮想カメラの画角が前記第1画角に設定されている場合、前記左目用画像および前記右目用画像の視差を第1の視差に設定し、前記仮想カメラの画角が前記第2画角に設定されている場合、前記左目用画像および前記右目用画像の視差を前記第1の視差よりも小さい第2の視差に設定する視差設定手段と、を備え、
前記画像生成手段は、
前記仮想カメラの画角が前記第1画角に設定されている場合、互いに前記第1の視差を有する前記左目用画像および前記右目用画像を生成し、
前記仮想カメラの画角が前記第2画角に設定されている場合、前記仮想空間の一部を拡大した画像であって、互いに前記第2の視差を有する前記左目用画像および前記右目用画像を生成する、画像表示システム。 - 前記仮想カメラは、前記左目用画像を生成するための左目用仮想カメラと、前記右目用画像を生成するための右目用仮想カメラとを含み、
前記視差設定手段は、
前記仮想カメラの画角が前記第1画角に設定されている場合に、前記左目用仮想カメラと前記右目用仮想カメラとの間の仮想的な距離を第1距離に設定し、
前記仮想カメラの画角が前記第2画角に設定されている場合に、前記左目用仮想カメラと前記右目用仮想カメラとの間の仮想的な距離を前記第1距離よりも短い第2距離に設定する、請求項1に記載の画像表示システム。 - 前記画角設定手段は、前記仮想カメラの画角を前記第1画角から前記第2画角に連続的に変化させることが可能であり、
前記視差設定手段は、
前記仮想カメラの画角が前記第1画角から前記第2画角に連続的に変化する場合に、前記左目用仮想カメラと前記右目用仮想カメラとの間の仮想的な距離を連続的に短くする、請求項2に記載の画像表示システム。 - 前記視差設定手段は、
前記仮想カメラの画角の変化に応じて、前記左目用仮想カメラと前記右目用仮想カメラとの間の仮想的な距離を線形的に変化させる、請求項3に記載の画像表示システム。 - 前記視差設定手段は、前記仮想カメラの画角が前記第2画角に設定されている場合、前記第2の視差を実質的にゼロに設定する、請求項1から4の何れかに記載の画像表示システム。
- 前記画角設定手段は、さらに
前記仮想カメラの画角を、前記第1画角よりも小さく、かつ、前記第2画角よりも大きい第3画角に設定し、
前記視差設定手段は、さらに、
前記仮想カメラの画角が前記第3画角に設定されている場合、前記左目用画像および前記右目用画像の視差を、前記第1の視差よりも小さく、かつ、前記第2の視差よりも大きい第3の視差に設定し、
前記画像生成手段は、
前記仮想カメラの画角が前記第3画角に設定されている場合、前記仮想空間の一部を拡大した画像であって、互いに前記第3の視差を有する前記左目用画像および前記右目用画像を生成する、請求項1から5の何れかに記載の画像表示システム。 - 前記画角設定手段は、前記仮想カメラの画角を前記第1画角から前記第2画角の範囲で小さくし、
前記画像生成手段は、前記仮想カメラの画角が小さくされることに応じて、前記仮想空間の一部の拡大率を高くして前記左目用画像および前記右目用画像を生成し、
前記視差設定手段は、前記拡大率が高くなることに応じて、前記左目用画像および前記右目用画像の視差を小さくする、請求項1から6の何れかに記載の画像表示システム。 - 前記ゴーグル装置は、前記左目用画像および前記右目用画像をユーザの左目および右目にそれぞれ視認させるためのレンズを備え、
前記第1画角は、前記レンズを用いた前記ユーザの視野角に設定される、請求項1から7の何れかに記載の画像表示システム。 - 前記仮想空間に所定の仮想オブジェクトを配置するオブジェクト配置手段をさらに備え、
前記表示制御手段は、
前記仮想カメラの画角が前記第1画角に設定されている場合、第1の大きさの前記所定のオブジェクトの画像を含む前記左目用画像および前記右目用画像を生成し、
前記仮想カメラの画角が前記第2画角に設定されている場合、前記第1の大きさよりも大きな第2の大きさの前記所定のオブジェクトの画像を含む前記左目用画像および前記右目用画像を生成する、請求項1から7の何れかに記載の画像表示システム。 - 前記仮想カメラの画角が前記第1画角に設定されるときと、前記第2画角に設定されるときとで、前記仮想カメラの前記仮想空間における位置は同じである、請求項1から9の何れかに記載の画像表示システム。
- 前記ゴーグル装置の姿勢を検出する検出手段と、
前記ゴーグル装置の姿勢に基づいて、前記仮想カメラの姿勢を制御する仮想カメラ姿勢制御手段と、
前記ゴーグル装置の姿勢の変化に対する前記仮想カメラの姿勢の変化の度合いを設定する変化設定手段と、をさらに備え、
前記仮想カメラ姿勢制御手段は、
前記仮想カメラの画角が前記第2画角に設定されている場合において、前記ゴーグル装置の姿勢が変化した場合、前記変化設定手段によって設定された変化の度合いで前記ゴーグル装置の姿勢に近づくように、前記仮想カメラの姿勢を制御する、請求項1から10の何れかに記載の画像表示システム。 - 前記変化設定手段は、
前記仮想カメラの画角が前記第2画角に設定されている場合に、前記ゴーグル装置の姿勢の変化に対する前記仮想カメラの姿勢の変化の度合いを、前記仮想カメラの画角が前記第1画角に設定された場合よりも小さく設定する、請求項11に記載の画像表示システム。 - 前記ゴーグル装置の姿勢を検出する検出手段と、
前記ゴーグル装置の姿勢に基づいて、前記仮想カメラの姿勢を制御する仮想カメラ姿勢制御手段と、をさらに備え、
前記仮想カメラ姿勢制御手段は、
前記仮想カメラの画角が前記第1画角に設定されている場合、前記ゴーグル装置の姿勢が変化したときに、当該変化後のゴーグル装置の姿勢に応じて前記仮想カメラの姿勢を制御し、
前記仮想カメラの画角が前記第2画角に設定されている場合、前記ゴーグル装置の姿勢が変化したときに、前記仮想カメラの姿勢の変化を軽減するための補正処理を行い、当該補正処理に応じて前記仮想カメラの姿勢を制御する、請求項1から10の何れかに記載の画像表示システム。 - 前記画像生成手段は、
前記仮想カメラの画角が前記第1画角に設定されている場合、前記仮想空間の一部を表す第1左目用画像および第1右目用画像を生成し、
前記仮想カメラの画角が前記第2画角に設定されている場合、前記仮想空間の一部を拡大した第2左目用画像および第2右目用画像を生成し、
前記表示制御手段は、
前記仮想カメラの画角が前記第1画角に設定されている場合、前記第1左目用画像および前記第1右目用画像のそれぞれを第1の大きさの表示領域に表示させ、
前記仮想カメラの画角が前記第2画角に設定されている場合、前記第2左目用画像および前記第2右目用画像のそれぞれを前記第1の大きさよりも小さい第2の大きさの表示領域に表示させる、請求項1から13の何れかに記載の画像表示システム。 - 前記第2の大きさの表示領域は、前記第1の大きさの表示領域とほぼ相似形の領域である、請求項14に記載の画像表示システム。
- 前記第2の大きさの表示領域は、前記第1の大きさの表示領域の少なくとも外周部分を除いた中央部分の領域である、請求項14又は15に記載の画像表示システム。
- 前記画角設定手段は、前記仮想カメラの画角を前記第1画角から前記第2画角まで連続的に変化させることが可能であり、
前記表示制御手段は、前記仮想カメラの画角が前記第1画角から前記第2画角まで連続的に変化されることに応じて、前記仮想空間の一部を拡大した左目用画像および右目用画像の表示領域を連続的に小さくする、請求項14から16の何れかに記載の画像表示システム。 - 前記画角設定手段は、前記仮想カメラの画角を前記第1画角から前記第2画角まで連続的に変化させることが可能であり、
前記表示制御手段は、
前記仮想カメラの画角が前記第1画角から前記第2画角まで連続的に変化されることに応じて、前記仮想空間の一部を拡大した左目用画像および右目用画像の表示領域を略相似形に変化させるとともに、当該表示領域を連続的に小さくする、請求項14から17の何れかに記載の画像表示システム。 - ゴーグル装置の表示部に画像を表示させる装置のプロセッサにおいて実行される画像表示プログラムであって、前記プロセッサを、
仮想空間に仮想カメラを配置する仮想カメラ配置手段と、
前記仮想カメラの画角を、少なくとも第1画角および前記第1画角よりも小さい第2画角のうちの何れかに設定する画角設定手段と、
前記ゴーグル装置の表示部に表示させるために、前記仮想カメラの画角に含まれる前記仮想空間の画像であって、互いに視差を有する左目用画像および右目用画像を生成する画像生成手段と、
前記仮想カメラの画角が前記第1画角に設定されている場合、前記左目用画像および前記右目用画像の視差を第1の視差に設定し、前記仮想カメラの画角が前記第2画角に設定されている場合、前記左目用画像および前記右目用画像の視差を前記第1の視差よりも小さい第2の視差に設定する視差設定手段と、して機能させ、
前記画像生成手段は、
前記仮想カメラの画角が前記第1画角に設定されている場合、互いに前記第1の視差を有する前記左目用画像および前記右目用画像を生成し、
前記仮想カメラの画角が前記第2画角に設定されている場合、前記仮想空間の一部を拡大した画像であって、互いに前記第2の視差を有する前記左目用画像および前記右目用画像をそれぞれ生成する、画像表示プログラム。 - ゴーグル装置の表示部に画像を表示させる画像表示装置であって、
仮想空間に仮想カメラを配置する仮想カメラ配置手段と、
前記仮想カメラの画角を、少なくとも第1画角および前記第1画角よりも小さい第2画角のうちの何れかに設定する画角設定手段と、
前記仮想カメラの画角に含まれる前記仮想空間の画像であって、互いに視差を有する左目用画像および右目用画像を生成する画像生成手段と、
前記左目用画像および前記右目用画像を前記ゴーグル装置の表示部に表示させる表示制御手段と、
前記仮想カメラの画角が前記第1画角に設定されている場合、前記左目用画像および前記右目用画像の視差を第1の視差に設定し、前記仮想カメラの画角が前記第2画角に設定されている場合、前記左目用画像および前記右目用画像の視差を前記第1の視差よりも小さい第2の視差に設定する視差設定手段と、を備え、
前記画像生成手段は、
前記仮想カメラの画角が前記第1画角に設定されている場合、互いに前記第1の視差を有する前記左目用画像および前記右目用画像を生成し、
前記仮想カメラの画角が前記第2画角に設定されている場合、前記仮想空間の一部を拡大した画像であって、互いに前記第2の視差を有する前記左目用画像および前記右目用画像をそれぞれ生成する、画像表示装置。 - ゴーグル装置を含む画像表示システムにおいて行われる画像表示方法であって、前記画像表示システムに、
仮想空間に仮想カメラを配置する仮想カメラ配置ステップと、
前記仮想カメラの画角を、少なくとも第1画角および前記第1画角よりも小さい第2画角のうちの何れかに設定する画角設定ステップと、
前記ゴーグル装置の表示部に表示させるために、前記仮想カメラの画角に含まれる前記仮想空間の画像であって、互いに視差を有する左目用画像および右目用画像を生成する画像生成ステップと、
前記仮想カメラの画角が前記第1画角に設定されている場合、前記左目用画像および前記右目用画像の視差を第1の視差に設定し、前記仮想カメラの画角が前記第2画角に設定されている場合、前記左目用画像および前記右目用画像の視差を前記第1の視差よりも小さい第2の視差に設定する視差設定ステップと、を実行させ、
前記画像生成ステップでは、
前記仮想カメラの画角が前記第1画角に設定されている場合、互いに前記第1の視差を有する前記左目用画像および前記右目用画像を生成し、
前記仮想カメラの画角が前記第2画角に設定されている場合、前記仮想空間の一部を拡大した画像であって、互いに前記第2の視差を有する前記左目用画像および前記右目用画像をそれぞれ生成する、画像表示方法。 - ゴーグル装置と、
仮想空間に仮想カメラを配置する仮想カメラ配置手段と、
前記仮想カメラに基づいて、前記仮想空間の画像であって、互いに視差を有する左目用画像および右目用画像を生成する画像生成手段と、
前記左目用画像および前記右目用画像を前記ゴーグル装置の表示部に表示させる表示制御手段と、
前記仮想空間の一部を通常よりも拡大表示することを設定する拡大設定手段と、
前記拡大設定手段によって前記拡大表示の設定がされていない場合、前記左目用画像および前記右目用画像の視差を第1の視差に設定し、前記拡大設定手段によって前記拡大表示の設定がされている場合、前記左目用画像および前記右目用画像の視差を前記第1の視差よりも小さい第2の視差に設定する視差設定手段と、を備え、
前記画像生成手段は、
前記拡大表示の設定がされていない場合、互いに前記第1の視差を有する前記左目用画像および前記右目用画像を生成し、
前記拡大表示の設定がされている場合、前記仮想空間の一部を拡大した画像であって、互いに前記第2の視差を有する前記左目用画像および前記右目用画像をそれぞれ生成する、画像表示システム。 - ゴーグル装置の表示部に画像を表示させる装置のプロセッサにおいて実行される画像表示プログラムであって、前記プロセッサを、
仮想空間に仮想カメラを配置する仮想カメラ配置手段、
前記仮想カメラに基づいて、前記仮想空間の画像であって、互いに視差を有する左目用画像および右目用画像を生成する画像生成手段、
前記左目用画像および前記右目用画像を前記ゴーグル装置の表示部に表示させる表示制御手段、
前記仮想空間の一部を通常よりも拡大表示することを設定する拡大設定手段、および、
前記拡大設定手段によって前記拡大表示の設定がされていない場合、前記左目用画像および前記右目用画像の視差を第1の視差に設定し、前記拡大設定手段によって前記拡大表示の設定がされている場合、前記左目用画像および前記右目用画像の視差を前記第1の視差よりも小さい第2の視差に設定する視差設定手段、として機能させ、
前記画像生成手段は、
前記拡大表示の設定がされていない場合、互いに前記第1の視差を有する前記左目用画像および前記右目用画像を生成し、
前記拡大表示の設定がされている場合、前記仮想空間の一部を拡大した画像であって、互いに前記第2の視差を有する前記左目用画像および前記右目用画像をそれぞれ生成する、画像表示プログラム。 - ゴーグル装置の表示部に画像を表示させる画像表示装置であって、
仮想空間に仮想カメラを配置する仮想カメラ配置手段と、
前記仮想カメラに基づいて、前記仮想空間の画像であって、互いに視差を有する左目用画像および右目用画像を生成する画像生成手段と、
前記左目用画像および前記右目用画像を前記ゴーグル装置の表示部に表示させる表示制御手段と、
前記仮想空間の一部を通常よりも拡大表示することを設定する拡大設定手段と、
前記拡大設定手段によって前記拡大表示の設定がされていない場合、前記左目用画像および前記右目用画像の視差を第1の視差に設定し、前記拡大設定手段によって前記拡大表示の設定がされている場合、前記左目用画像および前記右目用画像の視差を前記第1の視差よりも小さい第2の視差に設定する視差設定手段と、を備え、
前記画像生成手段は、
前記拡大表示の設定がされていない場合、互いに前記第1の視差を有する前記左目用画像および前記右目用画像を生成し、
前記拡大表示の設定がされている場合、前記仮想空間の一部を拡大した画像であって、互いに前記第2の視差を有する前記左目用画像および前記右目用画像をそれぞれ生成する、画像表示装置。 - ゴーグル装置を含む画像表示システムにおいて行われる画像表示方法であって、前記画像表示システムに、
仮想空間に仮想カメラを配置する仮想カメラ配置ステップと、
前記仮想カメラに基づいて、前記仮想空間の画像であって、互いに視差を有する左目用画像および右目用画像を生成する画像生成ステップと、
前記左目用画像および前記右目用画像を前記ゴーグル装置の表示部に表示させる表示制御ステップと、
前記仮想空間の一部を通常よりも拡大表示することを設定する拡大設定ステップと、
前記拡大設定ステップにおいて前記拡大表示の設定がされていない場合、前記左目用画像および前記右目用画像の視差を第1の視差に設定し、前記拡大設定ステップにおいて前記拡大表示の設定がされている場合、前記左目用画像および前記右目用画像の視差を前記第1の視差よりも小さい第2の視差に設定する視差設定ステップと、を実行させ、
前記画像生成ステップでは、
前記拡大表示の設定がされていない場合、互いに前記第1の視差を有する前記左目用画像および前記右目用画像を生成し、
前記拡大表示の設定がされている場合、前記仮想空間の一部を拡大した画像であって、互いに前記第2の視差を有する前記左目用画像および前記右目用画像をそれぞれ生成する、画像表示方法。
Priority Applications (5)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2019053702A JP7349808B2 (ja) | 2019-03-20 | 2019-03-20 | 画像表示システム、画像表示プログラム、画像表示装置、および画像表示方法 |
EP20160693.6A EP3713229B1 (en) | 2019-03-20 | 2020-03-03 | Image display system, image display program, and image display method |
US16/808,734 US11402655B2 (en) | 2019-03-20 | 2020-03-04 | Image display system, non-transitory storage medium having stored therein image display program, image display apparatus, and image display method |
US17/842,969 US11835737B2 (en) | 2019-03-20 | 2022-06-17 | Image display system, non-transitory storage medium having stored therein image display program, image display apparatus, and image display method |
JP2023147413A JP2023179472A (ja) | 2019-03-20 | 2023-09-12 | 画像表示システム、画像表示プログラム、画像表示装置、および画像表示方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2019053702A JP7349808B2 (ja) | 2019-03-20 | 2019-03-20 | 画像表示システム、画像表示プログラム、画像表示装置、および画像表示方法 |
Related Child Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2023147413A Division JP2023179472A (ja) | 2019-03-20 | 2023-09-12 | 画像表示システム、画像表示プログラム、画像表示装置、および画像表示方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2020155980A true JP2020155980A (ja) | 2020-09-24 |
JP7349808B2 JP7349808B2 (ja) | 2023-09-25 |
Family
ID=69770491
Family Applications (2)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2019053702A Active JP7349808B2 (ja) | 2019-03-20 | 2019-03-20 | 画像表示システム、画像表示プログラム、画像表示装置、および画像表示方法 |
JP2023147413A Pending JP2023179472A (ja) | 2019-03-20 | 2023-09-12 | 画像表示システム、画像表示プログラム、画像表示装置、および画像表示方法 |
Family Applications After (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2023147413A Pending JP2023179472A (ja) | 2019-03-20 | 2023-09-12 | 画像表示システム、画像表示プログラム、画像表示装置、および画像表示方法 |
Country Status (3)
Country | Link |
---|---|
US (2) | US11402655B2 (ja) |
EP (1) | EP3713229B1 (ja) |
JP (2) | JP7349808B2 (ja) |
Families Citing this family (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP7257370B2 (ja) * | 2020-11-18 | 2023-04-13 | 任天堂株式会社 | 情報処理プログラム、情報処理装置、情報処理システム、および情報処理方法 |
KR20230030126A (ko) * | 2021-08-24 | 2023-03-06 | 삼성디스플레이 주식회사 | 표시 장치 및 이의 구동 방법 |
Citations (14)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2006229383A (ja) * | 2005-02-16 | 2006-08-31 | Sony Corp | 画像データ処理方法および画像データ処理装置 |
JP2008146497A (ja) * | 2006-12-12 | 2008-06-26 | Canon Inc | 画像処理装置、画像処理方法 |
JP2011029700A (ja) * | 2009-07-21 | 2011-02-10 | Fujifilm Corp | 画像再生装置及び方法 |
JP2011175489A (ja) * | 2010-02-24 | 2011-09-08 | Konami Digital Entertainment Co Ltd | 画像生成装置、画像生成方法及びプログラム |
JP2012090063A (ja) * | 2010-10-19 | 2012-05-10 | Olympus Imaging Corp | 撮像装置 |
JP2012215934A (ja) * | 2011-03-31 | 2012-11-08 | Namco Bandai Games Inc | プログラム、情報記憶媒体、端末、及びサーバ |
JP2013038640A (ja) * | 2011-08-09 | 2013-02-21 | Nikon Corp | 撮像装置およびプログラム |
CN103413353A (zh) * | 2013-07-31 | 2013-11-27 | 天脉聚源(北京)传媒科技有限公司 | 一种资源展示方法、装置和终端 |
JP2014209768A (ja) * | 2010-03-30 | 2014-11-06 | パナソニック株式会社 | 没入位置情報生成方法 |
JP6043408B1 (ja) * | 2015-07-10 | 2016-12-14 | 株式会社アイエスエム | 疑似体験システム、疑似体験方法、ポータブルデバイスおよびその疑似体験プログラム |
JP2018514093A (ja) * | 2015-01-28 | 2018-05-31 | ネクストブイアール・インコーポレイテッド | ズーム関連方法および装置 |
WO2018168261A1 (ja) * | 2017-03-16 | 2018-09-20 | ソニー株式会社 | 制御装置、制御方法、及びプログラム |
JP2018147504A (ja) * | 2018-04-23 | 2018-09-20 | 株式会社コロプラ | 表示制御方法および当該表示制御方法をコンピュータに実行させるためのプログラム |
JP2018194889A (ja) * | 2017-05-12 | 2018-12-06 | 株式会社コロプラ | 情報処理方法、コンピュータ及びプログラム |
Family Cites Families (23)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP3802630B2 (ja) * | 1996-12-28 | 2006-07-26 | オリンパス株式会社 | 立体画像生成装置および立体画像生成方法 |
JP3619063B2 (ja) * | 1999-07-08 | 2005-02-09 | キヤノン株式会社 | 立体画像処理装置、その方法、立体視パラメータ設定装置、その方法そしてコンピュータプログラム記憶媒体 |
JP2005353047A (ja) * | 2004-05-13 | 2005-12-22 | Sanyo Electric Co Ltd | 立体画像処理方法および立体画像処理装置 |
JP5718603B2 (ja) * | 2010-09-22 | 2015-05-13 | 任天堂株式会社 | 表示制御プログラム、表示制御装置、表示制御方法および表示制御システム |
US20120200676A1 (en) * | 2011-02-08 | 2012-08-09 | Microsoft Corporation | Three-Dimensional Display with Motion Parallax |
JP5757790B2 (ja) * | 2011-06-03 | 2015-07-29 | 任天堂株式会社 | 情報処理プログラム、情報処理装置、情報処理システム、及び、情報処理方法 |
JP5770018B2 (ja) * | 2011-06-03 | 2015-08-26 | 任天堂株式会社 | 表示制御プログラム、表示制御装置、表示制御方法及び表示制御システム |
US9323325B2 (en) * | 2011-08-30 | 2016-04-26 | Microsoft Technology Licensing, Llc | Enhancing an object of interest in a see-through, mixed reality display device |
JP5586545B2 (ja) * | 2011-09-09 | 2014-09-10 | 任天堂株式会社 | ゲームシステム、携帯型ゲーム装置、情報処理部の制御方法、および情報処理部の制御プログラム |
US9646453B2 (en) * | 2011-12-23 | 2017-05-09 | Bally Gaming, Inc. | Integrating three-dimensional and two-dimensional gaming elements |
JP2014135771A (ja) | 2014-04-22 | 2014-07-24 | Nintendo Co Ltd | 立体視表示制御プログラム、立体視表示制御システム、立体視表示制御装置、および、立体視表示制御方法 |
JP6397698B2 (ja) * | 2014-08-28 | 2018-09-26 | 任天堂株式会社 | 情報処理端末、情報処理プログラム、情報処理端末システム、および情報処理方法 |
KR102178298B1 (ko) * | 2014-11-21 | 2020-11-12 | 삼성전자주식회사 | 이미지 표시 제어 방법 및 이를 지원하는 장치 |
US10448005B2 (en) * | 2015-01-22 | 2019-10-15 | Nlt Technologies, Ltd. | Stereoscopic display device and parallax image correcting method |
US10742950B2 (en) * | 2016-02-15 | 2020-08-11 | Nvidia Corporation | Collecting and processing stereoscopic digital image data to produce a parallax corrected tilted head view |
US10645374B2 (en) * | 2016-03-04 | 2020-05-05 | Seiko Epson Corporation | Head-mounted display device and display control method for head-mounted display device |
JOP20190237A1 (ar) * | 2016-04-08 | 2017-06-16 | Maxx Media Group Llc | نظام، وطريقة وبرنامج لإنتاج صور ثلاثية الأبعاد افتراضية يتم عرضها لتسقط أمام أو فوق شاشة إلكترونية |
WO2017212720A1 (ja) * | 2016-06-08 | 2017-12-14 | 株式会社ソニー・インタラクティブエンタテインメント | 画像生成装置および画像生成方法 |
US10607398B2 (en) * | 2016-07-04 | 2020-03-31 | Colopl, Inc. | Display control method and system for executing the display control method |
JP6732617B2 (ja) * | 2016-09-21 | 2020-07-29 | 株式会社ソニー・インタラクティブエンタテインメント | 情報処理装置および画像生成方法 |
JP6808484B2 (ja) * | 2016-12-28 | 2021-01-06 | キヤノン株式会社 | 画像処理装置および画像処理方法 |
JP2019074680A (ja) * | 2017-10-18 | 2019-05-16 | セイコーエプソン株式会社 | 虚像表示装置 |
JP7036572B2 (ja) * | 2017-11-02 | 2022-03-15 | マクセル株式会社 | 虚像表示装置およびそれを用いたヘッドマウントディスプレイ |
-
2019
- 2019-03-20 JP JP2019053702A patent/JP7349808B2/ja active Active
-
2020
- 2020-03-03 EP EP20160693.6A patent/EP3713229B1/en active Active
- 2020-03-04 US US16/808,734 patent/US11402655B2/en active Active
-
2022
- 2022-06-17 US US17/842,969 patent/US11835737B2/en active Active
-
2023
- 2023-09-12 JP JP2023147413A patent/JP2023179472A/ja active Pending
Patent Citations (14)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2006229383A (ja) * | 2005-02-16 | 2006-08-31 | Sony Corp | 画像データ処理方法および画像データ処理装置 |
JP2008146497A (ja) * | 2006-12-12 | 2008-06-26 | Canon Inc | 画像処理装置、画像処理方法 |
JP2011029700A (ja) * | 2009-07-21 | 2011-02-10 | Fujifilm Corp | 画像再生装置及び方法 |
JP2011175489A (ja) * | 2010-02-24 | 2011-09-08 | Konami Digital Entertainment Co Ltd | 画像生成装置、画像生成方法及びプログラム |
JP2014209768A (ja) * | 2010-03-30 | 2014-11-06 | パナソニック株式会社 | 没入位置情報生成方法 |
JP2012090063A (ja) * | 2010-10-19 | 2012-05-10 | Olympus Imaging Corp | 撮像装置 |
JP2012215934A (ja) * | 2011-03-31 | 2012-11-08 | Namco Bandai Games Inc | プログラム、情報記憶媒体、端末、及びサーバ |
JP2013038640A (ja) * | 2011-08-09 | 2013-02-21 | Nikon Corp | 撮像装置およびプログラム |
CN103413353A (zh) * | 2013-07-31 | 2013-11-27 | 天脉聚源(北京)传媒科技有限公司 | 一种资源展示方法、装置和终端 |
JP2018514093A (ja) * | 2015-01-28 | 2018-05-31 | ネクストブイアール・インコーポレイテッド | ズーム関連方法および装置 |
JP6043408B1 (ja) * | 2015-07-10 | 2016-12-14 | 株式会社アイエスエム | 疑似体験システム、疑似体験方法、ポータブルデバイスおよびその疑似体験プログラム |
WO2018168261A1 (ja) * | 2017-03-16 | 2018-09-20 | ソニー株式会社 | 制御装置、制御方法、及びプログラム |
JP2018194889A (ja) * | 2017-05-12 | 2018-12-06 | 株式会社コロプラ | 情報処理方法、コンピュータ及びプログラム |
JP2018147504A (ja) * | 2018-04-23 | 2018-09-20 | 株式会社コロプラ | 表示制御方法および当該表示制御方法をコンピュータに実行させるためのプログラム |
Also Published As
Publication number | Publication date |
---|---|
US11835737B2 (en) | 2023-12-05 |
JP7349808B2 (ja) | 2023-09-25 |
JP2023179472A (ja) | 2023-12-19 |
US20200301161A1 (en) | 2020-09-24 |
US11402655B2 (en) | 2022-08-02 |
EP3713229B1 (en) | 2023-12-13 |
EP3713229A3 (en) | 2021-01-06 |
EP3713229A2 (en) | 2020-09-23 |
US20220317471A1 (en) | 2022-10-06 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6620063B2 (ja) | 画像処理装置および画像処理方法 | |
US11835737B2 (en) | Image display system, non-transitory storage medium having stored therein image display program, image display apparatus, and image display method | |
JP6576536B2 (ja) | 情報処理装置 | |
JP5757790B2 (ja) | 情報処理プログラム、情報処理装置、情報処理システム、及び、情報処理方法 | |
WO2017051564A1 (ja) | 情報処理装置 | |
WO2016013272A1 (ja) | 情報処理装置及び情報処理方法、並びに画像表示システム | |
WO2017126433A1 (ja) | 情報処理装置およびユーザガイド提示方法 | |
JP7491300B2 (ja) | 情報処理装置、情報処理方法、及びコンピュータが読み取り可能な記録媒体 | |
JP6212666B1 (ja) | 情報処理方法、プログラム、仮想空間配信システム及び装置 | |
JP2020154793A (ja) | 画像表示システム、画像表示プログラム、表示制御装置、および画像表示方法 | |
JP7301567B2 (ja) | 画像表示システム、画像表示プログラム、画像表示装置、および画像表示方法 | |
JP7481395B2 (ja) | 情報処理装置および警告提示方法 | |
WO2017191703A1 (ja) | 画像処理装置 | |
JP6738308B2 (ja) | 情報処理方法、プログラム、仮想空間配信システム及び装置 | |
JP7492497B2 (ja) | プログラム、情報処理方法、及び情報処理装置 | |
JP6876639B2 (ja) | 表示制御装置、表示制御方法及びプログラム | |
WO2023157332A1 (ja) | 情報処理装置および調整画面表示方法 | |
WO2021200270A1 (ja) | 情報処理装置、及び情報処理方法 | |
JP6503407B2 (ja) | コンテンツ表示プログラム、コンピュータ装置、コンテンツ表示方法、及びコンテンツ表示システム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20220127 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20221221 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20230206 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20230327 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20230515 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20230815 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20230912 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7349808 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |