JP2020173529A - 情報処理装置、情報処理方法、及びプログラム - Google Patents
情報処理装置、情報処理方法、及びプログラム Download PDFInfo
- Publication number
- JP2020173529A JP2020173529A JP2019074045A JP2019074045A JP2020173529A JP 2020173529 A JP2020173529 A JP 2020173529A JP 2019074045 A JP2019074045 A JP 2019074045A JP 2019074045 A JP2019074045 A JP 2019074045A JP 2020173529 A JP2020173529 A JP 2020173529A
- Authority
- JP
- Japan
- Prior art keywords
- viewpoint
- virtual viewpoint
- virtual
- information
- image
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 230000010365 information processing Effects 0.000 title claims abstract description 25
- 238000003672 processing method Methods 0.000 title claims 3
- 230000005484 gravity Effects 0.000 claims description 7
- 230000003287 optical effect Effects 0.000 claims description 3
- 238000000034 method Methods 0.000 description 47
- 238000003384 imaging method Methods 0.000 description 13
- 238000004364 calculation method Methods 0.000 description 10
- 238000010586 diagram Methods 0.000 description 8
- 239000011159 matrix material Substances 0.000 description 3
- 230000006835 compression Effects 0.000 description 2
- 238000007906 compression Methods 0.000 description 2
- 230000006870 function Effects 0.000 description 2
- 239000013589 supplement Substances 0.000 description 2
- 230000000007 visual effect Effects 0.000 description 2
- ABCGFHPGHXSVKI-UHFFFAOYSA-O meso-tetrakis(n-methyl-4-pyridyl)porphine(4+) Chemical compound C1=C[N+](C)=CC=C1C(C1=CC=C(N1)C(C=1C=C[N+](C)=CC=1)=C1C=CC(=N1)C(C=1C=C[N+](C)=CC=1)=C1C=CC(N1)=C1C=2C=C[N+](C)=CC=2)=C2N=C1C=C2 ABCGFHPGHXSVKI-UHFFFAOYSA-O 0.000 description 1
- 238000003825 pressing Methods 0.000 description 1
- 238000009877 rendering Methods 0.000 description 1
- 230000004044 response Effects 0.000 description 1
- 230000035945 sensitivity Effects 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/20—Image signal generators
- H04N13/282—Image signal generators for generating image signals corresponding to three or more geometrical viewpoints, e.g. multi-view systems
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/222—Studio circuitry; Studio devices; Studio equipment
- H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
- H04N5/2628—Alteration of picture size, shape, position or orientation, e.g. zooming, rotation, rolling, perspective, translation
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
- H04N13/106—Processing image signals
- H04N13/111—Transformation of image signals corresponding to virtual viewpoints, e.g. spatial image interpolation
- H04N13/117—Transformation of image signals corresponding to virtual viewpoints, e.g. spatial image interpolation the virtual viewpoint locations being selected by the viewers or determined by viewer tracking
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
- H04N13/106—Processing image signals
- H04N13/122—Improving the 3D impression of stereoscopic images by modifying image signal contents, e.g. by filtering or adding monoscopic depth cues
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Processing Or Creating Images (AREA)
- Studio Devices (AREA)
Abstract
Description
本実施形態では、同一シーンにおいて複数の仮想視点画像を同時に表示し、表示されている仮想視点画像のうちの1つの仮想視点画像における仮想カメラを操作することにより、他の仮想視点画像における仮想カメラを操作する例について説明する。
ここでは、他の仮想カメラの視点の制御方法について説明する。他の仮想カメラの視点の制御方法を説明する上で、先ず、ユーザにおける表示制御装置100の使用例について、図5を用いて説明する。なお、図5では、タッチパネルと表示スクリーンが表示制御装置100と一体に構成される例を示している。
上述の実施形態1では、同一シーンにおいて複数の仮想視点映像を同時に表示し、そのうちの1つの仮想視点映像に対する視点操作により他の仮想カメラの視点を操作する(連動させる)例を説明した。これにより、視聴者は複数の仮想視点映像における仮想視点の位置及び姿勢を容易に指定することができ、視聴者のシーン全体の理解度を向上させることを実現している。但し、上述の実施形態1では、同一のオブジェクトに関して、基準視点における視点操作前後のサイズ比と他の仮想カメラの視点における視点操作前後のサイズ比は変化してしまう。
上述の実施形態1と実施形態2では、基準視点と他の仮想カメラで同一オブジェクトを視ている場合について説明した。即ち、上述の実施形態1と実施形態2では、オブジェクトが同一であることを前提に、例えば、基準視点と他の仮想カメラで視点操作に用いる回転基点等も同一のものを用いることとして説明した。本実施形態では、基準視点と他の仮想カメラで異なるオブジェクトを視ている場合について説明する。以下、図10及び図11を用いて、本実施形態に係る表示制御装置において実行される処理について、主に実施形態1との差異に着目して説明する。
本発明は、上述の実施形態の1以上の機能を実現するプログラムを、ネットワーク又は記憶媒体を介してシステム又は装置に供給し、そのシステム又は装置のコンピュータにおける1つ以上のプロセッサーがプログラムを読出し実行する処理でも実現可能である。また、1以上の機能を実現する回路(例えば、ASIC)によっても実現可能である。
Claims (13)
- 表示装置に表示される複数の仮想視点画像にそれぞれ対応する複数の仮想視点を制御する情報処理装置であって、
前記複数の仮想視点画像のうち、1の仮想視点画像に対応する仮想視点を指定するための操作情報を取得する操作情報取得手段と、
前記操作情報に基づいて、前記複数の仮想視点画像にそれぞれ対応する複数の仮想視点を制御する視点制御手段と、
を備えることを特徴とする情報処理装置。 - 前記複数の仮想視点画像における仮想視点情報を取得する視点情報取得手段をさらに備え、
前記視点制御手段は、前記操作情報及び前記複数の仮想視点画像における仮想視点情報に基づいて前記複数の仮想視点画像における仮想視点情報を新たに導出することで、前記複数の仮想視点画像における仮想視点を制御することを特徴とする請求項1に記載の情報処理装置。 - 前記視点制御手段は、前記1の仮想視点画像において操作された仮想視点を基準視点として設定し、当該基準視点と他の仮想視点画像における仮想視点とで同一の3次元点を基準に、前記複数の仮想視点画像における仮想視点情報を導出することを特徴とする請求項2に記載の情報処理装置。
- 前記視点制御手段は、前記1の仮想視点画像の画像中心を始点として3次元空間に光線を飛ばし、シーン内のオブジェクトに前記光線が衝突した点を、前記3次元点として設定することを特徴とする請求項3に記載の情報処理装置。
- 前記視点制御手段は、前記他の仮想視点画像における仮想視点の注視点を前記3次元点に一致させた上で、前記複数の仮想視点画像における仮想視点情報を導出することを特徴とする請求項3又は4に記載の情報処理装置。
- 前記視点制御手段は、同一オブジェクトで、前記1の仮想視点画像における仮想視点の操作前後のオブジェクトのサイズ比と、他の仮想視点画像における仮想視点の操作前後のオブジェクトのサイズ比とが略同一となるように、前記複数の仮想視点画像における仮想視点情報を補正して新たに導出することを特徴とする請求項2から5のいずれか1項に記載の情報処理装置。
- 前記視点制御手段は、シーン内のオブジェクトの位置情報を含むトラッキング情報を取得するトラッキング情報取得手段を有することを特徴とする請求項2に記載の情報処理装置。
- 前記視点制御手段は、前記1の仮想視点画像の画像中心の近傍にあるオブジェクトの位置情報と他の仮想視点画像の画像中心の近傍にあるオブジェクトの位置情報に基づいて、各々の仮想視点情報を導出することを特徴とする請求項7に記載の情報処理装置。
- 前記オブジェクトの位置情報は、当該オブジェクトの重心位置に関する情報、又は当該オブジェクトの端部の位置に関する情報を含むことを特徴とする請求項8に記載の情報処理装置。
- 前記仮想視点情報は、少なくとも前記仮想視点の位置及び姿勢を示す外部パラメータに関する情報、及び前記仮想視点の光学的な特性を示す内部パラメータに関する情報を含むことを特徴とする請求項2から9のいずれか1項に記載の情報処理装置。
- 前記複数の仮想視点画像を表示させるとともに、前記1の仮想視点画像における仮想視点の操作を他の仮想視点画像における仮想視点と連動させるか否かを視聴者に選択させるための選択手段を表示させる表示制御手段を備えることを特徴とする、請求項1から10のいずれか1項に記載の情報処理装置。
- 表示装置に表示される複数の仮想視点画像にそれぞれ対応する複数の仮想視点を制御する情報処理方法であって、
前記複数の仮想視点画像のうち、1の仮想視点画像に対応する仮想視点を指定するための操作情報を取得する操作情報取得ステップと、
前記操作情報に基づいて、前記複数の仮想視点画像にそれぞれ対応する複数の仮想視点を制御する視点制御ステップと、
を含む情報処理方法。 - コンピュータを請求項1から11のいずれか一項に記載の情報処理装置として機能させるためのプログラム。
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2019074045A JP7353782B2 (ja) | 2019-04-09 | 2019-04-09 | 情報処理装置、情報処理方法、及びプログラム |
US16/818,455 US11477432B2 (en) | 2019-04-09 | 2020-03-13 | Information processing apparatus, information processing method and storage medium |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2019074045A JP7353782B2 (ja) | 2019-04-09 | 2019-04-09 | 情報処理装置、情報処理方法、及びプログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2020173529A true JP2020173529A (ja) | 2020-10-22 |
JP7353782B2 JP7353782B2 (ja) | 2023-10-02 |
Family
ID=72748263
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2019074045A Active JP7353782B2 (ja) | 2019-04-09 | 2019-04-09 | 情報処理装置、情報処理方法、及びプログラム |
Country Status (2)
Country | Link |
---|---|
US (1) | US11477432B2 (ja) |
JP (1) | JP7353782B2 (ja) |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2022181175A1 (ja) * | 2021-02-25 | 2022-09-01 | ソニーグループ株式会社 | 情報処理装置、情報処理方法、プログラム、表示システム |
JP2022158959A (ja) * | 2021-03-31 | 2022-10-17 | ディズニー エンタープライゼス インコーポレイテッド | 3dデジタルモデル表面のレンダリングおよび変換 |
Families Citing this family (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP7291224B2 (ja) * | 2019-07-26 | 2023-06-14 | 富士フイルム株式会社 | 情報処理装置、情報処理方法、及びプログラム |
JP7418101B2 (ja) * | 2019-07-26 | 2024-01-19 | キヤノン株式会社 | 情報処理装置、情報処理方法、及びプログラム |
KR102484772B1 (ko) * | 2020-11-03 | 2023-01-05 | 네이버랩스 주식회사 | 맵 생성 방법 및 이를 이용한 이미지 기반 측위 시스템 |
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2009258862A (ja) * | 2008-04-14 | 2009-11-05 | Toshiba Corp | 映像表示装置及び映像表示方法 |
JP2016119513A (ja) * | 2014-12-18 | 2016-06-30 | ヤフー株式会社 | 画像処理装置、画像処理方法及び画像処理プログラム |
JP2018073105A (ja) * | 2016-10-28 | 2018-05-10 | キヤノン株式会社 | 画像処理装置、画像処理システム、画像処理方法及びプログラム |
JP2018092491A (ja) * | 2016-12-06 | 2018-06-14 | キヤノン株式会社 | 情報処理装置、その制御方法、およびプログラム |
WO2018199052A1 (ja) * | 2017-04-25 | 2018-11-01 | パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカ | 画像表示方法及び画像表示装置 |
WO2019021375A1 (ja) * | 2017-07-25 | 2019-01-31 | 富士通株式会社 | 映像生成プログラム、映像生成方法および映像生成装置 |
Family Cites Families (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2005242606A (ja) | 2004-02-26 | 2005-09-08 | Olympus Corp | 画像生成装置、画像生成プログラム、及び画像生成方法 |
US8814678B2 (en) * | 2011-06-03 | 2014-08-26 | Nintendo Co., Ltd. | Apparatus and method for gyro-controlled gaming viewpoint with auto-centering |
JP6148887B2 (ja) * | 2013-03-29 | 2017-06-14 | 富士通テン株式会社 | 画像処理装置、画像処理方法、及び、画像処理システム |
JP6163899B2 (ja) * | 2013-06-11 | 2017-07-19 | ソニー株式会社 | 情報処理装置、撮像装置、情報処理方法、及びプログラム |
JP2015193280A (ja) * | 2014-03-31 | 2015-11-05 | 富士通テン株式会社 | 車両制御装置及び車両制御方法 |
JP6938123B2 (ja) * | 2016-09-01 | 2021-09-22 | キヤノン株式会社 | 表示制御装置、表示制御方法及びプログラム |
JP6347286B2 (ja) * | 2016-11-21 | 2018-06-27 | 株式会社コナミデジタルエンタテインメント | ゲーム制御装置、ゲームシステム、及びプログラム |
WO2019012817A1 (ja) * | 2017-07-14 | 2019-01-17 | ソニー株式会社 | 画像処理装置、画像処理装置の画像処理方法、プログラム |
-
2019
- 2019-04-09 JP JP2019074045A patent/JP7353782B2/ja active Active
-
2020
- 2020-03-13 US US16/818,455 patent/US11477432B2/en active Active
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2009258862A (ja) * | 2008-04-14 | 2009-11-05 | Toshiba Corp | 映像表示装置及び映像表示方法 |
JP2016119513A (ja) * | 2014-12-18 | 2016-06-30 | ヤフー株式会社 | 画像処理装置、画像処理方法及び画像処理プログラム |
JP2018073105A (ja) * | 2016-10-28 | 2018-05-10 | キヤノン株式会社 | 画像処理装置、画像処理システム、画像処理方法及びプログラム |
JP2018092491A (ja) * | 2016-12-06 | 2018-06-14 | キヤノン株式会社 | 情報処理装置、その制御方法、およびプログラム |
WO2018199052A1 (ja) * | 2017-04-25 | 2018-11-01 | パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカ | 画像表示方法及び画像表示装置 |
WO2019021375A1 (ja) * | 2017-07-25 | 2019-01-31 | 富士通株式会社 | 映像生成プログラム、映像生成方法および映像生成装置 |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2022181175A1 (ja) * | 2021-02-25 | 2022-09-01 | ソニーグループ株式会社 | 情報処理装置、情報処理方法、プログラム、表示システム |
JP2022158959A (ja) * | 2021-03-31 | 2022-10-17 | ディズニー エンタープライゼス インコーポレイテッド | 3dデジタルモデル表面のレンダリングおよび変換 |
JP7333437B2 (ja) | 2021-03-31 | 2023-08-24 | ディズニー エンタープライゼス インコーポレイテッド | 3dデジタルモデル表面のレンダリングおよび変換 |
Also Published As
Publication number | Publication date |
---|---|
JP7353782B2 (ja) | 2023-10-02 |
US11477432B2 (en) | 2022-10-18 |
US20200329227A1 (en) | 2020-10-15 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP7353782B2 (ja) | 情報処理装置、情報処理方法、及びプログラム | |
US11282264B2 (en) | Virtual reality content display method and apparatus | |
JP7277085B2 (ja) | 情報処理装置、情報処理方法及びプログラム | |
JP7164968B2 (ja) | 画像処理装置、画像処理装置の制御方法及びプログラム | |
KR102539427B1 (ko) | 화상 처리장치, 화상 처리방법, 및 기억매체 | |
CN110956695B (zh) | 信息处理装置、信息处理方法和存储介质 | |
JP6126821B2 (ja) | 画像生成方法、画像表示方法、画像生成プログラム、画像生成システム、および画像表示装置 | |
JP6310898B2 (ja) | 画像処理装置、情報処理装置、および画像処理方法 | |
JP7267753B2 (ja) | 制御装置、制御方法、及びプログラム | |
KR101713875B1 (ko) | 프로젝터 투사 환경하에서의 사용자 시점을 고려한 가상공간 구현 방법 및 시스템 | |
TW201921318A (zh) | 用於產生場景之舖磚式三維影像表示之設備及方法 | |
JP2021034885A (ja) | 画像生成装置、画像表示装置および画像処理方法 | |
JP6719596B2 (ja) | 画像生成装置、及び画像表示制御装置 | |
US10902554B2 (en) | Method and system for providing at least a portion of content having six degrees of freedom motion | |
JP6859763B2 (ja) | プログラム、情報処理装置 | |
JP7447403B2 (ja) | 情報処理装置、情報処理システム、情報処理方法及びプログラム | |
US20220044351A1 (en) | Method and system for providing at least a portion of content having six degrees of freedom motion | |
GB2575932A (en) | Method and system for providing at least a portion of content having six degrees of freedom motion | |
JP6025519B2 (ja) | 画像処理装置および画像処理方法 | |
JP2022067171A (ja) | 生成装置、生成方法、及び、プログラム | |
JP2012043345A (ja) | 画像処理装置および方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20220405 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20230406 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20230509 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20230627 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20230822 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20230920 |
|
R151 | Written notification of patent or utility model registration |
Ref document number: 7353782 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |