JP2020136821A - 情報処理装置及びその制御方法、プログラム - Google Patents
情報処理装置及びその制御方法、プログラム Download PDFInfo
- Publication number
- JP2020136821A JP2020136821A JP2019025784A JP2019025784A JP2020136821A JP 2020136821 A JP2020136821 A JP 2020136821A JP 2019025784 A JP2019025784 A JP 2019025784A JP 2019025784 A JP2019025784 A JP 2019025784A JP 2020136821 A JP2020136821 A JP 2020136821A
- Authority
- JP
- Japan
- Prior art keywords
- virtual viewpoint
- time
- information
- switching
- image
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 230000010365 information processing Effects 0.000 title claims abstract description 24
- 238000000034 method Methods 0.000 title claims description 34
- 230000004044 response Effects 0.000 claims abstract description 13
- 230000008569 process Effects 0.000 claims description 17
- 230000008859 change Effects 0.000 claims description 13
- 238000003384 imaging method Methods 0.000 claims description 5
- 230000033458 reproduction Effects 0.000 claims 20
- 238000012545 processing Methods 0.000 description 23
- 238000010586 diagram Methods 0.000 description 18
- 230000006870 function Effects 0.000 description 13
- 238000004891 communication Methods 0.000 description 7
- 238000009877 rendering Methods 0.000 description 5
- 230000005540 biological transmission Effects 0.000 description 4
- 230000000717 retained effect Effects 0.000 description 4
- 238000009434 installation Methods 0.000 description 3
- 238000000926 separation method Methods 0.000 description 3
- 238000006243 chemical reaction Methods 0.000 description 2
- 238000004040 coloring Methods 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 230000000007 visual effect Effects 0.000 description 2
- 230000004931 aggregating effect Effects 0.000 description 1
- 230000001360 synchronised effect Effects 0.000 description 1
Images
Landscapes
- Image Generation (AREA)
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
- Processing Or Creating Images (AREA)
Abstract
Description
複数の撮影装置により取得される複数の撮影画像から仮想視点画像を生成するために用いられる仮想視点と再生時刻を決定する仮想視点設定装置であって、
所定の仮想視点と再生時刻情報とを対応付けて保持する保持手段と、
仮想視点を前記所定の仮想視点へ切り替える指示に応じて、仮想視点画像の生成に用いられる仮想視点を前記所定の仮想視点に設定する第1の設定手段と、
前記指示に応じて、仮想視点画像の再生時刻を、前記所定の仮想視点に対応づけて保持されている前記再生時刻情報に基づいて設定する第2の設定手段と、を備える。
図1(a)は、第1実施形態に係る画像処理システム100の構成例を示す図である。画像処理システム100は、複数の撮影装置110と、情報処理装置の一例である画像生成装置120と、端末装置130と、を有している。複数の撮影装置110の各々と画像生成装置120は、LAN(Local Area Network)ケーブル等の通信ケーブルを介して接続している。なお、第1実施形態においては、通信ケーブルはLANケーブルであるものとするが、通信ケーブルは実施形態に限定されるものではない。
第2実施形態では、仮想視点の切り替え時に、仮想視点切り替え前の表示範囲と切り替え後の表示範囲との位置関係に基づいて、再生時刻の変更量を変える。
第3実施形態では、仮想視点の切り替え時に、切り替え前後の仮想視点の空間的な距離に応じて、再生時刻の変更量を変える。
第4実施形態では、切り替え先の仮想視点として視点保持部309に保持されている仮想視点に対応する仮想視点画像について、再生時刻と再生回数の関係を示す履歴情報を保持し、切り替え後の再生時刻を、履歴情報に基づいて設定する。例えば、仮想視点の切り替え時に、切り替え後の仮想視点の再生時刻のうち視聴回数の多い時刻が履歴情報から取得され、仮想視点画像の再生時刻に設定される。
本発明は、上述の実施形態の1以上の機能を実現するプログラムを、ネットワーク又は記憶媒体を介してシステム又は装置に供給し、そのシステム又は装置のコンピュータにおける1つ以上のプロセッサーがプログラムを読出し実行する処理でも実現可能である。また、1以上の機能を実現する回路(例えば、ASIC)によっても実現可能である。
Claims (15)
- 複数の撮影装置により取得される複数の撮影画像から仮想視点画像を生成するために用いられる仮想視点と再生時刻を決定する情報処理装置であって、
所定の仮想視点と再生時刻情報とを対応付けて保持する保持手段と、
仮想視点を前記所定の仮想視点へ切り替える指示に応じて、仮想視点画像の生成に用いられる仮想視点を前記所定の仮想視点に設定する第1の設定手段と、
前記指示に応じて、仮想視点画像の再生時刻を、前記所定の仮想視点に対応づけて保持されている前記再生時刻情報に基づいて設定する第2の設定手段と、を備えることを特徴とする情報処理装置。 - 前記再生時刻情報は、時刻差分値を含み、
前記第2の設定手段は、前記時刻差分値を用いて仮想視点の切り替え時の再生時刻を変更することにより、切り替え後の再生時刻を設定することを特徴とする請求項1に記載の情報処理装置。 - 前記第2の設定手段は、切り替え時の再生時刻から前記時刻差分値を差し引いた再生時刻を切り替え後の再生時刻として設定することを特徴とする請求項2に記載の情報処理装置。
- 前記再生時刻情報は所定の再生時刻を含み、
前記第2の設定手段は、切り替え後の再生時刻を前記所定の再生時刻に設定することを特徴とする請求項1に記載の情報処理装置。 - 仮想視点の切り替え前の仮想視点画像の表示範囲と、仮想視点の切り替え後の仮想視点画像の表示範囲との重複の状態を判定する判定手段をさらに備え、
前記第2の設定手段は、前記判定手段により判定された前記重複の状態に基づいて、切り替え時の再生時刻から切り替え後の再生時刻への変更量を異ならせることを特徴とする請求項1に記載の情報処理装置。 - 前記第2の設定手段は、前記重複が存在しない場合の切り替え後の再生時刻を、前記重複が存在する場合の切り替え後の再生時刻よりも過去の時刻に設定することを特徴とする請求項5に記載の情報処理装置。
- 前記再生時刻情報は、前記重複の状態に応じて異なる複数の時刻差分値を含み、
前記第2の設定手段は、前記重複の状態に応じて前記複数の時刻差分値から一つの時刻差分値を選択し、選択した時刻差分値を用いて切り替え時の再生時刻を変更することにより切り替え後の再生時刻を設定することを特徴とする請求項5または6に記載の情報処理装置。 - 切り替え前の仮想視点と切り替え後の仮想視点との距離を算出する算出手段をさらに備え、
前記第2の設定手段は、前記算出手段により算出された前記距離に基づいて、仮想視点の切り替え時の再生時刻から切り替え後の再生時刻への変更量を異ならせることを特徴とする請求項1に記載の情報処理装置。 - 前記距離が大きいほど、前記変更量が大きいことを特徴とする請求項8に記載の情報処理装置。
- 前記保持手段は、前記保持された仮想視点に対応する仮想視点画像の再生時刻と再生回数の関係を示す履歴情報を前記再生時刻情報として保持し、
前記第2の設定手段は、切り替え後の再生時刻を、前記履歴情報に基づいて設定することを特徴とする請求項1に記載の情報処理装置。 - 前記第2の設定手段は、前記履歴情報において再生回数が最も多い時刻を、切り替え後の再生時刻に設定することを特徴とする請求項10に記載の情報処理装置。
- 複数の撮影装置により取得される複数の撮影画像から仮想視点画像を生成する情報処理装置であって、
前記複数の撮影画像から、設定された仮想視点から観察される仮想視点画像を生成する生成手段と、
所定の仮想視点と再生時刻情報を対応付けて保持する保持手段と、
前記所定の仮想視点への切り替えの指示に応じて、前記生成手段が仮想視点画像の生成に用いている仮想視点を、前記所定の仮想視点に設定する第1の設定手段と、
前記指示に応じて、前記所定の仮想視点に対応する仮想視点画像の再生時刻を前記再生時刻情報に基づいて設定する第2の設定手段と、を備えることを特徴とする情報処理装置。 - 複数の撮影装置により取得される複数の撮影画像から仮想視点画像を生成するために用いられる仮想視点と再生時刻を決定する情報処理装置の制御方法であって、
所定の仮想視点と再生時刻情報とを対応付けて保持手段に保持する保持工程と、
仮想視点を前記所定の仮想視点へ切り替える指示に応じて、仮想視点画像の生成に用いられる仮想視点を前記所定の仮想視点に設定する第1の設定工程と、
前記指示に応じて、仮想視点画像の再生時刻を、前記所定の仮想視点に対応づけて前記保持手段に保持されている前記再生時刻情報に基づいて設定する第2の設定工程と、を備えることを特徴とする情報処理装置の制御方法。 - 複数の撮影装置により取得される複数の撮影画像から仮想視点画像を生成する情報処理装置の制御方法であって、
所定の仮想視点と再生時刻情報を対応付けて保持手段に保持する保持工程と、
前記複数の撮影画像から、設定された仮想視点から観察される仮想視点画像を生成する生成工程と、
前記所定の仮想視点への切り替えの指示に応じて、前記生成工程において仮想視点画像の生成に用いられている仮想視点を、前記所定の仮想視点に設定する第1の設定工程と、
前記指示に応じて、前記所定の仮想視点に対応する仮想視点画像の再生時刻を、前記保持手段に保持されている前記再生時刻情報に基づいて設定する第2の設定手段と、を備えることを特徴とする情報処理装置の制御方法。 - 請求項13または14に記載の制御方法の各工程をコンピュータに実行させるためのプログラム。
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2019025784A JP7229040B2 (ja) | 2019-02-15 | 2019-02-15 | 情報処理装置及びその制御方法、プログラム |
JP2023020969A JP7514346B2 (ja) | 2019-02-15 | 2023-02-14 | 画像処理装置及び方法、プログラム |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2019025784A JP7229040B2 (ja) | 2019-02-15 | 2019-02-15 | 情報処理装置及びその制御方法、プログラム |
Related Child Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2023020969A Division JP7514346B2 (ja) | 2019-02-15 | 2023-02-14 | 画像処理装置及び方法、プログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2020136821A true JP2020136821A (ja) | 2020-08-31 |
JP7229040B2 JP7229040B2 (ja) | 2023-02-27 |
Family
ID=72279141
Family Applications (2)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2019025784A Active JP7229040B2 (ja) | 2019-02-15 | 2019-02-15 | 情報処理装置及びその制御方法、プログラム |
JP2023020969A Active JP7514346B2 (ja) | 2019-02-15 | 2023-02-14 | 画像処理装置及び方法、プログラム |
Family Applications After (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2023020969A Active JP7514346B2 (ja) | 2019-02-15 | 2023-02-14 | 画像処理装置及び方法、プログラム |
Country Status (1)
Country | Link |
---|---|
JP (2) | JP7229040B2 (ja) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2022070598A1 (ja) * | 2020-09-29 | 2022-04-07 | 富士フイルム株式会社 | データ処理装置、データ処理方法、及びプログラム |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH10191261A (ja) * | 1996-12-20 | 1998-07-21 | Nippon Telegr & Teleph Corp <Ntt> | 多視点映像再生方法 |
US6839081B1 (en) * | 1994-09-09 | 2005-01-04 | Canon Kabushiki Kaisha | Virtual image sensing and generating method and apparatus |
JP2007150747A (ja) * | 2005-11-28 | 2007-06-14 | Matsushita Electric Ind Co Ltd | 受信装置及び本線映像配信装置 |
JP2011109392A (ja) * | 2009-11-17 | 2011-06-02 | Canon Inc | コンテンツ再生装置及びその制御方法 |
WO2016002134A1 (en) * | 2014-07-03 | 2016-01-07 | Sony Corporation | Information processing apparatus, information processing method, and program |
Family Cites Families (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP4439373B2 (ja) | 2004-10-15 | 2010-03-24 | 日本放送協会 | 多視点カメラ映像表現システム、装置及びプログラム |
EP3499897B1 (en) | 2016-08-10 | 2021-05-19 | Panasonic Intellectual Property Corporation of America | Camerawork generating method and video processing device |
JP6918455B2 (ja) | 2016-09-01 | 2021-08-11 | キヤノン株式会社 | 画像処理装置、画像処理方法及びプログラム |
JP6727106B2 (ja) | 2016-11-30 | 2020-07-22 | キヤノン株式会社 | 画像音響処理装置および画像音響処理方法、プログラム |
JP7079242B2 (ja) | 2017-04-25 | 2022-06-01 | パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカ | 画像表示方法及び画像表示装置 |
-
2019
- 2019-02-15 JP JP2019025784A patent/JP7229040B2/ja active Active
-
2023
- 2023-02-14 JP JP2023020969A patent/JP7514346B2/ja active Active
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6839081B1 (en) * | 1994-09-09 | 2005-01-04 | Canon Kabushiki Kaisha | Virtual image sensing and generating method and apparatus |
JPH10191261A (ja) * | 1996-12-20 | 1998-07-21 | Nippon Telegr & Teleph Corp <Ntt> | 多視点映像再生方法 |
JP2007150747A (ja) * | 2005-11-28 | 2007-06-14 | Matsushita Electric Ind Co Ltd | 受信装置及び本線映像配信装置 |
JP2011109392A (ja) * | 2009-11-17 | 2011-06-02 | Canon Inc | コンテンツ再生装置及びその制御方法 |
WO2016002134A1 (en) * | 2014-07-03 | 2016-01-07 | Sony Corporation | Information processing apparatus, information processing method, and program |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2022070598A1 (ja) * | 2020-09-29 | 2022-04-07 | 富士フイルム株式会社 | データ処理装置、データ処理方法、及びプログラム |
JP7509904B2 (ja) | 2020-09-29 | 2024-07-02 | 富士フイルム株式会社 | データ処理装置、データ処理方法、及びプログラム |
Also Published As
Publication number | Publication date |
---|---|
JP2023057124A (ja) | 2023-04-20 |
JP7514346B2 (ja) | 2024-07-10 |
JP7229040B2 (ja) | 2023-02-27 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6918455B2 (ja) | 画像処理装置、画像処理方法及びプログラム | |
JP6433559B1 (ja) | 提供装置および提供方法、プログラム | |
JP6409107B1 (ja) | 情報処理装置、情報処理方法、及びプログラム | |
JP2016144089A (ja) | 画像処理装置およびその制御方法 | |
US20210349620A1 (en) | Image display apparatus, control method and non-transitory computer-readable storage medium | |
WO2020050103A1 (ja) | 仮想視点の制御装置及びその制御方法 | |
JP2019106617A (ja) | 情報処理装置、情報処理方法及びプログラム | |
EP3621300B1 (en) | Display control device and display control method | |
KR20170138800A (ko) | 멀티 스티커를 이용한 영상 생성 방법 및 장치 | |
JP2022188095A (ja) | 情報処理装置、情報処理装置の制御方法、及びプログラム | |
JP6812181B2 (ja) | 画像処理装置、画像処理方法、及び、プログラム | |
JP7514346B2 (ja) | 画像処理装置及び方法、プログラム | |
JP2021056900A (ja) | 画像処理装置、画像処理方法、及びプログラム | |
JP7296735B2 (ja) | 画像処理装置、画像処理方法及びプログラム | |
JP2019197340A (ja) | 情報処理装置、情報処理方法、及び、プログラム | |
JP6572368B2 (ja) | 生成装置および生成方法、プログラム | |
CN111064946A (zh) | 基于室内场景的视频融合方法、***、装置和存储介质 | |
KR20130067855A (ko) | 시점 선택이 가능한 3차원 가상 콘텐츠 동영상을 제공하는 장치 및 그 방법 | |
JP4395082B2 (ja) | 映像生成装置、及びプログラム | |
JP2020102687A (ja) | 情報処理装置、画像処理装置、画像処理方法、及びプログラム | |
JP6910405B2 (ja) | 情報処理装置、情報処理方法、及びプログラム | |
JP6600399B2 (ja) | 情報処理装置、情報処理方法、及びプログラム | |
CN106780676B (zh) | 一种用于显示动画的方法和装置 | |
JP7494153B2 (ja) | 生成装置、生成方法、及び、プログラム | |
US20220245887A1 (en) | Image processing device and image processing method |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
RD01 | Notification of change of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7421 Effective date: 20210103 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20210113 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20220215 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20221222 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20230116 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20230214 |
|
R151 | Written notification of patent or utility model registration |
Ref document number: 7229040 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |