JP2020144456A - 情報処理装置、情報処理方法ならびにプログラム。 - Google Patents
情報処理装置、情報処理方法ならびにプログラム。 Download PDFInfo
- Publication number
- JP2020144456A JP2020144456A JP2019038764A JP2019038764A JP2020144456A JP 2020144456 A JP2020144456 A JP 2020144456A JP 2019038764 A JP2019038764 A JP 2019038764A JP 2019038764 A JP2019038764 A JP 2019038764A JP 2020144456 A JP2020144456 A JP 2020144456A
- Authority
- JP
- Japan
- Prior art keywords
- change
- keyframe
- key frame
- state
- information processing
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 230000010365 information processing Effects 0.000 title claims abstract description 37
- 238000003672 processing method Methods 0.000 title claims 3
- 238000000034 method Methods 0.000 claims description 45
- 230000036544 posture Effects 0.000 description 44
- 238000004364 calculation method Methods 0.000 description 11
- 238000010586 diagram Methods 0.000 description 5
- 238000004590 computer program Methods 0.000 description 4
- 230000001360 synchronised effect Effects 0.000 description 4
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 125000002066 L-histidyl group Chemical group [H]N1C([H])=NC(C([H])([H])[C@](C(=O)[*])([H])N([H])[H])=C1[H] 0.000 description 1
- 230000015572 biosynthetic process Effects 0.000 description 1
- 238000012790 confirmation Methods 0.000 description 1
- 230000003247 decreasing effect Effects 0.000 description 1
- 238000003384 imaging method Methods 0.000 description 1
- 238000003786 synthesis reaction Methods 0.000 description 1
- 230000002194 synthesizing effect Effects 0.000 description 1
Images
Landscapes
- Processing Or Creating Images (AREA)
Abstract
Description
仮想視点の動きを定義するカメラパスを編集する情報処理装置であって、
前記カメラパスを構成するための、任意の時刻のキーフレームの指定と、前記指定されたキーフレームに対応する仮想視点の状態の指定とを受け付ける指定手段と、
前記指定手段により指定されたキーフレームの前後における仮想視点の状態の変化量を取得する取得手段と、
前記指定されたキーフレームの前後において前記取得手段により取得された変化量の差が小さくなるように、前記カメラパスを構成するフレーム列における前記指定されたキーフレームの位置を変更する変更手段と、を備える。
時刻変更部208は、キーフレーム間の仮想視点の状態の変化量(例えば、位置・姿勢の変化量)に応じて、追加されたキーフレームの前後で変化量の差が小さくなるように、当該キーフレームの時刻を変更する。より具体的には、時刻変更部208は、例えば、中間点のキーフレームの前後で、カメラの位置・姿勢の時間当たりの変化量が等しくなるように、当該中間点のキーフレームの時刻を変更する。なお、時刻変更部208は、キーフレームの時刻を変更する時刻変更モードの場合に動作する。
0.8≦{L1(T2−T3)}/{L2(T3−T1)}≦1/0.8 ...(式1)
を用いてキーフレームの時刻を変更するか否かを判定する。ここで、T3は、キーフレーム504の変更前の時刻である。(式1)を満たさない場合、時刻変更部208は、上述した方法に従って追加された中間点のキーフレームの時刻をT3aに変更する。
フレーム数変更部209は、キーフレーム間の仮想カメラの状態(位置・姿勢)のフレーム当たりの変化量の差が小さくなるようにキーフレーム間の中間フレームの枚数を変更する。具体的には、本実施形態では、中間点のキーフレームの前後で、仮想カメラの状態(位置・姿勢)のフレーム当たりの変化量が等しくなるように、中間フレームの枚数を変更する。なお、フレーム数変更部209は、キーフレーム間における中間フレームの数を変更するフレーム数変更モードにおいて動作する。なお、仮想カメラの状態(仮想視点の状態)は上述したとおりである。
割り当て部210は、時刻変更部208またはフレーム数変更部209を経て確定された中間フレームにカメラの位置・姿勢を割り当てる。例えば、N1枚の中間フレームへの仮想カメラの状態(位置・姿勢)の割り当ては以下のように行われる。まず、割り当て部210は、キーフレーム502における仮想カメラの状態506とキーフレーム504における仮想カメラの状態508の間のカメラパス505をN1+1個に等分割し、分割点における仮想カメラの状態をN1枚の中間フレームに順に割り当てる。キーフレーム504とキーフレーム503の間の中間フレームに対しても同様に仮想カメラの状態(位置・姿勢)を割り当ることができる。
図6は、本実施形態にかかる情報処理装置100の処理手順を説明するフローチャートである。変更モード管理部207により時刻変更モードが選択されている場合の処理について説明する。
図9は、図6のステップS610の、フレーム数変更モードにおける処理手順を説明するフローチャートである。以下、図9を用いて、カメラパス変更モードが、キーフレーム間に挿入する中間フレームの数を変更するフレーム数変更モードの場合の動作について説明する。なお、始点および終点のキーフレームを設定する処理、中間点のキーフレームを設定後に中間フレームへカメラの位置・姿勢の割り当てる処理、カメラパスを出力する処理は、時刻変更モードの場合(図6)と同様である。
上述した時刻変更モードとフレーム数変更モードは、組み合わせて用いることも可能である。すなわち、キーフレームにおける仮想視点の位置及び向きの指定に応じて、中間フレームの追加とキーフレームの時刻の変更との両方が実行されてもよい。
本発明は、上述の実施形態の1以上の機能を実現するプログラムを、ネットワーク又は記憶媒体を介してシステム又は装置に供給し、そのシステム又は装置のコンピュータにおける1つ以上のプロセッサーがプログラムを読出し実行する処理でも実現可能である。また、1以上の機能を実現する回路(例えば、ASIC)によっても実現可能である。
Claims (17)
- 仮想視点の動きを定義するカメラパスを編集する情報処理装置であって、
前記カメラパスを構成するための、任意の時刻のキーフレームの指定と、前記指定されたキーフレームに対応する仮想視点の状態の指定とを受け付ける指定手段と、
前記指定手段により指定されたキーフレームの前後における仮想視点の状態の変化量を取得する取得手段と、
前記指定されたキーフレームの前後において前記取得手段により取得された変化量の差が小さくなるように、前記カメラパスを構成するフレーム列における前記指定されたキーフレームの位置を変更する変更手段と、を備えることを特徴とする情報処理装置。 - 前記取得手段は、前記指定されたキーフレームの前後における、仮想視点の状態の時間当たりの変化量を取得することを特徴とする請求項1に記載の情報処理装置。
- 前記取得手段は、前記指定されたキーフレームの時刻と状態、前記指定されたキーフレームの前後に隣接するキーフレームの時刻と状態に基づいて、仮想視点の状態の時間当たりの変化量を取得することを特徴とする請求項2に記載の情報処理装置。
- 前記取得手段は、前記指定されたキーフレームの所定時間前からの状態の変化量と、前記指定されたキーフレームから所定時間後までの状態の変化量を取得することを特徴とする請求項2に記載の情報処理装置。
- 前記変更手段は、前記指定されたキーフレームの時刻を変更することを特徴とする請求項2乃至4のいずれか1項に記載の情報処理装置。
- 前記変更手段は、前記指定されたキーフレームの前後において仮想視点の状態の時間当たりの変化量が等しくなるように、前記指定されたキーフレームの時刻を変更することを特徴とする請求項5に記載の情報処理装置。
- 前記取得手段は、前記指定されたキーフレームの前後における、仮想視点の状態のフレーム当たりの変化量を取得することを特徴とする請求項1に記載の情報処理装置。
- 前記取得手段は、前記指定されたキーフレームの時刻と状態、前記指定されたキーフレームの前後に隣接するキーフレームとの間のフレーム数と前記隣接するキーフレームの状態に基づいて、仮想視点の状態のフレーム当たりの変化量を取得することを特徴とする請求項7に記載の情報処理装置。
- 前記変更手段は、前記指定されたキーフレームと前記隣接するキーフレームの間のフレーム数を変更することを特徴とする請求項8に記載の情報処理装置。
- 前記変更手段は、前記指定されたキーフレームの前後において仮想視点の状態のフレーム当たりの変化量が等しくなるように、前記フレーム数を変更することを特徴とする請求項9に記載の情報処理装置。
- 前記指定されたフレームの前後のうち、前記変化量の大きい方にフレームを追加することを特徴とする請求項10に記載の情報処理装置。
- キーフレーム間のカメラの位置および/または姿勢を補間する補間手段をさらに備えることを特徴とする請求項1乃至11のいずれか1項に記載の情報処理装置。
- 前記指定されたキーフレームの時刻と仮想視点の状態に対応する仮想視点画像を表示する表示手段をさらに備えることを特徴とする請求項1乃至12のいずれか1項に記載の情報処理装置。
- 前記フレーム列と、前記フレーム列におけるキーフレームの位置とを模式的に表示する表示手段をさらに備えることを特徴とする請求項1乃至13のいずれか1項に記載の情報処理装置。
- 前記変更手段は、前記変化量の差が所定値以上の場合に前記変更を実行することを特徴とする請求項1乃至14のいずれか1項に記載の情報処理装置。
- 仮想視点の動きを定義するカメラパスを編集するための情報処理方法であって、
前記カメラパスを構成するための、任意の時刻のキーフレームの指定と、前記指定されたキーフレームに対応する仮想視点の状態の指定とを受け付ける指定工程と、
前記指定工程により指定されたキーフレームの前後における仮想視点の状態の変化量を取得する取得工程と、
前記指定されたキーフレームの前後において前記取得工程により取得された変化量の差が小さくなるように、前記カメラパスを構成するフレーム列における前記指定されたキーフレームの位置を変更する変更工程と、を備えることを特徴とする情報処理方法。 - コンピュータを、請求項1乃至15のいずれか1項に記載された情報処理装置の各手段として機能させるためのプログラム。
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2019038764A JP7277184B2 (ja) | 2019-03-04 | 2019-03-04 | 情報処理装置、情報処理方法ならびにプログラム。 |
US16/784,731 US11057609B2 (en) | 2019-02-27 | 2020-02-07 | Information processing apparatus, information processing method, and computer readable storage medium for determining a moving path of virtual viewpoint |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2019038764A JP7277184B2 (ja) | 2019-03-04 | 2019-03-04 | 情報処理装置、情報処理方法ならびにプログラム。 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2020144456A true JP2020144456A (ja) | 2020-09-10 |
JP7277184B2 JP7277184B2 (ja) | 2023-05-18 |
Family
ID=72353623
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2019038764A Active JP7277184B2 (ja) | 2019-02-27 | 2019-03-04 | 情報処理装置、情報処理方法ならびにプログラム。 |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP7277184B2 (ja) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2022259618A1 (ja) | 2021-06-08 | 2022-12-15 | ソニーグループ株式会社 | 情報処理装置、情報処理方法およびプログラム |
Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2015192426A (ja) * | 2014-03-28 | 2015-11-02 | ブラザー工業株式会社 | 情報処理装置及びプログラム |
JP2018046448A (ja) * | 2016-09-15 | 2018-03-22 | キヤノン株式会社 | 画像処理装置および画像処理方法 |
-
2019
- 2019-03-04 JP JP2019038764A patent/JP7277184B2/ja active Active
Patent Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2015192426A (ja) * | 2014-03-28 | 2015-11-02 | ブラザー工業株式会社 | 情報処理装置及びプログラム |
JP2018046448A (ja) * | 2016-09-15 | 2018-03-22 | キヤノン株式会社 | 画像処理装置および画像処理方法 |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2022259618A1 (ja) | 2021-06-08 | 2022-12-15 | ソニーグループ株式会社 | 情報処理装置、情報処理方法およびプログラム |
Also Published As
Publication number | Publication date |
---|---|
JP7277184B2 (ja) | 2023-05-18 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6433559B1 (ja) | 提供装置および提供方法、プログラム | |
US11057609B2 (en) | Information processing apparatus, information processing method, and computer readable storage medium for determining a moving path of virtual viewpoint | |
JP4285422B2 (ja) | 動画像生成システム、動画像生成装置、動画像生成方法、プログラム、及び記録媒体 | |
US6307561B1 (en) | Animation generating apparatus and method | |
CN112640472B (zh) | 信息处理设备、信息处理方法和存储介质 | |
US6924821B2 (en) | Processing pipeline responsive to input and output frame rates | |
JP2021152724A (ja) | 情報処理装置、情報処理方法、およびプログラム | |
JP7277184B2 (ja) | 情報処理装置、情報処理方法ならびにプログラム。 | |
JP6572368B2 (ja) | 生成装置および生成方法、プログラム | |
JPH0950540A (ja) | 画像生成方法 | |
JP2021197082A (ja) | 情報処理装置、情報処理装置の制御方法及びプログラム | |
JP2022014358A (ja) | 情報処理装置、情報処理装置の制御方法およびプログラム | |
JP2006221489A (ja) | Cgアニメーション製作システム | |
JP7296735B2 (ja) | 画像処理装置、画像処理方法及びプログラム | |
KR20230017745A (ko) | 화상 처리장치, 화상 처리방법, 및 기억매체 | |
JP2021033347A (ja) | 画像処理装置、画像処理方法及びプログラム | |
JP7204843B2 (ja) | 送信装置および送信方法、プログラム | |
JP2020010347A (ja) | 生成装置および生成方法、プログラム | |
JP2022171435A (ja) | 情報処理装置及びその制御方法、プログラム | |
JP2020095465A (ja) | 画像処理装置、画像処理方法、及び、プログラム | |
JP2023173577A (ja) | 情報処理装置、情報処理方法、およびプログラム | |
JP2022019341A (ja) | 情報処理装置、情報処理方法、及びプログラム | |
Fratarcangeli et al. | Fast facial motion cloning in mpeg-4 | |
JP2024014517A (ja) | 情報処理システム、情報処理方法及びコンピュータプログラム | |
JP2021179687A (ja) | 情報処理装置、情報処理方法およびプログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
RD01 | Notification of change of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7421 Effective date: 20210103 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20210113 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20220303 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20230306 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20230407 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20230508 |
|
R151 | Written notification of patent or utility model registration |
Ref document number: 7277184 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |