JP2007267396A - データ処理装置とデータ処理方法およびプログラム - Google Patents

Abstract

【課題】基準フレームレートで生成した素材とフレームレートを可変した素材とを用いた編集処理を容易に行う。
【解決手段】素材データに基づいた画像を素材管理ブラウザ、ストーリーボードおよびタイムラインに表示する際に、フレームレート情報が付属情報として連結されている素材データと、フレームレート情報が連結されていない素材データが識別可能となるよう表示画像を制御する。フレームレート情報が付属情報として連結されている時、フレームレート情報に基づいて決定された再生可能速度範囲が表示される。再生速度表示、再生可能速度範囲内で再生速度を可変させるための速度可変コンソール表示が設けられ、設定された再生速度での再生画像が素材画像表示に表示される。
【選択図】 図７

Description

この発明は、編集画像表示制御装置と編集画像表示制御方法およびプログラムに関する。詳しくは、素材データにフレームレート情報が付属情報として連結されているか否かを検出して、フレームレート情報が付属情報として連結されている素材データと、フレームレート情報が付属情報として連結されていない素材データとが識別して表示されるように、編集用の表示画像の状態を制御するものである。

従来、放送や通信網を介した配信あるいは記録媒体としての流通等で用いる画像あるいは画像音声のコンテンツ生成では、制作者の意図する効果を出すため、３０フレーム/秒などの基準フレームレートで生成したコンテンツだけでなく、動きの速度を変えたコンテンツも用いられている。

この動きの速度を変えたコンテンツの生成では、例えば基準フレームレートに対してフレームレートを高く設定してコンテンツを生成し、このコンテンツを基準フレームレートで再生することにより、実際よりも動きを遅く表現したコンテンツを生成する。また、基準フレームレートに対してフレームレートを低く設定してコンテンツを生成し、このコンテンツを基準フレームレートで再生することにより、動きを実際より速く表現したコンテンツを生成する。さらに、設定するフレームレートや再生時のフレームレートを調整することで、動きの速度を自由に可変できる。

このような動きの速度を変えたコンテンツと、基準フレームレートで生成したコンテンツとを用いて編集処理を行うことで、制作者の意図する効果が得られるコンテンツの生成が行われている。

また、フレームレートを可変したコンテンツを生成できるように、時間軸の伸張や圧縮を行うことができるビデオカメラが、例えば特許文献１で示されている。

特開平１１-１７７９３０号公報

ところで、上述のように基準フレームレートで生成したコンテンツと動きの速度を変えたコンテンツとを素材として用いることにより編集処理を行う場合、単にコンテンツの画像を表示するだけでは、各コンテンツがどのようなフレームレートで生成されているかを編集時に容易に識別することができない。また、動きの速度を変えたコンテンツに対して速度の変更処理を行う場合、画質の低下を招くことなく容易に速度変更を行うことができるか否かの識別も行うことができない。例えば設定されたフレームレート（以下「設定フレームレート」という）が基準フレームレートに対して１０倍とされた場合、この設定フレームレートで生成されたコンテンツを基準フレームレートで再生すると、動きを１／１０倍速として表現したコンテンツとなる。ここで、動きを１／５倍速として表現したいときには、設定フレームレートが基準フレームレートに対して１０倍であることから、１フレーム毎に間引きを行うことで、画質を劣化させることなく簡単に速度変更を行うことができると識別できる。しかし、表示された画像だけでは、画質を劣化させることなく簡単に速度変更を行うことができるか否かを識別することができない。

そこで、この発明では、基準フレームレートで生成した素材とフレームレート
を可変した素材とを用いて容易に編集処理を行うことができるように編集表示画像の状態を制御する編集画像表示制御装置と編集画像表示制御方法およびプログラムを提供するものである。

この発明に係る編集画像表示制御装置は、素材データにフレームレート情報が付属情報として連結されているか否かを検出する検出手段と、フレームレート情報が付属情報として連結されている素材データと、フレームレート情報が付属情報として連結されていない素材データとが識別して表示されるように、編集用の表示画像の状態を制御する制御手段とを有するものである。

また、この発明に係る編集画像表示制御方法は、素材データにフレームレート情報が付属情報として連結されているか否かを検出する検出ステップと、フレームレート情報が付属情報として連結されている素材データと、フレームレート情報が付属情報として連結されていない素材データとが識別して表示されるように、編集用の表示画像の状態を制御する表示制御ステップとを有するものである。

さらに、この発明に係るプログラムは、素材データにフレームレート情報が付属情報として連結されているか否かを検出するするステップと、フレームレート情報が付属情報として連結されている素材データと、フレームレート情報が付属情報として連結されていない素材データとが識別して表示されるように、編集用の表示画像の状態を制御するステップをコンピュータに実行させるものである。

この発明においては、素材データを取り込み、取り込んだ素材データを用いて編集処理が行われるとき、素材データにフレームレート情報が付属情報として連結されているか否かが検出されて、素材データにフレームレート情報が連結されている素材データと、フレームレート情報が連結されていない素材データを識別可能に表示される。例えば、素材データの一覧を示す素材管理表示において、付属情報が連結されている素材データと付属情報が連結されていない素材データとが識別可能に表示される。また、素材データを再生順に並べてコンテンツの生成を行う再生順序表示において、付属情報が連結されている素材データと付属情報が連結されていない素材データとが識別可能に表示される。さらに、時間軸に沿って素材データを貼り付けてコンテンツの生成を行う再生時間順表示において、付属情報が連結されている素材データと付属情報が連結されていない素材データとが識別可能に表示される。

また、付属情報に基づき素材データの再生可能速度範囲が決定されて、決定した再生可能速度範囲が表示される。この再生可能速度範囲は、素材データの一覧を示す素材管理表示や素材データを再生順に並べてコンテンツの生成を行う再生順序表示および素材データの再生画像表示において表示される。再生可能速度範囲の表示内には再生速度を示す位置表示が設けられる。

さらに、時間軸に沿って素材データを貼り付けてコンテンツの生成を行う再生時間順表示において、素材データの表示幅が再生速度に基づいて算出した再生時間に応じて可変して表示される。また、再生時間順表示における素材データの表示幅を可変する操作が行われたときには、操作に応じて位置表示の表示位置を連動させて移動されるとともに、位置表示の表示位置を可変する操作が行われたときには、操作に応じて再生時間順表示における素材データの表示幅が可変される。

この発明によれば、素材データを取り込み、取り込んだ素材データを用いて編集処理が行われるとき、素材データにフレームレート情報が付属情報として連結されているか否かが検出されて、素材データにフレームレート情報が連結されている素材データと、フレームレート情報が連結されていない素材データを識別可能に表示される。このため、素材データのフレームレート情報を利用したスロー再生が可能なシーンを簡単に見つけることができる。

また、付属情報に基づき素材データの再生可能速度範囲が決定されて、決定した再生可能速度範囲が表示されるので、ノイズレスで再生可能な再生速度を容易に設定できる。また、時間軸に沿って素材データを貼り付けてコンテンツの生成を行う再生時間順表示において、素材データの表示幅が再生速度に基づいて算出した再生時間に応じて可変して表示されるので、時間軸の伸び縮みを、視覚的に把握できる。さらに再生時間順表示における素材データの表示幅を可変する操作が行われたときには、操作に応じて再生可能速度範囲の表示における再生速度の位置表示が連動して移動されるとともに、位置表示を可変する操作が行われたときには、操作に応じて再生時間順表示における素材データの表示幅が可変されるので、再生速度と時間軸の伸び縮みの関係も容易に把握できる。

以下、この発明の実施の形態について説明する。図１は、画像および／または音声コンテンツのコンテンツ編集システムの全体構成の一例を示している。撮像装置１０はフレームレートが可変設定された映像データを生成して、この映像データのフレームレートを示すフレームレート情報が含まれた付属情報を映像データに連結して素材データＤＴmとして、編集画像表示制御を行う編集装置３０に供給する。また、音声入力装置２０が撮像装置１０に設けられているときには音声データを生成して、付属情報と共に素材データＤＴmとして編集装置３０に供給する。なお、素材データＤＴmは、撮像装置１０だけでなく他の機器から供給されるものとしても良い。なお、ここで言う連結とは、映像データとフレームレート情報を含む付属情報が、互いにリンクされている状態であれば良い。例えば、互いに別の記録媒体に記録されていたり、別の伝送路で伝送されたものであっても、付属情報に対応するフレーム番号が含まれている等していれば、後で互いの対応が付けることができる。本実施の形態では、このような場合も含めて、連結しているとする。

編集装置３０は、供給された素材データＤＴmを用いて編集処理を行い、コンテンツデータＤＣを生成して出力する。なお、編集装置３０は、編集に関した映像信号Ｓvmを生成して編集画像表示装置４０に供給する。これにより、ユーザは、編集画像表示装置４０での表示画像によって画像の編集経過や編集結果等の確認を行うことができる。同様に、編集装置３０は、編集に関した音声信号Ｓamを生成して編集音声出力装置４１に供給する。これにより、ユーザは、編集音声出力装置４１から出力される音声によって音声の編集経過や編集結果等の確認を行うことができる。

図２は、撮像装置１０の構成例を示している。撮像レンズ系１１を通して入射された光は、撮像部１２に入射されて、撮像部１２に設けられている例えばＣＣＤ(Charge Coupled Device)等の撮像素子の撮像面上に被写体画像が結像される。撮像素子は、光電変換によって被写体画像の撮像電荷を生成する。また、後述するタイミングジェネレータ１４２からの駆動信号ＣＲに基づいて、生成した撮像電荷の読み出しを行い、駆動信号ＣＲに応じたフレームレートの撮像信号Ｓpを生成して信号処理部１３のカメラ処理回路１３１に供給する。

カメラ処理回路１３１は、タイミングジェネレータ１４２から供給されたタイミング信号ＣＴに基づき、撮像信号Ｓpと同期したタイミングで種々の信号処理を行う。例えば、相関二重サンプリング等を行うことで撮像信号Ｓpからノイズ成分を除去する処理、ノイズ除去された撮像信号Ｓpをディジタルの映像データに変換する処理、映像データのクランプ処理、シェーディング補正や撮像素子の欠陥補正、γ処理や輪郭補償およびニー（knee）補正等を行う。また、制御部１４の撮像制御回路１４１から供給された動作制御信号ＣＳに基づいた処理条件等で種々の信号処理を行う。このように、カメラ処理回路１３１で種々の信号処理を行って得られた映像データＤＶは、出力部１５に供給される。

制御部１４のタイミングジェネレータ１４２は、撮像制御回路１４１からの動作制御信号ＣＳに応じた駆動信号ＣＲを生成して撮像部１２に供給することにより、撮像部１２における撮像電荷の読み出し周期を可変して、撮像信号Ｓpのフレームレートを、ユーザインタフェース部１６からの操作信号ＰＳaに基づいた設定フレームレートＦＲsに制御する。例えばＮＴＳＣ方式ではフレーム周波数５９．９４Ｈｚや２９．９７Ｈｚ、ＰＡＬ方式ではフレーム周波数５０Ｈｚや２５Ｈｚを基準フレームレートＦＲrのフレーム周波数として、設定フレームレートＦＲsを基準フレームレートＦＲrのｋ（ｋは正数に限らない正の値）倍とする操作が行われたときには、撮像信号Ｓpのフレームレートが基準フレームレートＦＲrのｋ倍となるように制御する。なお、例えば、ＣＣＤ等の撮像素子の各画素から転送部へ各画素に蓄積された撮像電荷を移動させるための読み出しパルス（センサーゲートパルス）の周期を変更する等することで、撮像電荷の読み出し周期が可変され、フレームレートが可変される。また、この際に、ＣＤＲ（Common Data Rate）方式を採用しても良い。ＣＤＲ方式を用いると、有効なフレームレートは可変するが、ＣＣＤから出力される信号のフレームレートは不変とすることができ、カメラ処理回路１３１等の処理レートを一定とすることができる。このＣＤＲ方式に関しては、ＰＣＴ出願、出願番号PCT/JP03/0051、2003/01/22出願に開示されている。

また、タイミングジェネレータ１４２は、駆動信号ＣＲに同期したタイミング信号ＣＴを生成してカメラ処理回路１３１や音声処理回路１３２に供給する。さらに、タイミングジェネレータ１４２は、映像データＤＶのフレームレートである設定フレームレートＦＲsをフレームレート情報として、このフレームレート情報を含む付属情報ＤＭを生成して、出力部１５に供給する。

制御部１４の撮像制御回路１４１には、ユーザインタフェース部１６が接続されている。ユーザインタフェース部１６は、撮像装置１０での動作切換操作やフレームレート可変操作が行われたとき、これらの操作に応じた操作信号ＰＳaを生成して撮像制御回路１４１に供給する。また、ユーザインタフェース部１６は、図示しないリモートコマンダ等の外部機器から操作信号ＰＳaが供給されたとき、この操作信号ＰＳaを撮像制御回路１４１に供給する。

撮像制御回路１４１は、ユーザインタフェース部１６からの操作信号ＰＳaに基づき、撮像装置１０の動作が操作信号ＰＳaに応じた動作となるように、動作制御信号ＣＳを生成してカメラ処理回路１３１やタイミングジェネレータ１４２に供給する。

音声処理回路１３２には、音声入力装置２０からアナログの音声信号Ｓinが供給される。音声処理回路１３２は、タイミングジェネレータ１４２から供給されたタイミング信号ＣＴに基づいて音声信号Ｓinのサンプリング処理を行い、ディジタルの音声データＤＡを生成して出力部１５に供給する。

出力部１５は、映像データＤＶや音声データＤＡに対して付属情報ＤＭを連結させて素材データＤＴmを生成して編集装置３０に供給する。なお、素材データＤＴmあるいは素材データＤＴmに基づいて生成した記録信号を記録媒体に記録すれば、記録媒体に記録されている素材データＤＴmあるいは素材データＤＴmを編集装置３０で再生することにより、記録媒体を介して素材データＤＴmを編集装置３０に供給できる。

ここで、映像データＤＶや音声データＤＡに対して付属情報ＤＭを連結させる方法の一例として、映像データＤＶや音声データＤＡを圧縮してデータストリームとして素材データＤＴmを生成するときには画像のデータストリーム中に付属情報ＤＭを挿入、あるいはデータストリームのヘッダ中に付属情報ＤＭを挿入することが考えられる。

また、非圧縮の映像データや音声データを伝送するためにＳＭＰＴＥ(Society of Motion Picture and Television Engineers)２５９Ｍ「Television - 10-Bit 4:2:2 Component and 4fsc Composite Digital Signals - Serial Digital Interface」として規格化されているＳＤＩフォーマットや、圧縮された映像データや音声データを伝送するためにＳＭＰＴＥ３０５Ｍ「Television - Serial Data Transport Interface (SDTI)」として規格化されているＳＤＴＩフォーマット、ＳＤＴＩフォーマットを更に限定しているＳＭＰＴＥ３２６Ｍ「Television - SDTI Content Package Format (SDTI-CP)」として規格化されたＳＤＴＩ−ＣＰフォーマットを用いる場合、付属情報ＤＭをＳＭＰＴＥ３３０Ｍ「Television - Unique Material Identifier (UMID)」として規格化されているＵＭＩＤのデータとして、各フォーマットの信号に挿入することが考えられる。なお、映像データＤＶや音声データＤＡに対して付属情報ＤＭを連結する方法はこれに限られず種々の方法が考えられる。

ところで、上述の撮像装置１０は、設定フレームレートＦＲsの撮像信号Ｓpを得ることができるように、撮像部１２における撮像電荷の読み出し周期を可変した。しかし、撮像部１２における撮像電荷の読み出し周期を可変しなくとも、設定フレームレートＦＲsの撮像信号Ｓpを得ることができる。すなわち、設定フレームレートＦＲsよりも高いフレームレートであり、フレームレートが一定である映像データＤＶaを生成して、この映像データＤＶaから設定フレームレートＦＲs分だけ映像データを抽出することで、設定フレームレートＦＲsの映像データＤＶを生成できる。この場合の構成を図３に示す。なお、図３において、図２と対応する部分については同一符号を付し詳細な説明は省略する。

制御部１８のタイミングジェネレータ１８２は、ユーザインタフェース部１６を介して設定される設定フレームレートＦＲsの最高値に応じた駆動信号ＣＲaを生成して撮像部１２に供給する。撮像部１２は、駆動信号ＣＲaに基づいて撮像信号の生成を行い、フレームレートが基準フレームレートＦＲrよりも高い固定フレームレートＦＲqの撮像信号Ｓpaを生成して信号処理部１７のカメラ処理回路１３１に供給する。例えば、設定フレームレートＦＲsが基準フレームレートＦＲrのｎ（ｎは自然数）倍まで変更可能であるとき、基準フレームレートＦＲrのｎ倍のフレームレートである撮像信号Ｓpaを生成して、カメラ処理回路１３１に供給する。即ち、撮像部１２は、ユーザインタフェース部１６を介して設定される設定フレームレートＦＲｓに影響されることなく、固定のフレームレートである撮像信号Ｓpaを生成する。

また、タイミングジェネレータ１８２は、駆動信号ＣＲaに同期したタイミング信号ＣＴaを生成して信号処理部１７のカメラ処理回路１３１や音声処理回路１３２および有効フレーム信号生成回路１８３に供給する。

カメラ処理回路１３１は、撮像信号Ｓpaに基づいて生成した固定フレームレートＦＲqの映像データＤＶaを有効データ選別回路１７１に供給する。音声処理回路１３２は、一定周波数のタイミング信号ＣＴaに基づいたサンプリングを行って生成した音声データＤＡaを有効データ選別回路１７１に供給する。

撮像制御回路１８１は、ユーザインタフェース部１６からの操作信号ＰＳaに基づき、設定フレームレートＦＲsを示す設定情報信号ＣＦを生成して有効フレーム信号生成回路１８３に供給する。

有効フレーム信号生成回路１８３は、映像データＤＶaの一定値であるフレームレートＦＲqと設定情報信号ＣＦによって示された設定フレームレートＦＲsとの比に基づき、映像データＤＶaからフレーム単位でデータ抽出を行って設定フレームレートＦＲsの映像データＤＶを生成するための抽出制御信号ＣＣを生成する。さらに、有効フレーム信号生成回路１８３は、この抽出制御信号ＣＣをタイミング信号ＣＴaに同期して有効データ選別回路１７１に供給する。例えば、映像データＤＶaのフレームレートＦＲqが基準フレームレートＦＲrのｎ倍であり、設定フレームレートＦＲsが基準フレームレートＦＲrの（ｎ／２）倍であるとき、映像データＤＶaから１フレーム置きにフレーム単位でデータ抽出を行う抽出制御信号ＣＣを生成して、タイミング信号ＣＴaに同期して有効データ選別回路１７１に供給する。また、有効フレーム信号生成回路１８３は、設定情報信号ＣＦに基づき設定フレームレートＦＲsをフレームレート情報として有する付属情報ＤＭを生成して出力部１５に供給する。

有効データ選別回路１７１は、抽出制御信号ＣＣによって示されたフレームの映像データＤＶaおよび音声データＤＡaを抽出して映像データＤＶおよび音声データＤＡとして出力部１５に供給する。また、図示せずも、有効フレーム信号生成回路１８３から有効データ選別回路１７１に対して設定フレームレートＦＲsをフレームレート情報として有する付属情報ＤＭを供給し、有効データ選別回路１７１で、設定フレームレートＦＲsと音声データＤＡaを生成したときのフレームレートとの比に応じて音声データＤＡaの間引きを行うものとしても良い。例えば、音声データＤＡaを生成したときのフレームレートＦＲqが基準フレームレートＦＲrのｎ倍であり、設定フレームレートＦＲsが基準フレームレートＦＲrの（ｎ／２）倍であるとき、音声データＤＡaに対して１サンプル置きに間引きを行う。この場合、フレーム単位で音声データを間引く場合よりも間引き間隔を小さくできるので、音声データＤＡに基づく音声を良好な音質とすることができる。

このように、映像データＤＶaのフレーム周波数を一定とすることで、撮像部１２や信号処理部１７のカメラ処理回路１３１での動作周波数を可変する必要がなくなり、撮像部１２やカメラ処理回路１３１の構成を簡単にできる。また、映像データＤＶaからフレーム単位でデータ抽出を行うだけで設定フレームレートＦＲsの映像データＤＶを生成できるので、所望の設定フレームレートＦＲsの映像データＤＶを映像データＤＶaから容易に生成できる。

また、撮像装置に画像メモリや加算器および除算器を設けるものとして、映像データを所定（predetermined）フレーム分毎に加算して映像データＤＶを生成するようにしても良い。この場合には、撮像信号Ｓpのフレームレート可変範囲を狭くできる。すなわち、ｎフレーム分の撮像信号Ｓpを加算して信号レベルを（１／ｎ）倍すれば、撮像信号Ｓpのフレームレートを（１／ｎ）倍としなくとも、フレームレートを（１／ｎ）倍とした信号を得ることが可能となる。

図４および図５は、撮像装置１０，１０aで生成される映像データＤＶと付属情報ＤＭの関係を説明するための図である。図４Ａに示すように設定フレームレートＦＲsを例えば基準フレームレートＦＲrの１倍あるいは２倍とすると、図４Ｂに示す映像データＤＶ（図では映像データＤＶに基づいたフレーム画像を示している）に対して、設定フレームレートＦＲsを示す図４Ｃのフレームレート情報ＤＭ-FRsを含んだ付属情報ＤＭが連結される。なお、図４Ｄは、時間経過とフレーム画像の関係を示したものである。また、フレームレート情報ＤＭ-FRsは、設定フレームレートＦＲsを示すだけでなく、基準フレームレートＦＲrに対する設定フレームレートＦＲsの倍率を示すものとしても良い。図４Ｃおよび以下の図で示すフレームレート情報ＤＭ-FRsでは倍率を記している。

図５Ａに示すように設定フレームレートＦＲsを例えば基準フレームレートＦＲrの１倍あるいは１／２倍とすると、図５Ｂに示す映像データＤＶ（図では映像データＤＶに基づいたフレーム画像を示している）に対して、設定フレームレートＦＲsを示す図５Ｃのフレームレート情報ＤＭ-FRsを含んだ付属情報ＤＭが連結される。図５Ｄは、時間経過とフレーム画像の関係を示したものである。

次に、編集装置３０について説明する。図６は、編集装置３０の構成を示している。編集装置３０に供給された素材データＤＴmは、検出手段である素材取込部３１の情報検出回路３１１に供給される。情報検出回路３１１は、素材データＤＴmから付属情報ＤＭを検出する。この検出した付属情報ＤＭをデータベース化処理回路３１２に供給する。また、素材データＤＴmに含まれている映像データＤＶと音声データＤＡをデータベース化処理回路３１２に供給する。

データベース化処理回路３１２は、映像データＤＶと音声データＤＡと情報検出回路３１１で検出した付属情報ＤＭとを関係付けて編集処理部３２のデータ記憶装置３２１に記憶させる。また、データベース化処理回路３１２は、データ記憶装置３２１に記憶した付属情報ＤＭや、この付属情報ＤＭに関係付けられている映像データＤＶや音声データＤＡに基づいて、容易に素材データの内容を確認可能とするデータベース情報ＤＢを生成して編集制御部３３に供給する。例えば、データベース情報ＤＢは、素材データの内容を識別可能とする情報（例えばサムネイル）、素材データの時間長、設定フレームレートＦＲs、データ記憶装置３２１における記憶位置等の情報から構成されるものである。

編集制御部３３は、ＧＵＩ(Graphical User Interface)環境で編集処理を可能とするための映像データＤＶgや、データベース情報の内容を表示するための映像データＤＶiを生成して映像出力信号生成回路３５１に供給する。映像出力信号生成回路３５１は、供給された映像データＤＶg，ＤＶiに基づき映像信号Ｓvmを生成して編集画像表示装置４０に出力する。このように、映像信号Ｓvmを編集画像表示装置４０に供給することで、どのような素材データが記憶されているか等を編集画像表示装置４０の画面上に表示できる。この映像信号Ｓvmは、編集用の表示画像となる。

また、編集制御部３３は、ポストプロダクション処理の制御を行う。すなわち、編集制御部３３に接続されているユーザインタフェース部３４から、ＧＵＩ環境での表示を利用した操作信号ＰＳeが供給されて、操作信号ＰＳeによっていずれかの素材データを選択することが示されたときには、この操作信号ＰＳeに応じた読出制御信号ＲＣを生成して編集処理部３２の書込読出処理回路３２２に供給する。また、操作信号ＰＳeが読み出した素材データの加工や結合等の編集操作に関するものであるときには、操作信号ＰＳeに応じた編集制御信号ＥＴを生成して編集処理部３２の信号編集回路３２３に供給する。さらに、素材データの編集が終了してコンテンツデータが完成されたとき、操作信号ＰＳeがコンテンツデータをデータ記憶装置３２１に記憶する操作を示しているときには、操作信号ＰＳeに応じた書込制御信号ＷＣを生成して、書込読出処理回路３２２に供給する。また、操作信号ＰＳeがコンテンツデータの出力を示しているときには、操作信号ＰＳeに応じた出力制御信号ＲＰを生成して書込読出処理回路３２２に供給する。操作信号ＰＳeがコンテンツデータの再生速度範囲を規定するものであるときには、操作信号ＰＳeに応じた速度範囲設定信号ＬＰを生成して信号編集回路３２３に供給する。

書込読出処理回路３２２は、読出制御信号ＲＣに基づき、要求された素材データをデータ記憶装置３２１から読み出して信号編集回路３２３に供給する。また、書込制御信号ＷＣに基づき、完成されたコンテンツデータＤＣをデータ記憶装置３２１に記憶させる。また、出力制御信号ＲＰに基づき、要求されたコンテンツデータＤＣをデータ記憶装置３２１から読み出して出力する。

信号編集回路３２３は、データ記憶装置３２１から読み出した素材データに含まれている映像データＤＶや音声データＤＡを用いて、画像や音声の加工や結合および削除等の編集処理を編集制御信号ＥＴに基づいて行う。ここで、信号編集回路３２３は、編集前や編集中あるいは編集後の映像データＤＶeを映像出力信号生成回路３５１に供給し、編集前や編集中あるいは編集後の音声データＤＡeを音声出力信号生成回路３５２に供給する。また、信号編集回路３２３は、編集処理によって映像データＤＶや音声データＤＡのフレームレートを変更したとき、付属情報ＤＭも編集後の映像データや音声データに合わせて変更する。さらに編集後の映像データＤＶや音声データＤＡおよび編集後の映像データＤＶや音声データＤＡに対応する付属情報ＤＭcを連結させてコンテンツデータＤＣを生成する。また、速度範囲設定信号ＬＰが供給されたときには、この速度範囲設定信号ＬＰに基づいてコンテンツデータＤＣの再生速度範囲を示す速度範囲情報も付属情報ＤＭcとして連結させる。さらに、ユーザインタフェース部３４からコンテンツのタイトルやコンテンツの推奨再生速度が入力されたときには、これらの情報も付属情報ＤＭcとして連結させる。また、編集処理によってコンテンツデータの再生時間長情報が得られているときには、この情報も付属情報ＤＭcとして連結させるものとしても良い。さらに、コンテンツデータの再生可能な最高速度が入力されたときには、この最高速度も付属情報ＤＭcとして連結させる。

編集出力信号生成部３５の映像出力信号生成回路３５１は、上述したように、編集制御部３３から供給された映像データＤＶg，ＤＶiに基づき映像信号Ｓvmを生成して編集画像表示装置４０に供給する。このためＧＵＩ環境で素材データに関する情報を表示できる。さらに、信号編集回路３２３から供給された映像データＤＶeに基づき映像信号Ｓvmを生成することで、編集前や編集中あるいは編集後の画像を編集画像表示装置４０の画面上で確認できる。

音声出力信号生成回路３５２は、信号編集回路３２３から供給された音声データＤＡeを、アナログの音声信号Ｓamに変換するとともに所望の信号レベルとして、例えばスピーカやヘッドホンを用いて構成された編集音声出力装置４１に供給する。このため、編集前や編集中あるいは編集後の音声を編集音声出力装置４１から出力される音声によって確認できる。

このように、編集装置３０で素材データＤＴmを用いたポストプロダクション処理を行いコンテンツデータＤＣが完成すると、この完成したコンテンツデータＤＣを出力する。

次に、編集装置３０の動作について説明する。図７は、編集画像表示装置４０に表示する編集操作のためのＧＵＩ画面を示している。ＧＵＩ画面では、素材データの一覧を示す素材管理表示である素材管理ブラウザ４０１が左上に設けられており、左下には素材データを再生順に並べてコンテンツの生成を行う再生順序表示であるストーリーボード４０２が設けられている。画面中央には、編集前や編集後の素材データの画像を表示する再生画像表示であるモニタービューワー４０３、中央下側には、時間軸に沿って素材データを貼り付けてコンテンツの生成を行う再生時間順表示であるタイムライン４０４が設けられている。また、モニタービューワー４０３とタイムライン４０４との間には、動作コントロール部４０５が設けられている。なお、素材管理ブラウザ４０１、ストーリーボード４０２、モニタービューワー４０３、タイムライン４０４、動作コントロール部４０５の配置や形状は例示的なものであり、限定的なものでないことは勿論である。

素材管理ブラウザ４０１は、データ記憶装置３２１に記憶している素材データの一覧を示すものであり、記憶している素材データのタイトルや長さおよび内容を示すスタンプ画（サムネイル画）、ノイズレスで自然な再生画像を得ることができる再生可能速度範囲等を素材毎に表示する。

ストーリーボード４０２は、コンテンツ生成の作業を行う場所であり、素材データを再生順に並べることでコンテンツの生成を行う。また、再生可能速度範囲の表示も行う。モニタービューワー４０３では、素材データに基づく画像を表示するだけでなく、再生可能速度範囲を示す可変速度バー表示や再生可能速度範囲での再生速度の位置表示を行う。

タイムライン４０４は、時間軸に沿って素材データを貼りつけていくことでコンテンツ生成の作業をより詳細に行うための場所である。また、再生速度に基づいて算出した再生時間に応じて素材データの表示幅を可変する。動作コントロール部４０５では、素材データやタイムライン４０４上につなげたコンテンツの再生を行うための操作キー表示を行う。

ここで、表示したＧＵＩの画像とユーザインタフェース部３４からの操作信号ＰＳeに基づいて、ドラッグ＆ドロップ操作や動作コントロール部４０５のキー操作等が行われたと編集制御部３３で判別したときには、操作に応じて編集装置３０の動作を制御する。

図８は、編集動作時の表示制御の一例を示すフローチャートである。ステップＳＴ１１では、素材データの処理要求がなされたか否かを識別する。ここで処理要求がなされていないときにはステップＳＴ１１に戻り、処理要求がなされたときにはステップＳＴ１２に進む。

ステップＳＴ１２では、編集する素材データから設定フレームレートＦＲsを示すフレームレート情報ＤＭ-FRsが得られているか否かを識別する。ここで、データベース情報ＤＢを参照して、素材データからフレームレート情報ＤＭ-FRsが得られていないときにはステップＳＴ１３に進み、素材データが１倍速のデータであるとした表示制御を行う。また、素材データからフレームレート情報ＤＭ-FRsが得られているときにはステップＳＴ１４に進む。

ステップＳＴ１４では、フレームレート情報ＤＭ-FRsで示された設定フレームレートＦＲsに基づいて再生可能速度を設定する。この再生可能速度の設定では、一定のフレーム間隔で間引きを行うものとしたりフレーム繰り返しを行うことでノイズレスで自然な再生画像を得ることができるように、再生可能速度を設定する。例えば、基準フレームレートＦＲrに対する設定フレームレートＦＲsの倍数が１よりも大きいとき、この倍数の約数で１以外の値を求めて、求めた約数の逆数を算出することで再生可能速度を設定できる。すなわち、設定フレームレートＦＲsが基準フレームレートの１０倍であるとき、１以外の約数は「２，５，１０」となり、この約数の逆数「１／１０，１／５，１／２」となる。この約数の逆数を選択することで１倍速未満の再生可能速度を設定できる。また、１倍速以上の再生可能速度は自然数倍とすることで、各再生速度において行う間引き間隔を等しくできる。なお、再生可能速度の上限は、例えば素材データの内容を容易に把握できる速度に制限する。

基準フレームレートＦＲrに対する設定フレームレートＦＲsの倍数が１よりも小さいときには、この倍数の逆数を求めて逆数の１以外の約数あるいは逆数の整数倍の値を算出することで再生可能速度を設定できる。すなわち、設定フレームレートＦＲsが基準フレームレートの（１／６）倍であるとき、逆数の１以外の約数は「２，３，６」となり、逆数の整数倍は「６，１２，１８，・・・」となる。この逆数の１以外の約数や逆数の整数倍の値を再生可能速度とすれば、各再生速度において行う間引き間隔あるいは繰り返し回数を等しくできる。また、設定フレームレートＦＲsの倍数が１よりも小さいときに再生速度を（１／ＦＲs）倍速以下としても、再生画像はフレーム画像を必要な回数繰り返したものとなるため、再生可能速度の下限を１倍速としても良い。

ステップＳＴ１５では、フレームレート情報ＤＭ-FRsに応じた表示制御、すなわち設定フレームレートＦＲsを示すフレームレート情報ＤＭ-FRsが付属情報ＤＭとして連結されている素材データであることを識別可能とする表示や、設定フレームレートＦＲsに基づいて設定した再生可能速度範囲の表示を行う。例えば、素材管理ブラウザ４０１やストーリーボード４０２では、設定フレームレートＦＲsの情報が連結されている素材データであることを容易に識別可能とするため、スタンプ画４０１a，４０２aの画枠の形状や色等を、設定フレームレートＦＲsの情報が連結されていない素材とは異なるものとする。また、素材に関する情報を表示する情報表示領域４０１b，４０２bが設けられているときには、この領域にステップＳＴ１４で設定した再生可能速度範囲を表示する。例えば、図７および後述する図９では、設定フレームレートＦＲsの情報が連結されている素材データであるとき、画枠の幅を広くして表示するとともに、再生可能速度範囲が「×０．１〜×２．０」の場合を示している。

タイムライン４０４の表示も素材管理ブラウザ４０１やストーリーボード４０２と同様に、設定フレームレートＦＲsを示すフレームレート情報ＤＭ-FRsが付属情報ＤＭとして連結されている素材データであることを容易に識別可能とする。例えばフレーム画像表示領域４０４aの画枠の形状や色を設定フレームレートＦＲsのフレームレート情報ＤＭ-FRsが連結されていない素材とは異なるものとする。さらに、タイムライン４０４では、設定フレームレートＦＲsに応じて、フレーム画像表示領域４０４aを時間軸方向である水平方向に調整する。例えば、設定フレームレートＦＲsが基準フレームレートＦＲrよりも大きいときには、単位時間あたりのフレーム画像数が多くなる。このため、フレーム画像表示領域４０４aの表示幅は広くする。また、設定フレームレートＦＲsが基準フレームレートＦＲrよりも小さいときには、単位時間あたりのフレーム画像数が少なくなる。このため、フレーム画像表示領域４０４aは狭くする。また、モニタービューワー４０３には、素材データに基づいた素材画像表示４０３aを設けるだけでなく、再生速度表示４０３bや設定した再生可能速度範囲に対応する速度可変コンソール表示４０３cを設けて、再生画像や再生速度および再生可能速度範囲の表示を行う。また、速度可変コンソール表示４０３cの太線で示すカーソル位置によって、制御できる方向も識別可能とされる。

ステップＳＴ１６では、ユーザインタフェース部３４を介して再生速度が指示されたか否かを識別する。ここで、タイムライン４０４におけるフレーム画像表示領域４０４aの表示幅を変更する操作がなされたとき、あるいはモニタービューワー４０３に表示された速度可変コンソール表示４０３cのカーソル位置が移動されたときにはステップＳＴ１７に進む。また、再生速度の指示されていないときにはステップＳＴ１６に戻る。

ステップＳＴ１７では、指示された再生速度を識別して、識別した再生速度を表示する。例えばタイムライン４０４におけるフレーム画像表示領域４０４aの表示幅を変更する操作がなされたときには、操作方向に応じて再生速度をステップＳＴ１４で設定された再生可能速度から順次選択して、操作終了時の速度を再生速度とする。また、モニタービューワー４０３に表示された速度可変コンソール表示４０３cのカーソル位置が移動されたときには、ステップＳＴ１４で設定された再生可能速度からカーソル位置に応じた速度を選択して再生速度とする。

再生速度が識別されたときには、モニタービューワー４０３の再生速度表示４０３bを指示された再生速度とする。また、速度可変コンソール表示４０３cのカーソル位置とフレーム画像表示領域４０４aの表示幅とを連動させて、フレーム画像表示領域４０４aの表示幅を変更する操作によって再生速度が指示されたときには、速度可変コンソール表示４０３cのカーソル位置を指示された再生速度と対応する位置に移動することで、再生速度を表示するとともに、速度可変コンソール表示４０３cのカーソル位置を変更する操作によって再生速度が指示されたときには、フレーム画像表示領域４０４aの表示幅を対応する再生速度に応じた幅に変更する。このように、速度可変コンソール表示４０３cのカーソル位置とフレーム画像表示領域４０４aの表示幅とを連動させることによって、いずれを利用しても正しく再生速度を可変させることができる。

ステップＳＴ１８では、指示された再生速度から、この指示された再生速度で素材データを再生したときの再生時間を算出する。例えば上述したように設定フレームレートＦＲsが基準フレームレートの１０倍であるとき、再生可能なスロー速度は「１／１０，１／５，１／２」の何れかの倍速となる。ここで、素材の再生時間が１倍速のときに３０秒である場合、１／１０倍速再生のときの再生時間は３００秒、１／５倍速ならば１５０秒等となる。このように１倍速のときの再生時間に再生時の倍速数の逆数を乗算することで再生時間を算出できる。

ステップＳＴ１９では、再生時間に応じた表示制御を行う。例えば、タイムライン４０４でのフレーム画像表示領域４０４aの表示幅をステップＳＴ１８で算出した再生時間に応じて可変してステップＳＴ１６に戻る。また、素材データの再生動作中は、モニタービューワー４０３の素材画像表示４０３aとして、指示された再生速度で素材データを再生したときの再生画像を表示する。

なお、素材データにおける一部のシーンの再生時間を変える場合には、この一部のシーンを分割して、分割したシーンに対して上述の処理を行うことで、再生時間を可変させることができる。

図９は、例えば設定フレームレートＦＲsが基準フレームレートＦＲrの１０倍であることを示すフレームレート情報ＤＭ-FRsが連結された素材データを用いるときの、編集操作画面を示している。図９Ａは再生速度が１倍速、図９Ｂは（１／１０）倍速、図９Ｃは２倍速のときのＧＵＩ画面であり、設定フレームレートＦＲsの情報が連結されている素材データは、例えばストーリーボード４０２やタイムライン４０４で、設定フレームレートＦＲsを示すフレームレート情報ＤＭ-FRsが連結されていない素材データと異なる画枠表示が行われる。

ここで、選択した素材データの再生時には、フレームレート情報ＤＭ-FRsに基づいて設定フレームレートＦＲsを識別して、再生速度ＦＰと設定フレームレートＦＲsを乗算して識別値ＦＤを算出して、この識別値ＦＤに基づいて再生処理条件を決定する。例えば、上述の図９Ａの画面表示で示すように再生速度が１倍速とされているとともに、設定フレームレートＦＲsが基準フレームレートＦＲrに対して１０倍速とされているとき、識別値ＦＤは「１０×１＝１０」となる。なお、図１０Ａは、設定フレームレートＦＲsが基準フレームレートＦＲrに対して１０倍速とされているときの映像データＤＶに基づく画像を示している。また図１０Ｂはフレーム画像の設定フレームレートＦＲsを示すフレームレート情報ＤＭ-FRs、図１０Ｃは絶対フレーム番号ＡＮをそれぞれ示している。

識別値ＦＤが「ＦＤ＝１０」であるときには、図１０Ｄ,図１０Ｅに示すように、「ＦＤ＝１０」フレーム目毎すなわち映像データＤＶを９フレーム分飛ばしながら用いて映像信号Ｓvmを生成することで、この映像信号Ｓvmに基づき１倍速の再生画像をモニタービューワー４０３に表示できる。なお、図１０Ｄは表示される画像の絶対フレーム番号ＡＮ、図１０Ｅは映像信号Ｓvmによってモニタービューワー４０３の素材画像表示４０３aに表示されるフレーム画像を示している。

次に、タイムライン４０４におけるフレーム画像表示領域４０４aの表示幅を矢印Ａ方向に広げる操作や、速度可変コンソール表示４０３cのカーソル位置を矢印Ｂ方向に移動する操作が行われると、再生速度を遅くする操作がなされたものと処理する。ここで、例えば（１／１０）倍速に設定されたときには図９Ｂに示すように、モニタービューワー４０３の再生速度表示４０３bを（１／１０）倍速に変更する。また、速度可変コンソール表示４０３cのカーソル位置を（１／１０）倍速の位置とする。さらに再生時間が長くなることから、フレーム画像表示領域４０４aの表示幅を広くする。

図９Ｂの画面表示で示すように再生速度が（１／１０）倍速での再生では、識別値ＦＤが「１０×（１／１０）＝１」となる。識別値ＦＤが「ＦＤ＝１」であるときには、「ＦＤ＝１」フレーム目毎すなわち映像データＤＶを毎フレーム用いて映像信号Ｓvmを生成することで、図１０Ａに示す（１／１０）倍速の再生画像をモニタービューワー４０３の素材画像表示４０３aに表示できる。

また、タイムライン４０４におけるフレーム画像表示領域４０４aの表示幅を矢印Ｂ方向に縮める操作や、速度可変コンソール表示４０３cのカーソル位置を矢印Ａ方向に移動する操作が行われると、再生速度を速くする操作がなされたものと処理する。ここで、例えば２倍速に設定されたときには図９Ｃに示すように、モニタービューワー４０３の再生速度表示４０３bを２倍速に変更する。また、速度可変コンソール表示４０３cのカーソル位置を２倍速の位置とする。さらに再生時間が短くなることから、フレーム画像表示領域４０４aの表示幅を狭くする。

図９Ｃの画面表示で示すように再生速度が２倍速での再生では、識別値ＦＤが「１０×２＝２０」となる。識別値ＦＤが「ＦＤ＝２０」であるときには、図１０Ｆ，図１０Ｇに示すように、「ＦＤ＝２０」フレーム目毎すなわち映像データＤＶを１９フレーム分飛ばしながら用いて映像信号Ｓvmを生成することで、この映像信号Ｓvmに基づき２倍速の再生画像をモニタービューワー４０３の素材画像表示４０３aに表示できる。なお、図１０Ｆは表示される画像の絶対フレーム番号ＡＮ、図１０Ｇは映像信号Ｓvmによってモニタービューワー４０３の素材画像表示４０３aに表示されるフレーム画像を示している。

このように、フレームレート情報ＤＭ-FRsと再生速度に基づきフレーム単位で間引きを行うことにより、ノイズレスのスロー再生を容易に実現できる。なお、再生速度の可変操作は、再生動作中も可能とすることで、簡単に所望の再生速度での再生画像を確認することができる。

また、再生速度と表示幅が関係付けられて表示されることから、再生速度と時間軸の伸び縮みの関係を容易に把握することが可能となり、編集操作を容易に行うことができる。なお、フレーム画像表示領域４０４aには、表示幅の変更が可能な方向すなわち再生速度を可変できる方向を示す表示、例えば破線で示す矢印表示を設けるものとすれば、再生速度の変更可能方向を容易に識別することが可能となる。

図１１は、図８に示す表示制御を行い、例えば図９のように表示される編集画面を用いた編集処理動作を示すフローチャートである。ステップＳＴ２１では、素材データの取り込みを行い、取り込んだ素材データをデータ記憶装置３２１に記憶させるとともに、データベース情報ＤＢを生成させる。

ステップＳＴ２２では、取り込んだ素材データの内容を、データベース情報ＤＢを利用して表示する。この素材データの内容表示は、例えば取り込まれている素材データのスタンプ画や情報を素材管理ブラウザ４０１に表示させることで行う。また、素材管理ブラウザ４０１に表示されている素材データのいずれかが選択されたときには、選択された素材データの画像をモニタービューワー４０３に表示する。さらにモニタービューワー４０３とタイムライン４０４の間に設けられている動作コントロール部４０５で再生制御キー表示が操作されたときには、キー操作に応じて素材データの再生や停止、変速再生等を行い、再生画像をモニタービューワー４０３に表示する。

ステップＳＴ２３では素材データの選択が行われたか否かを判別する。ここで、素材データの選択が行われていないときにはステップＳＴ２３に戻り、素材データの選択が行われたときにはステップＳＴ２４に進む。例えば素材管理ブラウザ４０１からタイムライン４０４にドラッグ＆ドロップされたときには素材データが選択されたものとしてステップＳＴ２４に進む。

ステップＳＴ２４では、選択された素材データに基づくフレーム画像をタイムライン４０４のフレーム画像表示領域４０４aに時間順に並べて表示する。

ステップＳＴ２５では、タイムライン４０４に表示されたフレーム画像に対する切り取りや貼り付けあるいは並べ換え等の編集操作に応じて素材データを加工して、所望の映像データや音声データを生成してコンテンツデータとする。また、映像データや音声データに設定フレームレート等を示す付属情報ＤＭcを連結させコンテンツデータとする。

ステップＳＴ２６では、コンテンツデータの完成処理を行い、ステップＳＴ２５で生成したコンテンツデータに対して、素材データのつなぎ部分の処理や演出効果の追加あるいは追加する画像や音声の合成等の処理を行う。ステップＳＴ２７では、コンテンツデータの出力処理を行う。すなわち、完成されたコンテンツデータを放送用の番組データとして番組送出装置に供給する。あるいは配信用コンテンツデータとしてコンテンツ送出装置に供給する。また、完成されたコンテンツデータにコンテンツ再生メニューリストや再生メニューに応じた特殊再生等を行うための情報等を付加する等のオーサリングを行い、オーサリングの完了したデータを記録媒体に記録させる。

ところで、上述の編集装置３０の編集処理は、コンピュータを用いてソフトウェア処理によっても実現できる。このソフトウェアでコンテンツ編集を行う場合の構成を図１２に示す。

コンピュータは、図１２に示すようにＣＰＵ(Central Processing Unit)３８１を内蔵しており、このＣＰＵ３８１にはバス３９０を介してＲＯＭ３８２，ＲＡＭ３８３，記憶容量が大容量であるハード・ディスク・ドライブ等を用いて構成したデータ蓄積部３８４，入出力インタフェース３８５が接続されている。さらに、入出力インタフェース３８５には信号入力部３９１や信号出力部３９２、記録媒体ドライブ３９３が接続されている。

ＣＰＵ３８１は、ＲＯＭ３８２やＲＡＭ３８３あるいはデータ蓄積部３８４に記憶されているプログラムを実行して、上述の図８や図１１に示す編集処理を行う。信号入力部３９１に入力された素材データは、入出力インタフェース３８５とバス３９０を介してデータ蓄積部３８４に記憶させる。また、データ蓄積部３８４に記憶されている素材データから、編集に用いる素材データを読み出して編集処理を行い完成されたコンテンツデータを再度データ蓄積部３８４に記憶させる。このデータ蓄積部３８４に記憶されている完成されたコンテンツデータを読み出して信号出力部３９２を介して出力する。

なお、編集処理を行うプログラムは、予めＲＯＭ３８２やデータ蓄積部３８４に記憶させておくものとしたり、記録媒体ドライブ３９３によって、コンテンツ送出処理のプログラムを記録媒体に記録しあるいは記録媒体に記録されているプログラムを読み出して実行するものとしても良い。さらに、有線あるいは無線の伝送路を介してプログラムを伝送し、受信したプログラムをコンピュータで実行するものとしても良い。

このように、上述の実施の形態によれば、フレームレート情報が付属情報として連結されている素材データと連結されていない素材データが識別可能に表示されるので、素材データのフレームレート情報を利用したスロー再生が可能なシーンを簡単に見つけることができる。また、付属情報に基づいて、再生可能速度範囲が表示されるので、この範囲内の速度を設定して可変速再生を行うことで効果的な映像表現を簡単に行うことができる。

また、編集装置３０は、素材データのフレームレートを低下させることなくコンテンツデータを生成すれば、素材データが有効に活用されて再生速度の可変範囲が広いコンテンツを提供できる。

以上のように、本発明にかかる編集画像表示制御装置と編集画像表示制御方法およびプログラムは、画像の素材データを用いて編集を行う場合に有用であり、フレームレートが可変されている素材データを用いる場合に好適である。

コンテンツ編集システムの全体構成を示す図である。 撮像装置の構成を示す図である。 撮像装置の他の構成を示す図である。 映像データの付属情報の関係（その１）を示す図である。 映像データと付属情報の関係（その２）を示す図である。 編集装置の構成を示す図である。 編集操作のためのＧＵＩ画面を示す図である。 編集動作時の表示制御を示すフローチャートである。 編集操作時のＧＵＩ画面を示す図である。 画像再生動作を示す図である。 編集処理動作を示すフローチャートである。 ソフトウェアでコンテンツ編集を行う場合の構成を示す図である。

符号の説明

１０，１０a・・・撮像装置、１２・・・撮像部、１３，１７・・・信号処理部、１４，１８・・・制御部、１５・・・出力部、１６，３４・・・ユーザインタフェース部、２０・・・音声入力装置、３０・・・編集装置、３１・・・素材取込部、３２・・・編集処理部、３３・・・信号編集部、３５・・・編集出力信号生成部、４０・・・編集画像表示装置、４１・・・編集音声出力装置、１３１・・・カメラ処理回路、１３２・・・音声処理回路、１４１，１８１・・・撮像制御回路、１４２，１８２・・・タイミングジェネレータ、１７１・・・有効データ選別回路、１８３・・・有効フレーム信号生成回路、３１１・・・情報検出回路、３１２・・・データベース化処理回路、３２１・・・データ記憶装置、３２２・・・書込読出処理回路、３２３・・・信号編集回路、３５１・・・映像出力信号生成回路、３５２・・・音声出力信号生成回路、３８４・・・データ蓄積部、３９１・・・信号入力部、３９２・・・信号出力部、４０１・・・素材管理ブラウザ、４０２・・・ストーリーボード、４０３・・・モニタービューワー、４０４・・・タイムライン、４０５・・・動作コントロール部

Claims (25)

1. 素材データにフレームレート情報が付属情報として連結されているか否かを検出する検出手段と、
   前記フレームレート情報が付属情報として連結されている素材データと、前記フレームレート情報が付属情報として連結されていない素材データとが識別して表示されるように、編集用の表示画像の状態を制御する制御手段とを有する
   ことを特徴とする編集画像表示制御装置。
2. 前記制御手段は、前記素材データの一覧を示す素材管理表示において、前記付属情報が連結されている素材データと前記付属情報が連結されていない素材データとが識別可能に表示されるように、前記表示画像の状態を制御する
   ことを特徴とする請求項１記載の編集画像表示制御装置。
3. 前記制御手段は、前記素材データを再生順に並べてコンテンツの生成を行うための再生順序表示において、前記付属情報が連結されている素材データと前記付属情報が連結されていない素材データとが識別可能に表示されるように、前記表示画像の状態を制御する
   ことを特徴とする請求項１記載の編集画像表示制御装置。
4. 前記制御手段は、時間軸に沿って前記素材データを貼り付けてコンテンツの生成を行うための再生時間順表示において、前記付属情報が連結されている素材データと前記付属情報が連結されていない素材データとが識別可能に表示されるように、前記表示画像の状態を制御する
   ことを特徴とする請求項１記載の編集画像表示制御装置。
5. 前記制御手段は、前記付属情報に基づき前記素材データの再生可能速度範囲を決定し、前記決定した再生可能速度範囲が表示されるように、前記表示画像の状態を制御することを特徴とする請求項１記載の編集画像表示制御装置。
6. 前記制御手段は、前記素材データの一覧を示す素材管理表示において、前記決定した再生可能速度範囲が表示されるように、前記表示画像の状態を制御する
   ことを特徴とする請求項５記載の編集画像表示制御装置。
7. 前記制御手段は、前記素材データを再生順に並べてコンテンツの生成を行うための再生順序表示において、前記決定した再生可能速度範囲が表示されるよう、前記表示画像の状態を制御する
   ことを特徴とする請求項５記載の編集画像表示制御装置。
8. 前記制御手段は、前記素材データの再生画像表示において、前記決定した再生可能速度範囲が表示されるように、前記表示画像の状態を制御する
   ことを特徴とする請求項５記載の編集画像表示制御装置。
9. 前記再生可能速度範囲の表示内に再生速度を示す位置表示が含まれる
   ことを特徴とする請求項８記載の編集画像表示制御装置。
10. 前記制御手段は、時間軸に沿って前記素材データを貼り付けてコンテンツの生成を行うための再生時間順表示において、前記素材データの表示幅が、再生速度に基づいて算出された再生時間に応じて可変して表示されるように、前記表示画像の状態を制御することを特徴とする請求項５記載の編集画像表示制御装置。
11. 前記制御手段は、前記素材データの再生画像表示において、前記決定した再生可能速度範囲が表示され、該再生可能速度範囲の表示内に再生速度を示す位置表示が設けられ、時間軸に沿って前記素材データを貼り付けてコンテンツの生成を行うための再生時間順表示において、前記素材データの表示幅が再生速度に基づいて算出された再生時間に応じて可変して表示され、前記再生時間順表示における素材データの表示幅を可変する操作に応じて前記位置表示の表示位置が連動されて移動され、前記位置表示の表示位置を可変する操作に応じて前記再生時間順表示における素材データの表示幅が可変されるように、前記表示画像の状態を制御する
    ことを特徴とする請求項５記載の編集画像表示制御装置。
12. 前記制御手段は、前記再生可能速度可変範囲内の再生速度で素材データの再生動作が指示されたとき、前記指示された速度で再生された前記素材データが表示されるように、前記表示画像の状態を制御する
    ことを特徴とする請求項５記載の編集画像表示制御装置。
13. 素材データにフレームレート情報が付属情報として連結されているか否かを検出する検出ステップと、
    前記フレームレート情報が付属情報として連結されている素材データと、前記フレームレート情報が付属情報として連結されていない素材データとが識別して表示されるように、編集用の表示画像の状態を制御する表示制御ステップとを有する
    ことを特徴とする編集画像表示制御方法。
14. 前記表示制御ステップでは、前記素材データの一覧を示す素材管理表示において、前記付属情報が連結されている素材データと前記付属情報が連結されていない素材データとが識別可能に表示されるよう前記表示画像の状態が制御される
    ことを特徴とする請求項１３記載の編集画像表示制御方法。
15. 前記表示制御ステップでは、前記素材データを再生順に並べてコンテンツの生成を行うための再生順序表示において、前記付属情報が連結されている素材データと前記付属情報が連結されていない素材データとが識別可能に表示されるよう前記表示画像の状態が制御される
    ことを特徴とする請求項１３記載の編集画像表示制御方法。
16. 前記表示制御ステップでは、時間軸に沿って前記素材データを貼り付けてコンテンツの生成を行うための再生時間順表示において、前記付属情報が連結されている素材データと前記付属情報が連結されていない素材データとが識別可能に表示されるよう前記表示画像の状態が制御される
    ことを特徴とする請求項１３記載の編集画像表示制御方法。
17. 前記表示制御ステップでは、前記付属情報に基づき前記素材データの再生可能速度範囲が決定され、該決定された再生可能速度範囲が表示されるよう前記表示画像の状態が制御される
    ことを特徴とする請求項１３記載の編集画像表示制御方法。
18. 前記表示制御ステップでは、前記素材データの一覧を示す素材管理表示において、前記決定された再生可能速度範囲が表示されるよう前記表示画像の状態が制御される
    ことを特徴とする請求項１７記載の編集画像表示制御方法。
19. 前記表示制御ステップでは、前記素材データを再生順に並べてコンテンツの生成を行う再生順序表示において、前記決定された再生可能速度範囲が表示されるよう前記表示画像の状態が制御される
    ことを特徴とする請求項１７記載の編集画像表示制御方法。
20. 前記表示制御ステップでは、前記素材データの再生画像表示において、前記決定された再生可能速度範囲が表示されるよう前記表示画像の状態が制御される
    ことを特徴とする請求項１７記載の編集画像表示制御方法。
21. 前記再生可能速度範囲の表示内に再生速度を示す位置表示が含まれる
    ことを特徴とする請求項２０記載の編集画像表示制御方法。
22. 前記表示制御ステップでは、時間軸に沿って前記素材データを貼り付けてコンテンツの生成を行うための再生時間順表示において、前記素材データの表示幅が再生速度に基づいて算出した再生時間に応じて可変されて表示されるよう前記表示画像の状態が制御される
    ことを特徴とする請求項１７記載の編集画像表示制御方法。
23. 前記表示制御ステップでは、前記素材データの再生画像表示において、前記決定した再生可能速度範囲が表示され、該再生可能速度範囲の表示内に再生速度を示す位置表示が設けられ、時間軸に沿って前記素材データを貼り付けてコンテンツの生成を行うための再生時間順表示において、前記素材データの表示幅が再生速度に基づいて算出した再生時間に応じて可変して表示され、前記再生時間順表示における素材データの表示幅を可変する操作に応じて前記位置表示の表示位置が連動されて移動され、前記位置表示の表示位置を可変する操作に応じて前記再生時間順表示における素材データの表示幅が可変されるよう、前記表示画像の状態が制御される
    ことを特徴とする請求項１７記載の編集画像表示制御方法。
24. 前記表示制御ステップでは、前記再生可能速度範囲内の再生速度で素材データの再生動作が指示されたとき、前記指示された速度で再生された前記素材データが表示されるよう前記表示画像の状態が制御される
    ことを特徴とする請求項１７記載の編集画像表示制御方法。
25. 素材データにフレームレート情報が付属情報として連結されているか否かを検出するするステップと、
    前記フレームレート情報が付属情報として連結されている素材データと、前記フレームレート情報が付属情報として連結されていない素材データとが識別して表示されるように、編集用の表示画像の状態を制御するステップをコンピュータに実行させるプログラム。

Images