JP4218319B2 - 映像閲覧システムおよび方法 - Google Patents

Description

【０００１】
【発明の属する技術分野】
本発明は複数の映像群から任意の映像を検索して閲覧する技術に係り、特に映像制作に関する情報を閲覧するための映像閲覧システムおよび方法に関する。
【０００２】
【従来の技術】
まず、以下の説明において、現場で撮影された映像等に代表される基礎となる映像を「素材映像」、素材映像を編集して制作された映像を「編集映像」、編集映像をもとに最終的に放送された映像を「オンエア映像」と呼ぶことにする。
【０００３】
一般に、映像の制作には編集作業が不可欠であり、現場で撮影された映像を全てそのまま使用することはまれである。また、放送局では、編集された映像を放送する際にも、時間の制限で途中カットしたり、テロップなどが割り込むこともある。このために、実際にオンエアされた映像と編集された映像とは必ずしも全て一致してはいない。このようなオンエア映像や編集映像を保存しておき、その中から必要な部分を選択して新たな映像を制作するには、これら材料となる映像群を管理し、目標の映像を検索して閲覧できることが必要である。
【０００４】
このような映像閲覧システムの一例は、特開平１１−２６６４２２号公報に開示されている。同公報に開示された放送番組管理装置は、完パケ（オンエア映像）と白素材（編集映像）との間の対応付けを予めメモリに格納しておく。具体的には、メモリに記憶されている完パケデータを１カット毎のショットに分割し、この完パケショットの映像と白素材中の映像区間との類似性をフレーム画像の相関値を用いて判定する。こうして、完パケショット毎の映像区間情報と、類似判定された白素材の映像区間情報とを対応付けることができる（段落番号００４８〜５８、図１０、図１１参照）。この完パケ／白素材関連データに基づいて、任意の完パケ映像区間に対応する白素材映像区間を相互に検索再生することが可能となる（段落番号００６０，００６１、図１２参照）。
【０００５】
【特許文献１】
特開平１１−２６６４２２号公報（段落番号００４８〜００５８、００６０、００６１、図１０〜１２）。
【０００６】
【発明が解決しようとする課題】
しかしながら、上記従来のシステムは、オンエア映像および編集映像に関連する素材映像へのアクセスが考慮されていない。素材映像は種々の目的に沿って利用されるものであるが、その後の映像制作の母体であり一次資料を提供する貴重な映像群でもある。
【０００７】
たとえば、編集映像はその時々の問題意識や意図に沿って素材映像を部分的に利用して制作されるが、時が経てば問題意識も変化し、同じ素材映像の別の部分が重要なシーンとして認識されるかもしれない。ニュースを例に取ると、同日に放送するニュースの制作は、編集映像の使いまわしで済ますことができても、後日、特集番組などのより詳しいコンテンツを制作する際には、編集映像だけでは不十分であり、素材映像まで遡って必要な映像を探すことが多い。
【０００８】
このように、使用済部分のみを集めてコンテンツを制作したり、逆に未放送部分を利用して新たなコンテンツを制作する場合など、素材映像の利用状況の把握が重要となる。上記従来のシステムでは、オンエア映像に対応した編集映像を再生するだけで、素材映像のどの箇所がどの映像に使われていたか把握できない。
【０００９】
さらに、従来のシステムは、オンエア映像に対応した編集映像を再生するだけで、映像のどの箇所がどの程度の頻度で使われていたか把握できない。映像制作に必要な箇所を選択する際に、利用頻度は１つの重要な判断基準である。使用頻度の多い部分のみを利用してダイジェストを制作する場合もある。逆に、あまり使用されていないか、全く使用されていない部分を利用して新たなコンテンツを制作する場合もあるであろう。いずれにしても、従来のシステムでは、このような要求により新たな映像を制作しようとする場合、制作効率の向上に全く寄与しない。
【００１０】
本発明の目的は、複数の映像群の利用状況を容易に把握できる映像閲覧システムおよび方法を提供することにある。
【００１１】
本発明の他の目的は、映像の使用頻度を閲覧できる映像閲覧システムおよび方法を提供することにある。
【００１２】
本発明の更に他の目的は、使用頻度の高い（低い）箇所へのアクセスを容易にすることにより制作効率を上げることのできる映像閲覧システムおよび方法を提供することにある。
【００１３】
【課題を解決するための手段】
本発明の映像閲覧システムは、第１の映像群および前記第１の映像群を用いて制作された第２の映像群に対し、前記第２の映像群の映像と該映像の制作に用いた映像との区間対応を表す映像対応情報に基づいて、前記第１の映像群の映像を指定することにより、指定された映像の前記第２の映像群における使用頻度を前記映像対応情報から映像区間ごとに求めて表示することを特徴とする。
【００１４】
また、本発明の映像閲覧システムは、第１の映像群、前記第１の映像群を用いて制作された第２の映像群および前記第２の映像群を用いて制作された第３の映像群に対し、前記第１の映像群および前記第２の映像群のうちいずれか１つの映像群の映像が制作に用いられたことで生じる他の映像群の映像との映像区間単位の対応関係を示す映像対応情報に基づいて、前記第１の映像群および前記第２の映像群のうちいずれか１つの映像群の映像を指定することにより、指定された映像と対応関係を持つ他の映像群における前記指定された映像の使用頻度を前記映像対応情報から映像区間ごとに求めて表示することを特徴とする。
【００１５】
本発明の第１の側面による映像閲覧システムは、ある映像群の少なくとも１つの映像を使用して次の映像群の映像が制作されるという一連の対応関係を有する複数の映像群を検索可能に格納する第１格納手段と、前記一連の対応関係から得られる相互の映像区間単位の対応関係を検索可能に格納する第２格納手段と、前記複数の映像群のいずれか１つの映像群の映像が指定されると、前記第２格納手段から前記指定された映像が制作に用いられたことで生じる映像区間単位の対応関係を検索し、検索された対応関係に基づいて他の映像群における前記指定された映像の使用頻度を映像区間ごとに生成する使用頻度生成手段と、前記使用頻度を所定の形式で表示部に表示する制御手段と、を有することを特徴とする。
【００１６】
前記第２格納手段は、前記複数の映像群ごとに各映像区間が他の映像群の１つの映像区間に対応していることを示す対応情報を検索可能に格納することが望ましい。
【００１７】
前記使用頻度生成手段は、前記複数の映像群のいずれか１つの映像群の映像が指定されると、前記第２格納手段から前記指定された映像に関する対応情報を検索し、前記指定された映像の他の映像群における使用映像区間を特定する検索手段と、前記使用映像区間に基づいて前記他の映像群における前記指定された映像の使用頻度を生成する使用頻度算出手段と、を有することを特徴とする。
【００１８】
前記制御手段は、前記指定された映像の映像区間を基準にして前記他の映像群にける前記指定された映像の使用頻度をグラフ化して表示することを特徴とする。さらに、前記制御手段は、前記指定された映像の映像区間の時間軸方向に移動可能なポインタを前記グラフ化された使用頻度とともに表示し、前記ポインタが操作されると、前記ポインタが指示する時間位置から前記指定された映像を表示することが望ましい。
【００１９】
本発明の他の側面による映像閲覧方法は、ａ）ある映像群の少なくとも１つの映像を用いて次の映像群の映像が制作されるという一連の対応関係を有する複数の映像群を検索可能に第１格納手段に格納し、ｂ）前記一連の対応関係から生成され、前記複数の映像群ごとに各映像区間が他の映像群の１つの映像区間に対応していることを示す対応情報を検索可能に第２格納手段に格納し、ｃ）前記複数の映像群のいずれか１つの映像群の映像が指定されると、前記指定された映像が制作に用いられたことで生じる映像区間単位の対応情報を前記第２格納手段から検索して前記指定された映像の他の映像群における使用映像区間を特定し、ｄ）前記使用映像区間に基づいて前記他の映像群における前記指定された映像の使用頻度を映像区間ごとに生成し、ｅ）前記使用頻度を所定の形式で表示部に表示する、ことを特徴とする。
【００２０】
前記ステップｄ）は、前記使用映像区間から前記指定された映像の使用フレーム番号を特定し、前記他の映像群におけるすべての使用映像区間において前記使用フレーム番号をカウントすることで前記使用頻度を生成する、ことを特徴とする。
【００２１】
本発明によれば、使用される側の映像を指定すると、その利用頻度情報が生成され可視化されて表示される。このために複数の映像群の利用状況を容易に把握することができる。
【００２２】
さらに、使用頻度を表示する画面に時間軸上を移動可能なポインタを設けておき、マウス等で操作することにより、使用頻度の高いあるいは低い箇所へ容易にアクセスすることができ、制作効率を上げることができる。
【００２３】
【発明の実施の形態】
（第１実施形態）
システム構成
図１は、本発明の第１実施形態による映像閲覧システムの構成を示すブロック図である。図１において、入力部１０１はキーボードやポインティングデバイスなどの入力デバイスからなり、閲覧映像の指定や種々の命令を入力することができる。表示部１０２はモニタであり、後述する映像閲覧画面を表示し、入力部１０１と協働してグラフィカルなユーザインタフェースを提供する。本システムのプログラム制御プロセッサ１０３は、制御プログラム１０４を実行することにより映像閲覧に関する処理やシステム全体の動作を制御する。
【００２４】
本実施形態による映像閲覧システムには、映像検索部１０５、映像記憶部１０６、対応情報検索部１０７、対応情報記憶部１０８および使用頻度算出部１０９が設けられている。映像検索部１０５、対応情報検索部１０７および使用頻度算出部１０９は、プログラム制御プロセッサ１０３の制御のもとで、後述する映像検索、対応情報検索および使用頻度算出をそれぞれ実行する。
【００２５】
映像記憶部１０６には、オンエア映像群（ＯＡ）、編集映像群（ＥＤ）および素材映像群（ＲＡＷ）が格納されている。素材映像群（ＲＡＷ）は、現場で撮影された素材映像が、例えばディジタル画像データとして記憶されたものであり、それぞれの素材映像はユニークな識別子とともに管理される。タイトルや制作日時など映像関連情報を併せて保持することも可能である。
【００２６】
編集映像群（ＥＤ）は、素材映像を厳選して編集された放送用の映像が、例えばディジタル画像データとして記憶されたものであり、それぞれの編集映像はユニークな識別子とともに管理される。タイトルや制作日時など映像関連情報を併せて保持することも可能である。
【００２７】
オンエア映像群（ＯＡ）は、最終的に放送された映像が、例えばディジタル画像データとして記憶されたものであり、それぞれのオンエア映像はユニークな識別子とともに管理される。タイトルや制作日時など映像関連情報を併せて保持することも可能である。
【００２８】
映像検索部１０５は、プログラム制御プロセッサ１０３から映像検索指令を受け取ると、指定された映像識別子に対応する映像データを映像記憶部１０６から検索する。読み出された映像データは、後述する映像データ関連情報と併せて表示部１０２に表示される。映像検索指令に映像の開始位置が含まれる場合には、読み出された映像を開始位置より再生することも、選択された映像を開始位置で頭だししておくこともできる。
【００２９】
対応情報記憶部１０８には、オンエア映像対応情報（ＯＡ−ＲＥＬ）、編集映像対応情報（ＥＤ−ＲＥＬ）および素材映像対応情報（ＲＡＷ−ＲＥＬ）が格納されている。これら対応情報については、後で詳細に説明する。
【００３０】
対応情報検索部１０７は、対応情報検索指令を受け取ると、指定された映像に関する対応情報を対応情報記憶部１０８から検索する。読み出された対応情報は、後述するように、所定のフォームで表示部１０２に表示される。その際、対応する他の映像へのアクセスを可能にするポインタを併せて表示する。
【００３１】
使用頻度算出部１０９は、上記対応情報を参照しながら、素材映像に含まれるフレームが編集映像あるいはオンエア映像で何回使用されたかを算出する。算出された使用頻度は、グラフ化されて表示部１０２上の所定ウィンドウに表示される。使用頻度の算出については、後で詳細に説明する。
【００３２】
対応情報
図２（Ａ）はオンエア映像対応情報のフォーマットの一例を示す図、（Ｂ）は編集映像対応情報のフォーマットの一例を示す図、（Ｃ）は素材映像対応情報のフォーマットの一例を示す図、（Ｄ）は汎用の対応情報フォーマットの一例を示す図である。
【００３３】
図２（Ａ）に示すように、オンエア映像対応情報は、オンエア映像と編集映像と素材映像との間の対応関係を記述した情報である。すなわち、あるオンエア映像のどの箇所がどの編集映像／素材映像のどの箇所から引用されたものなのかが記述されている。オンエア映像対応情報は６個のカラムから構成され、カラム番号１にはオンエア映像の識別子、カラム番号２にはオンエア映像区間の開始フレーム番号、カラム番号３には対応する映像の識別子、カラム番号４には対応する映像の種別（編集映像あるいは素材映像）、カラム番号５には対応する映像の映像区間の開始フレーム番号、カラム番号６には映像区間のフレーム数、をそれぞれ記述する。このような記述によって、あるオンエア映像のある映像区間が編集映像あるいは素材映像のどの映像区間に対応しているかを特定することができる。
【００３４】
なお、各オンエア映像についての対応関係をそれぞれ別々の対応情報ファイルに格納しておくことも、また各オンエア映像についての対応関係を１つの対応情報ファイルにまとめて格納しておくこともできる。たとえば、オンエア映像Ａについての対応関係を対応情報ファイルａに格納しておき、オンエア映像Ｂについての対応関係を対応情報ファイルｂに格納してもよいし、オンエア映像ＡおよびＢの双方についての対応関係を１つの対応情報ファイルに格納してもよい。
【００３５】
図２（Ｂ）に示すように、編集映像対応情報は、ある編集映像のどの箇所がどのオンエア映像のどの箇所に使われていたか、あるいは、ある編集映像のどの箇所がどの素材映像のどの箇所から引用されたものなのか、を記述した情報である。編集映像対応情報は６個のカラムから構成され、カラム番号１には編集映像の識別子、カラム番号２には編集映像区間の開始フレーム番号、カラム番号３には対応する映像の識別子、カラム番号４には対応する映像の種別（オンエア映像あるいは素材映像）、カラム番号５には対応する映像の映像区間の開始フレーム番号、カラム番号６には映像区間のフレーム数、がそれぞれ記述する。このような記述によって、ある編集映像のある映像区間がオンエア映像あるいは素材映像のどの映像区間に対応しているかを特定することができる。
【００３６】
図２（Ｃ）に示すように、素材映像対応情報は、ある素材映像のどの箇所がどの編集映像／オンエア映像のどの箇所に使われたかを記述した情報である。素材映像対応情報は６個のカラムから構成され、カラム番号１には素材映像の識別子、カラム番号２には素材映像区間の開始フレーム番号、カラム番号３には対応する映像の識別子、カラム番号４には対応する映像の種別（編集映像あるいはオンエア映像）、カラム番号５には対応する映像の映像区間の開始フレーム番号、カラム番号６には映像区間のフレーム数、がそれぞれ記述する。このような記述によって、ある素材映像のある映像区間が編集映像あるいはオンエア映像のどの映像区間に対応しているかを特定することができる。
【００３７】
図２（Ａ）〜（Ｃ）に示すそれぞれの対応情報フォーマットの代わりに、図２（Ｄ）に示す１つのフォーマットを用いることもできる。すなわち、汎用フォーマットとして、カラム番号１には参照元映像の識別子、カラム番号２には参照元映像の種別（オンエア映像、編集映像あるいは素材映像）、カラム番号３には参照元映像区間の開始フレーム番号、カラム番号４には参照先映像の識別子、カラム番号５には参照先映像の種別（オンエア映像、編集映像あるいは素材映像）、カラム番号６には参照先映像区間の開始フレーム番号、カラム番号７には映像区間のフレーム数、をそれぞれ記述する。
【００３８】
図３（Ａ）はオンエア映像対応情報の格納テーブルの一例を示す模式図、（Ｂ）は編集映像対応情報の格納テーブルの一例を示す模式図、（Ｃ）は素材映像対応情報の格納テーブルの一例を示す模式図である。
【００３９】
図３（Ａ）に示すように、オンエア映像対応情報は、各オンエア映像のオンエア映像区間ごとに、図２（Ａ）に示す形式で格納される。たとえば、格納レコード１は、オンエア映像ＯＡ１の第３フレームからの４フレーム分が編集映像ＥＤ１の第３フレームからの４フレーム分に対応していることを示す。同様に、レコード２は、同じオンエア映像ＯＡ１の第７フレームからの１０フレーム分が編集映像ＥＤ２の第５フレームからの１０フレーム分に対応していることを示す。図３（Ｂ）および（Ｃ）のテーブルについても同様である。
【００４０】
対応情報の生成
まず、ある編集映像のどの箇所がどの素材映像のどの箇所から引用されたものであるかの対応関係を示す情報を編集映像−素材映像間対応情報（ＥＤ−ＲＡＷ対応情報）と呼ぶ。この情報は、編集段階で選択された素材映像をシステムに記録しておけばよい。また、あるオンエア映像のどの箇所がどの編集映像のどの箇所を使って放映したものであるのかの対応関係を示す情報をオンエア映像−編集映像間対応情報（ＯＡ−ＥＤ対応情報）と呼ぶ。この情報は、オンエア段階で実際に選択された編集映像をシステムに記録しておけばよい。
【００４１】
なお、ＥＤ−ＲＡＷ対応情報やＯＡ−ＥＤ対応情報の記録がない場合には、たとえば、特開２００２−５８０４９公報に開示されている動画像検索技術を用いて、特徴の類似する動画像区間同士を対応付けることにより自動的に生成することもできる。
【００４２】
図４（Ａ）はオンエア映像−編集映像の対応関係と編集映像−素材映像の対応関係とを示す模式図、（Ｂ）はオンエア映像−編集映像−素材映像の対応関係を示す模式図である。
【００４３】
図４（Ａ）に示すように、はじめにＯＡ−ＥＤ対応情報を参照してオンエア映像内で使われた編集映像データ内の各映像区間（以降、編集映像区間と呼ぶ）を取り出す。次に、取り出された各編集映像区間について、ＥＤ−ＲＡＷ対応情報より、編集映像区間を含む編集映像の対応情報を調べることにより、編集映像区間に対応する素材映像データ内の各映像区間（以降、素材映像区間と呼ぶ）を特定できる。この特定された素材映像区間を上記オンエア映像区間に対応付けることによりＯＡ−ＲＡＷ対応情報が得られる。図４（Ｂ）に示すように、ある特定のオンエア映像に対応する素材映像区間が複数の素材映像にまたがる場合には、各素材映像の対応する区間毎にオンエア映像との対応関係を記述する（図３参照）。 なお、ＯＡ−ＲＡＷ対応情報を事前に生成して記憶していてもよい。
【００４４】
オンエア映像のどの箇所がどの編集映像または素材映像のどの箇所から引用されたものなのかを記述するオンエア映像対応情報（ＯＡ−ＲＥＬ）は、ＯＡ−ＥＤ対応情報およびＯＡ−ＲＡＷ対応情報より、オンエア映像毎に生成される（図３（Ａ））。
【００４５】
編集映像のどの箇所がどのオンエア映像のどの箇所に使われたか、また編集映像のどの箇所がどの素材映像のどの箇所から引用されたものなのかを記述する編集映像対応情報（ＥＤ−ＲＥＬ）は、ＯＡ−ＥＤ対応情報およびＥＤ−ＲＡＷ対応情報より、編集映像毎に生成される（図３（Ｂ））。
【００４６】
素材映像のどの箇所がどの編集映像またはオンエア映像のどの箇所に使われたかを記述する素材映像対応情報（ＲＡＷ−ＲＥＬ）は、ＯＡ−ＲＡＷ対応情報およびＥＤ−ＲＡＷ対応情報より、素材映像毎に生成される（図３（Ｃ））。
【００４７】
素材映像対応情報の表示例
図５は素材映像対応情報の閲覧表示例を示す図である。ある素材映像が指定された場合、その素材映像の時間を表示欄３０１に表示し、さらに、指定された素材映像の素材映像対応情報を参照して、そのカラム番号３および４にそれぞれ示された「対応する映像の識別子」および「種別」を表示ウィンドウ３０２ａに一覧表示する。
【００４８】
また、表示ウィンドウ３０２ｂには、カラム番号２に示す開始位置とカラム番号６に示すフレーム数とから特定される素材映像区間をマーク（図中の斜線部）を用いて表示する。すなわち、素材映像対応情報を参照しながら、表示ウィンドウ３０２ｂには、素材映像の時間を横軸として、どの部分がどの対応映像（オンエア映像あるいは編集映像）によって使用されているかがマークされる。
【００４９】
図５に示す例では、この素材映像が３つのオンエア映像と３つの編集映像に用いられており、各素材映像の使用されている区間がマークされている。これによって、たとえば識別子１１１１のオンエア映像に、素材映像の２０分から２５分までのシーンが使用されていることが一目でわかる。
【００５０】
本実施形態では、素材映像が使用されている区間の各マークをボタンの形で表示し、所望のマークをマウス等の入力部１０１によりクリックすることで当該対応する映像を映像閲覧ウインドウに表示することができる。
【００５１】
編集映像対応情報の表示例
図６は、編集映像対応情報の閲覧表示例を示す図である。ある編集映像が指定された場合、その編集映像の時間を表示欄４０１に表示し、さらに、カラム番号２に示す開始位置からカラム番号６に示すフレーム数分の編集映像区間を可視化するために、ウインドウ４０２の対応する映像の欄にマークをつける。マークの内容としては、表示欄４０３に素材映像の識別子および表示欄４０４に素材映像区間の代表フレームや時刻に対応したフレームなどである。
【００５２】
本実施形態では、対応する素材映像の各マークをボタンの形で表示し、所望のマークをマウス等の入力部１０１によりクリックすることで当該対応する映像を映像閲覧ウインドウに表示することができる。
【００５３】
オンエア映像対応情報の表示例
図７は、オンエア映像対応情報の閲覧表示例を示す図である。指定された映像がオンエア映像の場合は、指定されたオンエア映像に含まれる編集映像と、その制作に用いた素材映像とを表示可能である。指定されたオンエア映像の時間を表示欄５０１に表示し、さらに、カラム番号２に示す開始位置からカラム番号６に示すフレーム数分のオンエア映像区間を可視化するために、ウインドウ５０２の対応する映像の欄にマークをつける。マークの内容として、表示欄５０３に編集映像の識別子、表示欄５０４に素材映像の識別子、表示欄５０５に素材映像区間の代表フレームをそれぞれ提示できる。
【００５４】
本実施形態では、対応する編集映像および素材映像の各マークをボタンの形で表示し、所望のマークをマウス等の入力部１０１によりクリックすることで当該対応する映像を映像閲覧ウインドウに表示することができる。
【００５５】
また、指定された映像と同一種別の映像のリストあるいは指定された映像と対応関係を持つ他種別の映像のリストを併せて提示することもできる。
【００５６】
使用頻度の表示例
図８は、使用頻度情報を含む素材映像対応情報の閲覧表示例を示す図である。ある素材映像が指定された場合、その素材映像の時間を表示欄３０１に表示し、さらに、ウィンドウ３０２ａには指定された素材映像の素材映像対応情報を参照して、そのカラム番号３および４にそれぞれ示された「対応する映像の識別子」および「種別」を上述したように一覧表示する。
【００５７】
また、表示ウィンドウ３０３には、カラム番号２に示す開始位置とカラム番号６に示すフレーム数とから特定される素材映像区間をマーク（図中の斜線部）を用いて表示する。すなわち、素材映像対応情報を参照しながら、表示ウィンドウ３０３には、素材映像の時間を横軸として、どの部分がどの対応映像（オンエア映像あるいは編集映像）によって使用されているかがマークされる。
【００５８】
図８に示す例では、この素材映像が４つの編集映像に用いられており、各素材映像の使用されている区間がマークされている。これによって、たとえば識別子１１１１の編集映像に、素材映像の２１分から２６分くらいまでのシーンが使用されていることが一目でわかる。
【００５９】
さらに、表示ウィンドウ３０４には、縦軸を使用頻度、横軸を時間軸として、各フレームについての使用頻度を表示する。使用頻度の算出方法については後述する。
【００６０】
図８におけるポインタ３０５はマウス等により時間軸に沿って移動可能であり、時間軸上のポインタ位置に対応する時刻の素材映像を表示部１０２に表示可能である。本機能により、使用頻度を見ながら、ポインタにより指定された時間位置に映像を頭だしすることができるため、使用頻度の高い（低い）箇所へ容易にアクセスすることにより制作効率を上げることができる。
【００６１】
操作画面の表示例
図９は本実施形態による映像閲覧システムの操作画面の一例を示す模式図である。表示部１０２に表示された操作画面６０１において、映像閲覧ウィンドウ６０２には閲覧者が指定した識別子に対応した映像が表示され、サムネイル表示ウィンドウ６０３には与えられた開始位置の画像とその前後の画像が併せて一覧表示される。閲覧する映像の指定は、入力部１０１のキーボードにより映像の識別子を直接与えてもよい。また、映像の一覧を用意してマウス等を用いて利用者が映像を選択できるようにしておき、選択された映像の識別子を用いることも可能である。また、閲覧する映像の開始位置を併せて入力することも可能である。
【００６２】
さらに、関連情報リスト表示ウィンドウ６０４には、指定された映像と同一種別の映像のリストあるいは指定された映像と対応関係を持つ他種別の映像のリストが表示される。対応情報表示ウィンドウ６０５には、図５〜図８に例示したような対応情報および使用頻度情報が表示される。
【００６３】
このように、異なる映像種別間の対応情報が可視化され、さらに関連映像リストも表示されるために、映像閲覧効率をより高めることができる。また、上述したように、対応情報表示ウィンドウ６０５で可視化された対応情報にボタンを設け、入力部１０１のマウス等で指定することにより、その対応する映像区間に容易にアクセスすることができる。例えば、使用頻度を表示させた場合には、ポインタ３０５を所望の位置に移動させることで、対応する時刻の素材映像を映像閲覧ウィンドウ６０２に表示可能である。
【００６４】
使用頻度の算出
図１０は、本実施形態における使用頻度算出手順を示すフローチャートである。まず、対応情報記憶部１０８に、予め対応付けがされているオンエア映像対応情報（ＯＡ−ＲＥＬ）、編集映像対応情報（ＥＤ−ＲＥＬ）および素材映像対応情報（ＲＡＷ−ＲＥＬ）を記憶させておき、さらに、使用頻度カウンタをリセットする（ステップＡ１）。
【００６５】
利用者は閲覧する映像を入力部１０１から指定する（ステップＡ２）。閲覧する映像の指定は、識別子を直接入力してもよいし、予め一覧表示された映像からユーザが選択するようにしてもよい。また、上述したように、対応情報表示ウィンドウ６０５に表示された対応情報から対応関係を持つ映像区間あるいはその開始位置を選択することで、映像の指定を行うこともできる。
【００６６】
指定された映像の識別子が特定されると、プログラム制御プロセッサ１０３は映像検索部１０５に当該希望映像の検索を指示する。映像検索部１０５は、指定された識別子をキーにして映像記憶部１０６を検索する（ステップＡ３）。
【００６７】
指定された識別子を有する映像が見つかると（ステップＡ３のＹＥＳ）、映像検索部１０５はその指定映像データをプログラム制御プロセッサ１０３へ返す。プログラム制御プロセッサ１０３は、指定映像データをデータ処理した後、表示部１０２上の映像閲覧ウィンドウ６０２に表示する（ステップＡ５）。
【００６８】
続いて、プログラム制御プロセッサ１０３は対応情報検索部１０７に指定された識別子を用いた検索を指示する。対応情報検索部１０７は、指定された識別子をキーにして対応情報記憶部１０８を検索し（ステップＡ６）、指定された識別子を有する対応情報であって未だカウント処理されていないものが存在するか否かを判定する（ステップＢ１）。そして、使用頻度算出部１０９は、全ての指定対応情報がカウント処理されるまで、ステップＢ２〜Ｂ４を繰り返す。全てがカウントされると（ステップＢ１のＮＯ）、その結果をグラフ化して表示する（ステップＢ５〜Ｂ６）。以下、ステップＢ１〜Ｂ６に示すカウントおよびグラフ化動作を図１１〜１３を参照しながら説明する。
【００６９】
図１１は素材映像対応情報の格納テーブルの一例を示す模式図であり、図１２はフレームごとにカウントされた結果を示す使用頻度テーブルであり、図１３は図１２の使用頻度テーブルを可視化したグラフである。
【００７０】
図１１に示すように、素材映像対応情報は、各素材映像の映像区間ごとに、図２（Ｃ）に示す形式で格納される。たとえば、レコード１は、素材映像Ａ１の第３フレームからの４フレーム分が他の映像に使用されていることを示す。同様に、レコード２は、同じ素材映像Ａ１の第７フレームからの１０フレーム分が他の映像に使用されている。このように、素材映像対応情報を参照することで、素材映像Ａ１のどのフレームがどの映像に使用されているかを特定することができる。
【００７１】
図１０のステップＢ１において、指定された識別子を有する対応情報であって未だカウント処理されていないものが存在する場合には（ステップＢ１のＹＥＳ）、図１１に示すテーブルに格納された指定対応情報（ここでは、Ａ１）の未処理の１レコードを読み込む（ステップＢ２）。読み込む情報は、素材映像の開始フレーム番号（カラム番号２）および映像区間のフレーム数（カラム番号６）である。
【００７２】
続いて、素材映像の開始フレーム番号と映像区間のフレーム数とから使用された素材映像のフレーム番号を特定する（ステップＢ３）。そして、特定されたフレーム番号にそれぞれ対応する使用頻度カウントを１だけ加算する（ステップＢ４）。以上のステップＢ２〜Ｂ４を指定対応情報の全てのレコードがカウント処理されるまで繰り返す。これによって、素材映像Ａ１の使用されたフレームごとにそれぞれ使用頻度がカウントされ、最終的に、図１２に示すフレームごとの使用頻度のテーブルが得られる。
【００７３】
こうして得られた使用頻度テーブルはプログラム制御プロセッサ１０３へ出力されてグラフ化処理され（ステップＢ５）、図１３に示すような使用頻度グラフとして図８に示す使用頻度ウィンドウ３０４に表示される。
【００７４】
なお、ステップＡ４において与えられた識別子を持つ映像が検出されなかった場合、閲覧不能と判断し、閲覧不能を示すメッセージ等を表示する（ステップＡ９）。
【００７５】
上述したように、第１実施形態では、指定された映像の使用頻度情報を生成し、可視化して表示するように構成されているため、映像の使用頻度を容易に把握することができる。
【００７６】
また、本実施形態では、図８に示すように使用頻度ウィンドウ上でポインタ３０５を操作することにより、使用頻度の高いあるいは低い映像のフレームへ容易にアクセスすることにができ、制作効率を上げることができる。
【００７７】
また、図１２に示す使用頻度テーブルが得られた段階で、使用頻度の昇順あるいは降順にソートすることで、使用頻度の高いあるいは低い映像へのアクセスを更に容易にすることができる。
【００７８】
（第２実施形態）
本発明の第２実施形態では、使用頻度生成部１０９の代わりに使用頻度記憶部を設けておき、あらかじめ映像の使用頻度情報を求めて記憶しておく。使用頻度演算がなくなることで高速処理が可能となる。
【００７９】
（第３実施形態）
上記実施形態では素材映像が指定された場合を説明したが、図１に示すシステムでは、素材映像だけでなく編集映像もオンエア映像に使用される。したがって、素材映像が指定された場合、その素材映像の編集映像および／またはオンエア映像における使用頻度情報を同様に求めて可視化（ここでは、グラフ化）することができる。
【００８０】
まず、図２（Ｂ）に示す記述によって、ある編集映像のある映像区間がオンエア映像あるいは素材映像のどの映像区間に対応しているかを特定することができる。また、図２（Ｃ）に示す記述によって、ある素材映像のある映像区間がオンエア映像あるいは編集映像のどの映像区間に対応しているかを特定することができる。
【００８１】
したがって、素材映像に対しては編集映像およびオンエア映像で使用された回数を求めることができ、編集映像に対してはオンエア映像に使用された回数を求めることができる。この場合、図１０に示すフローチャートのステップＡ６において指定識別子に対する対応情報を編集映像の場合とオンエア映像の場合に分けるだけであり、基本的な動作は図１０〜図１３で説明したものと同様であるから、詳細は省略する。
【００８２】
すなわち、第３実施形態では、指定された映像が素材映像である場合には、上述したように素材映像対応情報を読み出し、素材映像に含まれる各フレームについて編集映像およびオンエア映像に使用された回数を求め、使用頻度情報とする。また、指定された映像が編集映像である場合には、編集映像対応情報を読み出し、編集映像に含まれる各フレームについてオンエア映像に使用された回数を求め、使用頻度情報とする。
【００８３】
このような使用頻度情報をグラフ化して表示することで、素材映像のどの箇所が何度オンエア映像や編集映像に引用されたか、また編集映像のどの箇所が何度オンエア映像に引用されたか、といった映像の使用頻度を容易に把握することができる。
【００８４】
さらに、本実施形態では、対応情報表示ウィンドウ６０５の時間軸上にあるポインタをマウス等で操作することにより、使用頻度の高い（低い）箇所へ容易にアクセスすることができ、制作効率を上げることができる。
【００８５】
また、図１２に示す使用頻度テーブルが得られた段階で、使用頻度の昇順あるいは降順にソートすることで、使用頻度の高いあるいは低い映像へのアクセスを更に容易にすることができる。
【００８６】
（第４実施形態）
図１４は本発明の第４実施形態による映像閲覧システムのブロック図である。本実施形態では、図１に示す映像検索部１０５、対応情報検索部１０７および使用頻度算出部１０９をデータ処理部７０１内にソフトウエアにより実装している。すなわち、データ処理部７０１は映像閲覧プログラム７０２を実行することで、第１〜第３実施形態で説明したものと等価な映像閲覧機能を実現することができる。入力部１０１、表示部１０２、映像記憶部１０６および対応情報記憶部１０８は、映像閲覧プログラム７０２を実行しているデータ処理部７０１によって、第１、第２または第３実施形態と同様に制御され、本発明による映像閲覧システムを実現できる。
【００８７】
なお、上記実施形態では、素材映像、編集映像、オンエア映像の３種類の映像群の場合を説明したが、例えばオンエア映像を引用して制作したコンテンツ等をも閲覧対象とする場合など、利用関係を有するＮ（Ｎ＞３）種類の映像群の場合に拡張できることは言うまでもない。
【００８８】
【発明の効果】
以上詳細に説明したように、本発明によれば、複数の映像群の利用状況を容易に把握することができる。すなわち、使用される側の映像を指定すると、その利用頻度情報が生成され可視化されて表示される。このために複数の映像群の利用状況を容易に把握することができる。
【００８９】
たとえば、素材映像、編集映像、オンエア映像の３種類の映像群が格納されている場合、素材映像を指定すると、素材映像に含まれる各フレームについて編集映像およびオンエア映像に使用された回数を求め使用頻度情報とする。また、編集映像を指定すると、編集映像に含まれる各フレームについてオンエア映像に使用された回数を求め使用頻度情報とする。このような使用頻度情報をグラフ化して表示することで、素材映像のどの箇所が何度オンエア映像や編集映像に引用されたか、また編集映像のどの箇所が何度オンエア映像に引用されたか、といった映像の使用頻度を容易に把握することができる。
【００９０】
さらに、対応情報表示ウィンドウの時間軸上にポインタを設けておき、マウス等で操作することにより、使用頻度の高い（低い）箇所へ容易にアクセスすることができ、制作効率を上げることができる。
【００９１】
また、算出された使用頻度を昇順あるいは降順にソートすることで、使用頻度の高いあるいは低い映像へのアクセスを更に容易にすることができる。
【図面の簡単な説明】
【図１】本発明の第１実施形態による映像閲覧システムの構成を示すブロック図である。
【図２】（Ａ）は 第１実施形態におけるオンエア映像対応情報のフォーマットの一例を示す図、（Ｂ）は編集映像対応情報のフォーマットの一例を示す図、（Ｃ）は素材映像対応情報のフォーマットの一例を示す図、（Ｄ）は汎用の対応情報フォーマットの一例を示す図である。
【図３】（Ａ）は 第１実施形態におけるオンエア映像対応情報の格納テーブルの一例を示す模式図、（Ｂ）は編集映像対応情報の格納テーブルの一例を示す模式図、（Ｃ）は素材映像対応情報の格納テーブルの一例を示す模式図である。
【図４】（Ａ）は第１実施形態におけるオンエア映像−編集映像の対応関係と編集映像−素材映像の対応関係とを示す模式図、（Ｂ）はオンエア映像−編集映像−素材映像の対応関係を示す模式図である。
【図５】第１実施形態における素材映像対応情報の閲覧表示例を示す図である。
【図６】第１実施形態における編集映像対応情報の閲覧表示例を示す図である。
【図７】第１実施形態におけるオンエア映像対応情報の閲覧表示例を示す図である。
【図８】第１実施形態における使用頻度情報を含む素材映像対応情報の閲覧表示例を示す図である。
【図９】第１実施形態による映像閲覧システムの操作画面の一例を示す模式図である。
【図１０】第１実施形態の全体的動作を示すフローチャートである。
【図１１】第１実施形態における素材映像対応情報の格納テーブルの一例を示す模式図である。
【図１２】第１実施形態においてフレームごとにカウントされた結果を示す使用頻度テーブルである。
【図１３】図１２の使用頻度テーブルを可視化したグラフである。
【図１４】本発明の第４実施形態による映像閲覧システムのブロック図である。
【符号の説明】
１０１ 入力部
１０２ 表示部
１０３ プログラム制御プロセッサ
１０４ 制御プログラム
１０５ 映像検索部
１０６ 映像記憶部
１０７ 対応情報検索部
１０８ 対応情報記憶部
１０９ 使用頻度算出部
ＯＡ オンエア映像群
ＥＤ 編集映像群
ＲＡＷ 素材映像群
ＯＡ−ＲＥＬ オンエア映像対応情報
ＥＤ−ＲＥＬ 編集映像対応情報
ＲＡＷ−ＲＥＬ 素材映像対応情報

Claims (13)

1. 第１の映像群および前記第１の映像群を用いて制作された第２の映像群に対し、前記第２の映像群の映像と該映像の制作に用いた映像との区間対応を表す映像対応情報に基づいて、前記第１の映像群の映像を指定することにより、指定された映像の前記第２の映像群における使用頻度を前記映像対応情報から映像区間ごとに求めて表示することを特徴とする映像閲覧システム。
2. 第１の映像群、前記第１の映像群を用いて制作された第２の映像群および前記第２の映像群を用いて制作された第３の映像群に対し、前記第１の映像群および前記第２の映像群のうちいずれか１つの映像群の映像が制作に用いられたことで生じる他の映像群の映像との映像区間単位の対応関係を示す映像対応情報に基づいて、前記第１の映像群および前記第２の映像群のうちいずれか１つの映像群の映像を指定することにより、指定された映像と対応関係を持つ他の映像群における前記指定された映像の使用頻度を前記映像対応情報から映像区間ごとに求めて表示することを特徴とする映像閲覧システム。
3. 複数の映像から所望の映像を閲覧するための映像閲覧システムにおいて、
   ある映像群の少なくとも１つの映像を使用して次の映像群の映像が制作されるという一連の対応関係を有する複数の映像群を検索可能に格納する第１格納手段と、
   前記一連の対応関係から得られる相互の映像区間単位の対応関係を検索可能に格納する第２格納手段と、
   前記複数の映像群のいずれか１つの映像群の映像が指定されると、前記第２格納手段から前記指定された映像が制作に用いられたことで生じる映像区間単位の対応関係を検索し、検索された対応関係に基づいて他の映像群における前記指定された映像の使用頻度を映像区間ごとに生成する使用頻度生成手段と、
   前記使用頻度を所定の形式で表示部に表示する制御手段と、
   を有することを特徴とする映像閲覧システム。
4. 前記第２格納手段は、前記複数の映像群ごとに各映像区間が他の映像群の１つの映像区間に対応していることを示す対応情報を検索可能に格納することを特徴とする請求項３記載の映像閲覧システム。
5. 前記使用頻度生成手段は、
   前記複数の映像群のいずれか１つの映像群の映像が指定されると、前記第２格納手段から前記指定された映像が制作に用いられたことで生じる映像区間単位の対応情報を検索し、前記指定された映像の他の映像群における使用映像区間を特定する検索手段と、
   前記使用映像区間に基づいて前記他の映像群における前記指定された映像の使用頻度を映像区間ごとに生成する使用頻度算出手段と、
   を有することを特徴とする請求項４記載の映像閲覧システム。
6. 前記制御手段は、前記指定された映像の映像区間を基準にして前記他の映像群における前記指定された映像の使用頻度をグラフ化して表示することを特徴とする請求項４記載の映像閲覧システム。
7. 前記制御手段は、前記指定された映像の映像区間の時間軸方向に移動可能なポインタを前記グラフ化された使用頻度とともに表示し、前記ポインタが操作されると、前記ポインタが指示する時間位置から前記指定された映像を表示することを特徴とする請求項６記載の映像閲覧システム。
8. 前記制御手段は、前記使用頻度を昇順および降順のいずれかで並び替えて表示することを特徴とする請求項３ないし７のいずれかに記載の映像閲覧システム。
9. 複数の映像から所望の映像を閲覧するための映像閲覧方法において、
   ａ）ある映像群の少なくとも１つの映像を用いて次の映像群の映像が制作されるという一連の対応関係を有する複数の映像群を検索可能に第１格納手段に格納し、
   ｂ）前記一連の対応関係から生成され、前記複数の映像群ごとに各映像区間が他の映像群の１つの映像区間に対応していることを示す対応情報を検索可能に第２格納手段に格納し、
   ｃ）前記複数の映像群のいずれか１つの映像群の映像が指定されると、前記指定された映像が制作に用いられたことで生じる映像区間単位の対応情報を前記第２格納手段から検索して前記指定された映像の他の映像群における使用映像区間を特定し、
   ｄ）前記使用映像区間に基づいて前記他の映像群における前記指定された映像の使用頻度を映像区間ごとに生成し、
   ｅ）前記使用頻度を所定の形式で表示部に表示する、
   ことを特徴とする映像閲覧方法。
10. 前記ステップｄ）は、
    前記使用映像区間から前記指定された映像の使用フレーム番号を特定し、
    前記他の映像群におけるすべての使用映像区間において前記使用フレーム番号をカウントすることで前記使用頻度を生成する、
    ことを特徴とする請求項９記載の映像閲覧方法。
11. 前記ステップｅ）は、前記指定された映像の映像区間を基準にして前記他の映像群における前記指定された映像の使用頻度をグラフ化して表示することを特徴とする請求項９記載の映像閲覧方法。
12. さらに、
    ｆ）前記指定された映像の映像区間の時間軸方向に移動可能なポインタを前記グラフ化された使用頻度とともに表示し、
    ｇ）前記ポインタが操作されると、前記ポインタが指示する時間位置から前記指定された映像を表示する、
    ことを特徴とする請求項１１記載の映像閲覧方法。
13. コンピュータに、ある映像群の少なくとも１つの映像を用いて次の映像群の映像が制作されるという一連の対応関係を有する複数の映像群から所望の映像を閲覧するための映像閲覧処理を実行させるためのプログラムにおいて、
    前記一連の対応関係から生成され、前記複数の映像群ごとに各映像区間が他の映像群の１つの映像区間に対応していることを示す対応情報を検索可能に第１格納手段に格納するステップと、
    前記複数の映像群のいずれか１つの映像群の映像が指定されると、前記指定された映像が制作に用いられたことで生じる映像区間単位の対応情報を前記第１格納手段から検索して前記指定された映像の他の映像群における使用映像区間を特定するステップと、
    前記使用映像区間に基づいて前記他の映像群における前記指定された映像の使用頻度を映像区間ごとに生成するステップと、
    前記使用頻度を所定の形式で表示部に表示するステップと、
    を有することを特徴するコンピュータプログラム。

Images