JP2004274456A - 情報編集装置、情報編集方法、および情報編集プログラム - Google Patents
情報編集装置、情報編集方法、および情報編集プログラム Download PDFInfo
- Publication number
- JP2004274456A JP2004274456A JP2003063484A JP2003063484A JP2004274456A JP 2004274456 A JP2004274456 A JP 2004274456A JP 2003063484 A JP2003063484 A JP 2003063484A JP 2003063484 A JP2003063484 A JP 2003063484A JP 2004274456 A JP2004274456 A JP 2004274456A
- Authority
- JP
- Japan
- Prior art keywords
- information
- screen image
- additional information
- unit
- editing
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Landscapes
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
- Television Signal Processing For Recording (AREA)
- Television Systems (AREA)
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
Abstract
【課題】デジタルデータの要約等に関する情報をより効率的に利用者に提供することのできる情報編集装置を提供する。
【解決手段】デジタルデータを編集する情報編集装置５であって、表示画面３０に表示されるべき画面画像を取得する画面画像取得手段３６と、画面画像に関連するデジタルデータを取得するデジタルデータ取得手段４０と、画面画像と付帯情報識別情報とを対応付ける画面画像テーブル６２と、デジタルデータ取得手段４０が取得したデジタルデータに基づいて、付帯情報を生成する付帯情報生成手段６１と、付帯情報生成手段６１が生成し、対応テーブル６２において画面画像に対応付けられている付帯情報識別情報により識別される付帯情報を、当該付帯情報識別情報に対応付ける対応付手段４３とを備えた。
【選択図】 図２
【解決手段】デジタルデータを編集する情報編集装置５であって、表示画面３０に表示されるべき画面画像を取得する画面画像取得手段３６と、画面画像に関連するデジタルデータを取得するデジタルデータ取得手段４０と、画面画像と付帯情報識別情報とを対応付ける画面画像テーブル６２と、デジタルデータ取得手段４０が取得したデジタルデータに基づいて、付帯情報を生成する付帯情報生成手段６１と、付帯情報生成手段６１が生成し、対応テーブル６２において画面画像に対応付けられている付帯情報識別情報により識別される付帯情報を、当該付帯情報識別情報に対応付ける対応付手段４３とを備えた。
【選択図】 図２
Description
【０００１】
【発明の属する技術分野】
この発明は、動画データおよび音声データの少なくとも一方を含むデジタルデータを編集する情報編集装置、情報編集方法、および情報編集プログラムに関する。
【０００２】
【従来の技術】
長時間の映像のうちから所望の一部のみを見たいという要望がある。この要望に応えるべく、近年では、所望の部分を容易に検索または頭出しする方法として、インデキシング技術が開発されている。インデキシング技術とは、映像全体を時間軸に沿って複数の部分に分割し、それぞれの部分に対して、検索可能とすべく記述情報を対応付ける技術である。また、インデキシングの処理が施されたデジタルデータの要約を、所定の印刷書式に従って印刷する技術が知られている（例えば、特許文献１）。
【０００３】
【特許文献１】
特開２００２−２３２８５８号公報
【０００４】
【発明が解決しようとする課題】
しかし、上記印刷技術によれば、デジタルデータに対するインデキシング処理が完了した後でしか、デジタルデータの要約等が記載された印刷物を得ることができなかった。このため、例えば、講演の様子をデジタルデータとして撮影する場合に、講演が始まる前に予めデジタルデータの要約に関する情報が記載された印刷物を視聴者に配布することができなかった。
【０００５】
この発明は上記に鑑みてなされたもので、デジタルデータの要約等に関する情報をより効率的に利用者に提供することのできる情報編集装置、情報編集方法、および情報編集プログラムを得ることを目的とする。
【０００６】
【課題を解決するための手段】
上記目的を達成するため、請求項１にかかる発明は、動画データおよび音声データの少なくとも一方を含むデジタルデータを編集する情報編集方法であって、表示画面に順次表示されるべき各画面画像と、当該画面画像に対応付けるべき付帯情報を識別する付帯情報識別情報とを対応付ける対応テーブルを生成するテーブル生成ステップと、前記付帯情報を取得する付帯情報取得ステップと、前記付帯情報生成ステップにおいて生成され、前記対応テーブルにおいて前記画面画像に対応付けられている前記付帯情報識別情報により識別される前記付帯情報を、当該付帯情報識別情報に対応付ける対応付ステップと、前記画面画像と前記付帯情報識別情報とを対応付けて記載した印刷物を出力する出力ステップと、前記印刷物を、前記デジタルデータを生成する前に、利用者に配布する配布ステップとを有することを特徴とする。
【０００７】
この請求項１の発明によれば、付帯情報が生成される前に、予め付帯情報識別情報と画面画像とを対応付けることができるので、付帯情報が生成される前に利用者に対して付帯情報を取得するために利用される付帯情報識別情報を通知することができる。
【０００８】
また、このように、デジタルデータを生成する前に画面画像と付帯情報識別情報とを対応付けた印刷物を配布することができる。従って、利用者は、デジタルデータとして撮影される講演等を視聴する場合、講演の間、講演内容に沿って、画面画像等が記載された印刷物にメモを取り、後日、付帯情報識別情報に基づいて付帯情報を取得することができる。これにより、講演中の自分のメモと付帯情報との対応付けを容易に行うことができる。
【０００９】
また、請求項２は、請求項１に記載の情報編集方法であって、前記利用者から、前記印刷物に記載された前記付帯情報識別情報を取得するステップと、前記付帯情報識別情報で識別される前記付帯情報を、前記利用者に提供する提供ステップとをさらに有することを特徴とする。
【００１０】
この請求項２の発明によれば、利用者は、後に印刷物に記載された付帯情報識別情報に基づいて付帯情報を取得することができる。
【００１１】
請求項３にかかる発明は、動画データおよび音声データの少なくとも一方を含むデジタルデータを編集する情報編集装置であって、表示画面に表示されるべき画面画像を取得する画面画像取得手段と、前記画面画像に関連するデジタルデータを取得するデジタルデータ取得手段と、前記画面画像と、画面画像に対応付けるべき付帯情報を識別する付帯情報識別情報とを対応付ける画面画像テーブルと、前記デジタルデータ取得手段が取得したデジタルデータに基づいて、付帯情報を生成する付帯情報生成手段と、前記付帯情報生成手段が生成し、前記対応テーブルにおいて前記画面画像に対応付けられている前記付帯情報識別情報により識別される前記付帯情報を、当該付帯情報識別情報に対応付ける対応付手段とを備えたことを特徴とする。
【００１２】
この請求項３の発明によれば、付帯情報が生成される前に、予め付帯情報識別情報と画面画像とを対応付けることができるので、付帯情報が生成される前に、利用者に対して付帯情報を取得するために利用される付帯情報識別情報を通知することができる。
【００１３】
また、請求項４にかかる発明は、請求項３に記載の情報編集装置であって、前記画面画像テーブルにおいて対応付けられている前記画面画像と前記付帯情報識別情報とを含む出力用画面画像情報を生成する出力情報生成手段をさらに備えたことを特徴とする。
【００１４】
この請求項４の発明によれば、画面画像と付帯情報識別情報とを対応付けた出力用画面情報を印刷物として出力することができる。従って、利用者は、この印刷物において、画面画像に対応付けられた付帯情報識別情報を利用して、画面画像に対する付帯情報を取得することができる。
【００１５】
また、請求項５にかかる発明は、請求項３または４に記載の情報編集装置であって、前記付帯情報識別情報は、前記付帯情報が格納されている場所を示すＵＲＬであることを特徴とする。
【００１６】
この請求項５の発明によれば、付帯情報識別情報は、ＵＲＬであるので、利用者は、ＵＲＬにアクセスすることによって、容易に付帯情報を取得することができる。
【００１７】
また、請求項６にかかる発明は、請求項４または５に記載の情報編集装置であって、前記出力情報生成手段は、前記付帯情報識別情報に基づいて２次元バーコードを生成し、生成した２次元バーコードと前記画面画像とを含む前記出力画面情報を生成することを特徴とする。
【００１８】
この請求項６の発明によれば、付帯情報識別情報は、２次元バーコードとして印刷されるので、利用者は、この２次元バーコードを、バーコードリーダ等で読み取らせ、付帯情報識別情報を取得することができる。
【００１９】
また、請求項７にかかる発明は、請求項３から６のいずれか一項に記載の情報編集装置であって、利用者から前記付帯情報識別情報を含む画面画像関連情報要求を受け付ける指示受付手段と、前記指示受付手段が受け付けた前記画面画像関連情報要求に含まれる前記付帯情報識別情報を抽出し、前記画面画像テーブルにおいて、当該付帯情報識別情報に対応付けられている前記画面画像と、前記付帯情報識別情報により特定される前記付帯情報とを含む画面画像関連情報を生成する画像関連情報生成手段と、前記画像関連情報生成手段が生成した前記画面画像関連情報を、前記利用者に配信する配信手段とをさらに備えたことを特徴とする。
【００２０】
この請求項７の発明によれば、画面画像関連情報要求は付帯情報識別情報を含むので、利用者から画面画像関連情報要求を受け付けると、付帯情報識別情報により付帯情報を特定し、特定した付帯情報を利用者に提供することができる。このように、利用者は、容易に所望の付帯情報を取得することができる。
【００２１】
また、請求項８にかかる発明は、請求項７に記載の情報編集装置であって、前記画面画像と前記付帯情報とを埋め込む雛型を保持する雛型保持手段をさらに備え、画像関連情報生成手段は、前記雛型保持手段に保持されている前記雛型に前記画面画像と前記付帯情報とを埋め込むことにより前記画面画像関連情報を生成することを特徴とする。
【００２２】
この請求項８の発明によれば、雛型保持部は、画面画像関連情報を生成するときに利用する雛型を格納しているので、画像関連情報生成手段は、この雛型を利用することにより容易に画面画像関連情報を生成することができる。
【００２３】
また、請求項９にかかる発明は、請求項３から８のいずれか一項に記載の情報編集装置であって、前記付帯情報取得手段は、前記表示画面に前記画面画像が表示されている間に記録された付帯情報を取得し、前記対応付手段は、前記画面画像テーブルにおいて前記画面画像に対応付けられている前記付帯情報識別情報の実体として、前記付帯情報取得手段が取得した前記付帯情報を、前記付帯情報識別情報に対応付けることを特徴とする。
【００２４】
この請求項９の発明によれば、対応付手段は、表示画面に画面画像が表示されている間に記録された情報を付帯情報として、当該画面画像に対応付けるので、画面画像に関連する情報を効率的に付帯情報として特定することができる。
【００２５】
また、請求項１０にかかる発明は、動画データおよび音声データの少なくとも一方を含むデジタルデータを編集する情報編集方法であって、表示画面に順次表示されるべき各画面画像と、当該画面画像に対応付けるべき付帯情報を識別する付帯情報識別情報とを対応付ける対応テーブルを生成するテーブル生成ステップと、前記付帯情報を取得する付帯情報取得ステップと、前記付帯情報生成ステップにおいて生成され、前記対応テーブルにおいて前記画面画像に対応付けられている前記付帯情報識別情報により識別される前記付帯情報を、当該付帯情報識別情報に対応付ける対応付ステップと有することを特徴とする。
【００２６】
この請求項１０の発明によれば、付帯情報が生成される前に、予め付帯情報識別情報と画面画像とを対応付けることができるので、付帯情報が生成される前に、利用者に対して付帯情報を取得するために利用される付帯情報識別情報を通知することができる。
【００２７】
また、請求項１１にかかる発明は、動画データおよび音声データの少なくとも一方を含むデジタルデータを編集する情報編集処理をコンピュータに実行させる情報編集プログラムであって、表示画面に表示されるべき画面画像を取得する画面画像取得ステップと、前記画面画像に関連するデジタルデータを取得するデジタルデータ取得ステップと、前記画面画像と、画面画像に対応付けるべき付帯情報を識別する付帯情報識別情報とを対応付ける画面画像テーブルを生成する前記画面画像生成ステップと、前記デジタルデータ取得ステップにおいて取得されたデジタルデータに基づいて、付帯情報を生成する付帯情報生成ステップと、前記付帯情報生成ステップにおいて生成され、前記対応テーブルにおいて前記画面画像に対応付けられている前記付帯情報識別情報により識別される前記付帯情報を、当該付帯情報識別情報に対応付ける対応付ステップとをコンピュータに実行させることを特徴とする。
【００２８】
この請求項１１の発明によれば、付帯情報が生成される前に、予め付帯情報識別情報と画面画像とを対応付けることができるので、付帯情報が生成される前に、利用者に対して付帯情報を取得するために利用される付帯情報識別情報を通知することができる。
【００２９】
【発明の実施の形態】
図１は、この発明の実施の形態である情報編集装置５を含む情報編集システム１の全体構成を示している。
【００３０】
情報編集システム１は、プレゼンテーション資料３１を格納するプレゼンテーション装置２と、このプレゼンテーション装置２と接続し、プレゼンテーション資料３１を表示するプロジェクター等の投影機３と、投影機３により投影された画像を表示する表示画面３０と、プレゼンテーションの状況を音声と共に動画撮影する音声取り込み機能付きのＤＶカメラ４と、ＤＶカメラ４が取り込んだ音声を含む動画情報（以下単に「動画情報」と称す）を編集する情報編集装置５とを備えている。ここで、プレゼンテーション資料３１は、プレゼンテーションの際に表示させる複数の画面画像データで構成されている。画面画像データは、例えばＰＰＴデータなどの静止画データである。また、動画情報は、本発明のデジタルデータに相当する。
【００３１】
ＤＶカメラ４と情報編集装置５は、例えば、ＩＥＥＥ１３９４などのインターフェイスで接続されている。また、プレゼンテーション装置２と情報編集装置５は、ＩＥＥＥ８０２．１１ｂなどの通信インターフェイスで接続されている。無線通信環境がない場合は、通常のイーサネット（Ｒ）によるピア・ツー・ピア接続であってもよい。
【００３２】
プレゼンテーション装置２は、単にプレゼンテーション資料３１を格納しており、投影機３と通信可能であればよく、例えば、プレゼンターの所有するＰＣであってもよい。
【００３３】
編集者は、プレゼンターがプレゼンテーション資料３１を表示画面３０に表示させながらプレゼンテーションを行っている様子を、ＤＶカメラ４を用いて撮影する。ここで、編集者とは、情報編集システム１を利用して動画を編集する者のことである。
【００３４】
撮影が終了すると、情報編集装置５は、プレゼンテーション装置２からプレゼンテーション資料３１を取得し、さらに、ＤＶカメラ４からプレゼンテーションの様子を示す動画情報を取得する。そして、情報編集装置５は、動画情報を編集する。すなわち、動画情報にプレゼンテーション資料３１を対応付けた動画ファイルを生成する。
【００３５】
図２は、本実施の形態にかかる情報編集システム１に特徴的な処理を行う情報編集装置５の情報編集部３５と、プレゼンテーション装置２のイベント処理部３２の機能構成を示すブロック図である。
【００３６】
イベント処理部３２は、プレゼンテーション装置２に接続されたキーボード２１やマウス１５からの入力により、プレゼンテーションに関するイベントを示すイベント情報を取得するイベントキャプチャ部３３と、イベントキャプチャ部３３が取得したイベント情報を記録するイベント記録部３４と、イベント情報およびプレゼンテーション資料３１を情報編集装置５に送信する送信部４４とを有している。
【００３７】
また、情報編集部３５は、受信部３６と、イベント制御部３７と、イベント記録部３８と、イベント情報解釈部４２と、動画情報キャプチャ部４０と、動画情報管理部４１と、撮影機器制御部３９と、付帯情報生成部６１と、動画ファイル生成部４３と、付帯情報付帯情報ＩＤ付与部６０と、画面画像テーブル保持部６２と、印刷用データ生成部６５と、雛型保持部６６と、指示受付部５４と、出力部５０と、通信部６７とを有している。
【００３８】
受信部３６は、送信部４４からイベント情報およびプレゼンテーション資料３１を受け取る。イベント制御部３７は、受信部３６が受け取ったイベント情報を制御する。イベント記録部３８は、イベント制御部３７からイベント情報を受け取り、イベント情報を記録する。
【００３９】
撮影機器制御部３９は、ＤＶカメラ４を制御する。動画情報キャプチャ部４０は、動画ファイル生成部４３が生成した動画ファイルを外部に出力すると、ＤＶカメラ４が取り込んだ動画情報をキャプチャする。動画情報管理部４１は、動画情報を管理する。
【００４０】
イベント情報解釈部４２は、イベント記録部３８からイベント情報を取得し、イベント情報の内容を解釈する。付帯情報生成部６１は、イベント情報解釈部４２によって解釈されたイベント情報に基づいて、プレゼンテーション資料３１を構成する各画面画像データに対応付けるべき付帯情報を生成する。
【００４１】
動画ファイル生成部４３は、イベント情報解釈部４２によって解釈されたイベント情報に基づいて動画情報を編集し、動画ファイルを生成する。具体的には、付帯情報生成部６１が生成した付帯情報および画面画像データを動画情報に対応付ける。
【００４２】
付帯情報ＩＤ付与部６０は、受信部３６が受け取ったプレゼンテーション資料３１に含まれる各画面画像データに付帯情報ＩＤを対応付けて画面画像テーブルを生成する。ここで、付帯情報ＩＤとは、画面画像データに後に対応付けるべき付帯情報を識別する情報である。
【００４３】
保持部６４は、動画ファイル生成部４３が生成した動画ファイルを保持する。雛型保持部６６は、印刷用データ生成部６５が利用する雛型を保持する。
【００４４】
印刷用データ生成部６５は、動画ファイルを利用して印刷用データを生成する。具体的には、画面画像テーブル保持部６２に保持されている画面画像テーブルにおいて画面画像データに対応付けられている付帯情報ＩＤを、雛型保持部６６に保持されている雛型に埋め込むことにより印刷用データを生成する。ここで、印刷用データ生成部６２は、本発明の出力情報生成手段を構成する。また、印刷用データは、本発明の出力用画面画像データに相当する。
【００４５】
通信部６７は、ネットワーク８を介して外部と通信する。具体的には、付帯情報ＩＤを利用者から受信し、印刷用データ生成部６５に送る。また、印刷用データ生成部６５が生成した印刷用データを外部に送信する。出力部５０は、保持部６４に保持されている動画ファイルや、印刷用データ生成部６５において生成された印刷用データを出力する。
【００４６】
ここで、通信部６７および出力部５０は、本発明における配信手段を構成する。
【００４７】
指示受付部５４は、編集者等からの指示を受け付け、付帯情報生成部６１、動画ファイル生成部４３、および印刷用データ生成部６５に送る。
【００４８】
ここで、受信部３６、および動画情報キャプチャ部４０は、それぞれ本発明のイベント情報取得手段、画面画像情報取得手段、および動画情報取得手段を構成する。
【００４９】
次に、図３を参照しつつ、プレゼンテーション資料３１について説明する。プレゼンテーション資料３１は、プレゼンテーションの際に表示画面３０に表示すべき画面画像データ３１１，３１２，３１４，３１６，３１８，３２０を含んでいる。各画面画像データ３１１，３１２，３１４，３１６，３１８，３２０には、ページ番号が対応付けられており、ページ番号順に表示される。すなわち、プレゼンテーション資料３１を構成する画面画像は、当該プレゼンテーション資料３１の作成者が定めた順番に配列されている。図３に示すプレゼンテーション資料３１は、６ページ分の画面画像データを含んでいる。これらは、プレゼンターからの指示により、１ページ、２ページ、・・・とページ順に表示される。なお、本実施の形態におけるプレゼンテーション資料３１は、Ｍｉｃｒｏｓｏｆｔ（Ｒ）社製のＰｏｗｅｒ Ｐｏｉｎｔ（Ｒ）のファイルである。
【００５０】
通常、プレゼンテーションにおいて、プレゼンターは、以下の操作を行う。
１．プレゼンテーション装置２の起動
２．プレゼンテーション・ソフトの起動
３．発表の開始
４．キーボード２１又はマウス１５の操作による、プレゼンテーション資料３１のページめくり
５．発表の終了
６．プレゼンテーション・ソフトの終了
７．プレゼンテーション装置２の終了
ここで、ページめくりとは、表示画面３０に表示させる、プレゼンテーション資料３１を１ページから次のページすなわち２ページに切り替えることである。
【００５１】
以上の操作は、いずれもマウス１５またはキーボード２１における所定の操作に対応付けられている。例えば、プレゼンテーション装置２の表示画面に表示されたプレゼンテーション・ソフトのアイコンをマウス１５によりクリックする操作は、プレゼンテーション・ソフトの起動というイベントに対応付けられている。
【００５２】
イベント記録部３４は、このイベント情報のログを記録し、送信部４４は通信インターフェイスを介して情報編集部３５に送信する。撮影機器制御部３９は、イベント情報に基づいてＤＶカメラ４を制御する。イベント記録部３８は、イベント処理部３２から受信したイベント情報のみならず、ＤＶカメラ４の制御のイベント情報も記録する。
【００５３】
例えば、プレゼンテーション・ソフトの起動というイベントが発生したときは、このイベント情報をイベント記録部３８で記録する。さらに、撮影機器制御部３９により、ＤＶカメラ４からの動画情報取り込みを開始する。プレゼンテーション・ソフトが終了したときは、撮影機器制御部３９は、ＤＶカメラ４からの動画情報の取り込みを終了する。そして、イベント制御部３７は、プレゼンテーション・ソフトの終了をイベントとするイベント情報をイベント記録部３８に記録する。
【００５４】
イベント情報解釈部４２は、イベント情報の内容を解釈する。そして、動画ファイル生成部４３は、イベント情報解釈部４２によって解釈されたイベント情報の内容を参照し、プレゼンテーション資料３１及び動画情報に基づいて動画ファイルを生成する。
【００５５】
このように、情報編集部３５は、ＤＶカメラ４から取り込んだ動画情報中のイベントのイベント情報を動画情報とともに管理することができる。つまり、ＤＶカメラ４で撮影され取り込まれた動画情報は、時間の推移を規定する時間情報を付されて保存される。また、記録されたイベント情報は、動画ファイル生成部４３により、プレゼンテーション資料３１とマージされ、内容記述言語（ＭＰＥＧ−７など）により管理される。
【００５６】
図４は、イベント情報リスト３００のデータ構成を模式的に示している。イベント情報リスト３００には、イベント情報３４１，３４２，３４３・・・が、各イベントの発生した順番に配列されている。イベント情報には、発生したイベントの種類およびイベントが発生した日時が含まれている。例えばページ２が表示されると、「ページ２に切り替え」というイベント情報が記録される。これにより、各ページの表示を開始した表示開始時刻および表示を終了した終了時刻を認識することができる。
【００５７】
図５は、図２において説明した、動画ファイル生成部４３の詳細な機能構成を示す機能ブロック図である。動画ファイル生成部４３は、区間決定部４３０と、区間調整部４３１と、同期部４３３と、目次項目抽出部４３４と、対応付部４３５と、同期調整部４３６と、目次項目抽出部４３７とを有する。
【００５８】
区間決定部４３０は、ＤＶカメラ４から取得した動画情報６００を、プレゼンテーション装置２から取得したイベント情報３４０に基づいて、複数の区間に分割する。具体的には、区間決定部４３０は、ページめくりを示すイベント情報３５０が示す時刻に録画されたフレーム位置を動画情報の区間の境界位置として決定する。すなわち、一のページが表示されている区間は、同一区間となり、ページが切り替わるタイミングが、区間の境界に対応する。
【００５９】
区間調整部４３１は、区間決定部４３０が分割した区間の長さを調整する。具体的には、区間決定部４３０により決定された区間の長さが、予め定められた規定長に比べて短い場合に、この規定長よりも短い区間、すなわち規定長外区間を、当該規定長区間の直前または直後の区間に統合する。ここで、規定長は、変更可能である。例えば、指示受付部５４を介して編集者等から指定された長さに定められてもよい。
【００６０】
同期部４３３は、イベント情報３５０に基づいて、動画情報６００とプレゼンテーション資料３１との同期を取る。すなわち、動画情報６００の各区間を表示させるときに同時に表示させるべきプレゼンテーション資料３１の一のページを、各区間に対応付ける。
【００６１】
同期調整部４３６は、動画情報６００の規定外区間に対して、同期部４３３が同期させたプレゼンテーション資料３１のページにかえて、規定外区間の統合先の区間に同期されたページを同期させる。
【００６２】
目次項目抽出部４３４は、プレゼンテーション資料３１から、動画情報６００の目次の項目となるべき文字情報を抽出する。対応付部４３５は、目次項目抽出部４３４が抽出した目次項目を、当該目次項目の抽出元である、プレゼンテーション資料３１の各ページに対応付ける。対応付部４３５は、付帯情報４００をプレゼンテーション資料３１の各ページに対応付ける。目次項目抽出部４３７は、目次項目抽出部４３４が抽出した目次項目を削除する。
【００６３】
図６は、情報編集部３５が生成した動画ファイルを示している。動画ファイルは、動画情報６００と、動画情報６００の各区間６１０に対応付けられた複数の画面画像データ３１１，３１２・・・と、各区間６１０に対応付けられた付帯情報ＩＤ４１１，４１２・・・と、付帯情報ＩＤ４１１，４１２・・・で特定される付帯情報４２１，４２２・・・とを有している。なお、動画情報６００の各区間６１０は、複数のフレーム６２０を含んでいる。各区間６１０の長さは、イベント情報により決定される。
【００６４】
本実施の形態における付帯情報ＩＤ４１０は、当該付帯情報ＩＤにより特定される付帯情報の格納されている位置を示すＵＲＬである。また、付帯情報４２１は、対応する画面画像に関連するテキストデータである。テキストデータの内容は、例えば、画面画像に対応する区間における動画情報に含まれる音声に対応する内容であってもよい。また、他の例としては、編集者から指示受付部５４を介して入力された内容であってもよい。いずれにせよ、付帯情報の内容は、本実施の形態に限定されるものではない。
【００６５】
このように、動画情報６００は、プレゼンテーション資料３１の各画面画像３１１，３１２・・・と対応付けられているので、動画情報６００とプレゼンテーション資料３１の各画面画像データ３１１，３１２・・・とを同期して表示させることができる。
【００６６】
図７は、出力部５０から出力された動画ファイルを示している。図７に示す表示部５００には、動画情報６００と、プレゼンテーション資料３１のうち、表示部５００に表示されている区間に同期されたページ３３０と、動画情報６００の目次８００とが表示されている。なお、目次８００と動画情報６００とはリンクしており、例えば、目次８００中の「テーマ１：製造業の空洞化」という項目が選択されると、そのとき表示されている動画の区間にかかわらず、動画情報６００の区間１が再生される。なお、区間１とは、映像中に含まれる表示画面３０にテーマ１が表示されている区間である。このように、目次を選択することにより、利用者の所望の区間を表示させることができる。
【００６７】
なお、本実施の形態においては、動画ファイル生成部４３は、ＳＭＩＬ（Ｓｙｎｃｈｒｏｎｉｚｅｄ Ｍｕｌｔｉｍｅｄｉａ Ｉｎｔｅｇｒａｔｉｏｎ Ｌａｎｇｕａｇｅ）を利用して動画ファイルを生成する。ここで、ＳＭＩＬとは、動画、静止画、音声、音楽、文字など様々な形式のデータの再生を制御して同期させる言語のことであり、ＸＭＬで記述されている。ＳＭＩＬを用いることにより、表示画面における表示位置、表示させるタイミング、表示させる時間などを指定することができる。
【００６８】
次に、印刷用データ生成部６５が保持部６４に保持されている動画ファイルに基づいて印刷用データを生成する処理について説明する。
【００６９】
図８、印刷用データ生成部６５の詳細な機能構成を示すブロック図である。印刷用データ生成部６５は、画面画像データと付帯情報とが対応付けられた印刷用データを生成する。
【００７０】
印刷用データ生成部６５は、映像構造解釈部１０３、登録部１１１を含む映像要約生成部１０５、印刷整形部１０６、印刷言語生成部１０７、映像参照フレーム抽出部１０９、バーコード付加部１１０を備えている。
【００７１】
また、保持部６４に保持されている動画ファイルは、映像情報（映像本体）１０２と、映像情報１０２に付され、かつ、映像の構造を木構造で表す映像構造インデックス１０１とからなっている。
【００７２】
図９は、映像構造インデックス１０１を説明するための図である。映像構造インデックス１０１は、階層的な木構造として構成されている。木構造の階層は、情報の詳細さの度合いによって分けられていて、下位の階層ほど映像に関する詳細な情報を保持している。図示した木構造は、記録メディア全体に対して１つのルート・ディレクトリ２０１を持つ映像管理データを表すものである。
【００７３】
映像構造インデックス１０１は、映像情報１０２を構造化して表すデータである。映像情報１０２の構造化とは、映像情報で表される映像を連続するフレーム画像（動画を分割して作成された画像）としてとらえ、フレーム画像を所定の単位にまとめる処理をいう。構造化によってまとめられた複数のフレーム画像のまとまりは、セグメントとよばれる。映像構造インデックス１０１によれば、各セグメントがどのような画像のまとまりであるかを示す情報を得ることができる。
【００７４】
本実施の形態では、撮影ごとにセグメントを作成し、撮影ごとにまとめられたセグメントをさらにカット・ショット変化点ごとにまとめてセグメントを作成した。カット・ショット変化点とは、映像の記録開始から起算される記録時間、あるいは画像記録数に基づいて配列されたフレーム画像において、隣り合って配列され、かつ特徴量の差が所定の値よりも大きいフレーム画像間に設けられるものである。なお、特徴量としては、例えば以下のものがある。
・カラーヒストグラム
・空間色分布
・空間エッジ分布
・空間テクスチャ分布
・オブジェクト形状
【００７５】
図９に示すＸは環境情報を示し、Ｙはカメラ情報を表し、Ｚは代表フレームの静止画特徴量をそれぞれ表すものとする。環境情報Ｘとは、撮影時の外部環境に関する情報であって、日時、位置（緯度および経度）、高度、気温、湿度に関する情報を含んでいる。なお、映像構造インデックス１０１を作成する映像構造化装置は、このような情報を取得するための時計（ＧＭＴ時間を標準とする）、ＧＰＳ（Ｇｌｏｂａｌ Ｐｏｓｉｔｉｏｎｉｎｇ Ｓｙｓｔｅｍ）、気圧センサ、温度センサ、湿度センサを備えている。
【００７６】
また、カメラ情報Ｙとは、あるセグメントに含まれるフレーム画像（動画像を分割して作成された画像）を撮影したときの焦点距離、絞り値、シャッタースピード、ピント合焦距離といった情報を含んでいる。このような情報のうち、焦点距離に関する情報からは、フレーム画像の撮影対象物が風景か、あるいは人物や物といったオブジェクトか、広角撮影かあるいは望遠撮影かといった点ついて推測することができる。また、絞り値に関する情報からは、撮影対象物が風景か、あるいはオブジェクトかといった判断に加えて、撮影場所の明暗についても推測することができる。
【００７７】
また、シャッタースピードに関する情報からは、撮影対象物が静止したものか、あるいは移動しているものかについて、さらに撮影場所の明暗について推測することができる。そして、ピント合焦距離に関する情報からは、映像記録装置のカメラ部分と撮影対象物との距離がおおよそ推測できる。上記した情報を複合的に解釈することにより、例えば、シャッタースピードに関わらず絞り値が低く、合焦距離が近くて焦点距離が遠いこと場合には、オブジェクトを撮影した可能性が高いというような推測ができるようになる。
【００７８】
さらに、静止画特徴量Ｚとは、フレーム画像を静止画像として見た場合の、特徴量を表す情報である。
【００７９】
ルート・ディレクトリ２０１の直下に位置するカット・ショット統括情報２０２Ａ、カット・ショット情報２０３Ａは、映像情報１０２すべてに共通の情報である。さらに、カット・ショット統括情報２０２Ｂは、カット・ショット情報２０３Ａによって管理されるセグメントのカット・ショット変化点に関する統括的な情報である。
【００８０】
図９に示した木構造中には、撮影が進むにつれて作成された撮影ごとのセグメントが２つあって、２つのセグメントにはそれぞれカット・ショット情報２０３Ｂ、２０３Ｃが付されている。また２つのセグメントのいずれにもカメラ情報Ｙが付加されている。
【００８１】
さらに、カット・ショット情報２０３Ｂ、２２０３Ｃが付加されたセグメントの下位には、各セグメントに含まれるカット・ショットセグメントが４つ配置されている。４つのセグメントは、カット・ショット情報２０３Ｂが付加されたセグメントをカット・ショット変化点で分割して作成されたものである。そして、４つのカット・ショットセグメントには、それぞれカット・ショット情報２０３Ｄ、２０３Ｅ、２０３Ｆ、２０３Ｇが配置されている。また、カット・ショット情報２０３Ｃが付加されたセグメントの下位に配置された４つのセグメントには、カット・ショット情報２０３Ｈ、２０３Ｌ、２０３Ｊ、２０３Ｋが付加されている。カット・ショット情報２０３Ｄ〜Ｇ、カット・ショット情報２０３Ｈ〜Ｋには、それぞれカメラ情報Ｙが付加されている。
【００８２】
さらに、カット・ショット情報２０３Ｄ〜Ｇ、カット・ショット情報２０３Ｈ〜Ｋには、各カット・ショット情報が付加されたセグメントに含まれるフレーム画像を代表する代表フレーム（キーフレームともいう）画像の情報（代表フレーム情報）２０４Ａ、２０４Ｂ、２０４Ｃ、２０４Ｄと、代表フレーム情報２０４Ｅ、２０４Ｆ、２０４Ｇ、２０４Ｈとがそれぞれ付加されている。さらに、代表フレーム情報２０４Ａ〜Ｄ、代表フレーム情報２０４Ｅ〜Ｈには、各代表フレームの静止画特徴量Ｚが付加されている。
【００８３】
代表フレーム情報２０４Ａ〜Ｄ、代表フレーム情報２０４Ｅ〜Ｈは、各代表フレームの静止画特徴量Ｚの他、それぞれの代表フレームを説明する文書を含んでいる。代表フレームを説明する文書は、映像構造インデックス１０１の作成時に編集者によって作成されたもの、あるいは特徴量に応じて自動的に付加されたサンプル文書である。映像構造インデックス１０１においては、各代表フレームを説明する文書を含む代表フレーム情報２０４Ａ〜Ｄ、代表フレーム情報２０４Ｅ〜Ｈとが印刷可能な情報である。
【００８４】
映像要約生成部１０５は、指示受付部４５を介して要約に使用される条件である要約条件（図中条件Ａと記す）、印刷整形部１０６による情報の整形に使用される印刷書式（図中条件Ｂと記す）を取得する。そして、取得した要約条件、印刷書式は、映像要約生成部１０５に設定される。また、映像構造解釈部１０３は、映像構造インデックス１０１の構造を解釈する。映像要約生成部１０５、映像参照フレーム抽出部１０９は、映像構造解釈部１０３によって解釈された映像構造インデックス１０１と要約条件とに基づいて映像情報１０２を要約する。印刷整形部１０６は、映像要約生成部１０５、映像参照フレーム抽出部１０９が映像情報１０２を要約して生成した情報（映像要約）を印刷書式に基づいて印刷可能な形式にする（整形）。
【００８５】
なお、本実施の形態は、要約条件として映像要約のうちに画像が占める割合および文字が占める割合、要約時の精度、映像参照フレーム抽出部１０９において行われる参照フレーム（印刷されるフレーム画像）の抽出条件、抽出される参照フレームの数を設定する。また、印刷書式として印刷時の雛型を設定するものとした。要約条件および印刷書式は、指示受付部５４を介して取得する他、映像要約生成部１０５の登録部１１１に予め登録しておくこともできる。
【００８６】
上記した要約条件のうち、要約時の精度は、木構造の階層を指定することによって設定される。また、参照フレームの抽出条件は、編集者から指示受付部５４を介して取得したキーワードや画像、あるいは登録部１１１に登録されているキーワードや画像によって設定される。
【００８７】
設定されたキーワードや画像は、映像要約生成部１０５を介して映像参照フレーム抽出部１０９に送られる。映像参照フレーム抽出部１０９は、キーワードに基づいてフレーム画像（本実施の形態では代表フレームを対象にするものとする）を検索し、該当する代表フレームを抽出する。あるいは抽出条件に設定された画像と類似する画像を抽出する。抽出された画像が要約条件の参照フレームの数よりも多い場合、映像参照フレーム抽出部１０９は、図１０に示す方法で代表フレームを絞り込む。
【００８８】
すなわち、図１０によれば、抽出の初期の段階で代表フレームａ、ｂ、ｃ、ｄ、ｅ、ｆ、ｇの７枚が抽出された場合、代表フレームａ〜ｇ間で互いの類似度を比較する。この類似度は、例えば、特徴量によって判別しても良い。類似度の比較の結果、代表フレームａと代表フレームｅとが類似する（例えば特徴量の相違が予め設定されている基準よりも小さい）と判断された場合、映像参照フレーム抽出部１０９は、代表フレームａまたは代表フレームｅの一方だけを残す。残った代表フレームａまたはｅは、代表フレームｈとなる。すなわち、代表フレームｈは、代表フレームａとｅとを代表することになる。同様に、代表フレームｃと代表フレームｆとが類似すると判断された場合、代表フレームｃまたは代表フレームｆの一方だけを残すことによって代表フレームｃ、代表フレームｆを代表フレームｊで代表する。以上の処理により、代表フレームａ〜ｇの７枚は、代表フレームｈ、ｉ、ｊ、ｋ、ｌの５枚に絞り込まれる。
【００８９】
さらに、映像参照フレーム抽出部１０９は、代表フレームｈ〜ｌの５枚に対して代表フレームａ〜ｇに対して行った絞り込みの処理と同様の処理を施し、代表フレームｈ〜ｌの５枚を代表フレームｍ、ｎ、ｏの３枚に絞り込む。３という数値が要約条件として設定された抽出すべき参照フレームの数に合致する場合、映像参照フレーム抽出部１０９は、代表フレームｍ〜ｏを抽出したという情報を映像要約生成部１０５および印刷整形部１０６に送る。
【００９０】
映像要約生成部１０５は、代表フレームｍ〜ｏと代表フレームｍ〜ｏに付されている文書との量を要約条件として設定された画像が占める割合および文字が占める割合と比較する。代表フレームｍ〜ｏと代表フレームｍ〜ｏに付されている文書との量は、例えば、印刷された画像において抽出された参照フレームが占める面積比と文字が占める面積比とをシミュレーションによって求めるものであっても良い。このとき、要約条件として設定された画像が占める割合および文字が占める割合とは、印刷された画像において画像が占める面積比と文字が占める面積比とによって設定される。
【００９１】
そして、映像要約生成部１０５は、参照フレームとして抽出された代表フレーム（以下、参照フレームと記す）が占める割合と文字が占める割合とが要約条件に一致しなかった場合、参照フレームが占める割合と文字が占める割合とが要約条件に一致するように調整する。この調整は、例えば、抽出された参照フレームを削除してその空間を文字にあてる、あるいは文字で表される情報を削除する方法によって行われる。なお、文字情報を削除する場合、映像要約生成部１０５は、例えば、文字情報を対象にして重要な語句を抽出する。そして、重要な語句が多く含まれている文書ほど重要度が高く、少ない文書ほど重要度が低いと判断し、重要度が低いと判断された文書を優先して削除するようにしても良い。
【００９２】
さらに、映像要約生成部１０５は、以上のようにして割合を調整した参照フレームと文書とに関する情報を印刷整形部１０６に送る。印刷整形部１０６は、参照フレームと文書とを印刷書式として設定された雛型にしたがって配置し、印刷言語生成部１０７に送る。また、この際、印刷整形部１０６は、参照フレームに関する情報から参照フレームの映像における位置をバーコード付加部１１０に送る。バーコード付加部１１０は、参照フレームの映像における位置をバーコードで表す情報に変換し、印刷言語生成部１０７に出力する。なお、参照フレームの映像における位置は、参照フレームが映像を構成するフレーム画像において何番目に位置するか、あるいは参照フレームが映像の再生開始から何時間（分、秒）後に再生されるかで示される時間的位置であっても良い。
【００９３】
図１１（ａ）、（ｂ）、（ｃ）は、印刷書式として設定される雛型を例示する図である。これらは、雛型保持部６６に保持される雛型により実現される雛型である。図１１（ａ）は、画像を主体とする画像主体の雛型である。また、（ｂ）は、画像と文書とが比較的近い割合で配分された画像・文字混合型の雛型である。また、図１１（ｃ）は、文書を主体とした文字主体の雛型である。
【００９４】
本実施の形態では、雛型保持部６６はさらに、ビデオテープやＤＶＤといった映像メディアの識別ラベル（付箋紙）を対象とした雛型をも保持している。そして、指示受付部５４を介して利用者から印刷書式の指定を受付け、さらに図示しない表示部に雛型の一覧を表示し、利用者から任意の雛型の指定を受け付ける。また、雛型は、予め保存されるものに限るものでなく、指示受付部５４を介して登録することもできる。
【００９５】
雛型に沿って印刷整形された参照フォームおよび文書は、印刷整形部１０６から印刷言語生成部１０７に出力される。また、バーコード付加部１１０は、バーコードに変換した参照フレームの映像における位置を印刷言語生成部１０７に送る。印刷言語生成部１０７は、印刷整形された参照フォームおよび文書とバーコードとを出力部５０で使用されている印刷言語に変換して出力部５０に送る。出力部５０は、参照フォームおよび文書とバーコードとを同一の用紙上に印刷出力する。この際、雛型にバーコード専用の領域を設けておくようにしても良い。
【００９６】
以下、図１２を参照しつつ、情報編集部３５が動画ファイルを作成するときの情報編集処理について説明する。まず、受信部３６は、イベント処理部３２の送信部からプレゼンテーション資料３１を受信する（ステップＳ９０）。次に、受信したプレゼンテーション資料３１に含まれる各画面画像データに対して、付帯情報ＩＤを付与する（ステップＳ９２）。そして、画面画像テーブル保持部６２は、画面画像データを識別する画面画像データＩＤと、付帯情報ＩＤとを対応付けた画面画像テーブルを保持する（ステップＳ９４）。次に、出力部５０は、画面画像テーブルにおいて対応付けられている画面画像データと、付帯情報ＩＤとを対応付けた印刷物を出力する。（ステップＳ９６）。
【００９７】
図１３に、このとき出力された印刷物を示す。印刷物には、プレゼンテーション資料３１を構成する各画面画像データ３１０と、２次元バーコード４３０とが対応付けて印刷されている。なお、ここで、２次元バーコード４３０は、付帯情報ＩＤ４２０に基づいて生成されたものである。すなわち、この２次元バーコード４３０から付帯情報ＩＤを特定することができる。
【００９８】
ここで、２次元バーコードとは、従来の１次元のバーコードよりも多くの情報を表すことができる。２次元バーコードとしては、１次元のバーコードを積み上げたものと、水平方向と垂直方向にそれぞれ情報を表すものとが知られている。本実施の形態においては、水平方向と垂直方向にそれぞれ情報を表現することのできるいわゆるＱＲコードが印刷されている。
【００９９】
実際にプレゼンテーションが始まる前に、プレゼンテーション資料３１を構成する各画面画像データと、画面画像データに対応する付帯情報ＩＤとを対応付けた印刷物をプレゼンテーションに出席した聴講者に配布しておく。
【０１００】
そして、プレゼンテーションが始まると、プレゼンテーションの様子を示す動画を、ＤＶカメラ４を用いて撮影する。
【０１０１】
次に、図１４を参照しつつ、ＤＶカメラ４により撮影された動画情報と、先に取得したプレゼンテーション資料３１等から情報ファイルを生成するときの情報編集処理について説明する。まず、区間決定部４３０は、ＤＶカメラ４から取得した動画情報６００を、プレゼンテーション装置２から取得したイベント情報３４０に基づいて複数の区間に分割する（ステップＳ１００）。具体的には、「発生日時１０時１０分、イベント種類ページ２に切り替え」及び「発生日時１０時１６分、イベント種類ページ３に切り替え」を示す連続して記録された２つのイベント情報を取得した場合には、動画情報６００のうち１０時１０分から１０時１６分の間に録画された区間はページ２に対応する区間と決定される。すなわち、１０時１０分および１０時１６分の位置を境界位置とする区間に分割する。
【０１０２】
次に、区間調整部４３１は、区間決定部４３０によって決定された各区間の長さを、予め定められた規定長と比較する。そして、規定長に比べて短い区間、すなわち規定長外区間があった場合（ステップＳ１０２，Ｙｅｓ）、規定長外区間を調整する（ステップＳ１０４）。
【０１０３】
ここで、図１５を参照しつつ、区間調整部４３１が規定長外区間を調整する方法について説明する。図１５は、動画情報６００を時間軸に沿って模式的に示している。例えば、「テーマ１」の区間は、動画情報６００のうち、動画情報６００に映像として含まれている表示画面３０に「テーマ１」の表題のページ、すなわち１ページが表示されている区間を示している。このように、各区間は、表示画面３０に表示された画面画像の切り替りを境界として定められている。
【０１０４】
また、ｔ１は、「テーマ１」に対応する区間を再生するのに要する再生時間である。すなわち、ｔ１は、テーマ１のページであるページ１の表示終了時刻と開始時刻の差分値である。ここで、先に述べた規定長は、ｔｓで示される。すなわち、規定長は再生時間の単位で定められている。
【０１０５】
区間の長さｔｘ（ｘ＝１〜６）の各々について規定長ｔｓと比較し、規定長ｔｓに比べて短い区間は、規定長ｔｓよりも長い他の区間に統合する。例えば、図１５（Ａ）に示す「テーマ４」を表示する区間の長さｔ４および「テーマ５」の区間の長さｔ５は規定長に比べて短い。従って、「テーマ４」の区間および「テーマ５」の区間は、規定外区間と判断される。この場合、図１５（Ｂ）に示すように、規定外区間は、その直後の区間に統合される。すなわち、「テーマ５」の区間は、「テーマ６」の区間に統合される。また、「テーマ４」の直後の区間、すなわち「テーマ５」の区間は規定外区間であるので、「テーマ４」の区間は、さらにその直後の区間、すなわち「テーマ６」の区間に統合される。すなわち、「テーマ４」の区間、「テーマ５」の区間、および「テーマ６」の区間が１つの区間に統合され、いずれも区間４に含まれることになる。
【０１０６】
プレゼンテーションにおいては、時間の都合上、途中のページの説明を省略する場合がある。図１５の「テーマ４」の区間および「テーマ５」の区間ように、その表示時間が短い場合、これらの画面画像は「テーマ６」を表示させるため表示されたに過ぎず、画面画像に対する説明は省略されていると推測される。このように、説明の対象となっていないと予想される、表示時間の短い画面画像に対応する区間を省略することで、より見やすい情報に編集することができる。
【０１０７】
プレゼンテーション資料３１の途中の画面画像の説明を省略する場合、省略する画面画像を表示させている間、プレゼンターは、次に説明する画面画像に関する内容を意識している場合が多い。このため、表示画面３０に省略された画面画像が表示されている間は、その次に説明の対象となるページにおいて説明すべき事項に関連する説明をしていると予想される。また、実際のプレゼンテーションにおいても、このようなケースが多い。そこで、本実施の形態においては、規定外区間は、便宜的にその直後の区間に含めることにした。これにより、内容的に統一された区間を１つの区間とすることができる。
【０１０８】
説明を図１２に戻す。動画情報が複数の区間に分割されると、次に、同期部４３３は、イベント情報３４０に基づいて、動画情報６００とプレゼンテーション資料３１とを同期させる（ステップＳ１０６）。次に、目次項目抽出部４３４は、プレゼンテーション資料３１から動画情報６００の目次として文字情報を抽出する（ステップＳ１０８）。具体的には、プレゼンテーション資料３１の各画面画像は、タイトル属性が付与された文字情報を含んでおり、目次項目抽出部４３４は、タイトル属性に対応付けられた文字情報を抽出する。目次項目抽出部４３４は、プレゼンテーション資料３１に含まれるすべてのページの画面画像から文字情報を抽出する。なお、本実施の形態においては、各画面画像における「テーマ・・・」という文字情報が、タイトル属性として記述されている。
【０１０９】
次に、目次項目抽出部４３４は、抽出いた目次項目を含む目次を生成する（ステップＳ１０９）。次に、対応付部４３５は、目次項目抽出部４３４が抽出した文字情報、すなわち目次項目を、当該目次項目を抽出した画面画像に対応付ける（ステップＳ１１０）。画面画像は、動画情報６００の各区間に対応付けられている。従って、各目次項目は、画面画像を介して動画情報６００の各区間に対応付けられる。
【０１１０】
ステップＳ１０２，ステップＳ１０４において、区間を統合した場合には（ステップＳ１１２，Ｙｅｓ）、同期調整部４３６は、動画情報６００とプレゼンテーション資料３１の同期を調整する（ステップＳ１１４）。
【０１１１】
ここで、図１６を参照しつつ同期調整部４３６が同期を調整する方法について説明する。図１６に示すように、動画情報６００の各区間と、当該区間と同時に表示すべきプレゼンテーション資料３１の各ページは同期している。規定外区間である「テーマ４」の区間および「テーマ５」の区間には、それぞれプレゼンテーション資料３１のうち「テーマ４」を示す４ページと５ページが同期している。この場合、同期調整部４３６は、「テーマ４」の区間および「テーマ５」の区間を含む区間４全体に対してプレゼンテーション資料３１の６ページを同期させる。すなわち、同期調整部４３６は、「テーマ４」の区間に対して、４ページにかえて６ページを同期させ、かつ「テーマ５」の区間に対して、５ページにかえて６ページを同期させる。
【０１１２】
規定外区間において表示画面３０に表示される画面画像は、該当するページにおいて、その説明が省略されており、表示させる必要がない場合が多い。また、先に説明したように、これらの画面画像を表示しているとき、プレゼンターはその後に表示する画面画像に関する内容について説明している場合が多い。このため、同期部４３３によって同期された画面画像を同期させるよりも、その後に表示するページを同期したほうが、利用者は内容を理解しやすい。
【０１１３】
再び、図１２を参照しつつ情報編集処理について説明する。同期調整が完了すると、次に、目次項目抽出部４３７は規定外区間に対応する目次項目を削除する（ステップＳ１１６）。
【０１１４】
図１７は、図１６に示す動画情報６００の目次項目を示している。図１７（Ａ）は削除前の目次項目を示している。図１７（Ｂ）は削除後の目次項目を示している。図１６に示すように、規定外区間である「テーマ４」の区間および「テーマ５」の区間は、いずれも「テーマ６」の区間に統合されている。そこで、これら３つの区間を含む区間４に対しては、統合先の区間に同期するページ６のページ属性を目次項目として抽出する。これにより、目次項目が無駄に多くなるのを避けることができる。以上の処理により、図１２に示す動画情報６００に対する情報編集処理が全て完了する。
【０１１５】
次に、プレゼンテーションにおいて、本来表示すべき順番と逆の順番でプレゼンテーション資料３１の画面画像が表示された場合の情報編集部３５の処理について、図１８を参照しつつ説明する。図１８に示す動画情報６１０には、プレゼンテーション資料３１のページ順と逆の順番にページが表示される部分が含まれている。すなわち、動画情報に含まれる表示画面３０は、「テーマ５」を表示したのちに、再度「テーマ４」の画面画像、「テーマ３」の画面画像、および「テーマ２」の画面画像の順に表示している。
【０１１６】
なお、情報編集部３５は、ページの切り替えをイベント種類として含むイベント情報に基づいて、ページ順と逆の順番に表示されていることを認識することができる。
【０１１７】
プレゼンテーションにおいては、既に説明した内容を、再び関連する画面画像を再度表示させて説明する場合がある。このような場合には、プレゼンターは、利用者インターフェースを用いて操作することにより。図１８に示すように順にページを戻していく。この場合も情報編集部３５は、図１４から図１７を参照しつつ説明した情報編集処理によって、規定長外区間を、当該規定長外区間の直後の区間に統合する。具体的には、図１８に示すテーマ５の区間に続いて順に表示されるテーマ４の区間およびテーマ３の区間が規定外区間である場合には、「テーマ４」の区間および「テーマ３」の区間を「テーマ２」の区間に統合する。
【０１１８】
その一方で、ページ順に「テーマ１」の区間から「テーマ５」の区間の間に含まれる規定外区間である「テーマ４」の区間に対しては、直後の区間に含める処理を行わない。このように、一旦表示させたページを、再度ページを遡って表示させる場合に限り直後の区間に統合することとしてもよい。
【０１１９】
ページ順にプレゼンテーション資料３１を表示させているときは、各ページについての説明を省略していても、聴講者の理解のためには画面画像の表示は残したほうがよい場合もある。このような場合には、本例のように、逆順にページが切り替る場合のみ規定外区間を統合することにより、より理解しやすい情報にすることができる。
【０１２０】
逆順にページが切り替る場合は、それ以前に既に、省略されたページについての説明がなされている場合が多い。従って、逆順にページが切り替る区間内の規定外区間を統合することにより、より適切な目次を生成することができる。
【０１２１】
次に、２次元バーコードを取得した場合の、印刷用データ生成部６５の処理について説明する。２次元バーコードは、上述のように、所定の画面画像に付与された付帯情報の付帯情報ＩＤを示している。２次元バーコードを取得すると、映像要約生成部１０５は、２次元バーコードを解読して、付帯情報ＩＤを特定し、当該付帯情報ＩＤに対する付帯情報と、この付帯情報に対応する画面画像データを特定する。そして、画面画像データと付帯情報を含む印刷用データを生成する。図１９は、出力された印刷用データを示している。このように、２次元バーコードを取得すると、指定された２次元バーコードにより特定される付帯情報を印刷した印刷物を出力することができる。従って、利用者は、プレゼンテーション前に配布された印刷物に印刷された２次元バーコードにより、プレゼンテーション終了後に、所望の画面画像データに関連する情報を取得することができる。
【０１２２】
図２０は、２次元バーコードリーダ６を示している。２次元バーコードリーダ６は、携帯電話に着脱可能に設けられている。２次元バーコードリーダ６は、図１３において説明した印刷物に印刷された２次元バーコードを読み取り、これを解読する。これにより、２次元バーコードからＵＲＬが特定される。そして、利用者の携帯端末７を介して、２次元バーコードから特定されたＵＲＬが、ネットワーク８を介して、情報編集装置５の通信部６７に送られる。そして、通信部６７から印刷用データ生成部６５にＵＲＬが送られ、印刷用データ生成部６５は、ＵＲＬにより特定される付帯情報等を利用して、印刷用データを生成する。以下、図２１を参照しつつ、印刷用データを生成する処理について詳述する。
【０１２３】
まず、図示しない表示部に要約条件、印刷書式入力を入力する画面を表示することによって要約条件と印刷書式とを入力する（ステップＳ５０１）。ここで、要約条件とは、付帯情報を生成するための条件である。
【０１２４】
このとき、利用者が登録部１１１に登録されている要約条件（キーワードなど）や印刷書式（雛型など）を指定したか否か判断し（ステップＳ５０２）、登録データが指定された場合には（ステップＳ５０２：Ｙｅｓ）、登録部１１１から登録データを読み出す（ステップＳ５１０）。また、登録データが指定されていない場合には（ステップＳ５０２：Ｎｏ）、映像構造インデックス１０１に基づいて映像情報１０２で表される映像の構造を解釈する（ステップＳ５０３）。
【０１２５】
次に、印刷用データ生成部６５は、映像要約作成サブルーチンを実行する（ステップＳ５０４）。映像要約作成サブルーチンは、映像要約生成部１０５、映像参照フレーム抽出部１０９においてなされる処理である。そして、要約条件にしたがって参照フレームを抽出する処理、抽出された参照フレームに付加されている文書と参照フレームとの割合を調整する処理、参照フレームの映像における位置を特定する処理を含むものである。
【０１２６】
次に、印刷用データ生成部６５は、映像要約サブルーチンの処理によって得られる参照フレームおよび文書を印刷書式に基づいて雛型に配置し、参照フレームおよび文書を印刷時の様式に整形する（ステップＳ５０５）。また、参照フレームの位置に関する情報をバーコード付加部１１０でバーコードに変換すると共に参照フレームおよび文書に付加する（ステップＳ５０６）。そして、印刷時の様式に整形された参照フレームおよび文書とバーコードとを出力部５０で使用される言語に変換して印刷言語を生成し（ステップＳ５０７）出力部５０で印刷する（ステップＳ５０８）。
【０１２７】
さらに、映像要約生成部１０５は、今回使用した要約条件と印刷書式とを編集者が登録するか否か判断し（ステップＳ５０９）、登録する場合には（ステップＳ５０９：Ｙｅｓ）、要約条件および印刷書式を登録部１１１に登録する（ステップＳ５１１）。また、登録しない場合には（ステップＳ５０９：Ｎｏ）、登録を行うことなく処理を終了する。
【０１２８】
なお、本実施の形態で説明した映像情報要約方法は、予め用意されたプログラムをパーソナル・コンピューターやワークステーション等のコンピュータで実行することにより実現することができる。このプログラムは、ハードディスク、フロッピー（Ｒ）ディスク、ＣＤ−ＲＯＭ、ＭＯ、ＤＶＤ等のコンピュータで読み取り可能な記録媒体に記録され、コンピュータによって記録媒体から読み出されることによって実行される。またこのプログラムは、伝送媒体としてまたは上記記録媒体を介して、インターネット等のネットワークを介して配布することができる。
【０１２９】
以上のように、映像構造インデックスを利用して映像を表す画像および文書を映像情報から抽出することにより効率的に映像情報を検索し、参照フレームを抽出することができる。また、参照フレームを説明するための文書を比較的簡易に取得することができる。
【０１３０】
また、編集者が設定した要約条件に沿って映像を要約し、編集者が設定した印刷書式に沿って印刷することにより、参照フレームおよび文書の選択に利用者の目的や嗜好を反映させることができる。また、参照フレームおよび文書を印刷する際の雛型にも利用者の目的や嗜好を反映させることができる。さらに、要約条件や印刷書式を編集者が登録することにより、任意の要約条件によって抽出された参照フレームおよび文書を任意の雛型で印刷することができる。印刷物を映像記録媒体のインデックスに利用すれば、各利用者にオリジナルのインデックスを作成することができる。
【０１３１】
図２２は、実施の形態にかかる情報編集装置５のハードウェア構成を示す図である。情報編集装置５は、図２、図５、および図８を参照しつつ説明した、情報編集部３５の情報編集プログラムなどが格納されているＲＯＭ５２、ＲＯＭ５２内のプログラムに従って情報編集装置５の各部を制御し、情報編集処理等を実行するＣＰＵ５１、ワークエリアが形成され、情報編集装置５の制御に必要な種々のデータが記憶されているＲＡＭ５３、ネットワークに接続して、通信を行う通信Ｉ／Ｆ５７、および各部を接続するバス５８を備えている。
【０１３２】
先に述べた情報編集装置５における情報編集処理を実行する情報編集プログラムは、インストール可能な形式又は実行可能な形式のファイルでＣＤ−ＲＯＭ、フロッピー（Ｒ）ディスク（ＦＤ）、ＤＶＤ等のコンピュータで読み取り可能な記録媒体に記録されて提供される。
【０１３３】
また、本実施形態の情報編集プログラムを、インターネット等のネットワークに接続されたコンピュータ上に格納し、ネットワーク経由でダウンロードさせることにより提供するように構成しても良い。
【０１３４】
この場合には、情報編集プログラムは、情報編集装置５において上記記録媒体から読み出して実行することにより主記憶装置上にロードされ、上記ソフトウェア構成で説明した各部が主記憶装置上に生成されるようになっている。
【０１３５】
また、プレゼンテーション装置２のハードウェア構成は、図２２を参照しつつ説明した情報編集装置５のハードウェア構成と同様であるので、説明を省略する。
【０１３６】
以上、本発明を実施の形態を用いて説明したが、上記実施の形態に多様な変更または改良を加えることができる。
【０１３７】
そうした第１変更例としては、本実施の携帯においては、２次元バーコードリーダ６により２次元バーコードを読み取ったが、これにかえて、スキャナにより２次元バーコードを画像として読み込んでもよい。この場合、情報編集装置５は２次元バーコードを解読する２次元バーコード読取部をさらに備える。そして、印刷用データ生成部６５は、２次元バーコード読取部が解読したＵＲＬにより特定される付帯情報等を利用して、印刷用データを生成する。この場合、利用者は端末から情報編集部３５に対してアクセスし、当該ＵＲＬにより付帯情報を要求する。
【０１３８】
【発明の効果】
以上説明したように、請求項１にかかる発明によれば、付帯情報が生成される前に、予め付帯情報識別情報と画面画像とを対応付けることができるので、付帯情報が生成される前に利用者に対して付帯情報を取得するために利用される付帯情報識別情報を通知することができるという効果を奏する。
【０１３９】
また、このように、デジタルデータを生成する前に画面画像と付帯情報識別情報とを対応付けた印刷物を配布することができる。従って、利用者は、デジタルデータとして撮影される講演等を視聴する場合、講演の間、講演内容に沿って、画面画像等が記載された印刷物にメモを取り、後日、付帯情報識別情報に基づいて付帯情報を取得することができる。これにより、講演中の自分のメモと付帯情報との対応付けを容易に行うことができるという効果を奏する。
【０１４０】
請求項２にかかる発明によれば、利用者は、後に印刷物に記載された付帯情報識別情報に基づいて付帯情報を取得することができるという効果を奏する。
【０１４１】
請求項３にかかる発明によれば、付帯情報が生成される前に、予め付帯情報識別情報と画面画像とを対応付けることができるので、付帯情報が生成される前に、利用者に対して付帯情報を取得するために利用される付帯情報識別情報を通知することができるという効果を奏する。
【０１４２】
また、請求項４にかかる発明によれば、画面画像と付帯情報識別情報とを対応付けた出力用画面情報を印刷物として出力することができる。従って、利用者は、この印刷物において、画面画像に対応付けられた付帯情報識別情報を利用して、画面画像に対する付帯情報を取得することができるという効果を奏する。
【０１４３】
また、請求項５にかかる発明によれば、付帯情報識別情報は、ＵＲＬであるので、利用者は、ＵＲＬにアクセスすることによって、容易に付帯情報を取得することができるという効果を奏する。
【０１４４】
また、請求項６にかかる発明によれば、付帯情報識別情報は、２次元バーコードとして印刷されるので、利用者は、この２次元バーコードを、バーコードリーダ等で読み取らせ、付帯情報識別情報を取得することができるという効果を奏する。
【０１４５】
また、請求項７にかかる発明によれば、画面画像関連情報要求は付帯情報識別情報を含むので、利用者から画面画像関連情報要求を受け付けると、付帯情報識別情報により付帯情報を特定し、特定した付帯情報を利用者に提供することができる。このように、利用者は、容易に所望の付帯情報を取得することができるという効果を奏する。
【０１４６】
また、請求項８にかかる発明によれば、雛型保持部は、画面画像関連情報を生成するときに利用する雛型を格納しているので、画像関連情報生成手段は、この雛型を利用することにより容易に画面画像関連情報を生成することができるという効果を奏する。
【０１４７】
また、請求項９にかかる発明によれば、対応付手段は、表示画面に画面画像が表示されている間に記録された情報を付帯情報として、当該画面画像に対応付けるので、画面画像に関連する情報を効率的に付帯情報として特定することができるという効果を奏する。
【０１４８】
また、請求項１０にかかる発明によれば、付帯情報が生成される前に、予め付帯情報識別情報と画面画像とを対応付けることができるので、付帯情報が生成される前に、利用者に対して付帯情報を取得するために利用される付帯情報識別情報を通知することができるという効果を奏する。
【０１４９】
また、請求項１１にかかる発明によれば、付帯情報が生成される前に、予め付帯情報識別情報と画面画像とを対応付けることができるので、付帯情報が生成される前に、利用者に対して付帯情報を取得するために利用される付帯情報識別情報を通知することができるという効果を奏する。
【図面の簡単な説明】
【図１】情報編集システム１の全体構成を示す図である。
【図２】情報編集装置５の情報編集部３５と、プレゼンテーション装置２のイベント処理部３２の機能構成を示すブロック図である。
【図３】プレゼンテーション資料３１を模式的に示す図である。
【図４】イベント情報リスト３４０のデータ構成を模式的に示す図である。
【図５】動画ファイル生成部４３の詳細な機能構成を示す機能ブロック図である。
【図６】情報編集部３５が生成した情報ファイルを示す図である。
【図７】出力部５０から出力された情報ファイルを示す図である。
【図８】印刷用データ生成部６５の詳細な機能構成を示す機能ブロック図である。
【図９】映像構造インデックスを説明するための図である。
【図１０】参照フレームの絞り込みを説明するための図である。
【図１１】印刷書式として設定される雛型を例示する図である。
【図１２】情報編集部３５が動画ファイルを生成するときの処理を示すフローチャートである。
【図１３】動画ファイルの印刷物を示す図である。
【図１４】情報編集部３５が情報ファイルを作成するときの情報編集処理を示すフローチャートである。
【図１５】動画情報６００を時間軸に沿って模式的に示す図である。
【図１６】同期調整部４３６による同期の調整方法を説明するための図である。
【図１７】図１６に示す動画情報６００の目次を示す図である。
【図１８】動画情報６１０を示す図である。
【図１９】出力された印刷用データを示す図である。
【図２０】２次元バーコードリーダを示す図である。
【図２１】印刷用データを生成する処理を示すフローチャートである。
【図２２】情報編集装置５のハードウェア構成を示す図である。
【符号の説明】
１ 情報編集システム
２ プレゼンテーション装置
３ 投影機
４ ＤＶカメラ
５ 情報編集装置
６ ２次元バーコードリーダ
７ 携帯端末
８ ネットワーク
１５ マウス
２１ キーボード
３０ 表示画面
３１ プレゼンテーション資料
３２ イベント処理部
３３ イベントキャプチャ部
３４ イベント記録部
３５ 情報編集部
３６ 受信部
３７ イベント制御部
３８ イベント記録部
３９ 撮影機器制御部
４０ 動画情報キャプチャ部
４１ 動画情報管理部
４２ イベント情報解釈部
４３ 動画ファイル生成部
４４ 送信部
５０ 出力部
５４ 指示受付部
６０ 付与部
６１ 付帯情報生成部
６２ 印刷用データ生成部
６２ 画面画像テーブル保持部
６４ 保持部
６５ 印刷用データ生成部
６６ 雛型保持部
６７ 通信部
１０１ 映像構造インデックス
１０３ 映像構造解釈部
１０５ 映像要約生成部
１０６ 印刷整形部
１０７ 印刷言語生成部
１０９ 映像参照フレーム抽出部
１１０ バーコード付加部
１１１ 登録部
４３０ 区間決定部
４３１ 区間調整部
４３３ 同期部
４３４ 目次項目抽出部
４３５ 対応付部
４３６ 同期調整部
４３７ 目次項目抽出部
５００ 表示部
【発明の属する技術分野】
この発明は、動画データおよび音声データの少なくとも一方を含むデジタルデータを編集する情報編集装置、情報編集方法、および情報編集プログラムに関する。
【０００２】
【従来の技術】
長時間の映像のうちから所望の一部のみを見たいという要望がある。この要望に応えるべく、近年では、所望の部分を容易に検索または頭出しする方法として、インデキシング技術が開発されている。インデキシング技術とは、映像全体を時間軸に沿って複数の部分に分割し、それぞれの部分に対して、検索可能とすべく記述情報を対応付ける技術である。また、インデキシングの処理が施されたデジタルデータの要約を、所定の印刷書式に従って印刷する技術が知られている（例えば、特許文献１）。
【０００３】
【特許文献１】
特開２００２−２３２８５８号公報
【０００４】
【発明が解決しようとする課題】
しかし、上記印刷技術によれば、デジタルデータに対するインデキシング処理が完了した後でしか、デジタルデータの要約等が記載された印刷物を得ることができなかった。このため、例えば、講演の様子をデジタルデータとして撮影する場合に、講演が始まる前に予めデジタルデータの要約に関する情報が記載された印刷物を視聴者に配布することができなかった。
【０００５】
この発明は上記に鑑みてなされたもので、デジタルデータの要約等に関する情報をより効率的に利用者に提供することのできる情報編集装置、情報編集方法、および情報編集プログラムを得ることを目的とする。
【０００６】
【課題を解決するための手段】
上記目的を達成するため、請求項１にかかる発明は、動画データおよび音声データの少なくとも一方を含むデジタルデータを編集する情報編集方法であって、表示画面に順次表示されるべき各画面画像と、当該画面画像に対応付けるべき付帯情報を識別する付帯情報識別情報とを対応付ける対応テーブルを生成するテーブル生成ステップと、前記付帯情報を取得する付帯情報取得ステップと、前記付帯情報生成ステップにおいて生成され、前記対応テーブルにおいて前記画面画像に対応付けられている前記付帯情報識別情報により識別される前記付帯情報を、当該付帯情報識別情報に対応付ける対応付ステップと、前記画面画像と前記付帯情報識別情報とを対応付けて記載した印刷物を出力する出力ステップと、前記印刷物を、前記デジタルデータを生成する前に、利用者に配布する配布ステップとを有することを特徴とする。
【０００７】
この請求項１の発明によれば、付帯情報が生成される前に、予め付帯情報識別情報と画面画像とを対応付けることができるので、付帯情報が生成される前に利用者に対して付帯情報を取得するために利用される付帯情報識別情報を通知することができる。
【０００８】
また、このように、デジタルデータを生成する前に画面画像と付帯情報識別情報とを対応付けた印刷物を配布することができる。従って、利用者は、デジタルデータとして撮影される講演等を視聴する場合、講演の間、講演内容に沿って、画面画像等が記載された印刷物にメモを取り、後日、付帯情報識別情報に基づいて付帯情報を取得することができる。これにより、講演中の自分のメモと付帯情報との対応付けを容易に行うことができる。
【０００９】
また、請求項２は、請求項１に記載の情報編集方法であって、前記利用者から、前記印刷物に記載された前記付帯情報識別情報を取得するステップと、前記付帯情報識別情報で識別される前記付帯情報を、前記利用者に提供する提供ステップとをさらに有することを特徴とする。
【００１０】
この請求項２の発明によれば、利用者は、後に印刷物に記載された付帯情報識別情報に基づいて付帯情報を取得することができる。
【００１１】
請求項３にかかる発明は、動画データおよび音声データの少なくとも一方を含むデジタルデータを編集する情報編集装置であって、表示画面に表示されるべき画面画像を取得する画面画像取得手段と、前記画面画像に関連するデジタルデータを取得するデジタルデータ取得手段と、前記画面画像と、画面画像に対応付けるべき付帯情報を識別する付帯情報識別情報とを対応付ける画面画像テーブルと、前記デジタルデータ取得手段が取得したデジタルデータに基づいて、付帯情報を生成する付帯情報生成手段と、前記付帯情報生成手段が生成し、前記対応テーブルにおいて前記画面画像に対応付けられている前記付帯情報識別情報により識別される前記付帯情報を、当該付帯情報識別情報に対応付ける対応付手段とを備えたことを特徴とする。
【００１２】
この請求項３の発明によれば、付帯情報が生成される前に、予め付帯情報識別情報と画面画像とを対応付けることができるので、付帯情報が生成される前に、利用者に対して付帯情報を取得するために利用される付帯情報識別情報を通知することができる。
【００１３】
また、請求項４にかかる発明は、請求項３に記載の情報編集装置であって、前記画面画像テーブルにおいて対応付けられている前記画面画像と前記付帯情報識別情報とを含む出力用画面画像情報を生成する出力情報生成手段をさらに備えたことを特徴とする。
【００１４】
この請求項４の発明によれば、画面画像と付帯情報識別情報とを対応付けた出力用画面情報を印刷物として出力することができる。従って、利用者は、この印刷物において、画面画像に対応付けられた付帯情報識別情報を利用して、画面画像に対する付帯情報を取得することができる。
【００１５】
また、請求項５にかかる発明は、請求項３または４に記載の情報編集装置であって、前記付帯情報識別情報は、前記付帯情報が格納されている場所を示すＵＲＬであることを特徴とする。
【００１６】
この請求項５の発明によれば、付帯情報識別情報は、ＵＲＬであるので、利用者は、ＵＲＬにアクセスすることによって、容易に付帯情報を取得することができる。
【００１７】
また、請求項６にかかる発明は、請求項４または５に記載の情報編集装置であって、前記出力情報生成手段は、前記付帯情報識別情報に基づいて２次元バーコードを生成し、生成した２次元バーコードと前記画面画像とを含む前記出力画面情報を生成することを特徴とする。
【００１８】
この請求項６の発明によれば、付帯情報識別情報は、２次元バーコードとして印刷されるので、利用者は、この２次元バーコードを、バーコードリーダ等で読み取らせ、付帯情報識別情報を取得することができる。
【００１９】
また、請求項７にかかる発明は、請求項３から６のいずれか一項に記載の情報編集装置であって、利用者から前記付帯情報識別情報を含む画面画像関連情報要求を受け付ける指示受付手段と、前記指示受付手段が受け付けた前記画面画像関連情報要求に含まれる前記付帯情報識別情報を抽出し、前記画面画像テーブルにおいて、当該付帯情報識別情報に対応付けられている前記画面画像と、前記付帯情報識別情報により特定される前記付帯情報とを含む画面画像関連情報を生成する画像関連情報生成手段と、前記画像関連情報生成手段が生成した前記画面画像関連情報を、前記利用者に配信する配信手段とをさらに備えたことを特徴とする。
【００２０】
この請求項７の発明によれば、画面画像関連情報要求は付帯情報識別情報を含むので、利用者から画面画像関連情報要求を受け付けると、付帯情報識別情報により付帯情報を特定し、特定した付帯情報を利用者に提供することができる。このように、利用者は、容易に所望の付帯情報を取得することができる。
【００２１】
また、請求項８にかかる発明は、請求項７に記載の情報編集装置であって、前記画面画像と前記付帯情報とを埋め込む雛型を保持する雛型保持手段をさらに備え、画像関連情報生成手段は、前記雛型保持手段に保持されている前記雛型に前記画面画像と前記付帯情報とを埋め込むことにより前記画面画像関連情報を生成することを特徴とする。
【００２２】
この請求項８の発明によれば、雛型保持部は、画面画像関連情報を生成するときに利用する雛型を格納しているので、画像関連情報生成手段は、この雛型を利用することにより容易に画面画像関連情報を生成することができる。
【００２３】
また、請求項９にかかる発明は、請求項３から８のいずれか一項に記載の情報編集装置であって、前記付帯情報取得手段は、前記表示画面に前記画面画像が表示されている間に記録された付帯情報を取得し、前記対応付手段は、前記画面画像テーブルにおいて前記画面画像に対応付けられている前記付帯情報識別情報の実体として、前記付帯情報取得手段が取得した前記付帯情報を、前記付帯情報識別情報に対応付けることを特徴とする。
【００２４】
この請求項９の発明によれば、対応付手段は、表示画面に画面画像が表示されている間に記録された情報を付帯情報として、当該画面画像に対応付けるので、画面画像に関連する情報を効率的に付帯情報として特定することができる。
【００２５】
また、請求項１０にかかる発明は、動画データおよび音声データの少なくとも一方を含むデジタルデータを編集する情報編集方法であって、表示画面に順次表示されるべき各画面画像と、当該画面画像に対応付けるべき付帯情報を識別する付帯情報識別情報とを対応付ける対応テーブルを生成するテーブル生成ステップと、前記付帯情報を取得する付帯情報取得ステップと、前記付帯情報生成ステップにおいて生成され、前記対応テーブルにおいて前記画面画像に対応付けられている前記付帯情報識別情報により識別される前記付帯情報を、当該付帯情報識別情報に対応付ける対応付ステップと有することを特徴とする。
【００２６】
この請求項１０の発明によれば、付帯情報が生成される前に、予め付帯情報識別情報と画面画像とを対応付けることができるので、付帯情報が生成される前に、利用者に対して付帯情報を取得するために利用される付帯情報識別情報を通知することができる。
【００２７】
また、請求項１１にかかる発明は、動画データおよび音声データの少なくとも一方を含むデジタルデータを編集する情報編集処理をコンピュータに実行させる情報編集プログラムであって、表示画面に表示されるべき画面画像を取得する画面画像取得ステップと、前記画面画像に関連するデジタルデータを取得するデジタルデータ取得ステップと、前記画面画像と、画面画像に対応付けるべき付帯情報を識別する付帯情報識別情報とを対応付ける画面画像テーブルを生成する前記画面画像生成ステップと、前記デジタルデータ取得ステップにおいて取得されたデジタルデータに基づいて、付帯情報を生成する付帯情報生成ステップと、前記付帯情報生成ステップにおいて生成され、前記対応テーブルにおいて前記画面画像に対応付けられている前記付帯情報識別情報により識別される前記付帯情報を、当該付帯情報識別情報に対応付ける対応付ステップとをコンピュータに実行させることを特徴とする。
【００２８】
この請求項１１の発明によれば、付帯情報が生成される前に、予め付帯情報識別情報と画面画像とを対応付けることができるので、付帯情報が生成される前に、利用者に対して付帯情報を取得するために利用される付帯情報識別情報を通知することができる。
【００２９】
【発明の実施の形態】
図１は、この発明の実施の形態である情報編集装置５を含む情報編集システム１の全体構成を示している。
【００３０】
情報編集システム１は、プレゼンテーション資料３１を格納するプレゼンテーション装置２と、このプレゼンテーション装置２と接続し、プレゼンテーション資料３１を表示するプロジェクター等の投影機３と、投影機３により投影された画像を表示する表示画面３０と、プレゼンテーションの状況を音声と共に動画撮影する音声取り込み機能付きのＤＶカメラ４と、ＤＶカメラ４が取り込んだ音声を含む動画情報（以下単に「動画情報」と称す）を編集する情報編集装置５とを備えている。ここで、プレゼンテーション資料３１は、プレゼンテーションの際に表示させる複数の画面画像データで構成されている。画面画像データは、例えばＰＰＴデータなどの静止画データである。また、動画情報は、本発明のデジタルデータに相当する。
【００３１】
ＤＶカメラ４と情報編集装置５は、例えば、ＩＥＥＥ１３９４などのインターフェイスで接続されている。また、プレゼンテーション装置２と情報編集装置５は、ＩＥＥＥ８０２．１１ｂなどの通信インターフェイスで接続されている。無線通信環境がない場合は、通常のイーサネット（Ｒ）によるピア・ツー・ピア接続であってもよい。
【００３２】
プレゼンテーション装置２は、単にプレゼンテーション資料３１を格納しており、投影機３と通信可能であればよく、例えば、プレゼンターの所有するＰＣであってもよい。
【００３３】
編集者は、プレゼンターがプレゼンテーション資料３１を表示画面３０に表示させながらプレゼンテーションを行っている様子を、ＤＶカメラ４を用いて撮影する。ここで、編集者とは、情報編集システム１を利用して動画を編集する者のことである。
【００３４】
撮影が終了すると、情報編集装置５は、プレゼンテーション装置２からプレゼンテーション資料３１を取得し、さらに、ＤＶカメラ４からプレゼンテーションの様子を示す動画情報を取得する。そして、情報編集装置５は、動画情報を編集する。すなわち、動画情報にプレゼンテーション資料３１を対応付けた動画ファイルを生成する。
【００３５】
図２は、本実施の形態にかかる情報編集システム１に特徴的な処理を行う情報編集装置５の情報編集部３５と、プレゼンテーション装置２のイベント処理部３２の機能構成を示すブロック図である。
【００３６】
イベント処理部３２は、プレゼンテーション装置２に接続されたキーボード２１やマウス１５からの入力により、プレゼンテーションに関するイベントを示すイベント情報を取得するイベントキャプチャ部３３と、イベントキャプチャ部３３が取得したイベント情報を記録するイベント記録部３４と、イベント情報およびプレゼンテーション資料３１を情報編集装置５に送信する送信部４４とを有している。
【００３７】
また、情報編集部３５は、受信部３６と、イベント制御部３７と、イベント記録部３８と、イベント情報解釈部４２と、動画情報キャプチャ部４０と、動画情報管理部４１と、撮影機器制御部３９と、付帯情報生成部６１と、動画ファイル生成部４３と、付帯情報付帯情報ＩＤ付与部６０と、画面画像テーブル保持部６２と、印刷用データ生成部６５と、雛型保持部６６と、指示受付部５４と、出力部５０と、通信部６７とを有している。
【００３８】
受信部３６は、送信部４４からイベント情報およびプレゼンテーション資料３１を受け取る。イベント制御部３７は、受信部３６が受け取ったイベント情報を制御する。イベント記録部３８は、イベント制御部３７からイベント情報を受け取り、イベント情報を記録する。
【００３９】
撮影機器制御部３９は、ＤＶカメラ４を制御する。動画情報キャプチャ部４０は、動画ファイル生成部４３が生成した動画ファイルを外部に出力すると、ＤＶカメラ４が取り込んだ動画情報をキャプチャする。動画情報管理部４１は、動画情報を管理する。
【００４０】
イベント情報解釈部４２は、イベント記録部３８からイベント情報を取得し、イベント情報の内容を解釈する。付帯情報生成部６１は、イベント情報解釈部４２によって解釈されたイベント情報に基づいて、プレゼンテーション資料３１を構成する各画面画像データに対応付けるべき付帯情報を生成する。
【００４１】
動画ファイル生成部４３は、イベント情報解釈部４２によって解釈されたイベント情報に基づいて動画情報を編集し、動画ファイルを生成する。具体的には、付帯情報生成部６１が生成した付帯情報および画面画像データを動画情報に対応付ける。
【００４２】
付帯情報ＩＤ付与部６０は、受信部３６が受け取ったプレゼンテーション資料３１に含まれる各画面画像データに付帯情報ＩＤを対応付けて画面画像テーブルを生成する。ここで、付帯情報ＩＤとは、画面画像データに後に対応付けるべき付帯情報を識別する情報である。
【００４３】
保持部６４は、動画ファイル生成部４３が生成した動画ファイルを保持する。雛型保持部６６は、印刷用データ生成部６５が利用する雛型を保持する。
【００４４】
印刷用データ生成部６５は、動画ファイルを利用して印刷用データを生成する。具体的には、画面画像テーブル保持部６２に保持されている画面画像テーブルにおいて画面画像データに対応付けられている付帯情報ＩＤを、雛型保持部６６に保持されている雛型に埋め込むことにより印刷用データを生成する。ここで、印刷用データ生成部６２は、本発明の出力情報生成手段を構成する。また、印刷用データは、本発明の出力用画面画像データに相当する。
【００４５】
通信部６７は、ネットワーク８を介して外部と通信する。具体的には、付帯情報ＩＤを利用者から受信し、印刷用データ生成部６５に送る。また、印刷用データ生成部６５が生成した印刷用データを外部に送信する。出力部５０は、保持部６４に保持されている動画ファイルや、印刷用データ生成部６５において生成された印刷用データを出力する。
【００４６】
ここで、通信部６７および出力部５０は、本発明における配信手段を構成する。
【００４７】
指示受付部５４は、編集者等からの指示を受け付け、付帯情報生成部６１、動画ファイル生成部４３、および印刷用データ生成部６５に送る。
【００４８】
ここで、受信部３６、および動画情報キャプチャ部４０は、それぞれ本発明のイベント情報取得手段、画面画像情報取得手段、および動画情報取得手段を構成する。
【００４９】
次に、図３を参照しつつ、プレゼンテーション資料３１について説明する。プレゼンテーション資料３１は、プレゼンテーションの際に表示画面３０に表示すべき画面画像データ３１１，３１２，３１４，３１６，３１８，３２０を含んでいる。各画面画像データ３１１，３１２，３１４，３１６，３１８，３２０には、ページ番号が対応付けられており、ページ番号順に表示される。すなわち、プレゼンテーション資料３１を構成する画面画像は、当該プレゼンテーション資料３１の作成者が定めた順番に配列されている。図３に示すプレゼンテーション資料３１は、６ページ分の画面画像データを含んでいる。これらは、プレゼンターからの指示により、１ページ、２ページ、・・・とページ順に表示される。なお、本実施の形態におけるプレゼンテーション資料３１は、Ｍｉｃｒｏｓｏｆｔ（Ｒ）社製のＰｏｗｅｒ Ｐｏｉｎｔ（Ｒ）のファイルである。
【００５０】
通常、プレゼンテーションにおいて、プレゼンターは、以下の操作を行う。
１．プレゼンテーション装置２の起動
２．プレゼンテーション・ソフトの起動
３．発表の開始
４．キーボード２１又はマウス１５の操作による、プレゼンテーション資料３１のページめくり
５．発表の終了
６．プレゼンテーション・ソフトの終了
７．プレゼンテーション装置２の終了
ここで、ページめくりとは、表示画面３０に表示させる、プレゼンテーション資料３１を１ページから次のページすなわち２ページに切り替えることである。
【００５１】
以上の操作は、いずれもマウス１５またはキーボード２１における所定の操作に対応付けられている。例えば、プレゼンテーション装置２の表示画面に表示されたプレゼンテーション・ソフトのアイコンをマウス１５によりクリックする操作は、プレゼンテーション・ソフトの起動というイベントに対応付けられている。
【００５２】
イベント記録部３４は、このイベント情報のログを記録し、送信部４４は通信インターフェイスを介して情報編集部３５に送信する。撮影機器制御部３９は、イベント情報に基づいてＤＶカメラ４を制御する。イベント記録部３８は、イベント処理部３２から受信したイベント情報のみならず、ＤＶカメラ４の制御のイベント情報も記録する。
【００５３】
例えば、プレゼンテーション・ソフトの起動というイベントが発生したときは、このイベント情報をイベント記録部３８で記録する。さらに、撮影機器制御部３９により、ＤＶカメラ４からの動画情報取り込みを開始する。プレゼンテーション・ソフトが終了したときは、撮影機器制御部３９は、ＤＶカメラ４からの動画情報の取り込みを終了する。そして、イベント制御部３７は、プレゼンテーション・ソフトの終了をイベントとするイベント情報をイベント記録部３８に記録する。
【００５４】
イベント情報解釈部４２は、イベント情報の内容を解釈する。そして、動画ファイル生成部４３は、イベント情報解釈部４２によって解釈されたイベント情報の内容を参照し、プレゼンテーション資料３１及び動画情報に基づいて動画ファイルを生成する。
【００５５】
このように、情報編集部３５は、ＤＶカメラ４から取り込んだ動画情報中のイベントのイベント情報を動画情報とともに管理することができる。つまり、ＤＶカメラ４で撮影され取り込まれた動画情報は、時間の推移を規定する時間情報を付されて保存される。また、記録されたイベント情報は、動画ファイル生成部４３により、プレゼンテーション資料３１とマージされ、内容記述言語（ＭＰＥＧ−７など）により管理される。
【００５６】
図４は、イベント情報リスト３００のデータ構成を模式的に示している。イベント情報リスト３００には、イベント情報３４１，３４２，３４３・・・が、各イベントの発生した順番に配列されている。イベント情報には、発生したイベントの種類およびイベントが発生した日時が含まれている。例えばページ２が表示されると、「ページ２に切り替え」というイベント情報が記録される。これにより、各ページの表示を開始した表示開始時刻および表示を終了した終了時刻を認識することができる。
【００５７】
図５は、図２において説明した、動画ファイル生成部４３の詳細な機能構成を示す機能ブロック図である。動画ファイル生成部４３は、区間決定部４３０と、区間調整部４３１と、同期部４３３と、目次項目抽出部４３４と、対応付部４３５と、同期調整部４３６と、目次項目抽出部４３７とを有する。
【００５８】
区間決定部４３０は、ＤＶカメラ４から取得した動画情報６００を、プレゼンテーション装置２から取得したイベント情報３４０に基づいて、複数の区間に分割する。具体的には、区間決定部４３０は、ページめくりを示すイベント情報３５０が示す時刻に録画されたフレーム位置を動画情報の区間の境界位置として決定する。すなわち、一のページが表示されている区間は、同一区間となり、ページが切り替わるタイミングが、区間の境界に対応する。
【００５９】
区間調整部４３１は、区間決定部４３０が分割した区間の長さを調整する。具体的には、区間決定部４３０により決定された区間の長さが、予め定められた規定長に比べて短い場合に、この規定長よりも短い区間、すなわち規定長外区間を、当該規定長区間の直前または直後の区間に統合する。ここで、規定長は、変更可能である。例えば、指示受付部５４を介して編集者等から指定された長さに定められてもよい。
【００６０】
同期部４３３は、イベント情報３５０に基づいて、動画情報６００とプレゼンテーション資料３１との同期を取る。すなわち、動画情報６００の各区間を表示させるときに同時に表示させるべきプレゼンテーション資料３１の一のページを、各区間に対応付ける。
【００６１】
同期調整部４３６は、動画情報６００の規定外区間に対して、同期部４３３が同期させたプレゼンテーション資料３１のページにかえて、規定外区間の統合先の区間に同期されたページを同期させる。
【００６２】
目次項目抽出部４３４は、プレゼンテーション資料３１から、動画情報６００の目次の項目となるべき文字情報を抽出する。対応付部４３５は、目次項目抽出部４３４が抽出した目次項目を、当該目次項目の抽出元である、プレゼンテーション資料３１の各ページに対応付ける。対応付部４３５は、付帯情報４００をプレゼンテーション資料３１の各ページに対応付ける。目次項目抽出部４３７は、目次項目抽出部４３４が抽出した目次項目を削除する。
【００６３】
図６は、情報編集部３５が生成した動画ファイルを示している。動画ファイルは、動画情報６００と、動画情報６００の各区間６１０に対応付けられた複数の画面画像データ３１１，３１２・・・と、各区間６１０に対応付けられた付帯情報ＩＤ４１１，４１２・・・と、付帯情報ＩＤ４１１，４１２・・・で特定される付帯情報４２１，４２２・・・とを有している。なお、動画情報６００の各区間６１０は、複数のフレーム６２０を含んでいる。各区間６１０の長さは、イベント情報により決定される。
【００６４】
本実施の形態における付帯情報ＩＤ４１０は、当該付帯情報ＩＤにより特定される付帯情報の格納されている位置を示すＵＲＬである。また、付帯情報４２１は、対応する画面画像に関連するテキストデータである。テキストデータの内容は、例えば、画面画像に対応する区間における動画情報に含まれる音声に対応する内容であってもよい。また、他の例としては、編集者から指示受付部５４を介して入力された内容であってもよい。いずれにせよ、付帯情報の内容は、本実施の形態に限定されるものではない。
【００６５】
このように、動画情報６００は、プレゼンテーション資料３１の各画面画像３１１，３１２・・・と対応付けられているので、動画情報６００とプレゼンテーション資料３１の各画面画像データ３１１，３１２・・・とを同期して表示させることができる。
【００６６】
図７は、出力部５０から出力された動画ファイルを示している。図７に示す表示部５００には、動画情報６００と、プレゼンテーション資料３１のうち、表示部５００に表示されている区間に同期されたページ３３０と、動画情報６００の目次８００とが表示されている。なお、目次８００と動画情報６００とはリンクしており、例えば、目次８００中の「テーマ１：製造業の空洞化」という項目が選択されると、そのとき表示されている動画の区間にかかわらず、動画情報６００の区間１が再生される。なお、区間１とは、映像中に含まれる表示画面３０にテーマ１が表示されている区間である。このように、目次を選択することにより、利用者の所望の区間を表示させることができる。
【００６７】
なお、本実施の形態においては、動画ファイル生成部４３は、ＳＭＩＬ（Ｓｙｎｃｈｒｏｎｉｚｅｄ Ｍｕｌｔｉｍｅｄｉａ Ｉｎｔｅｇｒａｔｉｏｎ Ｌａｎｇｕａｇｅ）を利用して動画ファイルを生成する。ここで、ＳＭＩＬとは、動画、静止画、音声、音楽、文字など様々な形式のデータの再生を制御して同期させる言語のことであり、ＸＭＬで記述されている。ＳＭＩＬを用いることにより、表示画面における表示位置、表示させるタイミング、表示させる時間などを指定することができる。
【００６８】
次に、印刷用データ生成部６５が保持部６４に保持されている動画ファイルに基づいて印刷用データを生成する処理について説明する。
【００６９】
図８、印刷用データ生成部６５の詳細な機能構成を示すブロック図である。印刷用データ生成部６５は、画面画像データと付帯情報とが対応付けられた印刷用データを生成する。
【００７０】
印刷用データ生成部６５は、映像構造解釈部１０３、登録部１１１を含む映像要約生成部１０５、印刷整形部１０６、印刷言語生成部１０７、映像参照フレーム抽出部１０９、バーコード付加部１１０を備えている。
【００７１】
また、保持部６４に保持されている動画ファイルは、映像情報（映像本体）１０２と、映像情報１０２に付され、かつ、映像の構造を木構造で表す映像構造インデックス１０１とからなっている。
【００７２】
図９は、映像構造インデックス１０１を説明するための図である。映像構造インデックス１０１は、階層的な木構造として構成されている。木構造の階層は、情報の詳細さの度合いによって分けられていて、下位の階層ほど映像に関する詳細な情報を保持している。図示した木構造は、記録メディア全体に対して１つのルート・ディレクトリ２０１を持つ映像管理データを表すものである。
【００７３】
映像構造インデックス１０１は、映像情報１０２を構造化して表すデータである。映像情報１０２の構造化とは、映像情報で表される映像を連続するフレーム画像（動画を分割して作成された画像）としてとらえ、フレーム画像を所定の単位にまとめる処理をいう。構造化によってまとめられた複数のフレーム画像のまとまりは、セグメントとよばれる。映像構造インデックス１０１によれば、各セグメントがどのような画像のまとまりであるかを示す情報を得ることができる。
【００７４】
本実施の形態では、撮影ごとにセグメントを作成し、撮影ごとにまとめられたセグメントをさらにカット・ショット変化点ごとにまとめてセグメントを作成した。カット・ショット変化点とは、映像の記録開始から起算される記録時間、あるいは画像記録数に基づいて配列されたフレーム画像において、隣り合って配列され、かつ特徴量の差が所定の値よりも大きいフレーム画像間に設けられるものである。なお、特徴量としては、例えば以下のものがある。
・カラーヒストグラム
・空間色分布
・空間エッジ分布
・空間テクスチャ分布
・オブジェクト形状
【００７５】
図９に示すＸは環境情報を示し、Ｙはカメラ情報を表し、Ｚは代表フレームの静止画特徴量をそれぞれ表すものとする。環境情報Ｘとは、撮影時の外部環境に関する情報であって、日時、位置（緯度および経度）、高度、気温、湿度に関する情報を含んでいる。なお、映像構造インデックス１０１を作成する映像構造化装置は、このような情報を取得するための時計（ＧＭＴ時間を標準とする）、ＧＰＳ（Ｇｌｏｂａｌ Ｐｏｓｉｔｉｏｎｉｎｇ Ｓｙｓｔｅｍ）、気圧センサ、温度センサ、湿度センサを備えている。
【００７６】
また、カメラ情報Ｙとは、あるセグメントに含まれるフレーム画像（動画像を分割して作成された画像）を撮影したときの焦点距離、絞り値、シャッタースピード、ピント合焦距離といった情報を含んでいる。このような情報のうち、焦点距離に関する情報からは、フレーム画像の撮影対象物が風景か、あるいは人物や物といったオブジェクトか、広角撮影かあるいは望遠撮影かといった点ついて推測することができる。また、絞り値に関する情報からは、撮影対象物が風景か、あるいはオブジェクトかといった判断に加えて、撮影場所の明暗についても推測することができる。
【００７７】
また、シャッタースピードに関する情報からは、撮影対象物が静止したものか、あるいは移動しているものかについて、さらに撮影場所の明暗について推測することができる。そして、ピント合焦距離に関する情報からは、映像記録装置のカメラ部分と撮影対象物との距離がおおよそ推測できる。上記した情報を複合的に解釈することにより、例えば、シャッタースピードに関わらず絞り値が低く、合焦距離が近くて焦点距離が遠いこと場合には、オブジェクトを撮影した可能性が高いというような推測ができるようになる。
【００７８】
さらに、静止画特徴量Ｚとは、フレーム画像を静止画像として見た場合の、特徴量を表す情報である。
【００７９】
ルート・ディレクトリ２０１の直下に位置するカット・ショット統括情報２０２Ａ、カット・ショット情報２０３Ａは、映像情報１０２すべてに共通の情報である。さらに、カット・ショット統括情報２０２Ｂは、カット・ショット情報２０３Ａによって管理されるセグメントのカット・ショット変化点に関する統括的な情報である。
【００８０】
図９に示した木構造中には、撮影が進むにつれて作成された撮影ごとのセグメントが２つあって、２つのセグメントにはそれぞれカット・ショット情報２０３Ｂ、２０３Ｃが付されている。また２つのセグメントのいずれにもカメラ情報Ｙが付加されている。
【００８１】
さらに、カット・ショット情報２０３Ｂ、２２０３Ｃが付加されたセグメントの下位には、各セグメントに含まれるカット・ショットセグメントが４つ配置されている。４つのセグメントは、カット・ショット情報２０３Ｂが付加されたセグメントをカット・ショット変化点で分割して作成されたものである。そして、４つのカット・ショットセグメントには、それぞれカット・ショット情報２０３Ｄ、２０３Ｅ、２０３Ｆ、２０３Ｇが配置されている。また、カット・ショット情報２０３Ｃが付加されたセグメントの下位に配置された４つのセグメントには、カット・ショット情報２０３Ｈ、２０３Ｌ、２０３Ｊ、２０３Ｋが付加されている。カット・ショット情報２０３Ｄ〜Ｇ、カット・ショット情報２０３Ｈ〜Ｋには、それぞれカメラ情報Ｙが付加されている。
【００８２】
さらに、カット・ショット情報２０３Ｄ〜Ｇ、カット・ショット情報２０３Ｈ〜Ｋには、各カット・ショット情報が付加されたセグメントに含まれるフレーム画像を代表する代表フレーム（キーフレームともいう）画像の情報（代表フレーム情報）２０４Ａ、２０４Ｂ、２０４Ｃ、２０４Ｄと、代表フレーム情報２０４Ｅ、２０４Ｆ、２０４Ｇ、２０４Ｈとがそれぞれ付加されている。さらに、代表フレーム情報２０４Ａ〜Ｄ、代表フレーム情報２０４Ｅ〜Ｈには、各代表フレームの静止画特徴量Ｚが付加されている。
【００８３】
代表フレーム情報２０４Ａ〜Ｄ、代表フレーム情報２０４Ｅ〜Ｈは、各代表フレームの静止画特徴量Ｚの他、それぞれの代表フレームを説明する文書を含んでいる。代表フレームを説明する文書は、映像構造インデックス１０１の作成時に編集者によって作成されたもの、あるいは特徴量に応じて自動的に付加されたサンプル文書である。映像構造インデックス１０１においては、各代表フレームを説明する文書を含む代表フレーム情報２０４Ａ〜Ｄ、代表フレーム情報２０４Ｅ〜Ｈとが印刷可能な情報である。
【００８４】
映像要約生成部１０５は、指示受付部４５を介して要約に使用される条件である要約条件（図中条件Ａと記す）、印刷整形部１０６による情報の整形に使用される印刷書式（図中条件Ｂと記す）を取得する。そして、取得した要約条件、印刷書式は、映像要約生成部１０５に設定される。また、映像構造解釈部１０３は、映像構造インデックス１０１の構造を解釈する。映像要約生成部１０５、映像参照フレーム抽出部１０９は、映像構造解釈部１０３によって解釈された映像構造インデックス１０１と要約条件とに基づいて映像情報１０２を要約する。印刷整形部１０６は、映像要約生成部１０５、映像参照フレーム抽出部１０９が映像情報１０２を要約して生成した情報（映像要約）を印刷書式に基づいて印刷可能な形式にする（整形）。
【００８５】
なお、本実施の形態は、要約条件として映像要約のうちに画像が占める割合および文字が占める割合、要約時の精度、映像参照フレーム抽出部１０９において行われる参照フレーム（印刷されるフレーム画像）の抽出条件、抽出される参照フレームの数を設定する。また、印刷書式として印刷時の雛型を設定するものとした。要約条件および印刷書式は、指示受付部５４を介して取得する他、映像要約生成部１０５の登録部１１１に予め登録しておくこともできる。
【００８６】
上記した要約条件のうち、要約時の精度は、木構造の階層を指定することによって設定される。また、参照フレームの抽出条件は、編集者から指示受付部５４を介して取得したキーワードや画像、あるいは登録部１１１に登録されているキーワードや画像によって設定される。
【００８７】
設定されたキーワードや画像は、映像要約生成部１０５を介して映像参照フレーム抽出部１０９に送られる。映像参照フレーム抽出部１０９は、キーワードに基づいてフレーム画像（本実施の形態では代表フレームを対象にするものとする）を検索し、該当する代表フレームを抽出する。あるいは抽出条件に設定された画像と類似する画像を抽出する。抽出された画像が要約条件の参照フレームの数よりも多い場合、映像参照フレーム抽出部１０９は、図１０に示す方法で代表フレームを絞り込む。
【００８８】
すなわち、図１０によれば、抽出の初期の段階で代表フレームａ、ｂ、ｃ、ｄ、ｅ、ｆ、ｇの７枚が抽出された場合、代表フレームａ〜ｇ間で互いの類似度を比較する。この類似度は、例えば、特徴量によって判別しても良い。類似度の比較の結果、代表フレームａと代表フレームｅとが類似する（例えば特徴量の相違が予め設定されている基準よりも小さい）と判断された場合、映像参照フレーム抽出部１０９は、代表フレームａまたは代表フレームｅの一方だけを残す。残った代表フレームａまたはｅは、代表フレームｈとなる。すなわち、代表フレームｈは、代表フレームａとｅとを代表することになる。同様に、代表フレームｃと代表フレームｆとが類似すると判断された場合、代表フレームｃまたは代表フレームｆの一方だけを残すことによって代表フレームｃ、代表フレームｆを代表フレームｊで代表する。以上の処理により、代表フレームａ〜ｇの７枚は、代表フレームｈ、ｉ、ｊ、ｋ、ｌの５枚に絞り込まれる。
【００８９】
さらに、映像参照フレーム抽出部１０９は、代表フレームｈ〜ｌの５枚に対して代表フレームａ〜ｇに対して行った絞り込みの処理と同様の処理を施し、代表フレームｈ〜ｌの５枚を代表フレームｍ、ｎ、ｏの３枚に絞り込む。３という数値が要約条件として設定された抽出すべき参照フレームの数に合致する場合、映像参照フレーム抽出部１０９は、代表フレームｍ〜ｏを抽出したという情報を映像要約生成部１０５および印刷整形部１０６に送る。
【００９０】
映像要約生成部１０５は、代表フレームｍ〜ｏと代表フレームｍ〜ｏに付されている文書との量を要約条件として設定された画像が占める割合および文字が占める割合と比較する。代表フレームｍ〜ｏと代表フレームｍ〜ｏに付されている文書との量は、例えば、印刷された画像において抽出された参照フレームが占める面積比と文字が占める面積比とをシミュレーションによって求めるものであっても良い。このとき、要約条件として設定された画像が占める割合および文字が占める割合とは、印刷された画像において画像が占める面積比と文字が占める面積比とによって設定される。
【００９１】
そして、映像要約生成部１０５は、参照フレームとして抽出された代表フレーム（以下、参照フレームと記す）が占める割合と文字が占める割合とが要約条件に一致しなかった場合、参照フレームが占める割合と文字が占める割合とが要約条件に一致するように調整する。この調整は、例えば、抽出された参照フレームを削除してその空間を文字にあてる、あるいは文字で表される情報を削除する方法によって行われる。なお、文字情報を削除する場合、映像要約生成部１０５は、例えば、文字情報を対象にして重要な語句を抽出する。そして、重要な語句が多く含まれている文書ほど重要度が高く、少ない文書ほど重要度が低いと判断し、重要度が低いと判断された文書を優先して削除するようにしても良い。
【００９２】
さらに、映像要約生成部１０５は、以上のようにして割合を調整した参照フレームと文書とに関する情報を印刷整形部１０６に送る。印刷整形部１０６は、参照フレームと文書とを印刷書式として設定された雛型にしたがって配置し、印刷言語生成部１０７に送る。また、この際、印刷整形部１０６は、参照フレームに関する情報から参照フレームの映像における位置をバーコード付加部１１０に送る。バーコード付加部１１０は、参照フレームの映像における位置をバーコードで表す情報に変換し、印刷言語生成部１０７に出力する。なお、参照フレームの映像における位置は、参照フレームが映像を構成するフレーム画像において何番目に位置するか、あるいは参照フレームが映像の再生開始から何時間（分、秒）後に再生されるかで示される時間的位置であっても良い。
【００９３】
図１１（ａ）、（ｂ）、（ｃ）は、印刷書式として設定される雛型を例示する図である。これらは、雛型保持部６６に保持される雛型により実現される雛型である。図１１（ａ）は、画像を主体とする画像主体の雛型である。また、（ｂ）は、画像と文書とが比較的近い割合で配分された画像・文字混合型の雛型である。また、図１１（ｃ）は、文書を主体とした文字主体の雛型である。
【００９４】
本実施の形態では、雛型保持部６６はさらに、ビデオテープやＤＶＤといった映像メディアの識別ラベル（付箋紙）を対象とした雛型をも保持している。そして、指示受付部５４を介して利用者から印刷書式の指定を受付け、さらに図示しない表示部に雛型の一覧を表示し、利用者から任意の雛型の指定を受け付ける。また、雛型は、予め保存されるものに限るものでなく、指示受付部５４を介して登録することもできる。
【００９５】
雛型に沿って印刷整形された参照フォームおよび文書は、印刷整形部１０６から印刷言語生成部１０７に出力される。また、バーコード付加部１１０は、バーコードに変換した参照フレームの映像における位置を印刷言語生成部１０７に送る。印刷言語生成部１０７は、印刷整形された参照フォームおよび文書とバーコードとを出力部５０で使用されている印刷言語に変換して出力部５０に送る。出力部５０は、参照フォームおよび文書とバーコードとを同一の用紙上に印刷出力する。この際、雛型にバーコード専用の領域を設けておくようにしても良い。
【００９６】
以下、図１２を参照しつつ、情報編集部３５が動画ファイルを作成するときの情報編集処理について説明する。まず、受信部３６は、イベント処理部３２の送信部からプレゼンテーション資料３１を受信する（ステップＳ９０）。次に、受信したプレゼンテーション資料３１に含まれる各画面画像データに対して、付帯情報ＩＤを付与する（ステップＳ９２）。そして、画面画像テーブル保持部６２は、画面画像データを識別する画面画像データＩＤと、付帯情報ＩＤとを対応付けた画面画像テーブルを保持する（ステップＳ９４）。次に、出力部５０は、画面画像テーブルにおいて対応付けられている画面画像データと、付帯情報ＩＤとを対応付けた印刷物を出力する。（ステップＳ９６）。
【００９７】
図１３に、このとき出力された印刷物を示す。印刷物には、プレゼンテーション資料３１を構成する各画面画像データ３１０と、２次元バーコード４３０とが対応付けて印刷されている。なお、ここで、２次元バーコード４３０は、付帯情報ＩＤ４２０に基づいて生成されたものである。すなわち、この２次元バーコード４３０から付帯情報ＩＤを特定することができる。
【００９８】
ここで、２次元バーコードとは、従来の１次元のバーコードよりも多くの情報を表すことができる。２次元バーコードとしては、１次元のバーコードを積み上げたものと、水平方向と垂直方向にそれぞれ情報を表すものとが知られている。本実施の形態においては、水平方向と垂直方向にそれぞれ情報を表現することのできるいわゆるＱＲコードが印刷されている。
【００９９】
実際にプレゼンテーションが始まる前に、プレゼンテーション資料３１を構成する各画面画像データと、画面画像データに対応する付帯情報ＩＤとを対応付けた印刷物をプレゼンテーションに出席した聴講者に配布しておく。
【０１００】
そして、プレゼンテーションが始まると、プレゼンテーションの様子を示す動画を、ＤＶカメラ４を用いて撮影する。
【０１０１】
次に、図１４を参照しつつ、ＤＶカメラ４により撮影された動画情報と、先に取得したプレゼンテーション資料３１等から情報ファイルを生成するときの情報編集処理について説明する。まず、区間決定部４３０は、ＤＶカメラ４から取得した動画情報６００を、プレゼンテーション装置２から取得したイベント情報３４０に基づいて複数の区間に分割する（ステップＳ１００）。具体的には、「発生日時１０時１０分、イベント種類ページ２に切り替え」及び「発生日時１０時１６分、イベント種類ページ３に切り替え」を示す連続して記録された２つのイベント情報を取得した場合には、動画情報６００のうち１０時１０分から１０時１６分の間に録画された区間はページ２に対応する区間と決定される。すなわち、１０時１０分および１０時１６分の位置を境界位置とする区間に分割する。
【０１０２】
次に、区間調整部４３１は、区間決定部４３０によって決定された各区間の長さを、予め定められた規定長と比較する。そして、規定長に比べて短い区間、すなわち規定長外区間があった場合（ステップＳ１０２，Ｙｅｓ）、規定長外区間を調整する（ステップＳ１０４）。
【０１０３】
ここで、図１５を参照しつつ、区間調整部４３１が規定長外区間を調整する方法について説明する。図１５は、動画情報６００を時間軸に沿って模式的に示している。例えば、「テーマ１」の区間は、動画情報６００のうち、動画情報６００に映像として含まれている表示画面３０に「テーマ１」の表題のページ、すなわち１ページが表示されている区間を示している。このように、各区間は、表示画面３０に表示された画面画像の切り替りを境界として定められている。
【０１０４】
また、ｔ１は、「テーマ１」に対応する区間を再生するのに要する再生時間である。すなわち、ｔ１は、テーマ１のページであるページ１の表示終了時刻と開始時刻の差分値である。ここで、先に述べた規定長は、ｔｓで示される。すなわち、規定長は再生時間の単位で定められている。
【０１０５】
区間の長さｔｘ（ｘ＝１〜６）の各々について規定長ｔｓと比較し、規定長ｔｓに比べて短い区間は、規定長ｔｓよりも長い他の区間に統合する。例えば、図１５（Ａ）に示す「テーマ４」を表示する区間の長さｔ４および「テーマ５」の区間の長さｔ５は規定長に比べて短い。従って、「テーマ４」の区間および「テーマ５」の区間は、規定外区間と判断される。この場合、図１５（Ｂ）に示すように、規定外区間は、その直後の区間に統合される。すなわち、「テーマ５」の区間は、「テーマ６」の区間に統合される。また、「テーマ４」の直後の区間、すなわち「テーマ５」の区間は規定外区間であるので、「テーマ４」の区間は、さらにその直後の区間、すなわち「テーマ６」の区間に統合される。すなわち、「テーマ４」の区間、「テーマ５」の区間、および「テーマ６」の区間が１つの区間に統合され、いずれも区間４に含まれることになる。
【０１０６】
プレゼンテーションにおいては、時間の都合上、途中のページの説明を省略する場合がある。図１５の「テーマ４」の区間および「テーマ５」の区間ように、その表示時間が短い場合、これらの画面画像は「テーマ６」を表示させるため表示されたに過ぎず、画面画像に対する説明は省略されていると推測される。このように、説明の対象となっていないと予想される、表示時間の短い画面画像に対応する区間を省略することで、より見やすい情報に編集することができる。
【０１０７】
プレゼンテーション資料３１の途中の画面画像の説明を省略する場合、省略する画面画像を表示させている間、プレゼンターは、次に説明する画面画像に関する内容を意識している場合が多い。このため、表示画面３０に省略された画面画像が表示されている間は、その次に説明の対象となるページにおいて説明すべき事項に関連する説明をしていると予想される。また、実際のプレゼンテーションにおいても、このようなケースが多い。そこで、本実施の形態においては、規定外区間は、便宜的にその直後の区間に含めることにした。これにより、内容的に統一された区間を１つの区間とすることができる。
【０１０８】
説明を図１２に戻す。動画情報が複数の区間に分割されると、次に、同期部４３３は、イベント情報３４０に基づいて、動画情報６００とプレゼンテーション資料３１とを同期させる（ステップＳ１０６）。次に、目次項目抽出部４３４は、プレゼンテーション資料３１から動画情報６００の目次として文字情報を抽出する（ステップＳ１０８）。具体的には、プレゼンテーション資料３１の各画面画像は、タイトル属性が付与された文字情報を含んでおり、目次項目抽出部４３４は、タイトル属性に対応付けられた文字情報を抽出する。目次項目抽出部４３４は、プレゼンテーション資料３１に含まれるすべてのページの画面画像から文字情報を抽出する。なお、本実施の形態においては、各画面画像における「テーマ・・・」という文字情報が、タイトル属性として記述されている。
【０１０９】
次に、目次項目抽出部４３４は、抽出いた目次項目を含む目次を生成する（ステップＳ１０９）。次に、対応付部４３５は、目次項目抽出部４３４が抽出した文字情報、すなわち目次項目を、当該目次項目を抽出した画面画像に対応付ける（ステップＳ１１０）。画面画像は、動画情報６００の各区間に対応付けられている。従って、各目次項目は、画面画像を介して動画情報６００の各区間に対応付けられる。
【０１１０】
ステップＳ１０２，ステップＳ１０４において、区間を統合した場合には（ステップＳ１１２，Ｙｅｓ）、同期調整部４３６は、動画情報６００とプレゼンテーション資料３１の同期を調整する（ステップＳ１１４）。
【０１１１】
ここで、図１６を参照しつつ同期調整部４３６が同期を調整する方法について説明する。図１６に示すように、動画情報６００の各区間と、当該区間と同時に表示すべきプレゼンテーション資料３１の各ページは同期している。規定外区間である「テーマ４」の区間および「テーマ５」の区間には、それぞれプレゼンテーション資料３１のうち「テーマ４」を示す４ページと５ページが同期している。この場合、同期調整部４３６は、「テーマ４」の区間および「テーマ５」の区間を含む区間４全体に対してプレゼンテーション資料３１の６ページを同期させる。すなわち、同期調整部４３６は、「テーマ４」の区間に対して、４ページにかえて６ページを同期させ、かつ「テーマ５」の区間に対して、５ページにかえて６ページを同期させる。
【０１１２】
規定外区間において表示画面３０に表示される画面画像は、該当するページにおいて、その説明が省略されており、表示させる必要がない場合が多い。また、先に説明したように、これらの画面画像を表示しているとき、プレゼンターはその後に表示する画面画像に関する内容について説明している場合が多い。このため、同期部４３３によって同期された画面画像を同期させるよりも、その後に表示するページを同期したほうが、利用者は内容を理解しやすい。
【０１１３】
再び、図１２を参照しつつ情報編集処理について説明する。同期調整が完了すると、次に、目次項目抽出部４３７は規定外区間に対応する目次項目を削除する（ステップＳ１１６）。
【０１１４】
図１７は、図１６に示す動画情報６００の目次項目を示している。図１７（Ａ）は削除前の目次項目を示している。図１７（Ｂ）は削除後の目次項目を示している。図１６に示すように、規定外区間である「テーマ４」の区間および「テーマ５」の区間は、いずれも「テーマ６」の区間に統合されている。そこで、これら３つの区間を含む区間４に対しては、統合先の区間に同期するページ６のページ属性を目次項目として抽出する。これにより、目次項目が無駄に多くなるのを避けることができる。以上の処理により、図１２に示す動画情報６００に対する情報編集処理が全て完了する。
【０１１５】
次に、プレゼンテーションにおいて、本来表示すべき順番と逆の順番でプレゼンテーション資料３１の画面画像が表示された場合の情報編集部３５の処理について、図１８を参照しつつ説明する。図１８に示す動画情報６１０には、プレゼンテーション資料３１のページ順と逆の順番にページが表示される部分が含まれている。すなわち、動画情報に含まれる表示画面３０は、「テーマ５」を表示したのちに、再度「テーマ４」の画面画像、「テーマ３」の画面画像、および「テーマ２」の画面画像の順に表示している。
【０１１６】
なお、情報編集部３５は、ページの切り替えをイベント種類として含むイベント情報に基づいて、ページ順と逆の順番に表示されていることを認識することができる。
【０１１７】
プレゼンテーションにおいては、既に説明した内容を、再び関連する画面画像を再度表示させて説明する場合がある。このような場合には、プレゼンターは、利用者インターフェースを用いて操作することにより。図１８に示すように順にページを戻していく。この場合も情報編集部３５は、図１４から図１７を参照しつつ説明した情報編集処理によって、規定長外区間を、当該規定長外区間の直後の区間に統合する。具体的には、図１８に示すテーマ５の区間に続いて順に表示されるテーマ４の区間およびテーマ３の区間が規定外区間である場合には、「テーマ４」の区間および「テーマ３」の区間を「テーマ２」の区間に統合する。
【０１１８】
その一方で、ページ順に「テーマ１」の区間から「テーマ５」の区間の間に含まれる規定外区間である「テーマ４」の区間に対しては、直後の区間に含める処理を行わない。このように、一旦表示させたページを、再度ページを遡って表示させる場合に限り直後の区間に統合することとしてもよい。
【０１１９】
ページ順にプレゼンテーション資料３１を表示させているときは、各ページについての説明を省略していても、聴講者の理解のためには画面画像の表示は残したほうがよい場合もある。このような場合には、本例のように、逆順にページが切り替る場合のみ規定外区間を統合することにより、より理解しやすい情報にすることができる。
【０１２０】
逆順にページが切り替る場合は、それ以前に既に、省略されたページについての説明がなされている場合が多い。従って、逆順にページが切り替る区間内の規定外区間を統合することにより、より適切な目次を生成することができる。
【０１２１】
次に、２次元バーコードを取得した場合の、印刷用データ生成部６５の処理について説明する。２次元バーコードは、上述のように、所定の画面画像に付与された付帯情報の付帯情報ＩＤを示している。２次元バーコードを取得すると、映像要約生成部１０５は、２次元バーコードを解読して、付帯情報ＩＤを特定し、当該付帯情報ＩＤに対する付帯情報と、この付帯情報に対応する画面画像データを特定する。そして、画面画像データと付帯情報を含む印刷用データを生成する。図１９は、出力された印刷用データを示している。このように、２次元バーコードを取得すると、指定された２次元バーコードにより特定される付帯情報を印刷した印刷物を出力することができる。従って、利用者は、プレゼンテーション前に配布された印刷物に印刷された２次元バーコードにより、プレゼンテーション終了後に、所望の画面画像データに関連する情報を取得することができる。
【０１２２】
図２０は、２次元バーコードリーダ６を示している。２次元バーコードリーダ６は、携帯電話に着脱可能に設けられている。２次元バーコードリーダ６は、図１３において説明した印刷物に印刷された２次元バーコードを読み取り、これを解読する。これにより、２次元バーコードからＵＲＬが特定される。そして、利用者の携帯端末７を介して、２次元バーコードから特定されたＵＲＬが、ネットワーク８を介して、情報編集装置５の通信部６７に送られる。そして、通信部６７から印刷用データ生成部６５にＵＲＬが送られ、印刷用データ生成部６５は、ＵＲＬにより特定される付帯情報等を利用して、印刷用データを生成する。以下、図２１を参照しつつ、印刷用データを生成する処理について詳述する。
【０１２３】
まず、図示しない表示部に要約条件、印刷書式入力を入力する画面を表示することによって要約条件と印刷書式とを入力する（ステップＳ５０１）。ここで、要約条件とは、付帯情報を生成するための条件である。
【０１２４】
このとき、利用者が登録部１１１に登録されている要約条件（キーワードなど）や印刷書式（雛型など）を指定したか否か判断し（ステップＳ５０２）、登録データが指定された場合には（ステップＳ５０２：Ｙｅｓ）、登録部１１１から登録データを読み出す（ステップＳ５１０）。また、登録データが指定されていない場合には（ステップＳ５０２：Ｎｏ）、映像構造インデックス１０１に基づいて映像情報１０２で表される映像の構造を解釈する（ステップＳ５０３）。
【０１２５】
次に、印刷用データ生成部６５は、映像要約作成サブルーチンを実行する（ステップＳ５０４）。映像要約作成サブルーチンは、映像要約生成部１０５、映像参照フレーム抽出部１０９においてなされる処理である。そして、要約条件にしたがって参照フレームを抽出する処理、抽出された参照フレームに付加されている文書と参照フレームとの割合を調整する処理、参照フレームの映像における位置を特定する処理を含むものである。
【０１２６】
次に、印刷用データ生成部６５は、映像要約サブルーチンの処理によって得られる参照フレームおよび文書を印刷書式に基づいて雛型に配置し、参照フレームおよび文書を印刷時の様式に整形する（ステップＳ５０５）。また、参照フレームの位置に関する情報をバーコード付加部１１０でバーコードに変換すると共に参照フレームおよび文書に付加する（ステップＳ５０６）。そして、印刷時の様式に整形された参照フレームおよび文書とバーコードとを出力部５０で使用される言語に変換して印刷言語を生成し（ステップＳ５０７）出力部５０で印刷する（ステップＳ５０８）。
【０１２７】
さらに、映像要約生成部１０５は、今回使用した要約条件と印刷書式とを編集者が登録するか否か判断し（ステップＳ５０９）、登録する場合には（ステップＳ５０９：Ｙｅｓ）、要約条件および印刷書式を登録部１１１に登録する（ステップＳ５１１）。また、登録しない場合には（ステップＳ５０９：Ｎｏ）、登録を行うことなく処理を終了する。
【０１２８】
なお、本実施の形態で説明した映像情報要約方法は、予め用意されたプログラムをパーソナル・コンピューターやワークステーション等のコンピュータで実行することにより実現することができる。このプログラムは、ハードディスク、フロッピー（Ｒ）ディスク、ＣＤ−ＲＯＭ、ＭＯ、ＤＶＤ等のコンピュータで読み取り可能な記録媒体に記録され、コンピュータによって記録媒体から読み出されることによって実行される。またこのプログラムは、伝送媒体としてまたは上記記録媒体を介して、インターネット等のネットワークを介して配布することができる。
【０１２９】
以上のように、映像構造インデックスを利用して映像を表す画像および文書を映像情報から抽出することにより効率的に映像情報を検索し、参照フレームを抽出することができる。また、参照フレームを説明するための文書を比較的簡易に取得することができる。
【０１３０】
また、編集者が設定した要約条件に沿って映像を要約し、編集者が設定した印刷書式に沿って印刷することにより、参照フレームおよび文書の選択に利用者の目的や嗜好を反映させることができる。また、参照フレームおよび文書を印刷する際の雛型にも利用者の目的や嗜好を反映させることができる。さらに、要約条件や印刷書式を編集者が登録することにより、任意の要約条件によって抽出された参照フレームおよび文書を任意の雛型で印刷することができる。印刷物を映像記録媒体のインデックスに利用すれば、各利用者にオリジナルのインデックスを作成することができる。
【０１３１】
図２２は、実施の形態にかかる情報編集装置５のハードウェア構成を示す図である。情報編集装置５は、図２、図５、および図８を参照しつつ説明した、情報編集部３５の情報編集プログラムなどが格納されているＲＯＭ５２、ＲＯＭ５２内のプログラムに従って情報編集装置５の各部を制御し、情報編集処理等を実行するＣＰＵ５１、ワークエリアが形成され、情報編集装置５の制御に必要な種々のデータが記憶されているＲＡＭ５３、ネットワークに接続して、通信を行う通信Ｉ／Ｆ５７、および各部を接続するバス５８を備えている。
【０１３２】
先に述べた情報編集装置５における情報編集処理を実行する情報編集プログラムは、インストール可能な形式又は実行可能な形式のファイルでＣＤ−ＲＯＭ、フロッピー（Ｒ）ディスク（ＦＤ）、ＤＶＤ等のコンピュータで読み取り可能な記録媒体に記録されて提供される。
【０１３３】
また、本実施形態の情報編集プログラムを、インターネット等のネットワークに接続されたコンピュータ上に格納し、ネットワーク経由でダウンロードさせることにより提供するように構成しても良い。
【０１３４】
この場合には、情報編集プログラムは、情報編集装置５において上記記録媒体から読み出して実行することにより主記憶装置上にロードされ、上記ソフトウェア構成で説明した各部が主記憶装置上に生成されるようになっている。
【０１３５】
また、プレゼンテーション装置２のハードウェア構成は、図２２を参照しつつ説明した情報編集装置５のハードウェア構成と同様であるので、説明を省略する。
【０１３６】
以上、本発明を実施の形態を用いて説明したが、上記実施の形態に多様な変更または改良を加えることができる。
【０１３７】
そうした第１変更例としては、本実施の携帯においては、２次元バーコードリーダ６により２次元バーコードを読み取ったが、これにかえて、スキャナにより２次元バーコードを画像として読み込んでもよい。この場合、情報編集装置５は２次元バーコードを解読する２次元バーコード読取部をさらに備える。そして、印刷用データ生成部６５は、２次元バーコード読取部が解読したＵＲＬにより特定される付帯情報等を利用して、印刷用データを生成する。この場合、利用者は端末から情報編集部３５に対してアクセスし、当該ＵＲＬにより付帯情報を要求する。
【０１３８】
【発明の効果】
以上説明したように、請求項１にかかる発明によれば、付帯情報が生成される前に、予め付帯情報識別情報と画面画像とを対応付けることができるので、付帯情報が生成される前に利用者に対して付帯情報を取得するために利用される付帯情報識別情報を通知することができるという効果を奏する。
【０１３９】
また、このように、デジタルデータを生成する前に画面画像と付帯情報識別情報とを対応付けた印刷物を配布することができる。従って、利用者は、デジタルデータとして撮影される講演等を視聴する場合、講演の間、講演内容に沿って、画面画像等が記載された印刷物にメモを取り、後日、付帯情報識別情報に基づいて付帯情報を取得することができる。これにより、講演中の自分のメモと付帯情報との対応付けを容易に行うことができるという効果を奏する。
【０１４０】
請求項２にかかる発明によれば、利用者は、後に印刷物に記載された付帯情報識別情報に基づいて付帯情報を取得することができるという効果を奏する。
【０１４１】
請求項３にかかる発明によれば、付帯情報が生成される前に、予め付帯情報識別情報と画面画像とを対応付けることができるので、付帯情報が生成される前に、利用者に対して付帯情報を取得するために利用される付帯情報識別情報を通知することができるという効果を奏する。
【０１４２】
また、請求項４にかかる発明によれば、画面画像と付帯情報識別情報とを対応付けた出力用画面情報を印刷物として出力することができる。従って、利用者は、この印刷物において、画面画像に対応付けられた付帯情報識別情報を利用して、画面画像に対する付帯情報を取得することができるという効果を奏する。
【０１４３】
また、請求項５にかかる発明によれば、付帯情報識別情報は、ＵＲＬであるので、利用者は、ＵＲＬにアクセスすることによって、容易に付帯情報を取得することができるという効果を奏する。
【０１４４】
また、請求項６にかかる発明によれば、付帯情報識別情報は、２次元バーコードとして印刷されるので、利用者は、この２次元バーコードを、バーコードリーダ等で読み取らせ、付帯情報識別情報を取得することができるという効果を奏する。
【０１４５】
また、請求項７にかかる発明によれば、画面画像関連情報要求は付帯情報識別情報を含むので、利用者から画面画像関連情報要求を受け付けると、付帯情報識別情報により付帯情報を特定し、特定した付帯情報を利用者に提供することができる。このように、利用者は、容易に所望の付帯情報を取得することができるという効果を奏する。
【０１４６】
また、請求項８にかかる発明によれば、雛型保持部は、画面画像関連情報を生成するときに利用する雛型を格納しているので、画像関連情報生成手段は、この雛型を利用することにより容易に画面画像関連情報を生成することができるという効果を奏する。
【０１４７】
また、請求項９にかかる発明によれば、対応付手段は、表示画面に画面画像が表示されている間に記録された情報を付帯情報として、当該画面画像に対応付けるので、画面画像に関連する情報を効率的に付帯情報として特定することができるという効果を奏する。
【０１４８】
また、請求項１０にかかる発明によれば、付帯情報が生成される前に、予め付帯情報識別情報と画面画像とを対応付けることができるので、付帯情報が生成される前に、利用者に対して付帯情報を取得するために利用される付帯情報識別情報を通知することができるという効果を奏する。
【０１４９】
また、請求項１１にかかる発明によれば、付帯情報が生成される前に、予め付帯情報識別情報と画面画像とを対応付けることができるので、付帯情報が生成される前に、利用者に対して付帯情報を取得するために利用される付帯情報識別情報を通知することができるという効果を奏する。
【図面の簡単な説明】
【図１】情報編集システム１の全体構成を示す図である。
【図２】情報編集装置５の情報編集部３５と、プレゼンテーション装置２のイベント処理部３２の機能構成を示すブロック図である。
【図３】プレゼンテーション資料３１を模式的に示す図である。
【図４】イベント情報リスト３４０のデータ構成を模式的に示す図である。
【図５】動画ファイル生成部４３の詳細な機能構成を示す機能ブロック図である。
【図６】情報編集部３５が生成した情報ファイルを示す図である。
【図７】出力部５０から出力された情報ファイルを示す図である。
【図８】印刷用データ生成部６５の詳細な機能構成を示す機能ブロック図である。
【図９】映像構造インデックスを説明するための図である。
【図１０】参照フレームの絞り込みを説明するための図である。
【図１１】印刷書式として設定される雛型を例示する図である。
【図１２】情報編集部３５が動画ファイルを生成するときの処理を示すフローチャートである。
【図１３】動画ファイルの印刷物を示す図である。
【図１４】情報編集部３５が情報ファイルを作成するときの情報編集処理を示すフローチャートである。
【図１５】動画情報６００を時間軸に沿って模式的に示す図である。
【図１６】同期調整部４３６による同期の調整方法を説明するための図である。
【図１７】図１６に示す動画情報６００の目次を示す図である。
【図１８】動画情報６１０を示す図である。
【図１９】出力された印刷用データを示す図である。
【図２０】２次元バーコードリーダを示す図である。
【図２１】印刷用データを生成する処理を示すフローチャートである。
【図２２】情報編集装置５のハードウェア構成を示す図である。
【符号の説明】
１ 情報編集システム
２ プレゼンテーション装置
３ 投影機
４ ＤＶカメラ
５ 情報編集装置
６ ２次元バーコードリーダ
７ 携帯端末
８ ネットワーク
１５ マウス
２１ キーボード
３０ 表示画面
３１ プレゼンテーション資料
３２ イベント処理部
３３ イベントキャプチャ部
３４ イベント記録部
３５ 情報編集部
３６ 受信部
３７ イベント制御部
３８ イベント記録部
３９ 撮影機器制御部
４０ 動画情報キャプチャ部
４１ 動画情報管理部
４２ イベント情報解釈部
４３ 動画ファイル生成部
４４ 送信部
５０ 出力部
５４ 指示受付部
６０ 付与部
６１ 付帯情報生成部
６２ 印刷用データ生成部
６２ 画面画像テーブル保持部
６４ 保持部
６５ 印刷用データ生成部
６６ 雛型保持部
６７ 通信部
１０１ 映像構造インデックス
１０３ 映像構造解釈部
１０５ 映像要約生成部
１０６ 印刷整形部
１０７ 印刷言語生成部
１０９ 映像参照フレーム抽出部
１１０ バーコード付加部
１１１ 登録部
４３０ 区間決定部
４３１ 区間調整部
４３３ 同期部
４３４ 目次項目抽出部
４３５ 対応付部
４３６ 同期調整部
４３７ 目次項目抽出部
５００ 表示部
Claims (11)
- 動画データおよび音声データの少なくとも一方を含むデジタルデータを編集する情報編集方法であって、
表示画面に順次表示されるべき各画面画像と、当該画面画像に対応付けるべき付帯情報を識別する付帯情報識別情報とを対応付ける対応テーブルを生成するテーブル生成ステップと、
前記付帯情報を取得する付帯情報取得ステップと、
前記付帯情報生成ステップにおいて生成され、前記対応テーブルにおいて前記画面画像に対応付けられている前記付帯情報識別情報により識別される前記付帯情報を、当該付帯情報識別情報に対応付ける対応付ステップと、
前記画面画像と前記付帯情報識別情報とを対応付けて記載した印刷物を出力する出力ステップと、
前記印刷物を、前記デジタルデータを生成する前に、利用者に配布する配布ステップと
を有することを特徴とする情報編集方法。 - 前記利用者から、前記印刷物に記載された前記付帯情報識別情報を取得するステップと、
前記付帯情報識別情報で識別される前記付帯情報を、前記利用者に提供する提供ステップと
をさらに有することを特徴とする請求項１に記載の情報編集方法。 - 動画データおよび音声データの少なくとも一方を含むデジタルデータを編集する情報編集装置であって、
表示画面に表示されるべき画面画像を取得する画面画像取得手段と、
前記画面画像に関連するデジタルデータを取得するデジタルデータ取得手段と、
前記画面画像と、画面画像に対応付けるべき付帯情報を識別する付帯情報識別情報とを対応付ける画面画像テーブルと、
前記デジタルデータ取得手段が取得したデジタルデータに基づいて、付帯情報を生成する付帯情報生成手段と、
前記付帯情報生成手段が生成し、前記対応テーブルにおいて前記画面画像に対応付けられている前記付帯情報識別情報により識別される前記付帯情報を、当該付帯情報識別情報に対応付ける対応付手段と
を備えたことを特徴とする情報編集装置。 - 前記画面画像テーブルにおいて対応付けられている前記画面画像と前記付帯情報識別情報とを含む出力用画面画像情報を生成する出力情報生成手段をさらに備えたことを特徴とする請求項３に記載の情報編集装置。
- 前記付帯情報識別情報は、前記付帯情報が格納されている場所を示すＵＲＬであることを特徴とする請求項３または４に記載の情報編集装置。
- 前記出力情報生成手段は、前記付帯情報識別情報に基づいて２次元バーコードを生成し、生成した２次元バーコードと前記画面画像とを含む前記出力画面情報を生成することを特徴とする請求項４または５に記載の情報編集装置。
- 利用者から前記付帯情報識別情報を含む画面画像関連情報要求を受け付ける指示受付手段と、
前記指示受付手段が受け付けた前記画面画像関連情報要求に含まれる前記付帯情報識別情報を抽出し、前記画面画像テーブルにおいて、当該付帯情報識別情報に対応付けられている前記画面画像と、前記付帯情報識別情報により特定される前記付帯情報とを含む画面画像関連情報を生成する画像関連情報生成手段と、
前記画像関連情報生成手段が生成した前記画面画像関連情報を、前記利用者に配信する配信手段と
をさらに備えたことを特徴とする請求項３から６のいずれか一項に記載の情報編集装置。 - 前記画面画像と前記付帯情報とを埋め込む雛型を保持する雛型保持手段をさらに備え、
画像関連情報生成手段は、前記雛型保持手段に保持されている前記雛型に前記画面画像と前記付帯情報とを埋め込むことにより前記画面画像関連情報を生成することを特徴とする請求項７に記載の情報編集装置。 - 前記付帯情報取得手段は、前記表示画面に前記画面画像が表示されている間に記録された付帯情報を取得し、
前記対応付手段は、前記画面画像テーブルにおいて前記画面画像に対応付けられている前記付帯情報識別情報の実体として、前記付帯情報取得手段が取得した前記付帯情報を、前記付帯情報識別情報に対応付けることを特徴とする請求項３から８のいずれか一項に記載の情報編集装置。 - 動画データおよび音声データの少なくとも一方を含むデジタルデータを編集する情報編集方法であって、
表示画面に順次表示されるべき各画面画像と、当該画面画像に対応付けるべき付帯情報を識別する付帯情報識別情報とを対応付ける対応テーブルを生成するテーブル生成ステップと、
前記付帯情報を取得する付帯情報取得ステップと、
前記付帯情報生成ステップにおいて生成され、前記対応テーブルにおいて前記画面画像に対応付けられている前記付帯情報識別情報により識別される前記付帯情報を、当該付帯情報識別情報に対応付ける対応付ステップと
を有することを特徴とする情報編集方法。 - 動画データおよび音声データの少なくとも一方を含むデジタルデータを編集する情報編集処理をコンピュータに実行させる情報編集プログラムであって、
表示画面に表示されるべき画面画像を取得する画面画像取得ステップと、
前記画面画像に関連するデジタルデータを取得するデジタルデータ取得ステップと、
前記画面画像と、画面画像に対応付けるべき付帯情報を識別する付帯情報識別情報とを対応付ける画面画像テーブルを生成する前記画面画像生成ステップと、前記デジタルデータ取得ステップにおいて取得されたデジタルデータに基づいて、付帯情報を生成する付帯情報生成ステップと、
前記付帯情報生成ステップにおいて生成され、前記対応テーブルにおいて前記画面画像に対応付けられている前記付帯情報識別情報により識別される前記付帯情報を、当該付帯情報識別情報に対応付ける対応付ステップと
をコンピュータに実行させることを特徴とする情報編集プログラム。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2003063484A JP4233362B2 (ja) | 2003-03-10 | 2003-03-10 | 情報配信装置、情報配信方法、および情報配信プログラム |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2003063484A JP4233362B2 (ja) | 2003-03-10 | 2003-03-10 | 情報配信装置、情報配信方法、および情報配信プログラム |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2004274456A true JP2004274456A (ja) | 2004-09-30 |
| JP4233362B2 JP4233362B2 (ja) | 2009-03-04 |
Family
ID=33125050
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2003063484A Expired - Fee Related JP4233362B2 (ja) | 2003-03-10 | 2003-03-10 | 情報配信装置、情報配信方法、および情報配信プログラム |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP4233362B2 (ja) |
Cited By (8)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2006295360A (ja) * | 2005-04-07 | 2006-10-26 | Tokyo News Tsushinsha:Kk | 番組表作成装置及び最新番組枠情報配信システム |
| JP2007206697A (ja) * | 2006-02-01 | 2007-08-16 | Ricoh Co Ltd | 画像を表示する方法 |
| JP2008004144A (ja) * | 2006-06-21 | 2008-01-10 | Onkyo Corp | コンテンツ記録装置およびそのプログラム |
| JP2010003108A (ja) * | 2008-06-20 | 2010-01-07 | Konica Minolta Business Technologies Inc | 画像処理装置、画像処理方法、およびコンピュータプログラム |
| JP2010196444A (ja) * | 2009-02-27 | 2010-09-09 | Okumura Corp | セグメント情報管理システムによるセグメント管理方法 |
| JP2011198007A (ja) * | 2010-03-19 | 2011-10-06 | Konica Minolta Business Technologies Inc | プレゼンテーションシステム、管理装置およびプログラム |
| JP2018092627A (ja) * | 2016-12-05 | 2018-06-14 | 株式会社アイヴィジョン | 映像生成プログラム |
| JP2020039085A (ja) * | 2018-09-05 | 2020-03-12 | 富士ゼロックス株式会社 | 情報処理装置およびプログラム |
-
2003
- 2003-03-10 JP JP2003063484A patent/JP4233362B2/ja not_active Expired - Fee Related
Cited By (14)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2006295360A (ja) * | 2005-04-07 | 2006-10-26 | Tokyo News Tsushinsha:Kk | 番組表作成装置及び最新番組枠情報配信システム |
| JP2007206697A (ja) * | 2006-02-01 | 2007-08-16 | Ricoh Co Ltd | 画像を表示する方法 |
| JP4577520B2 (ja) * | 2006-06-21 | 2010-11-10 | オンキヨー株式会社 | コンテンツ記録装置およびそのプログラム |
| JP2008004144A (ja) * | 2006-06-21 | 2008-01-10 | Onkyo Corp | コンテンツ記録装置およびそのプログラム |
| JP2010003108A (ja) * | 2008-06-20 | 2010-01-07 | Konica Minolta Business Technologies Inc | 画像処理装置、画像処理方法、およびコンピュータプログラム |
| JP4569671B2 (ja) * | 2008-06-20 | 2010-10-27 | コニカミノルタビジネステクノロジーズ株式会社 | 画像処理装置、画像処理方法、およびコンピュータプログラム |
| US8102544B2 (en) | 2008-06-20 | 2012-01-24 | Konica Minolta Business Technologies, Inc. | Image processing apparatus, image processing method, and computer-readable storage medium for computer program |
| JP2010196444A (ja) * | 2009-02-27 | 2010-09-09 | Okumura Corp | セグメント情報管理システムによるセグメント管理方法 |
| JP2011198007A (ja) * | 2010-03-19 | 2011-10-06 | Konica Minolta Business Technologies Inc | プレゼンテーションシステム、管理装置およびプログラム |
| JP2018092627A (ja) * | 2016-12-05 | 2018-06-14 | 株式会社アイヴィジョン | 映像生成プログラム |
| JP2021073569A (ja) * | 2016-12-05 | 2021-05-13 | 株式会社アイヴィジョン | 映像生成プログラム |
| JP7018645B2 (ja) | 2016-12-05 | 2022-02-14 | 株式会社アイヴィジョン | 映像生成装置 |
| JP2020039085A (ja) * | 2018-09-05 | 2020-03-12 | 富士ゼロックス株式会社 | 情報処理装置およびプログラム |
| JP7215022B2 (ja) | 2018-09-05 | 2023-01-31 | 富士フイルムビジネスイノベーション株式会社 | 情報処理装置およびプログラム |
Also Published As
| Publication number | Publication date |
|---|---|
| JP4233362B2 (ja) | 2009-03-04 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US20080215984A1 (en) | Storyshare automation | |
| US20080155422A1 (en) | Automated production of multiple output products | |
| JP5180127B2 (ja) | 画像作成装置および画像作成方法 | |
| KR101007508B1 (ko) | 비디오 신호 처리 장치, 비디오 신호 기록 장치, 비디오신호 재생 장치, 비디오 신호 처리 장치의 처리 방법,비디오 신호 기록 장치의 처리 방법, 비디오 신호 재생장치의 처리 방법, 기록 매체 | |
| US20070124325A1 (en) | Systems and methods for organizing media based on associated metadata | |
| KR20020070477A (ko) | 메타데이터를 인증하고 미디어 신호들의 워터마크들 내에메타데이터를 삽입하는 방법 | |
| KR20040077748A (ko) | 화상 배신 장치 | |
| US7873905B2 (en) | Image processing system | |
| JP4233362B2 (ja) | 情報配信装置、情報配信方法、および情報配信プログラム | |
| US7844163B2 (en) | Information editing device, information editing method, and computer product | |
| US7610554B2 (en) | Template-based multimedia capturing | |
| US7353451B2 (en) | Meta data creation apparatus and meta data creation method | |
| JP2004302681A (ja) | 情報編集装置、情報編集方法、および情報編集プログラム | |
| JP4171316B2 (ja) | 情報編集装置、情報編集方法、および情報編集プログラム | |
| JP3831180B2 (ja) | 映像情報印刷装置、映像情報要約方法およびその方法をコンピュータに実行させるプログラムを記録したコンピュータ読み取り可能な記録媒体 | |
| JP4323172B2 (ja) | 情報編集システム、情報編集装置、および情報編集プログラム | |
| JP4295532B2 (ja) | 情報編集装置、情報編集方法、および情報編集プログラム | |
| JP2004287525A (ja) | 情報提供装置、情報提供方法、および情報提供プログラム | |
| JP2004318187A (ja) | 画像生成装置および画像生成システム | |
| JP2004304350A (ja) | 情報編集装置、情報編集システム、情報編集方法、および情報編集プログラム | |
| JP2004279949A (ja) | 情報編集装置、情報編集方法、および情報編集プログラム | |
| JP2004236237A (ja) | 情報編集装置、情報編集システム、情報編集方法、情報編集プログラム | |
| JP2006060741A (ja) | テレビ端末およびサーバ |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20050629 |
|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20080221 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20080430 |
|
| A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20080604 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20081202 |
|
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20081209 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20111219 Year of fee payment: 3 |
|
| R150 | Certificate of patent or registration of utility model |
Ref document number: 4233362 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20111219 Year of fee payment: 3 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20121219 Year of fee payment: 4 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20131219 Year of fee payment: 5 |
|
| LAPS | Cancellation because of no payment of annual fees |