JP2000099520A - マルチメディア編集装置 - Google Patents
マルチメディア編集装置Info
- Publication number
- JP2000099520A JP2000099520A JP26335598A JP26335598A JP2000099520A JP 2000099520 A JP2000099520 A JP 2000099520A JP 26335598 A JP26335598 A JP 26335598A JP 26335598 A JP26335598 A JP 26335598A JP 2000099520 A JP2000099520 A JP 2000099520A
- Authority
- JP
- Japan
- Prior art keywords
- multimedia
- information
- media information
- text data
- editing
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Abstract
(57)【要約】
【課題】本発明は、マルチメディアを用いたプレゼンテ
ーションの編集を短時間に、容易に、且つ適切に行うこ
とのできるマルチメディア編集装置を提供することを目
的とする。 【解決手段】メディア情報を保持する情報蓄積部１３
と、シナリオファイルを保持する保持部１１と、音声の
メディア情報からテキストデータを作成するとともに、
発せられる時間領域を検出する音声認識部１５と、テキ
ストデータと、時間領域とを対応付けて保持する関連情
報保持部１６と、テキストデータを表示するとともに編
集範囲の指示を行う表示・指示部１７と、時間領域に再
生される所定のメディア情報についての時間変化に関す
る属性情報を判定する属性判定部１４と、指示されたテ
キストデータに対応する時間領域について、属性情報に
基づいてシナリオファイルを編集するシナリオ編集部１
８とを有するように構成する。
ーションの編集を短時間に、容易に、且つ適切に行うこ
とのできるマルチメディア編集装置を提供することを目
的とする。 【解決手段】メディア情報を保持する情報蓄積部１３
と、シナリオファイルを保持する保持部１１と、音声の
メディア情報からテキストデータを作成するとともに、
発せられる時間領域を検出する音声認識部１５と、テキ
ストデータと、時間領域とを対応付けて保持する関連情
報保持部１６と、テキストデータを表示するとともに編
集範囲の指示を行う表示・指示部１７と、時間領域に再
生される所定のメディア情報についての時間変化に関す
る属性情報を判定する属性判定部１４と、指示されたテ
キストデータに対応する時間領域について、属性情報に
基づいてシナリオファイルを編集するシナリオ編集部１
８とを有するように構成する。
Description
【０００１】
【発明の属する技術分野】本発明は、マルチメディアを
用いたプレゼンテーションの編集、加工を支援するマル
チメディア編集装置に関する。
用いたプレゼンテーションの編集、加工を支援するマル
チメディア編集装置に関する。
【０００２】
【従来の技術】従来、マルチメディアを用いたプレゼン
テーションを編集、加工する際には、すでに作成したプ
レゼンテーションを時系列に再生して、編集、加工の必
要のある部分を検出し、その部分と同時に並行して再生
されているマルチメディア情報が静止画であるか動画で
あるかなどの属性を考慮しながら編集を行っていた。マ
ルチメディアに関連する発明として、特開平６−１７６
５４２号公報には、台本と音声をテキストに変換したも
のとの対応付けを行い、台本と映像とを関係づけること
により所定の映像部分を検索する方法が記載されてい
る。
テーションを編集、加工する際には、すでに作成したプ
レゼンテーションを時系列に再生して、編集、加工の必
要のある部分を検出し、その部分と同時に並行して再生
されているマルチメディア情報が静止画であるか動画で
あるかなどの属性を考慮しながら編集を行っていた。マ
ルチメディアに関連する発明として、特開平６−１７６
５４２号公報には、台本と音声をテキストに変換したも
のとの対応付けを行い、台本と映像とを関係づけること
により所定の映像部分を検索する方法が記載されてい
る。
【０００３】また、特開平５−６７１８４号公報には、
セグメントで管理されているマルチメディアを削除する
際に、あらかじめユーザがメディア同士の関連付けおよ
び属性（時刻シフト可否、切断可否、圧縮可否）の設定
を行った情報を参照して、削除するマルチメディアに関
連するメディアの属性を調べ、その属性に応じた編集処
理を行う装置が記載されている。さらに、特開平７−１
８２３６５号公報には、音声認識により会議中の会話か
らキーワードを抽出ておき、重要なシーンをキーワード
で検索して会議録を作成する方法が記載されている。
セグメントで管理されているマルチメディアを削除する
際に、あらかじめユーザがメディア同士の関連付けおよ
び属性（時刻シフト可否、切断可否、圧縮可否）の設定
を行った情報を参照して、削除するマルチメディアに関
連するメディアの属性を調べ、その属性に応じた編集処
理を行う装置が記載されている。さらに、特開平７−１
８２３６５号公報には、音声認識により会議中の会話か
らキーワードを抽出ておき、重要なシーンをキーワード
で検索して会議録を作成する方法が記載されている。
【０００４】
【発明が解決しようとする課題】マルチメディアを用い
たプレゼンテーションを編集、加工するために編集個所
を特定する場合には、作成したプレゼンテーションを時
系列に再生して、編集、加工の必要のある部分を検出
し、その部分の開始点と終了点とをマルチメディアデー
タの巻き戻し、早送り等を繰り返しながら特定するため
に、非常に長い時間を要してしまうという問題が生じ
る。また、編集部分を特定した後の編集作業も編集部分
における複数のマルチメディア情報の属性を考慮しなが
ら編集者が編集する必要があるために、編集者に非常に
大きな負担をかけるという問題が生じる。
たプレゼンテーションを編集、加工するために編集個所
を特定する場合には、作成したプレゼンテーションを時
系列に再生して、編集、加工の必要のある部分を検出
し、その部分の開始点と終了点とをマルチメディアデー
タの巻き戻し、早送り等を繰り返しながら特定するため
に、非常に長い時間を要してしまうという問題が生じ
る。また、編集部分を特定した後の編集作業も編集部分
における複数のマルチメディア情報の属性を考慮しなが
ら編集者が編集する必要があるために、編集者に非常に
大きな負担をかけるという問題が生じる。
【０００５】これに対して、特開平６−１７６５４２号
公報に記載された方法によると、所定の映像部分を容易
に検索できる。しかしながら、この公報には、映像を検
索した後の編集処理に関してはまったく記述がなく、編
集者の手間を軽減することができないという問題が生じ
る。また、検索できる映像部分は、台本と対応付けられ
ている部分だけなので、台本に記載されていない発話に
関する部分については検索することができないという問
題が生じる。
公報に記載された方法によると、所定の映像部分を容易
に検索できる。しかしながら、この公報には、映像を検
索した後の編集処理に関してはまったく記述がなく、編
集者の手間を軽減することができないという問題が生じ
る。また、検索できる映像部分は、台本と対応付けられ
ている部分だけなので、台本に記載されていない発話に
関する部分については検索することができないという問
題が生じる。
【０００６】また、特開平５−６７１８４号公報に記載
された装置によると、編集段階において編集者に手間は
かからないが、この装置により編集を行うためには、編
集の前に、ユーザが映像などのメディアを再生しながら
他のメディアと関連付けし、さらにメディアの属性を設
定するということを行わなければならず現実的ではな
い。また、特開平７−１８２３６５号公報に記載された
方法によると、キーワードによってシーンの検索を容易
に行うことができるが、その後の編集には何ら寄与しな
いので、編集者の手間を軽減することができない。ま
た、キーワードとなった部分以外については、検索する
ことができないという問題が生じる。
された装置によると、編集段階において編集者に手間は
かからないが、この装置により編集を行うためには、編
集の前に、ユーザが映像などのメディアを再生しながら
他のメディアと関連付けし、さらにメディアの属性を設
定するということを行わなければならず現実的ではな
い。また、特開平７−１８２３６５号公報に記載された
方法によると、キーワードによってシーンの検索を容易
に行うことができるが、その後の編集には何ら寄与しな
いので、編集者の手間を軽減することができない。ま
た、キーワードとなった部分以外については、検索する
ことができないという問題が生じる。
【０００７】本発明の目的は、プレゼンテーションの編
集を短時間に、容易に、且つ適切に行うことのできるマ
ルチメディア編集装置を提供することにある。
集を短時間に、容易に、且つ適切に行うことのできるマ
ルチメディア編集装置を提供することにある。
【０００８】
【課題を解決するための手段】上記目的は、映像や音声
のメディア情報を複数保持する情報保持手段と、プレゼ
ンテーションで提示するメディア情報、メディア情報の
提示位置、および提示時間を記述したシナリオファイル
を保持するシナリオ保持手段と、シナリオファイルに記
述された所定の音声のメディア情報から文字列を認識し
て、当該文字列のテキストデータを作成する音声認識手
段と、文字列が発せられる時間領域を検出する時間領域
検出手段と、テキストデータと、時間領域とを対応付け
て保持するマルチメディア関連情報保持手段と、テキス
トデータを表示する表示手段と、編集範囲を特定する前
記テキストデータを指示する指示手段と、時間領域にお
いて再生される所定の編集評価対象となるメディア情報
について時間変化に関する属性情報を判定するマルチメ
ディア属性判定手段と、指示されたテキストデータに対
応する時間領域について、当該時間領域に再生される編
集評価対象となるメディア情報についての属性情報に基
づいてシナリオファイルを編集するシナリオ編集手段と
を有することを特徴とするマルチメディア編集装置によ
って達成される。
のメディア情報を複数保持する情報保持手段と、プレゼ
ンテーションで提示するメディア情報、メディア情報の
提示位置、および提示時間を記述したシナリオファイル
を保持するシナリオ保持手段と、シナリオファイルに記
述された所定の音声のメディア情報から文字列を認識し
て、当該文字列のテキストデータを作成する音声認識手
段と、文字列が発せられる時間領域を検出する時間領域
検出手段と、テキストデータと、時間領域とを対応付け
て保持するマルチメディア関連情報保持手段と、テキス
トデータを表示する表示手段と、編集範囲を特定する前
記テキストデータを指示する指示手段と、時間領域にお
いて再生される所定の編集評価対象となるメディア情報
について時間変化に関する属性情報を判定するマルチメ
ディア属性判定手段と、指示されたテキストデータに対
応する時間領域について、当該時間領域に再生される編
集評価対象となるメディア情報についての属性情報に基
づいてシナリオファイルを編集するシナリオ編集手段と
を有することを特徴とするマルチメディア編集装置によ
って達成される。
【０００９】
【発明の実施の形態】本発明の一実施の形態によるマル
チメディア編集装置について説明する前に、マルチメデ
ィアを使用したプレゼンテーションについて簡単に説明
する。図１は、マルチメディアを使用したプレゼンテー
ションの例を示している。このプレゼンテーションにお
いては、ディスプレイ画面１に、プレゼンテーションを
行っている人（プレゼンター）の様子を表わしている動
画像２や、プレゼンテーションにおいて説明される商品
の動画４や、商品に関するグラフの静止画３が表示さ
れ、これ共に、スピーカ５からプレゼンターの説明の音
声６が出力される。このように、マルチメディアを使用
したプレゼンテーションによると、あたかも実際の会議
室などでプレゼンテーションを聞いているかのような効
果が得られる。
チメディア編集装置について説明する前に、マルチメデ
ィアを使用したプレゼンテーションについて簡単に説明
する。図１は、マルチメディアを使用したプレゼンテー
ションの例を示している。このプレゼンテーションにお
いては、ディスプレイ画面１に、プレゼンテーションを
行っている人（プレゼンター）の様子を表わしている動
画像２や、プレゼンテーションにおいて説明される商品
の動画４や、商品に関するグラフの静止画３が表示さ
れ、これ共に、スピーカ５からプレゼンターの説明の音
声６が出力される。このように、マルチメディアを使用
したプレゼンテーションによると、あたかも実際の会議
室などでプレゼンテーションを聞いているかのような効
果が得られる。
【００１０】このようなマルチメディアを使用したプレ
ゼンテーションにおいては、再生される映像２、映像
３、映像４や音声６等はそれぞれマルチメディアデータ
（メディア情報）として記憶され、これらメディア情報
は、再生するメディア情報、メディア情報の再生位置、
再生するタイミング、再生時の効果などが記述されたシ
ナリオファイルに基づいて再生される。シナリオファイ
ルはプレゼンターにより予め作成され、たとえば、ネッ
トワークなどを介した通信手段により各視聴者の情報処
理装置に配布される。
ゼンテーションにおいては、再生される映像２、映像
３、映像４や音声６等はそれぞれマルチメディアデータ
（メディア情報）として記憶され、これらメディア情報
は、再生するメディア情報、メディア情報の再生位置、
再生するタイミング、再生時の効果などが記述されたシ
ナリオファイルに基づいて再生される。シナリオファイ
ルはプレゼンターにより予め作成され、たとえば、ネッ
トワークなどを介した通信手段により各視聴者の情報処
理装置に配布される。
【００１１】本発明に係るマルチメディア編集装置は、
上記のようなシナリオファイルを編集するための装置で
ある。以下、本発明の一実施の形態によるマルチメディ
ア編集装置を図２乃至図６を用いて説明する。まず、本
発明の一実施の形態によるマルチメディア編集装置の概
略の構成を図２を用いて説明する。
上記のようなシナリオファイルを編集するための装置で
ある。以下、本発明の一実施の形態によるマルチメディ
ア編集装置を図２乃至図６を用いて説明する。まず、本
発明の一実施の形態によるマルチメディア編集装置の概
略の構成を図２を用いて説明する。
【００１２】図２において、マルチメディア情報蓄積部
１３は、映像、音声等の複数のメディア情報を蓄積す
る。シナリオ保持部１１は、プレゼンテーションに用い
るメディア情報、そのメディア情報の再生時の位置、再
生のタイミング（時刻、時間等）、再生時の効果等が記
述されたシナリオファイル１１ａを保持する。シナリオ
解析部６は、シナリオファイル１１ａに記述された内容
を解釈して、シナリオファイル１１ａに記述されたメデ
ィア情報をマルチメディア情報蓄積部１３から取り出し
て、記述されたタイミングおよび記述された処理方法等
にしたがって、メディア情報が所定の音声のメディア情
報であれば音声認識部１５に出力し、メディア情報が前
記音声以外の編集評価対象のメディア情報であれば、マ
ルチメディア属性判定部１４に出力する。ここで、所定
の音声のメディア情報とは、後述するように編集範囲を
特定するための基準となるテキストデータを抽出する音
声のメディア情報であり、シナリオファイルに記述され
ている任意の音声のメディア情報であってもよく、ユー
ザにより指定された音声のメディア情報であってもよ
い。
１３は、映像、音声等の複数のメディア情報を蓄積す
る。シナリオ保持部１１は、プレゼンテーションに用い
るメディア情報、そのメディア情報の再生時の位置、再
生のタイミング（時刻、時間等）、再生時の効果等が記
述されたシナリオファイル１１ａを保持する。シナリオ
解析部６は、シナリオファイル１１ａに記述された内容
を解釈して、シナリオファイル１１ａに記述されたメデ
ィア情報をマルチメディア情報蓄積部１３から取り出し
て、記述されたタイミングおよび記述された処理方法等
にしたがって、メディア情報が所定の音声のメディア情
報であれば音声認識部１５に出力し、メディア情報が前
記音声以外の編集評価対象のメディア情報であれば、マ
ルチメディア属性判定部１４に出力する。ここで、所定
の音声のメディア情報とは、後述するように編集範囲を
特定するための基準となるテキストデータを抽出する音
声のメディア情報であり、シナリオファイルに記述され
ている任意の音声のメディア情報であってもよく、ユー
ザにより指定された音声のメディア情報であってもよ
い。
【００１３】音声認識部１５は、マルチメディア情報蓄
積部１３から入力された音声のメディア情報中の音声デ
ータから文字列のテキストデータを作成し、当該テキス
トデータをマルチメディア関連情報保持部１６に出力す
る。また、音声認識部１５は、作成されたテキストデー
タに対応する音声データが再生される時間領域を検出し
て、マルチメディア関連情報保持部１６に出力する。本
実施の形態では、音声認識部１５は、音声データの音節
の区切り毎、すなわち、連続した有音部分毎にテキスト
データを作成しており、各テキストデータを単位として
マルチメディア関連情報保持部１６に出力する。
積部１３から入力された音声のメディア情報中の音声デ
ータから文字列のテキストデータを作成し、当該テキス
トデータをマルチメディア関連情報保持部１６に出力す
る。また、音声認識部１５は、作成されたテキストデー
タに対応する音声データが再生される時間領域を検出し
て、マルチメディア関連情報保持部１６に出力する。本
実施の形態では、音声認識部１５は、音声データの音節
の区切り毎、すなわち、連続した有音部分毎にテキスト
データを作成しており、各テキストデータを単位として
マルチメディア関連情報保持部１６に出力する。
【００１４】マルチメディア属性判定部１４は、マルチ
メディア情報蓄積部１３から入力されたメディア情報に
基づいて、音声認識部１５によって作成されたテキスト
データに対応する音声データと同時に再生されるメディ
ア情報の中の編集評価対象のメディア情報の属性情報を
判定して、マルチメディア関連情報保持部１６に出力す
る。ここで、編集評価対象のメディア情報とは、後述す
るように属性情報に応じて編集を考慮すべきメディア情
報のことをいい、前記音声のメディア情報以外のメディ
ア情報であってもよく、ユーザによって直接的に指定さ
れたメディア情報であってもよく、あるいは、特定のメ
ディア情報以外のメディア情報といったようにユーザに
間接的に指定されたメディア情報であってもよい。
メディア情報蓄積部１３から入力されたメディア情報に
基づいて、音声認識部１５によって作成されたテキスト
データに対応する音声データと同時に再生されるメディ
ア情報の中の編集評価対象のメディア情報の属性情報を
判定して、マルチメディア関連情報保持部１６に出力す
る。ここで、編集評価対象のメディア情報とは、後述す
るように属性情報に応じて編集を考慮すべきメディア情
報のことをいい、前記音声のメディア情報以外のメディ
ア情報であってもよく、ユーザによって直接的に指定さ
れたメディア情報であってもよく、あるいは、特定のメ
ディア情報以外のメディア情報といったようにユーザに
間接的に指定されたメディア情報であってもよい。
【００１５】また、属性情報とは、メディア情報が時間
と共に変化するものであるか否かに関する情報であり、
たとえば、映像のメディア情報であれば、静止画像であ
るか、あるいは動画像であるかといった情報である。属
性情報を判定する方法としては、たとえば、シナリオフ
ァイル１１ａ中にマルチメディア情報の属性情報が記述
されている場合には、当該シナリオファイル１１ａの記
述により判定する方法や、映像のメディア情報の場合に
は、一定時間毎に映像を取り出して、前出の映像との差
分比較を行うことによって静止画であるか動画であるか
を判定する方法等がある。
と共に変化するものであるか否かに関する情報であり、
たとえば、映像のメディア情報であれば、静止画像であ
るか、あるいは動画像であるかといった情報である。属
性情報を判定する方法としては、たとえば、シナリオフ
ァイル１１ａ中にマルチメディア情報の属性情報が記述
されている場合には、当該シナリオファイル１１ａの記
述により判定する方法や、映像のメディア情報の場合に
は、一定時間毎に映像を取り出して、前出の映像との差
分比較を行うことによって静止画であるか動画であるか
を判定する方法等がある。
【００１６】マルチメディア関連情報保持部１６は、音
声認識部１５から入力されたテキストデータと、それに
対応する音声データが再生される時間範囲と、マルチメ
ディア属性判定部１４から入力された当該音声データと
同時に再生される編集評価対象のメディア情報に関する
属性情報と、を対応付けたマルチメディア関連情報を保
持する。表示・指示部１１は、マルチメディア関連情報
保持部１６に保持されたテキストデータをディスプレイ
装置１７ａに表示して、ペン型ポインタ１７ｂあるいは
マウス装置１７ｃ等によりユーザから編集範囲としてテ
キストデータに対する選択指示を受け付け、シナリオ編
集部１８に当該指示されたテキストデータに対応する編
集範囲の編集処理を指示する。シナリオ編集部１２は、
表示・指示部１１によって指示されたテキストデータに
対応するマルチメディア関連情報保持部１６のマルチメ
ディア関連情報に基づいてシナリオファイル１１ａを編
集して新しいシナリオファイル１９を作成する。
声認識部１５から入力されたテキストデータと、それに
対応する音声データが再生される時間範囲と、マルチメ
ディア属性判定部１４から入力された当該音声データと
同時に再生される編集評価対象のメディア情報に関する
属性情報と、を対応付けたマルチメディア関連情報を保
持する。表示・指示部１１は、マルチメディア関連情報
保持部１６に保持されたテキストデータをディスプレイ
装置１７ａに表示して、ペン型ポインタ１７ｂあるいは
マウス装置１７ｃ等によりユーザから編集範囲としてテ
キストデータに対する選択指示を受け付け、シナリオ編
集部１８に当該指示されたテキストデータに対応する編
集範囲の編集処理を指示する。シナリオ編集部１２は、
表示・指示部１１によって指示されたテキストデータに
対応するマルチメディア関連情報保持部１６のマルチメ
ディア関連情報に基づいてシナリオファイル１１ａを編
集して新しいシナリオファイル１９を作成する。
【００１７】ここで、特許請求の範囲にいう情報保持手
段は、マルチメディア情報蓄積部１３によって構成さ
れ、シナリオ保持手段は、シナリオ保持部１１によって
構成され、音声認識手段および時間領域検出手段は、音
声認識部１５によって構成され、マルチメディア関連情
報保持手段は、マルチメディア関連情報保持部１６によ
って構成され、表示手段および指示手段は、表示・指示
部１７によって構成され、マルチメディア属性判定手段
は、マルチメディア属性判定部１４によって構成され、
シナリオ編集手段は、シナリオ編集部１８によって構成
される。
段は、マルチメディア情報蓄積部１３によって構成さ
れ、シナリオ保持手段は、シナリオ保持部１１によって
構成され、音声認識手段および時間領域検出手段は、音
声認識部１５によって構成され、マルチメディア関連情
報保持手段は、マルチメディア関連情報保持部１６によ
って構成され、表示手段および指示手段は、表示・指示
部１７によって構成され、マルチメディア属性判定手段
は、マルチメディア属性判定部１４によって構成され、
シナリオ編集手段は、シナリオ編集部１８によって構成
される。
【００１８】次に、本マルチメディア編集装置によるマ
ルチメディア関連情報を作成する処理動作を図３を用い
て説明する。処理が開始される（ステップＳ１０１）
と、シナリオ解析部１２はシナリオ保持部１１からシナ
リオファイル１１ａを取り出して解析し、複数のメディ
ア情報の再生時の位置、再生タイミング、表示効果など
の情報を取り出す（ステップＳ１０２）。次いで、シナ
リオ解析部１２は取り出した情報に基づいて、所定の音
声のメディア情報を音声認識部１５へ出力し、他のメデ
ィア情報のうち編集評価対象のメディア情報をマルチメ
ディア属性判定部１４へ出力する（ステップＳ１０
３）。
ルチメディア関連情報を作成する処理動作を図３を用い
て説明する。処理が開始される（ステップＳ１０１）
と、シナリオ解析部１２はシナリオ保持部１１からシナ
リオファイル１１ａを取り出して解析し、複数のメディ
ア情報の再生時の位置、再生タイミング、表示効果など
の情報を取り出す（ステップＳ１０２）。次いで、シナ
リオ解析部１２は取り出した情報に基づいて、所定の音
声のメディア情報を音声認識部１５へ出力し、他のメデ
ィア情報のうち編集評価対象のメディア情報をマルチメ
ディア属性判定部１４へ出力する（ステップＳ１０
３）。
【００１９】この後、音声認識部１５は音声のメディア
情報が最後まで入力されたか否かを判定し（ステップＳ
１０４）、最後まで入力されていないときには、現在入
力されているメディア情報の部分の音節の開始点の時刻
情報：ｔ１を獲得し（ステップＳ１０５）、当該部分が
有音部であるか、あるいは無音部であるかを評価する
（ステップＳ１０６）。現在入力されている部分が有音
部であれば、まだ次の音節に達していないと判断して、
入力されている部分が無音部になるまで上記処理ステッ
プＳ１０３〜Ｓ１０６を繰り返し行う。
情報が最後まで入力されたか否かを判定し（ステップＳ
１０４）、最後まで入力されていないときには、現在入
力されているメディア情報の部分の音節の開始点の時刻
情報：ｔ１を獲得し（ステップＳ１０５）、当該部分が
有音部であるか、あるいは無音部であるかを評価する
（ステップＳ１０６）。現在入力されている部分が有音
部であれば、まだ次の音節に達していないと判断して、
入力されている部分が無音部になるまで上記処理ステッ
プＳ１０３〜Ｓ１０６を繰り返し行う。
【００２０】一方、現在入力されている部分が無音部で
あれば、音節に達したと判断して、音声認識部１５は当
該部分の終了点の時刻情報：ｔ２を獲得し（ステップＳ
１０７）、当該音節によって区切られた有音部分の音声
データに関して文字列を認識して、当該文字列のテキス
トデータを作成し、当該テキストデータと時刻情報ｔ１
およびｔ２（時間領域）をマルチメディア関連情報保持
部１６へ出力する（ステップＳ１０８）。次いで、マル
チメディア属性判定部１４は、時刻ｔ１およびｔ２の間
に再生される編集評価対象のメディア情報の属性の判定
を行い、判定した結果の属性情報をマルチメディア関連
情報保持部１６へ出力する（ステップＳ１０９）。例え
ば、編集評価対象のメディア情報のすべてが時間変化し
ないメディア情報（たとえば、静止画）であると判定し
た場合には、属性情報”０”を出力し、編集評価対象の
メディア情報の少なくとも一つが時間変化するメディア
情報（たとえば動画像）であると判定した場合には、属
性情報”１”を出力する。
あれば、音節に達したと判断して、音声認識部１５は当
該部分の終了点の時刻情報：ｔ２を獲得し（ステップＳ
１０７）、当該音節によって区切られた有音部分の音声
データに関して文字列を認識して、当該文字列のテキス
トデータを作成し、当該テキストデータと時刻情報ｔ１
およびｔ２（時間領域）をマルチメディア関連情報保持
部１６へ出力する（ステップＳ１０８）。次いで、マル
チメディア属性判定部１４は、時刻ｔ１およびｔ２の間
に再生される編集評価対象のメディア情報の属性の判定
を行い、判定した結果の属性情報をマルチメディア関連
情報保持部１６へ出力する（ステップＳ１０９）。例え
ば、編集評価対象のメディア情報のすべてが時間変化し
ないメディア情報（たとえば、静止画）であると判定し
た場合には、属性情報”０”を出力し、編集評価対象の
メディア情報の少なくとも一つが時間変化するメディア
情報（たとえば動画像）であると判定した場合には、属
性情報”１”を出力する。
【００２１】次いで、マルチメディア関連情報保持部１
６は、音声認識部１５から入力されたテキストデータ
と、時刻情報ｔ１およびｔ２と、マルチメディア属性判
定部１４から入力されたメディア情報の属性情報とを対
応付けてマルチメディア関連情報として保持する（ステ
ップＳ１１０）。そして、上記した処理（ステップＳ１
０３〜Ｓ１１０）を繰り返し行い、ステップＳ１０４に
おいて音声のメディア情報が最後まで入力されていると
判断された場合に処理を終了する（ステップＳ１１
１）。
６は、音声認識部１５から入力されたテキストデータ
と、時刻情報ｔ１およびｔ２と、マルチメディア属性判
定部１４から入力されたメディア情報の属性情報とを対
応付けてマルチメディア関連情報として保持する（ステ
ップＳ１１０）。そして、上記した処理（ステップＳ１
０３〜Ｓ１１０）を繰り返し行い、ステップＳ１０４に
おいて音声のメディア情報が最後まで入力されていると
判断された場合に処理を終了する（ステップＳ１１
１）。
【００２２】図４は、上記のマルチメディア関連情報を
作成する処理動作を具体的に説明する図である。同図
は、２つの属性評価対象（編集評価対象）となる映像デ
ータａおよび映像データｂと、属性評価対象（編集評価
対象）とならないプレゼンターの映像が入っている映像
データｃおよび編集の基準とするプレゼンターの音声デ
ータとから構成されているプレゼンテーションについて
処理を行った例を示している。
作成する処理動作を具体的に説明する図である。同図
は、２つの属性評価対象（編集評価対象）となる映像デ
ータａおよび映像データｂと、属性評価対象（編集評価
対象）とならないプレゼンターの映像が入っている映像
データｃおよび編集の基準とするプレゼンターの音声デ
ータとから構成されているプレゼンテーションについて
処理を行った例を示している。
【００２３】上記の動作によると、領域１、領域２、領
域３・・のように、音声データの有音部Ｐに対応するプ
レゼンテーションの時間領域が検出され、この領域にお
ける音声のテキストデータが作成される。また、これら
の時間領域のうち編集評価対象となる映像データａおよ
び映像データｂが静止画の領域２および領域４は、削除
することが可能な領域であることを表わす属性値”０”
と判定され、その他の領域１、３、５は削除することが
できない領域を表わす属性値”１”と判定される。そし
て、これらの結果は図５に示すように、テキストデータ
と、テキストデータに対応する時間領域を示す開始時間
および終了時間と、その時間領域における編集評価対象
のメディア情報の属性情報とが対応付けられてマルチメ
ディア関連情報保持部１６に保持される。
域３・・のように、音声データの有音部Ｐに対応するプ
レゼンテーションの時間領域が検出され、この領域にお
ける音声のテキストデータが作成される。また、これら
の時間領域のうち編集評価対象となる映像データａおよ
び映像データｂが静止画の領域２および領域４は、削除
することが可能な領域であることを表わす属性値”０”
と判定され、その他の領域１、３、５は削除することが
できない領域を表わす属性値”１”と判定される。そし
て、これらの結果は図５に示すように、テキストデータ
と、テキストデータに対応する時間領域を示す開始時間
および終了時間と、その時間領域における編集評価対象
のメディア情報の属性情報とが対応付けられてマルチメ
ディア関連情報保持部１６に保持される。
【００２４】次に、本マルチメディア編集装置によるマ
ルチメディアプレゼンテーションのシナリオファイルを
編集する処理動作を図６を用いて説明する。処理が開始
される（ステップＳ２０１）と、表示・指示部１７は、
マルチメディア関連情報保持部１６からテキストデータ
を取り出してディスプレイ１７ａに表示し（ステップＳ
２０２、Ｓ２０３）、ペン型ポインタ１７ｂ、マウス１
７ｃ等によるユーザから編集処理を終了する指示イベン
トや、編集する範囲の基準となるテキストデータの選択
指示イベント（ステップＳ２０５）を受け付ける（ステ
ップＳ２０４）。編集を行わない指示イベントが選択さ
れた場合には、処理を終了する（ステップＳ２０６）。
一方、テキストデータの選択指示イベントが選択された
場合には、シナリオ編集部１８がマルチメディア関連情
報保持部１６に保持されたマルチメディア関連情報を参
照し、選択されたテキストデータに対応付けられた属性
情報をチェックする（ステップＳ２０７）。
ルチメディアプレゼンテーションのシナリオファイルを
編集する処理動作を図６を用いて説明する。処理が開始
される（ステップＳ２０１）と、表示・指示部１７は、
マルチメディア関連情報保持部１６からテキストデータ
を取り出してディスプレイ１７ａに表示し（ステップＳ
２０２、Ｓ２０３）、ペン型ポインタ１７ｂ、マウス１
７ｃ等によるユーザから編集処理を終了する指示イベン
トや、編集する範囲の基準となるテキストデータの選択
指示イベント（ステップＳ２０５）を受け付ける（ステ
ップＳ２０４）。編集を行わない指示イベントが選択さ
れた場合には、処理を終了する（ステップＳ２０６）。
一方、テキストデータの選択指示イベントが選択された
場合には、シナリオ編集部１８がマルチメディア関連情
報保持部１６に保持されたマルチメディア関連情報を参
照し、選択されたテキストデータに対応付けられた属性
情報をチェックする（ステップＳ２０７）。
【００２５】属性情報が時間変化しないメディア情報
（たとえば、静止画）を表している（本実施の形態で
は”０”）場合には、これらメディア情報は全て時間変
化しないメディア情報であり、これらメディア情報を再
生しなくてもプレゼンテーションの自然さは保たれるの
で、シナリオ編集部１８は、対応する時間領域における
すべてメディア情報を再生しないようにシナリオファイ
ルを編集する（ステップＳ２０８）。一方、属性情報が
時間変化するメディア情報（たとえば、動画）を表して
いる（本実施の形態では”１”）場合には、メディア情
報を再生しないと前後のつながりが悪くなりプレゼンテ
ーションが不自然になるので、シナリオ編集部１８は、
テキストデータに対応する音声データのみについて再生
しないようにシナリオファイルを編集する（ステップＳ
２０９）。そして、上記の処理ステップＳ２０２〜Ｓ２
０９をユーザにより終了のイベントが選択されるまで実
行する。
（たとえば、静止画）を表している（本実施の形態で
は”０”）場合には、これらメディア情報は全て時間変
化しないメディア情報であり、これらメディア情報を再
生しなくてもプレゼンテーションの自然さは保たれるの
で、シナリオ編集部１８は、対応する時間領域における
すべてメディア情報を再生しないようにシナリオファイ
ルを編集する（ステップＳ２０８）。一方、属性情報が
時間変化するメディア情報（たとえば、動画）を表して
いる（本実施の形態では”１”）場合には、メディア情
報を再生しないと前後のつながりが悪くなりプレゼンテ
ーションが不自然になるので、シナリオ編集部１８は、
テキストデータに対応する音声データのみについて再生
しないようにシナリオファイルを編集する（ステップＳ
２０９）。そして、上記の処理ステップＳ２０２〜Ｓ２
０９をユーザにより終了のイベントが選択されるまで実
行する。
【００２６】このように、ユーザはマルチメディアプレ
ゼンテーションを再生することなく、編集したい個所を
容易且つ短時間に特定でき、編集したい個所におけるメ
ディア情報を考慮しなくてもプレゼンテーションに支障
を与えることがないようにシナリオファイルを編集する
ことができる。
ゼンテーションを再生することなく、編集したい個所を
容易且つ短時間に特定でき、編集したい個所におけるメ
ディア情報を考慮しなくてもプレゼンテーションに支障
を与えることがないようにシナリオファイルを編集する
ことができる。
【００２７】本発明は、上記実施の形態に限らず種々の
変形が可能である。例えば、上記実施の形態では、ユー
ザにより編集範囲の基準となるテキストデータが指定さ
れる前に、予めテキストデータに対応する時間領域の編
集評価対象のメディア情報の属性情報を判定するように
して、ユーザによりテキストデータが選択された場合に
短時間でシナリオファイルを編集できるようにしていた
が、本発明はこれらに限られず、ユーザによりテキスト
データが指定された後に、対応する時間領域のメディア
情報の属性情報を判定して、シナリオファイルを編集す
るようにしてもよい。
変形が可能である。例えば、上記実施の形態では、ユー
ザにより編集範囲の基準となるテキストデータが指定さ
れる前に、予めテキストデータに対応する時間領域の編
集評価対象のメディア情報の属性情報を判定するように
して、ユーザによりテキストデータが選択された場合に
短時間でシナリオファイルを編集できるようにしていた
が、本発明はこれらに限られず、ユーザによりテキスト
データが指定された後に、対応する時間領域のメディア
情報の属性情報を判定して、シナリオファイルを編集す
るようにしてもよい。
【００２８】また、上記実施の形態では、編集評価対象
の複数のメディア情報をまとめた属性情報を検出し、当
該属性情報に基づいて複数のメディアに関してシナリオ
ファイルを編集するようにしていたが、本発明はこれに
限られず、編集評価対象の各メディア情報ごとに属性情
報を検出し、各属性情報に基づいて各メディア情報に関
してシナリオファイルを編集するようにしてもよい。
の複数のメディア情報をまとめた属性情報を検出し、当
該属性情報に基づいて複数のメディアに関してシナリオ
ファイルを編集するようにしていたが、本発明はこれに
限られず、編集評価対象の各メディア情報ごとに属性情
報を検出し、各属性情報に基づいて各メディア情報に関
してシナリオファイルを編集するようにしてもよい。
【００２９】
【発明の効果】以上の通り、本発明によれば、プレゼン
テーションのシナリオファイルの編集を短時間に、容易
に、且つ適切に行うことができる。
テーションのシナリオファイルの編集を短時間に、容易
に、且つ適切に行うことができる。
【００３０】
【図１】マルチメディアを使用したプレゼンテーション
を説明する図である。
を説明する図である。
【図２】本発明の一実施の形態によるマルチメディア編
集装置の構成を示す図である。
集装置の構成を示す図である。
【図３】本発明の一実施の形態によるマルチメディア編
集装置のマルチメディア関連情報を作成する処理動作の
フローチャートである。
集装置のマルチメディア関連情報を作成する処理動作の
フローチャートである。
【図４】本発明の一実施の形態によるマルチメディア編
集装置のマルチメディア関連情報を作成する過程を説明
する図である。
集装置のマルチメディア関連情報を作成する過程を説明
する図である。
【図５】本発明の一実施の形態によるマルチメディア編
集装置のマルチメディア関連情報の一例を示す図であ
る。
集装置のマルチメディア関連情報の一例を示す図であ
る。
【図６】本発明の一実施の形態によるマルチメディア編
集装置のマルチメディアプレゼンテーションのシナリオ
ファイルを編集する処理動作のフローチャートである。
集装置のマルチメディアプレゼンテーションのシナリオ
ファイルを編集する処理動作のフローチャートである。
１１ シナリオ保持部 １２ シナリオ解析部 １３ マルチメディア情報蓄積部 １４ マルチメディア属性判定部 １５ 音声認識部 １６ マルチメディア関連情報保持部 １７ 表示・入力部 １８ シナリオ編集部
───────────────────────────────────────────────────── フロントページの続き (51)Int.Cl.7 識別記号 ＦＩ テーマコート゛(参考） Ｇ０６Ｔ 11/80 Ｇ０６Ｆ 15/62 ３２０Ａ
Claims (7)
- 【請求項１】映像や音声のメディア情報を複数保持する
情報保持手段と、 プレゼンテーションで提示するメディア情報、メディア
情報の提示位置、および提示時間を記述したシナリオフ
ァイルを保持するシナリオ保持手段と、 前記シナリオファイルに記述された所定の音声のメディ
ア情報から文字列を認識して、当該文字列のテキストデ
ータを作成する音声認識手段と、 前記文字列が発せられる時間領域を検出する時間領域検
出手段と、 前記テキストデータと、前記時間領域とを対応付けて保
持するマルチメディア関連情報保持手段と、 前記テキストデータを表示する表示手段と、 編集範囲を特定する前記テキストデータを指示する指示
手段と、 前記時間領域において再生される所定の編集評価対象と
なるメディア情報について時間変化に関する属性情報を
判定するマルチメディア属性判定手段と、 前記指示されたテキストデータに対応する前記時間領域
について、当該時間領域に再生される前記編集評価対象
となるメディア情報についての前記属性情報に基づいて
シナリオファイルを編集するシナリオ編集手段とを有す
ることを特徴とするマルチメディア編集装置。 - 【請求項２】請求項１記載のマルチメディア編集装置に
おいて、 前記マルチメディア関連情報保持手段は、前記時間領域
に対して、当該時間領域において再生される前記編集評
価対象となるメディア情報についての前記属性情報を対
応付けて保持することを特徴とするマルチメディア編集
装置。 - 【請求項３】請求項１または２に記載のマルチメディア
編集装置において、 前記マルチメディア属性判定手段は、映像のメディア情
報について、一定時間毎の映像の変化を検知することに
より、動画であるか静止画であるかの属性情報を判定す
ることを特徴とするマルチメディア編集装置。 - 【請求項４】請求項１または２に記載のマルチメディア
編集装置において、 前記シナリオファイルには、前記メディア情報に関する
前記属性情報が含まれており、 前記マルチメディア属性判定手段は、前記シナリオファ
イルに基づいて前記メディア情報の属性情報を判定する
ことを特徴とするマルチメディア編集装置。 - 【請求項５】請求項１乃至４のいずれかに記載のマルチ
メディア編集装置において、 前記音声認識手段は、音声のメディア情報中の連続した
有音部分を単位としてテキストデータに変換し、 前記マルチメディア関連情報保持手段は、前記テキスト
データを単位として前記時間領域と対応付けることを特
徴とするマルチメディア編集装置。 - 【請求項６】請求項１乃至５のいずれかに記載のマルチ
メディア編集装置において、 前記シナリオ編集手段は、前記編集評価対象となるメデ
ィア情報のすべてが時間変化しない属性情報を有してい
れば、すべてのメディア情報の前記時間領域の部分を再
生しないようにシナリオファイルを編集することを特徴
とするマルチメディア編集装置。 - 【請求項７】請求項１乃至５のいずれかに記載のマルチ
メディア編集装置において、 前記シナリオ編集手段は、前記編集評価対象となるメデ
ィア情報の少なくとも一つが時間変化するという属性情
報を有していれば、前記テキストデータに対応する音声
部分のみについて再生しないようにシナリオファイルを
編集することを特徴とするマルチメディア編集装置。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP26335598A JP3704968B2 (ja) | 1998-09-17 | 1998-09-17 | マルチメディア編集装置 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP26335598A JP3704968B2 (ja) | 1998-09-17 | 1998-09-17 | マルチメディア編集装置 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2000099520A true JP2000099520A (ja) | 2000-04-07 |
| JP3704968B2 JP3704968B2 (ja) | 2005-10-12 |
Family
ID=17388340
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP26335598A Expired - Fee Related JP3704968B2 (ja) | 1998-09-17 | 1998-09-17 | マルチメディア編集装置 |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP3704968B2 (ja) |
Citations (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPH0553544A (ja) * | 1991-08-23 | 1993-03-05 | Nec Corp | シナリオ提示方法および編集方法 |
| JPH0567184A (ja) * | 1991-09-09 | 1993-03-19 | Nippon Telegr & Teleph Corp <Ntt> | マルチメデイアシナリオ加工方法 |
| JPH06203009A (ja) * | 1992-09-25 | 1994-07-22 | Nec Corp | 複合マルチメディアオブジェクト構成方法 |
| JPH08115338A (ja) * | 1994-10-14 | 1996-05-07 | Fuji Xerox Co Ltd | マルチメディア文書編集装置 |
| WO1997009683A1 (fr) * | 1995-09-01 | 1997-03-13 | Hitachi, Ltd. | Systeme de mediatisation d'informations multimedia contenant des informations audio |
-
1998
- 1998-09-17 JP JP26335598A patent/JP3704968B2/ja not_active Expired - Fee Related
Patent Citations (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPH0553544A (ja) * | 1991-08-23 | 1993-03-05 | Nec Corp | シナリオ提示方法および編集方法 |
| JPH0567184A (ja) * | 1991-09-09 | 1993-03-19 | Nippon Telegr & Teleph Corp <Ntt> | マルチメデイアシナリオ加工方法 |
| JPH06203009A (ja) * | 1992-09-25 | 1994-07-22 | Nec Corp | 複合マルチメディアオブジェクト構成方法 |
| JPH08115338A (ja) * | 1994-10-14 | 1996-05-07 | Fuji Xerox Co Ltd | マルチメディア文書編集装置 |
| WO1997009683A1 (fr) * | 1995-09-01 | 1997-03-13 | Hitachi, Ltd. | Systeme de mediatisation d'informations multimedia contenant des informations audio |
Also Published As
| Publication number | Publication date |
|---|---|
| JP3704968B2 (ja) | 2005-10-12 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP4250301B2 (ja) | 映像シーケンスを編集する方法及びシステム | |
| CN1152335C (zh) | 用于创建多媒体文件的创作设备和创作方法 | |
| US6697564B1 (en) | Method and system for video browsing and editing by employing audio | |
| US6799180B1 (en) | Method of processing signals and apparatus for signal processing | |
| JPH1074138A (ja) | 音声をセグメント化するための方法と装置 | |
| KR20070020252A (ko) | 메시지를 수정하기 위한 방법 및 시스템 | |
| CN106155470B (zh) | 一种音频文件生成方法及装置 | |
| EP0877378A2 (en) | Method of and apparatus for editing audio or audio-visual recordings | |
| JP2007295218A (ja) | ノンリニア編集装置およびそのプログラム | |
| US8655874B2 (en) | Method and apparatus for acquiring and displaying image data corresponding to content data | |
| KR101727587B1 (ko) | 디지털 녹취 파일 녹취록 생성 방법 | |
| JP3896760B2 (ja) | 対話記録編集装置、方法及び記憶媒体 | |
| JP2004153764A (ja) | メタデータ制作装置及び検索装置 | |
| JPH11266422A (ja) | 放送番組管理装置、放送番組管理方法、及び放送番組管理処理プログラムを記録した記録媒体 | |
| JP6641045B1 (ja) | コンテンツ生成システム、及びコンテンツ生成方法 | |
| JP2002344805A (ja) | オープンキャプションに対する字幕表示制御方法 | |
| JP2002008052A (ja) | プレゼンテーションシステムおよび記録媒体 | |
| JP3704968B2 (ja) | マルチメディア編集装置 | |
| JP2005167822A (ja) | 情報再生装置及び情報再生方法 | |
| JPH08249343A (ja) | 音声情報取得装置及び音声情報取得方法 | |
| JP4235635B2 (ja) | データ検索装置及びその制御方法 | |
| JP4272611B2 (ja) | 映像処理方法、映像処理装置、映像処理用プログラム及びそのプログラムを記録したコンピュータ読み取り可能な記録媒体 | |
| JP4353084B2 (ja) | 映像再生方法及び装置及びプログラム | |
| JP3848144B2 (ja) | 映像短縮再生装置、映像短縮再生方法、この方法のプログラムおよびこのプログラムを記録した記録媒体 | |
| JP2005352330A (ja) | 音声分割記録装置 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20050705 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20050718 |
|
| R150 | Certificate of patent or registration of utility model |
Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20090805 Year of fee payment: 4 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20100805 Year of fee payment: 5 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20110805 Year of fee payment: 6 |
|
| LAPS | Cancellation because of no payment of annual fees |