JP2012034235A - 映像再生装置及び映像再生方法 - Google Patents

Abstract

【課題】再生対象のコンテンツデータの内容把握を容易にすることのできる映像再生装置及び映像再生方法を提供する。
【解決手段】映像再生装置は、分離手段と、キーワード抽出手段と、再生手段と、表示制御手段と、再生位置変更手段とを備える。分離手段は、コンテンツデータから映像情報と字幕情報とを分離する。キーワード抽出手段は、字幕情報からキーワードを抽出し、該キーワードを含む字幕の表示時刻と共に順次記憶媒体に記録する。再生手段は、映像情報から映像を復号し、表示画面に表示させる。表示制御手段は、記憶媒体に記録した１以上の前記キーワードを、表示時刻順に並べて表示画面上に表示する。表示位置変更手段は、表示画面上に表示された１以上のキーワードのうち、選択されたキーワードの表示時刻に、再生手段による再生位置を変更する。
【選択図】 図１

Description

本発明の実施の形態は、映像再生装置及び映像再生方法に関する。

放送番組データには、ニュース、ドラマ、映画、スポーツ中継、教育、バラエティーといった様々なジャンルがあり、ユーザは様々な情報を視聴中の放送番組データから得ることができる。

ここで、記録した放送番組データからキーワードを抽出して、該抽出したキーワードに対応する位置を再生位置とすることが考えられている。

特開２００９―１１８１５８号公報

しかしながら、キーワードに応じて再生位置を決定するのみならず、キーワードを表示することにより、大まかな内容を把握したいというニーズもある。
そこで本発明の実施形態は、再生対象のコンテンツデータの内容把握を容易にすることのできる映像再生装置及び映像再生方法を提供することを目的とする。

実施形態によれば、映像再生装置は、分離手段と、キーワード抽出手段と、再生手段と、表示制御手段と、再生位置変更手段とを備える。分離手段は、コンテンツデータから映像情報と字幕情報とを分離する。キーワード抽出手段は、字幕情報からキーワードを抽出し、該キーワードを含む字幕の表示時刻と共に順次記憶媒体に記録する。再生手段は、映像情報から映像を復号し、表示画面に表示させる。表示制御手段は、記憶媒体に記録した１以上の前記キーワードを、表示時刻順に並べて表示画面上に表示する。表示位置変更手段は、表示画面上に表示された１以上のキーワードのうち、選択されたキーワードの表示時刻に、再生手段による再生位置を変更する。

また、実施形態によれば、映像再生方法は、コンテンツデータから前記映像情報と前記字幕情報とを分離し、前記字幕情報からキーワードを抽出して、該キーワードを含む字幕の表示時刻と共に順次記憶媒体に記録し、前記映像情報から映像を復号して表示画面に表示し、前記記憶媒体に記録した１以上の前記キーワードを、前記表示時刻順に並べて前記表示画面上に表示し、前記表示画面上に表示された１以上の前記キーワードのうち、選択されたキーワードの表示時刻に再生位置を変更する。

実施形態の映像再生装置の構成の一例を示す図。 実施形態の映像再生装置が記憶するキーワード時刻対応表の一例を示す図。 実施形態の映像再生装置が生成する表示画面の一例を示す図。 実施形態の映像再生装置が記憶するクラス辞書の一例を示す図。 実施形態の映像再生装置が記憶するジャンル対応表の一例を示す図。 実施形態の映像再生装置のキーワード抽出処理の流れの一例を示す図。 実施形態の映像再生装置の再生処理の流れの一例を示す図。

以下、実施の形態について、図面を参照しながら説明する。
まず、本実施の形態における映像再生装置の構成を、図１を参照しながら説明する。図１は、本実施の形態における映像再生装置１の構成を示す機能ブロック図である。

映像再生装置１は、チューナ／復調部３と、ＴＳ（Ｔｒａｎｓｐｏｒｔ Ｓｔｒｅａｍ）分離部４と、録画制御部５と、記憶媒体６と、映像バッファ７と、字幕バッファ８と、データ放送用バッファ９と、音声バッファ１０と、ＳＩ（Ｓｅｒｖｉｃｅ Ｉｎｆｏｒｍａｔｉｏｎ：番組配列情報）処理部１１と、ＰＳＩ（Ｐｒｏｇｒａｍ Ｓｐｅｃｉｆｉｃ Ｉｎｆｏｒｍａｔｉｏｎ：番組特定情報）処理部１２と、映像復号部１３と、字幕復号部１４と、データ放送処理部１５と、音声復号部１６と、表示メモリ１７と、映像出力部１８と、音声出力部１９と、制御部２０と、ＳＴＣ（Ｓｙｓｔｅｍ Ｔｉｍｅ Ｃｌｏｃｋ）カウンタ２１と、受信部２２、キーワード抽出部２３と、キーワードUI生成部２４と、メモリ部２５と、辞書部２９とを有する。

チューナ／復調部３は、アンテナ２で受信した地上波デジタル放送、ＢＳで自他売る放送及びＣＳデジタル放送等の中から任意のチャネルを選局し、この選局された放送信号を復調し、所望の番組を含むＴＳ形式のデジタル信号を得てＴＳ分離部４に出力する。

ＴＳ分離部４は、デジタル放送の表示（再生）を行う場合には、チューナ／復調部３から入力を受けた複数のＴＳを、映像信号、字幕信号、データ放送信号、音声信号に分離して各バッファへ出力する。

また、ＴＳ分離部４は、デジタル放送の録画を行う場合には、再多重化されたＴＳを録画制御部５へ出力し、録画制御部５は受信したＴＳを１つのコンテンツデータとして、記憶媒体６へ格納する。

さらにＴＳ分離部４は、録画したコンテンツデータを再生する際には、録画制御部５を介して記憶媒体６からコンテンツデータを読み込み、当該コンテンツデータとして入力を受けたＴＳを、映像信号、字幕信号、音声信号等に分離して各バッファへ出力する。

映像バッファ７、字幕バッファ８、データ放送用バッファ９、音声バッファ１０は、それぞれＴＳ分離部４で分離された映像信号、字幕信号、データ放送信号、音声信号を一時的に格納する。

ＳＩ処理部１１及びＰＳＩ処理部１２は、ＴＳ分離部４で分離されたＳＩ情報及びＰＳＩ情報のそれぞれに適切なデジタル信号処理を施す。このデジタル信号処理が施されたＳＩ情報及びＰＳＩ情報は、制御部２０へ伝達され、制御部２０で電子番組表等を構成して、映像出力部１８から出力可能となる。

映像復号部１３は、ＤＴＳ（Ｄｅｃｏｄｉｎｇ Ｔｉｍｅ Ｓｔａｍｐ）に従って、映像バッファ７からの映像信号を読み出し、当該映像信号から映像へ復号する。
字幕復号部１４は、ＤＴＳに従って字幕バッファ８から字幕信号を読出して字幕画像（以下、単に字幕とも称する）を生成する。
データ放送処理部１５は、データ放送用バッファ９からＢＭＬ（Ｂｒｏａｄｃａｓｔ Ｍａｒｋｕｐ Ｌａｎｇｕａｇｅ）等のデータ放送信号を読み出して適宜データ放送画面（画像）を生成する。

音声復号部１６は、ＰＴＳ（Ｐｒｅｓｅｎｔａｔｉｏｎ Ｔｉｍｅ Ｓｔａｍｐ）に従って、音声バッファ１０から音声信号を読出し、音声信号から音声出力信号を復号する。尚、音声の復号は復号時刻と出力時刻は同じであり、ＤＴＳは音声信号には含まれない。

表示メモリ１７は、映像復号部１３及び字幕復号部１４で復号された映像及び字幕（字幕画像）や、データ放送処理部１５で生成されたデータ放送画面、後述するキーワードＵＩ（Ｕｓｅｒ Ｉｎｔｅｒｆａｃｅ）生成部２４から出力されたＵＩ画像を一時的に格納（記憶）する。

映像出力部１８は、表示メモリ１７に記憶された映像、字幕、データ放送画面、ＵＩ画像を合成して１つの表示画面とし、接続されているディスプレイに応じた映像出力信号として出力端子もしくは内蔵する表示装置へ出力する。

音声出力部１９は、ＰＴＳに応じて、音声復号部１６から出力された音声出力信号を、出力端子もしくは内蔵するスピーカへと出力する。
制御部２０は、受信部２２で受信した、リモコンや操作ボタン等からの操作コマンドに応じて、映像再生装置１各部の動作を制御する。また、制御部２０は、システムの時刻を掲示するカウンタとしてＳＴＣカウンタ２１を備える。音声出力部１９や音声出力部１９は、当該ＳＴＣカウンタ２１に従って映像出力信号や音声出力信号の出力を行う。

受信部２２は、映像再生装置１に対応するリモコン３８（リモートコントローラ）や操作ボタン等からの操作入力に応じた操作コマンドを制御部２０へと出力する。
キーワード抽出部２３は、字幕バッファ８に記憶された字幕信号からキーワードを抽出する。より具体的には、字幕情報には、テキスト形式の字幕文字列と、表示するタイミングを示すＰＴＳ（表示用のタイムスタンプ）とが含まれる。キーワード抽出部２３は、字幕文字列に対して形態素解析を実行し、単語に分解する。そして、当該単語の中から、辞書部２９に記憶されたユーザが指定したユーザ辞書２６やクラス辞書２７、ジャンル対応表２８に基づいて抽出すべきキーワードであるか否かを判別し、抽出すべきキーワードである場合には、当該キーワードをキーワードＵＩ生成部２４へと出力する。また、当該抽出すべきキーワードは、時刻情報（タイムスタンプ、及び後述する再生時刻に対応）と共に制御部２０へと出力され、メモリ部２５上にキーワード時刻対応表３０として記憶される。

キーワード時刻対応表３０の例を図２に示す。図２は、メモリ部２５上に記憶されるキーワード時刻対応表３０の例を示す図である。
図２に示すように、キーワード時刻対応表３０では抽出されたキーワードと、その再生時刻とが対応づけられている。例えば、図２の例では、「青梅」というキーワードには再生時刻「００：１０：２３」が、「居酒屋」というキーワードには再生時刻「００：１１：４５」が対応づけられている。後述するキーワードＵＩ生成部２４が生成した表示画面（図３参照）上で「青梅」というキーワードがユーザにより選択されると、制御部２０は、再生位置（録画制御部５が読出し、ＴＳ分離部４以降で再生（復号）される位置（時刻）。再生時刻とも称する）を、「００：１０：２３」に変更すべく制御をおこなう。尚、この「００：１０：２３」は、コンテンツデータの再生から１０分２３秒経過した位置であることを示す。

キーワードＵＩ生成部２４は、キーワード抽出部２３の指示に従い、メモリ部２５に記憶されたキーワード時刻対応表３０に格納された当該キーワードに基づき、時系列順にキーワードを複数並べたＵＩ画面を生成し、映像出力部１８を介して表示メモリ１７上に描画される。

図３は、キーワードＵＩ生成部２４が生成する表示画面の例を示す図である。表示画面３１は、大きく分けて、映像表示領域３２と、キーワード表示領域３３とに分けることができる。映像表示領域３２には、再生中の映像（映像復号部１３が復号した映像及び字幕復号部１４が復号した字幕画像を重畳した映像）が表示される。

キーワード表示領域３３は、映像表示領域３２上に重畳される画像であって、キーワードＵＩ生成部２４が生成するＵＩ画像が表示される。
キーワード表示領域３３上には、キーワードボタン３４Ａ乃至３４Nが選択可能に配置される。キーワードボタン３４Ａ乃至３４Nは、リモコン３８等により入力される操作コマンドに応じて操作可能なカーソル３５を移動させることにより選択することが可能である。

また、キーワード抽出部２３により抽出されたキーワードをキーワード表示領域３３上に表示しきれない場合には、続きがあることを示すアイコン３６をキーワードボタン３４列の右端又は／及び左端に表示（配置）する。このアイコン３６上にカーソル３５を移動させると、キーワードボタン３４列が右側又は左側に移動して表示されていなかったキーワードボタン３４が出現する。

また、本実施形態の変形例として、カーソル３５が位置しているキーワードボタン３４の再生時刻における映像再生画面を表示するサムネイル３７を併せて表示するとしても良い。キーワードとサムネイル３７を同時に表示することで、キーワードが出現する場面を一見して認識することができる。

辞書部２９は、ユーザ辞書２６、クラス辞書２７、及びジャンル対応表２８を記憶する。上述の通り、キーワード抽出部２３は、辞書部２９に記憶されたクラス辞書２７やジャンル対応表２８を参照して、キーワード抽出処理を行う。

クラス辞書２７の例を図４に示す。図４は、辞書部２９上に記憶されるクラス辞書２７の例を示す図である。
クラス辞書２７は、図４に示すように単語がクラスに対応づけられている。ここで、クラスは単語の意味ラベルである。図４の例では、「青梅」という単語にクラス（「青梅」という単語の意味）「地名」が、「居酒屋」という単語にクラス「店の種類」が対応づけられている。キーワード抽出部２３は、当該クラス辞書２７を参照することにより、登録されている単語のクラス（意味）を得ることができる。

ジャンル対応表の例を図５に示す。図５は、メモリ部２５上に記憶されるジャンル対応表２８の例を示す図である。
ジャンル対応表２８は、コンテンツデータのジャンルと、そこで抽出されるべき単語のクラスとを対応づけている。図５の例では、例えばコンテンツデータのジャンルが「ニュース」である場合には、抽出されるべき単語のクラスが「地名」「人名」「国名」「事件名」「会社名」であることが、ジャンルが「料理」である場合には、抽出されるべき単語のクラスが「料理名」「調理方法」「国名」であることがわかる。キーワード抽出部２３は、抽出した単語のクラスをクラス辞書２７を参照して調べると共に、当該単語のクラスがコンテンツデータのジャンルにおいて抽出されるべきクラスであるかどうかを調べる。抽出した単語のクラスが、コンテンツデータのジャンルにおいて抽出されるべきクラスである場合には、当該単語をキーワードとして当該単語を抽出し、時刻情報と共に制御部２０を介してメモリ部２５に出力すると共に、キーワードＵＩ生成部２４へ描画指示を行う。

尚、各コンテンツデータのジャンルは、当該コンテンツデータが放送番組である場合には、放送信号に重畳されるＰＳＩから取得することができる他、図示しないインターネット経由で取得するようにしても良い。

続いて、図６を参照しながら、キーワード抽出に係る処理の流れを示す。図６は、キーワード抽出部２３によるキーワード抽出の処理の流れを示す図である。図６の処理は、字幕バッファ８上に展開される字幕情報毎に行われる。また、キーワード抽出処理は、記憶媒体６へのコンテンツデータの録画時に実行しても良いし、コンテンツデータの視聴時に実行しても良い。さらに、コンテンツデータ録画後に、キーワード抽出処理のみを独立して実行しておき、当該実行結果をメモリ部２５にキーワード時刻対応表３０として記憶しておくことにより、再生時に当該キーワード時刻対応表３０に応じたＵＩをキーワードＵＩ生成部２４が生成できるようにしても良い。

まず、キーワード抽出部２３は字幕バッファ８から読み込んだ字幕情報に含まれる文字列に対し、形態素解析を行い、単語に分解する（Ｓ１１）。次に、抽出された各単語の中から１単語抽出し（Ｓ１２）、Ｓ１３乃至Ｓ１７の処理を行う。

まず、抽出した単語が記号（括弧やクオーテーション等）で囲まれているか否かを調べる（Ｓ１３）。これは、例えば「青梅駅前にある『○○屋』」等の字幕の場合、クオーテーションで囲まれた「○○屋」は重要な単語である可能性が高く、当該重要な単語はキーワードとして抽出すべきだからである。もし、抽出した単語が記号で囲まれている場合には（Ｓ１３のＹｅｓ）、当該単語をキーワードとして登録（抽出）する（Ｓ１７）。

抽出した単語が記号で囲まれていない場合には（Ｓ１３のＮｏ）、当該単語がユーザ辞書２６に登録されているか否かを確認する（Ｓ１４）。ユーザ辞書２６は、ユーザが任意にキーワードを登録するための辞書であり、例えば辞書部２９上に記憶されている。キーワード抽出部２３は、ユーザ辞書２６に登録されている単語については、無条件にキーワードとして抽出するものとする。よって、Ｓ１２で抽出した単語がユーザ辞書２６に登録されている場合には（Ｓ１４のＹｅｓ）、当該単語をキーワードとして登録（抽出）する（Ｓ１７）。

抽出した単語がクラス辞書に登録されていない場合には（Ｓ１４のＮｏ）、当該単語がクラス辞書２７に登録されているか否かを調べる（Ｓ１５）。抽出した単語がクラス辞書２７に登録されている場合には（Ｓ１５のＹｅｓ）、再生中のコンテンツデータのジャンルを調べ、ジャンル対応表２８を参照することにより、抽出した単語のクラスが、コンテンツデータのジャンルにおいて抽出されるべきクラスであるか否かを調べる（Ｓ１６）。抽出した単語のクラスが、コンテンツデータのジャンルにおいて抽出されるべきクラスである場合には（Ｓ１６のＹｅｓ）、当該単語をキーワードとして登録（抽出）する（Ｓ１７）。ここで、Ｓ１７のキーワードとして登録する処理は、キーワードとして抽出された単語をキーワードとして再生時刻と共にキーワード時刻対応表３０へ登録すると共に、キーワードＵＩ生成部２４に描画指示処理を含むことができる。

抽出した単語がクラス辞書２７に登録されていない場合（Ｓ１５のＮｏ）、若しくは抽出した単語のクラスが、コンテンツデータのジャンルにおいて抽出されるべきクラスでない場合（Ｓ１６のＮｏ）、若しくはキーワード登録すべき単語の登録をした場合、現在抽出している単語が、形態素解析を行った字幕情報に含まれる文字列の最後の単語であるか否かを判別する（Ｓ１８）。

抽出した単語が字幕中の最後の単語である場合（Ｓ１８のＹｅｓ）、本キーワード抽出処理手順を終了する。一方、抽出した単語が字幕中の最後の単語でない場合（Ｓ１８のＮｏ）、ステップＳ１２に戻り上記のキーワード抽出処理を繰り返す。

続いて、図７を参照しながら、キーワードが選択された場合の再生処理の流れを示す。図７は、制御部２０によるキーワード選択に係る再生処理の流れを示す図である。

まず、制御部２０はユーザ操作により入力される操作コマンドを受信し、キーワードボタン３４の何れかが選択されたか否かを判別する（Ｓ２１）。キーワードボタン３４が選択されていない場合（Ｓ２１のＮｏ）、制御部２０は映像の再生を続行し（ステップＳ２２）、本キーワード選択に係る再生処理を終了する。

一方、キーワードボタン３４が選択された場合（Ｓ２１のＹｅｓ）、制御部２０は再生を一時停止するべくＴＳ分離部４及び録画制御部５を制御する（Ｓ２３）。次に、制御部２０はカーソル３４により示された選択されたキーワードをキーワード時刻対応表３０から探索し、当該キーワードと対応づけられて記憶されている再生時刻情報を取得する（Ｓ２４）。次に、制御部２０は、取得した再生時刻情報の示す再生時刻から映像データの再生を開始する（Ｓ２５）。以上で、本キーワード選択に係る再生処理を終了する。

尚、上記の実施形態においては、キーワード選択がされた場合に映像の再生を一時停止する（Ｓ２３）としたが、これに限定されることはない。例えば、カーソルの移動に併せて早送り／巻き戻しを実行するとしても良いし、再生を続行するとしても良い。

以上説明したように、本実施形態によれば、再生対象のコンテンツデータの内容把握を容易にすることが可能となる。ユーザが注目するキーワードの抽出条件に基づき、再生中コンテンツの字幕情報から当該キーワードを抽出し、抽出したキーワードを時系列順に並べたＵＩをコンテンツの再生画面と併せて表示する。従って、例えば再生中のコンテンツのある時間を見逃した場合、時系列順に並んで表示されるキーワード列を確認することで見逃した場面の内容の予想が可能となる。またキーワード列に再び確認したい内容を示すものがあれば、当該キーワードを選択することで巻き戻し動作を迅速に行うことができる。また、キーワード列を一覧することでコンテンツの内容を把握することができるので、録画済みのコンテンツを全て再生すること無しにユーザが視聴を所望する位置からの再生が可能となり操作性の向上を図ることができる。

尚、実施形態そのままに限定されるものではなく、実施段階ではその要旨を逸脱しない範囲で構成要素を変形して具体化できる。また、上記実施形態に開示されている複数の構成要素の適宜な組み合わせにより種々の発明を構成できる。例えば、実施形態に示される前構成要素から幾つかの構成要素を削除してもよい。さらに、異なる実施形態に亘る構成要素を適宜組み合わせても良い。

１…映像再生装置、２…アンテナ、３…チューナ／復調部、４…ＴＳ分離部、５…録画制御部、６…記憶媒体、７…映像バッファ、８…字幕バッファ、９…データ放送用バッファ、１０…音声バッファ、１１…ＳＩ処理部、１２…ＰＳＩ処理部、１３…映像復号部、１４…字幕復号部、１５…データ放送処理部、１６…音声復号部、１７…表示メモリ、１８…映像出力部、１９…音声出力部、２０…制御部、２１…ＳＴＣカウンタ、２２…受信部、２３…キーワード抽出部、２４…キーワードＵＩ生成部、２５…メモリ部、２６…ユーザ辞書、２７…クラス辞書、２８…ジャンル対応表、２９…辞書部、３０…キーワード時刻対応表、３１…表示画面、３２…映像表示領域、３３…キーワード表示領域、３４Ａ〜３４Ｎ…キーワードボタン、３５…カーソル、３６…アイコン、３７…サムネイル、３８…リモコン。

Claims (12)

1. コンテンツデータから映像情報と字幕情報とを分離する分離手段と、
   前記字幕情報からキーワードを抽出し、該キーワードを含む字幕の表示時刻と共に順次記憶媒体に記録するキーワード抽出手段と、
   前記映像情報から映像を復号し、表示画面に表示させる再生手段と、
   前記記憶媒体に記録した１以上の前記キーワードを、前記表示時刻順に並べて前記表示画面上に表示する表示制御手段と、
   前記表示画面上に表示された１以上の前記キーワードのうち、選択されたキーワードの表示時刻に、前記再生手段による再生位置を変更する再生位置変更手段と
   を備える映像再生装置。
2. 前記表示制御手段は、前記再生手段により得られる前記映像と前記１以上のキーワードとを同時に表示する、請求項１記載の映像再生装置。
3. 前記記録手段は、録画された前記コンテンツデータを対象に、前記キーワードと前記表示時刻とを前記記憶媒体に記録する、請求項１記載の映像再生装置。
4. 前記キーワード抽出手段が抽出するキーワードを変更する変更手段を更に備える、請求項１記載の映像再生装置。
5. 前記変更手段は、前記コンテンツデータのジャンルに従って、抽出するキーワードを変更することを特徴とする請求項４記載の映像再生装置。
6. 前記表示制御手段は、前記１以上のキーワードを、該キーワードの表示時刻に対応するサムネイルと共に表示する、請求項１記載の映像再生装置。
7. コンテンツデータから前記映像情報と前記字幕情報とを分離し、
   前記字幕情報からキーワードを抽出して、該キーワードを含む字幕の表示時刻と共に順次記憶媒体に記録し、
   前記映像情報から映像を復号して表示画面に表示し、
   前記記憶媒体に記録した１以上の前記キーワードを、前記表示時刻順に並べて前記表示画面上に表示し、
   前記表示画面上に表示された１以上の前記キーワードのうち、選択されたキーワードの表示時刻に再生位置を変更する、映像再生方法。
8. 前記映像と前記１以上のキーワードとを同時に表示する、請求項７記載の映像再生方法。
9. 録画された前記コンテンツデータを対象に、前記キーワードと前記表示時刻とを前記記憶媒体に記録する、請求項７記載の映像再生方法。
10. 抽出するキーワードを変更可能な請求項７記載の映像再生方法。
11. 前記変更手段は、前記コンテンツデータのジャンルに従って、抽出するキーワードを変更することを特徴とする請求項４記載の映像再生装置。
12. 前記表示制御手段は、前記１以上のキーワードを、該キーワードの表示時刻に対応するサムネイルと共に表示する、請求項１記載の映像再生装置。

Images