JP4413661B2 - 録画再生装置、画像再生システムおよび端末装置 - Google Patents

Description

本発明は、録画データから生成したサムネール画像を更新表示できる録画再生装置、画像再生システムおよび端末装置に関する。

携帯電話やモバイルＰＣ（Personal Computer）などの端末装置を使用し、外出先からインターネット、公衆回線、無線回線などを経由して、テレビ放送の録画操作を行なうことのできる映像録画装置が実現している。また、高速のネットワーク環境においては、外出先からネットワーク経由で映像録画装置に接続し、映像録画装置に格納された録画データをデジタルデータとして受信し、再生することができる端末装置が実現している。

しかしながら、転送速度の低いネットワーク環境、または、データの転送量や通信時間に応じて高額な課金が発生するようなネットワーク環境しか使用できない状況、あるいは、処理能力の低い端末装置しか使用できないといった状況が依然として存在し、この場合、番組の録画予約など映像録画装置の簡単な操作を行なう程度であれば問題ないが、録画された映像コンテンツを楽しむといったことは難しかった。

このような状況の中で、録画された映像を携帯端末側で見る方法として、録画された映像コンテンツを再生した映像を見るのではなく、録画された映像コンテンツの特定時刻の静止画像、あるいは、その静止画像の縮小画像（以下、サムネール画像という）だけを端末装置側に送信し、送信されたサムネール画像を表示して見ることができる装置が提案されている。

たとえば、映像録画装置が生成した特定時刻のサムネール画像を端末装置が受信して表示し、それに対して、ユーザが次の操作、たとえば、指定された時間後のサムネール画像を表示する要求を行なう操作を行なうと、映像録画装置が指定された時間後のサムネール画像を生成して送信し、端末装置が送信されたサムネール画像を表示する第１の従来技術である映像録画装置がある。

また、元の映像データの映像フレーム群を時間的に任意の間隔で、かつ、任意の大きさにしてサンプリングした標本画像フレームを作成し、さらに、各標本画像フレームに対応する元の映像フレーム間の画面変化量を、作成された標本画像フレームとともに保存しておき、保存された標本画像フレームを順次表示する際に、画面変化量に応じて次に表示する標本画像フレームの表示タイミングを変えて表示することにより、ＣＰＵの能力の低い機器でも、標本画像フレームによる映像の内容を確認して検索を容易に行なうことができる第２の従来技術である映像検索装置および映像再生装置がある（たとえば、特許文献１参照）。

また、動画像データに属する複数のフレームから、シーンチェンジ毎に、または、一定時間間隔毎に、一連のサムネール画像を作成しておき、作成された一連のサムネール画像を、先頭から一定枚数表示し、継続するサムネール画像を、既に表示されている先頭のサムネール画像から順次入れ替えて表示することにより、動画像データがどのような内容のものなのかを容易に理解することができる第３の従来技術であるサムネール作成方法およびサムネール表示方法がある（たとえば、特許文献２参照）。

また、動画ファイルの各シーンの先頭画像の位置を示す時間軸データと各シーンの内容に対応するインデックス名を表示し、ユーザがインデックス名を指定すると、指定されたインデックスに対応するシーンの先頭画像を表示するとともに、その画像データの再生を可能とすることにより、特定シーンへのアクセスを容易にした第４の従来技術であるデジタル画像管理検索システムがある（たとえば、特許文献３参照）。

また、ユーザにより指定された開始時刻と終了時刻とを予め定められた値で当分割した時刻のサムネール画像を生成して表示し、ユーザは、表示されたサムネール画像を見て、新たに開始時刻と終了時刻とを指定することを繰り返すことにより、または、ユーザにより指定された開始時刻と生成するサムネール画像の時間間隔により予め定められた枚数のサムネール画像を生成して表示し、ユーザは、表示されたサムネール画像を見て、新たに開始時刻と時間間隔とを指定することを繰り返すことにより、ユーザが所望するポイントに到達することができる第５の従来技術である映像録画装置がある。

また、サムネール画像を扱ったものではないが、映像を要約する際に、一定時間以上継続するシーンやダイジェスト部分に類似する本編のシーンを代表画像として抽出しておき、抽出しておいた代表画像を一括表示、あるいは、その代表画像に対応する部分映像を順次再生し、ユーザが選択した代表画像のシーンから再生できるようにした第６の従来技術である映像要約方法および映像表示方法がある（たとえば、特許文献４参照）。

図１１は、第５の従来技術による映像録画装置の一実施例におけるサムネール画像の表示例とそれに対する操作を説明するための図である。画面９０〜９４は、携帯電話やモバイルＰＣといった端末装置の表示部、たとえば、液晶ディスプレイの画面であり、それぞれ、異なった時刻からの複数のサムネール画像が表示されている。

画面９０は、最初（１回目）に表示される画面であり、時刻ｔ＝０．０から時刻ｔ＝２５０．０までの、時間間隔５０．０の時刻の６枚のサムネール画像が表示されており、それぞれに、各サムネール画像の時刻が表示されている。

ユーザは、第１の目的の映像が時刻ｔ＝５０．０（灰色表示のサムネール画像）の近傍にあると判断し、端末装置から、時刻ｔ＝５０．０から、時間間隔１０．０で表示することを指示すると、２回目のサムネール画像を表示した画面９１が表示される。この例では、画面９１には、時刻ｔ＝５０．０から時間間隔１０．０の５枚のサムネール画像が表示されている。

ユーザは、さらに、第１の目的の映像が時刻ｔ＝６０．０（灰色表示のサムネール画像）の近傍にあると判断し、端末装置から、時刻ｔ＝６０．０から、時間間隔２．０で表示することを指示すると、３回目のサムネール画像を表示した画面９２が表示される。この例では、画面９２には、時刻ｔ＝６０．０から時間間隔２．０の５枚のサムネール画像が表示されている。この中の時刻ｔ＝６２．０のサムネール画像（灰色表示のサムネール画像）が、第１の目的の映像である。

また、ユーザは、第２の目的の映像を見たい場合は、また、最初の画面表示を指示すると、再び、画面９０が表示される。今回も、同様に、第２の目的の映像が時刻ｔ＝２００．０（灰色表示のサムネール画像）の近傍にあると判断し、端末装置から、時刻ｔ＝２００．０から、時間間隔１０．０で表示することを指示すると、２回目のサムネール画像を表示した画面９３が表示される。さらに、第２の目的の映像が時刻ｔ＝２２０．０（灰色表示のサムネール画像）の近傍にあると判断し、端末装置から、時刻ｔ＝２２０．０から、時間間隔２．０で表示することを指示すると、３回目のサムネール画像を表示した画面９４が表示される。時刻ｔ＝２２２．０に第２の目的の映像であるサムネール画像（灰色表示のサムネール画像）がある。

特開２０００−２８７１６５号公報 特開平１１−２８４９４８号公報 特開平１０−１３７７３号公報 特開平１０−１１２８３５号公報

上述した第１の従来技術では、サムネール画像を１枚づつ表示し、かつ、次のサムネール画像を表示するために毎回ユーザの操作が必要であり、目的の画像に到達するためには、相当の労力をユーザに強いることになるという問題がある。

また、上述した第２〜４の従来技術によるサムネール画像による映像表示が、映像のハンドリング、たとえば、映像の編集ポイントの設定やチャプター分割の分割ポイントの設定のための補助手段として利用されることが多く、シーンチェンジ毎や一定時間間隔毎に予め作成しておいたサムネール画像を表示することで、十分その目的が達成されていたが、サムネール画像により表示される映像コンテンツの内容を楽しむためには、十分なものではなかった。

つまり、シーンチェンジ毎や一定時間間隔毎に予め作成しておいたサムネール画像を表示するという従来技術は、映像の概要を理解できる程度にサムネール画像間の継続性が維持されていないことがあるといった問題、または、ユーザが希望する映像のサムネール画像が予め作成されたサムネール画像に含まれていないことがあるといった問題がある。

また、上述した第５の従来技術では、目的の映像に到達することはできるが、最初に表示されるサムネール画像間の時間間隔が粗いために、表示されているサムネール画像の中から目的の映像に最も近いサムネール画像がどれかを特定できない場合があり、この場合、何回かの試行錯誤が要求されるという問題がある。

また、上述した第６の従来技術では、予め抽出しておいた代表画像を表示するので、その代表画像の中に目的の画像の近辺の画像が含まれていないと、目的の画像を見つけることができないことがあるという問題がある。

また、いずれの従来技術も、ビデオ機器での操作とは異なった操作であり、映像の概要を理解したり、目的の映像にたどり着いたりするような映像を楽しむといった目的のためには、操作性がよくないという問題がある。

本発明の目的は、録画データから生成したサムネール画像をビデオ機器の操作と同様の操作性で表示することができる録画再生装置、画像再生システムおよび端末装置を提供することである。

本発明は、動画像データを記憶する記憶手段と、
前記動画像データの再生開始位置と、所定時間間隔に生成されるサムネール画像の枚数とを規定する操作指示を端末装置から受信する受信手段と、
前記受信手段による新たな操作指示の受信の度に、前記記憶手段に記憶された動画像データの画像であって、前記再生開始位置からの画像を縮小したサムネール画像を前記新たな操作指示により規定される枚数分生成する生成手段と、
前記生成手段により生成されたサムネール画像を、受信する新たな操作指示に基づいて前記端末装置に送信する送信手段とを備えたことを特徴とする録画再生装置である。

また本発明は、前記生成手段は、前記時間間隔とサムネール画像の枚数との組み合わせによって、前記記憶手段に記憶された動画像データのサムネール化すべき所定位置を決定することを特徴とする。

また本発明は、前記動画像データがＣＭの映像を含むかどうかを検出する検出手段を有し、
前記生成手段は、前記検出手段が検出したＣＭ部分の画像データに対してはサムネール画像を生成せずに、ＣＭ部分に引続く画像データに対してサムネール画像を生成することを特徴とする。

また本発明は、前記動画像データの現在の再生停止位置の前後予め定められた範囲の動画像データの中に文字表示が含まれているかどうかを検索する検索手段を有し、
前記生成手段は、前記検索手段が文字表示を検索したときは、検索された文字表示を含む範囲の動画像データからサムネール画像を生成し、生成したサムネール画像を優先して前記生成する枚数に含めることを特徴とする。

また本発明は、サムネール画像を表示する表示手段を有し、
前記生成手段が生成する最初のサムネール画像の再生位置から、予め定められた時間分の音声データを取得する取得手段と、
前記表示手段がサムネール画像を表示する際に、前記取得手段により取得した音声データを出力する音声出力手段とを有することを特徴とする。

また本発明は、複数の放送局から放送されている映像コンテンツの中から一つの映像コンテンツを選択して受信するコンテンツ受信手段を有し、
前記記憶手段は、前記コンテンツ受信手段により受信されたコンテンツを動画像データとして記憶することを特徴とする。

また本発明は、前記受信手段は、複数の放送局から放送されている映像コンテンツの中から一つの映像コンテンツを予め定められた時間ずつ順次選択して受信し、
順次選択されて受信した映像コンテンツから動画像データを作成する作成手段、および前記画像データを再生する再生方向と、生成されるサムネール画像の時間間隔との組合せを予め定める組合せの中から選択する選択手段を有し、
前記生成手段は、前記選択手段により選択された組合せに基づいて、作成された動画像データのうち選択された映像コンテンツの動画像データに対して、サムネール画像を生成することを特徴とする。

また本発明は、前記生成されたサムネール画像を、前記生成されたサムネール画像の基になった映像コンテンツを放送した放送局と関連付けて保存する保存手段を有し、
前記送信手段は、複数の放送局に対応するサムネール画像を送信することを特徴とする。

また本発明は、動画像データを記憶する記憶手段、前記記憶手段に記憶される動画像データからサムネール画像を生成する生成手段、および前記生成手段により生成されたサムネール画像を送信する録画通信手段を備える録画再生装置と、前記録画再生装置から送信されるサムネール画像を受信する端末通信手段、および前記端末通信手段により受信されたサムネール画像を表示する表示手段を備える端末装置とを含む画像再生システムであって、
前記端末装置は、前記動画像データの再生開始位置と、所定時間間隔に生成されるサムネール画像の枚数とを規定する操作指示を指示する指示手段をさらに含み、
前記端末通信手段は、前記指示手段により指示された操作指示を前記録画再生装置に送信し、
前記録画通信手段は、前記端末装置から操作指示を受信し、
前記生成手段は、前記録画通信手段による新たな操作指示の受信の度に、前記記憶手段に記憶された動画像データの画像であって、前記再生開始位置からの画像を縮小したサムネール画像を前記新たな操作指示により規定される枚数分生成し、
前記録画通信手段は、前記生成手段により生成されたサムネール画像を、受信する新たな操作指示に基づいて前記端末装置に送信することを特徴とする画像再生システムである。

また本発明は、前記録画再生装置は、生成したサムネール画像の動画像データ内の再生位置を特定する位置特定情報と、サムネール画像を特定するサムネール特定情報とを、前記生成したサムネール画像とともに保存する特定情報保存手段を有し、
前記録画通信手段は、サムネール画像を送信する際に、前記サムネール特定情報を前記サムネール画像とともに送信し、
前記端末通信手段は、送信されたサムネール画像の中から選択されたサムネール画像を特定するサムネール特定情報を前記録画再生装置に送信し、
前記録画再生装置は、受信したサムネール特定情報により、予め定められた前記録画再生装置の操作が行なわれたものであるとして、前記サムネール画像の開始位置から前記予め定められた操作に伴う動作を行なうことを特徴とする。

また本発明は、前記録画再生装置は、生成したサムネール画像の動画像データ内の再生位置を特定する位置特定情報と、サムネール画像を特定するサムネール特定情報とを、前記生成したサムネール画像とともに保存する特定情報保存手段を有し、
前記録画通信手段は、サムネール画像を送信する際に、前記サムネール特定情報を前記サムネール画像とともに送信し、
前記端末通信手段は、送信されたサムネール画像の中から選択されたサムネール画像を特定するサムネール特定情報を前記録画再生装置に送信し、
前記録画通信手段は、受信したサムネール特定情報が特定するサムネール画像の開始位置からの画像データを前記端末装置に送信し、
前記表示手段は、送信された画像データを再生して表示することを特徴とする。

また本発明は、前記録画再生装置は、複数の放送局から放送されている映像コンテンツの中から一つの映像コンテンツを予め定められた時間ずつ順次選択して受信するコンテンツ受信手段と、
前記順次選択して受信した映像コンテンツから動画像データを作成する作成手段と、
作成した動画像データを、前記作成した動画像データの基になった映像コンテンツを放送した放送局を特定する放送局特定情報とともに保存する保存手段を有し、
前記端末装置は、前記画像データを再生する再生方向と、生成されるサムネール画像の時間間隔との組合せを予め定める組合せの中から選択する選択手段を有し、
前記生成手段は、作成された動画像データに対して、前記選択手段により選択された組合せに基づいて、サムネール画像を生成し、
前記録画通信手段は、生成されたサムネール画像を送信する際に、前記放送局特定情報を、前記生成されたサムネール画像とともに送信し、
前記端末装置の表示手段は、前記放送局特定情報により特定される放送局毎に順次サムネール画像を表示し、
前記端末通信手段は、表示されたサムネール画像の中から選択されたサムネール画像の放送局を示す前記放送局特定情報を前記録画再生装置に送信し、
前記録画通信手段は、受信した放送局特定情報が特定する放送局を選択することを特徴とする。

また本発明は、動画像データの再生開始位置と、所定時間間隔に生成されるサムネール画像の枚数とを規定する操作指示を新たに受信する度に、動画像データの画像であって、前記再生開始位置からの画像を縮小したサムネール画像を前記新たに受信した操作指示により規定される枚数分生成する録画再生装置から送信されたサムネール画像を受信する端末受信手段と、
前記端末受信手段により受信したサムネール画像を表示する表示手段と、
前記操作指示を指示する指示手段と、
前記指示手段により指示された操作指示を前記録画再生装置に送信する端末送信手段とを備えることを特徴とする端末装置である。
また本発明は、前記新たな操作指示により規定される再生開始位置は、現在の再生停止位置であることを特徴とする。
また本発明は、前記新たな操作指示により規定される再生開始位置は、現在の再生停止位置であることを特徴とする。

本発明によれば、端末装置から新たな操作指示を受信する度に、新たな操作指示で規定される再生開始位置および枚数でサムネール画像が生成されるので、動画像データ、つまり録画データから生成したサムネール画像を、端末装置からビデオ機器の操作と同様の操作性で表示することができ、また、既に目的の映像の位置をある程度把握している場合には、より早く目的の映像に到達することができる。

また、サムネール画像は所定時間間隔に生成されるので、たとえばビデオ機器での再生、早送りおよびスローに相当する時間間隔で、録画データから生成したサムネール画像をビデオ機器の操作と同様の操作性で表示することができ、また、通常のビデオ機器と同等の簡単な操作でサムネール画像を表示することができる。

また本発明によれば、前記時間間隔とサムネール画像の枚数との組み合わせによって、動画像データのサムネール化すべき所定位置を決定するので、録画データから生成したサムネール画像をビデオ機器の操作と同様の操作性で表示することができ、また、より早く目的の映像に到達することができ、より柔軟な画像再生が行なえるようになる。

また本発明によれば、ＣＭ（Commercial）部分の録画データについては、サムネール画像を作成しないので、録画データから生成したサムネール画像をビデオ機器の操作と同様の操作性で表示することができ、また、ＣＭ部分を無くしたサムネール画像を表示でき、より早く目的の映像に到達できる。

また本発明によれば、録画データに文字表示を含む部分を検索し、検索した部分からサムネール画像を生成し、優先して表示するので、録画データから生成したサムネール画像をビデオ機器の操作と同様の操作性で表示することができ、また、サムネール画像だけでは内容を把握しにくいときに、より内容を理解することができるようになる。

また本発明によれば、表示画面の最初のサムネール画像の再生位置からの音声データを取得して出力するので、録画データから生成したサムネール画像をビデオ機器の操作と同様の操作性で表示することができ、また、サムネール画像だけでは内容を把握しにくいときに、少ないデータ通信量の増加だけで、映像の内容を理解することができるようになる。

また本発明によれば、複数の放送局から放送されている映像コンテンツの中から選択された一つの映像コンテンツを受信して録画データとして記憶するので、受信した映像コンテンツの録画データから生成したサムネール画像をビデオ機器の操作と同様の操作性で表示することができ、また、選択されている映像コンテンツのサムネール画像を表示することができる。

また本発明によれば、複数の放送局から放送されている映像コンテンツの中から一つの映像コンテンツを予め定められた時間づつ順次選択して作成した録画データに基づいてサムネール画像を生成するので、録画データから生成したサムネール画像をビデオ機器の操作と同様の操作性で表示することができ、また、放送されている映像コンテンツを選択してサムネール画像を表示することができる。

また本発明によれば、複数の放送局から放送されている映像コンテンツの中から一つの映像コンテンツを予め定められた時間づつ順次選択して作成した録画データに基づいてサムネール画像を生成し、複数の放送局の生成されたサムネール画像を表示するので、録画データから生成したサムネール画像をビデオ機器の操作と同様の操作性で表示することができ、また、サムネール画像を選択することにより放送局を選択することができる。

また本発明によれば、端末装置から新たな操作指示を受信する度に、新たな操作指示で規定される再生開始位置および枚数でサムネール画像が生成されるので、動画像データ、つまり録画データから生成したサムネール画像を、端末装置からビデオ機器の操作と同様の操作性で表示することができ、また、既に目的の映像の位置をある程度把握している場合には、より早く目的の映像に到達することができる。
また、サムネール画像は所定時間間隔に生成されるので、たとえばビデオ機器での再生、早送りおよびスローに相当する時間間隔で、録画データから生成したサムネール画像をビデオ機器の操作と同様の操作性で表示することができ、また、通常のビデオ機器と同等の簡単な操作でサムネール画像を表示することができる。

また本発明によれば、生成したサムネール画像の録画データ内の再生位置を特定する特定情報を、前記サムネール画像と関連付けて保存しているので、録画データから生成したサムネール画像をビデオ機器の操作と同様の操作性で表示することができ、また、サムネール画像が選択されたことにより、サムネール画像の開始位置から、予め定められた録画再生装置の操作を行なうことができる。

また本発明によれば、生成したサムネール画像の録画データ内の再生位置を特定する特定情報を、前記サムネール画像と関連付けて保存し、選択されたサムネール画像の再生位置からの録画データを端末装置に送信するので、録画データから生成したサムネール画像をビデオ機器の操作と同様の操作性で表示することができ、また、選択したサムネール画像からの録画データの再生映像を端末装置側で見ることができる。

また本発明によれば、複数の放送局から放送されている映像コンテンツの中から選択された一つの映像コンテンツからサムネール画像を生成し、生成されたサムネール画像の基になった映像コンテンツを放送する放送局を特定する放送局特定情報とともに送信するので、録画データから生成したサムネール画像をビデオ機器の操作と同様の操作性で表示することができ、また、サムネール画像が選択されたことにより、選択されたサムネール画像に対応する放送局を選択することができる。

また本発明によれば、端末装置から新たな操作指示を受信する度に、新たな操作指示で規定される再生開始位置および枚数でサムネール画像が生成されるので、動画像データ、つまり録画データから生成したサムネール画像を、端末装置からビデオ機器の操作と同様の操作性で表示することができ、また、既に目的の映像の位置をある程度把握している場合には、より早く目的の映像に到達することができる。
また、サムネール画像は所定時間間隔に生成されるので、たとえばビデオ機器での再生、早送りおよびスローに相当する時間間隔で、録画データから生成したサムネール画像をビデオ機器の操作と同様の操作性で表示することができ、また、通常のビデオ機器と同等の簡単な操作でサムネール画像を表示することができる。

また本発明によれば、新たな操作指示によるサムネール画像は、前の操作指示による再生停止位置から生成されるので、前の操作によって再生が停止した位置を起点として次のサムネール画像を表示することができ、ビデオ機器のように操作することができる。また、録画データのサムネール画像をサムネール画像間での映像の概要の継続性を損なうことなく更新して表示し、目的の映像に到達することができる。

また本発明によれば、新たな操作指示によるサムネール画像は、前の操作指示による再生停止位置から生成されるので、前の操作によって再生が停止した位置を起点として次のサムネール画像を表示することができ、ビデオ機器のように操作することができる。また、録画データのサムネール画像をサムネール画像間での映像の概要の継続性を損なうことなく更新して表示し、目的の映像に到達することができる。

図１は、本発明の実施の一形態である画像再生システム１のハードウエア構成を示す図である。画像再生システム１は、ＰＶＲ（Personal Video Recorder）に代表される、たとえば、テレビ放送を録画データとして記録媒体に録画保存し、記録媒体に保存した録画データを再生することができる録画再生装置１０と、録画保存した録画データを遠隔から操作することができる、たとえば、携帯電話やモバイルＰＣ（Personal Computer）といった個人用の持ち運び可能な端末装置２０とを含んで構成される。また、端末装置２０は、録画再生装置１０を本体装置としたとき、本体装置を遠隔で操作するための外部の機器、たとえば、液晶ディスプレイなどの表示部を備えたリモコン機器のような外部の機器でもよい。

録画再生装置１０は、中央制御部１１、記憶部１２、通信部１３、指示入力部１４、映像出力部１５、および映像入力部１６を含んで構成され、記憶部１２には、プログラムメモリ１２１、作業用メモリ１２２、および補助記憶メモリ１２３がある。端末装置２０は、中央制御部２１、記憶部２２、通信部２３、指示入力部２４、および映像出力部２５を含んで構成され、記憶部２２には、プログラムメモリ２２１、作業用メモリ２２２、および補助記憶メモリ２２３がある。

中央制御部１１は、録画再生装置１０全体を制御する制御部で、たとえば、マイクロコンピュータで実現されるＣＰＵ（Central Processing Unit）により構成され、プログラムを格納するメモリであるプログラムメモリ１２１に格納されている種々のプログラムを実行し、また、処理に必要な情報を一時的に格納するためのメモリである作業用メモリ１２２に格納することにより、種々の処理を行なう。

また、中央制御部２１は、端末装置２０全体を制御する制御部で、たとえば、マイクロコンピュータで実現されるＣＰＵにより構成され、プログラムを格納するメモリであるプログラムメモリ２２１に格納されている種々のプログラムを実行し、また、処理に必要な情報を一時的に格納するためのメモリである作業用メモリ２２２に格納することにより、種々の処理を行なう。

録画データなどを格納する補助記憶メモリ１２３、および、録画データから取得した静止画像を縮小したサムネール画像などを格納する補助記憶メモリ２２３は、内臓型のＨＤＤ（Hard Disk Drive）などの記憶媒体を用いるが、外付け型のＨＤＤや、分離可能な記録媒体、たとえば、磁気テープなどを装填して書込みや読取りが可能な記憶装置を接続して用いてもよい。

指示入力部２４は、ユーザが録画再生装置１０や携帯端末２０に対する操作を行なうための入力部であり、たとえば、携帯電話などに備えられている数字や文字などを入力するボタンや電源投入切断などを行なう操作ボタン、または、モバイルＰＣなどのキーボードやマウスが用いられる。

ユーザは、指示入力部２４からサムネール画像の表示を開始するための開始指示と種々の操作を指示する操作指示を行なうと、指示入力部２４は、入力された開始指示と操作指示を中央制御部２１に通知する。中央制御部２１は、通知された開始指示と操作指示を、無線通信を行なう通信部２３から録画再生装置１０に送信する。

録画再生装置１０の無線通信を行なう通信部１３は、送信された開始指示と操作指示を受信すると、中央制御部１１に通知する。開始指示と操作指示を通知された中央制御部１１は、操作指示に従って、補助記憶メモリ１２３に格納されている録画データを基にサムネール画像を生成し、生成したサムネール画像を、通信部１３を介して、端末装置２０に送信する。

端末装置２０の通信部２３は、送信されたサムネール画像を受信し、中央制御部２１に転送する。中央制御部２１は、転送されたサムネール画像を、補助記憶メモリ２２３に格納するとともに、液晶ディスプレイやモニタといった表示を行なうための出力部である映像出力部２５の表示画面に表示する。

ユーザは、表示されたサムネール画像を見て、次の操作指示を指示入力部２４から指示する。新たに指示された操作指示は、中央制御部２１により、録画再生装置１０に送られ、録画再生装置１０は、現在、つまり、新たな操作指示を受けたときに、停止している再生位置から、新たな操作指示に従ってサムネール画像を生成し、携帯端末２０に送信する。携帯端末２０は、新たな操作指示に従って生成されたサムネール画像を、最初に表示したサムネール画像に置き替えて表示する。以後、ユーザが目的の映像に到達するまで、この動作が繰り返される。

映像入力部１６は、テレビ放送を受信するためのアンテナやチューナ、あるいは、映像や音声の入力端子、Ａ−Ｄ（Analog-Digital）変換を行なう部位などで実現されるものである。映像出力部１５は、テレビ放送の映像や録画データを再生した映像を表示するための表示部で、たとえば、液晶ディスプレイやモニタが用いられる。指示入力部１４は、テレビ放送のチャンネルを選択する指示や、録画再生を行なうため指示を入力するための入力部である。

録画再生装置１０の通信部１３と端末装置２０の通信部２３との通信は、無線通信である必要は無く、電話回線など有線通信や赤外線、あるいは、インターネットを経由するものでもよい。この間の通信は、たとえば、インターネットであれば、ＴＣＰ／ＩＰ（
Transmission Control Protocol/Internet Protocol）上に実装されたプロトコル、たとえば、ＨＴＴＰ（Hyper Text Transfer Protocol）などで行なえばよい。また、赤外線を用いる場合は、ＩｒＯＢＥＸ（Infrared Data Association Object Extended Protocol）などのプロトコルを用いて行なえばよい。

端末装置２０からの指示で、補助記憶メモリに格納されている録画データを読出し、サムネール画像の表示を行なう場合は、映像入力部１６、映像出力部１５、および指示入力部１４は、不要である。

図２は、本発明の実施の一形態である録画再生システム１の表示画面の表示例を示す図である。図２（ａ）は、録画再生装置１０の表示画面の一例を示す図であり、モニタ３０は、録画再生装置１０の映像出力部１５に相当し、モニタ３０の表示画面３１にテレビ放送の映像や録画データの再生映像が表示される。

図２（ｂ）は、端末装置２０の表示画面の一例を示す図であり、端末装置２０の一種であるリモコン機器４０の表示画面４１に、５つのサムネール画像４１ａ〜４１ｅが表示されている。ユーザは、操作ボタン４２ａ〜４２ｊを操作して、サムネール画像を表示し、表示されたサムネール画像を見ることにより、録画データの概要を理解したり、目的の映像を探したりすることができる。

操作ボタン４２ａ〜４２ｊを用いて行なう操作の中には、ビデオ機器で用いられている再生、早送り、巻戻し、スローといった操作が含まれている。

また、受信したサムネール画像は、一度にすべて表示する必要はなく、小さい画面であれば、受信したサムネール画像を、数枚づつスクロール表示してもよい。

図３は、本発明の実施の一形態における端末装置２０から指示できる操作の一覧の一例を示す図であり、操作ボタンの表示、キーコード、および生成するサムネール画像の時間間隔と枚数を１１種類の操作ボタンの表示毎に、一覧表にしたものである。

蘭５０、５１、および５２には、それぞれ、「操作ボタンの表示」、「キーコード」、および「生成するサムネール画像の時間間隔と枚数」と記載されており、５３ａ〜５３ｋの各行には、各操作ボタンの表示に対応するキーコードおよび生成するサムネール画像の時間間隔と枚数が示されている。たとえば、行５３ａには、操作ボタンの表示「＞」に対応するキーコード「００」と、サムネール画像の時間間隔と枚数「１．０（ｓ）／５枚」と記載されている。

行５３ａは、ビデオ機器の再生に相当する操作であり、行５３ｂ〜５３ｅは、早送りに相当する機能であり、それぞれ、５倍速、１０倍速、３０倍速、１５０倍速の早送りに対応する。行５３ｆ〜５３ｉは、巻戻しに相当する操作であり、それぞれ、５倍速、１０倍速、３０倍速、１５０倍速の早送りに対応し、行５３ｊは、０．５倍速のスロー再生、行５３ｋは、０．５倍速のスロー巻戻し再生である。

ユーザが押した操作ボタンに対応するキーコードが、端末装置２０から、録画再生装置１０に、操作指示として送信される。図３に示した一覧表は、端末装置２０の作業用メモリ２２２に格納されているが、「操作ボタンの表示」の蘭５０が無い一覧表が、つまり、「キーコード」と「生成するサムネール画像の時間間隔と枚数」との対応を示す一覧表が、録画再生装置１０の作業用メモリ１２２に格納されており、録画再生装置１０は、キーコードから、ユーザが指示した操作を把握することができる。

リモコン機器４０などの端末装置は、携帯性が重要であり、装置の大きさを小さくするために、操作ボタンの数を限定しており、上述した１１種類の操作にそれぞれ個別の操作ボタンを割り当てることができない場合が多い。このような場合は、ボタン操作の組合せや、ボタンを押している時間などに対応させて、指示させてもよい。

上述した実施形態では、生成する枚数を５枚としたが、表示画面の大きさに応じて増減してもよい。また、早送り、巻戻し、スローの再生速度や種類は、使用される形態を考慮して変更や増減をしてもよい。

また、予め用意した操作だけでなく、ユーザが、再生方向と生成するサムネール画像の時間間隔を指定できるようにして、指定された再生方向と生成するサムネール画像の時間間隔を、操作指示として、録画再生装置に指示してもよい。

また、録画データの再生開始位置（録画データの再生を開始するときの映像の時刻）や生成する枚数を指定できるようにして、指定された再生開始位置や生成する枚数を、操作指示として、録画再生装置１０に指示してもよい。この場合、録画再生装置１０は、現在停止している再生位置からサムネール画像を生成するのではなく、指定された再生開始位置からサムネール画像を生成する。

図４は、本発明の実施の一形態におけるメモリに格納されているプログラムまたは格納されるデータの記憶領域の構成を示す図である。図４（ａ）は、録画再生装置１０のプログラムメモリ１２１に格納されているプログラムを示しており、格納されているプログラムには、映像録画制御プログラム１２１ａ、映像再生制御プログラム１２１ｂ、サムネール画像生成制御プログラム１２１ｃ、およびサムネール画像生成プログラム１２１ｄなどがある。

映像録画制御プログラム１２１ａは、映像入力部１６から送られてくる映像を録画データとして作成し、補助記憶メモリ１２３に格納するといった制御を行なうプログラムである。映像再生制御プログラム１２１ｂは、補助記憶メモリ１２３に格納された録画データを再生し、映像表示部１５に表示するといった制御を行なうプログラムである。

サムネール画像生成制御プログラム１２１ｃは、サムネール画像を生成する処理の中心の役割を持つプログラムである。携帯端末２０の指示入力部２４から指示された操作指示を解釈して、解釈した内容をサムネール画像生成プログラム１２１ｄに指示する。つまり、携帯端末２０からの操作指示は、キーコードとして送信されるので、サムネール画像生成制御プログラム１２１ｃは、作業用メモリ１２２に保持している図３に示した一覧表に対応する一覧表に基づいて、送信されたキーコードから、サムネール画像を生成する時間間隔と枚数を求めて、作業用メモリ１２２に設定する。たとえば、携帯端末２０から受け取った操作指示のキーコードが、「００」であるときは、「１秒間隔」および「５枚」という情報を作業用メモリ１２２に設定する。

サムネール画像生成制御プログラム１２１ｃは、サムネール画像生成プログラム１２１ｄに、作業用メモリ１２２に設定した時間間隔と枚数で、サムネール画像を生成するように指示する。サムネール画像生成プログラム１２１ｄは、録画データの現在停止している再生位置から、作業用メモリ１２２に設定された時間間隔のサムネール画像を、作業用メモリ１２２に設定された枚数分生成し、生成したサムネール画像を補助記憶メモリ１２３に格納する。

また、サムネール画像生成制御プログラム１２１ｃは、補助記憶メモリ１２３から生成されたサムネール画像を読出し、端末装置２０に送信する。

図４（ｂ）は、録画再生装置１０の補助記憶メモリ１２３に格納されるデータの記憶領域を示しており、格納されるデータの記憶領域には、インデックスデータ記憶部１２３ａ、録画データ記憶部１２３ｂ、およびサムネール画像データ記憶部１２３ｃなどがある。

インデックスデータ記憶部１２３ａは、生成したサムネール画像を特定する情報であるインデックス番号と、そのインデックス番号が特定するサムネール画像の録画データ上の位置情報（時刻）とを関連付けて格納する記憶領域である。録画データ記憶部１２３ｂは、録画データを格納する記憶領域であり、サムネール画像データ記憶部１２３ｃは、サムネール画像を格納する記憶領域である。

図４（ｃ）は、端末装置２０のプログラムメモリ２２１に格納されているプログラムを示しており、格納されているプログラムには、映像表示制御プログラム２２１ａといったプログラムがある。

映像表示制御プログラム２２１ａは、補助記憶メモリ２２３に格納されているサムネール画像を映像出力部２５に表示するプログラムである。

図４（ｄ）は、端末装置２０の補助記憶メモリ２２３に格納されるデータの記憶領域を示しており、格納されるデータの記憶領域には、インデックスデータ記憶部２２３ａおよびサムネール画像データ記憶部２２３ｃなどがある。

図５は、本発明の実施の一形態における録画再生装置１０のサムネール画像生成制御プログラム１２１ｃの主たる処理を示すフローチャートである。この処理は、録画再生装置１０が、端末装置２０から開始指示を受信したときに開始される。

ステップＳ１では、端末装置２０から受信した操作指示にキーコードが含まれているかどうかを確認する。キーコードが含まれているときは、再生、早送り、巻戻し、または、スローといった操作指示がされた場合であり、ステップＳ２に進み、キーコードが含まれていないときは、ステップＳ５に進む。ステップＳ２では、最後に送信したサムネール画像の次に生成するサムネール画像の開始位置を、作業用メモリ１２２に設定する。

ステップＳ３では、作業用メモリ１２２に格納されている一覧表を参照し、キーコードに対応する生成するサムネール画像の時間間隔と枚数を、作業用メモリ１２２に設定する。ステップＳ４では、作業用メモリ１２２に設定された開始位置と時間間隔と枚数に基づいて、サムネール画像を生成するために、サムネール画像生成プログラム１２１ｄを呼び出した後、終了する。

ステップＳ５では、操作指示に再生開始位置と時間間隔が含まれているかどうかを確認する。再生開始位置と時間間隔が含まれているときは、ステップＳ６に進み、含まれていないときは、ステップＳ８に進む。

ステップＳ６では、操作指示に含まれる指定された再生開始位置をサムネール画像を生成する開始位置として、作業用メモリ１２２に設定する。ステップＳ７では、操作指示に含まれる指定された時間間隔と枚数を、作業用メモリ１２２に設定した後、ステップＳ４に進む。

ステップＳ８では、操作指示が無く、単に開始指示だけのときであり、サムネール画像を生成する開始位置として、デフォルト値を作業用メモリ１２２に設定する。ステップＳ９では、デフォルト値の時間間隔と枚数を、作業用メモリ１２２に設定した後、ステップＳ４に進む。

図６は、本発明の実施の一形態における録画再生装置１０のサムネール画像生成プログラム１２１ｄの処理を示すフローチャートである。この処理は、サムネール画像生成制御プログラム１２１ｃから呼び出されたときに開始される。ステップＳ１０では、作業用メモリ１２２に設定された開始位置から、設定された枚数のサムネール画像を、設定された時間間隔で、録画データの静止画像を抽出する。

ステップＳ１１では、幾何学変換や線形補間などの処理を行なって、抽出した静止画像を縮小した縮小画像を生成する。画像を縮小する処理は、静止画像を構成する各画素のＸ座標とＹ座標を、予め定められた倍率（縮小率）を乗じた位置に移動させることにより行なわれる。たとえば、元の画素サイズが２５６ｘ２５６のものを、縦方向および横方法ともに、サイズを１／２に縮小することを考えた場合、Ｘ，Ｙ座標（１００，５０）に位置する画素は、Ｘ，Ｙ座標（５０，２５）に移動する。この処理を元の静止画像を構成するすべての画素について行なうことにより、縮小処理が行なわれる。

なお、この処理を行なう際、変換後の座標位置が整数値の位置に対応しなかったり、あるいは、誤差により複数の画素が同じ画素位置に対応したりするために歪が生じることがあり、変換後の画素値に対して線形補間の処理を行なってもよい。線形補間処理は、たとえば、求めるべき変換後のそれぞれの画素値を、縮小して移動した画素のうち近傍の４画素との距離に応じて重み付けを施すことにより決定する線形補間処理を用いる。

ステップＳ１２では、生成した縮小画像に対して、減色処理を行い、画像のデータ量を削減する。減色処理は、元の色に近い色で近似したり、別の色を組み合わせて元の色に近い色を表現したりすることによって行なわれ、たとえば、誤差拡散法やディザ法などの方法を用いて行なう。なお、減色処理は、通信で送るデータ量を削減するためのものであり、必ずしも行なう必要はない。

上述した実施例では、設定された枚数のサムネール画像を生成したが、次に要求されると予測される再生位置、たとえば、生成した最後のサムネール画像の再生位置の前後の予め定められた範囲について、サムネール画像を生成して、作業用メモリ１２２に格納しておき、次にサムネール画像生成制御プログラム１２１ｃから呼び出されたときに、作業用メモリ１２２に設定された指示により生成しようとするサムネール画像が、既に作業用メモリ１２２にあれば、作業用メモリに格納されているサムネール画像を、新たに生成したサムネール画像としてもよい。これにより、次のサムネール画像をより早く表示することができるようになる。

また、サムネール画像を生成する位置の録画データが、ＣＭ（Commercial）部分のときは、ＣＭ部分の映像については、サムネール画像を作成せず、ＣＭ部分が経過した後から、継続してサムネール画像を生成してもよい。ＣＭ部分を識別するための手段は、たとえば、音声のステレオ／モノラルが切り替わったことを検出するといった手段がある。

また、文字認識プログラムをプログラムメモリ１２１に格納しておき、サムネール画像を生成する位置の前後の予め定められた範囲の映像について、この文字認識プログラムを用いて、映像中に文字があるかないかを検索し、テロップなどの識別可能な文字が含まれる映像については、優先してサムネール画像を生成するようにしてもよい。

文字の検索は、たとえば、テロップは、白い表示であることが多いという特性、さらに、表示される位置がほぼ決まっているという特性があり、その表示される部分の映像について、各画素のＲＧＢ（Red Green Blue）の３色の諧調を用いて、映像間の諧調の変化を算出し、予め定めた敷居値を越えたときに、文字を検出したと判断することにより文字を含む映像を検索することができる。これにより、サムネール画像だけでは内容を把握しにくいときに、より内容を理解することができるようになる。

また、サムネール画像を生成する際に、先頭のサムネール画像に対応する映像から、予め定められた時間分の音声を、音声データとして、作業用メモリ１２２に格納し、端末装置２０にサムネール画像とともに送信し、サムネール画像を表示する際に、スピーカやイヤホンといった図示されていない音声出力部から音声を出力してもよい。音声データは、映像データより情報量が少なく、サムネール画像だけでは内容を把握しにくいときに、少ないデータ通信量で、映像の内容を理解することができるようになる。

また、サムネール画像を生成するときに、各サムネール画像を特定するインデックス番号を生成し、サムネール画像と関連付けてインデックデータ記憶部１２３ａに格納しておき、端末装置２０にサムネール画像を送信する際に、このインデックス番号も送信し、ユーザが、端末装置２０の表示画面で、一つのサムネール画像を特定したときに、端末装置２０は、このサムネール画像に対応するインデックス番号のみを、録画再生装置１０に送信すれば、録画再生装置１０は、どのサムネール画像が指定されたかを把握することができ、指定されたサムネール画像の再生位置から、予め定められた処理、たとえば、映像を再生するといった処理を行なうことができる。

これにより、録画再生装置１０で再生している映像を停止することなく、次に再生したい映像の検索と頭出しを行なうことができる。

また、指定されたサムネール画像の再生位置から再生される映像を、たとえば、ＭＰＥＧ２形式に圧縮された映像データとして、端末装置２０に送信し、端末装置２０で映像を再生してもよい。映像データを送信する方式は、ストリーミングと呼ばれる方式を用いて、ＲＴＰ（Real-time Transport Protocol）などのプロトコルで送信すればよく、録画再生装置１０にＲＴＰサーバプログラム、端末装置２０にＲＴＰクライアントプログラムを、それぞれ、プログラムメモリ１２１、２２１に格納して実行できるようにしておくことに実現可能である。

これにより、特にデータ通信量に応じて課金されるような通信手段を経由して映像を再生したい場合に、課金される金額を抑えることができ、比較的高速な通信手段において、不要な部分の映像は、サムネール画像により通信のデータ量を抑え、必要な部分の映像のみ、ストリーミング方式で映像を再生するといった利用形態に適している。

また、映像録画制御プログラム１２１ａが選局された放送局から放送される映像から作成した録画データに対して、サムネール画像を生成して、サムネール画像データ記憶部１２３ｃに格納してくことにより、ユーザは、格納されたサムネール画像に対して、再生、早送り、巻戻し、スローといった操作を行なって、現在選局して放送されている放送の過去の映像をサムネール画像として見ることができる。

また、映像録画制御プログラム１２１ａが複数の放送局から放送される映像から作成した録画データに対して、サムネール画像を生成して、サムネール画像データ記憶部１２３ｃに格納してくことにより、ユーザは、現在放送されている複数の放送の過去の映像を、ほぼリアルタイムに選択して見ることにより、放送局を選局することができ、また、格納されたサムネール画像に対して、再生、早送り、巻戻し、スローといった操作を行なって、複数の放送局から放送されている放送の過去の映像をサムネール画像として見ることができる。

複数の放送局の映像を録画するために、複数のチューナを搭載して並行して録画データを作成してもよいし、複数の放送局に対し一つのチューナにより、時分割で放送局を切り替えて録画データを作成してもよい。サムネール画像は、もともと、断続的なものであり、一つの放送局の映像が断続的なものであっても、実用上特に支障はない。

図７は、本発明の実施の一形態における録画再生装置１０のサムネール画像生成プログラム１２１ｄが行なう静止画像の抽出処理を説明するための図であり、動画像を圧縮する技術、たとえば、ＭＰＥＧ２（Moving Picture Experts Group phase 2）で記録された録画データを時系列に表示したものである。ＭＰＥＧ２は、放送局で必要とされる程度の品質の符号化技術であり、３種類のフレーム画像、つまり、過去や未来のフレーム画像との関係を用いずに元の画像を復元できるキーフレームと呼ばれるＩピクチャ、過去のＩピクチャあるいはＰピクチャとの関係を基に生成されるＰピクチャ、および、前後のＩピクチャ又はＰピクチャとの関係を基に生成されるＢピクチャから構成される。

静止画像を抽出する際、抽出したい位置のフレーム画像が、Ｉピクチャ、たとえば、Ｉピクチャ６１である場合には、単にそのフレーム画像を復号して抽出するだけでよい。抽出したい位置のフレーム画像が、Ｐピクチャ、たとえば、Ｐピクチャ６４である場合には、Ｉピクチャ６１を基に復号する必要があり、また、抽出したい位置のフレーム画像が、Ｂピクチャ、たとえば、Ｂピクチャ６２である場合には、Ｉピクチャ６１又はＰピクチャ６４を基に復号する必要がある。

図８は、本発明の実施の一形態におけるサムネール画像の表示例とそれに対する操作を説明するための図である。画面８０〜８４は、５つのサムネール画像を表示した端末装置２０の表示画面を、５つ示したものである。

画面８０は、再生指示によって、最初（１回目）に表示される画面であり、時刻ｔ＝０．０から時刻ｔ＝４．０までの、時間間隔１．０の時刻の５枚のサムネール画像が表示されており、それぞれに、各サムネール画像の時刻が表示されている。

ユーザが目的の映像はもっと先にあると思い、端末装置２０から１０倍速の早送りを指示すると、画面８１が表示され、時刻ｔ＝１４．０から時刻ｔ＝５４．０までの、時間間隔１０．０の時刻の５枚のサムネール画像が表示される。これは、前回の最終のサムネール画像の時刻ｔ＝４．０を基点に、時間間隔１０．０で生成されたサムネール画像である。

ユーザが、目的の画像が時刻ｔ＝４４．０付近にあると思い、端末装置２０から３倍速の巻戻しを指示すると、画面８２が表示され、時刻ｔ＝５１．０から時刻ｔ＝３９．０までの、時間間隔３．０の時刻の５枚のサムネール画像が表示される。

ユーザが、目的の画像がこの付近にあると思い、端末装置２０から再生を指示すると、画面８３が表示され、時刻ｔ＝４０．０から時刻ｔ＝４４．０までの、時間間隔１．０の時刻の５枚のサムネール画像が表示される。

この中に目的の画像がないので、ユーザは、引き続き再生を指示すると、画面８４が表示され、時刻ｔ＝４５．０から時刻ｔ＝４９．０までの、時間間隔１．０の時刻の５枚のサムネール画像が表示される。この中の時刻ｔ＝４６．０のサムネール画像（灰色表示のサムネール画像）が、目的の画像であり、ユーザは、見たかったシーンを見ることができる。

上述した操作を行なうことにより目的の画像に到達できるので、つまり、ユーザの意思によって、表示の時間間隔を自由に変化させながら、ビデオ機器の操作感で表示時刻を前後に操作できるので、従来技術に比べて、より自然な操作感でサムネール画像の表示が可能となる。

上述した実施例では、つまり、録画再生装置１０と端末装置２０とを含んで構成される画像再生システム１について説明したが、本発明は、この構成に限定されるものではなく、たとえば、液晶モニタとＰＶＲ機能が備えられた単一の装置で、放送を受信し、録画と再生が行なえる装置であってもよい。

図９は、本発明の実施の他の形態である画像再生装置７０のハードウエア構成を示す図であり、単一の装置からなるものである。画像再生装置７０は、中央制御部７１、記憶部７２、指示入力部７３、映像入力部７４、および映像出力部７５を含んで構成され、記憶部７２には、プログラムメモリ７２１、作業用メモリ７２２、および補助記憶メモリ７２３がある。

中央制御部７１は、画像再生装置７０全体を制御する制御部で、たとえば、マイクロコンピュータで実現されるＣＰＵにより構成され、プログラムを格納するメモリであるプログラムメモリ７２１に格納されている種々のプログラムを実行し、また、処理に必要な情報を一時的に格納するためのメモリである作業用メモリ７２２に格納することにより、種々の処理を行なう。

プログラムメモリ７２１の中には、録画再生装置１０のプログラムメモリ１２１内に格納されている映像録画制御プログラム１２１ａ、映像再生制御プログラム１２１ｂ、サムネール画像生成制御プログラム１２１ｃ、およびサムネール画像生成プログラム１２１ｄと同じプログラムと、端末装置２０のプログラムメモリ２２１に格納されている画像表示制御プログラム２２１ａと同じプログラムなどが格納されている。

録画データと録画データから取得した静止画像を縮小したサムネール画像などを格納する補助記憶メモリ７２３は、内臓型のＨＤＤなどの記憶媒体を用いるが、外付け型のＨＤＤや、分離可能な記録媒体、たとえば、磁気テープなどを装填して書込みや読取りが可能な記憶装置を接続して用いてもよい。補助記憶メモリ７２３に格納されるデータの記憶領域には、録画再生装置１０の補助記憶メモリ１２３内の記憶領域であるインデックスデータ記憶部１２３ａ、録画データ記憶部１２３ｂ、およびサムネール画像データ記憶部１２３ｃと同じ記憶領域がある。

指示入力部７３は、ユーザが画像再生装置７０に対する操作を行なうための入力部であり、たとえば、携帯電話などに備えられている数字や文字などを入力するボタンや電源投入切断などを行なう操作ボタン、または、モバイルＰＣなどのキーボードやマウスが用いられる。

ユーザは、指示入力部７３からサムネール画像の表示を開始するための開始指示と種々の操作を指示する操作指示を行なうと、指示入力部７３は、入力された開始指示と操作指示を中央制御部７１に通知する。

開始指示と操作指示を通知された中央制御部７１は、操作指示に従って、補助記憶メモリ７２３に格納されている録画データを基にサムネール画像を生成し、生成したサムネール画像を、補助記憶メモリ７２３に格納するとともに、液晶ディスプレイやモニタといった表示を行なうための出力部である映像出力部７５の表示画面に表示する。

ユーザは、表示されたサムネール画像を見て、次の操作指示を指示入力部７３から指示する。新たな操作指示を指示された中央制御部７１は、現在停止している再生位置から、新たな操作指示に従ってサムネール画像を生成し、生成したサムネール画像を、最初に表示したサムネール画像に置き替えて表示する。以後、ユーザが目的の映像に到達するまで、この動作が繰り返される。

映像入力部７４は、テレビ放送を受信するためのアンテナやチューナ、あるいは、映像や音声の入力端子、Ａ−Ｄ変換を行なう部位などで実現されるものである。映像出力部７５は、テレビ放送の映像や録画データを再生した映像を表示するための表示部で、たとえば、液晶ディスプレイやモニタが用いられる。

図１０は、本発明の実施の他の形態である画像再生装置７０の表示画面の表示例を示す図である。図１０（ａ）は、録画データから生成したサムネール画像を表示しており、映像出力部７５は、サムネール画像を表示する際、表示画面７６の下部にサムネール画像表示領域７７を確保して、そこにサムネール画像、たとえば、５枚のサムネール画像７７ａ〜７７ｅを表示する。背景には、テレビ放送を表示しておいてもよいし、別の画像やメニュー画面を表示してもよいし、あるいは、サムネール画像を拡大して順次表示してもよい。

図１０（ｂ）は、複数の放送局のサムネール画像を表示した表示画面であり、映像出力部７５は、サムネール画像を表示する際、表示画面に、たとえば、３つの放送局のサムネール画像を表示するために、３つのサムネール画像表示領域７７〜７９を確保して、それぞれ、５つのサムネール画像を表示する。

ユーザが表示されているサムネール画像を選択すると、中央制御部７１は、選択されたサムネール画像の放送局を選局したり、または、選択されたサムネール画像の再生位置から予め定められた動作、たとえば、サムネール画像の再生といった動作を行なう。

上述した実施の形態では、録画データに対してサムネール画像を生成したが、複数の静止画像から構成される画像データ、たとえば、録画データから作成された複数の静止画像から構成される画像データからサムネール画像を生成して表示する場合にも適用できる。

また、サムネール画像は、録画データ内の特定の時刻（録画データの特定の再生位置）の静止画像に限定されるものではなく、任意の位置、たとえば、ある範囲の位置、すなわち、ある範囲の時刻の静止画像についてサムネール画像を生成して表示してもよい

本発明の実施の一形態である画像再生システム１のハードウエア構成を示す図である。 本発明の実施の一形態である録画再生システム１の表示画面の表示例を示す図である。 本発明の実施の一形態における端末装置２０から指示できる操作の一覧の一例を示す図である。 本発明の実施の一形態におけるメモリに格納されているプログラムまたは格納されるデータの記憶領域の構成を示す図である。 本発明の実施の一形態における録画再生装置１０のサムネール画像生成制御プログラム１２１ｃの主たる処理を示すフローチャートである。 本発明の実施の一形態における録画再生装置１０のサムネール画像生成プログラム１２１ｄの処理を示すフローチャートである。 本発明の実施の一形態における録画再生装置１０のサムネール画像生成プログラム１２１ｄが行なう静止画像の抽出処理を説明するための図である。 本発明の実施の一形態におけるサムネール画像の表示例とそれに対する操作を説明するための図である。 本発明の実施の他の形態である画像再生装置７０のハードウエア構成を示す図である。 本発明の実施の他の形態である画像再生装置７０の表示画面の表示例を示す図である。 第５の従来技術による映像録画装置の一実施例におけるサムネール画像の表示例とそれに対する操作を説明するための図である。

符号の説明

１ 画像再生システム
１０ 録画再生装置
１１，２１，７１ 中央制御部
１２，２２，７２ 記憶部
１３，２３ 通信部
１４，２４，７３ 指示入力部
１５，２５，７５ 映像出力部
１６，７４ 映像入力部
２０ 端末装置
３０ モニタ
３１，４１，７６ 表示画面
４０ リモコン機器
４１ａ〜４１ｅ，７７ａ〜７７ｅ サムネール画像
４２ａ〜４２ｊ 操作ボタン
７７〜７９ サムネール画像表示領域
１２１，２２１，７２１ プログラムメモリ
１２１ａ 映像録画制御プログラム
１２１ｂ 映像再生制御プログラム
１２１ｃ サムネール画像生成制御プログラム
１２１ｄ サムネール画像生成プログラム
１２２，２２２，７２２ 作業用メモリ
１２３，２２３，７２３ 補助記憶メモリ
１２３ａ，２２３ａ インデックスデータ記憶部
１２３ｂ 録画データ記憶部
１２３ｃ，２２３ｂ サムネール画像データ記憶部
２２１ａ 映像表示制御プログラム

Claims (15)

1. 動画像データを記憶する記憶手段と、
   前記動画像データの再生開始位置と、所定時間間隔に生成されるサムネール画像の枚数とを規定する操作指示を端末装置から受信する受信手段と、
   前記受信手段による新たな操作指示の受信の度に、前記記憶手段に記憶された動画像データの画像であって、前記再生開始位置からの画像を縮小したサムネール画像を前記新たな操作指示により規定される枚数分生成する生成手段と、
   前記生成手段により生成されたサムネール画像を、受信する新たな操作指示に基づいて前記端末装置に送信する送信手段とを備えたことを特徴とする録画再生装置。
2. 前記生成手段は、前記時間間隔とサムネール画像の枚数との組み合わせによって、前記記憶手段に記憶された動画像データのサムネール化すべき所定位置を決定することを特徴とする請求項１記載の録画再生装置。
3. 前記動画像データがＣＭの映像を含むかどうかを検出する検出手段を有し、
   前記生成手段は、前記検出手段が検出したＣＭ部分の動画像データに対してはサムネール画像を生成せずに、ＣＭ部分に引続く動画像データに対してサムネール画像を生成することを特徴とする請求項１記載の録画再生装置。
4. 前記動画像データの現在の再生停止位置の前後予め定められた範囲の動画像データの中に文字表示が含まれているかどうかを検索する検索手段を有し、
   前記生成手段は、前記検索手段が文字表示を検索したときは、検索された文字表示を含む範囲の動画像データからサムネール画像を生成し、生成したサムネール画像を優先して前記生成する枚数に含めることを特徴とする請求項１記載の録画再生装置。
5. サムネール画像を表示する表示手段を有し、
   前記生成手段が生成する最初のサムネール画像の再生位置から、予め定められた時間分の音声データを取得する取得手段と、
   前記表示手段がサムネール画像を表示する際に、前記取得手段により取得した音声データを出力する音声出力手段とを有することを特徴とする請求項１記載の録画再生装置。
6. 複数の放送局から放送されている映像コンテンツの中から一つの映像コンテンツを選択して受信するコンテンツ受信手段を有し、
   前記記憶手段は、前記コンテンツ受信手段により受信されたコンテンツを動画像データとして記憶することを特徴とする請求項１記載の録画再生装置。
7. 前記受信手段は、複数の放送局から放送されている映像コンテンツの中から一つの映像コンテンツを予め定められた時間ずつ順次選択して受信し、
   順次選択されて受信した映像コンテンツから動画像データを作成する作成手段、および前記画像データを再生する再生方向と、生成されるサムネール画像の時間間隔との組合せを予め定める組合せの中から選択する選択手段を有し、
   前記生成手段は、前記選択手段により選択された組合せに基づいて、作成された動画像データのうち選択された映像コンテンツの動画像データに対して、サムネール画像を生成することを特徴とする請求項６記載の録画再生装置。
8. 前記生成されたサムネール画像を、前記生成されたサムネール画像の基になった映像コンテンツを放送した放送局と関連付けて保存する保存手段を有し、
   前記送信手段は、複数の放送局に対応するサムネール画像を送信することを特徴とする請求項７記載の録画再生装置。
9. 動画像データを記憶する記憶手段、前記記憶手段に記憶される動画像データからサムネール画像を生成する生成手段、および前記生成手段により生成されたサムネール画像を送信する録画通信手段を備える録画再生装置と、前記録画再生装置から送信されるサムネール画像を受信する端末通信手段、および前記端末通信手段により受信されたサムネール画像を表示する表示手段を備える端末装置とを含む画像再生システムであって、
   前記端末装置は、前記動画像データの再生開始位置と、所定時間間隔に生成されるサムネール画像の枚数とを規定する操作指示を指示する指示手段をさらに含み、
   前記端末通信手段は、前記指示手段により指示された操作指示を前記録画再生装置に送信し、
   前記録画通信手段は、前記端末装置から操作指示を受信し、
   前記生成手段は、前記録画通信手段による新たな操作指示の受信の度に、前記記憶手段に記憶された動画像データの画像であって、前記再生開始位置からの画像を縮小したサムネール画像を前記新たな操作指示により規定される枚数分生成し、
   前記録画通信手段は、前記生成手段により生成されたサムネール画像を、受信する新たな操作指示に基づいて前記端末装置に送信することを特徴とする画像再生システム。
10. 前記録画再生装置は、生成したサムネール画像の動画像データ内の再生位置を特定する位置特定情報と、サムネール画像を特定するサムネール特定情報とを、前記生成したサムネール画像とともに保存する特定情報保存手段を有し、
    前記録画通信手段は、サムネール画像を送信する際に、前記サムネール特定情報を前記サムネール画像とともに送信し、
    前記端末通信手段は、送信されたサムネール画像の中から選択されたサムネール画像を特定するサムネール特定情報を前記録画再生装置に送信し、
    前記録画再生装置は、受信したサムネール特定情報により、予め定められた前記録画再生装置の操作が行なわれたものであるとして、前記サムネール画像の開始位置から前記予め定められた操作に伴う動作を行なうことを特徴とする請求項９記載の画像再生システム。
11. 前記録画再生装置は、生成したサムネール画像の動画像データ内の再生位置を特定する位置特定情報と、サムネール画像を特定するサムネール特定情報とを、前記生成したサムネール画像とともに保存する特定情報保存手段を有し、
    前記録画通信手段は、サムネール画像を送信する際に、前記サムネール特定情報を前記サムネール画像とともに送信し、
    前記端末通信手段は、送信されたサムネール画像の中から選択されたサムネール画像を特定するサムネール特定情報を前記録画再生装置に送信し、
    前記録画通信手段は、受信したサムネール特定情報が特定するサムネール画像の開始位置からの動画像データを前記端末装置に送信し、
    前記表示手段は、送信された動画像データを再生して表示することを特徴とする請求項９記載の画像再生システム。
12. 前記録画再生装置は、複数の放送局から放送されている映像コンテンツの中から一つの映像コンテンツを予め定められた時間ずつ順次選択して受信するコンテンツ受信手段と、
    前記順次選択して受信した映像コンテンツから動画像データを作成する作成手段と、
    作成した動画像データを、前記作成した動画像データの基になった映像コンテンツを放送した放送局を特定する放送局特定情報とともに保存する保存手段を有し、
    前記端末装置は、前記画像データを再生する再生方向と、生成されるサムネール画像の時間間隔との組合せを予め定める組合せの中から選択する選択手段を有し、
    前記生成手段は、作成された動画像データに対して、前記選択手段により選択された組合せに基づいて、サムネール画像を生成し、
    前記録画通信手段は、生成されたサムネール画像を送信する際に、前記放送局特定情報を、前記生成されたサムネール画像とともに送信し、
    前記端末装置の表示手段は、前記放送局特定情報により特定される放送局毎に順次サムネール画像を表示し、
    前記端末通信手段は、表示されたサムネール画像の中から選択されたサムネール画像の放送局を示す前記放送局特定情報を前記録画再生装置に送信し、
    前記録画通信手段は、受信した放送局特定情報が特定する放送局を選択することを特徴とする請求項９記載の画像再生システム。
13. 動画像データの再生開始位置と、所定時間間隔に生成されるサムネール画像の枚数とを規定する操作指示を新たに受信する度に、動画像データの画像であって、前記再生開始位置からの画像を縮小したサムネール画像を前記新たに受信した操作指示により規定される枚数分生成する録画再生装置から送信されたサムネール画像を受信する端末受信手段と、
    前記端末受信手段により受信したサムネール画像を表示する表示手段と、
    前記操作指示を指示する指示手段と、
    前記指示手段により指示された操作指示を前記録画再生装置に送信する端末送信手段とを備えることを特徴とする端末装置。
14. 前記新たな操作指示により規定される再生開始位置は、現在の再生停止位置であることを特徴とする請求項１記載の録画再生装置。
15. 前記新たな操作指示により規定される再生開始位置は、現在の再生停止位置であることを特徴とする請求項９記載の画像再生システム。

Images