JP4496263B2 - 情報処理装置およびコンテンツ表示方法 - Google Patents

Description

本発明は録画された映像コンテンツデータに登場する顔画像を番組名と共に表示する情報処理装置およびコンテンツ表示方法に関する。

一般に、ビデオレコーダ、パーソナルコンピュータといった情報処理装置は、テレビジョン放送番組データのような各種映像コンテンツデータを記録および再生することが可能である。この場合、情報処理装置に格納された各映像コンテンツデータにはタイトル名が付加されるが、タイトル名だけでは、ユーザが、各映像コンテンツデータがどのような内容のものであるかを把握することは困難である。このため、映像コンテンツデータの内容を把握するためには、その映像コンテンツデータを再生することが必要となる。しかし、総時間長の長い映像コンテンツデータの再生には、たとえ早送り再生機能等を用いた場合であっても、多くの時間が要される。

特許文献１には、受信した電子番組情報から出演者名を抽出し、抽出した出演者名を予め記憶しておいた顔画像データベースとの照合を行い、一致した顔画像データベースの顔画像を出演者名と共に表示する装置が開示されている。
特開２００７−２１４７０８号公報

しかし、特許文献１のように予め記憶された顔画像を表示すると、ユーザは、録画された映像コンテンツデータ内の人物の顔画像のイメージを参照することができない。また、予め記憶しておいた顔画像データベース内の画像は、実際の録画された映像コンテンツデータ内の人物の顔画像と異なるため、ずれが生じる可能性がある。例えば、髪型やメイクといった日々異なる外見の違いが反映されることがない。さらに、予め記憶しておいた顔画像データベース内の画像は、年々古くなるため、実際の録画された映像コンテンツデータ内の人物の顔画像とずれが生じる可能性がある。

本発明は上述の事情を考慮してなされたものであり、実際の録画された映像コンテンツデータの内容の把握を容易化することによりユーザの利便性を向上させることができる情報処理装置およびコンテンツ表示方法を提供することを目的とする。

上述の課題を解決するため、本発明は、複数の照合用データと名前とを対応付けて記憶する記憶手段と、映像コンテンツデータを入力する入力手段と、前記映像コンテンツデータの番組名および登場人物名を含み得る番組情報を取得する取得手段と、入力された前記映像コンテンツデータから複数の顔画像を抽出する抽出手段と、前記映像コンテンツデータの情報を表示する場合、当該映像コンテンツデータの前記番組名と共に、抽出された前記複数の顔画像のうち当該映像コンテンツデータの前記番組情報に含まれる前記登場人物名と一致する前記名前に対応付けられた前記照合用データと一致する顔画像を登場人物名毎に表示する第１の処理を行う第１の処理手段と、前記映像コンテンツデータの情報を表示する場合、抽出された前記複数の顔画像のうち前記照合用データと一致した顔画像を、前記映像コンテンツデータにおける出現回数の多い登場人物から順に登場人物名毎に表示する第２の処理を行う第２の処理手段と、前記第１の処理と前記第２の処理とのうち、実行する処理を切り替える切替手段とを備えることを特徴とする情報処理装置を提供する。

また、本発明の情報処理装置は、映像コンテンツデータを入力する情報処理装置で用いられるコンテンツ表示方法であって、複数の照合用データと名前とを対応付けて記憶するステップと、前記映像コンテンツデータの番組名と登場人物名とを含み得る番組情報を取得するステップと、入力された前記映像コンテンツデータから複数の顔画像を抽出するステップと、前記映像コンテンツデータの情報を表示する場合、抽出された前記複数の顔画像のうち当該映像コンテンツデータの番組情報に含まれる抽出された前記登場人物名と一致する前記名前に対応付けられた前記照合用データに一致する顔画像を、当該映像コンテンツデータの前記番組名と共に登場人物名毎に表示する第１の処理を行うステップと、前記照合用データと一致した顔画像を前記出現回数の多い順に登場人物毎に表示する第２の処理を行うステップと、前記第１の処理と前記第２の処理とのうち、実行する処理を切り替えるステップとを備えることを特徴とするコンテンツ表示方法を提供する。

本発明によれば、実際の録画された映像コンテンツデータの内容の把握を容易化することによりユーザの利便性を向上させることができる。

以下、図面を参照して、本発明の実施形態を説明する。

まず、図１および図２を参照して、本発明の一実施形態に係る情報処理装置の構成を説明する。本実施形態の情報処理装置は、例えば、情報処理装置として機能するノートブック型の携帯型パーソナルコンピュータ１０から実現されている。

このパーソナルコンピュータ１０は、放送番組データ、外部機器から入力されるビデオデータといった、映像コンテンツデータを記録および再生することができる。即ち、パーソナルコンピュータ１０は、テレビジョン放送信号によって放送される放送番組データの視聴および録画を実行するためのテレビジョン（ＴＶ）機能を有している。このＴＶ機能は、例えば、パーソナルコンピュータ１０に予めインストールされているＴＶアプリケーションプログラムによって実現されている。また、ＴＶ機能は、外部のＡＶ機器から入力されるビデオデータを記録する機能、および記録されたビデオデータおよび記録された放送番組データを再生する機能も有している。

さらに、パーソナルコンピュータ１０は、パーソナルコンピュータ１０に格納されたビデオデータ、放送番組データのような映像コンテンツデータに登場する人物の顔画像の一覧等を表示する顔画像一覧表示機能を有している。この顔画像一覧表示機能は、例えば、ＴＶ機能内にその一機能として実装されている。顔画像一覧表示機能は、映像コンテンツデータの概要等をユーザに提示するための機能の一つである。この顔画像一覧表示機能は、映像コンテンツデータ全体の中から抽出された顔画像（以下、顔画像サムネイルと称する）を表示することができる。また、予め記憶されている顔画像（以下、既定顔画像と称する）と電子番組情報の出演者名に従って照合し、照合が一致した顔画像サムネイル（以下、一致顔画像と称する）および出演者名と録画された映像コンテンツデータおよび番組名とを共に一覧表示することができる。さらに、一致顔画像の表示順は、電子番組情報の出演者名の表示順に並べたり、一致顔画像の映像コンテンツデータにおける出現回数を計測し、出現回数順に並べることもできる。また、お気に入りの優先リストを作成し、この優先リストに該当する出演者名を優先的に最初に表示させたり、照合された一致顔画像のうち、ユーザが指定した一致顔画像に該当する出演者名を優先的に最初に表示させることができる。

図１はコンピュータ１０のディスプレイユニットを開いた状態における斜視図である。本コンピュータ１０は、コンピュータ本体１１と、ディスプレイユニット１２とから構成されている。ディスプレイユニット１２には、ＴＦＴ−ＬＣＤ（Thin Film Transistor Liquid Crystal Display：表示部）１７から構成される表示装置が組み込まれている。

ディスプレイユニット１２は、コンピュータ本体１１に対し、コンピュータ本体１１の上面が露出される開放位置とコンピュータ本体１１の上面を覆う閉塞位置との間を回動自在に取り付けられている。コンピュータ本体１１は薄い箱形の筐体を有しており、その上面にはキーボード１３、本コンピュータ１０をパワーオン／パワーオフするためのパワーボタン１４、入力操作パネル１５、タッチパッド１６、およびスピーカ１８Ａ，１８Ｂなどが配置されている。

入力操作パネル１５は、押されたボタンに対応するイベントを入力する入力装置であり、複数の機能をそれぞれ起動するための複数のボタンを備えている。これらボタン群には、ＴＶ機能（視聴、録画、録画された放送番組データ／ビデオデータの再生）を制御するための操作ボタン群も含まれている。また、コンピュータ本体１１の正面には、本コンピュータ１０のＴＶ機能をリモート制御するリモコンユニットとの通信を実行するためのリモコンユニットインタフェース部２０が設けられている。リモコンユニットインタフェース部２０は、赤外線信号受信部などから構成されている。

コンピュータ本体１１の例えば右側面には、ＴＶ放送用のアンテナ端子１９が設けられている。また、コンピュータ本体１１の例えば背面には、例えばＨＤＭＩ(high-definition multimedia interface)規格に対応した外部ディスプレイ接続端子が設けられている。この外部ディスプレイ接続端子は、放送番組データのような映像コンテンツデータに含まれる映像データ（動画像データ）を外部ディスプレイに出力するために用いられる。

次に、図２を参照して、本コンピュータ１０のシステム構成について説明する。

本コンピュータ１０は、図２に示されているように、ＣＰＵ１０１、ノースブリッジ１０２、主メモリ１０３、サウスブリッジ１０４、グラフィクスプロセッシングユニット（ＧＰＵ）１０５、ビデオメモリ（ＶＲＡＭ）１０５Ａ、サウンドコントローラ１０６、ＢＩＯＳ−ＲＯＭ１０９、ＬＡＮコントローラ１１０、ハードディスクドライブ（ＨＤＤ）１１１、ＤＶＤドライブ１１２、ビデオプロセッサ１１３、メモリ１１３Ａ、カードコントローラ１１３、無線ＬＡＮコントローラ１１４、IEEE 1394コントローラ１１５、エンベデッドコントローラ／キーボードコントローラＩＣ（ＥＣ／ＫＢＣ）１１６、ＴＶチューナ１１７、およびＥＥＰＲＯＭ１１８等を備えている。

ＣＰＵ１０１は本コンピュータ１０の動作を制御するプロセッサであり、ハードディスクドライブ（ＨＤＤ）１１１から主メモリ１０３にロードされる、オペレーティングシステム（ＯＳ）２０１、およびＴＶアプリケーションプログラム２０２のような各種アプリケーションプログラムを実行する。ＴＶアプリケーションプログラム２０２はＴＶ機能を実行するためのソフトウェアである。このＴＶアプリケーションプログラム２０２は、ＴＶチューナ１１７によって受信された放送番組データを視聴するためのライブ再生処理、受信された放送番組データをＨＤＤ１１１に記録する録画処理、およびＨＤＤ１１１に記録された放送番組データ／ビデオデータを再生する再生処理等を実行する。また、ＣＰＵ１０１は、ＢＩＯＳ−ＲＯＭ１０９に格納されたＢＩＯＳ（Basic Input Output System）も実行する。ＢＩＯＳはハードウェア制御のためのプログラムである。

ノースブリッジ１０２はＣＰＵ１０１のローカルバスとサウスブリッジ１０４との間を接続するブリッジデバイスである。ノースブリッジ１０２には、主メモリ１０３をアクセス制御するメモリコントローラも内蔵されている。また、ノースブリッジ１０２は、PCI EXPRESS規格のシリアルバスなどを介してＧＰＵ１０５との通信を実行する機能も有している。

ＧＰＵ１０５は、本コンピュータ１０のディスプレイモニタとして使用されるＬＣＤ１７を制御する表示コントローラである。このＧＰＵ１０５によって生成される表示信号はＬＣＤ１７に送られる。また、ＧＰＵ１０５は、ＨＤＭＩ制御回路３およびＨＤＭＩ端子２を介して、外部ディスプレイ装置１にデジタル映像信号を送出することもできる。

ＨＤＭＩ端子２は上述の外部ディスプレイ接続端子である。ＨＤＭＩ端子２は、非圧縮のデジタル映像信号と、デジタルオーディオ信号とを一本のケーブルでテレビのような外部ディスプレイ装置１に送出することができる。ＨＤＭＩ制御回路３は、ＨＤＭＩモニタと称される外部ディスプレイ装置１にデジタル映像信号をＨＤＭＩ端子２を介して送出するためのインタフェースである。

サウスブリッジ１０４は、ＬＰＣ（Low Pin Count）バス上の各デバイス、およびＰＣＩ（Peripheral Component Interconnect）バス上の各デバイスを制御する。また、サウスブリッジ１０４は、ハードディスクドライブ（ＨＤＤ）１１１およびＤＶＤドライブ１１２を制御するためのＩＤＥ（Integrated Drive Electronics）コントローラを内蔵している。さらに、サウスブリッジ１０４は、サウンドコントローラ１０６との通信を実行する機能も有している。

またさらに、サウスブリッジ１０４には、PCI EXPRESS規格のシリアルバスなどを介してビデオプロセッサ１１３が接続されている。

ビデオプロセッサ１１３は、映像コンテンツデータの画像処理に関する各種処理を実行するプロセッサである。このビデオプロセッサ１１３は、映像コンテンツデータの画像処理を実行するための処理部として機能する。すなわち、映像コンテンツデータの画像処理においては、ビデオプロセッサ１１３は、映像コンテンツデータに含まれる動画像データから複数の顔画像を抽出すると共に、抽出された各顔画像（顔画像サムネイル）を一覧表示することができる（後述：図６参照）。また、予めＨＤＤ１１１等に記憶されている既定顔画像（照合用顔画像）とＥＰＧ（Electronic Program Guide）等の電子番組情報の出演者名に従って照合し、照合が一致した顔画像サムネイル（一致顔画像）および出演者名と録画された映像コンテンツデータおよび番組名とを共に一覧表示する。

さらに、ビデオプロセッサ１１３は、例えば、一致顔画像の表示順を変更することができる。照合された一致顔画像を電子番組情報の出演者名の表示順に並べたり、一致顔画像の映像コンテンツデータにおける出現回数を計測し、出現回数順に並べることもできる。また、お気に入りの優先リストを作成し、この優先リストに該当する出演者名を優先的に最初に表示させたり、照合された一致顔画像のうち、ユーザが指定した一致顔画像に該当する出演者名を優先的に最初に表示させることができる。

メモリ１１３Ａは、ビデオプロセッサ１１３の作業メモリとして用いられる。映像コンテンツデータの画像処理を実行するためには多くの演算量が必要とされる。本実施形態においては、ＣＰＵ１０１とは異なる専用のプロセッサであるビデオプロセッサ１１３がバックエンドプロセッサとして使用され、このビデオプロセッサ１１３によって映像コンテンツデータの画像処理が実行される。よって、ＣＰＵ１０１の負荷の増加を招くことなく、インデキシング処理を実行することが出来る。

サウンドコントローラ１０６は音源デバイスであり、再生対象のオーディオデータをスピーカ１８Ａ，１８ＢまたはＨＤＭＩ制御回路３に出力する。

無線ＬＡＮコントローラ１１４は、たとえばIEEE 802.11規格の無線通信を実行する無線通信デバイスである。IEEE 1394コントローラ１１５は、IEEE 1394規格のシリアルバスを介して外部機器との通信を実行する。

エンベデッドコントローラ／キーボードコントローラＩＣ（ＥＣ／ＫＢＣ）１１６は、電力管理のためのエンベデッドコントローラと、キーボード（ＫＢ）１３およびタッチパッド１６を制御するためのキーボードコントローラとが集積された１チップマイクロコンピュータである。このエンベデッドコントローラ／キーボードコントローラＩＣ（ＥＣ／ＫＢＣ）１１６は、ユーザによるパワーボタン１４の操作に応じて本コンピュータ１０をパワーオン／パワーオフする機能を有している。さらに、エンベデッドコントローラ／キーボードコントローラＩＣ（ＥＣ／ＫＢＣ）１１６は、リモコンユニットインタフェース２０との通信を実行する機能を有している。

ＴＶチューナ１１７はテレビジョン（ＴＶ）放送信号によって放送される放送番組データを受信する受信装置であり、アンテナ端子１９に接続されている。このＴＶチューナ１１７は、例えば、地上波デジタルＴＶ放送のようなデジタル放送番組データを受信可能なデジタルＴＶチューナとして実現されている。また、ＴＶチューナ１１７は、外部機器から入力されるビデオデータをキャプチャする機能も有している。

次に、図３を参照して、ＴＶアプリケーションプログラム２０２によって実行されるコンテンツデータ表示機能について説明する。

放送番組データのような映像コンテンツデータに対する画像処理およびコンテンツデータ表示処理は、インデキシング制御部４０１（後述の図５記載）として機能するビデオプロセッサ１１３によって実行される。

ビデオプロセッサ１１３は、ＴＶアプリケーションプログラム２０２の制御の下、例えば、ユーザによって指定された録画済みの放送番組データ等の映像コンテンツデータに対して画像処理を実行する。また、ビデオプロセッサ１１３は、ＴＶチューナ１１７によって受信された放送番組データをＨＤＤ１１１に格納する録画処理と並行して、当該放送番組データに対する画像処理を実行することもできる。

映像コンテンツデータの画像処理（顔画像インデキシング処理とも称する）においては、ビデオプロセッサ１１３は、映像コンテンツデータに含まれる動画像データをフレーム単位で解析する。そして、ビデオプロセッサ１１３は、動画像データを構成する複数のフレームそれぞれから人物の顔画像（顔画像サムネイルとも称する）を抽出すると共に、抽出された各顔画像が映像コンテンツデータ内に登場する時点を示すタイムスタンプ情報を出力する。各顔画像に対応するタイムスタンプ情報としては、映像コンテンツデータの開始から当該顔画像が登場するまでの経過時間、または当該顔画像が抽出されたフレーム番号、等を使用することが出来る。

さらに、ビデオプロセッサ１１３は、抽出された各顔画像のサイズ（解像度）も出力する。また、ビデオプロセッサ１１３は、抽出された各顔画像の抽出された回数（出現回数）も出力する。顔画像の出現回数が多いほど、映像コンテンツデータ内に占める登場時間が長いことを示すものである。ビデオプロセッサ１１３から出力される顔検出結果データ（顔画像、タイムスタンプ情報ＴＳ、サイズ、および回数）は、データベース１１１Ａに顔画像インデキシング情報として格納される。このデータベース１１１Ａは、ＨＤＤ１１１内に用意されたインデキシングデータ記憶用の記憶領域である。

さらに、顔画像インデキシング処理においては、ビデオプロセッサ１１３は、顔画像を抽出する処理と並行して、番組のサムネイル画像取得処理も実行する。この番組サムネイル画像は、映像コンテンツデータから例えば特定時間の１フレームに対応する画像（例えば縮小画像）である。すなわち、ビデオプロセッサ１１３は、顔画像を含むフレームであるか否かに関係なく、映像コンテンツデータから例えば所定時間の１フレームを抽出し、抽出した１フレームに対応する画像（番組サムネイル）を出力する。ビデオプロセッサ１１３から出力されるサムネイル画像も、データベース１１１Ａにサムネイルインデキシング情報として格納される。

また、予め複数の既定顔画像と、この既定顔画像のそれぞれに対応する人名（名称）とを関連づけてデータベース１１１Ａの専用の領域である顔イメージサーバ領域に格納されている。これらの人名は、ビデオプロセッサ１１３によって電子番組情報から抽出された出演者名と照合される。出演者名と一致した人名に対応する既定顔画像を用いて、顔画像インデキシング処理により抽出された顔画像サムネイルと画像照合を行う。そして、照合が一致した顔画像サムネイルの顔画像（一致顔画像）に対応させて出演者名と共に表示する。また、一致顔画像を出演者名と共に表示する場合、ビデオプロセッサ１１３によって抽出された番組サムネイルも合わせて表示することができる。

番組情報（電子番組情報）は、図４に示されているように、例えば、番組名、日時、出演者（出演者名）から構成されている。

番組名は、録画された映像コンテンツデータの番組の名称である。日時は、録画された映像コンテンツデータの録画日時である。録画された映像コンテンツデータの編集等を行った場合は、例えば、編集された最終日時となる。出演者は、録画された映像コンテンツデータに出演者している出演者名である。複数の出演者名が存在する場合は、順番に列記されている。例えば、図７に示されるように、番組情報として出演者名を列記されている。

図５に示されているように、ＴＶアプリケーションプログラム２０２は、映像コンテンツデータの一覧表示機能を実行するための画像表示処理部３０１を含んでいる。この画像表示処理部３０１は、例えば、インデキシングビューワプログラムとして実現されており、データベース１１１Ａに格納されたインデキシング情報（顔画像サムネイル、番組サムネイル等）を用いて、映像コンテンツデータの概要を俯瞰するためのリスト画面（後述：図７参照）を表示する。また、画像表示処理部３０１は、顔画像表示処理部３０２、番組サムネイル表示処理部３０３を備えている。

具体的には、画像表示処理部３０１が備える顔画像表示処理部３０２は、例えば、既定顔画像のそれぞれに対応する人名とを関連づけてデータベース１１１Ａに格納されている人名を用いて、電子番組情報から抽出された出演者名と照合する。出演者名と一致した人名に対応する既定顔画像を用いて、顔画像インデキシング処理により抽出された顔画像サムネイルと画像照合を行う。そして、照合が一致した顔画像サムネイルの顔画像（一致顔画像）に対応させて出演者名と共に表示する。また、画像表示処理部３０１が備える番組サムネイル表示処理部３０３は、例えば、一致顔画像を出演者名と共に表示する場合、顔画像表示処理部３０２によって抽出された番組サムネイルも合わせて表示することができる。

ＴＶアプリケーションプログラム２０２は、上述の画像表示処理部３０１に加え、記録処理部４０１、インデキシング制御部４０２、再生処理部４０３等を備えている。

記録処理部４０１は、ＴＶチューナ（受信部）１１７によって受信された放送番組データ、または外部機器から入力されるビデオデータをＨＤＤ（記憶部、一時記憶部）１１１に記録する記録処理を実行する。また、記録処理部４０１は、ユーザによって予め設定された録画予約情報（チャンネル番号、日時）によって指定される放送番組データをＴＶチューナ１１７を用いて受信し、その放送番組データをＨＤＤ１１１に記録する予約録画処理も実行する。

インデキシング制御部４０２は、ビデオプロセッサ（抽出部、測定部）１１３を制御して、インデキシング処理（顔画像インデキシング処理）をビデオプロセッサ１１３に実行させる。ユーザは、録画対象の放送番組データ毎にインデキシング処理を実行するか否かを指定することができる。例えば、インデキシング処理の実行が指示された録画対象の放送番組データについては、その放送番組データがＨＤＤ１１１に記録された後に、インデキシング処理が自動的に開始される。また、ユーザは、既にＨＤＤ１１１に格納されている映像コンテンツデータの内から、インデキシング処理を実行すべき映像コンテンツデータを指定することもできる。

再生処理部４０３は、ＨＤＤ１１１に格納されている各映像コンテンツデータを再生する処理を実行する。

なお、インデキシング処理は、必ずしもビデオプロセッサ１１３によって実行する必要はなく、例えば、ＴＶアプリケーションプログラム２０２にインデキシング処理を実行する機能を設けてもよい。この場合、インデキシング処理は、ＴＶアプリケーションプログラム２０２の制御の下に、ＣＰＵ１０１によって実行される。

次に、図６を参照して、顔画像インデキシング処理が行われた顔画像サムネイルの具体的な構成について説明する。

図６には、画像表示処理部３０１によってＬＣＤ１７に表示されるインデキシングビュー画面の例が示されている。このインデキシングビュー画面は、ある映像コンテンツデータ（例えば放送番組データ）をインデキシング処理することによって得られた画面である。このインデキシングビュー画面には、顔画像の一覧を表示するための上述の顔サムネイル表示エリアと、音声のレベルを示すレベル表示エリアと、ＣＭ等の区間を示す区間バーと、サムネイル画像の一覧をじゃばら形式で表示するための上述のじゃばらサムネイル表示エリアとを含んでいる。

ここで、じゃばら形式とは、選択されているサムネイル画像を通常サイズ（フルサイズ）で表示し、他の各サムネイル画像についてはその横方向サイズを縮小して表示する表示形式である。図６においては、選択されたサムネイル画像との距離が大きいサムネイル画像ほど、その横方向サイズが縮小されている。

レベル表示エリアにおいては、歓声レベルの変化を示すグラフ（図６中の濃い色で示されるグラフ）と、歓声レベルの変化を示すグラフ（図６中の薄い色で示されるグラフ）が表示される。

また、番組情報の出演者名と一致する人名と対応する既定顔画像と照合を行い、照合が一致した顔画像サムネイルが太枠で囲む等の処理がなされ強調表示される。例えば、顔画像５０１〜５０５のように表示される。

図７は、録画された映像コンテンツデータの表示の例が示されている。

パーソナルコンピュータ１０のＬＣＤ１７には、例えば、番組サムネイル６０１（６０３）と、番組名６０２（６０４）と、顔画像サムネイル５０１〜５０３（５０４、５０５）とが共に表示されている。番組サムネイル６０１は、上述したように、映像コンテンツデータから例えば特定時間の１フレームに対応する画像をキャプチャしたデータである。番組のタイトルが表示されている場面や、番組のある一場面のデータである。番組名は、番組情報から抽出したテキストデータである。顔画像サムネイル５０２、５０１、５０３は、一致顔画像である。一致顔画像とは、上述したように、まず、データベース１１１Ａに格納されている既定顔画像のそれぞれに対応する人名を用いて、電子番組情報から抽出された出演者名と照合される。出演者名と一致した人名に対応する既定顔画像を用いて、顔画像インデキシング処理により抽出された顔画像サムネイルと画像照合を行う。そして、照合が一致した顔画像サムネイルの顔画像（一致顔画像）に対応させて出演者名と共に表示する。

このように、録画された映像コンテンツデータを一致顔画像に対応させた出演者名、番組サムネイルおよび番組名と共に表示することができる。なお、番組サムネイルは必要に応じて表示しないようにしてもよい。

次に、図８のフローチャートを参照して、本発明の実施形態に係る実施形態を適用したコンテンツデータ表示方法における一致顔画像の抽出の手順を説明する。

まず、ＴＶアプリケーションプログラム２０２のインデキシング制御部４０２は、録画番組（映像コンテンツデータ）からインデキシング処理を行い、番組解析データを作成する（ステップＳ１０１）。番組解析データは、顔検出情報である顔画像サムネイルを含んでいる。顔画像サムネイルは、上述した図６の顔画像サムネイルの一覧である。

次に、ＴＶアプリケーションプログラム２０２の画像表示処理部３０１は、予め受信されてデータベース１１１Ａに格納されている番組情報のうち、録画された映像コンテンツデータに対応する番組情報をデータベース１１１Ａから取得する（ステップＳ１０２）。例えば、上述した図４に示されるような番組情報である。

画像表示処理部３０１は、取得した番組情報から出演者名を抽出する（ステップＳ１０３）。例えば、図４に示されるように、出演者名として、「日本太郎」、「東海明美」、「関西花子」、等を抽出する。続いて、画像表示処理部３０１は、抽出した出演者名をキーとして、データベース１１１Ａの顔イメージサーバ領域から顔イメージ（既定顔画像）を取得する（ステップＳ１０４）。抽出した出演者名をキーとして、データベース１１１Ａの顔イメージサーバ領域に格納されている人名を照合し、照合された人名に対応する顔イメージ（既定顔画像）をデータベース１１１Ａの顔イメージサーバ領域から取得する。

画像表示処理部３０１は、顔検出情報である顔画像サムネイルと、顔イメージである既定顔画像との照合結果が一致するか否かを判別する（ステップＳ１０５）。ステップＳ１０５で、画像表示処理部３０１によって、照合結果が一致したと判別された場合は（ステップＳ１０５のＹＥＳ）、一致した出演者名と顔検出情報である顔画像サムネイル（一致顔画像）をビデオプロセッサ１１３に返却する（ステップＳ１０７）。一方、ステップＳ１０５で、画像表示処理部３０１によって、照合結果が一致しないと判別された場合は（ステップＳ１０５のＮＯ）、取得した出演者名のうち、さらに別の出演者名があるか否かを判別する（ステップＳ１０６）。ステップＳ１０６で、別の出演者名があると判別された場合は（ステップＳ１０６のＹＥＳ）、ステップＳ１０４に遷移する。一方、ステップＳ１０６で、別の出演者名がないと判別された場合は（ステップＳ１０６のＮＯ）、終了する。

次に、図９のフローチャートを参照して、本発明の実施形態に係る実施形態を適用したコンテンツデータ表示方法の手順を説明する。

まず、画像表示処理部３０１は、予めユーザが設定を行っている出演者を表示するか否かの設定を判別する（ステップＳ２０１）。ステップＳ２０１で、画像表示処理部３０１によって、出演者を表示する設定であると判別されると（ステップＳ２０１のＹＥＳ）、番組情報の登録順に出演者名を表示するか否かを判別する（ステップＳ２０２）。ステップＳ２０２で、画像表示処理部３０１によって、番組情報の登録順に出演者名を表示する設定であると判別されると（ステップＳ２０２のＹＥＳ）、番組情報から出演者名を取得する（ステップＳ２０３）。例えば、図７に示されるように、番組情報の出演者名の列記順（日本太郎、東海明美、関西花子）に取得する。

次に、画像表示処理部３０１は、番組情報登録順（列記順）に出演者サムネイル（一致顔画像）を並べ替える（ステップＳ２０４）。そして、一致顔画像（日本太郎５０２、東海明美５０１、関西花子５０３）をＬＣＤ１７に表示する（図７参照）。一方、ステップＳ２０２で、画像表示処理部３０１によって、番組情報の登録順に出演者名を表示しない設定であると判別されると（ステップＳ２０２のＮＯ）、出演時間順に表示するか否かを判別する（ステップＳ２０５）。ステップＳ２０５で、画像表示処理部３０１によって、出演時間順に表示する設定であると判別されると（ステップＳ２０５のＹＥＳ）、画像表示処理部３０１は、出演者名毎に顔検出回数（出現回数）をカウントする（ステップＳ２０６）。出演者名毎の顔検出回数（出現回数）は、図３に示されるように、顔画像インデキシング処理を行ったときにカウントされているので、このカウントされた出現回数のデータを読み取る。そして、画像表示処理部３０１は、出演時間順に出演者サムネイル（一致顔画像）を並べ替える（ステップＳ２０７）。そして、一致顔画像をＬＣＤ１７に表示する。

このように、上述した実施形態によれば、実際の録画された映像コンテンツデータから顔画像を抽出し、出演者名および番組名と共に表示することでユーザの利便性を向上させることができる。すなわち、実際の録画された映像コンテンツデータから顔画像および出演者名が表示されるので、より直感的に映像コンテンツデータの出演者名を把握することができる。さらに、番組サムネイルを表示することができるため、より利便性を向上させることができる。

また、本実施形態の変形例としては、さらに、お気に入りリスト（優先表示リスト）をデータベース１１１Ａに格納する。このお気に入りリストには、例えば、ユーザのお気に入りの人名のリストが格納されている。例えば、図１０に示されるように、ユーザのお気に入りの人名のリストに、東海明美５０１、日本太郎５０２、関西花子５０３、千葉花子５０５が含まれている。一致顔画像を表示する場合に、このお気に入りリストに含まれている人名は、優先的に表示を行う。例えば、図１０に示されるように、お気に入り出演者選択画面からお気に入り出演者を選択すると、例えば、関西花子５０３が選択されたことを示す点線の枠で囲まれる。お気に入り出演者の選択時には、出演者サムネイル（一致顔画像）と名前が対になった情報を表示する。表示する出演者サムネイルは、録画した番組から作成した出演者サムネイルでも、顔イメージサーバの顔イメージでも良いものとする。録画番組（映像コンテンツデータ）の一覧表示を行う場合、お気に入り出演者が登録されている場合は、図１１に示されるように、お気に入りに指定した出演者サムネイル（例えば、関西花子５０３）を上述した番組情報登録順・出演時間順に関わらず先頭に表示するものとする。また、録画番組の一覧表示を行う場合、お気に入りに指定した出演者であることが分かるように、出演者サムネイル（例えば、関西花子５０３）の色を変えて表示することも可能である（図１１参照）。また、お気に入り以外の出演者サムネイルについては、上述したように、番組情報登録順・出演時間順に表示する。

さらに、録画番組の一覧表示を行う場合に、番組サムネイルを表示しないようにすることも可能である。例えば、出演者サムネイルを番組一覧に表示する際に必須となる情報は番組タイトルと出演者サムネイルを必須とすることができる。この場合、番組サムネイルを表示しない一覧表示方式として、例えば図１２に示されるような形式で表示することができる。すなわち、番組サムネイルを表示しない場合は、番組名、出演者サムネイルの他、録画日時の情報を表示する。

また、特定の出演者が出ている番組のみを録画された映像コンテンツデータのリスト表示の一覧からピックアップする場合は、図１３で示されるように、ピックアップ対象選択画面からピックアップしたい出演者を選択する。例えば、千葉花子５０５が選択されたことを示す点線の枠で囲まれる。ピックアップ対象の選択時には、出演者サムネイルと名前が対になった情報を表示する。表示する出演者サムネイルは、録画した番組から作成した出演者サムネイルを表示するものとする。ピックアップ対象、例えば千葉花子５０５を選択すると、全ての録画番組の中から対象となる出演者が出演している番組の一覧を表示する。表示処理を行う場合、ピックアップ対象に指定した出演者サムネイル（例えば、千葉花子５０５）を番組情報登録順・出演時間順に関わらず先頭に表示するものとする（図１３参照）。また、番組一覧表示の際にピックアップ対象とした出演者であることが分かるように、出演者サムネイルの色を変えて表示する（図１３参照）。なお、ピックアップ対象以外の出演者サムネイルについては、図７で示したように番組情報登録順・出演時間順に表示する。

以上のように、本実施形態に変形例によれば、さらに詳細にユーザの好みに合った映像コンテンツデータの表示形態を実現することができる。このため、さらにユーザの利便性を向上させることができる。

また、本実施形態の顔画像一覧表示処理の手順は全てソフトウェアによって実現することができるので、このソフトウェアをコンピュータ読み取り可能な記憶媒体を通じて通常のコンピュータに導入することにより、本実施形態と同様の効果を容易に実現することができる。

また、本実施形態の情報処理装置はコンピュータ１０によって実現するのみならず、例えば、ＨＤＤレコーダ、ＤＶＤレコーダ、テレビジョン装置といった様々なコンシューマ情報処理装置によって実現することもできる。この場合、ＴＶアプリケーションプログラム２０２の機能は、ＤＳＰ、マイクロコンピュータのようなハードウェアによって実現することができる。

また、本発明は、上記実施形態そのままに限定されるものではなく、実施段階ではその要旨を逸脱しない範囲で構成要素を変形して具体化できる。また、上記実施形態に開示されている複数の構成要素の適宜な組み合わせにより種々の発明を形成できる。例えば、実施形態に示される全構成要素から幾つかの構成要素を削除してもよい。更に、異なる実施形態に構成要素を適宜組み合わせてもよい。

本発明の一実施形態に係る情報処理装置の概観の例を示す斜視図。 同実施形態の情報処理装置のシステム構成の例を示すブロック図。 同実施形態の情報処理装置の顔画像一覧表示機能を説明するためのブロック図。 同実施形態の情報処理装置で用いられる番組情報の例を示す図。 同実施形態の情報処理装置で用いられるプログラムの機能構成他を示すブロック図。 同実施形態の情報処理装置によって表示装置に表示されるインデキシングビュー画面の例を示す図。 同実施形態の情報処理装置によって表示装置に表示される映像コンテンツデータの表示例を示す図。 同実施形態の情報処理装置によって実行される画像表示処理の手順の例を示すフローチャート。 同実施形態の情報処理装置によって実行される画像表示処理の手順の例を示すフローチャート。 同実施形態の情報処理装置によって表示装置に表示される映像コンテンツデータの表示例を示す図。 同実施形態の情報処理装置によって表示装置に表示される映像コンテンツデータの表示例を示す図。 同実施形態の情報処理装置によって表示装置に表示される映像コンテンツデータの表示例を示す図。 同実施形態の情報処理装置によって表示装置に表示される映像コンテンツデータの表示例を示す図。

符号の説明

１０…情報処理装置（コンピュータ）、１１１Ａ…データベース、１１３…ビデオプロセッサ、１１７…ＴＶチューナ、２０２…ＴＶアプリケーションプログラム、３０１…画像表示処理部、４０２…インデキシング制御部、４０３…再生処理部。

Claims (6)

1. 複数の照合用データと名前とを対応付けて記憶する記憶手段と、
   映像コンテンツデータを入力する入力手段と、
   前記映像コンテンツデータの番組名および登場人物名を含み得る番組情報を取得する取得手段と、
   入力された前記映像コンテンツデータから複数の顔画像を抽出する抽出手段と、
   前記映像コンテンツデータの情報を表示する場合、当該映像コンテンツデータの前記番組名と共に、抽出された前記複数の顔画像のうち当該映像コンテンツデータの前記番組情報に含まれる前記登場人物名と一致する前記名前に対応付けられた前記照合用データと一致する顔画像を登場人物名毎に表示する第１の処理を行う第１の処理手段と、
   前記映像コンテンツデータの情報を表示する場合、抽出された前記複数の顔画像のうち前記照合用データと一致した顔画像を、前記映像コンテンツデータにおける出現回数の多い登場人物から順に登場人物名毎に表示する第２の処理を行う第２の処理手段と、
   前記第１の処理と前記第２の処理とのうち、実行する処理を切り替える切替手段とを備えることを特徴とする情報処理装置。
2. 前記抽出手段は、前記映像コンテンツデータから当該映像コンテンツデータの一場面の画像を抽出し、
   前記第１の処理手段は、前記映像コンテンツデータの情報を表示する場合、前記一場面の画像を表示することを特徴とする請求項１記載の情報処理装置。
3. 前記取得手段は、前記登場人物名の表示順を示す情報を取得し、
   前記第１の処理手段は、前記一致する顔画像を前記表示順に従って登場人物名毎に表示することを特徴とする請求項１記載の情報処理装置。
4. 優先表示リストをさらに備え、
   前記第１の処理手段は、前記一致する顔画像を、前記優先表示リストに対応する顔画像を優先して登場人物毎に表示することを特徴とする請求項１記載の情報処理装置。
5. 前記名前を選択する選択手段をさらに備え、
   前記第１の処理手段は、前記一致する顔画像を、選択された前記名前に対応する顔画像を優先して登場人物毎に表示することを特徴とする請求項１記載の情報処理装置。
6. 映像コンテンツデータを入力する情報処理装置で用いられるコンテンツ表示方法であって、
   複数の照合用データと名前とを対応付けて記憶するステップと、
   前記映像コンテンツデータの番組名と登場人物名とを含み得る番組情報を取得するステップと、
   入力された前記映像コンテンツデータから複数の顔画像を抽出するステップと、
   前記映像コンテンツデータの情報を表示する場合、抽出された前記複数の顔画像のうち当該映像コンテンツデータの番組情報に含まれる抽出された前記登場人物名と一致する前記名前に対応付けられた前記照合用データに一致する顔画像を、当該映像コンテンツデータの前記番組名と共に登場人物名毎に表示する第１の処理を行うステップと、前記照合用データと一致した顔画像を前記出現回数の多い順に登場人物毎に表示する第２の処理を行うステップと、
   前記第１の処理と前記第２の処理とのうち、実行する処理を切り替えるステップとを備えることを特徴とするコンテンツ表示方法。

Images