JP4621758B2 - コンテンツ情報再生装置、コンテンツ情報再生システム、および情報処理装置 - Google Patents

Description

本発明は、ユーザが映像コンテンツのシーン毎に紹介文を作成し、他のユーザがその映像コンテンツを視聴するときに、映像コンテンツに、作成された紹介文を提示するコンテンツ情報再生装置、およびコンテンツ情報再生システムに関し、特に、ユーザの生体情報を考慮したコンテンツ情報再生装置、コンテンツ情報再生システム、および情報処理装置に関する。

映像コンテンツを視聴しながら、視聴者同士がネットワークを介して体験談を交換できる技術がある。特許文献１には、映像コンテンツの各シーンに対応する紹介文を、映像コンテンツと共にリアルタイムにユーザに提示する情報提供装置が開示されている。これにより、映像コンテンツを視聴しながら、他のユーザとコミュニケーションが取れるので、映像コンテンツをより楽しく視聴でき、且つそのコンテンツに対する理解を深めることができる。

特開２００７−１４０６７０号公報

しかしながら、従来の情報提供装置では、ユーザが何度でも紹介文を作成することができるため、１つのシーンに対して複数の紹介文が表示されることがあり、ユーザが映像コンテンツを視聴しながら同時にすべての紹介文を確認することが難しいという問題があった。

また、映像コンテンツ配信者または製作者と紹介文作成者であるユーザとのコミュニケーションの手段が存在しないため、映像コンテンツ配信者または製作者の意思がユーザに対して明示的に伝達できないという問題もあった。

さらに、ユーザが映像コンテンツ視聴後に紹介文を作成するとき、そのシーンでどのように感じたかを忘れてしまっている場合もあり、コンテンツ視聴中のユーザの意図とは異なる紹介文を作成してしまったり、紹介文自体を書きそびれてしまったりしてしまうという問題もあった。

本発明は、従来の問題を解決するためになされたもので、視聴しているユーザと生体情報レベルが似ている他のユーザにより作成された紹介文であって、映像コンテンツ配信者または製作者の意図を取り入れた紹介文を提示するコンテンツ情報再生装置、およびコンテンツ情報再生システムを提供することを目的とする。また、映像コンテンツ視聴完了後に紹介文を作成するときに、ユーザが意図する紹介文を作成しやすくしたコンテンツ情報再生装置、コンテンツ情報再生システム、および情報処理装置を提供することを目的とする。

本発明に係るコンテンツ情報再生装置は、コンテンツを取得するコンテンツ取得部と、コンテンツ取得部が取得したコンテンツを再生するコンテンツ再生部と、コンテンツのシーン毎に複数の生体情報レベル及び生体情報レベルに関連する紹介情報テンプレートとを対応付けた紹介情報テンプレート集を受信する受信部と、ユーザ（紹介情報作成者）の生体情報を入力する生体情報入力部と、コンテンツの再生時に、生体情報入力部が入力した生体情報からコンテンツのシーン毎の生体情報レベルを判定し、受信部が受信した紹介情報テンプレート集から、判定した生体情報レベルに関連する紹介情報テンプレートを抽出して紹介情報を作成する紹介情報作成部と、コンテンツの再生終了時に、紹介情報作成部が作成した紹介情報を表示する紹介情報表示部と、紹介情報作成部が作成した紹介情報を送信する送信部と、を備えたことを特徴とする。

上記コンテンツ情報再生装置は、紹介情報作成部が作成した紹介情報を修正する紹介情報修正部と、を更に備え、送信部は、紹介情報修正部が修正した紹介情報を送信してもよい。

紹介情報作成部が判定するコンテンツのシーン毎の生体情報レベルは、コンテンツの所定シーンの再生時に計測された生体情報の平均値から算出したレベルであってもよい。

紹介情報作成部が判定するコンテンツのシーン毎の生体情報レベルは、コンテンツの所定シーンの再生時に計測された生体情報の最大値から算出したレベルであってもよい。

紹介情報作成部は、コンテンツの所定シーンの再生時に計測された生体情報の最大値から算出したレベルに対応する再生時間帯に再生していた画像を取得し、紹介情報として作成

紹介情報テンプレートは、紹介文テンプレートであってもよい。

紹介情報テンプレートは、エフェクトテンプレートであってもよい。

本発明に係るコンテンツ情報再生装置は、コンテンツを取得するコンテンツ取得部と、コンテンツ取得部が取得したコンテンツを再生するコンテンツ再生部と、コンテンツのシーン毎に複数の生体情報レベル及び生体情報レベルに関連する紹介情報とを対応付けた紹介情報集を受信する受信部と、ユーザの生体情報を入力する生体情報入力部と、コンテンツの再生時に、生体情報入力部が入力した生体情報からコンテンツのシーン毎の生体情報レベルを判定し、受信部が受信した紹介情報集から、判定した生体情報レベルに関連する紹介情報を抽出する紹介情報抽出部と、を備え、コンテンツ再生部は、再生中のコンテンツと共に、紹介情報抽出部が抽出した紹介情報を表示する、ことを特徴とする。

紹介情報は、コンテンツのシーン毎のポイント時刻を含み、紹介情報抽出部は、ポイント時刻におけるユーザの生体情報から生体情報レベルを判定し、判定した生体情報レベルに関連する紹介情報を抽出してもよい。

本発明に係るコンテンツ情報再生システムは、上記コンテンツ情報再生装置と、ユーザの生体情報を計測し、計測した生体情報を生体情報入力部に出力する生体情報計測装置と、を含む。

本発明に係る情報処理装置は、コンテンツを取得するコンテンツ取得部と、コンテンツ取得部が取得したコンテンツを再生するコンテンツ再生部と、コンテンツのシーン毎に複数の生体情報レベル及び生体情報レベルに関連する紹介情報テンプレートとを対応付けた紹介情報テンプレート集を受信する受信部と、コンテンツの再生時に、生体情報入力部が入力した生体情報からコンテンツのシーン毎の生体情報レベルを判定し、受信部が受信した紹介情報テンプレート集から、判定した生体情報レベルに関連する紹介情報テンプレートを抽出して紹介情報を作成する紹介情報作成部と、紹介情報作成部が作成した紹介情報を送信する送信部と、を備えたことを特徴とする。

本発明に係る情報処理装置は、コンテンツを取得するコンテンツ取得部と、コンテンツ取得部が取得したコンテンツを再生するコンテンツ再生部と、コンテンツのシーン毎に複数の生体情報レベル及び生体情報レベルに関連する紹介情報とを対応付けた紹介情報集を受信する受信部と、コンテンツの再生時に、生体情報入力部が入力した生体情報からコンテンツのシーン毎の生体情報レベルを判定し、受信部が受信した紹介情報集から、判定した生体情報レベルに関連する紹介情報を抽出する紹介情報抽出部と、を備え、コンテンツ再生部は、再生中のコンテンツと共に、紹介情報抽出部が抽出した紹介情報を表示する、ことを特徴とする。

本発明のコンテンツ情報再生装置、およびコンテンツ情報再生システムによって、ユーザ自身が意識しなくてもユーザの生体情報レベルに応じた紹介文や効果などの紹介情報の選択が可能となる。

また、紹介情報テンプレートはコンテンツ配信者または他のユーザの意見を反映したものであるため、ユーザはコンテンツ配信者または他のユーザの意見を踏まえて紹介情報を修正・再作成することが可能となる。

また、生体情報レベルの算出に指定時間帯内の生体情報の平均値等を用い、コンテンツ視聴完了後に紹介情報を作成する場合には、生体情報がピーク時の時間前後に表示されていたコンテンツの画像を表示することにより、ユーザは容易に視聴時の感情を思い出すことができ、ユーザが紹介文を作成することを容易にすることができる。

また、コンテンツ視聴時に、ユーザの生体情報レベルに一致した紹介情報のみを表示することができる。これによりユーザの感情の度合いに応じた紹介文のみを画面に表示することができる。また、大量に紹介情報が付加されたコンテンツを紹介情報と共に視聴する際、紹介情報のフィルタリングが可能となる。また、紹介情報を表示するかどうかを判断するための生体情報の計測タイミングとしてポイント時刻を用いることによりコンテンツを視聴したことによる生体情報の変動と、紹介情報の表示・非表示の動作とを同期させることができる。

以下、本発明の実施形態によるコンテンツ情報再生システムについて、図面を参照しながら具体的に説明する。なお、以下の各実施形態において、同じ構成要素については同じ番号を付している。

実施形態１
本実施形態では、種々の生体情報レベルに対応付けて設定した、各シーンにおける種々の紹介情報テンプレートを保持する紹介情報テンプレート集から、コンテンツを視聴している紹介情報作成者の生体情報レベルに対応する紹介文テンプレートを抽出して、生体情報レベルと抽出した紹介情報テンプレートを対応付けて、紹介情報を作成し、作成された紹介情報を表示するコンテンツ情報再生システムについて説明する。さらに、作成された紹介情報を修正し、修正された紹介情報を送信するコンテンツ情報再生システムについても説明する。

［コンテンツ情報再生システムの構成］
図１に、本発明の実施形態１によるコンテンツ情報再生システムの構成を示す。コンテンツ情報再生システム１は、例えば脈拍などのユーザの生体情報を計測する生体情報計測装置２と、コンテンツを再生し、紹介文テンプレート集及びコンテンツ視聴中のユーザの生体情報に基づいて、紹介情報を作成するコンテンツ情報再生装置３と、を備える。コンテンツ情報再生システム１は、例えば、図２に示すようなヘッドマウントディスプレイ（Head Mounted Display; HMD）である。図２に示したヘッドマウントディスプレイには、ディスプレイだけでなく、脈拍を測定する脈拍センサ、体温を測定する温度センサ、瞳孔の大きさを測定する瞳孔センサ、視線移動を測定する視線センサ、ウェアラブルキーボード等を備える。この場合、生体情報計測装置２は、脈拍センサ、温度センサ、瞳孔センサ、視線センサのうちのいずれか１つでもよいし、複数のセンサを組み合わせてもよい。また、ユーザを撮影できる場所に室内カメラを設置して、瞳孔の大きさを測定したり、視線移動を測定したりしてもよい。生体情報レベルはユーザの感情の動きの度合いに対応する。従って、生体情報レベルからユーザの感情の動きの度合いを推定することができる。

コンテンツ情報再生装置３は、コンテンツサーバまたは放送局からコンテンツ等を取得するコンテンツ取得部４と、コンテンツ取得部４により取得されたコンテンツを、ユーザの入力をトリガにし再生するコンテンツ再生部５と、を備える。コンテンツ取得部４は、アンテナを介して無線でコンテンツ等を取得してもよいし、インタネット等を介して有線でコンテンツ等を取得してもよい。コンテンツ再生部５は、デコードしたコンテンツの映像信号を出力しても良いし、フォーマットを変換したコンテンツを出力しても良い。

さらに、コンテンツ情報再生装置３は、紹介文テンプレート集を受信し、紹介情報を送信する紹介文テンプレート集／紹介情報送受信部６と、紹介文テンプレート集／紹介情報送受信部６により受信された紹介文テンプレート集を記憶する紹介文テンプレート集記憶部７と、紹介文テンプレート集記憶部７に記憶された紹介文テンプレート集及び生体情報計測装置２により計測されたユーザの生体情報に基づいて紹介情報を作成する紹介情報作成部８と、を備える。紹介文テンプレート集／紹介情報送受信部６も、アンテナを介して無線で情報を送受信してもよいし、インタネット等を介して有線で情報を送受信してもよい。紹介文テンプレート集は、コンテンツ配信者によって予め作成されたものである。また、紹介文テンプレート集は、種々の生体情報レベルに対応付けて設定した、各シーンにおける種々の紹介文テンプレートを保持する。具体例を図３に示す。再生時間１０分から１１分３０秒までのシーン（シーンＩＤ：ＩＤＴ−１）において、ユーザの生体情報レベルが２の場合（安静時よりも高い場合）は、紹介文テンプレートＩＤはＩＤＳＴ−２であり、紹介文テンプレートは「非常にすばらしい。」となる。シーンとは、紹介文テンプレート集のシーン時間情報で指定された期間である。具体的に図３では、各シーンは、再生時間１０分から１１分３０秒までの期間、再生時間１２分から１５分までの期間、及び再生時間１７分から１８分までの期間である。以下、再生時間１０分から１１分３０秒までを第１のシーンといい、再生時間１２分から１５分までを第２のシーンといい、再生時間１７分から１８分までを第３のシーンという。

紹介情報作成部８は、生体情報計測装置２により計測されたユーザ（紹介文作成者）の生体情報が入力され、入力された生体情報を再生時刻と共に記憶する生体情報記憶部１２を備える。図４（ａ）に、生体情報記憶部１２に記憶された生体情報の一例を示す。横軸がコンテンツの再生時刻であり、縦軸が生体情報である。また、紹介情報作成部８は、紹介文テンプレート集のシーン時間情報に基づき、記憶された生体情報から、各シーンにおける生体情報の平均値を算出する平均値算出部１３と、算出された生体情報の平均値から、生体情報レベルを判定するレベル判定部１４と、紹介文テンプレート集から、判定されたレベルに対応する紹介文テンプレートを抽出する紹介文抽出部１５と、を備える。レベル判定部１４は、例えば、生体情報が安静時より少し高いときには生体情報レベルを１とし、安静時より高いときには生体情報レベルを２とし、安静時より非常に高いときには生体情報レベルを３とする。図５に、レベル判定部１４によって生体情報レベルが判定された後の情報の一例を示す。また図６に、紹介文抽出部１５によって紹介文テンプレートが抽出された後の情報の一例を示す。図５及び図６については後で詳述する。

さらに、紹介情報作成部８は、紹介文テンプレート集のシーン時間情報に基づき、記憶された生体情報から、各シーンにおいて生体情報がピークとなった時の再生時刻を検出するピーク検出部１６と、検出されたピーク時の再生時刻に再生された画像を取得し、の画像ＩＤ付与する画像検索部１７と、を備える。ピーク検出部１６は、１つのシーンにおいて複数のピークがある場合には、最初にピークとなった時の再生時刻を検出する。図７（ａ）に、紹介情報のデータ構造の一例を示す。紹介情報作成部８は、レベル判定部１４により判定されたレベルのＩＤを紹介情報のレベルＩＤ２０に設定し、画像検索部１７により検索された画像に画像ＩＤを付与し、その画像ＩＤを紹介情報の代表画像ＩＤ２１に設定し、紹介文抽出部１５により抽出された紹介文テンプレートを、紹介文ＩＤ２２，２３によって関連付けられた紹介文２４に設定する。図７（ｂ）は、紹介情報の一例である。

コンテンツ情報再生装置３は、紹介情報作成部８により作成された紹介情報を記憶する紹介情報記憶部９と、紹介情報を表示する紹介情報表示部１０と、ユーザによって紹介情報が修正される紹介情報修正部１１と、を備える。

［コンテンツ情報再生システムの動作］
図８に、ユーザが紹介文作成モードで映像コンテンツを再生したときの紹介情報作成処理のフローチャートを示す。ユーザがコンテンツを視聴している間、所定時間間隔で、ユーザ（紹介文作成者）の生体情報が生体情報計測装置２により測定され、測定された生体情報が生体情報記憶部１２に記憶され続ける（Ｓ１）。紹介情報作成部８は、コンテンツの再生時刻が再生中のシーンの終了時刻になったか否かを判断する（Ｓ２）。例えば、図３に示す紹介文テンプレート集の場合、再生時間１０分から１１分３０秒までのシーンにおいては、コンテンツの再生時刻が１１分３０秒になったか否かを判断する。

コンテンツの再生時刻が再生中のシーンの終了時刻になると（Ｓ２でＹｅｓ）、生体情報記憶部１２に記憶された、そのシーンの生体情報を読み出す（Ｓ３）。平均値算出部１３は、読み出された生体情報から、そのシーンにおける生体情報の平均値を算出する（Ｓ４）。次に、レベル判定部１４は、算出された生体情報の平均値から、そのシーンにおける生体情報の平均値のレベルを判定する（Ｓ５）。紹介文抽出部１５は、紹介文テンプレート集から、判定された生体情報の平均値のレベルに対応する紹介文テンプレートを抽出する（Ｓ６）。

また、ピーク検出部１６は、読み出された生体情報から、そのシーンにおいて生体情報がピークとなった時の再生時刻を検出する（Ｓ７）。次に、画像検索部１７は、検出されたピーク時の再生時刻に再生された画像取得し、画像ＩＤを付与する（Ｓ８）。紹介情報作成部８は、判定された生体情報の平均値のレベル、画像ＩＤ、及び抽出された紹介文テンプレートに基づいて、そのシーンにおける紹介情報を作成する（Ｓ９）。ステップＳ５で生体情報の平均値がレベル１〜３でないときは、そのシーンにおける紹介情報を作成しない。コンテンツの再生が継続しているときは（Ｓ１０でＮｏ）ステップＳ２に戻り紹介情報を再度作成する。一方、コンテンツの再生が終了すれば（Ｓ１０でＹｅｓ）このフローチャートを終了する。

コンテンツの再生が終了すると、紹介情報がユーザ（紹介文作成者）に一覧表示される。図９に、紹介情報の表示例を示す。表示される紹介情報は、コンテンツ再生中に紹介情報作成部８により作成されたものである。表示画面３０に、シーン毎に１つの代表画像３１ａ〜３１ｄと１つの紹介文３２ａ〜３２ｄを表示する。代表画像３１ａ〜３１ｄは、紹介情報に記憶された代表画像ＩＤに対応する画像、すなわち各シーンにおいて生体情報がピークとなった時に再生された画像である。また、紹介文３２ａ〜３２ｄは、紹介情報に記憶された紹介文、すなわち紹介文テンプレート集から抽出された、各シーンの生体情報の平均値のレベルに対応する紹介文テンプレートである。

図３〜図６及び図９を用いて、具体的に説明する。図４（ａ）は、生体情報記憶部１２に記憶された生体情報の一例である。この場合、レベル判定部１４は、第１のシーンにおける生体情報の平均値はレベル２であり、第２のシーンにおける生体情報の平均値はレベル１未満であり、第３のシーンにおける生体情報の平均値はレベル３であると判定する。このとき、紹介情報作成部８は、図３の紹介文テンプレート集（処理前の情報）にユーザの生体情報レベルを追加した、図５に示す情報を有する。図５の追加した情報（ユーザの生体情報レベル）は、第１のシーンにおいてはレベル２であり、第２のシーンにおいては該当レベルなしであり、第３のシーンにおいてはレベル３であることを示す。

紹介文抽出部１５が判定されたレベルに対応する紹介文テンプレートを抽出する。このとき、紹介情報作成部８は、該当しなかった紹介文テンプレートが不要になるので、図６に示すような、第１のシーンのレベル１及び２、第２のシーンの全レベル、並びに第３のシーンのレベル１及び２等の紹介文テンプレートを削除した情報を有する。図６においては、削除する情報を点線の取消線で示す。この後の処理においてシーン時間情報も不要であるため、図６においてシーン時間情報も削除している。

画像検出部１７が画像を検出し画像ＩＤを付与すると、紹介情報作成部８は、図７（ｂ）に示す紹介情報を作成する。図７（ｂ）は、図６の処理後の情報に代表画像ＩＤを追加したものである。図７（ｂ）において、第１のシーンにおける生体情報の平均値はレベル２であり、代表画像ＩＤはＩＤＰ−１となり、紹介文は「非常にすばらしい。」となる。第２のシーンにおける生体情報の平均値はレベル１未満である（レベル１〜３でない）ため、第２のシーンにおける紹介情報は作成されない。第３のシーンにおける生体情報の平均値はレベル３であり、代表画像ＩＤはＩＤＰ−２となり、紹介文ＩＤはＩＤＳ−２となる。

図９の紹介情報の表示例において、代表画像３１ａには第１のシーンにおいて生体情報がピークとなった時に再生された画像（画像ＩＤがＩＤＰ−１の画像）を、紹介文３２ａには第１のシーンの紹介文「非常にすばらしい。」を表示する。代表画像３１ｂには第３のシーンにおいて生体情報がピークとなった時に再生された画像（画像ＩＤがＩＤＰ−２の画像）を、紹介文３２ｂには紹介文ＩＤがＩＤＳ−２である第３のシーンの紹介文を表示する。再生時刻１１分３０秒から１７分までの映像については、ユーザは紹介文を作成することができない。

ユーザは、紹介文３２ａ〜３２ｄを修正することができる。紹介情報記憶部９は、修正された紹介情報を記憶する。具体的には、図７（ｂ）の紹介情報の紹介文２４が修正される。紹介文テンプレート集／紹介情報送受信部６は、コンテンツサーバへ修正された紹介情報を送信する。

本実施形態によれば、予めコンテンツ配信者が作成した紹介文テンプレート集を用いて紹介文を作成するので、コンテンツ配信者の意図を取り入れた紹介文が作成される。また、各シーンにおけるユーザの生体情報レベル毎に紹介文テンプレートを有する紹介文テンプレート集から、ユーザの生体情報レベルに対応する紹介文テンプレートを抽出して、抽出された紹介文を表示する。このように生体情報レベルを用いることにより、作成しようとしていた紹介文に近い紹介文が表示されるので、紹介文作成者は紹介文を作成しやすくなる。また、コンテンツ視聴後に紹介文を作成する場合には、紹介文作成者は感想等を忘れてしまっていることもあり、そういったことによる間違いも少なくすることができる。

［変形例］
なお、本実施形態では、コンテンツ情報再生装置３は紹介文テンプレート集を受信し、紹介文テンプレート集に基づいて、紹介情報である紹介文を作成している。これに代えて、コンテンツ情報再生装置３はエフェクトテンプレート集を受信し、エフェクトテンプレート集に基づいて、紹介情報であるエフェクトを作成してもよい。

エフェクトには、映像エフェクトと、音響エフェクトがある。例えば、映像エフェクトには、再生映像をズームしたり、再生映像のコントラストや色を変化させたり、再生映像を太陽光や月光や電球光で見たようにしたり、再生映像を後ろから光を当てて見たようにしたりする方法がある。また、映像エフェクトには、再生映像を雨や雪が降っているようにしたり、再生映像を霧がかかっているようにしたり、飛行機等が飛んでいる場合には再生映像に軌跡を追加したり、再生映像に花びらを舞わせたり、再生映像にキャラクタや吹き出しを追加したり、再生映像に花火や雷や波の映像を追加したりする方法もある。さらに、映像エフェクトには、画面を４分割して、左上、右上、左下、右下の順に所定時間をずらした映像を表示させるマルチスクリーンという方法もある。図１０に、マルチスクリーンの一例を示す。野球選手の投球シーンにおいて、左上に投球開始時の映像を、右上にその０．１秒後の映像を、左下にその０．２秒後の映像を、右下に投球後の映像を表示する。

また、音響エフェクトには、再生音をコーラスにしたり、再生音に遅れた音を追加して２つの音の波形の干渉を利用して特有の音を人工的に作り出したり（フランジャ）、再生音を遅らせたり（ディレイ）、再生音の質を変化させたり（リバーブ）、効果音を追加したり、ＢＧＭを追加したりする方法がある。

図１１に、エフェクトテンプレート集の一例を示す。再生時間１０分から１１分３０秒までの第１のシーンにおいては、ユーザの生体情報レベルに応じて、エフェクトの強さを変化させる。具体的には、生体情報の平均値がレベル１の場合は、再生映像に少量の花びらを舞わせる。生体情報の平均値がレベル２の場合は、再生映像に中程度の量の花びらを舞わせる。生体情報の平均値がレベル３の場合は、再生映像に大量の花びらを舞わせる。また、再生時間１２分から１５分までの第２のシーンにおいては、ユーザの生体情報レベルに応じて、エフェクトの種類を変化させる。具体的には、生体情報の平均値がレベル１の場合は、再生映像に花びらを舞わせる。生体情報の平均値がレベル２の場合は、再生映像を霧がかかっているように変更する。生体情報の平均値がレベル３の場合は、再生映像に花火の映像を追加する。

なお、本実施形態では、生体情報の平均値のレベルに基づいて、紹介文テンプレート集から紹介文テンプレートを抽出している。これに代えて、生体情報のピーク値のレベルに基づいて、紹介文テンプレート集から紹介文テンプレートを抽出してもよい。また、予めコンテンツ配信者が指定した再生時刻の生体情報の値のレベルに基づいて、紹介文テンプレート集から紹介文テンプレートを抽出してもよい。

なお、本実施形態では、紹介情報再生時において、各シーンにおいて生体情報がピークとなった時に再生された画像を表示しているが、予めコンテンツ配信者が指定した画像を表示してもよい。この場合、紹介文テンプレート集に代表画像ＩＤが追加される。

なお、本実施形態では、コンテンツの再生が終了した後にしか紹介情報を表示していないが、さらに、そのシーンが再生されている間に、コンテンツと共に紹介文を表示してもよい。この場合、図８のステップＳ６の後に、紹介情報作成部８は抽出された紹介文テンプレートをコンテンツ再生部５に出力し、コンテンツ再生部５はコンテンツを邪魔しない位置に、その紹介文テンプレートを表示する。

実施形態２
本実施形態では、コンテンツを視聴している紹介情報視聴者と生体情報レベルが似ている紹介情報作成者により実施形態１において作成された紹介情報を、映像コンテンツと共に表示するコンテンツ情報再生システムについて説明する。

［コンテンツ情報再生システムの構成］
図１２に、本発明の実施形態２によるコンテンツ情報再生システムの構成を示す。コンテンツ情報再生システム１ａは、例えば脈拍などのユーザの生体情報を計測する生体情報計測装置２と、コンテンツを再生し、コンテンツ視聴中のユーザの生体情報に基づいて、紹介情報（紹介文／エフェクト）を表示するコンテンツ情報再生装置３ａと、を備える。

コンテンツ情報再生装置３ａは、コンテンツサーバまたは放送局からコンテンツ等を取得するコンテンツ取得部４と、コンテンツ取得部４により取得されたコンテンツを、ユーザの入力に基づき再生するコンテンツ再生部５と、を備える。さらに、コンテンツ情報再生装置３ａは、紹介情報を受信する紹介情報受信部６ａと、紹介情報受信部６ａにより受信された紹介情報を記憶する紹介情報記憶部９ａと、紹介情報記憶部９ａに記憶された紹介情報及び生体情報計測装置２により計測されたユーザの生体情報に基づいて紹介情報を抽出する紹介情報抽出部１８と、を備える。ここで受信される紹介情報のデータ構造は、図７（ａ）の紹介情報に図１３（ａ）のポイント時刻情報を追加したものである。図７（ｂ）の紹介情報は、実施形態１で説明したように、紹介情報作成者により作成されたものであり、図１３（ｂ）のポイント時刻情報は、予めコンテンツ配信者が、ユーザのコンテンツ視聴時の生体情報の変動を想定して作成したものである。

紹介情報抽出部１８は、生体情報計測装置２により計測されたユーザ（紹介文視聴者）の生体情報が入力され、入力された生体情報を再生時刻と共に記憶する生体情報記憶部１２と、紹介情報のポイント時刻における生体情報から生体情報レベルを判定するレベル判定部１４と、判定された生体情報レベルに基づいて、紹介文／エフェクトを抽出する紹介文／エフェクト抽出部１５ａと、を備える。

［コンテンツ情報再生システムの動作］
図１４に、ユーザが紹介情報視聴モードで映像コンテンツを再生したときの紹介情報抽出処理のフローチャートを示す。ユーザがコンテンツを視聴している間、所定時間間隔で、ユーザの生体情報が生体情報計測装置２により測定され、測定された生体情報が生体情報記憶部１２に記憶され続ける（Ｓ１１）。紹介情報抽出部１８は、コンテンツの再生時刻が再生中のシーンのポイント時刻になったか否かを判断する（Ｓ１２）。コンテンツの再生時刻が再生中のシーンのポイント時刻になると（Ｓ１２でＹｅｓ）、生体情報記憶部１２に記憶された、ポイント時刻の生体情報を読み出す（Ｓ１３）。レベル判定部１４は、読み出された生体情報から、ポイント時刻における生体情報レベルを判定する（Ｓ１４）。紹介文／エフェクト抽出部１５ａは、判定された生体情報レベルに基づいて、そのシーンにおける紹介文／エフェクトを抽出する（Ｓ１５）。具体的には、図７（ａ）に示す紹介情報のデータ構造において、コンテンツＩＤ、時刻ＩＤ、レベルＩＤを指定することにより得られる紹介文（エフェクト）が、そのシーンにおける紹介文／エフェクトである。抽出された紹介文／エフェクトは、コンテンツ再生部５に出力され、映像コンテンツと共に表示される（Ｓ１６）。コンテンツの再生が継続しているときは（Ｓ１７でＮｏ）ステップＳ２に戻り紹介情報を再度抽出する。一方、コンテンツの再生が終了すれば（Ｓ１７でＹｅｓ）このフローチャートを終了する。

図３、図１３及び図１５を用いて、具体的に説明する。図１３（ｂ）に、ポイント時刻情報の一例を示す。第１のシーン（シーンＩＤ：ＩＤＴ−１）のポイント時刻は１０分３０秒であり、図１５（ａ）の生体情報記憶部１２に記憶された生体情報において、再生時刻１０分３０秒の生体情報はレベル２である。図１５（ｂ）の受信した紹介情報より、第１のシーンにおいて生体情報がレベル２の紹介情報はないため、このシーンにおいて紹介情報は表示されない。

また、第２のシーン（シーンＩＤ：ＩＤＴ−２）のポイント時刻は１３分２０秒であり（図１３（ｂ）参照）、図１５（ａ）において、再生時刻１３分２０秒の生体情報はレベル１である。図１５（ｂ）より、第２のシーンにおいて生体情報がレベル１の紹介情報は、ユーザＹのエフェクトｂである。従って、このシーンにおいてエフェクトｂが実行される。

さらに、第３のシーン（シーンＩＤ：ＩＤＴ−３）のポイント時刻は１７分であり（図１３（ｂ）参照）、図１５（ａ）において、再生時刻１７分の生体情報はレベル３である。図１５（ｂ）より、第３のシーンにおいて生体情報がレベル３の紹介情報は、ユーザＸの紹介文ｃ及びユーザＹのエフェクトｃである。従って、このシーンにおいて紹介文ｃが表示され、エフェクトｃが実行される。

本実施形態によれば、受信した紹介情報から、コンテンツ視聴中のユーザの生体情報レベルに対応する紹介情報を抽出して、抽出された紹介情報を再生中のコンテンツと共に表示する。これにより、ユーザ（紹介文視聴者）と生体情報レベルが似ている他のユーザ（紹介文作成者）が作成した紹介情報が選ばれて表示されるので、感覚がかけ離れた紹介情報が表示されたり、コンテンツ視聴者が紹介情報が多すぎて読み切れなかったりすることが少なくなる。

なお、実施形態１と同様に、コンテンツの再生が終了した後に、他のユーザの紹介情報を紹介文テンプレート集として再生中表示された紹介情報を一覧表示して、その紹介情報を修正してもよい。この場合、修正した紹介情報を記憶して、記憶された紹介情報をユーザの紹介情報としてコンテンツサーバへ送信する。

上記実施の形態において、コンテンツ情報再生システムは、携帯電話等の携帯型電子機器、テレビ、光ディスクプレーヤ等の家庭用ＡＶ機器、リモコン等の家庭用ＡＶ機器の周辺機器、家庭用ゲーム機、パソコン、プリンタ等のパソコンの周辺機器、電子レンジ等の家庭用電化機器の一部として実装されていても良い。

上記実施の形態において、各構成要素はコンテンツ情報再生装置内に配置されているが、構成要素の一部がコンテンツ情報再生装置外に配置され、ネットワークを介してコンテンツ情報再生装置と接続しても良い。

上記実施の形態において、構成要素から構成要素へのアクセスはオペレーティングシステムを介して行っても良い。

なお、コンテンツはＭＰＥＧ２、ＭＰＥＧ４等の映像情報、ＡＡＣ（Ａｄｖａｎｃｅｄ
Ａｕｄｉｏ Ｃｏｄｉｎｇ）等の音声情報、ＨＴＭＬ（ＨｙｐｅｒＴｅｘｔ Ｍａｒｋｕｐ Ｌａｎｇｕａｇｅ）、ＢＭＬ（Ｂｒｏａｄｃａｓｔ Ｍａｒｋｕｐ Ｌａｎｇｕａｇｅ）等の構造記述型言語記述データ、ＪＰＥＧ（Ｊｏｉｎｔ Ｐｈｏｔｏｇｒａｐｈｉｃ Ｅｘｐｅｒｔｓ Ｇｒｏｕｐ）、ＰＮＧ（Ｐｏｒｔａｂｌｅ Ｎｅｔｗｏｒｋ Ｇｒａｐｈｉｃｓ）等の画像情報、ＥｃｍａＳｃｒｉｐｔ等のスクリプト、メタデータ等でも良い。

なお、上記した各実施の形態は、記憶装置（ＲＯＭ、ＲＡＭ、ハードディスク等）に格納された上述した処理手順を実行可能な所定のプログラムデータが、ＣＰＵによって解釈実行されることで実現される。この場合、プログラムデータは、記録媒体を介して記憶装置内に導入されてもよいし、記録媒体上から直接実行されてもよい。なお、記録媒体は、ＲＯＭ、ＲＡＭ、フラッシュメモリ等の半導体メモリ、フレキシブルディスクやハードディスク等の磁気ディスクメモリ、ＣＤ−ＲＯＭやＤＶＤ、ＢＤ等の光ディスク、メモリカード等の記録媒体をいう。また、記録媒体は、電話回線や搬送路等の通信媒体も含む概念である。

なお、コンテンツ情報再生装置３または３ａ内の各機能ブロックは典型的には集積回路であるＬＳＩとして実現されても良い。これらは個別に１チップ化されても良いし、一部又は全てを含むように１チップ化されても良い。ここでは、ＬＳＩとしたが、集積度の違いにより、ＩＣ、システムＬＳＩ、スーパーＬＳＩ、ウルトラＬＳＩと呼称されることもある。また、集積回路化の手法はＬＳＩに限るものではなく、専用回路又は汎用プロセサで実現してもよい。ＬＳＩ製造後に、プログラムすることが可能なＦＰＧＡ（Ｆｉｅｌｄ Ｐｒｏｇｒａｍｍａｂｌｅ Ｇａｔｅ Ａｒｒａｙ）や、ＬＳＩ内部の回路セルの接続や設定を再構成可能なリコンフィギュラブル・プロセッサーを利用しても良い。さらには、半導体技術の進歩又は派生する別技術によりＬＳＩに置き換わる集積回路化の技術が登場すれば、当然、その技術を用いて機能ブロックの集積化を行ってもよい。バイオ技術の適応等が可能性としてありえる。

本発明に係るコンテンツ情報再生装置は、紹介情報作成者が紹介情報を作成しやすく、コンテンツ配信者や他のユーザの意図を取り入れた紹介情報が作成されるという効果を有し、一般家庭等で使用されるコンテンツ情報再生装置として有用である。

本発明の実施形態１によるコンテンツ情報再生システムの構成を示すブロック図 ヘッドマウントディスプレイを装着したユーザを示す図 紹介文テンプレート集の一例を示す図 生体情報記憶部１２に記憶された生体情報及び受信した紹介文テンプレート集の一例を示す図 １次処理後の情報の一例を示す図 ２次処理後の情報の一例を示す図 紹介情報のデータ構造の一例及び紹介情報の一例を示す図 ユーザが紹介文作成モードで映像コンテンツを再生したときの紹介情報作成処理を示すフローチャート 紹介情報の表示例を示す図 マルチスクリーンの一例を示す図 エフェクトテンプレート集の一例を示す図 本発明の実施形態２によるコンテンツ情報再生システムの構成を示すブロック図 ポイント時刻情報のデータ構造の一例及びポイント時刻情報の一例を示す図 ユーザが紹介情報視聴モードで映像コンテンツを再生したときの紹介情報抽出処理を示すフローチャート 生体情報記憶部１２に記憶された生体情報及び受信した紹介情報の一例を示す図

符号の説明

１ コンテンツ情報再生システム
２ 生体情報計測装置
３，３ａ コンテンツ情報再生装置
４ コンテンツ取得部
５ コンテンツ再生部
６ 紹介文テンプレート集／紹介情報送受信部
６ａ 紹介情報受信部
７ 紹介文テンプレート集記憶部
８ 紹介情報作成部
９，９ａ 紹介情報記憶部
１０ 紹介情報表示部
１１ 紹介情報修正部
１２ 生体情報記憶部
１３ 平均値算出部
１４ レベル判定部
１５ 紹介文抽出部
１５ａ 紹介文／エフェクト抽出部
１６ ピーク検出部
１７ 画像検索部
１８ 紹介情報抽出部

Claims (12)

1. コンテンツを取得するコンテンツ取得部と、
   前記コンテンツ取得部が取得した前記コンテンツを再生するコンテンツ再生部と、
   前記コンテンツのシーン毎に複数の生体情報レベル及び前記生体情報レベルに関連する紹介情報テンプレートとを対応付けた紹介情報テンプレート集を受信する受信部と、
   ユーザの生体情報を入力する生体情報入力部と、
   前記コンテンツの再生時に、前記生体情報入力部が入力した前記生体情報から前記コンテンツのシーン毎の生体情報レベルを判定し、前記受信部が受信した前記紹介情報テンプレート集から、判定した前記生体情報レベルに関連する紹介情報テンプレートを抽出して紹介情報を作成する紹介情報作成部と、
   前記コンテンツの再生終了時に、前記紹介情報作成部が作成した前記紹介情報を表示する紹介情報表示部と、
   前記紹介情報作成部が作成した前記紹介情報を送信する送信部と、を備えたことを特徴とするコンテンツ情報再生装置。
2. 前記紹介情報作成部が作成した前記紹介情報を修正する紹介情報修正部と、を更に備え、
   前記送信部は、前記紹介情報修正部が修正した前記紹介情報を送信する、ことを特徴とする請求項１に記載のコンテンツ情報再生装置。
3. 前記紹介情報作成部が判定する前記コンテンツのシーン毎の生体情報レベルは、前記コンテンツの所定シーンの再生時に計測された生体情報の平均値から算出したレベルである、ことを特徴とする請求項１に記載のコンテンツ情報再生装置。
4. 前記紹介情報作成部が判定する前記コンテンツのシーン毎の生体情報レベルは、前記コンテンツの所定シーンの再生時に計測された生体情報の最大値から算出したレベルである、ことを特徴とする請求項１に記載のコンテンツ情報再生装置。
5. 前記紹介情報作成部は、前記コンテンツの所定シーンの再生時に計測された生体情報の最大値から算出したレベルに対応する再生時間帯に再生していた画像を取得し、前記紹介情報として作成する、ことを特徴とする請求項１から４のいずれかに記載のコンテンツ情報再生装置。
6. 前記紹介情報テンプレートは、紹介文テンプレートである、ことを特徴とする請求項１から５のいずれかに記載のコンテンツ情報再生装置。
7. 前記紹介情報テンプレートは、エフェクトテンプレートである、ことを特徴とする請求項１から５のいずれかに記載のコンテンツ情報再生装置。
8. コンテンツを取得するコンテンツ取得部と、
   前記コンテンツ取得部が取得した前記コンテンツを再生するコンテンツ再生部と、
   前記コンテンツのシーン毎に複数の生体情報レベル及び前記生体情報レベルに関連する紹介情報とを対応付けた紹介情報集を受信する受信部と、
   ユーザの生体情報を入力する生体情報入力部と、
   前記コンテンツの再生時に、前記生体情報入力部が入力した前記生体情報から前記コンテンツのシーン毎の生体情報レベルを判定し、前記受信部が受信した前記紹介情報集から、判定した前記生体情報レベルに関連する紹介情報を抽出する紹介情報抽出部と、を備え、
   前記コンテンツ再生部は、再生中の前記コンテンツと共に、前記紹介情報抽出部が抽出した前記紹介情報を表示する、ことを特徴とするコンテンツ情報再生装置。
9. 前記紹介情報は、前記コンテンツのシーン毎のポイント時刻を含み、
   前記紹介情報抽出部は、前記ポイント時刻におけるユーザの生体情報から生体情報レベルを判定し、判定した前記生体情報レベルに関連する紹介情報を抽出する、ことを特徴とする請求項８に記載のコンテンツ情報再生装置。
10. 請求項１から９のいずれかに記載のコンテンツ情報再生装置と、
    ユーザの生体情報を計測し、計測した前記生体情報を前記生体情報入力部に出力する生体情報計測装置と、を含むコンテンツ情報再生システム。
11. コンテンツを取得するコンテンツ取得部と、
    前記コンテンツ取得部が取得した前記コンテンツを再生するコンテンツ再生部と、
    前記コンテンツのシーン毎に複数の生体情報レベル及び前記生体情報レベルに関連する紹介情報テンプレートとを対応付けた紹介情報テンプレート集を受信する受信部と、
    前記コンテンツの再生時に、前記生体情報入力部が入力した前記生体情報から前記コンテンツのシーン毎の生体情報レベルを判定し、前記受信部が受信した前記紹介情報テンプレート集から、判定した前記生体情報レベルに関連する紹介情報テンプレートを抽出して紹介情報を作成する紹介情報作成部と、
    前記紹介情報作成部が作成した前記紹介情報を送信する送信部と、を備えたことを特徴とする情報処理装置。
12. コンテンツを取得するコンテンツ取得部と、
    前記コンテンツ取得部が取得した前記コンテンツを再生するコンテンツ再生部と、
    前記コンテンツのシーン毎に複数の生体情報レベル及び前記生体情報レベルに関連する紹介情報とを対応付けた紹介情報集を受信する受信部と、
    前記コンテンツの再生時に、前記生体情報入力部が入力した前記生体情報から前記コンテンツのシーン毎の生体情報レベルを判定し、前記受信部が受信した前記紹介情報集から、判定した前記生体情報レベルに関連する紹介情報を抽出する紹介情報抽出部と、を備え、
    前記コンテンツ再生部は、再生中の前記コンテンツと共に、前記紹介情報抽出部が抽出した前記紹介情報を表示する、ことを特徴とする情報処理装置。

Images