JP2005032167A - 情報検索装置、情報検索方法、情報検索システム、クライアント装置およびサーバ装置 - Google Patents

Abstract

【課題】 ユーザ毎の感情状態、あるいは、感情状態の変化に応じて、ユーザ毎に適切なコンテンツの検索および推奨ができるようにする。
【解決手段】 記録装置部１１により、ユーザの１種類以上の生体情報が検出され、これが記録装置部１１内の感情情報解析部において解析されて、生体情報の供給元であるユーザの感情状態が解析される。この解析結果に基づいて、すなわち、ユーザの感情状態に基づいて、ＣＰＵ３１とコンテンツ推奨処理部２４とが協働し、コンテンツ情報データベース２２から、あるいは、通信部２１を通じて、当該ユーザに適したコンテンツを検索し、ユーザインターフェイス３３を通じてユーザに通知する。
【選択図】図１

Description

この発明は、例えば、ユーザからの要求に応じて情報を検索して提供するようにする装置、方法、システムに関する。

例えば、インターネットを通じて提供されるオンラインショップなどのように、過去の購買履歴やユーザ（購買者）の嗜好に関する情報などの事前入力情報を考慮して、ユーザが購入を希望するであろうコンテンツ(書籍、映画、音楽データ等が記録されたＣＤ（Compact Disc）、イベントチケットなど)に関する情報を提供し、コンテンツやチケットなどの購買を補助するようにするサービスが行われている。

この場合、購入後のコンテンツの体験効果(満足度や快適度など)が反映されないため、過去に不満に感じたコンテンツの購入履歴も含んだ推奨サービスが実施されることになる。つまり、オンラインショッピングで購入した書籍があまりおもしろくなかった場合でも、その購入履歴は残るので、その購入履歴に基づいて、好みでないジャンルの書籍や好みでない作家の書籍についても推奨されてしまう場合もある。

また、ユーザのコンテンツに対する嗜好も常に同じではなく、その日の気分や体調などによって変化する場合もある。しかし、上述のような、コンテンツの推奨サービスを受けるにあたって、毎回、自己の嗜好に関する情報を入力しなければならないのは面倒であるし、また、ユーザ自身が自己の体調や気分を正確に把握し、これに応じた情報を事前入力情報として入力するようにすることは難しい。

そこで、履歴情報や事前入力情報だけによらず、ユーザ毎に異なる客観的な情報を用いて、コンテンツの推奨サービスを行うようにすることが考えられている。例えば、特許文献１（特開２００２−２２２２０９号公報）には、ユーザの感情リズム値を用いる方式が提案されている。

この特許文献１に記載の方式は、レンタル用コンテンツについて、喜怒哀楽の内のどの感情を刺激する要素を含むかを予め調べて分類しておき、分類したそれぞれのコンテンツのレンタル周期から、各感情の周期を正弦波関数で表し、この正弦波関数とユーザの生年月日データと性別データとに基づいて、そのユーザの各感情リズム値を得て、この感情リズム値に基づいて、そのユーザに適したコンテンツの推奨を行うようにするものである。

この特許文献１に記載の方式を用いることにより、ユーザの感情リズムというユーザ毎に得られる客観的な情報に基づいて、コンテンツの推奨を行うことができ、履歴情報や事前入力情報だけによらず、ユーザに対して新たな基準に基づいて、コンテンツを推奨するための情報を提供し、コンテンツを推奨するサービス自体に新たな価値を付加することができるようにされる。

上述した特許文献は以下のとおりである。
特開２００２−２２２２０９号公報

ところで、上述したように、特許文献１に記載の方式の場合、ユーザの感情リズム値は、予め分類されたレンタル用コンテンツのレンタル周期とユーザの生年月日と性別とに基づいて求められる。レンタル用コンテンツのレンタル周期は、レンタル用コンテンツの数や種類、客層などにより影響を受ける。このため、レンタル用コンテンツのレンタル周期が用いられて得られるユーザの感情リズム値を基準として用いてコンテンツを推奨する場合には、ユーザに提供する情報の信憑性が問題となる場合があると考えられる。

そこで、履歴情報や事前入力情報、その他、ユーザからの情報ではない外的情報を用いることなく、各ユーザの感情状態を正確に分析して、ユーザ毎に適切なコンテンツを推奨できるようにし、ユーザが目的とするコンテンツを迅速かつ正確に見つけ出すことができるようにすることが望まれている。

以上のことにかんがみ、この発明は、履歴情報や事前入力情報だけでなく、ユーザ毎の感情状態、あるいは、感情状態の変化に応じて、ユーザ毎に適切なコンテンツの検索および推奨ができるようにする装置、方法、システムを提供することを目的とする。

上記課題を解決するため、請求項１に記載の発明の情報検索装置は、
ユーザから１種類以上の生体情報を検出する検出手段と、
前記検出手段により検出された１種類以上の前記生体情報から、前記ユーザの感情状態を解析する解析手段と、
前記解析手段による解析結果に基づいて、前記ユーザに対して推奨するコンテンツを検索する検索手段と、
前記検索手段においての検索結果を通知する通知手段と
を備えることを特徴とする。

この請求項１に記載の情報検索装置によれば、検出手段により、ユーザの１種類以上の生体情報が検出され、これが解析手段により解析されて、生体情報の供給元であるユーザの感情状態が解析される。この解析手段の解析結果に基づいて、すなわち、ユーザの感情状態に応じて、検索手段により当該ユーザに対して推奨するコンテンツが検索され、この検索結果が通知手段を通じてユーザに通知される。

これにより、ユーザが自分では客観的に認識が難しい自己の感情状態が、自己の生体情報から自動的に解析され、その解析結果に応じて、そのユーザに対して、そのユーザの感情状態に応じたコンテンツが検索され、これが推奨するようにされる。すなわち、ユーザの感情状態に基づく、コンテンツの検索、推奨が実現される。

したがって、ユーザは、多数のコンテンツの中から、自己の感情状態に応じて検索されたコンテンツの推奨を受けることができるようにされる。そして、推奨されたコンテンツの中から好みのコンテンツを選択し、これを体験（利用）することができるようにされる。

この発明により、ユーザの生体情報を解析することによりユーザの感情情報を得て、この感情情報を用いることにより、ユーザに対し、より個人性にマッチしたコンテンツの推奨を行うことができる。つまり、ユーザが自分の感情状態を分析したり、また、複雑な操作を行ったりすることなく、ユーザの感情状態を自動的に解析して、この解析結果に応じて、ユーザに合ったコンテンツを推奨するようにすることができるようにされる。

したがって、ユーザ側から見ると、自分の感情状態が客観的に把握され、この把握された感情状態をも考慮して、自分により適したコンテンツの検索、推奨サービスを受けることができるようにされる。

以下、図を参照しながら、この発明による装置、方法、システムの一実施の形態について説明する。

なお、以下の実施の形態においては、次の順序にしたがって説明する。
１：第１の実施の形態（コンテンツ推奨装置について）
１−１：コンテンツ推奨装置の概要について
１−２：記録装置部１１の構成について
１−３：感情解析処理部１２０における感情解析の一例について
１−４：コンテンツ推奨装置の動作の概要について
１−５：コンテンツの推奨の具体例について
１−６：コンテンツ体験（利用）時の動作について
１−７：コンテンツ推奨装置の動作のまとめ
２：第２の実施の形態（コンテンツ検索推奨システムについて）
２−１：コンテンツ検索推奨システムの概要
２−２：クライアント端末１について
２−３：サーバ装置２について
２−４：コンテンツ検索推奨システムの動作について
３：その他

[１：第１の実施の形態（コンテンツ推奨装置について）]
[１−１：コンテンツ推奨装置の概要について]
まず、この発明による情報検索装置、情報検索方法の一実施の形態が適用されたコンテンツ推奨装置について説明する。図１は、この実施の形態のコンテンツ推奨装置を説明するためのブロック図である。この実施の形態のコンテンツ推奨装置は、一般のユーザ（エンドユーザ）に利用される装置である。コンテンツ推奨装置は、ユーザからのスケジュール情報の入力を受け付けて、これを管理するスケジュール帳機能を備えるものである。

また、コンテンツ推奨装置は、詳しくは後述もするように、ユーザの体温や脈拍などの種々の生体情報を継続的に検出して蓄積し、この蓄積した生体情報に基づいて、ユーザの感情状態を分析することができるものである。そして、この実施の形態のコンテンツ推奨装置は、ユーザが目的とする日にコンテンツの利用スケジュールを入力した場合に、感情状態をも考慮してそのユーザにとって適切なコンテンツを検索し、これをユーザに推奨することができるものである。

つまり、この実施の形態のコンテンツ推奨装置は、スケジュール帳機能とコンテンツ検索推奨機能とを備えた情報検索装置であり、スケジュール帳機能に連動させて、自己の感情状態をも考慮した適切なコンテンツの検索推奨機能を実現するようにしたものである。そして、この実施の形態のコンテンツ推奨装置は、例えば、パーソナルコンピュータや電子手帳、ＰＤＡ（Personal Digital Assistants）などの種々の情報処理装置に適用可能なものである。

以下、この実施の形態のコンテンツ推奨装置について具体的に説明する。図１に示すように、この実施の形態のコンテンツ推奨装置は、制御部３０に対して、感情状態の評価処理系１０と、コンテンツ検索推奨処理系２０とが接続されて構成されたものである。

感情状態の評価処理系１０は、映像、音声、生体情報および感情記録装置部（以下、単に記録装置部という。）１１と、複合情報データベース１２と、スケジュールベースアプリケーション部１３とからなっている。また、コンテンツ検索推奨処理系２０は、通信部２１と、コンテンツ情報データベース２２と、ユーザ情報データベース２３と、コンテンツ推奨処理部２４とからなっている。

制御部３０は、この実施の形態のコンテンツ推奨装置の各部を制御するものであり、ＣＰＵ（Central Processing Unit）３１、メモリー部３２、ユーザインターフェイス（以下、ユーザＩ／Ｆと略称する。）３３とがシステムバス３４を通じて接続されて形成されたものである。

制御部３０のメモリー部３２は、図示しないが、プログラムや処理に必要なデータが記録されてＲＯＭ（Read Only Memory）と、各種の処理において作業領域（ワークエリア）として用いられるＲＡＭ（Random Access Memory）などを備えたものである。また、制御部３０のユーザＩ／Ｆ３３は、ユーザからの指示入力や各種の情報入力を受け付けるキー操作部やポインティングデバイスなどからなる情報受付部と、ＬＣＤ（Liquid Crystal Display）などの表示素子やスピーカーなどの情報提供部とからなるものである。

そして、感情状態の評価処理系１０の記録装置部１１は、当該コンテンツ推奨装置のユーザの生体情報を検出し、これを所定の記録媒体に記録すると共に、その記録した生体情報に基づいてユーザの感情状態を解析し、この解析結果も所定の記録媒体に記録するようにするものである。ここで生体情報を解析することにより得られるユーザの感情状態は、詳しくは後述もするように、このコンテンツ推奨装置のユーザに適したコンテンツを検索し、これを推奨する場合に用いられることになる。

なお、この記録装置部１１は、この実施の形態のコンテンツ推奨装置の本体部分に対して着脱可能とされており、ユーザは記録装置部１１をコンテンツ推奨装置から取り外し、例えば、上着のポケットなどに入れるなどして容易に持ち運ぶことができるようにされている。これにより、コンテンツ推奨装置のユーザは、常時、自己の生体情報を、記録装置部１１を通じて検出し、蓄積することができるようにされる。

記録装置部１１により検出された生体情報と感情状態の解析結果は、後述もするように、記録装置部１１が備える記録部と、当該コンテンツ推奨装置の複合情報データベース１２とが協働して管理を行うようにしている。記録装置部１１の記録部と、複合情報データベース１２とは、種々の記録装置により実現可能であるが、この実施の形態においては、例えば、ハードディスクドライブにより実現されているものである。

そして、後述もするように、記録装置部１１が備える記録部には、生体情報や感情状態の解析情報である実データが記録保持され、また、複合情報データベース１２には、生体情報や感情状態の解析情報のいわゆるインデックス情報が記憶保持される。

すなわち、複合情報データベース１２には、図２Ａに示すように、例えば、複合情報ＩＤ、タイトル、日付、時刻、データ参照先などの情報が登録される。ここで、複合情報ＩＤは、記録装置部１１で記録され蓄積されるデータファイルに割り当てられる固有の識別子である。タイトルはデータファイルのタイトル（名称）を表すものであり、例えば再生時にユーザに対してデータの内容を示す場合などに用いられる。

また、日付は、この記録装置部１１が記録を開始した日付を表す。時刻は、記録装置部１１がデータの記録を開始した時刻を表す。日付と時刻に関しては、データファイル内に記述されている場合はその値を用いるようにすることも可能である。データ参照先は、記録装置部１１に記録され蓄積されているデータファイルの参照先(例えばファイル名)を表すものである。

なお、記録装置部１１が当該コンテンツ推奨装置から取り外されている間に蓄積された生体情報に対するインデックス情報（複合情報）は、例えば、記録装置部１１がコンテンツ推奨装置に装着された場合に、コンテンツ推奨装置１の制御部３０の機能により、複合情報データベース１２に形成される。

一方、記録装置部１１の記憶部に記録されるデータのファイルフォーマットは種々の態様が考えられるが、例えば、映像、音声、タイムスタンプ、複数の生体信号(例えば、脳波、筋電、心拍、脈波（脈拍）など)、位置（記録装置部１１が使用される位置）、天候などの種々の情報が同期した形式で、すなわち、同じ時期に取得された情報については、その取得時期の関連性を維持した状態で記録するようにされている。

このように、記録装置部１１と複合情報データベース１２とにより、ユーザから検出される生体情報と、この生体情報に応じて解析される感情状態とを管理することができるようにされる。さらに、位置や天候などといった情報も関連付けて管理することもできるようにされる。

また、図１において、感情状態の評価処理系１０のスケジュールベースアプリケーション部１３は、いわゆるトランザクション処理を行うことにより、スケジュール帳機能と連動した態様で、この実施の形態のコンテンツ推奨装置のユーザに対して、コンテンツの推奨機能を提供することを実現する部分である。

この実施の形態において、スケジュールベースアプリケーション部１３は、ユーザからの指示入力に応じて、入力されたスケジュールを管理する処理や、後述するコンテンツ推奨処理部２４の処理結果に応じて、推奨されたコンテンツをユーザに対して通知するための処理などを行う処理部１３１と、ユーザの生体情報や感情情報などの処理に必要なパラメータを格納する記憶部１３２とから構成される。

なお、処理部１３１の機能は、例えばＲＯＭ３２に記録されるプログラムをＣＰＵ３１において実行することにより実現することも可能である。すなわち、処理部１３１の機能は、制御部３０において実行されるソフトウエアによって実現することも可能である。また、記憶部１３２は、ＲＡＭやＥＥＰＲＯＭ（Electrically Erasable and Programmable ROM）などの半導体メモリーやハードディスクによって構成することが可能である。

このように、この実施の形態のコンテンツ推奨装置においては、記録装置部１１と、複合情報データベース１２と、スケジュールベースアプリケーション部１３とにより、生体情報の測定（検出）、生体情報の蓄積、生体情報を用いた感情状態の評価と把握などの主に感情状態の評価に関する処理を行うようにしている。

また、コンテンツ推奨処理系２０の通信部２１は、例えば、インターネットなどの広域通信ネットワーク等に接続し、通信処理を行うようにするためのものであり、この実施の形態のコンテンツ推奨装置が種々のコンテンツについての情報を収集する場合などに用いられるものである。

また、コンテンツ推奨処理系２０のコンテンツ情報データベース２２は、例えば、通信部２１を通じて受け付けられる、種々の情報提供機関から提供されるユーザが利用可能なコンテンツについての情報を記憶保持するものである。ここで、情報提供機関は、それが設置されている、あるいは、担当することになる、競技場、ホール、映画館、美術館などのチケットの売れ行きや、それらの場所で提供される催し物などのコンテンツについての関心度などについての情報を提供するものであり、例えば、パーソナルコンピュータなどにより実現される。

コンテンツ情報データベース２２の内容は、例えば、定期的に最新情報の更新が行われる。このコンテンツ情報データベース２２には、例えば図２Ｂに示すように、コンテンツＩＤ、品目、在庫数、単価、在庫期間、有効期間、類型、在庫場所、利用場所、問合せ状況、および販売実績などの情報が登録されている。

コンテンツ情報データベース２２のコンテンツＩＤは、コンテンツ(例えば、イベントのチケット等)に割り当てられた固有の識別子であり、インターネットで広く共通に利用されるものである。品目は、コンテンツの名称を表す。在庫数はコンテンツの在庫数を表す。また、単価は、推奨するコンテンツの単位当たりの販売価格を表す。在庫期間は、推奨するコンテンツの在庫期間を表す。

また、有効期間は、推奨するコンテンツの有効期間を表す。類型は、推奨するコンテンツの分類を表す。例えば、推奨するコンテンツがチケットの場合、そのチケットが対象とするイベントの分類(音楽、観光などの分類)が類型により表される。また、推奨するコンテンツが映画の場合には、悲しい内容、明るい内容、リラックスを促進できる内容など、その内容の分類やコンテンツの特性を表すこともできるようにされる。

在庫場所は、推奨するコンテンツを管理している担当店名、担当地域などを表す。利用場所は推奨するコンテンツを体験する場所(例えば、推奨するコンテンツがチケットの場合、そのチケットで体験できるイベントが行われる場所)を表す。問合せ状況は、推奨するコンテンツに関して、情報提供機関にどの程度の問合せが行われているかに基づいて算出されるレベル(関心度)を表す。販売実績は、推奨するコンテンツに関して、販売開始時刻からどの程度販売されたかに基づいて算出されるレベル(人気度)を表す。

この他、ユーザの感情状態に応じたコンテンツを推奨するために、各コンテンツがユーザの感情にどのように作用するかなどのコンテンツの特性の評価を行っておき、この特性の評価結果を示す情報をも記憶保持するようにしておくことにより、コンテンツの検索を効率的に行うようにすることができる。

このように、コンテンツ情報データベース２２は、ユーザが利用可能なコンテンツについての上述した種々の情報について記憶保持しているものであり、例えば、ハードディスクドライブにより実現されるものである。もちろん、ハードディスク以外にも、光ディスクなどを用いることも可能であり、光ディスクの場合には、予めコンテンツに関する情報が記録されたＣＤ−ＲＯＭを用いることができる。また、記録可能な光ディスクを用いることにより、通信部２１を通じて取得する外部からのコンテンツに関する情報をハードディスクの場合と同様に記憶保持することもできるようにされる。

また、ユーザ情報データベース２３は、いわゆるセッション管理のための情報を格納する部分である。このユーザ情報データベース２３は、例えば、図２Ｃに示すように、ユーザＩＤ、コンテンツＩＤ、ステータス、購入数、購入日、購入時刻、購入場所、有効期間、感情情報などの情報が登録されると共に、ユーザ情報エリアが登録されたものである。

ユーザ情報データベース２３において、ユーザＩＤは、ユーザに割り当てられた固有の識別子であり、例えば、スケジュールベースアプリケーション部１３の記憶部１３２に登録されていたものである。このユーザＩＤは通常は必要ないが、例えば、通信Ｉ／Ｆ２１を通じて通信を行うような場合には必要になるものである。コンテンツＩＤは、ユーザが推奨を希望しているコンテンツの名称と、それを識別するＩＤを表す。

ステータスは、推奨を受けたコンテンツの受け入れ状態(拒否、保留、確定、キャンセル)を表す。購入数は、ユーザが購入したコンテンツの数を表す。この購入数は、例えばユーザの購入単位の把握や、購入数に応じた還元サービスの提供などに利用される。購入日は、ユーザがコンテンツを購入した日付を表し、例えば、ユーザの季節によるサービスの利用情報を把握する場合に利用される。

購入時刻は、ユーザがコンテンツを購入した時刻(時間帯)を表す。この購入時刻は、ユーザの時間帯によるサービスの利用状況把握などに利用される。購入場所は、コンテンツを販売した担当店名、担当地域などを表す。この購入場所は、例えばユーザがコンテンツを購入した地域区分の把握などに利用される。

有効期間は、推奨したコンテンツの有効期間を表す。この有効期間は、コンテンツに付随するサービスの提供を受ける期間の判定に用いられる。また、感情情報は、上述もしたように、記録装置部１１において検出されて蓄積された生体情報を解析することにより得られた当該コンテンツ推奨装置のユーザの感情状態を示す情報や後述もするように、感情状態を示す情報を感情の種別毎に累積することにより得られる感情分布を示す情報が格納される。

ユーザ情報エリアには、ユーザに関する情報、例えば現住所などの個人情報が登録される。このユーザ情報エリアに登録されている情報は、推奨したコンテンツが例えばチケットの場合、そのチケットにより入場するイベント会場までの自宅からの交通ルートを検索するような場合に利用される。

このように、ユーザ情報データベース２３は、コンテンツ検索推奨機能を用いようとしているユーザについての種々の情報を記憶保持するようにするものであり、例えば、ハードディスクドライブにより実現されるものである。もちろん、記録可能な光ディスクなどの記録媒体を用いることも可能である。

また、コンテンツ推奨処理系２０は、コンテンツ推奨処理部２４を備えている。このコンテンツ推奨処理系２０は、図１に示したように、人気度集計部２４１、関心度集計部２４２、感情予想部２４３を備えたものである。

コンテンツ推奨処理部２４の人気度集計部２４１は、すでに販売されているコンテンツの売れ行きに関する情報を集計する部分であり、関心度集計部２４２は、今後販売、あるいはすでに販売されているコンテンツの問い合わせや情報参照の程度を集計する部分である。また、感情予想部２４３は、ユーザがコンテンツを体験した場合の感情の変化を予想する部分である。

なお、これら人気度集計部２４１、関心度集計部２４２、感情予想部２４３のそれぞれにより実現される機能は、ＣＰＵ３１で実行されるソフトウエアによっても実現することができる。

そして、この図１に示したコンテンツ推奨装置により、上述のように、コンテンツ推奨装置のユーザ（使用者）の生体情報が測定（検出）されて蓄積され、これが解析されて当該ユーザの感情状態が把握され、この感情状態をも考慮したコンテンツの検索推奨が行われる。そして、この実施の形態においては、検索対象のコンテンツに関する情報は、当該コンテンツ推奨装置のコンテンツ情報データベースに格納されており、これを用いることができるようにされる。

そして、この第１の実施の形態においては、生体情報を検出する検出手段としての機能と、感情状態を解析する解析手段としての機能とは、詳しくは後述もするように、主に記録装置部１１が実現し、また、コンテンツ検索手段としての機能は、ＣＰＵ３１、コンテンツ推奨処理部２４、コンテンツ情報データベース２２により実現し、また、通知手段としての機能は、スケジュールベースアプリケーション部１３、ユーザＩ／Ｆ３３の情報提供部によって実現される。

また、コンテンツ利用後のユーザの感情状態を予測する予測手段は、コンテンツ推奨処理部２４の感情予測部２４３が実現し、予測通知手段としての機能は、主にユーザＩ／Ｆ３３の情報提供部が実現する。また、コンテンツ利用後のユーザの感情状態を評価する評価手段は、ＣＰＵ３１などにより実現される。また、ユーザからの予定表情報などの入力を受け付ける受付手段としての機能は、ユーザＩ／Ｆ３３の情報受付部により実現される。

[１−２：記録装置部１１の構成例について]
次に、図１に示したように構成されるコンテンツ推奨装置の記録装置部１１の構成例について説明する。図３は、図１に示したコンテンツ推奨装置の記録装置部１１の構成例を説明するためのブロック図である。図３に示すように、この実施の形態のコンテンツ推奨装置の記録装置部１１は、撮像部１１１、Ａ／Ｄコンバータ１１２、撮像部信号処理部１１３、撮像部コントローラ１１４、ＣＰＵ１１５、ＲＡＭ１１６、生体情報入力部１１７、Ａ／Ｄコンバータ１１８、生体情報入力部コントローラ１１９、感情解析処理部１２０、記録部コントローラ１２１、記録部１２２、ネットワークインターフェイス（図３においてはネットワークＩ／Ｆと記載。）１２３、表示部コントローラ１２４、表示部１２５、再生処理部１２６を備えたものである。

撮像部１１１は、レンズ機構や例えばＣＣＤ（Charge Coupled Device）のようなイメージセンサーを備え、被写体の画像を撮像し、その撮像した画像をアナログ映像信号として後段の回路に出力することができるものである。撮像部１１１からのアナログ映像信号は、Ａ／Ｄコンバータ１１２によりデジタル信号に変換され、これが撮像部信号処理部１１３に供給される。

撮像部信号処理部１１３は、例えば、ＭＰＥＧ（Moving Picture Experts Group）方式などの画像圧縮方式を用いて画像圧縮処理を行う。この撮像部信号処理部１１３、および、撮像部１１１、Ａ／Ｄコンバータ１１２は、主に撮像部コントローラ１１４によって制御するようにされている。すなわち、撮像部コントローラ１１４は、撮像部１１１、Ａ／Ｄコンバータ１１２、撮像部信号処理部１１３からなる撮像系を制御して、被写体の画像を適正に撮像することができるようにするものである。

そして、撮像部信号処理部１１３において、画像圧縮処理された後の画像データは、ＣＰＵ１１５によって、ＲＡＭ１１６が作業領域として用いられ、適切な記録フォーマットの画像データに変換される。この記録フォーマットに変換された画像データが、記録部コントローラ１２１に供給され、この記録部コントローラ１２１によって、記録部１２２のデータ格納領域に記録される。なお、記録部１２２は、例えば、ハードディスクドライブや大容量記録型光ディスクであって、記録部コントローラ１２１により、そのデバイスに適切な信号フォーマットで、前述の記録フォーマットに変換された画像データなどが記録される。

生体情報入力部１１７は、詳しくは後述もするが、この実施の形態のコマンド推奨装置のユーザの種々の生体情報を受け付ける部分である。生体情報検出部１１７で受け付けられた生体情報は、Ａ／Ｄコンバータ１１８でデジタル信号に変換され、生体信号入力部コントローラ１１９およびＣＰＵ１１５、ＲＡＭ１１６によって、適切な記録フォーマットに変換され、記録部コントローラ１２１によって、記録部１２２に記録されることになる。

受け付けた生体情報が例えば脳波の場合には、生体情報入力部１１７は、数マイクロボルトの電位の変化として検出される脳波情報を増幅し、数種類の周波数帯域にフィルタリング処理を行い、デジタル信号に変換され、記録部コントローラ１２１を通じて記録部１２２に記録されることになる。

あるいは、生体情報検出部１１７で受け付けられた生体情報は、Ａ／Ｄコンバータ１１８でデジタル信号に変換されたのち、感情解析処理部１０に供給され、ここで後述もするように、所定の方式にしたがって感情解析を行い、この結果得られた感情状態を示す情報をＣＰＵ１１５、ＲＡＭ１１６によって、適切な記録フォーマットに変換し、これを記録部コントローラ１２１によって、記録部１２２に記録するようにしてもよい。

また、ここでは、撮像部１１１を通じて取得した被写体の画像データや生体情報入力部１１７を通じて取得したユーザの生体情報や生体情報を解析することによって得られる感情状態を示す情報を記録部１２２に記録するものとして説明したが、これに限るものではない。

例えば、ネットワークＩ／Ｆ１２３を通じてインターネットなどのネットワークに接続し、ネットワーク上に設けられた所定のサーバ装置に送信して、そのサーバ装置に画像データや生体情報、感情状態を示す情報を記憶保持させるようにするようにすることも可能である。同様にして、クライアント端末１とは別に設けられた記録装置にデータを記録するようにすることも可能である。

また、上述もしたように、感情解析処理部１２０は、例えば、生体情報入力部１１７を通じて入力を受け付けた種々の生体情報、または、記録部１２２に記録された生体情報を、後述もするが、感情モデルを解析する方法で感情状態の抽出を行う。ここで抽出された感情状態を示す情報は、サーバ装置２に送信され、感情状態をも考慮したコンテンツの検索推奨サービスが行われることになる。

再生処理部１２６は、記録部１２２から出力される画像データを再生する処理を行うものであり、画像圧縮処理された画像データの伸張処理等を行って再生用の画像データを形成することができるものである。

再生処理部１２６において処理された画像データは、表示部コントローラ１２４に供給される。表示部コントローラ１２４は、表示部１２５に供給する形式の画像信号を形成し、これを表示部１２５に供給する。表示部１２５は、ＬＣＤなどのディスプレイであり、表示部コントローラ１２４からの画像信号に応じた画像を自己の表示画面に表示する。

このように、記録装置部１１は、ユーザの生体情報の入力を受け付けて、これを記録部１２２に記録したり、また、受け付けた生体情報や記録部１２２に記録された生体情報を分析して、ユーザの感情状態を抽出したりすることができると共に、被写体の画像を撮像して、これ記録部１２２に記録することができるものである。

ここで、上述した生体情報入力部１１７、Ａ／Ｄコンバータ１１８、生体信号入力部コントローラ１１９のより具体的な構成例について説明する。図４に、生体情報入力部１１７、Ａ／Ｄコンバータ１１８、生体信号入力部コントローラ１１９のそれぞれについての構成例を示す。図４に示すように、ここでは、ユーザの生体情報として、脳波、心電、脈波（脈拍）、体温、筋電等を検出する場合を例にして説明する。

生体情報入力部１１７は、人間が自発的・誘発的に発する生体信号、この実施の形態においては、脳波、心電、脈波、体温、筋電などを検出するための電極（センサー）７１ａ、７１ｂ、７１ｃ、７１ｄ、７１ｅ、…と、検出された生体信号を増幅するための増幅部７２ａ、７２ｂ、７２ｃ、７２ｄ、７２ｅ、…とからなっている。ここで、電極７１ａ、７１ｂ、７１ｃ、７１ｄ、７１ｅ、…は脳波をはじめとする生体電気現象や脳磁気をはじめとする生体磁気現象を測定（検出）する機能を有する。

電極７１ａ、７１ｂ、７１ｃ、７１ｄ、７１ｅ、…を通じて検出するようにされた各生体情報は、対応する増幅部７２ａ、７２ｂ、７２ｃ、７２ｄ、７２ｅ、…に供給され、ここで増幅され、増幅後に、Ａ／Ｄコンバータ１１８に供給される。この実施の形態においては、Ａ／Ｄコンバータ１１８は、図４に示すように、供給される生体情報に応じた複数個のＡ／Ｄコンバータ８１ａ、８１ｂ、８１、８１ｄ、８１ｅ、…を備えたものであり、供給される生体情報（アナログ信号）をデジタル信号に変換する。

例えば、脳波の電位レベルは一般には５０μＶ（マイクロボルト）程度、心電の電位レベルは１ｍＶ（ミリボルト）程度と生体信号の種類により異なる。このため、各Ａ／Ｄコンバータ８１ａ、８１ｂ、８１ｃ、８１ｄ、８１ｅ、…においてのＡ／Ｄ変換時の量子化ビット数は、増幅された各種生体信号の電位レベルを下回らない程度の精度を有するようにされている。

そして、Ａ／Ｄ変換された後の各生体情報は、生体情報入力部コントローラ１１９に供給される。生体情報入力部コントローラ１１９は、デジタル化された各種生体信号を受信するための受信部９１と、それらの生体情報を後述の感情解析処理部１２０、記録部１２２、表示部１２５、再生処理部１２６で利用可能な信号にするための処理を行う生体信号処理部９２と、処理された生体信号をバス１２７に出力するための送信部９３とから構成される。

受信部９１は、もとの生体信号が再現される程度の間隔のデジタル信号のサンプリング周波数を有し、Ａ／Ｄコンバータ８１ａ、８１ｂ、８１ｃ、８１ｄ、８１ｅ、…から出力される生体情報を受信して、これを後段の生体信号処理部９２に供給する。

生体信号処理部９２は、受信部９１からの生体情報の供給を受けて、供給を受けた生体情報のそれぞれについて、例えば振幅調整や帯域通過のためのフィルタ演算処理、ＦＦＴやウェーブレット解析をはじめとする時間−周波数解析、あるいは、ニューラルネットやカオス解析をはじめとする非線形解析などを行って、後段の感情解析処理部１２０、記録部１２２、表示部１２５、再生処理部１２６で利用可能な形式の信号に変換し、変換後の生体情報（生体信号）を送信部９３に供給する。

送信部９３は、バス１２７に対し逐次適切なタイミングで、上述のように処理されて形成された生体信号を出力し、上述もしたように、記録部コントローラ１２１を通じて記録部１２２に記録するようにしたり、また、感情解析処理部１２０に供給して、生体情報の解析を行うようにし、感情状態を抽出したりするなどの処理が行われることになる。

[１−３：感情解析処理部１２０における感情解析の一例について]
次に、図３に示したように構成される記録装置部１１の感情解析処理部１２０において行われる解析処理の一例について説明する。感情解析処理部１２０は、図４に示したように構成される、生体情報入力部１１７、Ａ／Ｄコンバータ１１８、生体情報入力部コントローラ１１９を通じて、測定（検出）され、デジタル化され、必要な信号処理や解析処理が行われて得られた複数の生体情報が入力される。

感情解析処理部１２０には、生体情報入力部コントローラ１１９からバス１２７を通じて生体情報が供給される場合もあれば、記録部１２２に記憶された生体情報が、記録部コントローラ１２１を通じて読み出されて、これがバス１２７を通じて供給される場合もある。また、ネットワークＩ／Ｆ１２３を通じて外部機器や外部サーバに記憶するようにした生体情報の供給を受けることもできるようにされている。

感情解析処理部１２０では、複数の生体情報の入力を受け付けて、これらの複数の入力を元に解析処理を行い、感情モデルで定義される複数の感情パラメータ値を出力する。感情モデルとしては、２軸モデル、３軸モデル、６軸モデルがある。これらのモデルの一例を図５に示す。

２軸モデルは、最も簡易なモデルであり、図５Ａに示すように、例えば、感情状態として、快適方向または不快方向を示す第１軸と、興奮、緊張方向またはリラックス方向を示す第２軸との２軸により、感情モデルを形成し、感情状態を把握するようにするものである。

３軸モデルは、図５Ｂに示すように、感情状態として、快適方向または不快方向を示す第１軸と、興奮方向または沈静方向を示す第２軸と、緊張方向または弛緩方向を示す第３軸との３軸により、感情モデルを形成し、感情状態を把握するようにするものである。

６軸モデルは、図５Ｃに示すように、怒りの度合いを示す第１軸と、恐れの度合いを示す第２軸と、悲しみの度合いを示す第３軸と、喜びの度合いを示す第４軸と、嫌悪の度合いを示す第５軸と、驚きの度合いを示す第６軸との６軸により、感情モデルを形成し、感情状態を把握するようにするものである。

そして、感情解析処理部１２０は、上述した感情モデルのいずれかを用いるようにし、例えば、学習済み、あるいは、ユーザ個別に再学習を行った３層バックプロバゲーション、自己組織化マップ（SOM : Self Organizing Map）等のニューラルネットワークの手法を利用して、入力を受け付けた複数種類の生体情報から感情パラメータの解析処理を行って、感情パラメータ値を求めることになる。

このように、この実施の形態のコンテンツ推奨装置の記録装置部１１の感情解析処理部１２０においては、所定の感情モデルとニューラルネットワークの手法を用いて、複数種類の生体情報を解析することによって、それらの生体情報の提供元であるユーザの感情状態を感情パラメータ値として把握することが可能となる。

そして、例えば、喜びの感情が表れている期間、悲しみの感情が表れている期間、怒りの感情が表れている期間、恐れの感情が表れている期間などを把握することができるようにされる。そして、後述もするように、例えば、１週間、６ヶ月などの所定期間におけるユーザの感情分布、すなわち、喜びの感情が何％、悲しみの感情が何％というように、各感情の分布を把握することが可能となる。

また、生体情報を用いた感情状態の解析の具体例としては、以下のように、種々のものが考えられる。例えば、リラックス状態の評価については、生体情報として脳波を用いることができる。一般的にはα波の周波数成分とβ波の周波数成分の比をとり、α波成分の割合が大きくなるほどリラックス状態にあることが知られている。また、呼吸や心拍の周期の安定性や脈拍の振幅増加量に基づいて、評価することも可能である。

また、驚きの評価については、皮膚の電気抵抗値を用いることができる。一般的には驚きや恐怖、心配によって皮膚電気抵抗値が上昇することが知られており、この皮膚電気抵抗値によって、感情状態の１つである驚きの評価を行うことができる。また、喜びを評価する場合には、心拍数、皮膚温度（体温）、心電（心電図周波数）を用いて評価することが可能である。すなわち、喜びの感情が大きい時には、心拍数が下がり、皮膚温度が上がり、心電図周波数が上がることが知られている。

また、一般に、精神的、心理的に安定な状態にある場合は、末梢血管が拡張し動脈血が流入するため、心拍数や脈拍はゆっくりとした変化を示し、体温は上昇傾向にある。逆に、精神的、心理的に高い緊張状態にある場合は、末梢血管が収縮し動脈血流入が減るため、心拍や脈拍は速まり、体温は下降傾向にある。このような生理的な変化に応じて、感情状態を評価し、把握することが可能となる。

なお、上述のような生理指標とともに、表情による筋電の変化や画像による表情認識、加速度センサーや傾斜センサーなどによる姿勢認識、音声認識などを複合的に用いることによって、ユーザの怒りや悲しみなどの感情状態を評価するようにしてもよい。

すなわち、人間の顔面の筋電の変化によって、泣いているのか、笑っているのか、怒っているのかなどを把握することが可能であるし、同様に、画像による表情認識によっても泣いているのか、笑っているのか、怒っているのかなどを把握することが可能である。

また、加速度センサーや傾斜センサーを用いることにより、ユーザの姿勢を判断し、胸をはった状態か、前屈みの状態などかを検出することにより、感情状態を評価する場合の情報として用いることが可能である。

また、音声認識の結果を感情状態を評価する場合の情報として用いることも可能である。例えば、喜んでいる場合などには、人の声は比較的に高くなり、逆に、落ち込んでいる場合などには、人の声は比較的に低くなるという傾向にあり、これを利用することにより、感情状態を評価することが可能である。また、音声信号の大きさ（レベル）に基づいて、感情状態を評価することも可能である。

このように、この実施の形態のクライアント端末１は、ユーザの生体情報を継続的に検出して、検出した生体情報を分析することにより感情状態を評価、把握することができるものである。そして、把握したユーザの感情状態を含む、コンテンツの検索推奨要求をサーバ装置２に送信し、自己の感情状態をも考慮して、利用に適したコンテンツを検索して推奨するように要求することができるようにしている。

[１−４：コンテンツ推奨装置の動作の概要について]
次に、上述したように構成される、この実施の形態のコンテンツ推奨装置の動作の概要について説明する。上述もしたように、この実施の形態のコンテンツ推奨装置は、記録装置部１１を備え、当該コンテンツ推奨装置のユーザの複数種類の生体情報を継続的に検出して、これを所定の記憶部に記憶するようにしている。

また、コンテンツ推奨装置１は、いわゆるスケジュール帳機能を備えており、所定の操作を行うことにより、スケジュールの入力画面をユーザＩ／Ｆ３３の表示素子の表示画面に表示し、スケジュールの空き部分に、その日に体験（利用）するようにしたいイベント種別(例えば、映画、コンサート、読書、旅行など)を入力し、これをスケジュール情報として保持することができるものである。

ユーザからの情報入力を受けるインターフェイスとしては、表示画面に表示されるリスト（選択項目リスト）から目的とする項目をクライアント端末１に接続されるマウスなどのポインティングデバイスを用いて選択するようにしたり、コンテンツ推奨装置にユーザＩ／Ｆとして接続される、例えば、キーボードを通じて入力したり、また、タッチパネルを用いた手書き入力による文字認識や、音声入力による音声認識など、さまざまな手段で構成することができる。

そして、イベント種別が入力されると、この実施の形態のコンテンツ推奨装置は、収集した生体情報に基づいて、ユーザの過去から現在までの感情状態を解析し、この解析の結果得られた感情状態を示す情報（感情情報）をも考慮して、ユーザが目的とする種別のコンテンツを体験しようとする予定日（希望日）におけるコンテンツの推奨を要求するようにする。

この実施の形態のコンテンツ推奨装置は、コンテンツの体験希望の日時が現在日時に近い場合(例えば現在〜数日以内の場合)には、ユーザの最近の指定区間（例えば１週間）の感情分布を用いてコンテンツの推奨を行う。感情分布の評価は、上述もしたように、記録装置部１１を通じて取得された生体情報を解析することにより得られた感情状態を示す情報であって、記録装置部１１により蓄積されている過去の指定時点から現在までの生体情報を感情解析処理部１２０により解析、あるいはすでに解析され蓄積されている感情状態を示す情報（感情情報）が用いられる。

コンテンツの体験希望の日時が現在日時から遠い場合(例えば十数日以上の場合)、人間の精神状態や感情状態が大きく変動する場合もあり、上述の体験希望日が現在日時に近い場合と同様の処理を行っても精度が低い場合もあると考えられる。そこで、イベントのエントリー期日と後述する人気度、関心度により絞込みを行った候補に対し、過去から現在までの感情情報を参考にして、コンテンツ検索推奨要求元のユーザに対して適切だと思われるコンテンツの推奨を行う。

なお、この実施の形態のコンテンツ推奨装置における感情解析処理は、例えばイベントの体験期日あるいはイベントのチケット購入の期日などの条件に基づいて、ユーザに対して推奨コンテンツの利用日を確定するようにする確定処理を求め、その確定した利用日のユーザの直前の感情解析を行うようにする。

この場合、過去から現在までの所定期間の感情状態を解析することになるが、例えば、以下の方法で解析する。すなわち、この実施の形態のコンテンツ推奨装置の記録装置部１１により取得され記録部１２２に記録された生体信号から感情解析を行うときに、長期レンジの感情分布と短期レンジの感情分布を求め、長期レンジの感情分布を基準値として、現在の感情推移を評価する。

この評価は、例えばニューラルネットワークのような非線形解析により学習させた感情モデルを用いることができる。そして、コンテンツ推奨装置は、ユーザの感情分布に基づき、そのユーザに適したコンテンツを検索して推奨する。このとき、それぞれの感情に対してユーザの感情予測結果により重み付けされた数のコンテンツを提示する。

同時に、コンテンツ推奨装置は、これらのコンテンツを体験した後（コンテンツを利用した後）の感情状態を予測し、これを表示するなどしてコンテンツ推奨装置のユーザに提供する。コンテンツ体験後の感情状態の予測は、例えば、上述の感情モデルに対して、期待する入力として、コンテンツ体験後（コンテンツ利用後）の感情値を与えることで行う。

すなわち、ユーザに推奨するようにしたコンテンツが利用された場合に、そのコンテンツがユーザの感情状態にどの程度影響を及ぼすかは、予めコンテンツのそれぞれについて評価されている各コンテンツの特性から予測することができるので、ユーザの感情状態がコンテンツの利用によりどの位変化するかを示すことにより、コンテンツ体験後の感情状態をユーザに通知するようにする。クライアント端末１のユーザは、コンテンツ利用後の自己の感情状態の予測をも考慮して、体験する（利用する）コンテンツの選択を行うことができるようにされる。

なお、コンテンツ情報データベース２２に格納されている各コンテンツについてのデータのそれぞれには、上述もしたように、例えば、類型などによりイベントの分類やコンテンツの特性を示すことができるようにされるので、この特性によって、当該コンテンツがユーザに与える影響を予測することができる。例えば、ある映画のコンテンツについては、喜び感を所定ポイント上昇させる特性があると評価されている場合には、その特性からユーザの感情状態の喜び感を所定ポイント分上昇させることが予測することができる。

[１−５：コンテンツ推奨処理の具体例について]
次に、上述したように、コンテンツ推奨装置の記録装置部１１によって継続的に検出される生体情報を解析することにより得られるユーザの感情状態を考慮して行うコンテンツの推奨処理の具体例について説明する。以下においては、上述もしたように、取得した生体情報を、所定の感情モデルを用い、ニューラルネットワークの手法を利用して、解析することにより得られた感情状態を、感情状態ごと、所定期間ごとに累積処理するようにして、その所定期間における感情分布を求め、この所定期間における感情分布に基づいて、コンテンツの推奨を行う場合を例にして説明する。

上述のようにして求められたユーザの最近１週間の感情分布が以下に示すように、
喜び ２０％
悲しみ １５％
驚き １５％
怒り ４５％
リラックス ５％
であったとする。

また、当該ユーザの最近６ヶ月間の感情分布が以下に示すように、
喜び ２０％
悲しみ １０％
驚き ２０％
怒り ２５％
リラックス ２５％
であったとする。

上述の解析結果に基づき、最近６ヶ月の感情状態をユーザの基準値とみなし、感情の変化率を求める。変化率は例えば以下に示す（１）式のように求められる。
Ｄ（Ｅｎ）＝（Ｅｎｂ−Ｅｎａ）／ｔ …（１）
Ｅｎ ：感情の種類（喜び、悲しみ、驚き、怒り、リラックスの場合、ｎ＝１〜５）
Ｅｎａ：短期レンジの感情Ｅｎの全体に占める割合
Ｅｎｂ：長期レンジの感情Ｅｎの全体に占める割合
ｔ ：短期レンジから長期レンジまでの時間
Ｄ（Ｅｎ）：感情Ｅｎの変化率。

この例では、Ｅ１は喜び、Ｅ２は悲しみ、Ｅ３は驚き、Ｅ４は怒り、Ｅ５はリラックスを表すものとする。上述の評価式である（１）式に基づき、当該ユーザは最近１週間はリラックスが不足し、怒りが絶えないという評価になる。このため、リラックス感を増やす方向に変化させ、怒りを減らす方向に変化させることが可能なコンテンツを推奨することが望まれる。

このように、最近６ヶ月の感情状態を基準値として用いるのは、より正確に感情状態を把握するためである。すなわち、生体情報は感情に応じて変化する場合だけでなく、通常の身体活動によっても変化する。このため、比較的に短い期間においては、身体活動に伴う生体情報の変化が、感情状態の変化として検出されてしまう場合もある。このような感情状態のいわゆるノイズ性の変化を除去し、できるだけ正確に感情状態を把握するために、最近６ヶ月の感情状態を基準値として用いるようにしているのである。

そして、スケジュール帳の体験希望（利用希望）のコンテンツの種別（コンテンツを識別するＩＤ）が映画になっている場合であって、このユーザに１０本の映画を推奨する場合は、例えば以下のような方針で割り当てる。

変化率の絶対値が大きい上位２つの感情(上記の例では怒りとリラックス)を求め、これら２つの感情を快方に向かわせる（好ましい方向に向かわせる）推奨比率を算出する。このとき、人間の感情を快方に導く感情(喜び、リラックスなど)や不快に導く感情(悲しみ、怒りなど)、快方にも不快にも導く感情(驚きなど)の種類により重み付けを考慮して推奨比率を算出してもよい。

ここでは、リラックスと怒りの変化率の絶対値が大きな値をとる。リラックスが不足しているので、リラックスできる映画を５本、驚きは若干減少しているので３本、喜びは安定しているので２本、悲しみや怒りが増えているので、これらを助長させような効果のある映画は推奨しないようにする。したがって、この例において推奨する映画は、
喜びの映画 ２本
悲しみの映画 ０本
驚きの映画 ３本
怒りの映画 ０本
リラックスの映画 ５本
となる。

また、推奨するコンテンツについての情報を提示する際に、その推奨するコンテンツの人気度や関心度を表示するなどしてユーザに通知するようにする。例えば、コンテンツの人気度は、チケットの発売開始時刻と購入状況や予約状況から求める。購入数、予約数の累積値の全販売数に占める割合や、購入数、予約数の増加率を人気度として用いることができる。

また、例えば、コンテンツに対する関心度は、情報公開時刻から現在に至るまでの情報閲覧者数(アクセス数)や問い合わせ数から求める。公式Ｗｅｂサイトに寄せられた質問の数やＷｅｂページのアクセス数を関心度として用いることができる。

また、時間を前後して、同じ日に映画を見に行く予定を入力することにより、コンテンツの検索推奨サービスを複数回受けている場合には、前回の推奨リストとの差分を提示するようにすることもできる。

つまり、前回推奨されているコンテンツの他に、新たに推奨されたコンテンツがある場合には、前回推奨されたコンテンツに加えて、新たに推奨されたコンテンツを推奨するようにし、また、前回推奨されたが今回推奨されていないコンテンツがある場合には、そのコンテンツについては今回の推奨リストから外すか、今回は推奨されていないコンテンツであることが分かるように通知するようにする。もちろん、前回の推奨結果と今回の推奨結果との両方をユーザに提示することも可能である。

なお、ユーザが予め希望していたコンテンツがある場合やユーザが何らかの理由で希望していたが除外されてしまったコンテンツについては推奨リストに対して、コンテンツの追加やコンテンツの修正を行うようにすることができる。そして、コンテンツの推奨リストを更新して、推奨内容を確定する。

上述したコンテンツの推奨処理は、ユーザがスケジュール帳を参照する時点で、そのときの現在の感情状態を反映させて毎回行われる。また、ここでは、推奨するコンテンツが映画の場合を例にして説明した。しかし、推奨可能なコンテンツは映画だけはない。上述もしたように、コンサート、演劇、スポーツの試合、展覧会、個展などの各種のイベント、遊園地などのいわゆるテーマパークの利用などについても推奨することができるようにされる。

なお、推奨するようにしたイベントのエントリー期日（参加申込期日）、定員数が迫ってきた場合に、ユーザにアナウンスをし、スケジュール帳の参照を促すように構成することも可能である。すなわち、サーバ装置２は、情報提供機関４からの情報に基づいて、エントリー期日や申込み状況を知り、これに基づいて音声や振動などにより、スケジュール帳の参照を促すようにすることができる。

[１−６：コンテンツ体験（利用）時の動作について]
さらに、この実施の形態においては、推奨を受けたコンテンツの体験（利用）時に同時に生体情報を測定（検出）する。コンテンツの体験時において測定する生体情報は、前述した場合と同様に、例えば、脳波、心電、脈波、体温、筋電などである。そして、このコンテンツ体験時において測定した生体情報についても、上述もしたように、感情モデルに従い、ニューラルネットワークの手法を用いて、コンテンツ体験時の感情状態を評価する。

そして、コンテンツ体験時の感情状態の評価結果をサーバ装置２に送信し、感情の評価として、例えば快適感を求めることにより、選択したコンテンツが満足したものであったか、不満であったかを判定することができる。また、不満に感じたコンテンツに関しては、今後の推奨時に類似内容の推奨数を調節するなどの改善策を講じることが可能となる。

なお、コンテンツの体験時に計測された生体情報や評価された感情状態は、コンテンツ推奨装置の記録装置部１１の機能により複合情報データベース１２に格納され、それまでに計測された生体情報や解析の結果得られた感情状態とを合わせて管理することができるようにされる。これらの情報は、次回のコンテンツ検索推奨サービスを受ける場合において、利用することができるようにされる。

[１−７：コンテンツ推奨装置の動作のまとめ]
次に、この第１の実施の形態のコンテンツ推奨装置の動作について、図６、図７のフローチャートを参照しながらまとめる。

図６は、この実施の形態のコンテンツ推奨装置の記録装置部１１における生体情報の測定および蓄積動作を説明するためのフローチャートであり、図７は、この実施の形態のコンテンツ推奨装置のコンテンツ推奨時の動作を説明するためのフローチャートである。まず、図６のフローチャートを参照しながらこの実施の形態のコンテンツ推奨装置の記録装置部１１の動作について説明する。

記録装置部１１は、上述もしたように、画像を撮像したり、ユーザの生体情報を測定し、測定結果を蓄積したりしていくものである。画像の撮像は、例えば、ユーザからの指示に応じて行うことができるものである。ここでは、コンテンツの推奨時に考慮される感情状態を得るために必要なユーザの生体情報の測定、蓄積処理について説明する。

図３に示したように構成される記録装置部１１の生体情報入力部１１７の電極などのセンサー部分をユーザの身体に装着し、記録装置部１１の電源を投入すると、記録装置部１１のＣＰＵ１１５は、図６に示す処理を実行するようにする。まず、生体情報入力部コントローラ１１９などを制御して、生体情報入力部１１７、Ａ／Ｄコンバータ１１８を通じて、生体情報測定、収集処理を行うようにする（ステップＳ１）。

生体情報入力部コントローラ１１９は、生体情報入力部１１７、Ａ／Ｄコンバータ１１８を通じて供給される生体情報を調整したり、解析したりするなどの生体信号処理を行い、コンテンツ推奨装置において利用可能な形式の生体情報を形成する（ステップＳ２）。そして、調整、解析後の生体情報を生体情報入力部コントローラ１１９から送出して、記憶部コントローラ１２１を通じて記録部１２２に保存するようにして、生体情報を蓄積していくようにする。

そして、記録装置部１１の電源が落とされるなど、所定の終了の事象が発生したか否かを判断する（ステップＳ４）。ステップＳ４の判断処理において、終了の事象は発生していないと判断したときには、ステップＳ１からの処理を繰り返し、生体情報の測定、蓄積処理を続行する。また、ステップＳ４の判断処理において、終了の事象が発生したと判断したときには、この図６に示す処理を終了する。このようにして、ユーザの生体情報が測定され、これが利用可能な形式とされて蓄積されていくことになる。

次に、図７のフローチャートを参照しながら、この実施の形態のコンテンツ推奨装置におけるコンテンツ推奨時の動作について説明する。この実施の形態のコンテンツ推奨装置のユーザＩ／Ｆ３３の入力受付部を通じて、スケジュール帳機能の実行が指示されると、コンテンツ推奨装置のＣＰＵ３１は、図７に示す処理を開始する。

そして、コンテンツ推奨装置のＣＰＵ３１は、スケジュール帳機能を実行し、ユーザインターフェイス３３の情報提供部の表示素子にスケジュールの記入、参照の画面を表示して、スケジュールの記入、変更などのスケジュール情報の入力を受け付けるようにする（ステップＳ１１）。ここでは、例えば、カレンダ表示される該当日付の記入欄に、映画、コンサート、読書、旅行などの利用したいイベント種別を入力することになる。

ステップＳ１１において、スケジュール情報が入力されると、コンテンツ推奨装置のＣＰＵ３１は、記録装置部１１を制御し、蓄積した生体情報を解析することにより、ユーザの感情状態を把握し、これをユーザ情報データベースに登録する（ステップＳ１２）。そして、ＣＰＵ３１は、ユーザ情報データベース２３に登録された当該ユーザ情報の感情状態を示す情報に基づいて、コンテンツ情報データベース２２に蓄積されているコンテンツに関する情報の中から、ユーザに推奨するコンテンツを検索する（ステップＳ１３）。

この後、コンテンツ推奨装置のＣＰＵ３１は、コンテンツ推奨処理部２４の人気度集計部２４１、関心度集計部２４２を制御し、コンテンツ情報データベース２２の該当コンテンツの問合せ状況（関心度）、販売状況（人気度）を考慮して、推奨するコンテンツを絞り込むとともに、コンテンツ体験後のユーザの感情状態を予測するようにする（ステップＳ１４）。

そして、ＣＰＵ３１は、コンテンツの検索、絞込みの結果を例えば一覧表示することにより、ユーザに対してコンテンツを推奨するようにする（ステップＳ１５）。そして、ＣＰＵ３１は、同じ予定日に同じイベント種別のコンテンツについて推奨を行っているか否かを判断する（ステップＳ１６）。

ステップＳ１６の判断処理において、同じ予定日に同じイベント種別のコンテンツについて推奨を行っていると判断したときには、前回の推奨リストの内容と、今回の推奨リストの内容が比較可能なようにしてユーザに提示する（ステップＳ１７）。

ステップＳ１７の処理の後、または、ステップＳ１６の判断処理において、同じ予定日に同じイベント種別のコンテンツについて推奨を行っていないと判断したときには、ＣＰＵ３１は、今回のコンテンツの推奨リストに対して、コンテンツを追加したり修正したりする処理を行うか否かの選択入力を、ユーザＩ／Ｆ３３の情報入力部を通じて受け付けるようにし、推奨リストに対して追加、修正を行うか否かを判断する（ステップＳ１８）。

ステップＳ１８において、推奨リストに対して追加、修正を行うことが選択されたと判断したときには、ＣＰＵ３１は、ユーザＩ／Ｆ３３の情報入力部を通じて、推奨リストに対するコンテンツの追加や修正などを受け付ける（ステップＳ１９）。このステップＳ１９の処理の後、または、ステップＳ１８において、推奨リストに対して追加、修正を行うことが選択されていないと判断したときには、ＣＰＵ３１は、ユーザに提示するようにした推奨リストを最新の状態に更新する（ステップＳ２０）。

そして、ＣＰＵ３１は、コンテンツの推奨リストの内容を確定するか否かの指示入力を、ユーザＩ／Ｆ３３の情報入力部を通じて受け付けるようにし、推奨リストの内容を確定することが指示されたか否かを判断する（ステップＳ２１）。

ステップＳ２１の判断処理において、コンテンツの推奨リストの内容を確定することが指示されたと判断したときには、ＣＰＵ３１は、コンテンツの推奨リストの内容を確定し、これを指示された予定日にユーザが体験を希望するコンテンツの推奨リストとして、例えばスケジュールベースアプリケーション部１３の記憶部１３２に記憶させ、スケジュール帳機能により利用できるようにし（ステップＳ２２）、この図７に示す処理を終了する。

一方、ステップＳ２１の判断処理において、コンテンツの推奨リストの内容を確定することが指示されていないと判断したときには、ＣＰＵ３１は、ステップＳ１９からの処理を繰り返し、コンテンツの推奨リストに対する追加、修正を行うことができるようにする。

このように、この実施の形態のコンテンツ推奨装置によれば、時間情報（時間経過）と感情状態とから感情分布（感情推移）が把握でき、この感情分布を考慮して、ユーザの内面により作用可能な適切なコンテンツを当該ユーザに推奨することができる。また、スケジュール帳機能とコンテンツの検索推奨機能とを連動させることで、煩わしい入力作業などを伴うことなく、スケジュール情報の入力というスケジュール帳機能の利用過程において、コンテンツの検索、推奨を行うようにすることができる。

また、蓄積された生体情報を解析することにより得られる感情情報から、コンテンツの体験日までの感情推移を予測することで、ユーザに対しより豊富なコンテンツ情報を提示することができる。

なお、推奨されたコンテンツの体験時の生体情報を測定し、これをコンテンツ推奨装置にフィードバックするようにすることによって、推奨したコンテンツに対するユーザの満足度を正確に把握することができ、これを次回の推奨時に用いることができるため、より確度の高い推奨処理を行うことができるようにされる。

なお、感情状態の解析は、上述もしたように、記録部１２２に記録、蓄積された生体情報を解析することにより行うようにしてもよいし、また、記録装置部１１において、検出された生体情報をリアルタイムに処理して感情状態を解析し、この解析結果を記録部１２２に記録して、これを用いてコンテンツの検索、推奨を行うようにしてもよい。

[２：第２の実施の形態（コンテンツ検索推奨システムについて）]
次に、この発明による情報検索システム、情報検索方法、クライアント装置、サーバ装置の一実施の形態が適用されて形成されたコンテンツ検索推奨システムについて説明する。

この発明による情報検索システムが適用されたコンテンツ検索推奨システムは、家庭内などの閉じたエリア内において、いわゆるローカルエリアネットワークシステムとして形成することも可能であるが、ここでは、まず、公衆電話網やインターネットなどの広域通信ネットワークを介在させて形成するコンテンツ検索推奨システムの場合を例にして説明する。

[２−１：コンテンツ検索推奨システムの概要]
図８は、この実施の形態のコンテンツ検索推奨システムを説明するための図である。この実施の形態のコンテンツ検索推奨システムは、図８に示すように、公衆電話網やインターネットなどの広域通信ネットワーク５に対して、クライアント端末１ａ、１ｂ、…、とサーバ装置２とが接続されて形成される。

各クライアント端末１ａ、１ｂ、…は、この発明によるクライアント装置が適用されたものであり、そのそれぞれがほぼ同様の構成を有するものである。また、サーバ装置２は、この発明によるサーバ装置が適用されたものである。

さらに、図８に示すように、通信ネットワーク５には、認証局３が接続されると共に、競技場、ホール、映画館、美術館などに設置され、それらの場所で提供されるコンテンツについての情報を提供する例えばパーソナルコンピュータなどの端末装置が情報提供機関４として通信ネットワーク５に接続することもできるようにされている。

そして、クライアント端末１ａ、１ｂ、…のそれぞれは、一般のユーザ（エンドユーザ）に利用される装置である。これらクライアント端末１ａ、１ｂ、…のそれぞれは、ユーザからのスケジュール情報の入力を受け付けて、これを管理するスケジュール帳機能を備えるものである。

また、クライアント端末１ａ、１ｂ、…のそれぞれは、詳しくは後述もするように、ユーザの体温や脈拍などの種々の生体情報を検出して蓄積し、この蓄積した生体情報に基づいて、ユーザの感情状態を分析することができるものである。そして、この実施の形態のクライアント端末１ａ、１ｂ、…のそれぞれは、ユーザが目的とする日にコンテンツの利用スケジュールを入力した場合に、感情状態の分析結果および自機の識別情報（識別ＩＤ）を含み、自己の感情状態をも考慮した適切なコンテンツについての情報提供を要求するためのコンテンツ検索推奨要求を、通信ネットワーク５を通じて、サーバ装置２に送信することができるものである。

つまり、クライアント端末１ａ、１ｂ、…のそれぞれは、スケジュール帳機能に連動させて、自己の感情状態をも考慮した適切なコンテンツについての情報提供を要求するためのコンテンツ検索推奨要求を、サーバ装置２に送信することにより、コンテンツの検索および推奨サービスを受けることができるようにしたものである。

サーバ装置２は、ユーザが利用可能なコンテンツのそれぞれについての特性を把握している。そして、サーバ装置２は、クライアント装置１ａ、１ｂ、…からのコンテンツ検索推奨要求を受信すると、受信したユーザの感情状態の分析結果と、ユーザが利用可能なコンテンツの特性とに基づいて、そのユーザに対して提供するのに適したコンテンツを検索し、この検索結果をコンテンツの推奨情報として、要求元のクライアント装置に返信することができるものである。

これにより、例えば、ユーザの感情状態が、例えば、ストレスが多く、怒りの感情の割合が高い状態にあるときには、ストレスを低減させ、怒りを抑制するような、楽しいコンテンツを検索し、これを推奨するなど、ユーザの感情状態に応じたコンテンツの検索、推奨ができるようにしている。換言すれば、サーバ装置２は、ユーザからの要求に応じて、コンテンツ検索推奨サービスを提供することができるものである。

なお、この実施の形態において、認証局３は、サーバ装置２からの依頼に基づいて、当該サーバ装置２にアクセスしてきたクライアント端末１ａ、１ｂ、…が、サーバ装置２にアクセス可能であって、情報の提供が可能な端末か否かの認証を行うものである。通常、サーバ装置２の運営者とクライアント端末１ａ、１ｂ、…のユーザとは、契約関係が存在し、認証局３は、サーバ装置２と契約関係にあるクライアント端末の識別情報などの登録を受け付けて、これを保持している。

これにより、認証局３において、サーバ装置２に対してアクセスしてきたクライアント端末が、サーバ装置２から情報の提供を受けることができるものかの認証を行うことができるようにしている。なお、この実施の形態において、クライアント端末１ａ、１ｂ、…は、特に示した場合を除き、サーバ装置２との間に契約関係が成立し、サーバ装置２からコンテンツ検索推奨サービスの提供を受けることができるものである。

また、情報提供機関４は、それが設置されている、あるいは、担当することになる、競技場、ホール、映画館、美術館などのチケットの売れ行きや、それらの場所で提供される催し物などのコンテンツについての関心度などについての情報を提供するものである。これらの情報をもクライアント端末のユーザに提供できるようにしておくことにより、コンテンツを選択する際の参考とすることができるようにしている。

なお、図８においては、サーバ装置２は１つしか記載しなかったが、同様のサービスを提供する複数のサーバ装置が存在する場合もある。この場合には、多数のクライアント端末からのアクセスを分散させ、良好な通信環境を確保することが可能となる。

そして、上述の説明からも分かるように、この実施の形態のクライアント端末１ａ、１ｂ、…のそれぞれは、図１を用いて説明した第１の実施の形態のコンテンツ推奨装置の主に感情状態の評価処理系１０が行う処理を行うものであり、また、サーバ装置２は、図１を用いて説明した第１の実施の形態のコンテンツ推奨装置の主にコンテンツ検索推奨処理系２０が行う処理を行うものである。これら、クライアント端末１ａ、１ｂ、…のそれぞれと、サーバ装置２とが協働することにより、第１の実施の形態のコンテンツ推奨装置と同様の機能を実現するようにしている。

以下に、この実施の形態のコンテンツ検索推奨システムにおけるクライアント端末１ａ、１ｂ、…と、サーバ装置２との構成と動作について具体的に説明する。なお、上述もしたように、クライアント端末１ａ、１ｂ、…のそれぞれは、同様の構成を有するものである。このため、以下においては、クライアント端末１ａ、１ｂ、…のそれぞれをクライアント端末１として説明する。

[２−２：クライアント端末１について]
図９は、図８に示したコンテンツ検索推奨システムを構成するクライアント端末１を説明するためのブロック図である。この実施の形態のクライアント端末１は、上述した第１の実施の形態において、図１を用いて説明したコンテンツ推奨装置のコンテンツ検索推奨処理系２０を除いた部分、すなわち、制御部３０と感情状態の評価処理系１０とにより構成されるものである。このため、この実施の形態のクライアント端末１の構成を示す図９において、図１に示した第１の実施の形態のコンテンツ推奨装置と同様に構成される部分には同じ参照符号を付し、その詳細な説明については省略することとする。

なお、図９において、制御部１００は、図１に示した第１の実施の形態のコンテンツ推奨装置の制御部３０に相当し、ＣＰＵ３１、メモリー部３２、ユーザＩ／Ｆ３３に相当するＣＰＵ１０１、メモリー部１０２、ユーザＩ／Ｆ１０３がシステムバス１４を通じて接続されて構成されたものである。また、スケジュールベースアプリケーション部１３には、通信ネットワーク５を通じてサーバ装置２との間で通信を行うようにするための通信部１３３が設けられている。

これら制御部１００および通信部１３３以外の各部分は、図１に示した第１の実施の形態のコンテンツ推奨装置の感情状態の評価処理系１０と同様に構成されるものである。したがって、この実施の形態のクライアント端末１の映像、音声、生体情報および感情記憶装置部（以下、単に記憶装置部という。）１１は、図３に示した構成を有し、生体情報入力部１１７、Ａ／Ｄコンバータ１１８、生体情報入力部コントローラ１１９は、図４に示した構成を有するものである。また、この実施の形態のクライアント端末１の複合情報データベース１２は、図２Ａに示した各情報を記憶保持するものである。

そして、この実施の形態のクライアント端末１の場合には、記録装置部１１により、ユーザの生体情報を測定（検出）し、記録装置部１１の記録部１２２と複合情報データベース１２とにより、測定した生体情報を蓄積して管理することができるようにしている。また、記録装置部１１の記録部１２２と複合情報データベース１２とにより蓄積して管理している生体情報を記録装置部１１の感情解析処理部１２０によって解析することにより、感情状態を把握することができるようにしている。

さらに、スケジュールベースアプリケーション部１３の機能により、スケジュール帳機能を実現し、このスケジュール帳機能に連動して、ユーザの感情状態をも考慮したコンテンツの検索推奨サービスを受けるために、ユーザの感情状態を示す情報やユーザ識別ＩＤ等を含むコンテンツ検索推奨要求を形成して、サーバ装置２に送信すると共に、サーバ装置からのコンテンツ推奨リストを受信して、これをユーザに提示することができるようにされる。

[２−３：サーバ装置２について]
図１０は、図８に示したコンテンツ検索推奨システムを構成するサーバ装置２を説明するためのブロック図である。この実施の形態のサーバ装置２は、上述した第１の実施の形態において、図１を用いて説明したコンテンツ推奨装置の感情状態の評価処理部１０を除いた部分、すなわち、制御部３０とコンテンツ検索推奨処理系２０とにより構成されるものである。このため、この実施の形態のサーバ装置２の構成を示す図１０において、図１に示した第１の実施の形態のコンテンツ推奨装置と同様に構成される部分には同じ参照符号を付し、その詳細な説明については省略することとする。

なお、図１０において、制御部２００は、図１に示した第１の実施の形態のコンテンツ推奨装置の制御部３０に相当し、ＣＰＵ３１、メモリー部３２、ユーザＩ／Ｆ３３に相当するＣＰＵ２０１、メモリー部２０２、ユーザＩ／Ｆ２０３がシステムバス２７を通じて接続されて構成されたものである。これら制御部２００以外の各部分は、図１に示した第１の実施の形態のコンテンツ推奨装置のコンテンツ検索推奨処理系２０と同様に構成されるものである。

したがって、コンテンツ情報データベース２２は、図２Ｂに示した情報を記憶保持し、ユーザ情報データベースは、図２Ｃに示した情報を記憶保持し、制御部２００を通じて参照することはもちろん、必要に応じて、追加、変更、削除などをも行うことができるようにされている。

そして、この実施の形態のサーバ装置２の制御部２００は、通信部２１を通じてクライアント端末１からのコンテンツ検索推奨要求を受信すると、その要求に含まれる感情状態を示す情報に基づいて、コンテンツ情報データベース２２に保持されているデータを参照して、要求元のユーザに適したコンテンツを検索する。

そして、制御部２００は、コンテンツ推奨処理部２４を制御して、コンテンツ情報データベース２２の各データの問合せ状況、販売実績に応じて、人気度、関心度を集計するようにして、検索したコンテンツの絞込みを行い、さらに、推奨するコンテンツの体験後の感情状態の予想をも行うようにして、コンテンツの推奨リストを形成し、これを通信部２１を通じて要求元のクライアント装置１に送信する。要求元のクライアント端末１は、コンテンツ検索推奨要求に含まれているユーザ識別ＩＤによって特定することが可能である。

この後、クライアント装置１は、受信した推奨リストをユーザＩ／Ｆ１０３を通じて提供し、図７に示したフローチャートのステップＳ１６からの処理と同様に、前回の推奨リストと比較できるようにし、コンテンツリストの追加や修正を行って、推奨リストを確定し、これをクライアント端末１に保持し利用することができるようにされる。

これによって、クライアント端末１のユーザは、目的とする日において利用に適したコンテンツを推奨してもらい、その推奨されたコンテンツの中から自分にあったコンテンツを利用できるようにしたり、そのコンテンツを利用するためのチケットを購入するようにしたりするなどのことができるようにされる。

なお、コンテンツの検索にあたっては、サーバ装置２は、自己のコンテンツ情報データベース２２の情報だけでなく、通信ネットワーク５に接続された情報提供機関４にアクセスして、情報提供機関４の持つ情報によってコンテンツの検索を行うようにすることもできる。また、サーバ装置２は、コンテンツ検索推奨サービスを提供するプロバイダやコンテンツ販売店などによって運営するようにされる。

また、この第２の実施の形態において、情報提供機関４は、インターネットなどの通信ネットワークを介してサーバ装置２からの要求に応答することができるようにされている。そして、推奨対象のコンテンツに関する情報(例えば、コンテンツ名称、値段、有効期間、販売開始日時、問い合わせ状況、販売実績など)を提供する。情報提供機関４は、コンテンツを提供することになるコンテンツ販売店に設置されるものだけでなく、コンテンツを体験する劇場や競技場などの施設に設置されるものも含まれる。

そして、この第２の実施の形態においては、生体情報を検出する検出手段としての機能と、感情状態を解析する解析手段としての機能とは、クライアント端末１の記録装置部１１が実現し、また、コンテンツ検索手段としての機能は、サーバ装置２のＣＰＵ２０１、コンテンツ推奨処理部２４、コンテンツ情報データベース２２により実現し、また、通知手段としての機能は、クライアント端末１のスケジュールベースアプリケーション部１３、ユーザＩ／Ｆ１０３の情報提供部によって実現される。

また、コンテンツ利用後のユーザの感情状態を予測する予測手段は、サーバ装置２のコンテンツ推奨処理部２４の感情予測部２４３が実現し、予測通知手段としての機能は、クライアント端末１の主にユーザＩ／Ｆ３３の情報提供部が実現する。また、コンテンツ利用後のユーザの感情状態を評価する評価手段は、クライアント端末１のＣＰＵ１０１などにより実現される。また、ユーザからの予定表情報などの入力を受け付ける受付手段としての機能は、クライアント端末のユーザＩ／Ｆ１０３の情報受付部により実現される。

また、クライアント端末１において主にサーバ装置２との間で行う通信処理を実現するための送信手段や受信手段の機能は通信部１３３が実現し、サーバ装置２の主にクライアント端末１との間で行う通信処理を実現するための送信手段や受信手段は通信部２１が実現するようにしている。

[２−４：コンテンツ検索推奨システムの動作について]
次に、この第２の実施の形態のコンテンツ検索推奨システムの動作について、図１１、図１２のタイミングチャートを参照しながら説明する。なお、上述の実施の形態においては、コンテンツの人気度や関心度は、コンテンツ情報データベース２２の情報を用いる場合を説明したが、ここでは、コンテンツの人気度や関心度を示す情報は最新のものを使用するため、情報提供機関４に問合せるととともに、当該問合せの事実についても情報提供機関の持つ情報（問い合わせ状況など）に反映させるようにしているものである。

クライアント端末１においては、記録装置部１１の機能により、ユーザの生体情報の測定、蓄積が継続的に行われている。そして、クライアント端末１のスケジュール帳機能が用いられて、例えば、何月何日に映画を見るなどというようなスケジュール情報が入力されると、図１１に示すように、クライアント端末１は、目的とするコンテンツのイベント種別と自己の識別ＩＤ（ユーザＩＤ）を含むコンテンツ検索推奨要求を形成し、これをサーバ装置２に送信する（ステップＳ３１）。

サーバ装置２は、クライアント端末１からのコンテンツ検索推奨要求を受信すると、これに含まれるユーザＩＤに基づいて、サーバ装置２は、コンテンツ検索推奨サービスの提供を受けられるユーザか否かの認証を取るために、ユーザＩＤを含むユーザの認証要求を認証局３に送信する（ステップＳ３２）。認証局３は、認証要求に含まれるユーザＩＤに基づいて、会員登録されているユーザ情報を参照することにより認証確認処理（認証処理）を行い（ステップＳ３３）、その結果をサーバ装置２に返信する（ステップＳ３４）。

認証が取れなかった場合には、サーバ装置２は、認証が取れないためにコンテンツ検索推奨サービスを受けられない旨を要求元のクライアント端末１に通知するステップＳ３５）。また、認証が取れた場合には、サーバ装置２は、ユーザＩＤ、イベント種別（コンテンツ内容）などのユーザから提供される情報をユーザ情報データベース２３に供給して、これらを記録するように要求する（ステップＳ３６）。ユーザ情報データベース２３は、要求のあったユーザ情報を記録処理して（ステップＳ３７）、記録済応答をサーバ装置２に返信する（ステップＳ３８）。

ユーザ情報の記録済応答が返信されてくると、サーバ装置２は、コンテンツ検索推奨要求の送信元のクライアント端末１に対して、生体情報を解析して感情状態を把握するようにする要求を形成して送信する（ステップＳ３９）。この要求に応じて、クライアント端末１は、生体情報を解析して感情状態を把握し、例えば、所定期間における感情分布を求めて、これをサーバ装置２に送信する。

サーバ装置２は、クライアント端末１からの感情分布を受信すると、これをユーザ情報データベース２３に供給して、当該ユーザのデータとして記録するように要求する（ステップＳ４１）。ユーザ情報データベース２３は、要求のあったユーザ情報を記録処理して（ステップＳ４２）、記録済応答をサーバ装置２に返信する（ステップＳ４３）。

そして、サーバ装置２は、当該ユーザの感情分布やイベント種別などに基づいて、当該ユーザに適したコンテンツを検索するように要求を出す（ステップＳ４４）。この要求に応じて、コンテンツ情報データベース２２においては、検索処理を行って、ユーザに適したコンテンツを検索し（ステップＳ４５）、その検索結果をサーバ装置２に通知する（ステップＳ４６）。

検索結果の通知を受けると、サーバ装置２は、図１２に示すように、検索の結果得られたコンテンツの人気度、関心度を通知するように、そのコンテンツに関連する情報提供機関４に要求する（ステップＳ４７）。この要求に応じて、情報適用機関４は、要求のあったコンテンツについての人気度を示す情報、関心度を示す情報を取得し（ステップＳ４８）、これをサーバ装置２に返信する（ステップＳ４９）。

この後、サーバ装置２は、人気度、関心度をも考慮して、推奨するコンテンツを絞り込むと共に、その推奨するコンテンツを体験した場合のユーザの感情状態の予測処理を行う（ステップＳ５０）。この予測処理の結果や人気度、関心度をも含め、コンテンツ推奨結果、すなわちコンテンツの推奨リストを要求元のクライアント端末１に送信する（ステップＳ５１）。

クライアント端末１においては、ユーザにより、前回の推奨リストとの比較や推奨コンテンツの追加や削除が行われ、コンテンツの推奨リストの確定操作が行われると、確定要求を形成し、これをサーバ装置２に送信する（ステップＳ５２）。サーバ装置２は、確定要求を受信すると、人気度を示す情報や関心度を示す情報を取得したコンテンツに関する情報の、それらの情報を更新するようにする要求（更新要求）を形成し、これを該当する情報提供機関４に送信する（ステップＳ５３）。

これを受けて、情報提供機関４は、目的とするコンテンツについての情報を更新する（ステップＳ５４）。すなわち、今回の一連の処理により、推奨されたコンテンツについては、問合せ回数が増えると共に、チケットなどの場合であって、購入するようにされた場合には、販売実績が増えることになる。そして、当該情報提供機関４は、更新結果応答をサーバ装置２に送信する（ステップＳ５５）。

サーバ装置２は、情報提供機関４からの更新結果応答を受信すると、コンテンツ情報データベース２２の該当コンテンツの情報についても、情報提供機関４が有するコンテンツについての情報と同じように更新する要求を形成し、これをコンテンツ情報データベース２２に供給して（ステップＳ５６）、コンテンツ情報データベース２２の情報も更新するようにする（ステップＳ５７）。更新が終了すると、コンテンツ情報データベース２２は、サーバ装置２に対して、更新結果応答を返信する（ステップＳ５８）。

サーバ装置２は、これら一連の更新結果を要求元のクライアント端末１に送信して通知し（ステップＳ５９）、要求元のユーザがチケットを購入するようにするなどの操作を行っている場合には、それらの情報について更新するように、ユーザ情報データベース２３に要求し（ステップＳ６０）、ユーザ情報データベース２３の該当情報を更新する（ステップＳ６１）。

ステップＳ６１における更新が終了した後には、ユーザ情報データベース２３かサーバ装置２に対して更新結果応答が提供され（ステップＳ６２）、この後、サーバ装置２は、要求元のクライアント端末１に対して、一連のコンテンツ検索推奨サービスが終了したことを通知する（ステップＳ６３）。そして、ユーザにも一連のコンテンツ検索推奨サービスが終了したことが表示情報などとして通知され、コンテンツ検索推奨処理が終了するようにされる。

このように、この第２の実施の形態のコンテンツ検索推奨システムにおいても、上述した第１の実施の形態のコンテンツ推奨装置の場合と同様に、時間情報（時間経過）と感情状態とから感情分布（感情推移）が把握でき、この感情分布を考慮して、ユーザの内面により作用可能な適切なコンテンツを当該ユーザに推奨することができる。

また、スケジュール帳機能とコンテンツの検索推奨機能とを連動させることで、煩わしい入力作業などを伴うことなく、スケジュール情報の入力というスケジュール帳機能の利用過程において、コンテンツの検索、推奨を行うようにすることができる。

また、蓄積された生体情報を解析することにより得られる感情情報から、コンテンツの体験日までの感情推移を予測することで、ユーザに対しより豊富なコンテンツ情報を提示することができる。

なお、推奨されたコンテンツの体験時の生体情報を測定し、これをサーバ装置２に対してフィードバックするようにすることによって、推奨したコンテンツに対するユーザの満足度を正確に把握することができ、これを次回の推奨時に用いることができるため、より確度の高い推奨処理を行うことができるようにされる。

すなわち、満足度があまり得られなかったコンテンツについては、再度の推奨をしないようにしたり、満足度が得られなかったコンテンツと同じ種類のコンテンツや、満足度が得られなかったコンテンツと同じ作家のコンテンツについては、推奨の優先順位を下げたりして、信頼性の高いコンテンツ推奨処理を行うようにすることができる。

また、この第２の実施の形態のコンテンツ検索推奨システムの場合には、サーバ装置２は、通信ネットワーク５上に設けられるので、クライアント端末１は、コンテンツ情報データベースのような大量の情報を持たなくても済む。また、より多くのコンテンツの最新情報を用いてコンテンツの検索推奨を行うようにすることができるようにされる。

なお、ここでは、クライアント端末１、サーバ装置２、認証局３、情報提供機関４は、例えば、インターネットなどの広域の通信ネットワーク５を通じて接続される場合を例にして説明したが、これに限るものではない。

例えば、図１３に示すように、所定のＬＡＮ９に、この発明によるクライアント端末１、サーバ装置２を接続して、いわゆるホームネットワークシステムを構築した場合にもこの発明を実現することができる。この場合、ハードディスクレコーダ７ａ、ＤＶＤ（Digital Versatile Disc）レコーダ７ｂ、ＶＴＲ（Video Tape Recorder）７ｃなどが保持するコンテンツに対して、推奨を行うことも可能であるし、通信部６を通じて広域の通信ネットワークにも接続して、より多くのコンテンツに関する情報をサーバ装置２が収集して、これらをも対象にして、コンテンツの検索および推奨を行うようにすることも可能である。

なお、図１３に示した表示装置８は、ハードディスクレコーダ７ａ、ＤＶＤレコーダ７ｂ、ＶＴＲ７ｃからの情報を再生することができるほか、クライアント端末１やサーバ装置２からの要求に応じて、種々のメッセージなどを表示するなどのこともできるようにされる。

なお、この第２の実施の形態のコンテンツ検索推奨システムにおいては、生体情報を解析して、ユーザの感情状態を解析する処理は、クライアント端末１側で行うものとして説明したが、これに限るものではない。例えば、クライアント端末側では、ユーザの生体情報を継続的に検出して蓄積していき、スケジュール情報が入力された場合に、それまでに蓄積されている生体情報をサーバ装置２に送信するようにして、サーバ装置２側で生体情報を解析し、ユーザの感情状態を得るようにしてもよい。

クライアント端末１から生体情報をサーバ装置２に送信するようにし、サーバ装置２の制御部２００がクライアント端末１の感情解析処理部１２０としての機能を実現するようにすればよい。これ以外の処理は、上述した第２の実施の形態のコンテンツ検索推奨システムとほぼ同様である。

[３：その他]
[多様な推奨方式]
この発明においては、コンテンツ情報データベースやユーザ情報データベースを用いることで、感情に基づくコンテンツ推奨内容をさらに詳細に分析し、提示することができる。例えば、コンテンツ情報データベースの利用場所の情報を用いることで、ユーザに対し、場所別の絞込みを行ったコンテンツの推奨ができる。

これによりユーザは感情情報に加えて、例えば同一場所での利用に関するポイント還元サービスなどの情報を考慮したコンテンツの選択を行うことができる。また、ユーザ情報データベースの購入日の情報を用いることで、ユーザに対し、感情解析を行った上で季節を考慮したコンテンツの推奨ができる。これによりユーザは、例えばリラックスできる雰囲気で季節の食材を提供するレストランのチケットを購入することができる。

[課金システムとの連動]
情報提供機関あるいは別の機関により用意される課金システムと連動させることで、推奨されるコンテンツの購入手続きを可能にするシステムを構築することもできる。例えば、第２の実施の形態のコンテンツ検索推奨システムの場合には、サーバ装置２から推奨されたコンテンツを利用したい場合、クライアント端末１は、サーバ装置２を介して、あるいは直接に、情報提供機関４にコンテンツの提供を要求し、コンテンツの提供に際して認証処理を行い、認証されたクライアント端末１に対してコンテンツを提供すると共に、そのクライアント端末１のユーザに対して課金を発生させるようにしてもよい。

この場合の決済の方式は、クレジットカード番号を登録しておくようにして、クレジットカードを用いての決済を行うようにしてもよいし、また、銀行口座を登録しておくと共に、その銀行口座について、自動引き落としの登録をしておくことにより、銀行口座からの自動引き落としで決済することも可能である。また、請求書を発行し、これをユーザに送付し、ユーザが金融機関を通じて振込みをするなどの方法を取ることも可能である。

また、課金を発生させる機関は、情報提供機関４だけでなく、必ずサーバ装置２を経由するようにシステムを構築することにより、サーバ装置２が課金を発生させ、これを請求するようにすることも可能であるし、あるいは、認証局３が課金を発生させる機関としての機能を持つようにすることも可能である。

[映像や音声との連動]
また、コンテンツ体験時のユーザの映像や音声を記録装置により記録し、これらのデータをコンテンツ推奨時に映像や音声の認識装置を用いて利用することで、本発明の一部を構成する感情モデル解析部の出力をより確度の高いものにする。例えば、感情モデルの出力と、画像認識によるユーザの表情の評価や音声認識による感嘆語やイントネーションの認識などを組み合わせることで、より複雑な感情に対応したコンテンツの推奨を行うことができる。

この場合には、第１の実施の形態、第２の実施の形態とも記録装置部１１の撮像部１１１、Ａ／Ｄコンバータ１１２、撮像部信号処理部１１３からなる撮像系を用いることで可能となる。なお、撮像系には、マイクロホン、音声用Ａ／Ｄコンバータ、音声信号処理部などを設けておくことにより、画像と共に、ユーザの音声をも収音し、上述したように、ユーザの感情の解析を行うようにすることができる。

[グループによる運用]
また、個人間でスケジュールの公開を認めた場合、グループＩＤやグループパスワードを発行するなどの方法で、グループによるコンテンツ推奨を行うことも可能である。例えば、グループ内の個々の人間の感情に基づいて推奨されたすべてのコンテンツを呈示したり、個々の人間の感情を統合し、グループとしての感情を求め、この感情からコンテンツを推奨したりするなどの方法が考えられる。

これは、いわば、グループを形成する各個人の生体情報から、そのグループの平均的な感情状態を把握し、これに応じて、そのグループに適したコンテンツの推奨を行うようにするものであり、多数人から構成されるグループにおいて、１つのコンテンツしか利用できない場合であっても、その構成メンバーのそれぞれを考慮し、そのグループにとって、適したコンテンツの推奨が可能となり、利用するコンテンツがなかなか決まらないなどのグループにおいてよく発生する問題を効率よく解決することができる。

例えば、誕生日会やホームパーティなどにおいて、出席者全員の感情状態を考慮して、映画のコンテンツを選択するようにしたり、また、各種のコンテンツの鑑賞会において、鑑賞するコンテンツを選択したりする場合に、各出席者の生体情報から各出席者の感情状態を把握し、その把握した感情状態に基づいて、その集まり（グループ）に適したコンテンツを推奨するようにすることが可能となる。

[用いる生体情報の種類について]
上述した実施の形態においては、測定する生体情報としては、脳波、心電、脈波、体温、筋電を用いるものとして説明したが、これに限るものではない。例えば、呼吸数や呼吸量等の呼吸情報、血圧情報、皮膚の発汗情報、皮膚抵抗情報、体動情報、脳磁図情報、瞳孔径、マイクロバイブレーション情報、生化学反応情報など種々のものを用いることが可能である。

すなわち、用いることが可能な、生体情報としては、心拍情報、脈拍情報、呼吸情報、血圧情報、心電図情報、脳波情報、皮膚の発汗情報、皮膚抵抗情報、体動情報、脳磁図情報、筋電情報、体表面温度、瞳孔径の大きさ、マイクロバイブレーション情報、生化学反応情報などの種々のものの１つ以上を用いるようにし、この測定した生体情報を解析することにより、感情状態を把握するようにすればよい。

また、人間の身体が自発的、誘発的に発する上述した生体情報を解析することにより、感情状態を把握する場合に限るものではない。例えば、所定のリズムで操作ボタンスイッチを一定時間、押下操作することを要求するようにし、所定のリズムに対するユーザの操作ボタンスイッチの押下操作リズムのずれを検出することにより、ユーザの感情の安定度や興奮度などを把握するようにしたり、また、所定時間内に操作ボタンスイッチをできるだけ多く押下操作することを要求するようにし、その押下操作の回数により、ユーザの感情の安定度や興奮度などを把握するようにしたりするなど、ユーザの操作入力を受け付けて、その入力情報に基づいて当該ユーザの感情状態を把握するようにしてもよい。

すなわち、生体情報は、心拍、心電、脳波などのユーザの身体が自発的、誘発的に発する情報だけでなく、上述のように、押下ボタンスイッチの押下リズムや押下回数などのユーザの意思によって行われるユーザの動作から得られる情報も広義には生体情報であり、このようなユーザの能動的な動作から得られるユーザについての情報も生体情報として用いることが可能である。

また、推奨するコンテンツは、上述もしたように、映画、音楽、書籍などのデータとして、オンラインやＣＤやＤＶＤや半導体メモリーなどの記録媒体に記録されて提供可能なもの他、コンサート、演劇、スポーツの試合などの種々のイベントや、美術館、博物館、遊園地、映画館などの、種々の情報やいわゆるアトラクションなどを提供するものも含まれる。この他にも、ユーザの感情状態に応じて、推奨可能なもの、例えば、料理などの飲食物や、洋服の組み合わせなどの種々のものを推奨する場合にこの発明を利用することが可能である。

この発明による情報検索装置、情報検索方法の一実施の形態が適用されたコンテンツ推奨装置を説明するためのブロック図である。 図１に示した複合情報データベース、コンテンツ情報データベース、ユーザ情報データベースに格納される情報の一例について説明するための図である。 図１に示したコンテンツ推奨装置の映像、音声、生体情報および感情記録装置部（記録装置部）１１を説明するためのブロック図である。 図３に示した記録装置部１１の生体情報入力部１１７、Ａ／Ｄコンバータ１１８、生体情報入力コントローラ１１９について説明するためのブロック図である。 感情解析のためのモデルについて説明するための図である。 図１、図３に示した記録装置部１１の動作を説明するためのフローチャートである。 図１に示したコンテンツ推奨装置において行われるコンテンツの推奨処理時の動作について説明するためのフローチャートである。 この発明による情報検索システム、情報検索方法の一実施の形態が適用されたコンテンツ検索推奨システムを説明するための図である。 この発明によるクライアント装置の一実施の形態が適用されたクライアント端末を説明するためのブロック図である。 この発明によるサーバ装置の一実施の形態が適用されたサーバ装置を説明するためのブロック図である。 図８に示したコンテンツ検索推奨システムにおいて行われる処理を説明するためのシーケンス図である。 図１１に続くシーケンス図である。 コンテンツ検索推奨システムの他の構成例を説明するための図である。

符号の説明

１０…感情状態の評価処理系、１１…映像、音声、生体情報および感情記録装置部（記録装置部）、１１１…撮像部、１１２…Ａ／Ｄコンバータ、１１３…撮像部信号処理部、１１４…撮像部コントローラ、１１５…ＣＰＵ、１１６…ＲＡＭ、１１７…生体情報入力部、１１８…Ａ／Ｄコンバータ、１１９…生体情報入力部コントローラ、１２０…感情解析処理部、１２１…記録部コントローラ、１２２…記録部、１２３…ネットワークインターフェイス、１２４…表示部コントローラ、１２５…表示部、１２…複合情報データベース、１３…スケジュールベースアプリケーション部、１３１…処理部、１３２…記憶部、２０…コンテンツ検索推奨処理系、２１…通信部、２２…コンテンツ情報データベース、２３…ユーザ情報データベース、２４…コンテンツ推奨処理部、２４１…人気度集計部、２４２…関心度集計部、２４３…感情予想部、３０…制御部、３１…ＣＰＵ、３２…メモリー部、３３…ユーザインターフェイス

Claims (32)

1. ユーザから１種類以上の生体情報を検出する検出手段と、
   前記検出手段により検出された１種類以上の前記生体情報から、前記ユーザの感情状態を解析する解析手段と、
   前記解析手段による解析結果に基づいて、前記ユーザに対して推奨するコンテンツを検索する検索手段と、
   前記検索手段においての検索結果を通知する通知手段と
   を備えることを特徴とする情報検索装置。
2. 請求項１に記載の情報検索装置であって、
   少なくとも前記検索手段により検索されたコンテンツについての特性に基づいて、当該コンテンツの利用後における前記ユーザの感情状態を予測する予測手段と、
   前記予測手段における予測結果を通知する予測通知手段と
   を備えることを特徴とする情報検索装置。
3. 請求項１または請求項２に記載の情報検索装置であって、
   前記検出手段は、コンテンツ利用時の前記ユーザの生体情報をも検出することができるものであり、
   コンテンツ利用時において前記検出手段により検出される前記生体情報に基づいて、利用したコンテンツについての評価を行う評価手段と
   を備え
   前記検索手段は、前記評価手段における評価結果を考慮して、ユーザに推奨するようにするコンテンツを選択することを特徴とする情報検索装置。
4. 請求項１、請求項２または請求項３に記載の情報検索装置であって、
   ユーザからの予定表情報の入力を受け付ける受付手段を備え、
   前記検索手段は、前記受付手段を通じて受け付けた前記予定表情報の内の予定日と利用を予定するコンテンツの種別とを考慮して推奨するコンテンツを検索することを特徴とする情報検索装置。
5. ユーザから１種類以上の生体情報を検出する検出ステップと、
   前記検出ステップにおいて検出した１種類以上の前記生体情報から、前記生体情報の発生元である前記ユーザの感情状態を解析する解析ステップと、
   前記解析ステップにおいての解析結果に基づいて、前記ユーザに対して推奨するコンテンツを検索する検索ステップと、
   前記検索ステップにおいて得られる検索の結果を通知する通知ステップと
   を有することを特徴とする情報検索方法。
6. 請求項５に記載の情報検索方法であって、
   少なくとも前記検索ステップにおいての検索の結果得られるコンテンツについての特性に基づいて、当該コンテンツの利用後における前記ユーザの感情状態を予測する予測ステップと、
   前記予測ステップにおいての予測結果を通知する予測通知ステップと
   を有することを特徴とする情報検索方法。
7. 請求項５または請求項６に記載の情報検索方法であって、
   前記検出ステップにおいては、コンテンツ利用時の前記ユーザの生体情報をも検出するようにしており、
   コンテンツ利用時において前記検出ステップにおいて検出される前記生体情報に基づいて、利用したコンテンツについての評価を行う評価ステップを有し、
   前記検索ステップにおいては、前記評価ステップにおける評価結果を考慮して、ユーザに推奨するようにするコンテンツを選択することを特徴とする情報検索方法。
8. 請求項５、請求項６または請求項７に記載の情報検索方法であって、
   ユーザからの予定表情報の入力を受け付ける受付ステップとを有し、
   前記検索ステップにおいては、前記受付ステップにおいて受け付けた前記予定表情報の内の予定日と利用を予定するコンテンツの種別とを考慮してコンテンツの検索を行うようにすることを特徴とする情報検索方法。
9. クライアント装置とサーバ装置とが所定のネットワークを通じて接続されて形成される情報検索システムであって、
   前記クライアント装置は、
   ユーザから１種類以上の生体情報を検出する検出手段と、
   前記検出手段により検出された１種類以上の前記生体情報から、前記ユーザの感情状態を解析する解析手段と、
   前記解析手段からの感情状態の解析結果を前記サーバ装置に送信する解析結果送信手段と、
   前記サーバ装置から送信されてくる推奨するコンテンツについての情報を受信する受信手段と、
   前記受信手段を通じて受信した推奨するコンテンツに関する情報を通知する通知手段と
   を備え、
   前記サーバ装置は、
   前記クライアント装置からの前記感情状態の解析結果を受信する解析結果受信手段と、
   前記解析結果受信手段を通じて受信した前記感情状態の解析結果に基づいて、前記ユーザに対して提供を推奨するコンテンツを検索する検索手段と、
   前記検索手段の検索の結果得られた推奨するコンテンツに関する情報を要求元の前記クライアント装置に送信する送信手段と
   を備えることを特徴とする情報検索システム。
10. 請求項９に記載の情報検索システムであって、
    前記クライアント装置は、
    前記サーバ装置から送信されてくるコンテンツ利用後におけるユーザの感情状態の予測結果を受信する予測結果受信手段と、
    前記予測結果受信手段を通じて受け付けた前記予測結果を通知する予測通知手段と
    を備え、
    前記サーバ装置は、
    少なくとも前記検索手段により検索されたコンテンツについての特性に基づいて、当該コンテンツの利用後における前記ユーザの感情状態を予測する予測手段と、
    前記予測手段における予測結果を前記クライアント装置に送信する予測結果送信手段と
    を備えることを特徴とする情報検索システム。
11. 請求項９または請求項１０に記載の情報検索システムであって、
    前記クライアント装置において、
    前記検出手段は、コンテンツ利用時の前記ユーザの生体情報をも検出することができるものであり、
    前記クライアント装置は、
    コンテンツ利用時において前記検出手段により検出される前記生体情報に基づいて、利用したコンテンツについての評価を行う評価手段と、
    前記評価手段における評価結果を前記サーバ装置に送信する評価結果送信手段と
    を備え、
    前記サーバ装置は、
    前記クライアント装置からの前記評価結果を受信する評価結果受信手段を備え、
    前記サーバ装置において、
    前記検索手段は、前記評価手段における評価結果を考慮して、ユーザに推奨するようにするコンテンツを選択することを特徴とする情報検索システム。
12. 請求項９、請求項１０または請求項１１に記載の情報検索システムであって、
    前記クライアント装置は、
    ユーザからの予定表情報の入力を受け付ける受付手段と、
    前記受付手段を通じて受け付けた予定表情報を前記サーバ装置に送信する送信手段と
    を備え、
    前記サーバ装置は、
    前記クライアント装置からの前記予定表情報を受信する予定表情報受信手段を備え、
    前記サーバ装置において、
    前記検索手段は、前記予定表情報受信手段を通じて受け付けた前記予定表情報の内の予定日と利用を予定するコンテンツの種別とを考慮してコンテンツを検索することを特徴とする情報検索システム。
13. クライアント装置とサーバ装置とが所定のネットワークを通じて接続されて形成される情報検索システムであって、
    前記クライアント装置は、
    ユーザから１種類以上の生体情報を検出する検出手段と、
    前記検出手段により検出された１種類以上の前記生体情報を前記サーバ装置に送信する生体情報送信手段と、
    前記サーバ装置から送信されてくる推奨するコンテンツについての情報を受信する受信手段と、
    前記受信手段を通じて受信した推奨するコンテンツに関する情報を通知する通知手段と
    を備え、
    前記サーバ装置は、
    前記クライアント装置からの１種類以上の生体情報を受信する生体情報受信手段と、
    前記生体情報受信手段を通じて受信した１種類以上の前記生体情報から、前記ユーザの感情状態を解析する解析手段と、
    前記解析手段による解析結果に基づいて、前記ユーザに対して提供を推奨するコンテンツを検索する検索手段と、
    前記検索手段の検索の結果得られた推奨するコンテンツに関する情報を要求元の前記クライアント装置に送信する送信手段と
    を備えることを特徴とする情報検索システム。
14. 請求項１３に記載の情報検索システムであって、
    前記クライアント装置は、
    前記サーバ装置から送信されてくるコンテンツ利用後におけるユーザの感情状態の予測結果を受信する予測結果受信手段と、
    前記予測結果受信手段を通じて受け付けた前記予測結果を通知する予測通知手段と
    を備え、
    前記サーバ装置は、
    少なくとも前記検索手段により検索されたコンテンツについての特性に基づいて、当該コンテンツの利用後における前記ユーザの感情状態を予測する予測手段と、
    前記予測手段における予測結果を前記クライアント装置に送信する予測結果送信手段と
    を備えることを特徴とする情報検索システム。
15. 請求項１３または請求項１４に記載の情報検索システムであって、
    前記クライアント装置において、
    前記検出手段は、コンテンツ利用時の前記ユーザの生体情報をも検出することができるものであり、
    前記生体情報送信手段は、コンテンツ利用時に前記検出手段により検出された前記生体情報をも前記サーバ装置に送信することができるものであり、
    前記サーバ装置において、
    前記生体情報受信手段は、コンテンツ利用時に前記クライアント装置の前記検出手段により検出され、前記クライアント装置の前記生体情報送信手段から送信された前記生体情報をも受信することができるものであり、
    前記サーバ装置は、
    前記生体情報受信手段を通じて受信したコンテンツ利用時に前記クライアント装置の前記検出手段により検出される前記１つ以上の前記生体情報に基づいて、利用されたコンテンツについての評価を行う評価手段を備え、
    前記サーバ装置の前記検索手段は、前記評価手段における評価結果を考慮して、ユーザに推奨するようにするコンテンツを選択することを特徴とする情報検索システム。
16. 請求項１３、請求項１４または請求項１５に記載の情報検索システムであって、
    前記クライアント装置は、
    ユーザからの予定表情報の入力を受け付ける受付手段と、
    前記受付手段を通じて受け付けた予定表情報を前記サーバ装置に送信する送信手段と
    を備え、
    前記サーバ装置は、
    前記クライアント装置からの前記予定表情報を受信する予定表情報受信手段を備え、
    前記サーバ装置の前記検索手段は、前記予定表情報受信手段を通じて受け付けた前記予定表情報の内の予定日と利用を予定するコンテンツの種別とを考慮してコンテンツを検索することを特徴とする情報検索システム。
17. クライアント装置とサーバ装置とが所定のネットワークを通じて接続されて、前記クライアント装置と前記サーバ装置とを通じてコンテンツの推奨サービスを提供するようにする情報検索システムの前記クライアント装置であって、
    ユーザから１種類以上の生体情報を検出する検出手段と、
    前記検出手段により検出された１種類以上の前記生体情報から、前記ユーザの感情状態を解析する解析手段と、
    前記解析手段からの感情状態の解析結果を前記サーバ装置に送信する解析結果送信手段と、
    前記サーバ装置から送信されてくる推奨するコンテンツについての情報を受信する受信手段と、
    前記受信手段を通じて受信した推奨するコンテンツに関する情報を通知する通知手段と
    を備えることを特徴とするクライアント装置。
18. 請求項１７に記載のクライアント装置であって、
    前記サーバ装置から送信されてくるコンテンツ利用後におけるユーザの感情状態の予測結果を受信する予測結果受信手段と、
    前記予測結果受信手段を通じて受け付けた前記予測結果を通知する予測通知手段と
    を備えることを特徴とするクライアント装置。
19. 請求項１７または請求項１８に記載のクライアント装置であって、
    前記検出手段は、コンテンツ利用時の前記ユーザの生体情報をも検出することができるものであり、
    コンテンツ利用時において前記検出手段により検出される前記生体情報に基づいて、利用したコンテンツについての評価を行う評価手段と、
    前記評価手段における評価結果を前記サーバ装置に送信する評価結果送信手段と
    を備えることを特徴とするクライアント装置。
20. 請求項１７、請求項１８または請求項１９に記載のクライアント装置であって、
    ユーザからの予定表情報の入力を受け付ける受付手段と、
    前記受付手段を通じて受け付けた予定表情報を前記サーバ装置に送信する送信手段と
    を備えることを特徴とするクライアント装置。
21. クライアント装置とサーバ装置とが所定のネットワークを通じて接続されて、前記クライアント装置と前記サーバ装置とを通じてコンテンツの推奨サービスを提供するようにする情報検索システムの前記クライアント装置であって、
    ユーザから１種類以上の生体情報を検出する検出手段と、
    前記検出手段により検出された１種類以上の前記生体情報を前記サーバ装置に送信する生体情報送信手段と、
    前記サーバ装置から送信されてくる推奨するコンテンツについての情報を受信する受信手段と、
    前記受信手段を通じて受信した推奨するコンテンツに関する情報を通知する通知手段と
    を備えることを特徴とするクライアント装置。
22. 請求項２１に記載のクライアント装置であって、
    前記サーバ装置から送信されてくるコンテンツ利用後におけるユーザの感情状態の予測結果を受信する予測結果受信手段と、
    前記予測結果受信手段を通じて受け付けた前記予測結果を通知する予測通知手段と
    を備えることを特徴とするクライアント装置。
23. 請求項２１または請求項２２に記載のクライアント装置であって、
    前記検出手段は、コンテンツ利用時の前記ユーザの生体情報をも検出することができるものであり、
    前記生体情報送信手段は、コンテンツ利用時に前記検出手段により検出された前記生体情報をも前記サーバ装置に送信することができるものであることを特徴とするクライアント装置。
24. 請求項２１、請求項２２または請求項２３に記載のクライアント装置であって、
    ユーザからの予定表情報の入力を受け付ける受付手段と、
    前記受付手段を通じて受け付けた予定表情報を前記サーバ装置に送信する送信手段と
    を備えることを特徴とするクライアント装置。
25. クライアント装置とサーバ装置とが所定のネットワークを通じて接続されて、前記クライアント装置と前記サーバ装置とを通じてコンテンツの推奨サービスを提供するようにする情報検索システムの前記サーバ装置であって、
    前記クライアント装置からの前記感情状態の分析結果を受信する分析結果受信手段と、
    前記分析結果受信手段を通じて受信した前記感情状態の分析結果に基づいて、前記ユーザに対して提供を推奨するコンテンツを検索する検索手段と、
    前記検索手段の検索の結果得られた推奨するコンテンツに関する情報を要求元の前記クライアント装置に送信する送信手段と
    を備えることを特徴とするサーバ装置。
26. 請求項２５に記載のサーバ装置であって、
    少なくとも前記検索手段により検索されたコンテンツについての特性に基づいて、当該コンテンツの利用後における前記ユーザの感情状態を予測する予測手段と、
    前記予測手段における予測結果を前記クライアント装置に送信する予測結果送信手段と
    を備えることを特徴とするサーバ装置。
27. 請求項２５または請求項２６に記載のサーバ装置であって、
    前記クライアント装置からの前記評価結果を受信する評価結果受信手段を備え、
    前記検索手段は、前記評価手段における評価結果を考慮して、ユーザに推奨するようにするコンテンツを選択することを特徴とするサーバ装置。
28. 請求項２５、請求項２６または請求項２７に記載のサーバ装置であって、
    前記クライアント装置からの前記予定表情報を受信する予定表情報受信手段を備え、
    前記検索手段は、前記分析手段による分析結果に加えて、前記予定表情報受信手段を通じて受け付けた前記予定表情報の内の予定日と利用を予定するコンテンツの種別とをも考慮してコンテンツを検索することを特徴とするサーバ装置。
29. クライアント装置とサーバ装置とが所定のネットワークを通じて接続されて、前記クライアント装置と前記サーバ装置とを通じてコンテンツの推奨サービスを提供するようにする情報検索システムの前記サーバ装置であって、
    前記クライアント装置からの１種類以上の生体情報を受信する生体情報受信手段と、
    前記生体情報受信手段を通じて受信した１種類以上の前記生体情報から、前記ユーザの感情状態を解析する解析手段と、
    前記解析手段による解析結果に基づいて、前記ユーザに対して提供を推奨するコンテンツを検索する検索手段と、
    前記検索手段の検索の結果得られた推奨するコンテンツに関する情報を要求元の前記クライアント装置に送信する送信手段と
    を備えることを特徴とするサーバ装置。
30. 請求項２９に記載のサーバ装置であって、
    少なくとも前記検索手段により検索されたコンテンツについての特性に基づいて、当該コンテンツの利用後における前記ユーザの感情状態を予測する予測手段と、
    前記予測手段における予測結果を前記クライアント装置に送信する予測結果送信手段と
    を備えることを特徴とするサーバ装置。
31. 請求項２９または請求項３０に記載のサーバ装置であって、
    前記生体情報受信手段は、コンテンツ利用時に前記クライアント装置において検出され、前記クライアント装置から送信された前記生体情報をも受信することができるものであり、
    前記生体情報受信手段を通じて受信したコンテンツ利用時に前記クライアント装置において検出された１つ以上の前記生体情報に基づいて、利用されたコンテンツについての評価を行う評価手段を備え、
    前記検索手段は、前記評価手段における評価結果を考慮して、ユーザに推奨するようにするコンテンツを選択することを特徴とするサーバ装置。
32. 請求項２９、請求項３０または請求項３１に記載のサーバ装置であって、
    前記クライアント装置からの予定表情報を受信する予定表情報受信手段を備え、
    前記検索手段は、前記予定表情報受信手段を通じて受け付けた前記予定表情報の内の予定日と利用を予定するコンテンツの種別とを考慮してコンテンツを検索することを特徴とするサーバ装置。

Images