JP2017227780A - 情報処理装置、情報処理方法及びコンピュータプログラム - Google Patents

Abstract

【課題】ユーザ毎に情報を受け取りやすい提示方法で情報を提示することの可能な情報処理装置を提供する。【解決手段】ユーザに与えられた刺激に対するユーザの反応を検出するセンサが取得したセンサ情報に基づいて、ユーザにコンテンツを提示する処理部を備える、情報処理装置が提供される。【選択図】図３

Description

本開示は、情報処理装置、情報処理方法及びコンピュータプログラムに関する。

コンテンツの普及に伴い、ユーザへの情報の提示に際し、ユーザ毎に適切に情報を提示することが検討されている。例えば、ユーザの嗜好を分析してユーザの嗜好に合った情報を提示することや、ユーザの発想支援においてユーザがアイデアを出しやすい発想刺激をパーソナライズして提示すること（例えば、特許文献１）等が行われている。

特開２０１０−２４４３３４号公報

ここで、人間は、五感、すなわち視覚、聴覚、触覚、味覚、嗅覚を用いて外界を感知している。この五感について、人間には優位な感覚がそれぞれ存在すると言われている。例えば、情報の提示を受けるとき、画面に表示して視覚的に提示された方が音声により聴覚的に提示される場合よりも理解しやすい等、理解しやすい情報の提示方法は人によって異なる。このような違いは、各人の五感の優位度の違いも関係していると考えられる。

そこで、本開示では、ユーザ毎に情報を受け取りやすい提示方法で情報を提示することの可能な、新規かつ改良された情報処理装置、情報処理方法及びコンピュータプログラムを提案する。

本開示によれば、ユーザに与えられた刺激に対するユーザの反応を検出するセンサが取得したセンサ情報に基づいて、ユーザにコンテンツを提示する処理部を備える、情報処理装置が提供される。

また、本開示によれば、刺激とともにコンテンツを提示すること、ユーザに与えられた刺激に対するユーザの反応をセンサにより検出すること、センサが取得したセンサ情報に基づいて、ユーザの優位感覚を推定すること、を含む、情報処理方法が提供される。

さらに、本開示によれば、コンピュータを、ユーザに与えられた刺激に対するユーザの反応を検出するセンサが取得したセンサ情報に基づいて、ユーザにコンテンツを提示する処理部を備える、情報処理装置として機能させるコンピュータプログラムが提供される。

以上説明したように本開示によれば、ユーザ毎に情報を受け取りやすい提示方法で情報を提示することが可能となる。なお、上記の効果は必ずしも限定的なものではなく、上記の効果とともに、または上記の効果に代えて、本明細書に示されたいずれかの効果、または本明細書から把握され得る他の効果が奏されてもよい。

本開示の一実施形態に係る情報処理装置を用いたコンテンツ提示の概要を示す説明図である。 同実施形態に係る情報処理装置を用いたユーザ毎のコンテンツ提示の一例を示す説明図である。 同実施形態に係る情報提示システムの一構成例を示す機能ブロック図である。 反応評価情報記憶部が保持する情報の一例として、生体情報とユーザの反応との関係を示す説明図である。 刺激に対するユーザの反応を評価する一指標を表す説明図である。 刺激に対するユーザの反応を表情から評価する場合の一指標を示す説明図である。 ユーザモデル記憶部に記憶されている感覚タイプ情報の一例を示す説明図である。 ユーザモデル記憶部に記憶されている刺激反応履歴テーブルの一例を示す説明図である。 同実施形態に係る情報提示システムによる情報提示方法の一例を示すフローチャートである。 ユースケース１として、コンテンツとして提示されるデジタル絵本のイメージを示す説明図である。 印象オブジェクトに設定する刺激情報の大きさの一例を示す説明図である。 印象オブジェクトに対して設定される刺激情報の内容を示す説明図である。 刺激情報が過度に設定された場合にコンテンツ作成者に対して注意喚起がされることを示す説明図である。 ユースケース２として、ユーザの感覚タイプに応じたガイド情報の提示例を示す説明図である。 ユースケース３として、視覚型のユーザへの単語提示例を示す説明図である。 触覚型のユーザへの単語提示例を示す説明図である。 ユーザの反応変化によってコンテンツの提示の仕方を変更する場合の一処理例を示すフローチャートである。 同実施形態に係る情報提示システムを構成する一機能部のハードウェア構成を示すハードウェア構成図である。

以下に添付図面を参照しながら、本開示の好適な実施の形態について詳細に説明する。なお、本明細書及び図面において、実質的に同一の機能構成を有する構成要素については、同一の符号を付することにより重複説明を省略する。

なお、説明は以下の順序で行うものとする。
１．概要
２．情報処理装置の構成
３．情報提示方法
４．ユースケース
［ユースケース１：デジタル絵本］
［ユースケース２：感覚タイプ別のガイド情報の提示］
［ユースケース３：デジタル教材］
（１）英単語学習方法
（２）ユーザの反応変化によるコンテンツの提示変更
［ユースケース４：推定されたユーザモデルの利用］
（１）学習支援（クラス分け／チーム分け）
（２）テーマパーク・美術館・展示会
（３）コミュニケーション支援
５．ハードウェア構成

＜１．概要＞
まず、図１及び図２を参照して、本開示の一実施形態に係る情報処理装置によるコンテンツの提示方法の概要を説明する。図１は、本実施形態に係る情報処理装置を用いたコンテンツ提示の概要を示す説明図である。図２は、本実施形態に係る情報処理装置を用いたユーザ毎のコンテンツ提示の一例を示す説明図である。

本実施形態に係る情報処理装置は、ユーザ毎に情報を受け取りやすい提示方法で情報を提示する。本技術では、ユーザの感覚のうち優位に働く感覚（以下、「優位感覚」ともいう。）を推定し、優位感覚を刺激するように情報を提示することで、ユーザにとって負荷なく情報を受け取れるようにする。各ユーザの優位感覚は、ユーザの生体情報に基づき推定することができる。

具体的には、図１に示すように、ユーザに情報を提示する際に、ある感覚（例えば、視覚、聴覚、触覚等）を刺激するように情報を提示する（Ｐ１）。このとき、当該刺激を受けたユーザの生体情報を取得する（Ｐ２）。そして、取得したユーザの生体情報を解析して当該刺激を受けたユーザの反応を推定し、ユーザの反応に基づき与えた刺激がユーザにとって効果があったか否かを評価する（Ｐ３）。プロセスＰ３の評価は、次に情報をユーザに提示する際に考慮するため、情報を提示する機能部へフィードバックされるとともに、ユーザの刺激に対する反応からユーザの優位感覚を推定するための情報として利用される（Ｐ４）。プロセスＰ４では、プロセスＰ１〜Ｐ３においてユーザに提示された様々な刺激に対する反応に基づき、ユーザの優位感覚を推定する。推定されたユーザの優位感覚は、情報を提示する機能部へフィードバックされることにより、優位感覚を刺激するように情報がユーザに提示される。

例えば、図２に示すように、映像コンテンツに含まれるオブジェクトのうち視聴者に印象付けたいオブジェクト（以下、「印象オブジェクト」ともいう。）１０が存在するとする。映像コンテンツには、印象オブジェクト１０を提示する際に刺激情報を付加することのみ設定されている。情報処理装置は、映像コンテンツに印象オブジェクト１０が設定されていると、映像コンテンツの視聴者の優位感覚に基づき、印象オブジェクト１０に対して刺激情報を設定し、映像コンテンツを再生させる。

ここで、情報に対する認識の仕方は、ユーザの優位感覚によってユーザ毎に相違すると言われている。本開示においては、ユーザの優位感覚による情報の認識の違いを感覚タイプに区分して表す。ここでは、感覚タイプとして、例えば、視覚が優位に働く視覚型、聴覚が優位に働く聴覚型、触覚が優位に働く触覚型の３つを設定する。各感覚タイプにより、情報の受け取り方、伝え方、記憶の仕方等が相違し、例えば身体の動きにもその違いが現れている。

身体の動きの一例として、眼球の動きについてみると、まず、眼球の動きについては、視覚型のユーザは上へ動いたりキョロキョロしたりする傾向がある。また、聴覚型のユーザは一点を見据えて情報の内容に沿って動いたりやや下を見たりする傾向があり、触覚型のユーザは水平方向または下方で視線を泳がせる傾向がある。身体の動きの他の例として、手または腕の動きについてみると、視覚型のユーザは手等を上方へ向かわせる動きをする傾向があり、聴覚型のユーザは話の意味に沿った動きをする傾向があり、触覚型のユーザはオーバーアクション気味で腕を上下に動かす傾向がある。

また、情報の伝達や記憶に関しては、視覚型のユーザは、画像や色に対するこだわりが強く、話が飛躍する傾向があり、早口であることが多い。そして、視覚型のユーザは情報を面で捉えて記憶する傾向がある。また、聴覚型のユーザは、時間、距離にこだわりがあり、一貫性のある話をする傾向がある。声の抑揚が少なく、ゆっくりとしたスピードで話す人が多い。そして、聴覚型のユーザは情報を関連付けて線で記憶する傾向がある。触覚型のユーザは、擬音語あるいは擬態語が多く、声の抑揚が多い傾向がある。そして、触覚型のユーザは情報を点として個々に記憶する傾向がある。

そこで、本開示ではユーザの優位感覚を推定し、優位感覚を刺激するように情報をユーザに提示する。例えば、図２では、映像コンテンツ中に含まれる象を印象オブジェクト１０としてユーザに印象付けるとする。このとき、ユーザの感覚タイプが視覚型であるときには、情報処理装置は、優位感覚である視覚を刺激するように、印象オブジェクト１０である象を拡大／縮小させたり、動かしたり、点滅させたりしてもよい。また、ユーザの感覚タイプが聴覚型であるときには、情報処理装置は、印象オブジェクト１０である象の表示とともに、優位感覚である聴覚を刺激するように鳴き声や効果音を出力するようにしてもよい。さらに、ユーザの感覚タイプが触覚型であるときには、情報処理装置は、印象オブジェクト１０である象の表示とともに、優位感覚である触覚を刺激するように、ユーザが保持あるいは装着により触れている機器を振動させてもよい。振動させる機器は、例えば映像コンテンツを再生しているタブレット端末やスマートフォン、ウェアラブル端末等、表示装置を備える機器自体であってもよく、映像コンテンツを再生している機器以外の機器であってもよい。この場合、振動される機器は、映像コンテンツを再生している機器からの指示を受けて振動することも可能であり、ネットワークを介してこれらの機器を制御する制御サーバ等により制御されてもよい。

このように、ユーザの感覚タイプに応じて、映像コンテンツ中の印象オブジェクト１０の提示方法を変化させることで、各ユーザは情報を理解しやすくなり、印象オブジェクト１０をユーザに印象付けやすくすることができる。

以下、このような処理を実行させるための情報処理装置を備える情報提示システムと、これによる情報提示方法について、詳細に説明していく。

＜２．情報処理装置の構成＞
まず、図３〜図８に基づいて、本開示の一実施形態に係る情報提示システム１００の構成を説明する。なお、図３は、本開示の実施形態に係る情報提示システム１００の一構成例を示す機能ブロック図である。図４は、反応評価情報記憶部１３０が保持する情報の一例として、生体情報とユーザの反応との関係を示す説明図である。図５は、刺激に対するユーザの反応を評価する一指標を表す説明図である。図６は、刺激に対するユーザの反応を表情から評価する場合の一指標を示す説明図である。図７は、ユーザモデル記憶部１４０に記憶されている感覚タイプ情報１４１の一例を示す説明図である。図８は、ユーザモデル記憶部１４０に記憶されている刺激反応履歴テーブル１４３の一例を示す説明図である。

本実施形態に係る情報提示システム１００は、図３に示すように、センサ類１１０と、モデル設定部１２０と、反応評価情報記憶部１３０と、ユーザモデル記憶部１４０と、提示処理部１５０と、コンテンツ記憶部１６０と、提示部１７０とを含む。

センサ類１１０は、情報が提示されたユーザの反応を分析するためのユーザに関する情報を取得する。センサ類１１０としては、例えば、ユーザの生体情報を取得する生体センサ１１１、音声を取得する音声取得装置１１３、あるいはユーザを撮像する撮像装置１１５等がある。

生体センサ１１１には、例えば、ユーザが外界から刺激を受けたときに反応する器官（効果器）の変化を生体情報として検出するセンサを用いてもよい。人間は、耳や眼等の受容器により、外界からの音や光等の刺激を受容する。受容器が受容した刺激が神経系を介して大脳の感覚中枢に伝達されることで感覚が成立する。そして、大脳の運動中枢は、この感覚に対する身体の動きを判断すると、その判断に基づく指令を効果器に伝達し、効果器を作動させる。この刺激による効果器の変化が刺激に対する反応して現れる。本開示では、生体センサ１１１により、このような刺激に対する効果器の変化を検出する。

効果器の例を図４に示す。図４に示すように、効果器としては、例えば瞳孔、唾液腺、気管支、気道分泌、血圧、心拍数、肝臓、消化器、皮膚等がある。各効果器は、刺激へのユーザの感じ方より、緊張状態となり交感神経が優位に働く場合と、リラックス状態となり副交感神経が優位に働く場合とがある。例えば、瞳孔は、ユーザが受容した刺激に対して不快感を持った場合は散瞳し、ユーザが受容した刺激に対して安心感を持った場合は縮瞳する。このように、効果器には、外界からの刺激に対するユーザの感じ方に応じた変化が現れる。したがって、生体センサ１１１の検出値に基づき、ユーザに与えた刺激に対する反応を推定することが可能となる。生体センサ１１１としては、例えば、脈波センサや発汗センサ、血圧計等がある。

また、センサ類１１０として、音声取得装置１１３または撮像装置１１５を備えてもよい。例えば、音声取得装置１１３により刺激を受けたときのユーザの音声を取得することで、声の抑揚や大きさ、話のスピード等を把握することができる。また、撮像装置１１５により刺激を受けたときのユーザの表情あるいは身体の動きを撮像することで、撮像された静止画像または動画像に基づき、ユーザの刺激に対する感じ方を把握することができる。また、撮像装置１１５は生体センサとして利用することもでき、例えば撮像装置１１５により撮像された画像から、顔心拍解析技術を利用して心拍数を得ることもでき、身体の微小変化から呼吸を認識することも可能である。

以上より、センサ類１１０としては、少なくとも生体センサ１１１または撮像装置１１５のうちいずれか一方を有していればよいが、取得される情報が多いほどより正確にユーザの反応を認識することが可能となる。また、センサ類１１０としては、生体センサ１１１、音声取得装置１１３及び撮像装置１１５以外にも、例えばＩｏＴ（Internet of Things）センサ等も利用可能である。センサ類１１０により取得された検出値は、センサ情報としてモデル設定部１２０へ出力される。

モデル設定部１２０は、センサ情報に基づいて、刺激に対するユーザの反応を表すユーザモデルをユーザ毎に設定する。まず、モデル設定部１２０は、センサ情報を解析し、ユーザに提示された刺激に対するユーザの反応を推定する。このとき、モデル設定部１２０は、後述する反応評価情報記憶部１３０を参照し、ユーザの反応を推定してもよい。なお、反応評価情報記憶部１３０には、例えば図４に示した生体情報とユーザの反応との関係、ユーザの内部状態を表す二軸マッピング（図５）、ユーザの表情と情動との関係（図６）等が記憶されている。

例えば、モデル設定部１２０は、生体センサ１１１により取得された生体情報に基づき、図４に示した効果器の変化からユーザの反応を推定してもよい。例えば、生体情報としてユーザの瞳孔が画像として取得されているとき、モデル設定部１２０は、瞳孔の大きさの変化を検出し、瞳孔が大きくなったときにはユーザは緊張状態にあり、瞳孔が小さくなったときにはユーザはリラックス状態にあると判定する。取得されたセンサ情報が複数ある場合には、センサ情報それぞれについてユーザの反応を推定してもよい。そして、モデル設定部１２０は、ユーザに提示した刺激の内容と推定したユーザの反応とを、刺激反応履歴情報としてユーザモデル記憶部１４０に記録する。

また、モデル設定部１２０は、推定したユーザの反応を評価してユーザモデルを設定する。ユーザモデルは、ユーザの優位感覚を表しており、例えばユーザの感覚タイプにより表される。各ユーザに設定されたユーザモデルに基づいてそれぞれ情報を提示することで、ユーザ毎に異なる優位感覚を適切に刺激し、各ユーザが情報を受け取りやすくすることができる。モデル設定部１２０は、設定したユーザモデルを、後述するユーザモデル記憶部１４０に記憶する。また、モデル設定部１２０は、ユーザに与えた刺激に対する反応に基づき、ユーザモデルを更新してもよい。

反応評価情報記憶部１３０は、モデル設定部１２０によってユーザに提示された刺激に対するユーザの反応を推定するための情報を記憶する記憶部である。反応評価情報記憶部１３０は、例えば、図４に示した生体情報とユーザの反応との関係の他に、例えば、図５に示すようなユーザの内部状態を表す円環モデルを保持してもよい。図５に示す円環モデルは、刺激に対するユーザの反応を、一軸に感情のポジティブ／ネガティブ、他軸に感情の興奮度合（本開示では「覚醒レベル」ともいう。）を表したものである。図５の覚醒レベルは、図４に示した外界からの刺激に対する効果器の変化に対応させることもできる。モデル設定部１２０は、センサ類１１０により取得されたセンサ情報に基づき特定される感情を、図５の円環モデルにマッピングすることで、刺激に対するユーザの反応傾向を定量的に表すこともできる。

また、反応評価情報記憶部１３０は、例えば図６に示すように顔の表情と情動との関係を保持してもよい。口角や眼尻の上がり下がりの状態あるいは眉間のしわ等によって変化する顔の表情には、嫌悪感あるいは怒り、驚き、軽蔑、恐れ、悲しみ等、そのときの情動が現れる。そこで、様々な情動について表情を形成する顔の特徴部分を反応評価情報記憶部１３０に保持することで、モデル設定部１２０は、例えば撮像装置１１５により撮像された画像を解析して特徴部分を抽出し、抽出された特徴部分が現れる情動を特定することができる。

なお、図４〜図６は、反応評価情報記憶部１３０に記憶されている情報の一例であり、本開示に係る情報提示システムは、これらの情報をすべて含んでいなくともよく、また、他の情報を含んでいてもよい。また、反応評価情報記憶部１３０に記憶されている情報は予め設定されていてもよく、適宜更新されてもよい。

ユーザモデル記憶部１４０は、刺激に対するユーザの反応を表すユーザモデルを記憶する記憶部である。本実施形態では、ユーザモデル記憶部１４０は、ユーザの感覚タイプ情報１４１と、刺激反応履歴テーブル１４３とを有する。感覚タイプ情報１４１は、モデル設定部１２０により推定された各ユーザの感覚タイプをユーザモデルとして記憶する。感覚タイプ情報１４１には、例えば図７に示すように、ユーザ毎に、視覚型、聴覚型、触覚型の各感覚タイプの割合が含まれる。ある１つの感覚が優位に働く人もいれば、複数の感覚が同程度に機能する人もいる。そこで、図７に示すように、各感覚タイプが優位に働く程度を割合として表すことで、各ユーザにより適した刺激を設定することが可能となる。感覚タイプ情報１４１は、刺激反応履歴テーブル１４３に格納された情報に基づき推定された感覚タイプである。

また、刺激反応履歴テーブル１４３には、情報提示システム１００により提示されたコンテンツ及び設定した刺激情報と、これに対するユーザの反応、ユーザへの効果等の情報が格納されている。刺激反応履歴テーブル１４３の一構成例を図８に示す。図８に示す刺激反応履歴テーブル１４３には、時間、場所、シーン、コンテンツ、刺激情報、ユーザの反応、ユーザへの効果を格納することができる。刺激反応履歴テーブル１４３には図８に示す以外の情報を格納することも可能である。また、シーンにより取得できない情報があってもよい。この場合には、取得不可あるいは未取得であることを記録してもよい。

刺激反応履歴テーブル１４３に格納される情報例を以下に示す。
［時間情報］
・コンテンツを提示した年月日、曜日
・コンテンツ使用開始からの経過時間
［場所、シーン（使用場面）］
・使用場所：家、学校、友達の家、図書館、電車の中、等。
・コンテンツの提示を受けた人物：本人のみ、兄弟、親、友達、先生、等。
［コンテンツ］
・使用コンテンツの種類：デジタル絵本、英単語の教材、等。
［刺激情報］
・コンテンツ作成者から指示された刺激の内容：印象オブジェクトと刺激の大きさ
・刺激内容：（刺激決定指針）最も効果的な刺激、最近使用していない刺激、等。
（実際に提示した刺激）視覚型１０％動く、聴覚型５％効果音、等。
より具体的な刺激提示内容。
［ユーザの反応］
・生体センサのセンサ情報からの反応：心拍数上昇、発汗増大、呼吸数増、等。
・音声取得装置、撮像装置の取得情報に基づく反応
・感情の環状モデルにおける位置情報：（ｘ，ｙ）＝（Ｎｘ，Ｎｙ）
［ユーザへの効果］
・評価とその根拠
例）１０段階評価：７、根拠：刺激呈示時の生体反応より
１０段階評価：３、根拠：小テストを間違えた

刺激反応履歴テーブル１４３に格納される刺激を与えたことによるユーザへの効果については、後から更新されることがあり得る。例えば、英単語教材のコンテンツを使用した際にユーザに英単語を覚えさせるような刺激を付加したとする。提示した刺激に対してユーザが一見良さそうな反応をしたことから当該刺激は効果ありとしたが、その後小テストを実施したところ、全然理解していないことが分かった場合には、提示した刺激は実際には効果がなかったと更新する、というような場合である。

ユーザモデル記憶部１４０の保持する情報は、モデル設定部１２０により適宜更新される。例えば、ある刺激に対する反応がある度にリアルタイムに更新してもよく、一定期間経過後にバッチ処理的に更新してもよい。また、ユーザモデル記憶部１４０は、後述する提示処理部１５０に参照され、提示処理部１５０によりコンテンツに含まれる印象オブジェクトに刺激が設定される。

提示処理部１５０は、コンテンツ記憶部１６０に記憶されている各種コンテンツを、提示部１７０を介してユーザに提示する。提示処理部１５０は、コンテンツ記憶部１６０に記憶されたコンテンツに含まれる印象オブジェクトに対して、ユーザモデル記憶部１４０に格納されている情報に基づき刺激を設定し、提示部１７０へ出力する。例えば、提示処理部１５０は、ユーザモデル記憶部１４０を参照する際に、感覚タイプ情報１４１に基づき設定する刺激情報を決定してもよい。また、提示処理部１５０は、例えば刺激反応履歴テーブル１４３を参照し、過去の刺激内容とその反応の履歴から今回の刺激に関係する履歴情報を抽出し、抽出された情報より刺激に対する反応とその効果を確認した上で、今回設定する刺激情報を決定してもよい。また、提示処理部１５０は、ユーザモデル以外にも、例えばユーザの嗜好、ユーザにより設定されたユーザ情報等のユーザ特性に基づき、刺激情報を設定してもよい。

コンテンツ記憶部１６０は、ユーザに提示するコンテンツを記憶する記憶部である。コンテンツ記憶部１６０は、提示処理部１５０と同一の機器あるいはサーバに設けられてもよく、クラウド上に保持されているコンテンツであってもよい。コンテンツとしては、特に制限されるものではないが、コンテンツの提示に際してユーザに対して刺激を付加可能なコンテンツを想定してもよい。また、当該コンテンツにはデジタルコンテンツも含まれる。例えば、学習ドリル等の教育系コンテンツや、デジタル絵本等の書籍コンテンツ、実映像に対してリアルタイムに画像を合成して表示させるＡＲコンテンツ等へも適用可能である。

提示部１７０は、印象オブジェクトに設定された刺激とともにコンテンツをユーザに提示する。提示部１７０は、例えば情報を表示する表示部、音声を出力する音声出力部、機器を振動させる振動発生部等を含む。なお、コンテンツと印象オブジェクトに設定される刺激とは、必ずしも同一機器から提示されなくてもよい。例えば、印象オブジェクトの提示とともに振動を与える場合、印象オブジェクトを含むコンテンツはタブレット端末に表示させるが、振動はリストバンド型端末やスマートフォン等の他の機器を印象オブジェクトの表示に同期して振動させてもよい。

＜３．情報提示方法＞
図９に、図３に示した情報提示システム１００による基本的な情報提示方法を示す。図９は、本実施形態に係る情報提示システム１００による情報提示方法の一例を示すフローチャートである。

本実施形態に係る情報提示システム１００では、まず、ユーザに提示するコンテンツがコンテンツ作成者により選択される（Ｓ１００）。このとき、コンテンツ中、ユーザに印象付けたいオブジェクトが印象オブジェクトとして設定される（Ｓ１１０）。ステップＳ１００、Ｓ１１０は、コンテンツがユーザに提供される前のコンテンツ作成段階である。コンテンツ作成者は、印象オブジェクトに対して具体的な動きや音声等を設定する必要はなく、印象オブジェクトをユーザに印象付けることのみを設定すればよい。

コンテンツ作成者により印象オブジェクトが設定されたコンテンツがユーザ利用可能な状態になると、ユーザは、コンテンツを取得して使用することができる。ユーザがコンテンツの利用を開始すると、情報提示システム１００の提示処理部１５０は、ユーザモデル記憶部１４０を参照し、コンテンツの提示方法を決定する（Ｓ１２０）。例えば、提示処理部１５０は、ユーザモデル記憶部１４０の感覚タイプ情報１４１を参照し、コンテンツを利用するユーザの感覚タイプに応じた刺激情報を設定する。例えば、ユーザが視覚型の感覚タイプである場合には、印象オブジェクトを拡大縮小させたり、点滅して表示させたりする。ステップＳ１２０にてコンテンツの提示方法が決定されると、コンテンツが再生され（Ｓ１３０）、ユーザにコンテンツが提示される。印象オブジェクトの提示時には、設定された刺激情報も合わせて提示される。

コンテンツが提示されているとき、ユーザの生体情報や表情、音声等がセンサ類１１０によって取得されている（Ｓ１４０）。センサ類１１０により取得されたセンサ情報は、モデル設定部１２０へ出力される。モデル設定部１２０は、反応評価情報記憶部１３０を参照し、刺激が与えられたときのユーザの反応を評価し、感覚タイプを推定する（Ｓ１５０）。モデル設定部１２０は、刺激反応履歴テーブル１４３に、提示したコンテンツ、印象オブジェクト、設定した刺激情報、刺激に対するユーザの反応、刺激のユーザへの効果等を記録し、感覚タイプ情報１４１を今回推定された感覚タイプで更新する（Ｓ１６０）。ステップＳ１２０〜ＳＳ１６０までの処理は、例えばコンテンツの再生が終了されるまで実施される（Ｓ１７０）。

以上、情報提示システム１００による基本的な情報提示方法について説明した。かかる情報提示方法によれば、ユーザ毎に、最も情報を受け取りやすい方法で情報を提示することができる。また、ユーザに応じた適切な刺激方法を自動で実施させることができるので、コンテンツ作成者は、期待する刺激を印象オブジェクトに与える際に、詳細な刺激提示方法を設定する必要がない。

なお、刺激に対するユーザの反応が得られていないとき、ユーザモデル記憶部１４０には、初期ユーザモデルとして、例えば予め設定された固定ユーザモデルまたは一般ユーザモデルを設定してもよい。固定ユーザモデルは特に限定されず、例えば感覚タイプを「視覚型」のみに設定する等、任意の初期値が設定されればよい。一般ユーザモデルは、例えば、過去に取得された他のユーザの感覚タイプ情報の平均値としてもよい。あるいは、実際のコンテンツをユーザに提示する前に、大まかな感覚タイプを特定するためのテストコンテンツを提示して、初期ユーザモデルを設定してもよい。このとき、テストコンテンツが提示されたときに取得されたセンサ情報に基づいてユーザの反応を評価し、ユーザの感覚タイプが推定される。このように、ユーザのユーザモデルを設定するためテスト処理を実施することで、コンテンツ再生開始直後からユーザの感覚に適した刺激情報が提示されるようになる。

＜４．ユースケース＞
以下、本実施形態に係る情報提示システムのユースケースについて説明する。

［ユースケース１：デジタル絵本］
まず、図１０〜図１３に基づいて、本実施形態に係る情報提示システム１００により、コンテンツとしてデジタル絵本を提示する場合を説明する。なお、図１０は、コンテンツとして提示されるデジタル絵本のイメージを示す説明図である。図１１は、印象オブジェクトに設定する刺激情報の大きさの一例を示す説明図である。図１２は、印象オブジェクトに対して設定される刺激情報の内容を示す説明図である。図１３は、刺激情報が過度に設定された場合にコンテンツ作成者に対して注意喚起がされることを示す説明図である。

本ユースケースでは、デジタル絵本を再生する際に、デジタル絵本の物語中に登場する人、動物、物体に刺激情報を設定し、デジタル絵本をおもしろく、また、ユーザの印象に残りやすくすることを考える。通常、デジタル絵本のコンテンツは、図１０に示すようにタブレット端末等の端末２のディスプレイ２０に静止画像あるいは動画像を表示させて使用される。例えば、「赤ずきんちゃん」のデジタル絵本について、登場する赤ずきん２１及びオオカミ２３がユーザに印象付ける印象オブジェクトとしてコンテンツ作成者により設定されているとする。このとき、コンテンツ作成者は、各印象オブジェクトに対して、刺激の大きさを表す覚醒レベルを設定する。覚醒レベルが大きいほど、刺激は大きくなる。例えば図１１に示す例では、オオカミの覚醒レベルは４、赤ずきんの覚醒レベルは２に設定されている。

情報提示システム１００の提示処理部１５０は、例えば、ユーザモデル記憶部１４０の感覚タイプ情報１４１を参照し、ユーザの感覚タイプ及び設定された印象オブジェクトの覚醒レベルに基づき、コンテンツとともに与える刺激を設定する。図１２に、刺激情報と覚醒レベルとの設定例を示す。かかる情報は、ユーザモデル記憶部１４０に記憶されていてもよい。図１２では、視覚型のユーザへの刺激として、印象オブジェクトの動きの大きさ、聴覚型のユーザへの刺激として効果音の大きさ、触覚型のユーザへの刺激として、端末２の振動時間が設定される。本例において、デジタル絵本を利用するユーザは、視覚型、聴覚型、触覚型のすべてのタイプの特徴を有しているが、視覚型がより優位にあるため、印象オブジェクトの動きが他の刺激よりも強調されるようにコンテンツが提示される。

提示処理部１５０は、図１２に示した刺激情報と覚醒レベルとの関係に基づき、覚醒レベル４のオオカミ２３に対しては、通常の動きよりも２０％大きく動かすとともに、通常よりも１０％大きい音量で効果音を出力し、端末２を３秒間振動させる。一方、覚醒レベル２の赤ずきん２１に対しては、設定される刺激はオオカミ２３よりも小さくなり、通常の動きよりも１０％大きく動かすとともに、通常よりも５％大きい音量で効果音を出力し、端末２を１秒間振動させる。このように、コンテンツ作成者は印象オブジェクトの設定とその刺激の大きさとを設定するだけで、自動的に印象オブジェクトの具体的な動きが設定される。

ここで、コンテンツ作成者が印象オブジェクトに対する覚醒レベルを設定できることから、意図しない刺激まで設定してしまい、印象オブジェクトに対するユーザの注意力を反って散漫させる可能性もある。例えば、図１３上側に示すように、印象オブジェクトである赤ずきん２１及びオオカミ２３に加え、葉っぱ２５にも刺激情報が設定され、各オブジェクトの動きや効果音、端末２の振動が所定のレベルを超えたとする。過度の刺激が設定されているか否かの判定は、例えば、同時に表示される印象オブジェクトのうち刺激情報が設定されているオブジェクト数が所定数以上であり、かつ、各覚醒レベルが４以上である場合に該当するかによって行ってもよい。過度の刺激が設定された場合には、コンテンツ作成者が作成内容を確認する際に、例えば図１３下側に示すように、過度の刺激が設定されていることを示すメッセージ２７をディスプレイ２０に表示させたり、音声出力したりする等によってユーザに通知してもよい。

［ユースケース２：感覚タイプ別のガイド情報の提示］
次に、図１４に基づいて、本実施形態に係る情報提示システム１００により、コンテンツとしてＡＲを用いたガイド情報を提示する場合について説明する。図１４は、ユーザの感覚タイプに応じたガイド情報の提示例を示す説明図である。ここでは、実画像が表示されている上に重畳して表示されるＡＲを用いたガイド情報を、ユーザの感覚タイプに応じて適切に提示する例を示す。ガイド情報が印象オブジェクトに対応する。このとき、実画像及びガイド情報が表示される端末３は、スマートフォンやタブレット端末の他、ヘッドマウントディスプレイやアイウェア端末等を用いることができる。

図１４に示す例では、ユーザを別館に案内するガイド情報を提示する。このとき、コンテンツ作成者は、ユーザが目的地とした場所を印象オブジェクトとすることのみ設定する。ユーザは、別館への案内を端末３に指示すると、情報提示システム１００の提示処理部１５０は、ユーザモデル記憶部１４０を参照してユーザの感覚タイプを取得する。そして、ユーザの感覚タイプに応じてガイド情報を提示する。例えば、視覚型のユーザに対しては、ディスプレイ３０に表示される別館の位置を視覚的に示すガイドオブジェクト３１を強調して表示する。また、例えば聴覚型のユーザに対しては、ディスプレイ３０にはガイドオブジェクト３１を視覚型のユーザに対して提示される場合よりも小さく表示するが、合わせて音声により別館の位置が通知される。さらに、例えば触覚型のユーザに対しては、聴覚型のユーザの場合と同様にガイドオブジェクト３１をディスプレイ３０に小さく表示するが、ディスプレイ３０内に別館が表示されている場合に端末３を振動させることで、別館の位置を通知するようにしてもよい。

また、ガイド情報提示の停止を行う際のユーザの行動より、当該ユーザの優位感覚を推定することも可能である。例えばガイド情報提示の停止の処理として、ガイドを確認後ウィンクする、ガイドを確認後「ＯＫ」と言う、ガイドを確認後に指を指す、の３つの動作を設定しておく。いずれの動作によっても同様にガイド情報提示の停止が実行されるが、ユーザが選択する動作が優位感覚により自然に選択されたものと推定することができる。例えば、ユーザがガイドを確認後ウィンクした場合には視覚型、ユーザがガイドを確認後「ＯＫ」と言った場合には聴覚型、ユーザがガイドを確認後に指を指した場合には触覚型を判定してもよい。このような動作もユーザモデル記憶部１４０に保持しておくことで、ユーザの感覚タイプの推定に利用することができる。

［ユースケース３：デジタル教材］
次に、本実施形態に係る情報提示システム１００により、学習用のデジタル教材を提示する場合について説明する。

（１）英単語学習方法
まず、図１５及び図１６に基づいて、本実施形態に係る情報提示システム１００により、コンテンツとして英単語教材を提示する場合について説明する。図１５は、視覚型のユーザへの単語提示例を示す説明図である。図１６は、触覚型のユーザへの単語提示例を示す説明図である。本ユースケースは、英単語教材を用いてユーザが英単語を覚える際に、ユーザが覚えやすいように英単語を提示する。ここでは英単語が印象オブジェクトとなり、図１５及び図１６では、「ｅｌｅｐｈａｎｔ」という英単語を印象オブジェクト４１となる。

ユーザがタブレット端末４を用いて英単語の学習を開始すると、提示処理部１５０は、ユーザモデル記憶部１４０を参照してユーザの感覚タイプを取得する。そして、ユーザの感覚タイプに応じて、印象オブジェクト４１である英単語を提示する。例えば、視覚型のユーザに対しては、ディスプレイ４０に「ｅｌｅｐｈａｎｔ」と英単語を表示し、さらに、単語を構成するアルファベット４１ａ〜４１ｈを一文字ずつ、他のアルファベットとの表示が異なるように表示させる。例えば、図１５の例では、左から「ｅ」、「ｌ」、「ｅ」、・・・と一文字ずつ順に文字を拡大しながら表示させていく。文字が拡大されたとき、文字の色を変化させてもよい。

また、例えば聴覚型のユーザに対しては、ディスプレイ４０に「ｅｌｅｐｈａｎｔ」と英単語を表示するとともに、音声で“イー・エル・イー・ピー・エイチ・エー・エヌ・ティー・・・エレファント”と再生してもよい。さらに、例えば触覚型のユーザに対しては、図１６上側に示すように、最初は、ディスプレイ４０に「ｅｌｅｐｈａｎｔ」と英単語が薄く表示されている。これを下書きオブジェクト４３とする。そして、ユーザに、ディスプレイ４０に表示された下書きオブジェクト４３を、タッチペン６や指等の操作体によりなぞらせ、英単語を書かせる。

このように、本実施形態に係る情報提示システム１００を用いることで、ユーザの感覚タイプに応じて、英単語の提示を変化させることで、ユーザが覚えやすい提示方法で情報を提示することができる。

（２）ユーザの反応変化によるコンテンツの提示変更
デジタル教材をユーザの自主学習に利用する場合、ユーザの感覚タイプに応じて適切な刺激情報を与えることで、記憶力向上あるいは集中力の持続が期待できる。また、ユーザに相性の良い刺激だけでなく、様々な刺激をまんべんなく与えることでも脳が活性し、記憶力が向上すると言われている。そこで、デジタル教材において、重要な部分あるいはポイントとなる部分は、ユーザの感覚タイプに応じた相性の良い刺激を用い、それ以外の部分では別の刺激を用いるようにしてもよい。このように、ユーザ毎に情報の提示の仕方にメリハリをつけることで、効果的に脳の活性化を支援することが可能となる。また、どのような刺激に対してもユーザの反応が弱くなることもある。逆に、些細な刺激に過敏に反応するようになることもある。このような場合には、例えば休憩を提案することで学習自体にメリハリを持たせ、効率的に学習させるようにしてもよい。

図１７にユーザの反応変化によってコンテンツの提示の仕方を変更する場合の一処理例を示す。ユーザがコンテンツの利用を開始すると、情報提示システム１００の提示処理部１５０は、ユーザモデル記憶部１４０を参照し、コンテンツの提示方法を決定する（Ｓ２００）。例えば、提示処理部１５０は、ユーザモデル記憶部１４０の感覚タイプ情報１４１を参照し、コンテンツを利用するユーザの感覚タイプに応じた刺激情報を設定する。ステップＳ２００にてコンテンツの提示方法が決定されると、コンテンツが再生され（Ｓ２１０）、ユーザにコンテンツが提示される。印象オブジェクトの提示時には、設定された刺激情報も合わせて提示される。

コンテンツが提示されているとき、ユーザの生体情報や表情、音声等がセンサ類１１０によって取得されている（Ｓ２２０）。センサ類１１０により取得されたセンサ情報は、モデル設定部１２０へ出力される。モデル設定部１２０は、反応評価情報記憶部１３０を参照し、刺激が与えられたときのユーザの反応を評価し、感覚タイプを推定する（Ｓ２３０）。ここで、モデル設定部１２０は、ユーザの反応がここまで学習を継続してきたときのレベルよりも所定の割合以下に低下したか、あるいは、所定の割合以上上昇したかを判定する（Ｓ２４０）。例えば、ユーザの集中力が切れると、精神性発汗がなくなる。ステップＳ２４０の判定は、このような生体情報の変化の程度が弱くなるといった変化等を利用して行うことができる。

ステップＳ２４０の条件を満たさず、ユーザの反応がこれまでとあまり変わらない場合には、ステップＳ２１０に戻り、引き続き学習を継続させる。一方、ステップＳ２４０の条件を満たし、ユーザの反応が低下したり過度となっていたりする場合には、提示処理部１５０は、これまで設定していない刺激情報があるか否かを判定する（Ｓ２５０）。未設定の刺激情報がある場合には、提示処理部１５０は、ユーザの反応の改善を期待して印象オブジェクトを提示する際の刺激情報を変更し（Ｓ２６０）、ステップＳ２１０に戻り、引き続き学習を継続させる。一方、ステップＳ２５０にて、未設定の刺激情報がない場合には、提示処理部１５０は、学習自体のメリハリを持たせるため、ユーザに休憩や深呼吸を提案する（Ｓ２７０）。

このようなコンテンツの提示方法では、ユーザが学習したことを、時間という尺度だけでなく、どの程度集中して学習したかという質の面でも記録として残すことができる。また、コンテンツの印象オブジェクトとなる学習内容については、ユーザの習熟度に応じて刺激情報の度合いを変化させるようにしてもよい。例えば、デジタル教材において習熟度の高い部分の刺激情報は弱く、習熟度の低い部分の刺激情報は強く設定することで、ユーザの記憶に定着していない部分をより印象付けることが可能となる。ユーザの習熟度は、例えば、小テストの結果による評価や、コンテンツの再生回数等によって判定可能である。

さらに、ユーザの学習状況を一定期間記録することで、学習の進め方の傾向も把握することが可能である。例えば、学習する際に、先に回答例を提示してから練習問題を解かせた方がユーザの負担が少ない人もいれば、練習問題を解かせてから回答例を提示した方がユーザの負担が少ない人もいる。そこで、ユーザ毎の学習の進め方における反応を定量的に評価し、進め方の違いによる反応を比較することで、ユーザにとって学習内容が定着しやすい学習の進め方を判断する。これにより、ユーザの学習負荷を低下させ、効率よく学習させることが可能となる。

［ユースケース４：推定されたユーザモデルの利用］
（１）学習支援（クラス分け／チーム分け）
本実施形態に係る情報提示システム１００によれば、ユーザの感覚タイプ等のユーザモデルを特定することができる。そこで、特定されたユーザのユーザモデルに基づいて、同一タイプの生徒を同一クラス、同一チームに編成することで、教師は、生徒のタイプに合わせた授業を実施することが可能となる。生徒の感覚特定に合った授業を受けることができるので、学習内容の理解度も高まり、効率よく授業を行うことが可能となる。また、教師の選定においても、生徒のタイプに合致したタイプの教師を選定することで、教師と生徒とが意識しない部分で通じ合うことも期待でき、良好にコミュニケーションを行うことができる。

（２）テーマパーク・美術館・展示会
また、本実施形態に係る情報提示システム１００によりユーザモデルを特定できることを利用して、テーマパーク、美術館または展示会等において、ユーザの受け取りやすい刺激の選択や調整を行うことも可能となる。例えば、テーマパークにおいて、アトラクションの演出として、聴覚型の人には音から入る、視覚型の人には光から入る、といったように、各ユーザの感覚タイプに応じて興味を持ちやすい刺激情報を設定するようにしてもよい。

（３）コミュニケーション支援
さらに、本実施形態に係る情報提示システム１００によりユーザモデルを特定できることを利用して、初対面の人とコミュニケーションをとる際に相手のタイプを事前に把握できるようにし、コミュニケーションを取りやすくすることもできる。例えば、翻訳システムにおいて、相手の感覚タイプに応じた翻訳の提示方法や効果を刺激情報として設定してもよい。

＜５．ハードウェア構成＞
最後に、本実施形態に係る情報提示システム１００を構成する一機能部のハードウェア構成例について説明する。図１８は、本実施形態に係る情報提示システム１００を構成する一機能部のハードウェア構成を示すハードウェア構成図である。図１８では、図３に示した各機能部を備える情報処理装置９００のハードウェア構成の一例として説明するが、図３に示した機能部の一部のみを備える装置の場合も同様のハードウェア構成であってもよい。

本実施形態に係る情報処理装置９００は、上述したように、コンピュータ等の処理装置により実現することができる。情報処理装置９００は、図１８に示すように、ＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）９０１と、ＲＯＭ（Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ）９０２と、ＲＡＭ（Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）９０３と、ホストバス９０４ａとを備える。また、情報処理装置９００は、ブリッジ９０４と、外部バス９０４ｂと、インタフェース９０５と、入力装置９０６と、出力装置９０７と、ストレージ装置９０８と、ドライブ９０９と、接続ポート９１１と、通信装置９１３とを備える。

ＣＰＵ９０１は、演算処理装置および制御装置として機能し、各種プログラムに従って情報処理装置９００内の動作全般を制御する。また、ＣＰＵ９０１は、マイクロプロセッサであってもよい。ＲＯＭ９０２は、ＣＰＵ９０１が使用するプログラムや演算パラメータ等を記憶する。ＲＡＭ９０３は、ＣＰＵ９０１の実行において使用するプログラムや、その実行において適宜変化するパラメータ等を一時記憶する。これらはＣＰＵバスなどから構成されるホストバス９０４ａにより相互に接続されている。

ホストバス９０４ａは、ブリッジ９０４を介して、ＰＣＩ（Ｐｅｒｉｐｈｅｒａｌ Ｃｏｍｐｏｎｅｎｔ Ｉｎｔｅｒｃｏｎｎｅｃｔ／Ｉｎｔｅｒｆａｃｅ）バスなどの外部バス９０４ｂに接続されている。なお、必ずしもホストバス９０４ａ、ブリッジ９０４および外部バス９０４ｂを分離構成する必要はなく、１つのバスにこれらの機能を実装してもよい。

入力装置９０６は、マウス、キーボード、タッチパネル、ボタン、マイク、スイッチおよびレバーなどユーザが情報を入力するための入力手段と、ユーザによる入力に基づいて入力信号を生成し、ＣＰＵ９０１に出力する入力制御回路などから構成されている。出力装置９０７は、例えば、液晶ディスプレイ（ＬＣＤ）装置、ＯＬＥＤ（Ｏｒｇａｎｉｃ Ｌｉｇｈｔ Ｅｍｉｔｔｉｎｇ Ｄｉｏｄｅ）装置およびランプなどの表示装置や、スピーカなどの音声出力装置を含む。

ストレージ装置９０８は、情報処理装置９００の記憶部の一例であり、データ格納用の装置である。ストレージ装置９０８は、記憶媒体、記憶媒体にデータを記録する記録装置、記憶媒体からデータを読み出す読出し装置および記憶媒体に記録されたデータを削除する削除装置などを含んでもよい。このストレージ装置９０８は、ハードディスクを駆動し、ＣＰＵ９０１が実行するプログラムや各種データを格納する。

ドライブ９０９は、記憶媒体用リーダライタであり、情報処理装置９００に内蔵、あるいは外付けされる。ドライブ９０９は、装着されている磁気ディスク、光ディスク、光磁気ディスク、または半導体メモリ等のリムーバブル記録媒体に記録されている情報を読み出して、ＲＡＭ９０３に出力する。

接続ポート９１１は、外部機器と接続されるインタフェースであって、例えばＵＳＢ（Ｕｎｉｖｅｒｓａｌ Ｓｅｒｉａｌ Ｂｕｓ）などによりデータ伝送可能な外部機器との接続口である。また、通信装置９１３は、例えば、通信網５に接続するための通信デバイス等で構成された通信インタフェースである。また、通信装置９１３は、無線ＬＡＮ（Ｌｏｃａｌ Ａｒｅａ Ｎｅｔｗｏｒｋ）対応通信装置であっても、ワイヤレスＵＳＢ対応通信装置であっても、有線による通信を行うワイヤー通信装置であってもよい。

以上、添付図面を参照しながら本開示の好適な実施形態について詳細に説明したが、本開示の技術的範囲はかかる例に限定されない。本開示の技術分野における通常の知識を有する者であれば、特許請求の範囲に記載された技術的思想の範疇内において、各種の変更例または修正例に想到し得ることは明らかであり、これらについても、当然に本開示の技術的範囲に属するものと了解される。

また、本明細書に記載された効果は、あくまで説明的または例示的なものであって限定的ではない。つまり、本開示に係る技術は、上記の効果とともに、または上記の効果に代えて、本明細書の記載から当業者には明らかな他の効果を奏しうる。

なお、以下のような構成も本開示の技術的範囲に属する。
（１）
ユーザに与えられた刺激に対する前記ユーザの反応を検出するセンサが取得したセンサ情報に基づいて、前記ユーザにコンテンツを提示する処理部を備える、情報処理装置。
（２）
前記処理部は、
前記センサ情報に基づいて、刺激に対するユーザの反応を表すユーザモデルをユーザ毎に設定するモデル設定部と、
前記ユーザモデルに基づいて、前記ユーザに前記コンテンツを提示する提示処理を実行する提示処理部と、
を含む、前記（１）に記載の情報処理装置。
（３）
前記刺激に対するユーザの反応に応じて複数の感覚タイプが設定されており、
前記モデル設定部は、前記センサ情報に基づいて、前記ユーザの反応が該当する前記感覚タイプを１または複数特定し、前記ユーザモデルとして設定する、前記（２）に記載の情報処理装置。
（４）
前記感覚タイプは、少なくとも視覚型、聴覚型、及び触覚型を含む、前記（３）に記載の情報処理装置。
（５）
前記モデル設定部は、ユーザの反応が該当する前記感覚タイプが複数ある場合、該当する前記感覚タイプに対して重み付けをし、前記感覚タイプ及び前記重み付けを前記ユーザモデルとして設定する、前記（３）または（４）に記載の情報処理装置。
（６）
前記ユーザモデルは、予め設定された初期ユーザモデルが初期設定されている、前記（２）〜（５）のいずれか１項に記載の情報処理装置。
（７）
前記提示処理部は、前記ユーザにテストコンテンツを提示するテスト処理を実行し、
前記モデル設定部は、前記テストコンテンツが提示されたときの前記センサ情報に基づいて前記ユーザの反応を評価し、評価結果に基づいて前記ユーザの前記ユーザモデルの初期設定を行う、前記（２）〜（５）のいずれか１項に記載の情報処理装置。
（８）
前記モデル設定部は、前記提示処理部により前記コンテンツが提示されたときの前記センサ情報に基づいて前記ユーザの反応を評価し、評価結果に基づいて前記ユーザの前記ユーザモデルを更新する、前記（２）〜（７）のいずれか１項に記載の情報処理装置。
（９）
前記提示処理部は、
前記コンテンツに含まれるオブジェクトのうち、ユーザに対して印象付けを行う印象オブジェクトに対し、前記ユーザモデルに基づく刺激情報を設定し、
前記刺激情報に基づき、前記印象オブジェクトの提示処理を実行する、前記（２）〜（８）のいずれか１項に記載の情報処理装置。
（１０）
前記刺激情報は、前記印象オブジェクトを拡大または縮小させる情報である、前記（９）に記載の情報処理装置。
（１１）
前記刺激情報は、前記印象オブジェクトを点滅させる情報である、前記（９）または（１０）に記載の情報処理装置。
（１２）
前記刺激情報は、表示する前記印象オブジェクトに対して音声を付加する情報である、前記（９）〜（１１）のいずれか１項に記載の情報処理装置。
（１３）
前記刺激情報は、前記印象オブジェクトの提示とともに所定の機器を振動させる情報である、前記（９）〜（１２）のいずれか１項に記載の情報処理装置。
（１４）
前記提示処理部は、前記印象オブジェクトの重要度に基づいて、設定する前記刺激情報を変更する、前記（９）〜（１３）のいずれか１項に記載の情報処理装置。
（１５）
前記処理部は、さらにユーザ特性に基づいて、前記ユーザにコンテンツを提示する、前記（１）〜（１４）のいずれか１項に記載の情報処理装置。
（１６）
前記センサは、ユーザの生体情報を取得する生体センサ、または、ユーザを撮像する撮像装置のうち少なくともいずれか一方を含む、前記（１）〜（１５）のいずれか１項に記載の情報処理装置。
（１７）
刺激とともにコンテンツを提示すること、
ユーザに与えられた前記刺激に対する前記ユーザの反応をセンサにより検出すること、
前記センサが取得したセンサ情報に基づいて、前記ユーザの優位感覚を推定すること、を含む、情報処理方法。
（１８）
コンピュータを、ユーザに与えられた刺激に対する前記ユーザの反応を検出するセンサが取得したセンサ情報に基づいて、前記ユーザにコンテンツを提示する処理部を備える、情報処理装置として機能させるコンピュータプログラム。

１０ 印象オブジェクト
１００ 情報提示システム
１１０ センサ類
１１１ 生体センサ
１１３ 音声取得装置
１１５ 撮像装置
１２０ モデル設定部
１３０ 反応評価情報記憶部
１４０ ユーザモデル記憶部
１４１ 感覚タイプ情報
１４３ 刺激反応履歴テーブル
１５０ 提示処理部
１６０ コンテンツ記憶部
１７０ 提示部

Claims (18)

1. ユーザに与えられた刺激に対する前記ユーザの反応を検出するセンサが取得したセンサ情報に基づいて、前記ユーザにコンテンツを提示する処理部を備える、情報処理装置。
2. 前記処理部は、
   前記センサ情報に基づいて、刺激に対するユーザの反応を表すユーザモデルをユーザ毎に設定するモデル設定部と、
   前記ユーザモデルに基づいて、前記ユーザに前記コンテンツを提示する提示処理を実行する提示処理部と、
   を含む、請求項１に記載の情報処理装置。
3. 前記刺激に対するユーザの反応に応じて複数の感覚タイプが設定されており、
   前記モデル設定部は、前記センサ情報に基づいて、前記ユーザの反応が該当する前記感覚タイプを１または複数特定し、前記ユーザモデルとして設定する、請求項２に記載の情報処理装置。
4. 前記感覚タイプは、少なくとも視覚型、聴覚型、及び触覚型を含む、請求項３に記載の情報処理装置。
5. 前記モデル設定部は、ユーザの反応が該当する前記感覚タイプが複数ある場合、該当する前記感覚タイプに対して重み付けをし、前記感覚タイプ及び前記重み付けを前記ユーザモデルとして設定する、請求項３に記載の情報処理装置。
6. 前記ユーザモデルは、予め設定された初期ユーザモデルが初期設定されている、請求項２に記載の情報処理装置。
7. 前記提示処理部は、前記ユーザにテストコンテンツを提示するテスト処理を実行し、
   前記モデル設定部は、前記テストコンテンツが提示されたときの前記センサ情報に基づいて前記ユーザの反応を評価し、評価結果に基づいて前記ユーザの前記ユーザモデルの初期設定を行う、請求項２に記載の情報処理装置。
8. 前記モデル設定部は、前記提示処理部により前記コンテンツが提示されたときの前記センサ情報に基づいて前記ユーザの反応を評価し、評価結果に基づいて前記ユーザの前記ユーザモデルを更新する、請求項２に記載の情報処理装置。
9. 前記提示処理部は、
   前記コンテンツに含まれるオブジェクトのうち、ユーザに対して印象付けを行う印象オブジェクトに対し、前記ユーザモデルに基づく刺激情報を設定し、
   前記刺激情報に基づき、前記印象オブジェクトの提示処理を実行する、請求項２に記載の情報処理装置。
10. 前記刺激情報は、前記印象オブジェクトを拡大または縮小させる情報である、請求項９に記載の情報処理装置。
11. 前記刺激情報は、前記印象オブジェクトを点滅させる情報である、請求項９に記載の情報処理装置。
12. 前記刺激情報は、表示する前記印象オブジェクトに対して音声を付加する情報である、請求項９に記載の情報処理装置。
13. 前記刺激情報は、前記印象オブジェクトの提示とともに所定の機器を振動させる情報である、請求項９に記載の情報処理装置。
14. 前記提示処理部は、前記印象オブジェクトの重要度に基づいて、設定する前記刺激情報を変更する、請求項９に記載の情報処理装置。
15. 前記処理部は、さらにユーザ特性に基づいて、前記ユーザにコンテンツを提示する、請求項１に記載の情報処理装置。
16. 前記センサは、ユーザの生体情報を取得する生体センサ、または、ユーザを撮像する撮像装置のうち少なくともいずれか一方を含む、請求項１に記載の情報処理装置。
17. 刺激とともにコンテンツを提示すること、
    ユーザに与えられた前記刺激に対する前記ユーザの反応をセンサにより検出すること、
    前記センサが取得したセンサ情報に基づいて、前記ユーザの優位感覚を推定すること、を含む、情報処理方法。
18. コンピュータを、ユーザに与えられた刺激に対する前記ユーザの反応を検出するセンサが取得したセンサ情報に基づいて、前記ユーザにコンテンツを提示する処理部を備える、情報処理装置として機能させるコンピュータプログラム。
    

Images