JP5942138B2 - 心身状態回復促進装置およびこれを用いた心身状態回復システム - Google Patents

Description

本発明は、対象人物に刺激を与える刺激機器を制御して対象人物の心身状態を回復させるための心身状態回復促進装置およびこれを用いた心身状態回復システムに関する。

従来から、電子機器の使用者の生体リズムを調整する装置が知られている（例えば特許文献１参照）。特許文献１に記載された装置は、電子機器の使用者の生体リズムを測定して評価し、評価結果に基づいて波長域４４５ｎｍ〜４８０ｎｍの光の強度を制御して照射して生体リズムを調整する。

なお、特許文献２〜４には、対象人物の呼吸状態を目標の状態に到達できるように誘導する手段が開示されている。

特開２００９−８２２６３号公報 特開２０１０−１０４４５５号公報 特開２０１０−１０４４５６号公報 特開２０１０−１０４４５７号公報

しかしながら、従来の装置では、生体リズムの評価結果に基づいて自動的に光の強度を変えて照射するため、対象人物が何らかの作業をしている途中である場合に、対象人物の作業の邪魔になるという問題があった。

すなわち、対象人物の心身状態が悪化したと判断して光の強度を変化させた場合、作業中の対象人物にとっては周囲の照度が急に変化することになり、対象人物の作業に対する集中度を下げたり、作業の進行を妨げたりすることになる。

一方、対象人物の心身状態が悪化したと判断したのに、何の対応もしないのは、対象人物の心身状態をさらに悪化させ、対象人物の作業効率を下げてしまうことになる。

本発明は上記の点に鑑みて為され、本発明の目的は、対象人物の作業を邪魔することなく、対象人物の心身状態が悪化して心身状態を回復させる対処が必要である旨を対象人物に知らせることができる心身状態回復促進装置およびこれを用いた心身状態回復システムを提供することにある。

本発明の心身状態回復促進装置は、対象人物に刺激を与える刺激機器を制御して前記対象人物の心身状態を回復させるための心身状態回復促進装置であって、前記心身状態に関連する心身情報を非拘束で継続して検出する検出部と、前記検出部で検出された前記心身情報から前記心身状態を特徴付ける特徴量のうち、前記対象人物の表情に関する特定部位の形状の特徴量を抽出する特徴抽出部と、前記特徴抽出部で抽出された前記特徴量に対する予め決められた条件に従って快適感の度合いおよび覚醒感の度合いを指標値として前記心身状態が悪化したか否かを判定する判定部と、前記心身状態が悪化したと前記判定部で判定された場合に、前記刺激機器を用いて前記心身状態を回復するために当該刺激機器の制御内容を示す対処方法を決定する決定部と、前記心身状態が悪化したと前記判定部で判定された場合に、前記対処方法の実行を促す情報を提示装置に提示させる提示制御部と、前記刺激機器が前記対象人物に刺激を与えたことによる前記心身状態の回復効果を判定する効果判定部とを備え、前記提示制御部は、前記効果判定部の判定結果を前記提示装置に提示させることを特徴とする。
この心身状態回復促進装置において、前記判定部は、快適感の度合いおよび覚醒感の度合いを指標値として前記心身状態を、イライラ状態、退屈状態、リフレッシュ状態及びリラックス状態のいずれの事象に属しているかを判定し、前記心身状態が前記イライラ状態または前記退屈状態である場合には前記心身状態が悪化したと判定することが好ましい。
この心身状態回復推進装置において、前記効果判定部は、前記刺激機器による前記対処方法が実行された後に、前記検出部で検出された前記心身情報から前記特徴量を抽出し、当該特徴量を用いて前記対処方法の実行後の前記心身状態が前記対処方法の実行前の前記心身状態よりもよくなったか否かを判定することが好ましい。

この心身状態回復促進装置において、前記特徴抽出部は、前記検出部で検出された前記心身情報から複数の前記特徴量を抽出し、前記判定部は、前記特徴抽出部で抽出された前記複数の特徴量の組み合わせを用いて前記心身状態が悪化したか否かを判定することが好ましい。

この心身状態回復促進装置において、前記特徴抽出部は、前記対象人物の行動に関する特徴量、前記対象人物の表情に関する特徴量および前記対象人物の自律神経系に関する特徴量のうち少なくとも２つの特徴量を抽出することが好ましい。

この心身状態回復促進装置において、前記決定部は、前記心身状態が悪化した場合に、前記対処方法の候補である複数の対処方法候補を設定する設定部と、前記複数の対処方法候補の中から１つを選択して前記対処方法に決定する選択部とを有することが好ましい。

この心身状態回復促進装置において、前記効果判定部の判定結果を記憶する記憶部を備え、前記決定部は、前記記憶部に記憶されている前記判定結果を用いて前記対処方法を決定することが好ましい。

この心身状態回復促進装置において、前記決定部は、前記対象人物に応じて前記対処方法を決定することが好ましい。

この心身状態回復推進装置において、前記対処方法の実行を開始するためのトリガを検出するトリガ検出部と、前記トリガ検出部で前記トリガが検出されると、前記対処方法の前記制御内容に従って前記刺激機器を制御する機器制御部とを備えることが好ましい。
この心身状態回復促進装置において、前記機器制御部は、前記対象人物の呼吸のリズムを目標のリズムに誘導するように前記刺激機器を制御することが好ましい。

本発明の心身状態回復システムは、前記心身状態回復促進装置と、前記対処方法に従って前記対象人物に刺激を与える刺激機器とを備えることを特徴とする。

この心身状態回復システムにおいて、前記対象人物を個人認証する認証装置を備え、前記刺激機器は、前記検出部とは別空間に配置され、前記認証装置は、前記刺激機器が配置された空間の入口に設けられ、前記決定部は、前記認証装置で個人認証された前記対象人物に応じて、前記対処方法を決定することが好ましい。

本発明は、対象人物の心身状態に関連する心身情報を非拘束で継続して検出し、対象人物の心身状態が悪化した場合に対処方法の実行を促す情報を提示する。これにより、対象人物の作業を邪魔することなく、心身状態が悪化して心身状態を回復させる対処が必要である旨を対象人物に知らせることができる。

実施形態１に係る心身状態回復システムの構成を示すブロック図である。 同上に係る心身状態回復システムにおいて対象人物の心身状態を説明する図である。 （ａ）は顔画像を示す図、（ｂ）は顔画像に顔モデルをあてはめた図、（ｃ）は特徴点を抽出するときの図である。 （ａ）は目元の画像を示す図、（ｂ）は口元の画像を示す図である。 （ａ）は開眼時の画像を示す図、（ｂ）は閉眼時の画像を示す図、（ｃ）は瞬きの状況を示す図である。 実施形態１に係る心身状態回復システムの使用例を説明する図である。

以下の実施形態１〜３では、対象人物に刺激を与える刺激機器を制御して対象人物の心身状態を回復させるための心身状態回復促進装置およびこれを用いた心身状態回復システムについて説明する。

（実施形態１）
実施形態１に係る心身状態回復システムは、図１に示すように、対象人物９（図６参照）の心身状態に関連する心身情報を用いて対象人物９の心身状態を判定する心身状態回復促進装置１を備えている。心身状態回復促進装置１は、心身情報から抽出した特徴量を用いて対象人物９の心身状態が悪化したか否かを判定する。さらに、心身状態回復システムは、心身状態に関する情報を表示する表示装置２と、対象人物９に刺激を与える複数の刺激機器３，３，３とを備えている。

心身状態の判定に用いられる特徴量は、心身状態を特徴付ける値であり、対象人物９の行動に関する特徴量と、対象人物９の表情に関する特徴量と、対象人物９の自律神経系に関する特徴量との３種類に分類される。対象人物９の行動に関する特徴量としては、例えば、パーソナルコンピュータを用いた作業をしている場合のパーソナルコンピュータに対する作業量、体動の変化量または活動量などがある。対象人物９の表情に関する特徴量としては、例えば、瞬き回数・瞬き時間、特定部位の形状などがある。特徴量となる特定部位の形状としては、例えば口角の下がり（口角の位置）、目の開き具合（目の大きさ）、目尻の下がりまたはしわの程度（大きさ、位置または形状）などがある。対象人物９の自律神経系に関する特徴量としては、例えば、あくびの回数もしくはあくびのときの呼吸音・呼気成分、ため息の回数もしくはため息のときの呼吸音・呼気成分または末梢の体温などがある。他にも、心拍数、脈波数、心拍・脈波の高周波成分（ＨＦ）（副交感神経活動）、心電図Ｒ−Ｒ間隔変動係数（ＣＶ−ＲＲ）、鼻の表面温度、血圧または呼吸の状態などがある。

対象人物９の心身状態は、例えば図２に示すように、リラックス状態、リフレッシュ状態、イライラ状態または退屈状態などである。リラックス状態とは、副交換神経が優位、さらには脳波におけるα波が発現する状態のうち中枢神経が非活性である状態をいう。リフレッシュ状態とは、脳波におけるα波（８〜１３Ｈｚ）のうち速い成分（１０〜１３Ｈｚ）であるα_２波が発現し、中枢神経が活性である状態をいう。対象人物９の心身状態は、例えば快適感の度合い、覚醒感の度合い、疲労度の度合いまたは集中度などに応じて変化する。なお、対象人物９の心身状態は、簡単に良好状態と不調状態との２つの状態であってもよい。

覚醒感の低下の例としては、対象人物９の行動に関する特徴量の場合、キータイピング量の低下、リターンキーなど同一キーの使用量の増加、マウスの動きの減少、または、対象人物９の動きの減少などがある。対象人物９の表情に関する特徴量の場合、長い瞬き時間、あくびの回数の増加、口の開きが大きくなること、または、目の開きが小さくなることなどがある。対象人物９の自律神経系に関する特徴量の場合、長い呼気時間、呼吸音の拡大、末梢の体温の上昇、対象人物９の表面温度の上昇、心拍数の減少、脈拍数の減少、ＨＦの増加、鼻の表面温度の上昇、血圧の低下、または、呼吸が深くゆっくりになることなどがある。

疲労感の増加の例としては、対象人物９の行動に関する特徴量の場合、作業場所からの長時間の離席、作業場所以外の場所に長時間いること、活動量の多寡、または、動きの増加などがある。対象人物９の表情に関する特徴量の場合、瞬き回数の増加、口の開きが大きくなること、口角が下がってくること、目の開きが小さくなること、クマの発生、または、眉間が狭くなることなどがある。対象人物９の自律神経系に関する特徴量の場合、ため息回数の増加、呼吸音の拡大、末梢の体温が低くなること、表面温度の低下、心拍数の増加、脈拍数の増加、ＨＦの低下、鼻の表面温度の低下、血圧の上昇、または、呼吸が浅く速くなることなどがある。

対象人物９の心身状態に関連する心身情報は、例えば、顔または特定部位（目または口など）の表面状態・体温、パーソナルコンピュータへの作業状態、活動量、体動、呼吸、心拍、呼吸音、位置情報、脈拍または血圧などである。

図１に示す心身状態回復促進装置１は、検出部４と、処理装置５と、記憶部６と、操作部７とを備えている。心身状態回復促進装置１には、表示装置２および各刺激機器３が接続されている。

検出部４は、心身情報を非拘束で継続して検出する。心身情報は、対象人物９（図６参照）の作業中に検出される。検出部４は、検出すべき心身情報に応じて適宜選択され、例えば、対象人物９の顔または特定部位を撮像する撮像装置などが用いられる。

撮像装置は、例えばＣＣＤ（Charge Coupled Device）イメージセンサまたはＣＭＯＳ（ComplementaryMetal Oxide Semiconductor）イメージセンサなどを用いたエリアセンサカメラであり、対象人物９の顔または特定部位を撮像する。例えば撮像装置がパーソナルコンピュータに取り付けられた場合、撮像装置は、パーソナルコンピュータに向かって作業している対象人物９の顔または特定部位を非接触で撮像することができる。対象人物９の顔または特定部位が撮像された撮像画像の画像データは、撮像装置から処理装置５に出力される。

検出部４としては、他にも、対象人物９の体動を検出する体動センサ、対象人物９の呼吸を検出する呼吸センサ、対象人物９の心拍を検出する心拍センサ、または、対象人物９の呼気成分を検出する呼気センサなどがある。体動センサとしては、例えば圧力センサ、または、ミリ波もしくはマイクロ波などを用いた検出器などがある。呼吸センサとしては、例えば圧力センサ、ミリ波、マイクロ波もしくはＵＷＢ（Ultra Wide Band）を用いた検出器、または、ひずみゲージなどがある。心拍センサとしては、例えば圧力センサ、または、ミリ波もしくはマイクロ波を用いた検出器などがある。

さらに、検出部４としては、対象人物９の着座を検出する着座センサ、対象人物９の活動量を計測する活動量計、対象人物９の呼吸音を入力するマイクロホン、または、対象人物９によるパーソナルコンピュータへの入力作業を検出することができる入力装置などが用いられる。対象人物９の所在を検知する位置センサ、対象人物９の身体の一部の温度を計測する温度計測器、または、対象人物９の脈拍を計測する脈拍計などが検出器４として用いられることもある。さらに、対象人物９の身体の特定部位を熱画像として撮像し特定部位の表面温度を測定するサーモビュア、または、対象人物９の血圧を計測する血圧計などが検出部４として用いられることもある。

これらの検出部４のうち、ミリ波、マイクロ波もしくはＵＷＢを用いた検出器、撮像装置、マイクロホンおよび着座センサは、非接触で心身情報を検出することができる。パーソナルコンピュータへの入力作業を検出する入力装置も、入力作業自体は非接触ではないが、入力作業以外において対象人物９に接触することがないから、非接触で心身情報を検出することができる。

処理装置５は、中央処理装置（ＣＰＵ：Central Processing Unit）およびメモリが搭載されたコンピュータを主構成要素とし、記憶部６に格納されているプログラムに従って動作する。これにより、処理装置５は、後述の情報取得部５１と特徴抽出部５２と判定部５３と表示制御部５４と決定部５５と機器制御部５６との各機能を実行することができる。なお、処理装置５は、全ての機能または一部の機能を中央処理装置とは別のマイクロプロセッサ（ＭＰＵ：Micro Processing Unit）で実行してもよい。

情報取得部５１は、検出部４で検出された心身情報を検出部４から取得する。検出部４が撮像装置である場合、情報取得部５１は、撮像装置から撮像画像を取得し、上記撮像画像から、対象人物９（図６参照）の顔部分に相当する顔画像を抽出する。

特徴抽出部５２は、情報取得部５１で取得された心身情報から特徴量を抽出する。例えば、特徴抽出部５２は、図３（ｂ）に示すように顔画像（図３（ａ）参照）に顔モデルを照合し、図３（ｃ）に示すように、例えば目、口または鼻など、顔画像における顔器官（特定部位）の特徴点を抽出する。この場合、特徴抽出部５２は、例えばＡＳＭ（Active Shape Model）、ＡＣＭ（Active Contour Model）またはＡＡＭ（Active Appearance Model）などの特徴点抽出手法により、顔画像に顔モデルを照合し、顔画像の特徴点を抽出する。特徴点を抽出した特徴抽出部５２は、抽出した特徴点を用いて特徴量を抽出する。具体的には、特徴抽出部５２は、図４（ａ）に示す目元の画像を用いて、目尻の下がり具合を表わす角θ、または目の開き具合を表わす距離Ｌなどを特徴量として抽出する。また、特徴抽出部５２は、図４（ｂ）に示す口元の画像から特徴量（例えば上唇領域Ｐ１の画素数と下唇領域Ｐ２の画素数との比など）を抽出する。

他の例としては、特徴抽出部５２は、情報取得部５１で取得された顔画像に対象人物９の属性に対応する顔モデルを照合して、対象人物９の目の領域を抽出する。その後、特徴抽出部５２は、対象人物９の目の領域から特徴量として単位時間あたりの瞬き回数を抽出する。瞬き回数の抽出の際には、図５に示すように、顔の動画像を構成する各フレームに対して、垂直方向（顔の縦方向）に設けられた眼球上領域Ａ１の濃淡値の平均値が用いられる。開眼時（図５（ｃ）のＡ２）では、図５（ａ）に示すように黒目（瞳孔、虹彩）の割合が高いので、眼球上領域Ａ１の濃淡値の平均値は小さくなる。一方、閉眼時（図５（ｃ）のＡ３）では、図５（ｂ）に示すように黒目より濃淡値が高いまぶたによって黒目が覆われて、黒目の割合が低くなるので、眼球上領域Ａ１の濃淡値の平均値は大きくなる。これにより、特徴抽出部５２は、１回あたりの瞬き時間Ｔ１を特徴量として抽出したり、瞬きの周期Ｔ２から単位時間あたりの瞬き回数を特徴量として抽出したりすることができる。図５（ｃ）は、眼球上領域Ａ１の濃淡値の平均値を時系列に示している。なお、通常の濃淡値は、色が白いほど大きな値になるが、図５（ｃ）の濃淡値は、色が黒いほど大きな値になるように規格化されている。

図１に示す判定部５３は、特徴抽出部５２で抽出された特徴量を指標式にあてはめて指標値を求める。指標値を求めた判定部５３は、指標値と閾値とを比較して心身状態が悪化したか否かを判定する。閾値は、予め決められた値である。具体的には、判定部５３は、快適感の度合いおよび覚醒感の度合いを指標値とし、現在の心身状態が図２のいずれの事象に属しているかを判定する。心身状態がイライラ状態または退屈状態である場合、判定部５３は、心身状態が悪化したと判定する。上述した指標式および閾値は、心身状態の判定に用いられる条件であり、記憶部６に予め記憶されている。判定部５３の判定結果は、表示制御部５４および決定部５５に出力されるとともに、記憶部６に記憶される。現在の心身状態に関する情報は、記憶部６に記憶される。

なお、判定部５３は、対象人物９の心身状態を自己組織化マップ（ＳＯＭ：Self Organization Map）で数段階（例えば「良好」・「普通」・「悪化」の３段階）に仕分けることによって、心身状態が悪化したか否かを判定してもよい。自己組織化マップへの入力は、特徴量であってもよいし、特徴量から求められた指標値であってもよい。

表示制御部５４は、表示装置２の表示を制御する。具体的には、心身状態が悪化したと判定部５３で判定された場合に、表示制御部５４は、対象人物９の心身状態を回復するための対処方法の実行を促す情報（メッセージ）を表示装置２に提示させる。

表示装置２は、例えば液晶ディスプレイまたは有機ＥＬ（Electro-Luminescence）ディスプレイなどであり、表示制御部５４の指示に従って、各種情報を表示する。本実施形態の表示装置２としては、例えばパーソナルコンピュータ９３のモニタ９４（図６参照）を用いている。

表示装置２は、心身状態が悪化したと判定部５３で判定された場合に、表示制御部５４からの制御信号に従って、対処方法の実行を促す情報を表示する。

決定部５５は、心身状態が悪化したと判定部５３で判定された場合に、各刺激機器３を用いて対象人物９の心身状態を回復するための対処方法を決定する。対処方法には、刺激機器３の制御内容に関する情報が含まれている。対処方法は、導入モード、リラックスモード、リフレッシュモードの順に構成されている。リラックスモードは、対象人物９をリラックス状態に導くためのモードである。リフレッシュモードは、対象人物９をリフレッシュ状態に導くためのモードである。対処方法としては、例えば照明光の照度を上げたり、照明光の色温度を高めたりするような方法がある。

機器制御部５６は、例えばＬＡＮ（Local Area Network）などのネットワークによって各刺激機器３に接続され、各刺激機器３を制御する。

刺激機器３は、対象人物９の五感の少なくとも１つに刺激を与えて対象人物９の心身状態を回復させるための機器である。刺激機器３の具体例としては、照明光の照度および色温度を変えることができる照明機器、さまざまなジャンルの映像を選択して提示する映像機器、さまざまなジャンルの音楽を選択して再生する音響機器、対象人物９に触覚刺激や揺動を与える機能チェアなどがある。刺激機器３の他の例としては、芳香剤を噴霧する芳香剤噴霧器、対象人物９の周囲の空調を制御する空調機器、対象人物９の周囲に高濃度酸素を供給する高濃度酸素供給機器、対象人物９の冷えを解消するための温熱機器、または血栓の発生を防止する振動機器などがある。なお、温熱機器は、対象人物９の作業場所のみを暖めるパネルヒータであれば、対象人物９が作業する作業場所に配置することができる。また、振動機器は、例えば対象人物９が作業する際に用いる椅子などに埋め込まれることによって、対象人物９が作業する作業場所に配置することができる。

機器制御部５６は、決定部５５で決定された対処方法に従って、各刺激機器３が対象人物９に刺激を与えるように各刺激機器３を制御する。例えば、芳香剤噴霧器に、対象人物９のやる気を喚起させるような香りの芳香剤を噴霧させたり、音響機器に、明るい音楽を再生させたり、音量を上げたりさせる。

また、機器制御部５６は、対象人物９の呼吸のリズムを目標のリズムに誘導するように各刺激機器３を制御することもできる。なお、呼吸のリズムを目標のリズムに誘導するための動作は、特許文献２〜４に記載された内容と同様であるので、上記動作の詳細な説明については省略する。これにより、対象人物９の心身状態を短時間で効果的にリフレッシュ状態に回復させることができる。

記憶部６は、検出部４で検出された心身情報を記憶しているともに、処理装置５の処理に必要な情報と、処理装置５の処理によって得られた情報とを記憶している。記憶部６には、例えば人種・性別・年代ごとに顔モデルが対応して記憶されている。顔モデルの候補としては、例えばＡＳＭ、ＡＣＭまたはＡＡＭなどがある。顔モデルは、複数の顔写真を用いて事前に学習された顔モデルである。学習時に用いる顔写真は、例えば世界中の大学、研究機関または企業などで管理されている顔認識用データベースなどから取得される。

また、記憶部６は、処理装置５が処理を行うためのプログラムを格納している。つまり、記憶部６は、情報取得部５１と特徴抽出部５２と判定部５３と表示制御部５４と決定部５５と機器制御部５６との各機能を処理装置（コンピュータ）に実現させるためのプログラムを格納している。

操作部７は、例えば複数の操作ボタンまたはタッチパネルなどであり、対象人物９が心身状態回復促進装置１に情報を入力する際に用いられる。操作部７に入力された情報は、操作部７から処理装置５に出力される。なお、操作部７は、他の例として、対象人物９が非接触で操作できるように、対象人物９と表示装置２との間の空間における対象人物９の指の空間位置を検出し、空間位置に応じて操作内容を判断するような構成であってもよい。

ところで、本実施形態の心身状態回復システムは、対象人物９を個人認証する認証装置８をさらに備えている。

認証装置８は、各刺激機器３が配置された休憩室９２（図６参照）の入口に設けられ、休憩室９２に入室しようとする対象人物９を個人認証する。本実施形態では、認証装置８による個人認証は、各刺激機器３による対処方法の実行を開始するためのトリガとなる。つまり、認証装置８は、対処方法の実行を開始するためのトリガを検出するトリガ検出部としての機能を有している。また、認証装置８で個人認証が行われた場合、休憩室９２への入室履歴つまり各刺激機器３の使用履歴が記憶部６に記憶される。なお、トリガ検出部は、操作部７に設けられていてもよい。この場合、対象人物９による操作部７への操作が、対処方法の実行を開始するためのトリガとなる。

機器制御部５６は、認証装置８で個人認証された後に、対処方法に含まれている制御内容に従って各刺激機器３を制御する。刺激機器３は、機器制御部５６による制御に従って、対象人物９に刺激を与える動作を開始する。

また、処理装置５の決定部５５は、認証装置８で個人認証された対象人物９に応じて対処方法を決定することができる。これにより、対象人物９の嗜好を対処方法に反映させることができるので、対象人物９の心身状態をより効果的に回復させることができる。

ところで、心身状態回復促進装置１の処理装置５は、刺激機器３が対象人物９に刺激を与えたことによる心身状態の回復効果を判定する効果判定部の機能を実行することができる。

効果判定部は、特徴抽出部５２と判定部５３とで構成されている。効果判定部は、刺激機器３による対処方法が実行された後に、検出部４で検出された心身情報から特徴量を抽出し、特徴量を用いて実行後の心身状態が実行前の心身状態よりもよくなったか否かを判定する。効果判定部の判定結果は、対象人物９ごとに対処方法に対応させて記憶部６に蓄積されていく。さらに、効果判定部は、操作部７を用いて対象人物９が入力した主観評価を用いて回復効果を判定することができる。

表示制御部５４は、表示装置２が効果判定部の判定結果を表示するように表示装置２を制御する。

決定部５５は、記憶部６に蓄積されている判定結果を用いて、対処方法を決定することができる。

本実施形態の心身状態回復システムの使用例として、図６に示すように、心身状態回復促進装置１が作業室９１に配置され、各刺激機器３が休憩室９２に配置される例がある。この例では、心身状態回復促進装置１と各刺激機器３とが別の部屋に配置されている。表示装置２は、パーソナルコンピュータ９３のモニタ９４で兼用されている。対象人物９は、パーソナルコンピュータ９３を用いてデスクワークを行っている。検出部４は、例えばＷｅｂカメラ４１などの撮像装置であり、パーソナルコンピュータ９３のモニタ９４に取り付けられる。

次に、本実施形態に係る心身状態回復システムの動作の一例について図１を用いて説明する。ここでは、対象人物９（図６参照）が撮像された撮像画像を用いて、対象人物９の瞬きの回数および瞬きの時間を特徴量として抽出する場合を一例として説明するが、上記以外の特徴量を抽出する場合も基本的な動作は同様である。

まず、検出部４である撮像装置は、対象人物９の顔をリアルタイムで連続撮像し、顔の動画像を生成する。その後、処理装置５の特徴抽出部５２が、動画像から対象人物９の単位時間当たりの瞬き回数および１回あたりの瞬き時間を特徴として抽出する。その後、判定部５３が、瞬き回数および瞬き時間を用いて心身状態が悪化したか否かを判定する。心身状態が悪化した場合、表示制御部５４は、対処方法の実行を促す情報を表示装置２に表示させる。

その後、対象人物９が作業室９１（図６参照）を離れて休憩室９２（図６参照）の入口で認証装置８による入室認証を受けると、決定部５５は、対象人物９に応じた対処方法を決定する。その後、各刺激機器３は、機器制御部５６による制御によって、対処方法に応じて対象人物９に刺激を与える動作を開始する。

各刺激機器３の動作が終了して対象人物９が作業室９１に戻った後、処理装置５の効果判定部が対象人物９の心身状態の回復効果を判定し、表示制御部５４による制御によって、表示装置２が効果判定部の判定結果を表示する。

以上、本実施形態の心身状態回復システムは、対象人物９の心身状態に関連する心身情報を非拘束で継続して検出し、対象人物９の心身状態が悪化した場合に対処方法の実行を促す情報を表示する。これにより、対象人物９の作業を邪魔することなく、対象人物９の心身状態が悪化して心身状態を回復させる対処が必要である旨を対象人物９に知らせることができる。その結果、対象人物９の心身状態を回復させることができるので、作業効率が低い状態での作業が長時間続くことを抑制することができ、対象人物９の生産性を向上させたり、従業員満足度を向上させたりすることができる。対象人物９自身にとっても、日々の心身状態を継続してチェックすることができる。

また、本実施形態の心身状態回復システムによれば、対象人物９を個人認証して対象人物９に応じて対処方法を決定することによって、個人の嗜好を対処方法に反映させることができるので、心身状態をより効果的に回復させることができる。

さらに、本実施形態の心身状態回復システムによれば、対象人物９ごとに対処方法を決定するための個人認証を、各刺激機器３が設置された空間（休憩室９２）への入室の際の個人認証で兼用することができる。これにより、対象人物９ごとに対処方法を変更するために個人認証する装置を別途設ける必要がない。

また、本実施形態の心身状態回復システムでは、対処方法を実行した後の心身状態の回復効果を個人の嗜好データベースとして今後の対処方法の決定に反映させることができるとともに、心身状態の回復効果について対象人物９に知らせることができる。

さらに、本実施形態の心身状態回復システムが設置された建物は、テナントとしての資産価値を向上させることができる。

（実施形態２）
実施形態２に係る心身状態回復システムは、対象人物９の行動に関する特徴量、対象人物９の表情に関する特徴量および対象人物９の自律神経系に関する特徴量の３種類の特徴量を用いて心身状態を判定する点で、実施形態１に係る心身状態回復システムと相違する。なお、実施形態１の心身状態回復システムと同様の構成要素については、同一の符号を付して説明を省略する。

本実施形態の心身状態回復促進装置１には、検出部４として、図示していないが第１の検出部と第２の検出部と第３の検出部とが設けられている。第１の検出部は、対象人物９の行動に関する特徴量の抽出に適した心身情報を検出する。第２の検出部は、対象人物９の表情に関する特徴量の抽出に適した心身情報を検出する。第３の検出部は、対象人物９の自律神経系に関する特徴量の抽出に適した心身情報を検出する。なお、実施形態１の検出部４と同様の機能については説明を省略する。

本実施形態の特徴抽出部５２は、第１の検出部で検出された心身情報から対象人物９の行動に関する特徴量を抽出し、第２の検出部で検出された心身情報から対象人物９の表情に関する特徴量を抽出し、第３の検出部で検出された心身情報から対象人物９の自律神経系に関する特徴量を抽出する。なお、実施形態１の特徴抽出部５２と同様の機能については説明を省略する。

本実施形態の判定部５３は、特徴抽出部５２で抽出された３種類の特徴量を組み合わせて心身状態が悪化したか否かを判定する。なお、実施形態１の判定部５３と同様の機能については説明を省略する。

以上、本実施形態の心身状態回復システムによれば、複数の特徴量を組み合わせて心身状態を判定することによって、１つの特徴量を用いて心身状態を判定する場合よりも判定精度を高めることができる。特に、本実施形態の心身状態回復システムでは、異なる種類の特徴量を組み合わせて心身状態を判定するから、同じ種類の特徴量を用いて心身状態を判定する場合よりも判定精度をさらに高めることができる。

（実施形態３）
実施形態３に係る心身状態回復システムは、対象人物９が複数の対処方法候補の中から１つを選択することができる点で、実施形態２に係る心身状態回復システムと相違する。なお、実施形態２の心身状態回復システムと同様の構成要素については、同一の符号を付して説明を省略する。

本実施形態の決定部５５は、対処方法の候補である複数の対処方法候補を設定する設定部と、複数の対処方法候補の中から１つを選択する選択部との各機能を実行する。

設定部は、心身状態が悪化した場合に、複数の対処方法候補を設定する。対象人物９は、操作部７を用いて、複数の対処方法候補の中から１つを選択することができる。

選択部は、対象人物９による操作部７への操作に従って、複数の対処方法候補の中から１つを選択して対処方法に決定する。

以上、本実施形態の心身状態回復システムによれば、対象人物９が複数の対処方法候補の中から１つを選択することができるので、対象人物９の嗜好を反映させることができる。

なお、本実施形態の決定部５５における設定部および選択部の各機能は、実施形態１の心身状態回復システムに適用してもよい。

各実施形態の心身状態回復システムにおいて、対処方法の実行を促す情報を提示する提示装置は、上記情報を表示する表示装置２に限定されず、上記情報を音声出力する音声出力装置などであってもよい。

各実施形態の心身状態回復システムの使用例は、心身状態回復促進装置１および複数の刺激機器３，３，３がオフィスに配置されている例に限定されない。心身状態回復促進装置１がオフィスに配置され、複数の刺激機器３，３，３が対象人物９の自宅に配置されている例であってもよい。また、心身状態回復促進装置１が自宅のリビングに配置され、複数の刺激機器３，３，３が寝室に配置されている例であってもよい。

１ 心身状態回復促進装置
２ 表示装置（提示装置）
３ 刺激機器
４ 検出部
５２ 特徴抽出部
５３ 判定部
５４ 表示制御部（提示制御部）
５５ 決定部
５６ 機器制御部
６ 記憶部
８ 認証装置

Claims (12)

1. 対象人物に刺激を与える刺激機器を制御して前記対象人物の心身状態を回復させるための心身状態回復促進装置であって、
   前記心身状態に関連する心身情報を非拘束で継続して検出する検出部と、
   前記検出部で検出された前記心身情報から前記心身状態を特徴付ける特徴量のうち、前記対象人物の表情に関する特定部位の形状の特徴量を抽出する特徴抽出部と、
   前記特徴抽出部で抽出された前記特徴量に対する予め決められた条件に従って快適感の度合いおよび覚醒感の度合いを指標値として前記心身状態が悪化したか否かを判定する判定部と、
   前記心身状態が悪化したと前記判定部で判定された場合に、前記刺激機器を用いて前記心身状態を回復するために当該刺激機器の制御内容を示す対処方法を決定する決定部と、
   前記心身状態が悪化したと前記判定部で判定された場合に、前記対処方法の実行を促す情報を提示装置に提示させる提示制御部と、
   前記刺激機器が前記対象人物に刺激を与えたことによる前記心身状態の回復効果を判定する効果判定部とを備え、
   前記提示制御部は、前記効果判定部の判定結果を前記提示装置に提示させる
   ことを特徴とする心身状態回復促進装置。
2. 前記判定部は、快適感の度合いおよび覚醒感の度合いを指標値として前記心身状態を、イライラ状態、退屈状態、リフレッシュ状態及びリラックス状態のいずれの事象に属しているかを判定し、前記心身状態が前記イライラ状態または前記退屈状態である場合には前記心身状態が悪化したと判定する
   ことを特徴とする請求項１に記載の心身状態回復促進装置。
3. 前記効果判定部は、前記刺激機器による前記対処方法が実行された後に、前記検出部で検出された前記心身情報から前記特徴量を抽出し、当該特徴量を用いて前記対処方法の実行後の前記心身状態が前記対処方法の実行前の前記心身状態よりもよくなったか否かを判定することを特徴とする請求項１または２に記載の心身状態回復促進装置。
4. 前記特徴抽出部は、前記検出部で検出された前記心身情報から複数の前記特徴量を抽出し、
   前記判定部は、前記特徴抽出部で抽出された前記複数の特徴量の組み合わせを用いて前
   記心身状態が悪化したか否かを判定する
   ことを特徴とする請求項１〜３のいずれか１項に記載の心身状態回復促進装置。
5. 前記特徴抽出部は、前記対象人物の行動に関する特徴量、前記対象人物の表情に関する特徴量および前記対象人物の自律神経系に関する特徴量のうち少なくとも２つの特徴量を抽出する
   ことを特徴とする請求項４記載の心身状態回復促進装置。
6. 前記決定部は、
   前記心身状態が悪化した場合に、前記対処方法の候補である複数の対処方法候補を設定する設定部と、
   前記複数の対処方法候補の中から１つを選択して前記対処方法に決定する選択部と
   を有することを特徴とする請求項１〜５のいずれか１項に記載の心身状態回復促進装置。
7. 前記効果判定部の判定結果を記憶する記憶部を備え、
   前記決定部は、前記記憶部に記憶されている前記判定結果を用いて前記対処方法を決定する
   ことを特徴とする請求項１〜６のいずれか１項に記載の心身状態回復促進装置。
8. 前記決定部は、前記対象人物に応じて前記対処方法を決定する
   ことを特徴とする請求項１〜７のいずれか１項に記載の心身状態回復促進装置。
9. 前記対処方法の実行を開始するためのトリガを検出するトリガ検出部と、
   前記トリガ検出部で前記トリガが検出されると、前記対処方法の前記制御内容に従って前記刺激機器を制御する機器制御部と
   を備えることを特徴とする請求項１〜８のいずれか１項に記載の心身状態回復促進装置。
10. 前記機器制御部は、前記対象人物の呼吸のリズムを目標のリズムに誘導するように前記刺激機器を制御することを特徴とする請求項９記載の心身状態回復促進装置。
11. 前記請求項１〜１０のいずれか１項に記載の心身状態回復促進装置と、
    前記対処方法に従って前記対象人物に刺激を与える刺激機器と
    を備えることを特徴とする心身状態回復システム。
12. 前記対象人物を個人認証する認証装置を備え、
    前記刺激機器は、前記検出部とは別空間に配置され、
    前記認証装置は、前記刺激機器が配置された空間の入口に設けられ、
    前記決定部は、前記認証装置で個人認証された前記対象人物に応じて、前記対処方法を決定する
    ことを特徴とする請求項１１記載の心身状態回復システム。