JP2012065016A - 携帯通信端末装置、ストレス状態演算方法、ストレス状態演算プログラム - Google Patents

Abstract

【課題】専用の機器を用いずに、かつ、通信が不可能な場合であっても、ストレス状態を把握することができる携帯通信端末装置、ストレス状態演算方法、ストレス状態演算プログラムを提供する。
【解決手段】携帯通信端末装置１００に内蔵するカメラ１１３とライト１１４とを用いて、撮影中にライト１１４を発光させ、瞳孔の収縮速度を求める。ストレス状態演算部１４１は、この収縮速度から、ストレス状態を演算し、メインディスプレイ１２１に結果を表示する。
【選択図】図３

Description

本発明は、人体のストレス状態を求めることができる携帯通信端末装置、ストレス状態演算方法、ストレス状態演算プログラムに関するものである。

可搬性に優れた瞳孔計が従来から開示されている（特許文献１）。
しかし、特許文献１に開示されている瞳孔計は、瞳孔検査に特化した装置であり、一般の利用者が気軽に使用できるものではなかった。

また、特許文献１に開示されている瞳孔検査の手法を用いて、瞳孔の対光反応とストレスとの関連性から、携帯端末を利用して人体のストレスを判定するストレス判定システムが開示されている（特許文献２）。

特開２００２−２３８８５３号公報 特開２００９−１４２４６９号公報

しかし、特許文献２に開示されているストレス判定システムでは、サーバと通信を行い、サーバにおいてストレス判定の演算を行っている。したがって、電波状態が悪い場所や、電波を発することが禁止されている場所で使用する場合等、通信が不可能な場合には、利用できないという問題があった。

本発明の課題は、専用の機器を用いずに、かつ、通信が不可能な場合であっても、ストレス状態を把握することができる携帯通信端末装置、ストレス状態演算方法、ストレス状態演算プログラムを提供することである。

本発明は、上記の課題を解決するために、以下の事項を提案している。なお、理解を容易にするために、本発明の実施形態に対応する符号を付して説明するが、これに限定されるものではない。

（１）本発明は、少なくとも人体の目を複数回連続して撮影する撮影部（１１３，２１３，３１３，４１３Ａ，４１３Ｂ，５１３，６１３）と、前記撮影部の撮影中に照明光を照射する照明部（１１４，２１４，３１４，４１４Ａ，４１４Ｂ，５１４，６１４）と、前記撮影部と前記照明部とを制御し、前記撮影部が撮影した人体の目を含む画像を用いて瞳孔の収縮速度を求め、前記収縮速度に基づいて当該人体のストレス状態を演算するストレス状態演算部（１４１，２４１，３４１，４４１）と、前記ストレス状態演算部による演算結果を表示する表示部（１２１，１２３，２２１，２２３，３２１，３２３，４２１，５２１，５２３，６２１，６２３）と、を備える携帯通信端末装置（１００，２００，３００，４００，５００，６００）を提案している。

この発明によれば、撮影部は、少なくとも人体の目を複数回連続して撮影する。照明部は、撮影部の撮影中に照明光を照射する。ストレス状態演算部は、撮影部と照明部とを制御し、撮影部が撮影した人体の目を含む画像を用いて瞳孔の収縮速度を求め、収縮速度に基づいて当該人体のストレス状態を演算する。表示部は、ストレス状態演算部による演算結果を表示する。したがって、専用の機器を用いずに、かつ、通信が不可能な場合であっても、ストレス状態を把握することができる。

（２）本発明は、（１）に記載の携帯通信端末装置において、前記ストレス状態演算部（１４１，２４１，３４１，４４１）は、画像中の瞳孔の輪郭を抽出し、瞳孔の大きさの変化から前記収縮速度を求めること、を特徴とする携帯通信端末装置（１００，２００，３００，４００，５００，６００）を提案している。

この発明によれば、ストレス状態演算部は、画像中の瞳孔の輪郭を抽出し、瞳孔の大きさの変化から収縮速度を求める。したがって、簡単かつ精度よく収縮速度を求めることができる。

（３）本発明は、（１）に記載の携帯通信端末装置において、前記ストレス状態演算部（１４１，２４１，３４１，４４１）は、動き補償を利用して画像中の瞳孔付近の動きベクトルを求め、動きベクトルを用いて前記収縮速度を求めること、を特徴とする携帯通信端末装置（１００，２００，３００，４００，５００，６００）を提案している。

この発明によれば、ストレス状態演算部は、動き補償を利用して画像中の瞳孔付近の動きベクトルを求め、動きベクトルを用いて収縮速度を求める。したがって、簡単かつ精度よく収縮速度を求めることができる。

（４）本発明は、（１）から（３）までのいずれか１項に記載の携帯通信端末装置において、前記ストレス状態演算部（１４１，２４１，３４１，４４１）が演算したストレス状態に応じて、次に行う動作を選択する対応動作選択部（１４３）を備えること、を特徴とする携帯通信端末装置（１００，２００，３００，４００，５００，６００）を提案している。

この発明によれば、対応動作選択部は、ストレス状態演算部が演算したストレス状態に応じて、次に行う動作を選択する。したがって、例えば、ストレスが大きいときに、利用者のストレスを軽減するために有効なアドバイス等を行える。

（５）本発明は、（１）から（４）までのいずれか１項に記載の携帯通信端末装置において、前記表示部（１２３，２２１，２２３，３２１，３２３，４２１，５２３，６２１，６２３）は、撮影者自身を撮影するときに撮影者が目視可能な状態となること、を特徴とする携帯通信端末装置（１００，２００，３００，４００，５００，６００）を提案している。

この発明によれば、表示部は、撮影者自身を撮影するときに撮影者が目視可能な状態となる。したがって、撮影時に自らの目を撮影範囲内に収めることを簡単に行え、自らのストレス状態の把握を容易に行える。

（６）本発明は、（５）に記載の携帯通信端末装置において、前記ストレス状態演算部（１４１，２４１，３４１，４４１）は、ストレス状態の演算に必要な画像を撮影可能なように案内する撮影案内を前記表示部（１２３，２２１，２２３，３２１，３２３，４２１，５２１，５２３，６２１，６２３）に表示する、又は、音声をスピーカ（１２２，２２２，３２２，４２２，５２２，６２２）から発すること、を特徴とする携帯通信端末装置（１００，２００，３００，４００，５００，６００）を提案している。

この発明によれば、ストレス状態演算部は、ストレス状態の演算に必要な画像を撮影可能なように案内する撮影案内を表示部に表示する、又は、音声をスピーカから発する。したがって、利用者は、撮影案内に従うだけで、撮影の失敗を防ぐことができる。また、撮影案内によって、良好な画像が得られる確率が高くなるので、精度の高いストレス状態の把握を行える。

（７）本発明は、（１）から（４）までのいずれか１項に記載の携帯通信端末装置において、前記撮影部は、当該携帯通信端末装置の前記表示部（４２１）と同じ側に設けられた第１のカメラ（４１３Ａ）と、前記表示部とは反対側に設けられた第２のカメラ（４１３Ｂ）とを備え、前記照明部は、当該携帯通信端末装置の前記表示部と同じ側に設けられた第１の発光部（４１４Ａ）と、前記表示部とは反対側に設けられた第２の発光部（４１４Ｂ）とを備えており、前記ストレス状態演算部（４４１）は、ストレス状態の演算に用いる画像を撮影するときには、前記第１のカメラ及び前記第１の発光部を用いて撮影を行うこと、を特徴とする携帯通信端末装置（４００）を提案している。

この発明によれば、撮影部は、携帯通信端末装置の表示部と同じ側に設けられた第１のカメラと、表示部とは反対側に設けられた第２のカメラとを備える。照明部は、携帯通信端末装置の表示部と同じ側に設けられた第１の発光部と、表示部とは反対側に設けられた第２の発光部とを備える。ストレス状態演算部は、ストレス状態の演算に用いる画像を撮影するときには、第１のカメラ及び第１の発光部を用いて撮影を行う。したがって、撮影時に自らの目を撮影範囲内に収めることを簡単に行え、自らのストレス状態の把握を容易に行える。

（８）本発明は、（１）から（４）までのいずれか１項に記載の携帯通信端末装置において、前記撮影部（３１３）及び前記照明部（３１４）は、前記表示部（３２１）の向きと同じ向きと前記表示部の向きとは反対側の向きとを向くことができ、前記ストレス状態演算部（３４１）は、ストレス状態の演算に用いる画像を撮影するときには、前記撮影部及び前記照明部が前記表示部の向きと同じ向きを向いているか否かを確認すること、を特徴とする携帯通信端末装置（３００）を提案している。

この発明によれば、撮影部及び照明部は、表示部の向きと同じ向きと表示部の向きとは反対側の向きとを向くことができる。ストレス状態演算部は、ストレス状態の演算に用いる画像を撮影するときには、撮影部及び照明部が表示部の向きと同じ向きを向いているか否かを確認する。したがって、撮影中の目の画像を表示部に表示して撮影者に見せることができ、撮影者は、自らの目の撮影を容易に行うことができる。

（９）本発明は、（１）から（６）までのいずれか１項に記載の携帯通信端末装置において、前記撮影部（５１３）及び前記照明部（５１４）が設けられている側と同じ側には、前記撮影部による撮影の開始を行うときに操作されるシャッター操作部（５６０）が設けられていること、を特徴とする携帯通信端末装置（５００）を提案している。

この発明によれば、撮影部及び照明部が設けられている側と同じ側には、撮影部による撮影の開始を行うときに操作されるシャッター操作部が設けられている。したがって、撮影時の手ブレを抑制でき、撮影して得られる目の画像を鮮明なものとでき、ストレス状態の演算を精度よく行える。

（１０）本発明は、（１）から（６）までのいずれか１項に記載の携帯通信端末装置において、前記撮影部（６１３）及び前記照明部（６１４）は、当該携帯通信端末装置から取り外し可能であって、取り外した状態において撮影動作を行えること、を特徴とする携帯通信端末装置（６００）を提案している。

この発明によれば、撮影部及び照明部は、当該携帯通信端末装置から取り外し可能であって、取り外した状態において撮影動作を行える。したがって、目の中心を簡単に撮影できる。

（１１）本発明は、（１）から（６）までのいずれか１項に記載の携帯通信端末装置において、前記ストレス状態演算部（１４１，２４１，３４１，４４１）が演算したストレス状態に関する情報を外部に送信する通信部（１５０）を有すること、を特徴とする携帯通信端末装置（１００，２００，３００，４００，５００，６００）を提案している。

この発明によれば、通信部は、ストレス状態演算部が演算したストレス状態に関する情報を外部に送信する。したがって、外部のサーバや他の携帯通信端末装置がストレス状態を把握でき、適切なストレス対応を利用者に対して実施できる。

（１２）本発明は、少なくとも人体の目を複数回連続して撮影する撮影ステップと、前記撮影ステップによる撮影中に照明光を照射する照明ステップと、前記撮影ステップにより撮影した人体の目を含む画像を用いて瞳孔の収縮速度を求め、前記収縮速度に基づいて当該人体のストレス状態を演算するストレス状態演算ステップと、前記ストレス状態演算ステップによる演算結果を表示する表示ステップと、を実行する携帯通信端末装置（１００，２００，３００，４００，５００，６００）のストレス状態演算方法を提案している。

この発明によれば、撮影ステップは、少なくとも人体の目を複数回連続して撮影する。照明ステップは、撮影ステップによる撮影中に照明光を照射する。ストレス状態演算ステップは、撮影ステップにより撮影した人体の目を含む画像を用いて瞳孔の収縮速度を求め、収縮速度に基づいて当該人体のストレス状態を演算する。表示ステップは、ストレス状態演算ステップによる演算結果を表示する。したがって、専用の機器を用いずに、かつ、通信が不可能な場合であっても、ストレス状態を把握することができる。

（１３）本発明は、コンピュータに、少なくとも人体の目を複数回連続して撮影する撮影ステップと、前記撮影ステップによる撮影中に照明光を照射する照明ステップと、前記撮影ステップにより撮影した人体の目を含む画像を用いて瞳孔の収縮速度を求め、前記収縮速度に基づいて当該人体のストレス状態を演算するストレス状態演算ステップと、前記ストレス状態演算ステップによる演算結果を表示する表示ステップと、を実行させるための携帯通信端末装置（１００，２００，３００，４００，５００，６００）のストレス状態演算プログラムを提案している。

この発明によれば、撮影ステップは、少なくとも人体の目を複数回連続して撮影する。照明ステップは、撮影ステップによる撮影中に照明光を照射する。ストレス状態演算ステップは、撮影ステップにより撮影した人体の目を含む画像を用いて瞳孔の収縮速度を求め、収縮速度に基づいて当該人体のストレス状態を演算する。表示ステップは、ストレス状態演算ステップによる演算結果を表示する。したがって、専用の機器を用いずに、かつ、通信が不可能な場合であっても、ストレス状態を把握することができる。

本発明によれば、専用の機器を用いることなく、通信が不可能な場合を含めて、いつでも、どこでも、ストレス状態を簡単に把握することができる。

本発明によるストレス状態演算方法を用いた携帯通信端末装置の第１実施形態を示す正面斜視図である。 第１実施形態の携帯通信端末装置を示す裏面斜視図である。 第１実施形態の携帯通信端末装置の内部構成を示すブロック図である。 第１実施形態の携帯通信端末装置のストレス状態を演算するときの動作を示すフローチャートである。 本発明によるストレス状態演算方法を用いた携帯通信端末装置の第２実施形態を示す裏面斜視図である。 本発明によるストレス状態演算方法を用いた携帯通信端末装置の第３実施形態を示す表面斜視図である。 本発明によるストレス状態演算方法を用いた携帯通信端末装置の第４実施形態を示す表面斜視図である。 第４実施形態の携帯通信端末装置を示す裏面斜視図である。 本発明によるストレス状態演算方法を用いた携帯通信端末装置の第５実施形態を示す裏面斜視図である。 本発明によるストレス状態演算方法を用いた携帯通信端末装置の第６実施形態を示す裏面斜視図である。 カメラユニット６７０を第１の筐体６１０から取り外した状態を示す図である。

以下、図面を用いて、本発明の実施形態について詳細に説明する。
なお、本実施形態における構成要素は適宜、既存の構成要素等との置き換えが可能であり、また、他の既存の構成要素との組み合わせを含む様々なバリエーションが可能である。したがって、本実施形態の記載をもって、特許請求の範囲に記載された発明の内容を限定するものではない。

（第１実施形態）
図１は、本発明によるストレス状態演算方法を用いた携帯通信端末装置の第１実施形態を示す正面斜視図である。
図２は、第１実施形態の携帯通信端末装置を示す裏面斜視図である。
第１実施形態の携帯通信端末装置１００は、第１の筐体１１０と、第２の筐体１２０とが軸部１３０を中心として折りたたみ可能な携帯電話端末である。図１及び図２は、第１の筐体１１０及び第２の筐体１２０を開いた状態を示しており、以下、第１の筐体１１０及び第２の筐体１２０それぞれが折りたたんだときに対向し合う面、すなわち、図１において見えている側の面を表面と呼ぶ。一方、第１の筐体１１０及び第２の筐体１２０それぞれが折りたたんだときに外側に露呈している側の面、すなわち、図２において見えている側の面を裏面と呼ぶ。なお、この表面、裏面という呼び方は、以下に示す第２実施形態から第４実施形態においても同様とする。

第１の筐体１１０の表面には、操作キー１１１と、マイク１１２とが設けられている。一方、第１の筐体１１０の裏面には、カメラ１１３と、ライト１１４とが設けられている。
操作キー１１１は、数字や文字入力、各種選択等を行える操作部材である。
マイク１１２は、通話時の音声を入力するマイクである。
カメラ１１３は、後述するように、連続撮影、又は、動画像の撮影を行うことができる撮影部である。
ライト１１４は、カメラ１１３の撮影中に照明光を照射する照明部である。

第２の筐体１２０の表面には、メインディスプレイ１２１と、スピーカ１２２とが設けられている。一方、第２の筐体１２０の裏面には、サブディスプレイ１２３が設けられている。

メインディスプレイ１２１は、携帯通信端末装置１００の各種情報を表示する表示部である。カメラ１１３を用いて撮影を行うときには、通常は、このメインディスプレイ１２１に被写体像を表示する。

スピーカ１２２は、通話時の音声を出力するとともに、着信音や音楽再生時に音声を出力するマイクである。なお、図１では、通話時のスピーカと音楽再生時等に用いるスピーカとをスピーカ１２２ひとつで共用する例としたが、音楽再生時等に用いるスピーカを別途設けてもよい。

サブディスプレイ１２３は、第１の筐体１１０と第２の筐体１２０とを閉じた状態において各種情報を表示する表示部である。また、サブディスプレイ１２３は、ストレス状態の演算用に目を撮影するときには、カメラ１１３を用いて得た目の画像を表示し、目の撮影を容易に行えるように補助する。

図３は、第１実施形態の携帯通信端末装置の内部構成を示すブロック図である。
携帯通信端末装置１００は、上述した操作キー１１１と、マイク１１２と、カメラ１１３と、ライト１１４と、スピーカ１２２と、メインディスプレイ１２１と、サブディスプレイ１２３との他に、ソフトウェア１４０と、通信部１５０とを備えている。
ソフトウェア１４０は、携帯通信端末装置１００において動作するアプリケーションソフトウェアであり、携帯通信端末装置１００内のＣＰＵ及びメモリ上において実行される。ソフトウェア１４０は、ストレス状態演算部１４１と、画像解析部１４２と、対応動作選択部１４３とを備えている。

ストレス状態演算部１４１は、カメラ１１３とライト１１４とを制御し、目の瞳孔が収縮する過程を含む画像を取得し、取得した画像を基にして画像解析部１４２が求める収縮速度に基づいて人体のストレス状態を演算する。具体的には、ストレス状態演算部１４１は、ライト１１４を消灯した状態からカメラ１１３による撮影を開始する。そして、撮影途中にライト１１４を点灯する。そうすると、ライト１１４による照明光に反応して瞳孔が閉じてゆく。このときに、ストレス状態演算部１４１は、カメラ１１３を制御して、連続的に画像を取得する、又は、一連の流れを動画像として取得する。現在の携帯電話端末に多く用いられているカメラであれば、３０フレーム／秒の撮影が可能であり、瞳孔の収縮速度を求めるためには、十分なサンプリングレートである。なお、瞳孔の収縮速度を求めるためには、１０フレーム／秒程度のサンプリングレートでもよい。

画像解析部１４２は、カメラ１１３から得た人体の目を含む画像を解析して、瞳孔の収縮速度を算出する。
画像解析部１４２が行う画像解析の方法としては、以下の２つを例示できる。
１つ目の方法は、カメラ１１３から得た画像に対して、輪郭抽出を行い、各フレームについて瞳孔の面積を算出し、瞳孔の収縮速度を求める。
２つ目の方法は、連続するフレーム画像に対して、動き予測のアルゴリズムを用いて、瞳孔の動きベクトルを取得する処理を行い、瞳孔の収縮速度を求める。この動き予測のアルゴリズムとしては、例えば、ＭＰＥＧ動画処理における動き補償技術を利用することができる。
なお、本実施形態では、画像解析部１４２は、ストレス状態演算部１４１の機能の一部として設けているが、ストレス状態演算部１４１とは独立して機能するものとして設けてもよい。

対応動作選択部１４３は、ストレス状態演算部１４１が演算したストレス状態に応じて、次に行う動作を選択する。ストレス状態に応じて次に行う動作としては、例えば、メインディスプレイ１２１に、「今日はお疲れですね。休養してください。」等のメッセージを表示したり、スピーカ１２２から、上記表示したものと同様な音声を発したり、ストレス状態を和らげる効果の高い音楽等を発したりするとよい。また、ストレス状態に応じて、企業広告を配信したりしてもよい。さらに、携帯通信端末装置に芳香発生装置を設け、ストレス状態に応じて、携帯通信端末装置から芳香（アロマ）を漂わせ、知らず知らずのうちにリラックスさせるようにしてもよい。さらにまた、ストレス状態に応じて、メインディスプレイ１２１等の明るさを変化させて目の疲れに配慮してもよい。その他、ストレス状態に応じた各種コンテンツを提供するとよい。なお、提供するコンテンツは、ストレスを抱えた本人が周囲の人に当たり散らす形でストレス発散をしないようなものとすることが望ましい。

通信部１５０は、ストレス状態演算部１４１が演算したストレス状態に関する情報を、外部のサーバや、外部の他の携帯通信端末装置等に送信する。これにより、例えば、外部のサーバは、取得した情報からストレス状態が極度に悪い状態である場合には、カウンセラーにその旨の警告を行う。これにより、カウンセラーからメールや電話を行う等、早急なストレス対応を実施可能となる。また、例えば、家族や友人等の携帯通信端末装置が情報を取得することとすれば、ストレス状態を家族や友人等が把握できるので、ストレスを抱えた本人に対する接し方を適切なものとすることができる。

図４は、第１実施形態の携帯通信端末装置のストレス状態を演算するときの動作を示すフローチャートである。
ステップ（以下、単にＳと記す）１０１では、携帯通信端末装置１００のアプリケーションソフトウェアの１つであるソフトウェア１４０を選択して起動することにより、ストレス状態の測定を開始する。

Ｓ１０２では、ストレス状態演算部１４１が、カメラ１１３を制御して、利用者の目の撮影を開始する。このとき、ストレス状態演算部１４１は、カメラ１１３から得ている目の画像をサブディスプレイ１２３に表示し、利用者が目の撮影を容易に行えるようにする。このとき、サブディスプレイ１２３には、カメラ１１３から得ている目の画像とともに、目を収める範囲をガイドとして表示したり、「瞬きをしないように」と表示したりして、撮影案内を行う。撮影は、連続撮影、又は、動画像の撮影として継続的に行われる。

Ｓ１０３では、ストレス状態演算部１４１は、カメラ１１３により得られている目の画像を確認する。この確認は、瞳孔の収縮速度を演算可能な程度に鮮明かつ十分な大きさの画像となっているか否かを確認する。この確認において、不的確な画像であった場合には、ストレス状態演算部１４１は、利用者に対して、表示や音声により適宜必要なアドバイスを行う。

Ｓ１０４では、ストレス状態演算部１４１は、ライト１１４を制御して、カメラ１１３による撮影継続中に、ライト１１４を点灯させる。このライト１１４の点灯により、照明光が目に到達して、瞳孔が収縮を開始する。

Ｓ１０５では、ストレス状態演算部１４１は、Ｓ１０４におけるライト１１４の点灯から所定の時間経過、又は、所定量の撮影画像が得られたことにより、撮影を終了する。
Ｓ１０６では、ストレス状態演算部１４１は、ライト１１４を制御して、ライト１１４を消灯させる。

Ｓ１０７では、画像解析部１４２が、得られた画像を基にして、瞳孔の収縮速度を算出する。
Ｓ１０８では、ストレス状態演算部１４１は、Ｓ１０７において算出した瞳孔の収縮速度から、利用者のストレス状態を演算する。

Ｓ１０９では、対応動作選択部１４３が、演算されたストレス状態に応じて、次に行う動作を選択して、実行する。本実施形態では、演算されたストレス状態をメインディスプレイ１２１に表示する。

以上説明したように、第１実施形態によれば、携帯通信端末装置１００単体で瞳孔の収縮速度を求め、求めた瞳孔の収縮速度に基づいてストレス状態を演算することができる。したがって、利用者が通常持ち歩くことの多い携帯電話端末だけで、ストレス状態を把握することができる。しかも、ストレス状態の演算時には、外部との通信を行う必要がないので、いつでも、どこでも、ストレス状態を把握することができる。

（第２実施形態）
図５は、本発明によるストレス状態演算方法を用いた携帯通信端末装置の第２実施形態を示す裏面斜視図である。
第２実施形態は、第１実施形態における第２の筐体１２０の構造を変更した第２の筐体２２０となっている他は、第１実施形態と同様な形態である。よって、前述した第１実施形態と同様の機能を果たす部分には、末尾に同一の符号を付して、重複する説明を適宜省略する。

第２実施形態の携帯通信端末装置２００は、第１の筐体２１０と、第２の筐体２２０とが軸部２３０を中心として折りたたみ可能な携帯電話端末である。第２実施形態の第２の筐体２２０は、軸部２３０に対して略直交する第２の軸部を中心として、図５中の矢印に示したように回転可能となっている。したがって、第２の筐体２２０は、その表面を、第１の筐体２１０の裏面側に向けることができる（図５に示す状態）。
第１の筐体２１０の表面には、図示しないが、操作キー２１１と、マイク２１２とが設けられている。一方、第１の筐体２１０の裏面には、カメラ２１３と、ライト２１４とが設けられている。
第２の筐体２２０の表面には、メインディスプレイ２２１と、スピーカ２２２とが設けられている。なお、第２の筐体２２０の裏面には、図示しないサブディスプレイ２２３が設けられていてもよいし、サブディスプレイ２２３を設けなくともよい。

第２実施形態の携帯通信端末装置２００がストレス状態の演算に必要な目の画像を撮影するときには、ストレス状態演算部２４１（不図示）は、第２の筐体２２０の向きが図５に示すような状態となっているか否かを確認する。そして、第２の筐体２２０の向きが図５に示すような状態となっていない場合には、利用者に対して、第２の筐体２２０の向きを変更するように促す。そして、ストレス状態演算部２４１は、メインディスプレイ２２１に撮影中の目の画像や撮影ガイド等を表示し、撮影動作を補助する。

以上説明したように、第２実施形態によれば、第２の筐体２２０は、軸部２３０に対して略直交する第２の軸部を中心として、回転可能となっている。したがって、撮影中の目の画像をメインディスプレイ２２１に表示して利用者に見せることができ、撮影者は、目の撮影を容易に行うことができる。

（第３実施形態）
図６は、本発明によるストレス状態演算方法を用いた携帯通信端末装置の第３実施形態を示す表面斜視図である。
第３実施形態は、カメラ３１３及びライト３１４が配置されている位置が、第１実施形態におけるカメラ１１３及びライト１１４と異なっている他は、第１実施形態と同様な形態である。よって、前述した第１実施形態と同様の機能を果たす部分には、末尾に同一の符号を付して、重複する説明を適宜省略する。

第３実施形態の携帯通信端末装置３００は、第１の筐体３１０と、第２の筐体３２０とが軸部３３０を中心として折りたたみ可能な携帯電話端末である。
第１の筐体３１０の表面には、操作キー３１１と、マイク３１２とが設けられている。一方、第１の筐体３１０の裏面には、第１実施形態におけるカメラ１１３と、ライト１１４とに相当するデバイスは設けられていない。
第２の筐体３２０の表面には、メインディスプレイ３２１と、スピーカ３２２とが設けられている。なお、第２の筐体３２０の裏面には、図示しないサブディスプレイ３２３が設けられていてもよいし、サブディスプレイ３２３を設けなくともよい。
軸部３３０には、カメラ３１３と、ライト３１４とが設けられている。これらカメラ３１３及びライト３１４は、軸部３３０の回転中心軸を中心として回転可能に設けられている。したがって、図６中の矢印方向に回転して撮影する方向を変えることができる。

第３実施形態の携帯通信端末装置３００がストレス状態の演算に必要な目の画像を撮影するときには、ストレス状態演算部３４１（不図示）は、カメラ３１３及びライト３１４の向きが図６に示すような状態となっているか否かを確認する。そして、カメラ３１３及びライト３１４の向きが図６に示すような状態となっていない場合には、利用者に対して、カメラ３１３及びライト３１４の向きを変更するように促す。そして、ストレス状態演算部３４１は、メインディスプレイ３２１に撮影中の目の画像や撮影ガイド等を表示し、撮影動作を補助する。

以上説明したように、第３実施形態によれば、カメラ３１３及びライト３１４は、軸部３３０の回転中心軸を中心として回転可能に設けられている。そして、ストレス状態演算部３４１は、カメラ３１３及びライト３１４の向きがメインディスプレイ３２１と同じ向きになっているか否かを確認する。したがって、撮影中の目の画像をメインディスプレイ３２１に表示して撮影者に見せることができ、撮影者は、自らの目の撮影を容易に行うことができる。

（第４実施形態）
図７は、本発明によるストレス状態演算方法を用いた携帯通信端末装置の第４実施形態を示す表面斜視図である。
図８は、第４実施形態の携帯通信端末装置を示す裏面斜視図である。
先に説明した第１実施形態では、カメラ１１３及びライト１１４が一組設けられていた。これに対して、第４実施形態は、第１のカメラ４１３Ａ及び第１のライト４１４Ａと、第２のカメラ４１３Ｂ及び第２のライト４１４Ｂとの、計２組が設けられている点で異なるが、他の形態は、第１実施形態と同様な形態である。よって、前述した第１実施形態と同様の機能を果たす部分には、末尾に同一の符号を付して、重複する説明を適宜省略する。

第４実施形態の携帯通信端末装置４００は、第１の筐体４１０と、第２の筐体４２０とが軸部４３０を中心として折りたたみ可能な携帯電話端末である。
第１の筐体４１０の表面には、操作キー４１１と、マイク４１２とが設けられている。一方、第１の筐体４１０の裏面には、第２のカメラ４１３Ｂと、第２のライト４１４Ｂとが設けられている。
第２の筐体４２０の表面には、第１のカメラ４１３Ａと、第１のライト４１４Ａと、メインディスプレイ４２１と、スピーカ４２２とが設けられている。なお、第２の筐体４２０の裏面には、第１実施形態におけるサブディスプレイ１２３に相当するディスプレイは設けられていない。

第１のカメラ４１３Ａ及び第１のライト４１４Ａは、利用者が自らの顔を撮影するような場合に利用する第１のカメラ及び第１の発光部である。一方、第２のカメラ４１３Ｂ及び第２のライト４１４Ｂは、利用者が通常の撮影を行うときに利用する第２のカメラ及び第２の発光部である。これらの選択は、通常の撮影用アプリケーションソフトでは、いずれのカメラを使用するのかを撮影者が選択できるようになっている。

第４実施形態の携帯通信端末装置４００がストレス状態の演算に必要な目の画像を撮影するときには、ストレス状態演算部４４１（不図示）は、撮影に使用するカメラ及びライトとして、第１のカメラ４１３Ａ及び第１のライト４１４Ａを自動的に選択する。そして、ストレス状態演算部４４１は、メインディスプレイ４２１に撮影中の目の画像や撮影ガイド等を表示し、撮影動作を補助する。

以上説明したように、第４実施形態によれば、ストレス状態演算部４４１は、ストレス状態の演算に必要な目の画像を撮影するときには、撮影に使用するカメラ及びライトとして、第１のカメラ４１３Ａ及び第１のライト４１４Ａを自動的に選択する。したがって、撮影中の目の画像をメインディスプレイ４２１に表示して利用者に見せることができ、撮影者は、目の撮影を容易に行うことができる。

（第５実施形態）
図９は、本発明によるストレス状態演算方法を用いた携帯通信端末装置の第５実施形態を示す裏面斜視図である。
第５実施形態は、第１実施形態における第１の筐体１１０の裏面側にシャッター操作部５６０を追加した他は、第１実施形態と同様な形態である。よって、前述した第１実施形態と同様の機能を果たす部分には、末尾に同一の符号を付して、重複する説明を適宜省略する。

第５実施形態の携帯通信端末装置５００は、第１の筐体５１０と、第２の筐体５２０とが軸部５３０を中心として折りたたみ可能な携帯電話端末である。
第１の筐体５１０の表面には、図示しないが、操作キー５１１と、マイク５１２とが設けられている。一方、第１の筐体５１０の裏面には、カメラ５１３と、ライト５１４と、シャッター操作部５６０とが設けられている。
第２の筐体５２０の表面には、図示しないが、メインディスプレイ５２１と、スピーカ５２２とが設けられている。第２の筐体５２０の裏面には、サブディスプレイ５２３が設けられている。

第５実施形態の携帯通信端末装置５００がストレス状態の演算に必要な目の画像を撮影するときには、利用者は、シャッター操作部５６０を操作して撮影を行う。シャッター操作部５６０は、カメラ５１３及びライト５１４と同じ裏面側に設けられているので、撮影操作を無理なく行うことができる。これにより、撮影時の手ブレを大幅に軽減できる。目の撮影は、目を大きく拡大して撮影するので、わずかな手ブレにより得られる画像の品質が大きく劣化するおそれがあるが、本実施形態では、この手ブレを抑制できる。

以上説明したように、第５実施形態によれば、シャッター操作部５６０を、カメラ５１３及びライト５１４と同じ裏面側に設けたことにより、手ブレを抑制し、得られる目の画像の品質を向上したので、ストレス状態をより精度よく演算できる。

（第６実施形態）
図１０は、本発明によるストレス状態演算方法を用いた携帯通信端末装置の第６実施形態を示す裏面斜視図である。
第６実施形態は、カメラ６１３及びライト６１４を第１の筐体６１０から取り外し可能とした他は、第１実施形態と同様な形態である。よって、前述した第１実施形態と同様の機能を果たす部分には、末尾に同一の符号を付して、重複する説明を適宜省略する。

第６実施形態の携帯通信端末装置６００は、第１の筐体６１０と、第２の筐体６２０とが軸部６３０を中心として折りたたみ可能な携帯電話端末である。
第１の筐体６１０の表面には、図示しないが、操作キー６１１と、マイク６１２とが設けられている。一方、第１の筐体６１０の裏面には、カメラ６１３及びライト６１４を備えたカメラユニット６７０が設けられている。カメラユニット６７０は、第１の筐体６１０から取り外し可能である。
図１１は、カメラユニット６７０を第１の筐体６１０から取り外した状態を示す図である。
カメラユニット６７０は、第１の筐体６１０から取り外した状態でもカメラ６１３及びライト６１４による撮影を行える。なお、カメラユニット６７０は、携帯通信端末装置６００との間を有線接続されていてもよいし、無線接続されていてもよい。カメラユニット６７０と携帯通信端末装置６００とを無線接続する場合には、カメラユニット６７０内に蓄電池が設けられる。また、カメラユニット６７０は、手ブレ補正機能を有している。この手ブレ補正機能は、電子式の手ブレ補正機能であってもよいし、光学式の手ブレ補正機能であってもよい。
第２の筐体６２０の表面には、図示しないが、メインディスプレイ６２１と、スピーカ６２２とが設けられている。第２の筐体６２０の裏面には、サブディスプレイ６２３が設けられている。

カメラ６１３及びライト６１４を有するカメラユニット６７０を第１の筐体６１０から取り外し可能としたことにより、カメラユニット６７０の位置を自由に動かすことができ、目の中心を撮影できる位置にカメラ６１３を簡単に配置できる。また、カメラユニット６７０を第１の筐体６１０から取り外し可能としたことにより、利用者自身では確認しにくい箇所（例えば口の中の（虫歯）や耳の穴の掃除の確認、背中や頭部の怪我の確認等）を撮影しモニター表示し確認することもできる。

以上説明したように、第６実施形態によれば、カメラ６１３及びライト６１４を有するカメラユニット６７０を第１の筐体６１０から取り外し可能としたので、目の撮影をさらに簡単に行うことができる。

なお、携帯通信端末装置の処理をコンピュータ読み取り可能な記録媒体に記録し、この記録媒体に記録されたプログラムを携帯通信端末装置に読み込ませ、実行することによって本発明の携帯通信端末装置、ストレス状態演算方法を実現することができる。ここでいうコンピュータシステムとは、ＯＳや周辺装置等のハードウェアを含む。

また、「コンピュータシステム」は、ＷＷＷ（Ｗｏｒｌｄ Ｗｉｄｅ Ｗｅｂ）システムを利用している場合であれば、ホームページ提供環境（あるいは表示環境）も含むものとする。また、上記プログラムは、このプログラムを記憶装置等に格納したコンピュータシステムから、伝送媒体を介して、あるいは、伝送媒体中の伝送波により他のコンピュータシステムに伝送されてもよい。ここで、プログラムを伝送する「伝送媒体」は、インターネット等のネットワーク（通信網）や電話回線等の通信回線（通信線）のように情報を伝送する機能を有する媒体のことをいう。

また、上記プログラムは、前述した機能の一部を実現するためのものであってもよい。さらに、前述した機能をコンピュータシステムにすでに記録されているプログラムとの組み合せで実現できるもの、いわゆる差分ファイル（差分プログラム）であってもよい。

以上、この発明の実施形態につき、図面を参照して詳述してきたが、具体的な構成はこの実施形態に限られるものではなく、この発明の要旨を逸脱しない範囲の設計等も含まれる。

（変形形態）
（１）各実施形態において、携帯通信端末装置は、折りたたみ可能な形態をしている例を挙げて説明したが、これに限らず、例えば、２つの筐体が相対的にスライド移動するスライドタイプであってもよいし、筐体が１つで可動部分が設けられていないタイプであってもよい。

（２）各実施形態において、ストレス状態演算部は、ストレス状態の演算に必要な画像を撮影可能なように案内する撮影案内をメインディスプレイ又はサブディスプレイに表示する例を挙げて説明した。これに限らず、例えば、撮影案内の音声をスピーカから発するようにしてもよい。

なお、第１実施形態〜第４実施形態及び変形形態は、適宜組み合わせて用いることもできるが、詳細な説明は省略する。

１００，２００，３００，４００，５００，６００ 携帯通信端末装置
１１０，２１０，３１０，４１０，５１０，６１０ 第１の筐体
１１１，２１１，３１１，４１１，５１１，６１１ 操作キー
１１２，２１２，３１２，４１２，５１２，６１２ マイク
１１３，２１３，３１３，５１３，６１３ カメラ
１１４，２１４，３１４，５１４，６１４ ライト
１２０，２２０，３２０，４２０，５２０，６２０ 第２の筐体
１２１，２２１，３２１，４２１，５２１，６２１ メインディスプレイ
１２２，２２２，３２２，４２２，５２２，６２２ スピーカ
１２３，２２３，３２３，５２３，６２３ サブディスプレイ
１３０，２３０，３３０，４３０，５３０，６３０ 軸部
１４０ ソフトウェア
１４１，２４１，３４１，４４１ ストレス状態演算部
１４２ 画像解析部
１４３ 対応動作選択部
１５０ 通信部
４１３Ａ 第１のカメラ
４１３Ｂ 第２のカメラ
４１４Ａ 第１のライト
４１４Ｂ 第２のライト
５６０ シャッター操作部
６７０ カメラユニット

Claims (13)

1. 少なくとも人体の目を複数回連続して撮影する撮影部と、
   前記撮影部の撮影中に照明光を照射する照明部と、
   前記撮影部と前記照明部とを制御し、前記撮影部が撮影した人体の目を含む画像を用いて瞳孔の収縮速度を求め、前記収縮速度に基づいて当該人体のストレス状態を演算するストレス状態演算部と、
   前記ストレス状態演算部による演算結果を表示する表示部と、
   を備える携帯通信端末装置。
2. 請求項１に記載の携帯通信端末装置において、
   前記ストレス状態演算部は、画像中の瞳孔の輪郭を抽出し、瞳孔の大きさの変化から前記収縮速度を求めること、
   を特徴とする携帯通信端末装置。
3. 請求項１に記載の携帯通信端末装置において、
   前記ストレス状態演算部は、動き補償を利用して画像中の瞳孔付近の動きベクトルを求め、前記動きベクトルを用いて前記収縮速度を求めること、
   を特徴とする携帯通信端末装置。
4. 請求項１から請求項３までのいずれか１項に記載の携帯通信端末装置において、
   前記ストレス状態演算部が演算したストレス状態に応じて、次に行う動作を選択する対応動作選択部を備えること、
   を特徴とする携帯通信端末装置。
5. 請求項１から請求項４までのいずれか１項に記載の携帯通信端末装置において、
   前記表示部は、撮影者自身を撮影するときに撮影者が目視可能な状態となること、
   を特徴とする携帯通信端末装置。
6. 請求項５に記載の携帯通信端末装置において、
   前記ストレス状態演算部は、ストレス状態の演算に必要な画像を撮影可能なように案内する撮影案内を前記表示部に表示する、又は、音声をスピーカから発すること、
   を特徴とする携帯通信端末装置。
7. 請求項１から請求項４までのいずれか１項に記載の携帯通信端末装置において、
   前記撮影部は、当該携帯通信端末装置の前記表示部と同じ側に設けられた第１のカメラと、前記表示部とは反対側に設けられた第２のカメラとを備え、
   前記照明部は、当該携帯通信端末装置の前記表示部と同じ側に設けられた第１の発光部と、前記表示部とは反対側に設けられた第２の発光部とを備えており、
   前記ストレス状態演算部は、ストレス状態の演算に用いる画像を撮影するときには、前記第１のカメラ及び前記第１の発光部を用いて撮影を行うこと、
   を特徴とする携帯通信端末装置。
8. 請求項１から請求項４までのいずれか１項に記載の携帯通信端末装置において、
   前記撮影部及び前記照明部は、前記表示部の向きと同じ向きと前記表示部の向きとは反対側の向きとを向くことができ、
   前記ストレス状態演算部は、ストレス状態の演算に用いる画像を撮影するときには、前記撮影部及び前記照明部が前記表示部の向きと同じ向きを向いているか否かを確認すること、
   を特徴とする携帯通信端末装置。
9. 請求項１から請求項６までのいずれか１項に記載の携帯通信端末装置において、
   前記撮影部及び前記照明部が設けられている側と同じ側には、前記撮影部による撮影の開始を行うときに操作されるシャッター操作部が設けられていること、
   を特徴とする携帯通信端末装置。
10. 請求項１から請求項６までのいずれか１項に記載の携帯通信端末装置において、
    前記撮影部及び前記照明部は、当該携帯通信端末装置から取り外し可能であって、取り外した状態において撮影動作を行えること、
    を特徴とする携帯通信端末装置。
11. 請求項１から請求項６までのいずれか１項に記載の携帯通信端末装置において、前記ストレス状態演算部が演算したストレス状態に関する情報を外部に送信する通信部を有すること、
    を特徴とする携帯通信端末装置。
12. 少なくとも人体の目を複数回連続して撮影する撮影ステップと、
    前記撮影ステップによる撮影中に照明光を照射する照明ステップと、
    前記撮影ステップにより撮影した人体の目を含む画像を用いて瞳孔の収縮速度を求め、前記収縮速度に基づいて当該人体のストレス状態を演算するストレス状態演算ステップと、
    前記ストレス状態演算ステップによる演算結果を表示する表示ステップと、
    を実行する携帯通信端末装置のストレス状態演算方法。
13. コンピュータに、
    少なくとも人体の目を複数回連続して撮影する撮影ステップと、
    前記撮影ステップによる撮影中に照明光を照射する照明ステップと、
    前記撮影ステップにより撮影した人体の目を含む画像を用いて瞳孔の収縮速度を求め、前記収縮速度に基づいて当該人体のストレス状態を演算するストレス状態演算ステップと、
    前記ストレス状態演算ステップによる演算結果を表示する表示ステップと、
    を実行させるための携帯通信端末装置のストレス状態演算プログラム。