JP5898702B2 - ミラー装置、ミラー装置の制御方法及び制御プログラム - Google Patents

Description

本発明は、ミラー装置、ミラー装置の制御方法及び制御プログラムに関し、特に、ユーザの動作に応じた映像効果の表示制御に関する。

人は化粧をする際、鏡に自身の顔を写した上で化粧道具を用いて化粧を行う。このように化粧に用いられる鏡に面白さを付加するための技術として、鏡としてハーフミラーを用い、背面側に表示させたい画像のフィルム及びフィルムを背面から照らす光源を配置することにより、背面に配置されたフィルムの画像が光源によって照らされてハーフミラーに映り込み、ハーフミラーの表面によって反射される自身の画像に合成されているように表示させる技術が提案されている（例えば、特許文献１参照）。

鏡は光を反射するものであり、対向する方向に存在する物体の鏡像が表示されるのみであるため、鏡面に表示される画像はユーザの予想の範囲を出るものではない。これに対して、ユーザの動作に応じた映像効果が表示されれば、ユーザの予想に反して面白さを提供することができる。

尚、特許文献１に開示された技術は、予めセットされたフィルムを表示させるものであり、ユーザの動作に応じた映像効果を表示させるという本件発明とはその趣旨が異なる。即ち、変化のある映像効果を表示させることが可能な装置が望まれる。

本発明は、このような課題を解決するためになされたものであり、ユーザの動作に応じた映像効果を表示するミラー装置を提供することにある。

上記課題を解決するために、本発明の一態様は、入射する光の一部を反射すると共に一部を透過させるハーフミラーと、表示面が前記ハーフミラーの面に対向するように配置された表示装置と、前記ハーフミラーに対向するユーザの行動に応じた検知信号を出力するセンサと、前記検知信号に応じて前記表示装置の表示を制御するコントローラとを含むミラー装置であって、前記コントローラは、前記センサの出力信号に基づいて前記ユーザが行動した位置に対応する前記表示装置の表示面上の位置を算出し、前記センサの出力信号に基づいて前記ユーザの行動を検知し、前記ユーザの行動を検知した場合に、算出した前記表示面上の位置に所定の映像パターンを表示させるように前記表示装置を制御することを特徴とする。

また、本発明の他の態様は、入射する光の一部を反射すると共に一部を透過させるハーフミラーと、表示面が前記ハーフミラーの面に対向するように配置された表示装置と、前記ハーフミラーに対向するユーザの行動に応じた検知信号を出力するセンサとを含むミラー装置の制御方法であって、前記センサの出力信号に基づいて前記ユーザが行動した位置に対応する前記表示装置の表示面上の位置を算出し、前記センサの出力信号に基づいて前記ユーザの行動を検知し、前記ユーザの行動を検知した場合に、算出した前記表示面上の位置に所定の映像パターンを表示させるように前記表示装置を制御することを特徴とする。

また、本発明の更に他の態様は、入射する光の一部を反射すると共に一部を透過させるハーフミラーと、表示面が前記ハーフミラーの面に対向するように配置された表示装置と、前記ハーフミラーに対向するユーザの行動に応じた検知信号を出力するセンサとを含むミラー装置の制御プログラムであって、前記センサの出力信号に基づいて前記ユーザが行動した位置に対応する前記表示装置の表示面上の位置を算出するステップと、前記センサの出力信号に基づいて前記ユーザの行動を検知する捨てプと、前記ユーザの行動を検知した場合に、算出した前記表示面上の位置に所定の映像パターンを表示させるように前記表示装置を制御するステップとを情報処理装置に実行させることを特徴とする。

本発明によれば、ユーザの動作に応じた映像効果を表示するミラー装置を提供することができる。

本発明の実施形態に係るミラー装置システムの外観を示す図である。 本発明の実施形態に係るミラー装置の内部を模式的に示す図である。 本発明の実施形態に係るミラー装置の光学的な原理を示す図である。 本発明の実施形態に係るミラー装置の表示例を示す図である。 本発明の実施形態に係るミラー装置の機能構成を示す図である。 本発明の実施形態に係るミラー装置の情報処理機能に係るハードウェア構成を示す図である。 本発明の実施形態に係るミラー装置の動作を示すフローチャートである。 本発明の実施形態に係るセンサの設置例を示す図である。 本発明の実施形態に係る位置計算方法を示す図である。 本発明の実施形態に係るセンサの設置例を示す図である。 本発明の他の実施形態に係る発信器の態様を示す図である。 本発明の他の実施形態に係る発信器の態様を示す図である。 本発明の他の実施形態に係るコントローラが記憶している情報を示す図である。

以下、図面を参照して、本発明の実施形態を詳細に説明する。本実施形態においては、映像効果を表示可能なミラー装置と、ミラー装置に映像効果を表示させるための専用の化粧道具である発信器付きブラシとを含むエフェクトミラーシステムを例として説明する。

図１は、本実施形態に係るシステムの全体を示す図である。図１に示すように、本実施形態に係るエフェクトミラーシステム１は、ミラー装置１０及び発信器付きブラシ２０を含む。ミラー装置１０は図１に示すように箱型の筐体の前面にハーフミラー１１が配置されて構成されている。発信器付きブラシ２０は、本実施形態に係るミラー装置において映像効果を表示させるための専用の化粧道具であり、ミラー装置１０は、発信器付きブラシ２０の位置を検知することにより、検知した位置に応じてエフェクトを表示させる。

ハーフミラー１１は、半透過型の光学部品であり、入射する光の一部を反射すると共に一部を透過させる。このため、ハーフミラー１１は、視認する面の背面側が暗ければミラーとして、背面側が明るければ透明の基板として機能する。図２は、ミラー装置１０の内部を示す図である。図２に示すようにハーフミラー１１が設けられた面の背面側は空洞になっており、内部には照明は設けられていない。そのため、ハーフミラー１１は、ミラー装置１０の外部から見ると普通の鏡として機能する。これにより、ユーザは、ハーフミラー１１を鏡として用いて、発信器付きブラシ２０により化粧をすることができる。

そして、図２に示すように、ハーフミラー１１の背面側には、ＬＣＤ（Ｌｕｉｑｕｉｄ
Ｃｒｙｓｔａｌ Ｄｉｓｐｌａｙ）１２が設けられている。ＬＣＤ１２は、その表示面がハーフミラー１１の背面に対向するように配置されている表示装置である。このＬＣＤ１２が、映像効果を表示する表示装置である。

尚、ハーフミラー１１を可能な限り通常の鏡と同様に機能させるため、ＬＣＤ１２以外のミラー装置１０の筐体内部は、黒色のような明度の低い色とすることが好ましい。また、ＬＣＤ１２は、映像効果を表示する表示部分以外は黒色のような明度の低い色を表示していることが好ましい。また、本実施形態においては表示装置としてＬＣＤを用いるが、有機ＥＬ（ＥｌｅｃｔｒｏＬｕｍｉｎｅｓｃｅｎｃｅ）ディスプレイ等の他の表示装置でも良い。

ここで、図３を参照して、本実施形態に係るミラー装置１０の光学的な原理について説明する。図３は、ミラー装置１０を側面から見た状態におけるハーフミラー１１とＬＣＤ１２との配置関係を示すと共に、光の一経路を破線で示す図である。図３に示すように、ミラー装置１０の外側からハーフミラー１１に対向するユーザの顔で反射されてハーフミラー１１に到達する光の一部はハーフミラー１１によって反射され、ハーフミラー１１にユーザの顔の鏡像が映る。

ミラー装置１０の筐体内部は照明の無い暗い状態であるため、ハーフミラー１１を外側から見た場合、ユーザが視認できるのはハーフミラー１１の表面によって反射された光のみであり、結果的に、ハーフミラー１１は普通の鏡として機能する。

他方、ＬＣＤ１２に画像が表示された場合、その画像の光はハーフミラー１１に裏側から到達する。この場合、ＬＣＤ１２に表示された画像の光の一部はハーフミラー１１を透過し、ミラー装置１０を外から視認しているユーザの目に到達する。これにより、ミラー装置１０を外から視認しているユーザには、ハーフミラー１１に映る自身の鏡像と、ＬＣＤ１２によって表示された画像とが合成されて視認される。

本実施形態に係るミラー装置は、図３に示すような光学原理を利用し、ユーザが化粧をする際の発信器付きブラシ２０の動きに応じた映像効果を表示させることにより、化粧をするユーザに面白さを提供することを可能とするものである。

次に、図４（ａ）〜（ｃ）を参照して、本実施形態に係る映像効果について説明する。図４（ａ）は、ハーフミラー１１に映るユーザの鏡像のみを示す図である。図４（ａ）に示すように、ユーザが発信器付きブラシ２０によって化粧をすると、ハーフミラー１１には、発信器付きブラシ２０によって化粧するユーザの鏡像が映る。

これに対して、ミラー装置２０は、発信器付きブラシ２０の位置及び発信器付きブラシ２０の動きを検知する機能を有し、動きを検知した場合、発信器付きブラシ２０の位置に応じてＬＣＤ１２に図４（ｂ）に示すような映像効果を表示させる。図４（ｂ）においては、発信器付きブラシ２０の動きに合わせて星が流れるような映像パターンがエフェクトとして表示される例を示している。

このような場合、図３において説明した光学原理により、ハーフミラー１１を介してユーザに視認されるのは、図４（ｃ）に示すような映像である。即ち、ハーフミラー１１によって反射される自信の鏡像に、ＬＣＤ１２によって表示されたエフェクトが映りこみ、あたかも発信器付きブラシ２０の動きに合わせて星が流れているような映像として視認される。このような映像効果を可能とすることが、本実施形態に係る要旨である。

図４（ｃ）に示すような映像の重ね合わせを容易に実現するため、ハーフミラー１１の半透過部分の範囲と、ＬＣＤ１２の表示面の範囲とは、略同一の形状で構成されていると共に、夫々の面に垂直な方向においてぴったり重なるように配置されていることが好ましい。これにより、ＬＣＤ１２の表示面に表示された映像パターンは、そのままハーフミラー１１の半透過面に移りこむため、複雑な位置合わせのための画像処理を行う必要が無くなる。

例えば、ユーザの顔をカメラで撮影した画像にエフェクトを合成し、表示装置に表示させることによっても、画面上の縦横の位置において、ユーザの顔の辺りにエフェクトを表示させることは可能である。しかしながら、この場合、表示されるエフェクトは画面の表面に表示されているようにしか視認されず、リアリティが無いものとなってしまう。

これに対して、図３に示すように、ハーフミラー１１とＬＣＤ１２とは、所定の間隔分離れて配置されている。そのため、図４（ｃ）に示すような合成された映像がユーザによって視認される際、映像効果はハーフミラー１１の表面ではなく、その奥にあるように視認される。そのため、ハーフミラー１１の縦横の位置だけではなく、奥行においても、鏡像として映る自身の顔の辺りにエフェクトが発生しているようにユーザに視認させることが可能となり、よりリアリティのあるエフェクトとしてユーザに視認させることが可能となる。

従って、ハーフミラー１１の背面に間隔を空けずにＬＣＤ１２を配置することによっても、図４（ｃ）に示すようなエフェクトが合成された表示は可能であるが、上述したようなリアリティのある映像効果を実現するため、ハーフミラー１１とＬＣＤ１２とは離間させて配置することが好ましい。

次に、本実施形態に係るミラー装置１０の機能構成について説明する。図５は、本実施形態に係るミラー装置１０の機能構成を示すブロック図である。図５に示すように、図５に示すように、本実施形態に係るミラー装置１０は、上述したハーフミラー１１及びＬＣＤ１２に加えて、発信器付きブラシ２０の発信を検知して検知信号を出力するセンサ１３と、センサ１３による検知結果に応じてＬＣＤ１２に表示させる映像効果を制御するコントローラ１００を含む。

コントローラ１００は、ソフトウェアとハードウェアとの組み合わせによって構成され、ミラー装置１０を制御する。図５に示すようにコントローラ１００は、センサ制御部１０１、位置計算部１０２、動き検知部１０３、表示制御部１０４及びＬＣＤ駆動部１０５を含む。

センサ制御部１０１は、センサ１３の検知信号を取得し、デジタル情報として位置計算部１０２に入力する。センサ１３及びセンサ制御部１０１の具体例については後に詳述する。位置計算部１０２は、センサ制御部１０１から入力された情報（以降、「センサ情報」とする）に基づき、発信器付きブラシ２０の位置を計算する。ここで計算する発信器付きブラシ２０の位置とは、ハーフミラー１１の面上における位置であり、ＬＣＤ１２の表示面における座標である。

センサ制御部１０１は、所定間隔毎にセンサ１３の検知信号を取得して位置計算部１０２にセンサ情報を入力する。そして、位置計算部１０２は、センサ情報が入力される度に発信器付きブラシ２０の位置を計算し、計算結果をその都度動き検知部１０３に入力する。動き検知部１０３は、位置計算部１０２から所定間隔毎に入力される計算結果に基づき、発信器ブラシ２０の動きを検知する。

図４（ａ）〜（ｃ）において説明したような化粧の動作に応じたエフェクトの表示を可能とするためには、発信器付きブラシ２０の位置を検知するのみでは足りず、化粧をすることにより発信器付きブラシ２０が動いていることを検知する必要がある。動き検知部１０２は、連続して入力される計算結果、即ち発信器付きブラシ２０の位置を比較し、位置の差異が所定の閾値を越えている場合に、発信器付きブラシ２０の動きを検知する。

動き検知部１０３は、発信器付きブラシ２０の動きを検知すると、動きを検知したことを示す情報（以降、「動き検知情報」とする）及び発信器付きブラシ２０の位置（以降、「検知位置情報」とする）を表示制御部１０４に入力する。表示制御部１０４は、動き検知部１０３から動き検知情報及び検知位置情報が入力されると、検知位置情報によって示される位置、即ちＬＣＤ１２の表示面上の座標に、図４（ｂ）に示すような映像パターンのエフェクトを表示させるための表示情報を生成し、その情報をＬＣＤ１２に表示させるようにＬＣＤ駆動部１０５を制御する。

尚、表示制御部１０４は、上述したようにハーフミラー１１を通常の鏡と同様に機能させるため、平時は黒色のような明度の低い色をＬＣＤ１２に表示させるようにＬＣＤ駆動部１０５を制御すると共に、エフェクトを表示させる際にも、その表示部分以外の部分は黒色のような明度の低い色を表示させるようにＬＣＤ駆動部１０５を駆動する。

ＬＣＤ駆動部１０５は、ＬＣＤ１２を駆動するドライバであり、表示制御部１０４の制御に従ってＬＣＤ１２に図４（ｂ）に示すようなエフェクトを表示させる。このような制御により、図４（ｂ）に示すようなエフェクトがＬＣＤ１２に表示され、図４（ｃ）に示すようなハーフミラー１１の表示を得ることができる。

図５に示すコントローラ１００の機能は、上述したようにソフトウェアとハードウェアとの組み合わせによって実現される。図６を参照して、コントローラ１００を構成するハードウェアの構成について説明する。

図６に示すように、本実施形態に係るミラー装置１０のコントローラ１００は、一般的なサーバやＰＣ（Ｐｅｒｓｏｎａｌ Ｃｏｍｐｕｔｅｒ）等と同様の構成を含む。即ち、本実施形態に係るコントローラ１００は、ＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）１１０、ＲＡＭ（Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）１２０、ＲＯＭ（Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ）１３０、ＨＤＤ（Ｈａｒｄ Ｄｉｓｋ Ｄｒｉｖｅ）１４０及びＩ／Ｆ１５０がバス１６０を介して接続されている。

ＣＰＵ１１０は演算手段であり、コントローラ１００全体の動作を制御する。ＲＡＭ１２０は、情報の高速な読み書きが可能な揮発性の記憶媒体であり、ＣＰＵ１１０が情報を処理する際の作業領域として用いられる。ＲＯＭ１３０は、読み出し専用の不揮発性記憶媒体であり、ファームウェア等のプログラムが格納されている。

ＨＤＤ１４０は、情報の読み書きが可能な不揮発性の記憶媒体であり、ＯＳ（Ｏｐｅｒａｔｉｎｇ Ｓｙｓｔｅｍ）や各種の制御プログラム、アプリケーション・プログラム等が格納される。Ｉ／Ｆ１５０は、バス１６０と各種のハードウェアやネットワーク等を接続し制御する。ミラー装置１０においては、ＬＣＤ１２及びセンサ１３が、Ｉ／Ｆ１５０を介して接続されている。

このようなハードウェア構成において、ＲＯＭ１３０やＨＤＤ１４０若しくは図示しない光学ディスク等の記憶媒体に格納されたプログラムがＲＡＭ１２０に読み出され、ＣＰＵ１１０がそれらのプログラムに従って演算を行うことにより、ソフトウェア制御部が構成される。このようにして構成されたソフトウェア制御部と、ハードウェアとの組み合わせによって、本実施形態に係るコントローラ１００の機能を実現する機能ブロックが構成される。

次に、本実施形態に係るコントローラ１００の動作について、図７を参照して説明する。図７に示すように、コントローラ１００が動作を開始すると、センサ制御部１０１がセンサ１３の出力の取得を開始する（Ｓ７０１）。センサ制御部１０１を介してセンサ情報を取得した位置計算部１０２は、センサ情報に基づいて発信器付きブラシ２０の位置を計算し（Ｓ７０２）、計算結果を動き検知部１０３に入力する。

動き検知部１０３は、連続して入力される計算結果を比較し、発信器付きブラシ２０の位置の差異と所定の閾値との比較を行うことにより、発信器付きブラシ２０の動きを検知する（Ｓ７０３）。発信器付きブラシの２０の動きが検知されなければ（Ｓ７０３／ＮＯ）、コントローラ１００は、Ｓ７０１からＳ７０３の処理を繰り返す。Ｓ７０３の処理は、換言すれば、ハーフミラー１１に対向するユーザの行動を検知する処理である。

発信器付きブラシ２０の動きが検知された場合（Ｓ７０３／ＹＥＳ）、動き検知部１０３は、動き検知情報及び検知位置情報を表示制御部１０４に入力する。これにより、表示制御部１０４は、図４（ｂ）に示すようなエフェクトを、検知位置情報によって示されるＬＣＤ１２の画面上の座標に表示させるための表示情報を生成し（Ｓ７０４）、ＬＣＤ駆動部１０５を制御してＬＣＤ１２の表示を制御する（Ｓ７０５）。

コントローラ１００は、図７に示すような動作を繰り返すことにより、ユーザが化粧をしている間、化粧の動きに応じた発信器付きブラシ２０の動きに応じて、図４（ｃ）に示すようなエフェクトを発生させ、化粧をするユーザに面白さを提供することを可能とする。

次に、センサ１３とセンサ制御部１０１の具体例について説明する。図８は、三点測位を用いる場合の例を示す図である。図８の例の場合、発信器付きブラシ２０には発信器２１が埋め込まれている。そして、ハーフミラー１１の４点の角のうち少なくとも３点に、発信器２１が発する電波を検知するセンサ１３ａ〜１３ｃが設けられている。

このように配置されたセンサ１３ａ〜１３ｃによって発信器２１が発信する電波を検知すると、センサ１３ａ〜１３ｃは、発信器２１との距離に応じた強度の信号を出力する。そして、センサ制御部１０１が、センサ１３ａ〜１３ｃから夫々出力された強度の異なる信号を取得し、位置計算部１０２が、三点測位の原理により発信器２１の位置を計算することによって、図９に示すように、発信機付きブラシ２０の空間上の位置をハーフミラー１１の面に垂直な方向に射影した位置を算出することができる。

発信器２１及びセンサ１３ａ〜１３ｃとしては、電磁波の発信及び検知機構であれば様々な形式のものを用いることが可能であり、例えば、ＲＦＩＤ（Ｒａｄｉｏ Ｆｒｅｑｕｅｎｃｙ ＩＤｅｎｔｉｆｉｃａｔｉｏｎ）等を用いることができる。尚、本実施形態においては、ブラシを化粧道具の例とし、発信機付きブラシ２０の位置を検知する場合について説明しているが、ブラシに限らず、口紅、筆、ビューラー等、発信器２１が埋め込まれた化粧道具であれば同様に実現可能である。

また、電磁波に限らず、超音波の発信及び検知機構を用いることも可能である。この場合、センサ制御部１０１は、センサ１３ａ〜１３ｃ夫々が超音波を検知したタイミングを示す情報をセンサ情報として位置計算部１０２に入力する。そして、位置計算部１０２は、上記と同様に三点測位の原理により、センサ１３ａ〜１３ｃ夫々における超音波の検知タイミングの違いに応じて発信器付きブラシ２０の位置を計算する。

図１０は、センサ１３による発信器付きブラシ２０の検知機構として、画像処理を用いる場合の例を示す図である。図１０の例の場合、発信器付きブラシ２０を用いる必要はなく、普通の化粧ブラシ等の化粧道具を用いることができる。但し、ミラー装置１０において用いる化粧道具の画像は位置情報計算部１０２に予め記憶させておく必要がある。

図１０の例に係るミラー装置１０においては、ハーフミラー１１とＬＣＤ１２との間の空間に、カメラ１３が設置されている。カメラ１３は、ハーフミラー１１前方の画像（以降、「前方画像」とする）を撮像して所定のフレームレートで出力する撮像装置である。これにより、センサ制御部１０１は、所定のフレームレートでハーフミラー１１前方の画像を取得し、位置計算部１０２に入力する。

尚、カメラ１３によって撮像される範囲は、ハーフミラー１１の半透過面の範囲と位置合わせされていることが好ましい。これにより、カメラ１３によって撮像された画像に基づいて検知された位置は、ハーフミラー１１の半透過面上における位置に対応したものとなる。そして、上述したように、ハーフミラー１１の半透過面の範囲とＬＣＤ１２の表示面の範囲とは位置合わせされているため、カメラ１３によって撮像された画像に基づいて検知された位置に従ってＬＣＤ１２の表示面上に映像パターンを表示させることにより、ハーフミラー１１の半透過面上における好適な位置に映像パターンを表示させることが可能となる。

位置計算部１０２は、センサ制御部１０１から前方画像を取得すると、上述したように予め記憶している化粧道具の画像に基づいて前方画像内の画像検索を行い、予め画像が登録された化粧道具が前方画像内に含まれるか否か判断する。この画像検索処理においては、既存の画像検索技術を用いることができる。

位置計算部１０２は、所定のフレームレートで入力される前方画像毎に上述した画像検索を行い、予め登録された化粧道具が前方画像から抽出された場合、その化粧道具が抽出された前方画像上の位置、即ち座標を動き検知部１０３に入力する。これにより、上記と同様に位置検知及び動き検知が可能となる。

以上説明したように、本実施形態に係るミラー装置１０によれば、ユーザがミラー装置１０を鏡として利用して化粧をする際に、化粧の動きに応じた映像効果を鏡像に重ねてユーザに視認させることが可能となり、ユーザの動作に応じた映像効果を表示するミラー装置を提供することができる。

尚、上記実施形態においては、発信器付きブラシ２０を用いる際に、図８に示すように発信器２１が埋め込まれたブラシを用いる場合を例として説明した。この場合、ユーザが日頃から利用している化粧道具を利用することができない。このような課題は、図１１に示すように、発信器２１が埋め込まれたカバー２２を、通常の化粧ブラシに被せることにより解決することが可能である。

また、上記実施形態においては、動き検知部１０３が、化粧道具の動きを検知することにより、映像効果の表示タイミングを判断することを例として説明した。この他、映像効果の表示タイミングとして、様々な要因を用いることができる。例えば、ブラシを用いて化粧をする際、ユーザは一定のパターンに従ってブラシを動かすことが考えられる。従って、ブラシ側にモーションセンサや、加速度センサを搭載し、このパターンを検知した場合に検知信号を出力することにより、コントローラ１００において映像効果の表示タイミングを判断することが可能となる。位置の検知においては上記実施形態と同様である。

また、ブラシを用いて化粧をする際、ブラシが顔に接触することによってブラシの毛の部分とブラシの柄の部分との間には圧力がかかることが考えられる。従って、図１２に示すように、ブラシの毛の部分と柄の部分との間の圧力を検知する圧力センサ２３をブラシ側に持たせ、圧力が検知された場合に検知信号を出力することにより、コントローラ１００において映像効果の表示タイミングを判断することが可能となる。位置の検知においては上記実施形態と同様である。

また、上述したように、化粧道具としては、ブラシに限らず様々なものを用いることが可能である。従って、化粧道具の種類に応じて映像効果の内容を変えることにより、よりユーザにとって楽しみのある映像効果を提供することが可能となる。このような態様は、例えば発信器２１が発信する電磁波の周波数を化粧道具の種類毎に異なるものとし、コントローラ１００において、電磁波の周波数に応じて映像効果の内容を変えることにより実現可能である。

また、発信器２１及びセンサ１３の機構としてとしてＲＦＩＤを用いる場合には、発信器２１となるＩＣ（Ｉｎｔｅｇｒａｔｅｄ Ｃｉｒｃｕｉｔ）タグ内に格納されるＩＤ情報を化粧道具の種類毎に変えることにより、コントローラ１００においては、ＩＤ情報に基づいて映像効果の内容を判断することが可能となる。

また、図１０において説明したように画像検索を用いる場合には、位置検知部１０２は夫々の化粧道具毎に画像を記憶しているため、コントローラ１００においては、画像検索により抽出された画像に応じて、映像効果の内容を判断することが可能である。

また、上記実施形態においては、ミラー装置１０を用いて化粧をするユーザに対して映像効果を視認させる場合を例として説明したが、これは一例であり、ミラー装置１０を鏡として用いるユーザに対して映像効果を表示させる場合であれば同様に用いることが可能である。即ち、本実施形態に係る要旨は、センサ１３の検知信号に基づいてユーザの行動を検知し、ユーザの行動が検知された位置に対応するＬＣＤ１２の画面上の位置に映像効果を表示させることにより、ハーフミラーによって反射されるユーザの鏡像とＬＣＤ１２によって表示される映像効果とを重ねてユーザに視認させることにある。

例えば、図１０において説明したカメラを用いる態様により、ハーフミラー１１に対向するユーザの顔認識を行い、更に認識された顔の画像の目の部分を所定のフレームレートで比較することにより、コントローラ１００は、ユーザが目をつぶったことを検知することができる。そして、コントローラ１００は、ユーザが目をつぶった後、短期間で再び目を開けたことを検知した場合、ユーザがウィンクをしたと判断して、ユーザの目の位置に映像効果を表示させることにより、ユーザを楽しませるような映像の表示を行うことができる。

また、センサ１３、センサ制御部１０１、位置計算部１０２及び動き検知部１０３によって構成される検知機能として、ハーフミラー１１に対向するユーザの動きを検知するモーションセンサ機能を持たせることにより、例えばユーザが所定の振り付けを行った場合に、所定の映像効果が表示されるようにＬＣＤ１２の表示を制御することが可能となる。

このような態様は、例えば、動き検知部１０３が、図１３に示すように、モーションセンサ機能によって検知される振付を識別するモーションＩＤと、ＬＣＤ１２に表示させるべき映像効果を識別するエフェクトＩＤとを関連付けて記憶しており、上述したモーションセンサ機能によって検知された振付に関連付けられた映像効果のエフェクトＩＤ及びユーザが検知された位置の情報を表示制御部１０４に通知することによって可能となる。

上述したモーションセンサの機能は、ハーフミラー１１の前方の範囲を検知可能な赤外線センサをセンサ１３として用いると共に、赤外線センサ１３によって取得された情報を時系列に解析する機能を位置計算部１０２及び動き検知部１０３に搭載することによって可能である。また、ハーフミラー１１に対向するユーザの体の各部に発信器を装着し、夫々の発信器の発信する信号に基づいて、図８、９と同様の態様により夫々の発信器の位置を時系列に計算することによっても可能である。

このような場合、センサ１３は、ハーフミラー１１に対向するユーザの行動に応じた検知信号を出力するセンサとなる。尚、発信器付きブラシ２０を検知する場合であっても、ユーザの行動に応じた検知信号を出力することに変わりはない。

１ エフェクトミラーシステム
１０ ミラー装置
１１ ハーフミラー
１２ ＬＣＤ
１３、１３ａ、１３ｂ、１３ｃ センサ
２０ 発信器付きブラシ
２１ 発信器
２２ カバー
２３ 圧力センサ
１１０ ＣＰＵ
１２０ ＲＡＭ
１３０ ＲＯＭ
１４０ ＨＤＤ
１５０ Ｉ／Ｆ
１６０ バス
１００ コントローラ
１０１ センサ制御部
１０２ 位置計算部
１０３ 動き検知部
１０４ 表示制御部
１０５ ＬＣＤ駆動部

特開２０１１−８３５７０号公報

Claims (10)

1. 入射する光の一部を反射すると共に一部を透過させるハーフミラーと、
   表示面が前記ハーフミラーの面に対向するように配置された表示装置と、
   前記ハーフミラーに対向するユーザの行動に応じた検知信号を出力するセンサと、
   前記検知信号に応じて前記表示装置の表示を制御するコントローラとを含み、
   前記コントローラは、
   前記センサの出力信号に基づいて前記ユーザが手にしている器具の位置に対応する前記表示装置の表示面上の位置を算出し、
   前記センサの出力信号の経時的な変化に基づいて前記ユーザが手にしている器具の動きを検知し、
   前記ユーザが手にしている器具の動きを検知した場合に、算出した前記表示面上の位置に前記ユーザが手にしている器具の動きに応じた所定の映像パターンを表示させるように前記表示装置を制御することを特徴とするミラー装置。
2. 前記ハーフミラーと前記表示装置とが離間して配置されていることを特徴とする請求項１に記載のミラー装置。
3. 前記ハーフミラーと前記表示装置の間の空間における前記ミラー装置の筐体の内壁は、黒色及びそれに準ずる明度の色であることを特徴とする請求項２に記載のミラー装置。
4. 前記コントローラは、前記所定の映像パターンを表示させる前記表示装置の表示面の範囲以外の範囲に黒色及びそれに準ずる明度の色を表示させるように前記表示装置を制御することを特徴とする請求項１乃至３いずれか１項に記載のミラー装置。
5. 前記コントローラは、前記ユーザが手にしている器具の種類に応じて、前記所定の映像パターンの内容を変えて表示させることを特徴とする請求項１乃至４いずれか１項に記載のミラー装置。
6. 前記センサは、前記器具に搭載された発信器の発信を検知することにより前記ハーフミラーに対向するユーザの行動に応じた検知信号を出力し、
   前記コントローラは、前記センサの出力信号に基づいて前記器具の位置を求めることにより、前記ユーザが手にしている器具の位置に対応する前記表示装置の表示面上の位置を算出することを特徴とする、請求項５に記載のミラー装置。
7. 前記センサは、前記ミラー装置において異なる位置に複数配置されており、
   前記コントローラは、前記複数のセンサ夫々によって出力される検知信号に基づいて計算を行うことにより、前記器具の位置を求めることを特徴とする請求項６に記載のミラー装置。
8. 前記センサは、前記ハーフミラーに対向する範囲を撮像した画像信号を前記検知信号として出力する撮像装置であり、
   前記コントローラは、予め記憶された前記器具の画像を前記センサが出力する画像信号に応じた画像情報から抽出することによって前記ユーザが手にしている器具の位置に対応する前記表示装置の表示面上の位置を算出すると共に、前記器具の動きを検知することを特徴とする請求項５に記載のミラー装置。
9. 入射する光の一部を反射すると共に一部を透過させるハーフミラーと、
   表示面が前記ハーフミラーの面に対向するように配置された表示装置と、
   前記ハーフミラーに対向するユーザの行動に応じた検知信号を出力するセンサとを含むミラー装置の制御方法であって、
   前記センサの出力信号に基づいて前記ユーザが手にしている器具の位置に対応する前記表示装置の表示面上の位置を算出し、
   前記センサの出力信号の経時的な変化に基づいて前記ユーザが手にしている器具の動きを検知し、
   前記ユーザが手にしている器具の動きを検知した場合に、算出した前記表示面上の位置に前記ユーザが手にしている器具の動きに応じた所定の映像パターンを表示させるように前記表示装置を制御することを特徴とするミラー装置の制御方法。
10. 入射する光の一部を反射すると共に一部を透過させるハーフミラーと、
    表示面が前記ハーフミラーの面に対向するように配置された表示装置と、
    前記ハーフミラーに対向するユーザの行動に応じた検知信号を出力するセンサとを含むミラー装置の制御プログラムであって、
    前記センサの出力信号に基づいて前記ユーザが手にしている器具の位置に対応する前記表示装置の表示面上の位置を算出するステップと、
    前記センサの出力信号の経時的な変化に基づいて前記ユーザが手にしている器具の動きを検知するステップと、
    前記ユーザが手にしている器具の動きを検知した場合に、算出した前記表示面上の位置に前記ユーザが手にしている器具の動きに応じた所定の映像パターンを表示させるように前記表示装置を制御するステップとを情報処理装置に実行させることを特徴とするミラー装置の制御プログラム。

Images