JP2010045730A - 情報処理装置、情報処理方法、遠隔制御装置及び情報処理システム - Google Patents

Abstract

【課題】本発明は、構成を複雑化することなく、簡易な構成でかつユーザの操作性を一段と向上できるようにする。
【解決手段】本発明は、赤外線照射器４から照射された赤外線照射光ＩＦ_ＯＵＴを入射角度と同じ反射角度で反射する再帰性反射材でなる赤外線反射部７がリモコン装置３の表面に設けられている当該赤外線反射部７により反射された赤外線反射光ＩＦ_ＲＥＦを撮像し、その結果得られる撮像画像に基づいて赤外線反射部７に相当する反射像７Ｇを抽出し、反射像７Ｇの動きを検出した後、反射像７Ｇの動きのジェスチャーパターンに対して予め対応付けられた制御コードＤ４を読み出し、当該制御コードＤ４に応じた処理を実行することにより、リモコン装置３を複雑化及び大型化することなく、リモコン装置３自体がユーザに把持された状態で動かされたときのジェスチャーに応じた処理を実行することができる。
【選択図】図１

Description

本発明は、情報処理装置、情報処理方法、遠隔制御装置及び情報処理システムに関し、例えばリモートコントローラ（以下、これをリモコンと呼ぶ）からの命令を受け付けて各種機能を実現するテレビジョン装置に適用して好適なものである。

従来、テレビジョン装置においては、赤外線が用いられたリモコンを介して供給された命令に従って各種機能を制御し得るようになされており、その際、ユーザが制御したい機能に対応付けられたボタンを探して押し下げる操作が必要となる。

しかしながら、ボタンに記載されている機能表示文字の大きさには制限があり、また、同じ大きさのボタンが複数配置されているため、制御したい機能に対応付けられたボタンを探して押し下げる操作自体がユーザにとって煩雑であり、かつ面倒であった。

また、リモコン自体の動きを判定する目的でジャイロセンサが内蔵され、当該ジャイロセンサによって判定した動きをテレビジョン装置へ通知するリモコンが提案されている（例えば、特許文献１参照）。
特開2007-142513公報

ところでかかる構成のジャイロセンサが内蔵されたリモコンにおいては、当該ジャイロセンサを内蔵する必要性、リモコン自体の動きを電波等によって電子的に通知する必要性があり、その構成が複雑で大型化してしまうという問題があった。

また、リモコンの動きを検出するために、テレビジョン装置に対して可視光線を撮像可能なカメラを内蔵させ、その可視光線の撮像結果に基づいてリモコンの動きを検出する方法も考えられるが、テレビジョン装置のある部屋が暗い場合、ノイズが多くなって、リモコンの動きを正確に判定できなくなるという問題がある。

本発明は以上の点を考慮してなされたもので、簡易な構成でかつユーザの操作性を一段と向上し得る情報処理装置、情報処理方法、遠隔制御装置及び情報処理システムを提案しようとするものである。

かかる課題を解決するため本発明の情報処理装置及び情報処理方法においては、赤外線を照射する赤外線照射部から照射された赤外線照射光を入射角度と同じ反射角度で反射する赤外線反射部が遠隔制御装置の表面に設けられている当該赤外線反射部により反射された赤外線反射光を撮像し、その結果得られる撮像画像に基づいて赤外線反射部に相当する反射像を抽出し、反射像の動きを検出した後、反射像の動きのパターンに対して予め対応付けられた制御コードを読み出し、当該制御コードに応じた処理を実行するようにする。

これにより、遠隔制御装置を複雑化及び大型化することなく、遠隔制御装置自体がユーザに把持された状態で動かされたときの動きパターンに応じた処理を実行することができる。

また本発明の遠隔制御装置においては、赤外線照射部から照射された赤外線照射光が入射角度と同じ反射角度で反射されたときの赤外線反射光を撮像部によって撮像し、その結果得られた撮像画像に基づいて赤外線の反射像を抽出し、反射像の動きを検出し、反射像の動きのパターンに対して予め対応付けられた制御コードに応じた処理を実行する情報処理装置を対象とし、その表面に設けられ、赤外線を入射角度と同じ反射角度で反射するようになされた赤外線反射部を具えるようにする。

これにより、構造を複雑化及び大型化することなく、簡単な動きだけで情報処理装置を遠隔制御することができる。

さらに本発明の情報処理システムにおいては、赤外線を照射する赤外線照射部から照射された赤外線照射光を入射角度と同じ反射角度で反射する赤外線反射部が遠隔制御装置の表面に設けられている当該赤外線反射部により反射された赤外線反射光を撮像する撮像部と、撮像部によって得られる撮像画像に基づいて赤外線反射部に相当する反射像を抽出する反射像抽出部と、反射像の動きを検出する動き検出部と、反射像の動きのパターンに対して予め対応付けられた制御コードを読み出し、当該制御コードに応じた処理を実行する処理実行部とからなる情報処理装置と、赤外線反射部がその表面に設けられ、赤外線を入射角度と同じ反射角度で反射する遠隔制御装置とを具えるようにする。

これにより、遠隔制御装置を複雑化及び大型化することなく、遠隔制御装置自体がユーザに把持された状態で動かされたときの動きパターンに応じた処理を情報処理装置に実行させることができる。

本発明によれば、遠隔制御装置を複雑化及び大型化することなく、遠隔制御装置自体がユーザに把持された状態で動かされたときの動きパターンに応じた処理を実行することができ、かくして簡易な構成でかつユーザの操作性を一段と向上し得る情報処理装置及び情報処理方法を実現することができる。

また本発明によれば、構造を複雑化及び大型化することなく、簡単な動きだけで情報処理装置を遠隔制御することができ、かくして簡易な構成でかつユーザの操作性を一段と向上し得る遠隔制御装置を実現することができる。

さらに本発明によれば、遠隔制御装置を複雑化及び大型化することなく、遠隔制御装置自体がユーザに把持された状態で動かされたときの動きパターンに応じた処理を情報処理装置に実行させることができ、かくして簡易な構成でかつユーザの操作性を一段と向上し得る 情報処理システムを実現することができる。

以下、図面について、本発明の一実施の形態を詳述する。

（１）第１の実施の形態
（１−１）テレビジョンシステムの全体構成
図１において、１は全体として本発明の第１の実施の形態におけるテレビジョンシステムの全体構成を示し、テレビジョン装置２とリモートコントローラ（以下、これをリモコンと呼ぶ。）装置３とによって構成されている。

（１−２）テレビジョン装置の外観構成
テレビジョン装置２（図１）は、映像を表示するためのＬＣＤ(Liquid Crystal Display)２Ａ及び当該ＬＣＤ２Ａの下方に設けられたスピーカ２Ｂを有し、当該ＬＣＤ２Ａの左上端部には赤外線カメラ５が、右上端部には赤外線照射器４が取り付けられている。

赤外線照射器４は、リモコン装置３へ向けて赤外線照射光ＩＦ_ＯＵＴを出射するようになされており、赤外線カメラ５は当該リモコン装置３によって赤外線照射光ＩＦ_ＯＵＴが反射されたときの赤外線反射光ＩＦ_ＲＥＦを撮像するようになされている。

なおテレビジョン装置２は、ＬＣＤ２Ａとスピーカ２Ｂとの間にリモコン受光部２Ｃが設けられている。

（１−３）リモコン装置の外観構成
リモコン装置３（図１）は、リモコン本体部３Ａの表面にリモコンボタン群３Ｂを有し、当該リモコンボタン群３Ｂのボタンに対するユーザの押下操作に応じたリモコンコードを、先端部に設けられたリモコンコード発光部６から赤外線ＩＦによってテレビジョン装置２へ送信するようになされている。

このときテレビジョン装置２は、ＬＣＤ２Ａとスピーカ２Ｂとの間に設けられたリモコン受光部２Ｃにより、リモコン装置３のリモコンコード発光部６から赤外線ＩＦにより送信されたリモコンコードを受信し、当該リモコンコードに応じた所定の機能を実行し得るようになされている。

またリモコン装置３では、リモコンコード発光部６の隣に、矩形状でかる平板状の再帰性反射材でなる赤外線反射部７が設けられており、テレビジョン装置２の赤外線照射器４から照射された赤外線照射光ＩＦ_ＯＵＴを当該赤外線反射部７により入射角度と同じ反射角度で反射するようになされている。なお、赤外線反射部７としては、再帰性反射材だけではなく、鏡やアルミ拍が用いられていても良い。

ここで図２に示すように、赤外線反射部７に用いられている再帰性反射材ＭＤの構造について説明する。再帰性反射材ＭＤは、ライナーＬ１のうえに半球状の反射膜Ｍ１が形成され、その反射膜Ｍ１に対して多数のガラスビーズでなる球状レンズＲ１が埋め込まれた露出レンズ型の構造を有している。

図３に示すように、透過性質を持つガラスビーズでなる球状レンズＲ１に入射角２αで入った赤外線の入射光ＩＬは、その表面で屈折し、球状レンズＲ１の内部で反射し、再び表面で屈折した後に当該球状レンズＲ１から出射光ＯＬとして出て行くようになされている。

すなわち再帰性反射材ＭＤは、球状レンズＲ１を介して、最終的には、入射光ＩＬの入射角度と出射光ＯＬの出射角度とが等しくなるので、入射した方向へ赤外線光を反射するようになされている。このように再帰性反射材ＭＤでは、あらゆる方向から入射した赤外線光に対しても常に入射した方向へ当該赤外線光を反射し得るようになされている。

なお、再帰性反射材ＭＤの構造としては、図２に示したような露出レンズ型だけではなく、カプセルレンズ型（高輝度型）又は封入レンズ型等の種々の構造であっても構わない。

従って、図４に示すように、リモコン装置３の赤外線反射部７に用いられている再帰性反射材ＭＤは、テレビジョン装置２の赤外線照射器４から照射された赤外線照射光ＩＦ_ＯＵＴ（実線）を、その入射した同じ方向へ赤外線反射光ＩＦ_ＲＥＦ（破線）として送り返すことが出来るようになされている。

このことによりテレビジョンシステム１では、テレビジョン装置２の赤外線照射器４から照射された赤外線照射光ＩＦ_ＯＵＴに対して、ユーザがリモコン装置３を持ったまま、どのような角度で動かしたとしても、その赤外線反射光ＩＦ_ＲＥＦをテレビジョン装置２へ送り返すことが出来るので、当該赤外線反射光ＩＦ_ＲＥＦを赤外線カメラ５により撮像し得るようになされている。

（１−４）テレビジョン装置の回路構成
図５に示すように、テレビジョン装置２は、ＣＰＵ(Central Processing Unit)構成でなる制御部３０がディジタルテレビジョン放送受信部１０及びジェスチャー検出部１１等を含めた全体を統括制御するようになされている。

これによりテレビジョン装置２の制御部３０は、ディジタルテレビジョン放送受信部１０により通常のテレビジョン放送の受信表示処理を行い、ジェスチャー検出部１１によりリモコン装置３を持ったユーザの動きを表したジャスチャー動作を検出するジェスチャー検出処理を行うようになされている。

テレビジョン装置２では、ディジタルテレビジョン放送受信部１０によるテレビジョン放送の受信表示処理時、アンテナ１２を介して受信した地上ディジタル放送の放送波Ｓ１をＲＦ(Radio Frequency)受信部１３によって所定レベルに増幅することにより放送信号Ｓ２に変換し、これを復調部１４へ送出する。

復調部１４は、制御部３０からの復調制御信号に従って放送信号Ｓ２を所定の復調方式に従って復調することによりディジタル多重化データＳ３を復元し、これを多重分離部１５へ送出する。

多重分離部１５は、ディジタル多重化データＳ３を映像データＶＤ１、音声データＡＤ１、チャンネルデータＣＤ１及びＥＰＧ(Electric Program Guide)データＥＤ１に分離する。

そして多重分離部１５は、映像データＶＤ１を映像デコード部１６へ送出し、音声データＡＤ１を音声デコード部１７へ送出し、チャンネルデータＣＤ１及びＥＰＧデータＥＤ１を制御部３０へ送出する。

このとき制御部３０は、リモコン装置３のリモコンコード発光部６から送信された放送局の選局先を意味するリモコンコードＲＣ１を、リモコン受光部２Ｃを介して受信すると、映像デコード部１６に対して選局先の映像データＶＤ１をデコードするための指示を出力する。

これを受けて映像デコード部１６は、選局先として指示された放送局の映像データＶＤ１を所定の方式に従ってデコードし、その結果得られる映像信号ＶＤ２を映像混合器１８へ送出するようになされている。

また制御部３０は、多重分離部１５から供給されたチャンネルデータＣＤ１及びＥＰＧデータＥＤ１に基づいてテレビ番組表、放送局名、チャンネル番号等の地上ディジタル放送に関連した関連情報を取得する。

そして制御部３０は、地上ディジタル放送に関連した関連情報を基に、映像信号ＶＤ２に対して重畳すべき表示イメージデータＩＭを生成し、当該表示イメージデータＩＭ１を映像信号ＶＤ２に重畳したときの透過度の割合情報αと共にＯＳＤ(On Screen Display)表示生成部２５へ送出する。

ＯＳＤ表示生成部２５は、制御部３０から供給された表示イメージデータＩＭ１を割合情報αの透過度に従って加工し、所定の透過度でなる表示イメージデータＩＭ２を映像混合器１８へ送出する。

映像混合器１８は、映像デコード部１６から供給される映像信号ＶＤ２に対して、ＯＳＤ表示生成部２５から供給される表示イメージデータＩＭ２を混合することにより重畳し、その結果得られる混合映像信号ＶＤ３をＬＣＤ２Ａに出力することにより番組映像として表示するようになされている。

一方、音声デコード部１７は、多重分離部１５から供給された選局先の音声データＡＤ１についても所定の方式でデコードし、その結果得られる音声信号ＡＤ２をスピーカ２Ｂから番組音声として出力するようになされている。

ところでテレビジョン装置２は、ジェスチャー検出部１１によるジェスチャー検出処理時、制御部３０からの制御信号に従って赤外線照射器４からリモコン装置３へ向かって赤外線照射光ＩＦ_ＯＵＴを出射し、そのときリモコン装置３の赤外線反射部７によって反射された赤外線反射光ＩＦ_ＲＥＦを赤外線カメラ５によって撮像する。

赤外線カメラ５は、赤外線反射光ＩＦ_ＲＥＦを撮像することにより、リモコン装置３を把持した状態でユーザが手を動かしたときの当該リモコン装置３の反射像映像データＤ１を取得し、これを反射像抽出部２１へ送出する。

反射像抽出部２１は、反射像映像データＤ１がリモコン装置３の赤外線反射部７によって反射された赤外線反射光ＩＦ_ＲＥＦだけではなく、他の要因によって反射した反射光についても含まれていることを考慮し、反射像映像データＤ１の最初のフレームに相当する反射像画像からリモコン装置３の赤外線反射部７に対応した反射像だけを抽出するようになされている。

実際上、反射像抽出部２１は、図６に示すように、赤外線カメラ５によって撮影された反射像映像データＤ１の最初のフレームに相当する反射像画像Ｇ１の中から、リモコン装置３の赤外線反射部７の形状及び大きさと近似した反射像７Ｇを特定し、当該反射像７Ｇだけを抽出するようになされている。

これにより反射像抽出部２１は、図７に示すように、当該反射像７Ｇだけが含まれた反射像抽出画像Ｇ２を１フレーム目として、当該反射像７Ｇだけの動きを表した反射像抽出映像データＤ２を動き検出部２２へ送出する。

因みに、このとき反射像抽出部２１は、赤外線カメラ５の画角に対応した焦点距離が分かっているので、反射像画像Ｇ１に映し出されている反射像７Ｇの大きさについても予測可能であり、その予測した反射像７Ｇの大きさと赤外線反射部７の大きさとを比較し、近似するか否かを判別し得るようになされている。

また反射像抽出部２１は、そのうえで、反射像７Ｇと赤外線反射部７との形状についても比較して近似したときに限って、反射像７Ｇがリモコン装置３の赤外線反射部７に相当するものであると推定することにより、推定結果の正確性を一段と向上させ得るようになされている。

動き検出部２２は、反射像抽出映像データＤ２に基づいてフレーム間差分を求めることにより、反射像７Ｇの動く軌跡を検出する。

具体的には、動き検出部２２は、図８（Ａ）に示すように、反射像７Ｇが右方向から左方向へ移動して停止したとき、リモコン装置３の動きが「右から左」のジェスチャーパターンであることを検出し得るようになされている。

また動き検出部２２は、図８（Ｂ）に示すように、反射像７Ｇが下方向から上方向へ移動して停止したとき、リモコン装置３の動きが「下から上」のジェスチャーパターンであることを検出し得るようになされている。

さらに動き検出部２２は、図８（Ｃ）に示すように、反射像７Ｇが左下方向から右下方向側へ向かって円を描くように移動して停止したとき、リモコン装置３の動きが「左回り○」のジェスチャーパターンであることを検出し得るようになされている。

さらに動き検出部２２は、図８（Ｄ）に示すように、反射像７Ｇが左下方向から右上方向へ移動して停止したとき、リモコン装置３の動きが「左下から右上」のジェスチャーパターンであることを検出し得るようになされている。

さらに動き検出部２２は、図８（Ｅ）に示すように、反射像７Ｇが左下方向から中央上方向へ一度移動した後に、右下方向へ移動して停止したような「ヘ」の字状の動きをしたとき、リモコン装置３の動きが「左から“ヘ”の字」のジェスチャーパターンであることを検出し得るようになされている。

このように動き検出部２２は、反射像７Ｇの時間的な動きの速さ及び動く方向を検出することによりリモコン装置３の動きに応じたジェスチャーパターンをそれぞれ検出し得、そのジェスチャーパターン情報Ｄ３をコード変換部２３へ送出する。

なお、動き検出部２２は、反射像７Ｇの動きの早さにばらつきが有るため、冗長度を持って判断することにより、ジェスチャーパターンを確実に検出し得るようになされている。

ところでコード変換ルール記憶部２４には、図９に示すように予めジェスチャーパターン毎に対応したジェスチャーパターン情報Ｄ３と、ディジタルテレビジョン放送受信部１０に対する制御コードＤ４と、が相互に組み合わされたジェスチャーパターン／制御コード変換テーブルＴ１が記憶されている。

従ってコード変換部２３は、動き検出部２２により検出したジェスチャーパターン情報Ｄ３をコード変換ルール記憶部２４へ供給する。これによりコード変換部２３は、当該ジェスチャーパターン情報Ｄ３に対応した制御コードＤ４をコード変換ルール記憶部２４から受け取り、これを制御部３０へ送出するようになされている。

ここでジェスチャーパターン／制御コード変換テーブルＴ１は、「右から“へ”の字」のジェスチャーパターン情報Ｄ３に対しては、「電源ＯＮ」の制御コードＤ４が対応付けられ、「左から“へ”の字」のジェスチャーパターン情報Ｄ３に対しては、「電源ＯＦＦ」の制御コードＤ４が対応付けられている。

またジェスチャーパターン／制御コード変換テーブルＴ１は、例えば「右から左」のジェスチャーパターン情報Ｄ３に対しては、「チャンネルアップ」の制御コードＤ４が対応付けられ、「左から右」のジェスチャーパターン情報Ｄ３に対しては、「チャンネルダウン」の制御コードＤ４が対応付けられている。

さらに、ジェスチャーパターン／制御コード変換テーブルＴ１では、「下から上」のジェスチャーパターン情報Ｄ３に対しては、「ボリュームアップ」の制御コードＤ４が対応付けられ、「上から下」のジェスチャーパターン情報Ｄ３に対しては、「ボリュームダウン」の制御コードＤ４が対応付けられている。

さらに、ジェスチャーパターン／制御コード変換テーブルＴ１では、「左下から右上」のジェスチャーパターン情報Ｄ３に対しては、「明るさアップ」の制御コードＤ４が対応付けられ、「右上から左下」のジェスチャーパターン情報Ｄ３に対しては、「明るさダウン」の制御コードＤ４が対応付けられている。

さらに、ジェスチャーパターン／制御コード変換テーブルＴ１では、「右回り○」のジェスチャーパターン情報Ｄ３に対しては、「メニューＯＮ」の制御コードＤ４が対応付けられ、「左回り○」のジェスチャーパターン情報Ｄ３に対しては、「メニューＯＦＦ」の制御コードＤ４が対応付けられている。

さらに、ジェスチャーパターン／制御コード変換テーブルＴ１では、「右回り△」のジェスチャーパターン情報Ｄ３に対しては、「入力切換 送り」の制御コードＤ４が対応付けられ、「左回り△」のジェスチャーパターン情報Ｄ３に対しては、「入力切換 戻し」の制御コードＤ４が対応付けられている。

なお、ジェスチャーパターン／制御コード変換テーブルＴ１では、上述した組み合わせだけではなく、その他種々の組み合わせによるジェスチャーパターン情報Ｄ３と制御コードＤ４とが対応付けられている。

制御部３０は、コード変換部２３からの制御コードＤ４に応じた制御命令をディジタルテレビジョン放送受信部１０へ出力することにより、チャンネル変更、ボリューム変更、明るさ調整、電源ＯＮ／ＯＦＦ等のテレビジョン装置２のディジタルテレビジョン放送受信部１０に対する種々の機能を制御し得るようになされている。

なお制御部３０は、リモコン装置３からのリモコンコードＲＣ１をリモコン受光部２Ｃ経由で受け取った場合、そのリモコンコードＲＣ１に従って、チャンネル変更、ボリューム変更、明るさ調整、電源ＯＮ／ＯＦＦ等のテレビジョン装置２のディジタルテレビジョン放送受信部１０に対する種々の機能を制御し得るようになされている。

（１−５）リモコン装置の回路構成
図１０に示すようにリモコン装置３は、その表面に赤外線反射材７が取り付けられ、内部のＣＰＵ４０がバッテリ４２から供給される電力に従って動作し、ＲＯＭ(Read Only Memory)４１に格納されている基本プログラムに従って全体を統括制御すると共に、リモコン装置としての基本的な処理を実行するようになされている。

リモコン装置３のＣＰＵ４０は、リモコンボタン群３Ｂの何れかのボタンがユーザによって押下操作されたとき、当該ボタンに対応付けられているリモコンコードＲＣ１をバス４３経由で受け取り、そのリモコンコードＲＣ１をリモコンコード発光部６からテレビジョン装置２へ赤外線ＩＦにより送信するようになされている。

（１−６）第１の実施の形態における動作及び効果
以上の構成において、テレビジョンシステム１では、テレビジョン装置２の赤外線照射器４から出射される赤外線照射光ＩＦ_ＯＵＴを、入射方向と同じ反射方向へ送り返すことが可能な再帰性反射材からなる赤外線反射部７により赤外線反射光ＩＦ_ＲＥＦとして反射させることにより、リモコン装置３を握持して動かすユーザのジェスチャーを赤外線カメラ５によって確実かつ正確に撮影することができる。

従ってテレビジョンシステム１では、テレビジョン装置２の赤外線カメラ５によって撮影した結果得られるジェスチャーパターン情報Ｄ３が何の制御コードＤ４に対応付けられているかを、ジェスチャーパターン／制御コード変換テーブルＴ１に基づいて判別し、その制御コードＤ４に応じたディジタルテレビジョン放送受信部１０による機能を制御することができる。

すなわちテレビジョンシステム１は、ユーザに対してリモコン装置３のリモコンボタン群３Ｂにおける各種ボタン操作を一切行わせることなく、単にリモコン装置３を握持した状態で動かしさえすれば、テレビジョン装置２がそのときのジェスチャーパターンを正確に認識し、そのジェスチャーパターンに応じた機能を直ちに実現することができる。

このときリモコン装置３には、再帰性反射材からなる赤外線反射部７が取り付けられているため、テレビジョン装置２の赤外線照射器４とリモコン装置３の赤外線反射部７とを互いに向き合わせる必要がない。

従ってテレビジョンシステム１では、ユーザがリモコン装置３を握持したまま動かしさえすれば、テレビジョン装置２に対してユーザ所望の機能を容易に実行させることができる。

さらにテレビジョンシステム１では、テレビジョン装置２の赤外線照射器４から出射する赤外線照射光ＩＦ_ＯＵＴをリモコン装置３により反射させ、赤外線反射光ＩＦ_ＲＥＦとして赤外線カメラ５によって撮影するようにしたことにより、室内の明るさが不十分な使用環境下であっても、リモコン装置３を介してユーザの意図を確実にテレビジョン装置２へ伝達することができる。

さらにリモコン装置３としては、その表面に赤外線反射部７を貼り付けただけの簡単な構成で済むため、構造の複雑化及び大型化を招くことなく、ユーザの使い勝手を妨げることがなく、これまでと同様に使い易さを提供することができる。

以上の構成によれば、テレビジョンシステム１は、テレビジョン装置２及びリモコン装置３の構造を複雑化及び大型化することなく、ユーザに対してリモコン装置３を握持させたまま動かさせるだけで、テレビジョン装置２を遠隔制御することができ、かくして簡易な構成でかつユーザの操作性を一段と向上することができる。

（２）第２の実施の形態
（２−１）テレビジョンシステムの全体構成
図１に示したように、５０は全体として本発明の第２の実施の形態におけるテレビジョンシステムの全体構成を示し、第１の実施の形態におけるテレビジョンシステム１と基本的には同じ全体構成であり、テレビジョン装置５２とリモコン装置３とによって構成されている。

（２−２）テレビジョン装置及びリモコン装置の外観構成
また第２の実施の形態におけるテレビジョン装置５２及びリモコン装置３の外観構成としても、第１の実施の形態と同じであり、便宜上その説明を省略する。

（２−３）テレビジョン装置の回路構成
図５との対応部分に同一符号を付した図１１に示すように、テレビジョン装置５２においても、ＣＰＵ構成でなる制御部３０がディジタルテレビジョン放送受信部１０及びジェスチャー検出部１１等を含めた全体を統括制御するようになされている。

これによりテレビジョン装置５２の制御部３０は、ディジタルテレビジョン放送受信部１０により通常のテレビジョン放送の受信表示処理を行い、ジェスチャー検出部１１によりリモコン装置３を持ったユーザのジャスチャー動作を検出するジェスチャー検出処理を行うようになされている。

このテレビジョン装置５２おいても、ディジタルテレビジョン放送受信部１０によるテレビジョン放送の受信表示処理と、第１の実施の形態におけるテレビジョン装置２のディジタルテレビジョン放送受信部１０によるテレビジョン放送の受信表示処理とが同じであるため、便宜上その説明を省略する。

ところでテレビジョン装置５２では、ジェスチャー検出部１１によるジェスチャー検出処理時、制御部３０からの制御信号に従って赤外線照射器４からリモコン装置３へ向かって赤外線照射光ＩＦ_ＯＵＴを出射し、そのときリモコン装置３の赤外線反射部７によって反射された赤外線反射光ＩＦ_ＲＥＦを赤外線カメラ５によって撮像する。

赤外線カメラ５は、赤外線反射光ＩＦ_ＲＥＦを撮像することにより、リモコン装置３を把持した状態でユーザが手を動かしたときの当該リモコン装置３の反射像映像データＤ１を取得し、これを反射像抽出部２１へ送出する。

反射像抽出部２１は、反射像映像データＤ１がリモコン装置３の赤外線反射部７によって反射された赤外線反射光ＩＦ_ＲＥＦだけではなく、他の要因によって反射した反射光についても含まれていることを考慮し、反射像映像データＤ１の最初のフレームに相当する反射像画像からリモコン装置３の赤外線反射部７に対応した反射像だけを抽出するようになされている。

実際上、反射像抽出部２１は、図６に示したように、赤外線カメラ５によって撮影された反射像映像データＤ１の最初のフレームに相当する反射像画像Ｇ１の中から、リモコン装置３の赤外線反射部７の形状及び大きさと近似した反射像７Ｇを特定し、当該反射像７Ｇだけを抽出するようになされている。

これにより反射像抽出部２１は、図７に示したように、当該反射像７Ｇだけが含まれた反射像抽出画像Ｇ２を１フレーム目として、当該反射像７Ｇだけの動きを表した反射像抽出映像データＤ２を動き検出部２２へ送出する。

因みに、このとき反射像抽出部２１は、赤外線カメラ５の画角に対応した焦点距離が分かっているので、反射像画像Ｇ１に映し出されている反射像７Ｇの大きさについても予測可能であり、その予測した反射像７Ｇの大きさと赤外線反射部７の大きさとを比較し、近似するか否かを判別し得るようになされている。

また反射像抽出部２１は、そのうえで、反射像７Ｇと赤外線反射部７との形状についても比較して近似したときに限って、反射像７Ｇがリモコン装置３の赤外線反射部７に相当するものであると推定することにより、推定結果の正確性を一段と向上させ得るようになされている。

動き検出部２２は、反射像抽出映像データＤ２に基づいてフレーム間差分を求めることにより、反射像７Ｇの動く軌跡を検出する。

具体的には、動き検出部２２は、図８（Ａ）〜図８（Ｅ）に示したように、反射像７Ｇの動きに基づいて、それぞれのジェスチャーパターンを検出し得るようになされている。

このように動き検出部２２は、反射像７Ｇの時間的な動きの速さ及び動く方向を検出することによりジェスチャーパターンをそれぞれ検出し得、そのジェスチャーパターン情報Ｄ３をコード変換部２３へ送出する。

なお、動き検出部２２は、反射像７Ｇの動きは、その早さにばらつきが有るため、冗長度を持って判断することにより、ジェスチャーパターンを確実に検出し得るようになされている。

ところでコード変換ルール記憶部２４には、図９に示したように予めジェスチャーパターン情報Ｄ３と制御コードＤ４とが組み合わされたジェスチャーパターン／制御コード変換テーブルＴが記憶されている。

従ってコード変換部２３は、動き検出部２２により検出したジェスチャーパターン情報Ｄ３をコード変換ルール記憶部２４へ供給する。これによりコード変換部２３は、当該ジェスチャーパターン情報Ｄ３に対応した制御コードＤ４をコード変換ルール記憶部２４から受け取り、これを制御部３０へ送出するようになされている。

ここでジェスチャーパターン／制御コード変換テーブルＴ１は、「右から“へ”の字」のジェスチャーパターン情報Ｄ３に対しては、「電源ＯＮ」の制御コードＤ４が対応付けられ、「左から“へ”の字」のジェスチャーパターン情報Ｄ３に対しては、「電源ＯＦＦ」の制御コードＤ４が対応付けられている。

またジェスチャーパターン／制御コード変換テーブルＴ１は、例えば「右から左」のジェスチャーパターン情報Ｄ３に対しては、「チャンネルアップ」の制御コードＤ４が対応付けられ、「左から右」のジェスチャーパターン情報Ｄ３に対しては、「チャンネルダウン」の制御コードＤ４が対応付けられている。

さらに、ジェスチャーパターン／制御コード変換テーブルＴ１では、「下から上」のジェスチャーパターン情報Ｄ３に対しては、「ボリュームアップ」の制御コードＤ４が対応付けられ、「上から下」のジェスチャーパターン情報Ｄ３に対しては、「ボリュームダウン」の制御コードＤ４が対応付けられている。

さらに、ジェスチャーパターン／制御コード変換テーブルＴ１では、「左下から右上」のジェスチャーパターン情報Ｄ３に対しては、「明るさアップ」の制御コードＤ４が対応付けられ、「右上から左下」のジェスチャーパターン情報Ｄ３に対しては、「明るさダウン」の制御コードＤ４が対応付けられている。

さらに、ジェスチャーパターン／制御コード変換テーブルＴ１では、「右回り○」のジェスチャーパターン情報Ｄ３に対しては、「メニューＯＮ」の制御コードＤ４が対応付けられ、「左回り○」のジェスチャーパターン情報Ｄ３に対しては、「メニューＯＦＦ」の制御コードＤ４が対応付けられている。

さらに、ジェスチャーパターン／制御コード変換テーブルＴ１では、「右回り△」のジェスチャーパターン情報Ｄ３に対しては、「入力切換 送り」の制御コードＤ４が対応付けられ、「左回り△」のジェスチャーパターン情報Ｄ３に対しては、「入力切換 戻し」の制御コードＤ４が対応付けられている。

なお、ジェスチャーパターン／制御コード変換テーブルＴ１では、上述した組み合わせだけではなく、その他種々の組み合わせによるジェスチャーパターン情報Ｄ３と制御コードＤ４とが対応付けられている。

制御部３０は、コード変換部２３から論理和回路３１を介して受け取った制御コードデータＤ４に応じた制御命令をディジタルテレビジョン放送受信部１０へ出力することにより、チャンネル変更、ボリューム変更、明るさ調整、電源ＯＮ／ＯＦＦ等のテレビジョン装置２のディジタルテレビジョン放送受信部１０に対する種々の機能を制御し得るようになされている。

また制御部３０は、リモコン装置３からのリモコンコードＲＣ１をリモコン受光部２Ｃ及び論理和回路３１を介して受け取り、そのリモコンコードＲＣ１に従って、チャンネル変更、ボリューム変更、明るさ調整、電源ＯＮ／ＯＦＦ等のテレビジョン装置２のディジタルテレビジョン放送受信部１０に対する種々の機能を制御し得るようになされている。

ここで、制御部３０がコード変換部２３から論理和回路３１経由で受け取る制御コードＤ４と、リモコン装置３からリモコン受光部２Ｃ及び論理和回路３１経由で受け取るリモコンコードＲＣ１とは、ビット数及びその値が同じ同一体系のコードである。

従って制御部３０は、論理和回路３１から制御コードＤ４又はリモコンコードＲＣ１の何れが供給されたときであっても、特に供給元を判別する必要がなく、その制御コードＤ４又はリモコンコードＲＣ１が共通に意味するところの命令を認識し得るようになされている。

これによりテレビジョン装置２の制御部３０は、制御コードＤ４又はリモコンコードＲＣ１の供給元を意識することなく、同一体系の制御コードＤ４又はリモコンコードＲＣ１に従ってユーザ所望の機能を制御し得るようになされている。

（２−４）リモコン装置の回路構成
第２の実施の形態におけるリモコン装置３の回路構成としても、第１の実施の形態におけるリモコン装置３の回路構成と同じであるため、便宜上その説明を省略する。

（２−５）第２の実施の形態における動作及び効果
以上の構成において、テレビジョンシステム５０では、テレビジョン装置５２の赤外線照射器４から出射される赤外線照射光ＩＦ_ＯＵＴを、入射方向と同じ反射方向へ送り返すことが可能な再帰性反射材からなる赤外線反射部７により赤外線反射光ＩＦ_ＲＥＦとして反射させることにより、リモコン装置３を握持して動かすユーザのジェスチャーを赤外線カメラ５によって確実かつ正確に撮影することができる。

従ってテレビジョンシステム５０では、テレビジョン装置５２の赤外線カメラ５によって撮影した結果得られるジェスチャーパターン情報Ｄ３が何の制御コードＤ４に対応付けられているかを、ジェスチャーパターン／制御コード変換テーブルＴ１に基づいて判別し、その制御コードＤ４に応じたディジタルテレビジョン放送受信部１０による機能を制御することができる。

すなわちテレビジョンシステム５０は、ユーザにリモコン装置３のリモコンボタン群３Ｂにおける各種ボタン操作を一切行わせることなく、単にリモコン装置３を握持させた状態で動かさせさえすれば、そのときのジェスチャーパターンを正確に認識し、そのジェスチャーパターンに応じた機能を直ちに実現することができる。

このときリモコン装置３には、再帰性反射材からなる赤外線反射部７が取り付けられているため、テレビジョン装置５２の赤外線照射器４とリモコン装置３の赤外線反射部７とを互いに向き合わせる必要がない。

従ってテレビジョンシステム５０では、ユーザがリモコン装置３を握持したまま動かしさえすれば、テレビジョン装置５２に対してユーザ所望の機能を簡単に実行させることができる。

またテレビジョンシステム５０では、テレビジョン装置５２の赤外線照射器４から出射する赤外線照射光ＩＦ_ＯＵＴをリモコン装置３により反射させ、赤外線反射光ＩＦ_ＲＥＦとして赤外線カメラ５によって撮影することにより、室内の明るさが不十分な使用環境下であっても、リモコン装置３を介してユーザの意図を確実にテレビジョン装置５２へ伝達することができる。

このときリモコン装置３としては、その表面に赤外線反射部７を貼り付けただけの簡単な構成で済むため、構造の複雑化及び大型化を招くことなく、ユーザの使い勝手を妨げることがなく、これまでと同様に使い易さを提供することができる。

さらにテレビジョンシステム５０の制御部３０は、リモコン受光部２Ｃから論理和回路３１経由で供給されるリモコンコードＲＣ１と、ジェスチャー検出部１１のコード変換部２３から論理和回路３１経由で供給される制御コードＤ４とが同一体系のコードであることにより、供給元を意識することなく同じ内容を意味するリモコンコードＲＣ１又は制御コードＤ４に従った機能を実行することができる。

従ってユーザにとっては、リモコン装置３を介してリモコンコードＲＣ１をテレビジョン装置５２へ送信したり、リモコン装置３を握持したまま動かすことによるジェスチャーパターンをテレビジョン装置５２に対して認識させるかを、特に意識させることなく、何れの方法によってもテレビジョン装置５２の機能を容易に制御することができる。

以上の構成によれば、テレビジョンシステム５０は、テレビジョン装置５２及びリモコン装置３の構造を複雑化及び大型化することなく、リモコン装置３に対するボタン操作を行わせるか、又はリモコン装置３を握持させたまま動かさせさえすれば、テレビジョン装置５２を遠隔制御することができ、かくして簡易な構成でかつユーザの操作性を一段と向上することができる。

（３）第３の実施の形態
（３−１）テレビジョンシステムの全体構成
図１において、６０は全体として本発明の第３の実施の形態におけるテレビジョンシステムの全体構成を示し、第１の実施の形態におけるテレビジョンシステム１と基本的には同じ全体構成であり、テレビジョン装置６２とリモコン装置３とによって構成されている。

（３−２）テレビジョン装置の外観構成
第３の実施の形態におけるテレビジョン装置６２の外観構成としても、第１の実施の形態及び第２の実施の形態と同じであり、便宜上その説明を省略する。

（３−３）リモコン装置の外観構成
また第３の実施の形態におけるリモコン装置３の外観構成としても、第１の実施の形態及び第２の実施の形態と同じであり、便宜上その説明を省略するが、リモコンボタン群３Ｂのジェスチャーボタン（図示せず）に対するユーザの押下操作に応じて、リモコンコード送信モードとジェスチャー検出処理モードとを交互に切り換えることができるようになされている。

基本的にリモコン装置３は、リモコンボタン群３Ｂのジェスチャーボタン（図示せず）がユーザによって押下操作されていないときは、通常のリモコンコード送信モードであり、リモコンボタン群３Ｂのジェスチャーボタン（図示せず）がユーザによって押下操作されたとき、リモコンコード送信モードからジェスチャー検出モードへ遷移させるようになされている。

従ってリモコン装置３では、リモコンコード送信モード時、当該リモコンボタン群３Ｂのボタンに対するユーザの押下操作に応じたリモコンコードを、先端部に設けられたリモコンコード発光部６から赤外線ＩＦによってテレビジョン装置２へ送信するようになされている。

このときテレビジョン装置２は、ＬＣＤ２Ａとスピーカ２Ｂとの間に設けられたリモコン受光部２Ｃにより、リモコン装置３のリモコンコード発光部６から赤外線ＩＦにより送信されるリモコンコードを受信し、当該リモコンコードに応じた所定の機能を制御し得るようになされている。

一方リモコン装置３は、リモコンボタン群３Ｂのジェスチャーボタン（図示せず）に対するユーザの押下操作に応じて通常のリモコンコード送信モードから、ジェスチャー検出処理モードへ遷移し、例えボタンが押下操作されたときでもリモコンコードをリモコンコード発光部６から送信しないようになされている。

（３−４）テレビジョン装置の回路構成
図５との対応部分に同一符号を付した図１２に示すように、テレビジョン装置６２は、基本的に、第１の実施の形態におけるテレビジョン装置２と同様の回路構成を有しており、異なる点についてのみ説明する。

テレビジョン装置６２の制御部３０は、リモコン装置３のリモコンボタン群３Ｂにおけるジェスチャーボタン（図示せず）が押下操作されたことを意味するリモコンコードＲＣ１をリモコン受光部２Ｃ経由で受け取った場合、ジェスチャー検出部１１を起動させると共に、赤外線照射器４からリモコン装置３へ向かって赤外線照射光ＩＦ_ＯＵＴを出射させるようになされている。

すなわちテレビジョン装置６２の制御部３０は、リモコン装置３からジェスチャーボタン（図示せず）が押下操作されたことを意味するリモコンコードＲＣ１を受け取らない限り、ジェスチャー検出部１１へ起動命令Ｋ１を供給することがないので、無駄にジェスチャー検出部１１を動作させずに済むようになされている。

それゆえにテレビジョン装置６２の制御部３０は、無駄に赤外線照射光ＩＦ_ＯＵＴを出射させて消費電力を増大させたり、或いはユーザがリモコン装置３を握持した状態で無意識に手を動かしてしまったときの意図しないジェスチャーを誤検出してしまうことを未然に防止し得るようになされている。

（３−５）リモコン装置の回路構成
図１０に示したようにリモコン装置３は、その表面に赤外線反射材７が取り付けられ、内部のＣＰＵ４０がバッテリ４２から供給される電力に従って動作し、ＲＯＭ４１に格納されている基本プログラムに従って全体を統括制御すると共に、基本的な処理を実行するようになされている。

リモコン装置３のＣＰＵ４０は、通常のリモコンコード送信モードにおいて、リモコンボタン群３Ｂの何れかのボタンがユーザによって押下操作されたとき、当該ボタンに対応付けられているリモコンコードＲＣ１をバス４３経由で受け取り、そのリモコンコードＲＣ１をリモコンコード発光部６からテレビジョン装置２へ赤外線ＩＦにより送信するようになされている。

一方、リモコン装置３のＣＰＵ４０は、リモコンボタン群３Ｂのジェスチャーボタン（図示せず）がユーザによって押下操作されたとき、当該ジェスチャーボタンに対応付けられているリモコンコードＲＣ１をバス４３経由で受け取り、そのリモコンコードＲＣ１をリモコンコード発光部６からテレビジョン装置２へ赤外線ＩＦにより送信するようになされている。

このときリモコン装置３のＣＰＵ４０は、リモコンボタン群３Ｂの他のボタンがユーザによって押下操作された場合でも、そのボタンに対応付けられたリモコンコードＲＣ１をリモコンコード発光部６からテレビジョン装置２へ送信することはないようになされている。

（３−６）第３の実施の形態における動作及び効果
以上の構成において、テレビジョンシステム６０では、ジェスチャー検出モードへ遷移したとき、テレビジョン装置６２の赤外線照射器４から出射される赤外線照射光ＩＦ_ＯＵＴを、入射方向と同じ反射方向へ送り返すことが可能な再帰性反射材からなる赤外線反射部７によって赤外線反射光ＩＦ_ＲＥＦとして反射させることにより、リモコン装置３を握持して動かすユーザのジェスチャーを赤外線カメラ５によって確実かつ正確に撮影することができる。

従ってテレビジョンシステム６０では、ジェスチャー検出モード時、テレビジョン装置２の赤外線カメラ５によって撮影した結果得られるジェスチャーパターン情報Ｄ３が何の制御コードＤ４に対応付けられているかを、ジェスチャーパターン／制御コード変換テーブルＴ１に基づいて判別し、その制御コードＤ４に応じたディジタルテレビジョン放送受信部１０の機能を制御することができる。

すなわちテレビジョンシステム６０は、ジェスチャー検出モード時、ユーザにリモコン装置３のリモコンボタン群３Ｂにおける各種ボタン操作を一切行わせることなく、単にリモコン装置３を握持した状態で動かさせさえすれば、そのときのジェスチャーパターンを正確に認識し、そのジェスチャーパターンに応じた機能を直ちに実現することができる。

このときリモコン装置３には、再帰性反射材からなる赤外線反射部７が取り付けられているため、テレビジョン装置６２の赤外線照射器４とリモコン装置３の赤外線反射部７とを互いに向き合わせる必要がない。

従ってテレビジョンシステム６０では、ジェスチャー検出モード時、ユーザがリモコン装置３を握持したまま動かしさえすれば、テレビジョン装置６２に対してユーザ所望の機能を容易に実行させることができる。

一方、テレビジョンシステム６０では、リモコンコード送信モード時であれば、テレビジョン装置６２はジェスチャー検出部１１を起動させることがないため、赤外線照射光ＩＦ_ＯＵＴを無駄に出射させて消費電力を増大させたり、或いはユーザがリモコン装置３を握持した状態で無意識に手を動かしてしまったときの意図しないジェスチャーを誤検出してしまうことを確実に防止することができる。

特にテレビジョンシステム６０では、リモコン装置３を介して、リモコンコード送信モードと、ジェスチャー検出モードとを、リモコンボタン群３Ｂのジェスチャーボタン（図示せず）に対する押下操作に応じて切り換えることができるので、当該リモコン装置３をユーザの使用環境に合わせた最適な入力インタフェースとして使用させることができる。

さらにテレビジョンシステム６０では、テレビジョン装置６２の赤外線照射器４から出射する赤外線照射光ＩＦ_ＯＵＴをリモコン装置３により反射させ、赤外線反射光ＩＦ_ＲＥＦとして赤外線カメラ５によって撮影することにより、室内の明るさが不十分な使用環境下であっても、リモコン装置３を介してユーザの意図を確実にテレビジョン装置６２へ伝達することができる。

さらにリモコン装置３としては、その表面に赤外線反射部７を貼り付けただけの簡単な構成で済むため、構造の複雑化及び大型化を招くことなく、ユーザの使い勝手を妨げることがなく、これまでと同様に使い易さを提供することができる。

以上の構成によれば、テレビジョンシステム６０は、テレビジョン装置６２及びリモコン装置３の構造を複雑化及び大型化することなく、リモコン装置３のリモコンボタン群３Ｂに対する押下操作を行わせるか、或いはユーザに対してリモコン装置３を握持させたまま動かさせるだけで、テレビジョン装置２を遠隔制御することができ、かくして簡易な構成でかつユーザの操作性を一段と向上することができる。

（４）第４の実施の形態
（４−１）テレビジョンシステムの全体構成
図１において、７０は全体として本発明の第４の実施の形態におけるテレビジョンシステムの全体構成を示し、第１の実施の形態におけるテレビジョンシステム１と基本的には同じ全体構成であり、テレビジョン装置７２とリモコン装置３とによって構成されている。

（４−２）テレビジョン装置及びリモコン装置の外観構成
第４の実施の形態におけるテレビジョン装置７２及びリモコン装置３の外観構成としても、第１の実施の形態乃至第３の実施の形態と同じであり、便宜上その説明を省略する。

（４−３）テレビジョン装置の回路構成
図５との対応部分に同一符号を付した図１３に示すように、テレビジョン装置７２は、基本的に、第１の実施の形態におけるテレビジョン装置２と同様の回路構成を有しており、異なる点についてのみ説明する。

テレビジョン装置７２の制御部３０は、コード変換ルール記憶部２４に予め登録されているジェスチャーパターン／制御コード変換テーブルＴ１（図９）のジェスチャーパターン情報Ｄ３をユーザが操作し易い所望のジェスチャーパターンにカスタマイズすることができるようになされている。

実際上テレビジョン装置７２の制御部３０は、リモコン装置３のリモコンボタン群３Ｂにおけるジェスチャーパターンカスタマイズボタン（図示せず）が押下操作されると、コード変換ルール記憶部２４に予め登録されているジェスチャーパターン／制御コード変換テーブルＴ１に従い、図１４に示すようなジェスチャー一覧表画面Ｇ４を生成してＬＣＤ２Ａに表示する。

これによりテレビジョン装置７２の制御部３０は、当該ジェスチャー一覧表画面Ｇ４を介して、現在のジェスチャーパターンと各種機能との対応関係をユーザに対して目視確認させ得るようになされている。

例えば、ジェスチャー一覧表画面Ｇ４では、ジェスチャーパターン画像Ｐ１に対して「電源ＯＮ」機能が割り当てられ、ジェスチャーパターン画像Ｐ２に対して「電源ＯＦＦ」機能が割り当てられ、ジェスチャーパターン画像Ｐ３に対して「チャンネルアップ（＋）」機能が割り当てられ、ジェスチャーパターン画像Ｐ４に対して「チャンネルダウン（−）」機能が割り当てられ、ジェスチャーパターン画像Ｐ５に対して「ボリュームアップ（＋）」機能が割り当てられ、ジェスチャーパターン画像Ｐ６に対して「ボリュームダウン（−）」機能が割り当てられていることが示されている。

このジェスチャー一覧表画面Ｇ４を介して現在のジェスチャーパターンと各種機能との対応関係を確認したユーザにより、当該ジェスチャー一覧表画面Ｇ４の「次へ」ボタンＢ１が押下操作されると、テレビジョン装置７２の制御部３０は、ユーザにジェスチャーパターンの変更意思があることを認識する。

そしてテレビジョン装置７２の制御部３０は、図１５に示すようなジェスチャーカスタマイズ登録用の機能選択画面Ｇ５を生成し、これをＬＣＤ２Ａに表示するようになされている。この機能選択画面Ｇ５では、ジェスチャーパターン／制御コード変換テーブルＴ１（図９）に予め登録されている各種機能が一覧表示されている。

ユーザは、機能選択画面Ｇ５の中からジェスチャーパターンを変更したい機能（例えば、この場合、「電源ＯＮ」）にリモコン装置３を介してカーソルＣ１を合わせ、リモコンボタン群３Ｂの決定ボタン（図示せず）を押下操作することによりジェスチャーパターンを変更したい機能を決定し得るようになされている。

これを受けてテレビジョン装置７２の制御部３０は、図１６に示すようなジェスチャーカスタマイズ登録用の機能登録開始画面Ｇ６を生成し、これをＬＣＤ２Ａに表示するようになされている。

この機能登録開始画面Ｇ６（図１６）では、カーソルＣ１が「開始」に合わせられ、現在設定されているジェスチャーパターンを示すジェスチャーパターン画像Ｐ１が左側に表示されていると共に、その右側には、これから登録すべきジェスチャーパターンを示す登録予定ジェスチャーパターン画像ＰＮが表示されている。

このときテレビジョン装置７２の制御部３０は、赤外線照射器４から赤外線を照射した際、ユーザが新たに登録したいジェスチャーパターンに沿って当該リモコン装置３が動かされたときの動きの軌跡を赤外線カメラ５によって撮影し、図１７に示すように、その撮影結果の軌跡で表されるジャスチャーパターンを登録予定ジェスチャーパターン画像ＰＮとして表示する。

そしてテレビジョン装置７２の制御部３０は、ユーザのリモコン装置３に対する操作によりカーソルＣ１が「終了」に合わせられてリモコンボタン群３Ｂの決定ボタン（図示せず）が押下操作されたことを認識すると、登録予定ジェスチャーパターン画像ＰＮとして表示されたジェスチャーパターンで新たなジェスチャーパターン／制御コード変換テーブルＴ１Ｎを生成し、これをコード変換ルール記憶部２４に対して登録し直すようになされている。

この結果、テレビジョン装置７２の制御部３０は、新たなジェスチャーパターン／制御コード変換テーブルＴ１Ｎに従い、図１８に示すようなカスタマイズ後の新たなジェスチャー一覧表画面Ｇ４Ｎを生成してＬＣＤ２Ａに表示するようになされている。

これにより、ユーザは新たなジェスチャー一覧表画面Ｇ４Ｎを介して、カスタマイズ後の新たなジェスチャーパターン画像Ｐ１Ｎを目視確認することが出来るので、カスタマイズ後のジェスチャーパターンが「電源ＯＮ」の機能に対して新たに登録されたことを認識することができるようになされている。

（４−４）リモコン装置の回路構成
第４の実施の形態におけるリモコン装置３の回路構成としても、第１の実施の形態におけるリモコン装置３の回路構成と同じであるため、便宜上その説明を省略する。

（４−５）第４の実施の形態における動作及び効果
以上の構成において、テレビジョンシステム７０では、テレビジョン装置７２の赤外線照射器４から出射される赤外線照射光ＩＦ_ＯＵＴを、入射方向と同じ反射方向へ送り返すことが可能な再帰性反射材からなる赤外線反射部７によって赤外線反射光ＩＦ_ＲＥＦとして反射させることにより、リモコン装置３を握持して動かすユーザのジェスチャーを赤外線カメラ５によって確実かつ正確に撮影することができる。

従ってテレビジョンシステム７０では、テレビジョン装置７２の赤外線カメラ５によって撮影した結果得られるジェスチャーパターン情報Ｄ３が何の制御コードＤ４に対応付けられているかを、ジェスチャーパターン／制御コード変換テーブルＴ１に基づいて判別し、その制御コードＤ４に応じたディジタルテレビジョン放送受信部１０による機能を制御することができる。

すなわちテレビジョンシステム７０は、ユーザにリモコン装置３のリモコンボタン群３Ｂにおける各種ボタン操作を一切行わせることなく、単にリモコン装置３を握持した状態で動かしさえすれば、そのときのジェスチャーパターンを正確に認識し、そのジェスチャーパターンに応じた機能を直ちに実現することができる。

このときリモコン装置３には、再帰性反射材からなる赤外線反射部７が取り付けられているため、テレビジョン装置７２の赤外線照射器４とリモコン装置３の赤外線反射部７とを互いに向き合わせる必要がない。

従ってテレビジョンシステム７０では、ユーザがリモコン装置３を握持したまま動かしさえすれば、テレビジョン装置７２に対してユーザ所望の機能を容易に実行させることができる。

またテレビジョンシステム７０では、テレビジョン装置７２の赤外線照射器４から出射する赤外線照射光ＩＦ_ＯＵＴをリモコン装置３により反射させ、赤外線反射光ＩＦ_ＲＥＦとして赤外線カメラ５によって撮影することにより、室内の明るさが不十分な使用環境下であっても、リモコン装置３を介してユーザの意図を確実にテレビジョン装置７２へ伝達することができる。

さらにリモコン装置３としては、その表面に赤外線反射部７を貼り付けただけの簡単な構成で済むため、構造の複雑化及び大型化を招くことなく、ユーザの使い勝手を妨げることがなく、これまでと同様に使い易さを提供することができる。

さらにテレビジョンシステム７０では、コード変換ルール記憶部２４に予め登録されているジェスチャーパターン／制御コード変換テーブルＴ１を、ユーザ所望のジェスチャーパターンに変更した新たなジェスチャーパターン／制御コード変換テーブルＴ１Ｎに変更し、これをコード変換ルール記憶部２４に対して登録し直すことができる。

従ってテレビジョン装置７２では、リモコン装置３を介して、ユーザにとって動かし易いジェスチャーパターンでカスタマイズした新たなジェスチャーパターン／制御コード変換テーブルＴ１Ｎを生成することができるので、ユーザが当該リモコン装置３を介してテレビジョン装置７２を遠隔制御するときの使い勝手を一段と向上させることができる。

以上の構成によれば、テレビジョンシステム７０は、テレビジョン装置７２及びリモコン装置３の構造を複雑化及び大型化することなく、ユーザにリモコン装置３を握持させたままユーザ所望のジェスチャーパターンに沿って動かさせるだけで、テレビジョン装置２を遠隔制御することができ、かくして簡易な構成でかつユーザの操作性を一段と向上することができる。

（５）他の実施の形態
なお上述した第１の実施の形態乃至第４の実施の形態においては、リモコン装置３の先端部の一面に赤外線反射部７を１個だけ設けるようにした場合について述べたが、本発明はこれに限らず、先端部の側面や上面、底面等のあらゆる面に１個乃至複数個の赤外線反射部７を設けるようにしても良い。

また上述した第１の実施の形態乃至第４の実施の形態においては、赤外線カメラ５及び赤外線照射器４が外付けで取り付けられたテレビジョン装置２、５２、６２及び７２を用いるようにした場合について述べた。

しかしながら、本発明はこれに限らず、図１９に示すように、赤外線カメラ５及び赤外線照射器４が予め内蔵されたテレビジョン装置８２を用いるようにしても良い。

さらに上述した第１の実施の形態乃至第４の実施の形態においては、先端部に平板状でなる赤外線反射部７が取り付けられたリモコン装置３を用いるようにした場合について述べた。

しかしながら、本発明はこれに限らず、図２０に示すように、リモコンボタン群８３が設けられたリモコン本体部８３Ａの先端に、その頂点部分の中央にリモコンコード発光部８６が設けられた球形状でなる赤外線反射部８７を有するリモコン装置８３を用いるようにしても良い。

この場合、リモコン装置８３としては、球形状の赤外線反射部８７を有しているため、ユーザがリモコン装置８３を握持する際の向きに一切関係なく、常に良好な状態で、赤外線照射器４からの赤外線照射光ＩＦ_ＯＵＴを赤外線反射部８７により反射させることができる。

このときテレビジョン装置２（５２、６２及び７２）では、実際上、反射像抽出部２１が、図２１に示すように、赤外線カメラ５によって撮影された反射像映像データＤ１の最初のフレームに相当する反射像画像Ｇ１０の中から、リモコン装置８３における球形状の赤外線反射部８７の形状及び大きさと近似した反射像８Ｇを特定し、当該反射像８Ｇだけを抽出するようになされている。

このとき反射像抽出部２１は、図２２に示すように、当該反射像８Ｇだけが含まれた反射像抽出画像Ｇ１１を１フレーム目として、当該反射像８Ｇだけの動きを表した反射像抽出映像データＤ２を動き検出部２２へ送出すれば良い。

さらに上述した第１の実施の形態乃至第４の実施の形態においては、テレビジョン装置２、５２、６２及び７２を、図５、図１１〜図１３に示したようにハードウェアによる構成とした場合について述べたが、本発明はこれに限らず、ＣＰＵ及びアプリケーションプログラムに基づくソフトウェア構成とする場合であっても良い。

さらに上述した第１の実施の形態乃至第４の実施の形態においては、赤外線照射部としての赤外線照射器４、撮像部としての赤外線カメラ５、反射像抽出部としての反射像抽出部２１、動き検出部としての動き検出部２２、処理実行部としてのコード変換部２３及び制御部３０によって、本発明の情報処理装置としてのテレビジョン装置２、５２、６２及び７２を構成するようにした場合について述べた。

しかしながら、本発明はこれに限らず、その他種々の構成でなる赤外線照射部、撮像部、反射像抽出部、動き検出部及び処理実行部によって本発明の情報処理装置を構成するようにしても良い。

本発明の情報処理装置、情報処理方法、遠隔制御装置及び情報処理システムは、例えばテレビジョン装置以外にも、リモコン装置によって遠隔制御を行うＤＶＤ(Digital Versatile Disc)レコーダ、パーソナルコンピュータ、ＰＤＡ(Personal Digital Assistant)、ゲーム機、携帯電話機及びエアーコンディショナー等のその他種々の電子機器に適用することができる。

本発明の第１の実施の形態乃至第４の実施の形態におけるテレビジョンシステムの全体構成を示す略線的斜視図である。 再帰性反射材の構造を示す略線的断面図である。 再帰性反射材の動作原理の説明に供する略線図である。 再帰性反射材の動作例を示す略線的斜視図である。 第１の実施の形態におけるテレビジョン装置の構成を示す略線的ブロック図である。 赤外線カメラによる反射像画像を示す略線図である。 反射像抽出画像を示す略線図である。 ジャスチャーパターンを示す略線図である。 ジャスチャーパターン／制御コード変換テーブルを示す略線図である。 リモコン装置の回路構成を示す略線的ブロック図である。 第２の実施の形態におけるテレビジョン装置の構成を示す略線的ブロック図である。 第３の実施の形態におけるテレビジョン装置の構成を示す略線的ブロック図である。 第４の実施の形態におけるテレビジョン装置の構成を示す略線的ブロック図である。 ジャスチャー一覧表画面を示す略線図である。 ジャスチャーカスタマイズ登録用の機能選択画面を示す略線図である。 ジャスチャーカスタマイズ登録用の機能登録開始画面を示す略線図である。 ジャスチャーカスタマイズ登録用の機能登録終了画面を示す略線図である。 カスタマイズ後のジャスチャー一覧表画面を示す略線図である。 他の実施の形態におけるテレビジョン装置の構成を示す略線的斜視図である。 他の実施の形態におけるリモコン装置の構成を示す略線的斜視図である。 他の実施の形態における赤外線カメラによる反射像画像を示す略線図である。 他の実施の形態における反射像抽出画像を示す略線図である。

符号の説明

１、５０、６０、７０……テレビジョンシステム、２、５２、６２、７２、８２……テレビジョン装置、３、８３……リモコン装置、４……赤外線カメラ、５……赤外線照射器、６……リモコンコード発光部、７……赤外線反射部、１０……ディジタルテレビジョン放送受信部１０……ジェスチャー検出部１１……アンテナ、１３……ＲＦ受信部、１４……復調部、１５……多重分離部、１６……映像デコード部、１７……音声デコード部、１８……映像混合器、２１……反射像抽出部、２２……動き検出部、２３……コード変換部、２４……コード変換ルール記憶部、２５……ＯＳＤ表示生成部、３０……制御部、４０……ＣＰＵ、４１……ＲＯＭ、４２バッテリ、４３……バス。

Claims (7)

1. 赤外線を照射する赤外線照射部と、
   上記赤外線照射部から照射された上記赤外線照射光を入射角度と同じ反射角度で反射する赤外線反射部が遠隔制御装置の表面に設けられている当該赤外線反射部により反射された赤外線反射光を撮像する撮像部と、
   上記撮像部によって得られる撮像画像に基づいて上記赤外線反射部に相当する反射像を抽出する反射像抽出部と、
   上記反射像の動きを検出する動き検出部と、
   上記反射像の動きのパターンに対して予め対応付けられた制御コードを読み出し、当該制御コードに応じた処理を実行する処理実行部と
   を具える情報処理装置。
2. 上記処理実行部は、上記反射像の動きのパターンに対して予め対応付けられた制御コードと、上記遠隔制御装置の入力部に対する入力操作に応じて送信されてくる入力操作制御コードとが同じコード体系であって、上記制御コードに応じた処理又は上記入力操作制御コードに応じた処理を同じ内容として実行する
   請求項１に記載の情報処理装置。
3. 上記処理実行部は、上記遠隔制御装置の入力部に対する上記入力操作に応じて送信されてくるモード切換を意味する特定の入力操作制御コードによって上記赤外線照射部及び上記撮像部を稼動させるよう制御する
   請求項１に記載の情報処理装置。
4. 上記処理実行部は、上記反射像の動きのパターンと、上記制御コードとが対応付けられた所定の変換テーブルを有し、上記動き検出部によって新たに検出された上記反射像の動きのパターンと上記制御コードとを新たに対応付けて登録することにより上記変換テーブルをカスタマイズする
   請求項１に記載の情報処理装置。
5. 赤外線を照射する赤外線照射部から照射された赤外線照射光を入射角度と同じ反射角度で反射する赤外線反射部が遠隔制御装置の表面に設けられている当該赤外線反射部により反射された赤外線反射光を撮像部によって撮像する撮像ステップと、
   上記撮像ステップで得られる撮像画像に基づいて上記赤外線反射部に相当する反射像を射像抽出部によって抽出する反射像抽出ステップと、
   上記反射像の動きを動き検出部によって検出する動き検出ステップと、
   上記反射像の動きのパターンに対して予め対応付けられた制御コードを処理実行部によって読み出し、当該制御コードに応じた処理を当該処理実行部によって実行する処理実行ステップと
   を有する情報処理方法。
6. 赤外線照射部から照射された赤外線照射光が入射角度と同じ反射角度で反射されたときの赤外線反射光を撮像部によって撮像し、その結果得られた撮像画像に基づいて上記赤外線の反射像を抽出し、上記反射像の動きを検出し、上記反射像の動きのパターンに対して予め対応付けられた制御コードに応じた処理を実行する情報処理装置を対象とし、
   その表面に設けられ、上記赤外線を上記入射角度と同じ反射角度で反射するようになされた赤外線反射部
   を具える遠隔制御装置。
7. 赤外線を照射する赤外線照射部から照射された赤外線照射光を入射角度と同じ反射角度で反射する赤外線反射部が遠隔制御装置の表面に設けられている当該赤外線反射部により反射された赤外線反射光を撮像する撮像部と、上記撮像部によって得られる撮像画像に基づいて上記赤外線反射部に相当する反射像を抽出する反射像抽出部と、上記反射像の動きを検出する動き検出部と、上記反射像の動きのパターンに対して予め対応付けられた制御コードを読み出し、当該制御コードに応じた処理を実行する処理実行部とからなる情報処理装置と、
   上記赤外線反射部がその表面に設けられ、上記赤外線を上記入射角度と同じ上記反射角度で反射する遠隔制御装置と
   を具える情報処理システム。

Images