JP2018109873A - 電子機器、プログラムおよび制御方法 - Google Patents

Abstract

【課題】ジェスチャによる入力操作において誤操作を防止しやすい電子機器、プログラムおよび制御方法を提供する。【解決手段】電子機器１は、近接センサ１８と、近接センサ１８からの出力と、自機器１の状態とに応じて、ジェスチャの方向を決定するコントローラ１１と、を備える。【選択図】図１

Description

本発明は、電子機器、プログラムおよび制御方法に関する。

例えばスマートフォンおよびタブレット端末等の電子機器は、一般にタッチパネルを備えている。ユーザは、このような電子機器を、タッチパネルに触れることで制御するのが一般的である。近年、ユーザが端末から離れて行うジェスチャを例えば赤外線センサ等の近接センサによって検出し、ジェスチャと対応する入力操作を実行する電子機器が知られている（例えば特許文献１）。

特開２０１５−２２５４９３号公報

特許文献１に開示されたジェスチャによる入力操作は、タッチパネルへの入力操作と異なり、直接電子機器に触れて操作が行われるものではない。そのため、ユーザが特定の操作を意図してジェスチャを行っても、電子機器が、ユーザの意図とは異なる操作として認識する場合がある。電子機器が、ユーザのジェスチャを、ユーザの意図しないジェスチャと認識した場合、電子機器の誤操作が発生し得る。

かかる事情に鑑みてなされた本発明の目的は、ジェスチャによる入力操作において誤操作を防止しやすい電子機器、プログラムおよび制御方法を提供することにある。

本発明の実施形態に係る電子機器は、近接センサと、前記近接センサからの出力と、自機器の状態とに応じて、ジェスチャの方向を決定するコントローラと、を備える。

本発明の実施形態に係るプログラムは、近接センサと、コントローラと、を備える電子機器に、前記コントローラにより、前記近接センサからの出力と、前記電子機器の状態とに応じて、前記ジェスチャの方向を決定するステップを実行させる。

本発明の実施形態に係る制御方法は、近接センサと、コントローラと、を備える電子機器の制御方法であって、前記コントローラにより、前記近接センサからの出力と、前記電子機器の状態とに応じて、前記ジェスチャの方向を決定するステップを含む。

本発明の一実施形態によれば、ジェスチャによる入力操作において誤操作を防止しやすい電子機器、プログラムおよび制御方法を提供することができる。

一実施形態に係る電子機器の概略構成図である。 ユーザがジェスチャにより電子機器を操作する様子を例示する図である。 近接センサの概略構成図である。 各赤外フォトダイオードが検出する検出値の推移を示す図である。 電子機器をジェスチャで操作する状況を例示する図である。 ジェスチャの方向の決定について説明するための概念図である。 ユーザのジェスチャの一例を模式的に示す図である。 電子機器のディスプレイにおける画面表示の例を示す図である。 ジェスチャの方向を決定するための割当てについて説明するための概念図である。 電子機器の向きと、ジェスチャの方向を決定するための割当てとの関係について説明するための図である。 電子機器が実行する処理の一例を示すフローチャートである。

（電子機器の構成）
図１に示すように一実施形態の電子機器１は、タイマー１２と、カメラ１３と、ディスプレイ１４と、マイク１５と、ストレージ１６と、通信ユニット１７と、スピーカー２５と、近接センサ１８（ジェスチャセンサ）と、コントローラ１１と、を備える。電子機器１は、さらにＵＶセンサ１９と、照度センサ２０と、加速度センサ２１と、地磁気センサ２２と、気圧センサ２３と、ジャイロセンサ２４と、を備える。図１は例示である。電子機器１は図１に示す構成要素の全てを備えなくてもよい。また、電子機器１は図１に示す以外の構成要素を備えていてもよい。

タイマー１２はコントローラ１１からタイマー動作の指示を受け、所定時間経過した時点で、その旨を示す信号をコントローラ１１に出力する。タイマー１２は、図１に示すようにコントローラ１１とは独立して設けられていてもよいし、コントローラ１１が内蔵する構成であってもよい。

カメラ１３は、電子機器１の周囲の被写体を撮像する。カメラ１３は一例として、電子機器１のディスプレイ１４が設けられる面に設けられるインカメラである。

ディスプレイ１４は画面を表示する。画面は、例えば文字、画像、記号および図形等の少なくとも一つを含む。ディスプレイ１４は、液晶ディスプレイ（Liquid Crystal Display）、有機ＥＬパネル（Organic Electro-Luminescence Panel）または無機ＥＬパネル（Inorganic Electro-Luminescence Panel）等であってもよい。本実施形態において、ディスプレイ１４はタッチパネルディスプレイ（タッチスクリーンディスプレイ）である。タッチパネルディスプレイは、指またはスタイラスペン等の接触を検出して、その接触位置を特定する。ディスプレイ１４は、指またはスタイラスペン等が接触した位置を同時に複数検出することができる。

マイク１５は、人が発する声を含む、電子機器１の周囲の音を検出する。

ストレージ１６は記憶部としてプログラムおよびデータを記憶する。ストレージ１６は、コントローラ１１の処理結果を一時的に記憶する。ストレージ１６は、半導体記憶デバイスおよび磁気記憶デバイス等の任意の記憶デバイスを含んでよい。ストレージ１６は、複数の種類の記憶デバイスを含んでよい。ストレージ１６は、メモリカード等の可搬の記憶媒体と、記憶媒体の読み取り装置との組み合わせを含んでよい。

ストレージ１６に記憶されるプログラムには、フォアグランドまたはバックグランドで実行されるアプリケーションと、アプリケーションの動作を支援する制御プログラムとを含む。アプリケーションは、例えば、ジェスチャに応じた処理をコントローラ１１に実行させる。制御プログラムは、例えば、ＯＳ（Operating System）である。アプリケーションおよび制御プログラムは、通信ユニット１７による通信または記憶媒体を介してストレージ１６にインストールされてもよい。

通信ユニット１７は、有線または無線により通信するためのインタフェースである。一実施形態の通信ユニット１７によって行われる通信方式は無線通信規格である。例えば、無線通信規格は２Ｇ、３Ｇおよび４Ｇ等のセルラーフォンの通信規格を含む。例えばセルラーフォンの通信規格は、ＬＴＥ（Long Term Evolution）、Ｗ−ＣＤＭＡ（Wideband Code Division Multiple Access）、ＣＤＭＡ２０００、ＰＤＣ（Personal Digital Cellular）、ＧＳＭ（登録商標）（Global System for Mobile communications）およびＰＨＳ（Personal Handy-phone System）等を含む。例えば、無線通信規格は、ＷｉＭＡＸ（Worldwide Interoperability for Microwave Access）、ＩＥＥＥ８０２．１１、Ｂｌｕｅｔｏｏｔｈ（登録商標）、ＩｒＤＡ（Infrared Data Association）およびＮＦＣ（Near Field Communication）等を含む。通信ユニット１７は、上述した通信規格の１つまたは複数をサポートすることができる。

スピーカー２５は音を出力する。例えば通話の際に、相手の声がスピーカー２５から出力される。また、例えばニュースまたは天気予報等の読み上げの際に、その内容がスピーカー２５から音で出力される。

近接センサ１８は、電子機器１の周囲の対象物との相対距離および対象物の移動方向等を非接触で検出する。本実施形態において、近接センサ１８は１つの光源用赤外ＬＥＤ（Light Emitting Diode）と４つの赤外フォトダイオードとを有する。近接センサ１８は、光源用赤外ＬＥＤから赤外光を対象物に向けて照射する。近接センサ１８は、対象物からの反射光を赤外フォトダイオードの入射光とする。そして、近接センサ１８は赤外フォトダイオードの出力電流に基づいて対象物との相対距離を測定することができる。また、近接センサ１８は、対象物からの反射光がそれぞれの赤外フォトダイオードに入射する時間差により対象物の移動方向を検出する。したがって、近接センサ１８は、電子機器１のユーザが電子機器１に触れずに行うエアジェスチャ（以下単に「ジェスチャ」という）を用いた操作を検出することができる。ここで、近接センサ１８は可視光フォトダイオードを有していてもよい。

コントローラ１１は、例えばＣＰＵ（Central Processing Unit）等のプロセッサである。コントローラ１１は、他の構成要素が統合されたＳｏＣ（System-on-a-Chip）等の集積回路であってもよい。コントローラ１１は、複数の集積回路を組み合わせて構成されてもよい。コントローラ１１は、電子機器１の動作を統括的に制御して各種の機能を実現する。

具体的にはコントローラ１１は、ストレージ１６に記憶されているデータを必要に応じて参照する。コントローラ１１は、ストレージ１６に記憶されているプログラムに含まれる命令を実行してディスプレイ１４等の他の機能部を制御することによって各種機能を実現する。例えばコントローラ１１は、ユーザによる接触のデータをタッチパネルから取得する。例えばコントローラ１１は、近接センサ１８が検出したユーザのジェスチャに関する情報を取得する。例えばコントローラ１１は、タイマー１２からカウントダウンの残り時間（タイマー時間）等の情報を取得する。また、例えばコントローラ１１は、アプリケーションの起動状況を把握する。

ＵＶセンサ１９は、太陽光等に含まれる紫外線（Ultraviolet）量を測定することができる。

照度センサ２０は、当該照度センサ２０に入射する周囲光の照度を検出する。

加速度センサ２１は、電子機器１に働く加速度の方向および大きさを検出する。加速度センサ２１は、例えばｘ軸方向、ｙ軸方向およびｚ軸方向の加速度を検出する３軸（３次元）タイプである。加速度センサ２１は、例えばピエゾ抵抗型であってもよいし、静電容量型であってもよい。

地磁気センサ２２は地磁気の向きを検出して、電子機器１の向きを測定可能にする。

気圧センサ２３は、電子機器１の外側の気圧（大気圧）を検出する。

ジャイロセンサ２４は、電子機器１の角速度を検出する。コントローラ１１は、ジャイロセンサ２４により取得された角速度を時間積分することにより、電子機器１の向きの変化を測定することができる。

（ジェスチャによる電子機器の操作）
図２は、ユーザがジェスチャにより電子機器１を操作する様子を示す。図２において、電子機器１は一例としてスタンドによって支持される。代替例として電子機器１は壁に立てかけられたり、テーブルに置かれたりしてもよい。近接センサ１８がユーザのジェスチャを検出すると、コントローラ１１は検出されたジェスチャに基づく処理を行う。図２の例では、ジェスチャに基づく処理はレシピが表示されている画面のスクロールである。例えば、ユーザが電子機器１の長手方向上方へと手を動かすジェスチャを行うと、ユーザの手の動きに連動して画面が上方へとスクロールする。また、例えば、ユーザが電子機器１の長手方向下方へと手を動かすジェスチャを行うと、ユーザの手の動きに連動して画面が下方へとスクロールする。

図２に示す電子機器１はスマートフォンである。代替例として電子機器１は例えば、携帯電話端末、ファブレット、タブレットＰＣまたはフィーチャーフォン等でもよい。また、電子機器１は、上記のものに限定されず、例えば、ＰＤＡ、リモコン端末、携帯音楽プレイヤー、ゲーム機、電子書籍リーダ、カーナビゲーション、家電製品または産業用機器（ＦＡ機器）等でもよい。

（ジェスチャを検出する手法）
ここで、図３および図４を参照しながら、コントローラ１１が近接センサ１８の出力に基づいてユーザのジェスチャを検出する手法を説明する。図３は、電子機器１を正面から見たときの近接センサ１８の構成例を示す図である。近接センサ１８は、光源用赤外ＬＥＤ１８０と、４つの赤外フォトダイオードＳＵ，ＳＲ，ＳＤおよびＳＬと、を有する。４つの赤外フォトダイオードＳＵ，ＳＲ，ＳＤおよびＳＬは、レンズ１８１を介して検出対象物からの反射光を検出する。４つの赤外フォトダイオードＳＵ，ＳＲ，ＳＤおよびＳＬは、レンズ１８１の中心から見て対称的に配置されている。ここで、図３に示される仮想線Ｄ１は電子機器１の長手方向と略平行であるとする。図３の仮想線Ｄ１上に、赤外フォトダイオードＳＵと赤外フォトダイオードＳＤとが離れて配置されている。そして、図３の仮想線Ｄ１の方向において、赤外フォトダイオードＳＲおよびＳＬは、赤外フォトダイオードＳＵと赤外フォトダイオードＳＤとの間に配置されている。

図４は、４つの赤外フォトダイオードＳＵ，ＳＲ，ＳＤおよびＳＬの検出対象物（例えばユーザの手等）が、図３の仮想線Ｄ１の方向に沿って移動したときの検出値の推移を例示する。ここで、仮想線Ｄ１の方向において、赤外フォトダイオードＳＵと赤外フォトダイオードＳＤとが最も離れている。そのため、図４に示すように、赤外フォトダイオードＳＵの検出値（破線）の変化（例えば上昇）と、赤外フォトダイオードＳＤの検出値（細い実線）の同じ変化（例えば上昇）との時間差が最も大きい。コントローラ１１は、フォトダイオードＳＵ，ＳＲ，ＳＤおよびＳＬの検出値の所定の変化の時間差を把握することによって、検出対象物の移動方向を判定できる。

コントローラ１１は、近接センサ１８からフォトダイオードＳＵ，ＳＲ，ＳＤおよびＳＬの検出値を取得する。そして、コントローラ１１は、例えば検出対象物の仮想線Ｄ１の方向への移動を把握するために、フォトダイオードＳＤの検出値からフォトダイオードＳＵの検出値を減算した値を所定の時間で積分してもよい。図４の例では、領域Ｒ４１およびＲ４２において積分値は非ゼロの値となる。この積分値の変化（例えば正値、ゼロ、負値の変化）から、コントローラ１１は、仮想線Ｄ１の方向における検出対象物の移動を把握できる。

また、コントローラ１１は、フォトダイオードＳＬの検出値からフォトダイオードＳＲの検出値を減算した値を所定の時間で積分してもよい。この積分値の変化（例えば正値、ゼロ、負値の変化）から、コントローラ１１は、仮想線Ｄ１に直交する方向（電子機器１の短手方向に略平行な方向）における検出対象物の移動を把握できる。

代替例として、コントローラ１１はフォトダイオードＳＵ，ＳＲ，ＳＤおよびＳＬの全ての検出値を用いて演算を行ってもよい。すなわち、コントローラ１１は検出対象物の移動方向を、電子機器１の長手方向および短手方向の成分に分離して演算することなく把握してもよい。

検出されるジェスチャは例えば、左右のジェスチャ、上下のジェスチャ、斜めのジェスチャ、時計回りで円を描くジェスチャ、および反時計回りで円を描くジェスチャ等である。例えば左右へのジェスチャとは、電子機器１の短手方向と略平行な方向に行われるジェスチャである。上下のジェスチャとは、電子機器１の長手方向と略平行な方向に行われるジェスチャである。斜めのジェスチャとは、電子機器１と略平行な平面において、電子機器１の長手方向と短手方向とのいずれとも平行でない方向に行われるジェスチャである。

（キッチンモード）
図５は、ユーザがジェスチャにより電子機器１を操作する状況の一例を示す。図５の例で、ユーザは料理のレシピを電子機器１のディスプレイ１４に表示しながら、キッチンでレシピに従って料理をしている。このとき、近接センサ１８はユーザのジェスチャを検出する。そして、コントローラ１１は近接センサ１８が検出したジェスチャに基づく処理を行う。例えば、コントローラ１１は特定のジェスチャ（例えばユーザが手を上下に動かすジェスチャ）に応じてレシピをスクロールする処理が可能である。料理中は、ユーザの手が汚れたり、濡れたりすることがある。しかし、ユーザは電子機器１に触れることなくレシピをスクロールすることができる。したがって、ディスプレイ１４が汚れること、および料理中のユーザの手にディスプレイ１４の汚れがうつることを回避できる。

ここで、電子機器１はモードを複数有する。モードとは電子機器１の全体の動作について制限等を与える動作モード（動作状態または動作状況）を意味する。モードは同時に１つだけ選択可能である。本実施形態において、電子機器１のモードは第１モードおよび第２モードを含む。第１モードは、例えばキッチン以外の部屋および外出先等での使用に適している通常の動作モード（通常モード）である。第２モードは、キッチンでレシピを表示しながら料理を行うのに最適な電子機器１の動作モード（キッチンモード）である。上記で説明したように、第２モードの場合には、ジェスチャによる入力操作が可能であることが好ましい。つまり、電子機器１のモードが第２モードに切り替わる場合には、連動して近接センサ１８を動作させてジェスチャを検出可能にすることが好ましい。本実施形態の電子機器１は、以下に説明するユーザインターフェースを備えることによって、第２モード（キッチンモード）への切り替えと近接センサ１８の動作とを連動させることが可能である。

（ジェスチャの方向を決定する手法）
次に、電子機器１のコントローラ１１による、ジェスチャの方向の決定処理について説明する。コントローラ１１によるジェスチャの方向の決定処理は、例えば、電子機器１が上述したキッチンモードである場合に実行されてもよい。

電子機器１において、ジェスチャとして検出される方向は、予め定められていてよい。例えば、ジェスチャとして検出される方向は、電子機器１の長手方向と、電子機器１の短手方向とに定められていてよい。電子機器１のコントローラ１１は、ジェスチャを検出すると、検出したジェスチャが長手方向の操作であるか、短手方向の操作であるかを決定する。例えば、コントローラ１１は、ジェスチャを検出すると、ジェスチャを長手方向の成分（移動量）と短手方向の成分（移動量）とに分解する。そして、コントローラ１１は、長手方向の成分が短手方向の成分よりも大きい場合、ジェスチャが長手方向の操作であると決定し、短手方向の成分が長手方向の成分よりも大きい場合、ジェスチャが短手方向の操作であると決定できる。

図６は、ジェスチャの方向の決定について説明するための概念図である。図６において、上下方向は電子機器１の長手方向、左右方向は電子機器１の短手方向であるとする。図６において、長手方向は、ユーザが実行するジェスチャの上下方向に、短手方向は、ユーザが実行するジェスチャの左右方向に、それぞれ対応するとする。ユーザのジェスチャの方向は、図６に、実線により区切られた領域として概念的に示されるように、例えば上下左右の各方向において、均等に割り当てられた判定基準に基づいて決定される。この判定基準によれば、例えば、ユーザが手を下方向から上方向に動かすジェスチャを行った場合、図６の矢印Ａ１に示すように、当該ジェスチャが下から上に向かう長手方向のジェスチャとして検出されると、電子機器１において上方向の処理が実行される。

しかしながら、ユーザのジェスチャは、ユーザが意図する方向のジェスチャとして認識されない場合がある。例えば、ユーザが、長手方向（上下方向）の操作を行うことを意図して、手を長手方向に動かすジェスチャを行ったとする。このジェスチャを、例えばユーザが右手で行う場合、人体の構造上、右手の手のひらは、図７に手の動きを矢印で模式的に示すように、右手の肘を軸として弧を描くように移動する。この場合、ユーザが行ったジェスチャは、ユーザが意図した長手方向の成分と、手のひらが弧を描いたことにより生じる短手方向の成分とを有する。

このジェスチャにおいて、コントローラ１１は、短手方向の成分が長手方向の成分より大きいと判断した場合、上記ジェスチャを、短手方向の操作であると認識する場合がある。例えば、当該ユーザのジェスチャは、図６の矢印Ａ２として概念的に示すように、短手方向（右方向）のジェスチャとして検出される場合がある。しかしながら、当該ジェスチャにおいて、ユーザが意図したのは長手方向の操作であるため、コントローラ１１がジェスチャに基づいて短手方向の処理を行うと、誤操作となる。

本実施形態に係る電子機器１のコントローラ１１は、近接センサ１８からの出力と、自機器（電子機器１）の状態とに応じて、ジェスチャの方向を決定できる。コントローラ１１が電子機器１の状態に応じてジェスチャの方向を決定することにより、ユーザが意図しない処理が実行されにくくなる。これにより、電子機器１は、ジェスチャによる入力操作において誤操作を防止しやすくなる。

ここで、コントローラ１１による、電子機器１の状態に応じた、ジェスチャの方向の決定処理について、詳細に説明する。ジェスチャの方向の決定処理において、コントローラ１１は、近接センサ１８からの出力と電子機器１の状態とに応じて、ユーザによるジェスチャの優先判定方向を決定する。優先判定方向は、ユーザのジェスチャの方向として優先的に判定される方向であり、例えばユーザが操作を行う可能性が高い方向であってよい。コントローラ１１は、ユーザのジェスチャにより示される制御方向が、優先判定方向以外の他の方向よりも、優先判定方向として検出されやすくなるように処理を実行する。コントローラ１１は、このような処理を、例えば、優先判定方向と他の方向との移動量についての重みづけを変更することによって実現してよい。なお、優先判定方向における検出の優先の程度（どの程度優先するか）については、電子機器１の状態に応じて適宜定められていてよい。優先の程度は、例えば重みづけの程度により定めることができる。

電子機器１の状態は、例えばディスプレイ１４に表示される画面の向きであってよい。ここでは、一例として、電子機器１のディスプレイ１４には、電子機器１の向きに応じて画面が表示される場合について説明する。例えば、ディスプレイ１４には、図８（Ａ）に示すように、電子機器１の長手方向が縦方向（上下方向）としてユーザに認識される画面と、図８（Ｂ）に示すように、電子機器１の短手方向が縦方向としてユーザに認識される画面との、いずれかの画面が表示される。ディスプレイ１４に表示される画面は、例えば加速度センサ２１等に基づいて決定される、鉛直方向に対する電子機器１の向きに応じてコントローラ１１により決定されてよい。電子機器１の状態は、ディスプレイ１４に表示される画面が、長手方向が縦方向としてユーザに認識される画面か、電子機器１の短手方向が縦方向としてユーザに認識される画面かを含んでよい。

コントローラ１１は、ディスプレイ１４に表示される画面の向きに基づいて、例えば上下方向を優先判定方向として決定してよい。この場合、ジェスチャは、左右方向よりも、上下方向のジェスチャとして判定されやすくなる。

コントローラ１１による処理の詳細について、図９を参照して説明する。図９は、優先判定方向の決定に基づく、ジェスチャの方向を決定するための割当てについて説明するための概念図である。図９に記載した破線は、図６における、上下左右の判定領域を区切る実線に対応する。図９に示すように、コントローラ１１は、図６に示す場合と比較して、上下方向と左右方向との判定領域を区切る実線の傾きを小さくすることにより、上方向および下方向と判定される領域を広げ、右方向および左方向と判定される領域を狭める。この場合、例えば、ユーザのジェスチャが矢印Ａ３に示すように、右方向の成分を含む場合であっても、コントローラ１１は、上方向のジェスチャとして認識できる。

図１０は、電子機器１の向きと、ジェスチャの方向を決定するための割当てとの関係について説明するための図である。図１０には、電子機器１を示す図に重畳して、図９に示す判定領域の概念図が示されている。

コントローラ１１は、図１０（Ａ）に示すように、ディスプレイ１４に表示される画面が、長手方向が縦方向としてユーザに認識される画面である場合、当該長手方向を上下方向に対応付けて、優先判定方向を決定する。つまり、コントローラ１１は、上下方向に対応付けられた長手方向を、優先判定方向であると決定する。この場合、図１０（Ａ）に概念図として示すように、コントローラ１１は、上下方向の判定領域を広げて、ジェスチャの方向の判定を行う。つまり、電子機器１の長手方向が上下方向に対応付けられた状態で、上下方向の判定領域が拡大されるため、ユーザのジェスチャは、電子機器１の長手方向に沿ったジェスチャとして判定されやすくなる。

これに対し、コントローラ１１は、図１０（Ｂ）に示すように、ディスプレイ１４に表示される画面が、短手方向が縦方向としてユーザに認識される画面である場合、当該短手方向を上下方向に対応付けて、優先判定方向を決定する。つまり、コントローラ１１は、上下方向に対応付けられた短手方向を、優先判定方向であると決定する。この場合、コントローラ１１は、上下方向の判定領域を広げて、ジェスチャの方向の判定を行う。つまり、この場合、電子機器１の短手方向が上下方向に対応付けられた状態で、上限方向の判定領域が拡大されるため、ユーザのジェスチャは、電子機器１の短手方向に沿ったジェスチャとして判定されやすくなる。

このように、電子機器１が、電子機器１の向きに応じて上下方向を優先判定方向として決定することにより、例えばディスプレイ１４に表示される画面における主要な操作が上下方向の操作である場合、ユーザのジェスチャが左右方向の成分を含む場合であっても、より頻度が高いことが想定される上下方向のジェスチャとして認識されやすくなる。

なお、電子機器１は、左右方向を優先判定方向と決定してもよい。これにより、電子機器１は、ディスプレイ１４に表示される画面における主要な操作が左右方向の操作である場合、ユーザのジェスチャが上下方向の成分を含む場合であっても、より頻度が高いことが想定される左右方向のジェスチャとして認識されやすくなる。

このように、電子機器１において、コントローラ１１は、ディスプレイ１４に表示される画面の向きに基づいて優先判定方向を決定することにより、ユーザのジェスチャを、ユーザが意図する方向のジェスチャとして検出しやすくなる。そのため、電子機器１によれば、ジェスチャによる入力操作において誤操作を防止しやすくなる。

電子機器１の状態は、ディスプレイ１４に表示される画面の向きに限られない。電子機器１の状態は、例えば電子機器１において実行されている機能に応じて決定されてもよい。

例えば、近接センサ１８がジェスチャを検出したときに実行されている機能が、ディスプレイ１４に表示された情報の閲覧であり、ディスプレイ１４に表示された画面のスクロール操作が、上下方向のジェスチャにより実行されるとする。この場合、コントローラ１１は、ディスプレイ１４に表示された画面の上下方向を優先判定方向であると決定してよい。ユーザがディスプレイ１４で情報を閲覧している場合には、上下方向の画面のスクロール操作が主要な操作になると想定されるところ、コントローラ１１は、スクロール操作に対応する上下方向を優先判定方向と決定することにより、ユーザのジェスチャを、上下方向のジェスチャとして認識しやすくなる。つまり、ユーザのジェスチャは、より頻度が高いことが想定される上下方向のジェスチャとして認識されやすくなる。

また、例えば、近接センサ１８がジェスチャを検出したときに実行されている機能が、電話の着信であり、手を左から右に移動させるという左右方向のジェスチャにより、電子機器１において着信に応答することができるとする。この場合、コントローラ１１は、ディスプレイ１４に表示された画面の左右方向を優先判定方向であると決定してよい。ユーザが着信に応答する場合には、タッチパネルにおけるスライド操作に対応する左右方向のジェスチャが主要な操作になると想定されるところ、コントローラ１１は、着信に応答するための左右方向を優先判定方向と決定することにより、ユーザのジェスチャを、左右方向のジェスチャとして認識しやすくなる。つまり、ユーザのジェスチャは、より頻度が高いことが想定される左右方向のジェスチャとして認識されやすくなる。

また、例えば、近接センサ１８がジェスチャを検出したときに実行されている機能が、所定のアプリケーションの使用であるとする。当該アプリケーションでは、ディスプレイ１４に表示される画面の向きに対して、上下方向のジェスチャが、画面のスクロール操作に対応付けられており、左右方向のジェスチャが、所定のアイコンの表示および非表示の切換え操作に対応付けられているとする。当該アプリケーションにおいて、例えば上下方向のスクロール操作が主要な操作であり、アイコンの表示および非表示の切換え操作が補助的な操作であることが、予めストレージ１６に記憶されているとする。この場合、コントローラ１１は、ディスプレイ１４に表示された画面の上下方向を優先判定方向であると決定してよい。これにより、ユーザのジェスチャは、主要な操作である上下方向のスクロール操作として認識されやすくなるとともに、左右方向のジェスチャは、補助的な操作である切換え操作として認識される。

優先判定方向は、例えば電子機器１において実行される各機能にそれぞれ対応付けて、ストレージ１６に記憶されていてよい。コントローラ１１は、各機能に対応付けられた優先判定方向に基づいて、ユーザのジェスチャの方向を決定してよい。

また、コントローラ１１は、電子機器１で実行される機能によっては、ユーザのジェスチャを、一方向のみ有効なものとして検出し、他の方向を無効なものと処理してもよい。例えば、コントローラ１１は、電子機器１で実行される機能によっては、ユーザのジェスチャを、上方向または下方向という、上下方向のみが有効なものであるとして検出してよい。また、例えば、コントローラ１１は、電子機器１で実行される機能によっては、ユーザのジェスチャを、右方向または左方向という、左右方向のみが有効なものであるとして検出してよい。このように、コントローラ１１は、優先判定方向以外の方向のジェスチャを無効なジェスチャと判定してもよい。この場合、コントローラ１１は、電子機器１で実行され得ない方向のジェスチャを無効にして、ジェスチャの方向を決定できるため、ユーザのジェスチャを、ユーザが意図する操作として検出しやすくなる。

また、電子機器１の状態は、ディスプレイ１４に表示される画面の向きと、電子機器１において実行されている機能との双方に基づいて、決定されてもよい。また、電子機器１の状態は、上述した例とは異なる、他の状態を含んでいてもよい。

図１１は、電子機器１が実行する処理の一例を示すフローチャートである。

まず、電子機器１のコントローラ１１は、近接センサ１８からの出力を取得する（ステップＳ１）。

コントローラ１１は、電子機器１の状態を検出する（ステップＳ２）。電子機器１の状態は、上述したように、ディスプレイ１４に表示される画面の向きであってよく、電子機器１において実行されている機能に基づいて決定されてもよい。

コントローラ１１は、ステップＳ１で取得した近接センサ１８からの出力と、ステップＳ２で検出した電子機器１の状態とに応じて、優先判定方向を決定する（ステップＳ３）。

コントローラ１１は、決定した優先判定方向に基づいて、ユーザが行ったジェスチャの方向を判定する（ステップＳ４）。

コントローラ１１は、ステップＳ４で判定したジェスチャの方向に応じて、制御を行う（ステップＳ５）。

以上説明したように、本実施形態に係る電子機器１は、近接センサ１８からの出力と、自機器の状態とに応じて、ジェスチャの方向を決定する。そのため、電子機器１は、ユーザのジェスチャを、自機器の状態に応じて、ユーザが意図する操作として検出しやすくなる。これにより、ジェスチャによる入力操作において誤操作を防止しやすくなる。

（その他の実施形態）
本発明を図面および実施形態に基づき説明してきたが、当業者であれば本開示に基づき種々の変形および修正を行うことが容易であることに注意されたい。したがって、これらの変形および修正は本発明の範囲に含まれることに留意されたい。例えば、各手段または各ステップなどに含まれる機能などは論理的に矛盾しないように再配置可能であり、複数の手段またはステップなどを１つに組み合わせたり、或いは分割したりすることが可能である。

上記の実施形態では、ジェスチャは、近接センサ１８により検出されると説明したが、必ずしも近接センサ１８により検出されなくてもよい。ジェスチャは、任意の非接触でユーザのジェスチャを検出可能な、任意の非接触センサにより検出されてもよい。非接触センサの一例は、例えば、カメラ１３または照度センサ２０等を含む。

本開示内容の多くの側面は、プログラム命令を実行可能なコンピュータシステムその他のハードウェアにより実行される、一連の動作として示される。コンピュータシステムその他のハードウェアには、例えば、汎用コンピュータ、ＰＣ（パーソナルコンピュータ）、専用コンピュータ、ワークステーション、ＰＣＳ（Personal Communications System、パーソナル移動通信システム）、移動（セルラー）電話機、データ処理機能を備えた移動電話機、ＲＦＩＤ受信機、ゲーム機、電子ノートパッド、ラップトップコンピュータ、ＧＰＳ（Global Positioning System）受信機またはその他のプログラム可能なデータ処理装置が含まれる。各実施形態では、種々の動作または制御方法は、プログラム命令（ソフトウェア）で実装された専用回路（例えば、特定機能を実行するために相互接続された個別の論理ゲート）、一以上のプロセッサにより実行される論理ブロックおよび／またはプログラムモジュール等により実行されることに留意されたい。論理ブロックおよび／またはプログラムモジュール等を実行する一以上のプロセッサには、例えば、一以上のマイクロプロセッサ、ＣＰＵ（中央演算処理ユニット）、ＡＳＩＣ（Application Specific Integrated Circuit）、ＤＳＰ（Digital Signal Processor）、ＰＬＤ（Programmable Logic Device）、ＦＰＧＡ（Field Programmable Gate Array）、プロセッサ、コントローラ、マイクロコントローラ、マイクロプロセッサ、電子機器、ここに記載する機能を実行可能に設計されたその他の装置および／またはこれらいずれかの組合せが含まれる。ここに示す実施形態は、例えば、ハードウェア、ソフトウェア、ファームウェア、ミドルウェア、マイクロコードまたはこれらいずれかの組合せにより実装される。命令は、必要なタスクを実行するためのプログラムコードまたはコードセグメントであってもよい。そして、命令は、機械読取り可能な非一時的記憶媒体その他の媒体に格納することができる。コードセグメントは、手順、関数、サブプログラム、プログラム、ルーチン、サブルーチン、モジュール、ソフトウェアパッケージ、クラスまたは命令、データ構造もしくはプログラムステートメントのいずれかの任意の組合せを示すものであってもよい。コードセグメントは、他のコードセグメントまたはハードウェア回路と、情報、データ引数、変数または記憶内容の送信および／または受信を行い、これにより、コードセグメントが他のコードセグメントまたはハードウェア回路と接続される。

ここで用いられるストレージ１６は、さらに、ソリッドステートメモリ、磁気ディスクおよび光学ディスクの範疇で構成されるコンピュータ読取り可能な有形のキャリア（媒体）として構成することができる。かかる媒体には、ここに開示する技術をプロセッサに実行させるためのプログラムモジュール等のコンピュータ命令の適宜なセットまたはデータ構造が格納される。コンピュータ読取り可能な媒体には、一つ以上の配線を備えた電気的接続、磁気ディスク記憶媒体、磁気カセット、磁気テープ、その他の磁気および光学記憶装置（例えば、ＣＤ（Compact Disk）、レーザーディスク（登録商標）、ＤＶＤ（登録商標）（Digital Versatile Disc）、フロッピー（登録商標）ディスクおよびブルーレイディスク（登録商標))、可搬型コンピュータディスク、ＲＡＭ（Random Access Memory）、ＲＯＭ（Read-Only Memory）、ＥＰＲＯＭ（Erasable Programmable Read-Only Memory）、ＥＥＰＲＯＭ（Electrically Erasable Programmable Read-Only Memory）もしくはフラッシュメモリ等の書換え可能でプログラム可能なＲＯＭもしくは情報を格納可能な他の有形の記憶媒体またはこれらいずれかの組合せが含まれる。メモリは、プロセッサまたはプロセッシングユニットの内部および／または外部に設けることができる。ここで用いられるように、「メモリ」という語は、あらゆる種類の長期記憶用、短期記憶用、揮発性、不揮発性またはその他のメモリを意味する。つまり、「メモリ」は特定の種類および／または数に限定されない。また、記憶が格納される媒体の種類も限定されない。

１ 電子機器
１１ コントローラ
１２ タイマー
１３ カメラ
１４ ディスプレイ
１５ マイク
１６ ストレージ
１７ 通信ユニット
１８ 近接センサ
１９ ＵＶセンサ
２０ 照度センサ
２１ 加速度センサ
２２ 地磁気センサ
２３ 気圧センサ
２４ ジャイロセンサ
２５ スピーカー
１４０，１４１ 選択ボタン
１８０ 光源用赤外ＬＥＤ
１８１ レンズ
ＳＵ，ＳＲ，ＳＤ，ＳＬ フォトダイオード

Claims (9)

1. 近接センサと、
   前記近接センサからの出力と、自機器の状態とに応じて、ジェスチャの方向を決定するコントローラと、
   を備える電子機器。
2. 前記コントローラは、前記近接センサからの出力と、自機器の状態とに応じて、前記ジェスチャの方向として優先的に判定される優先判定方向を決定し、前記優先判定方向に基づいて、前記ジェスチャの方向を決定する、請求項１に記載の電子機器。
3. 前記コントローラは、前記優先判定方向以外の方向のジェスチャを無効なジェスチャと判定する、請求項２に記載の電子機器。
4. 画面を表示するディスプレイをさらに備え、
   前記優先判定方向は、前記ディスプレイに表示される前記画面の上下方向または左右方向のいずれかである、請求項２または請求項３に記載の電子機器。
5. 画面を表示するディスプレイをさらに備え、
   前記自機器の状態は、前記ディスプレイに表示される前記画面の向きである、
   ことを特徴とする、請求項１乃至請求項３のいずれか一項に記載の電子機器。
6. 前記自機器の状態は、前記近接センサが前記出力を行ったときに実行される機能に応じて決定される、
   ことを特徴とする、請求項１乃至請求項５のいずれか一項に記載の電子機器。
7. 前記コントローラは、前記決定した前記ジェスチャの方向に応じた制御を行う、請求項１乃至請求項６のいずれか一項に記載の電子機器。
8. 近接センサと、コントローラと、を備える電子機器に、
   前記コントローラにより、前記近接センサからの出力と、前記電子機器の状態とに応じて、前記ジェスチャの方向を決定するステップ
   を実行させるプログラム。
9. 近接センサと、コントローラと、を備える電子機器の制御方法であって、
   前記コントローラにより、前記近接センサからの出力と、前記電子機器の状態とに応じて、前記ジェスチャの方向を決定するステップ
   を含む制御方法。

Images