JP6310556B2 - スクリーン制御方法及び装置 - Google Patents

Description

本発明は、モバイル通信技術分野に関し、特にスクリーン制御方法及び装置に関する。

技術の絶え間ない発展につれて、携帯電話に代表されるモバイル端末はすでにユーザに広く使用されており、携帯電話はもはやユーザの身の回りには欠かせない使用ツールとなった。

携帯電話が待機状態のとき、節電のため通常はスクリーンをオフにしなければならない。ユーザが再度携帯電話を閲覧又は使用するときは、携帯電話上の特定のボタンにトリガーしてスクリーンをオンにしなければならない。

本発明は、関連技術に存在する不足を解決するため、スクリーン制御方法及び装置を提供する。

本発明の実施例の第１の態様によれば、スクリーン制御方法を提供する。

前記スクリーン制御方法は、
モバイル端末の移動方向を検出するステップと、
前記モバイル端末のスクリーンの向きを検出するステップと、
所定のスマートウェアラブルデバイスが送信した姿態識別情報を受信するステップと、
前記移動方向、前記スクリーンの向き及び前記姿態識別情報における手のひらの向きがいずれも第１所定方向であるとき、所定のスマートグラスへスクリーン識別指令を送信し、前記所定のスマートグラスが送信したスクリーン識別成功情報を受信したとき、前記モバイル端末のスクリーンを点灯するステップと、
前記移動方向、前記スクリーンの向き及び前記姿態識別情報における手のひらの向きがいずれも第２所定方向であるとき、前記モバイル端末のスクリーンをオフにするステップであって、前記第１所定方向と前記第２所定方向は異なる方向となる前記オフにするステップと、を含む。

本発明が提供する当該方法は、ユーザが手に持っているモバイル端末の移動方向、スクリーンの向き及び姿態識別情報における手のひらの向きが全てユーザの顔を向いていることを検出し、且つモバイル端末もユーザウェアラブルのスマートグラスが送信したスクリーン識別成功情報を受信したとき、ユーザがモバイル端末を閲覧又は操作する必要があると特定することができる。このとき、モバイル端末のスクリーンを点灯する。ユーザが特定ボタンに触れなければモバイル端末のスクリーンをオンにできないという煩雑性を無くすことができるのみならず、モバイル端末のスクリーン点灯の正確性を高め、誤操作を避けることができる。

好ましくは、前記第１所定方向が上向きであれば、前記第２所定方向は下向きである。

ユーザ間は一般的には立っているか座っている状態であるため、第１所定方向は上向きで良く、第２所定方向は下向きでよい。上向きである時、ユーザの顔を向いていることを示す。

好ましくは、前記モバイル端末の移動方向を検出するステップは、
前記モバイル端末における重力センサが検出した重力数値を取得するステップと、
前記重力数値が第１所定閾値より大きいとき、前記モバイル端末の移動方向を前記第１所定方向として特定するステップと、
前記重力数値が第２所定閾値より小さいとき、前記モバイル端末の移動方向を前記第２所定方向として特定し、前記第１所定閾値は前記第２所定閾値より大きいステップと、を含む。

モバイル端末内部に設置した重力センサが検出したデータに基づいて、モバイル端末の移動方向の検出を準備し、より速く検出することができる。

好ましくは、前記モバイル端末のスクリーンの向きを検出するステップは、
前記モバイル端末における重力センサが収集したＺ軸データを取得するステップと、
前記Ｚ軸データが正値であるとき、前記モバイル端末のスクリーンの向きを前記第１所定方向として特定するステップと、
前記Ｚ軸データが負値であるとき、前記モバイル端末のスクリーンの向きを前記第２所定方向として特定するステップと、を含む。

モバイル端末内部に設置した重力センサが検出したデータに基づいて、モバイル端末のスクリーンの向きの検出を準備し、より速く検出することができる。

好ましくは、前記方法は、
前記モバイル端末のスクリーンの状態を検出するステップと、
前記モバイル端末のスクリーンがオフ状態のとき、前記モバイル端末のスクリーン点灯を実行するステップと、
前記モバイル端末のスクリーンが点灯状態のとき、前記モバイル端末のスクリーンオフを実行するステップと、をさらに含む。

本発明の実施例の第２の態様によれば、スマートグラスに用いられるスクリーン制御方法をする。前記方法は、
モバイル端末が送信したスクリーン識別指令を受信したとき、スクリーン識別操作を起動するステップと、
スマートグラスの視野範囲内の画像を取得するステップと、
前記画像中に前記モバイル端末のスクリーン特徴が含まれているかどうかを判断するステップと、
前記画像中に前記モバイル端末のスクリーン特徴が含まれているとき、スクリーン識別成功情報を生成するステップと、
前記スクリーン識別成功情報を前記モバイル端末へ送信するステップと、を含む。

スマートグラスの視野範囲内に対する画像識別により、ユーザかモバイル端末のスクリーンを注視しているかどうか、又はユーザがモバイル端末のスクリーンを眺めているかどうかを正確に判断することができる。もしユーザモバイル端末のスクリーンを注視していれば、スマートグラスはモバイル端末のスクリーン識別に成功したことを示し、スクリーン識別成功情報を生成し、モバイル端末へ送信することができる。これにより、モバイル端末は相応の操作を行う。

好ましくは、前記画像中にモバイル端末のスクリーン特徴が含まれているかどうかを判断するステップは、
前記画像中の特徴情報を抽出するステップと、
前記モバイル端末の所定のスクリーン特徴テンプレートを取得するステップと、
前記特徴情報と前記所定のスクリーン特徴テンプレートがマッチングするかどうかを判断するステップと、
前記特徴情報と前記所定のスクリーン特徴テンプレートがマッチングするとき、画像中に前記モバイル端末のスクリーン特徴が含まれていることを特定するステップと、
前記特徴情報と前記所定のスクリーン特徴テンプレートがマッチングしないとき、前記画像中に前記モバイル端末のスクリーン特徴が含まれていないことを特定するステップと、を含む。

スマートグラスが撮影した画像に対する識別により、特徴マッチング方法を利用して当該画像中にモバイル端末のスクリーン特徴が含まれているかどうかを正確に判断することができる。即ち、ユーザがモバイル端末のスクリーンを注視又は眺めているかどうかを特定することができる。

本発明の実施例の第３の態様によれば、モバイル端末に用いられるスクリーン制御装置を提供する。前記装置は、
前記モバイル端末の移動方向を検出する、移動方向検出手段と、
前記モバイル端末のスクリーンの向きを検出する、スクリーン向き検出手段と、
所定のスマートウェアラブルデバイスが送信した姿態識別情報を受信する、情報受信手段と、
前記移動方向、前記スクリーンの向き及び前記姿態識別情報における手のひらの向き全てが第１所定方向であるとき、所定のスマートグラスへスクリーン識別指令を送信する、指令送信手段と、
前記所定のスマートグラスが送信したスクリーン識別成功情報を受信したとき、前記モバイル端末のスクリーンを点灯する、スクリーン点灯手段と、
前記移動方向、前記スクリーンの向き及び前記姿態識別情報における手のひらの向きがいずれも第２所定方向であるとき、前記モバイル端末のスクリーンをオフにするスクリーンオフ手段であって、前記第１所定方向と前記第２所定方向は異なる方向となる、前記スクリーンオフ手段と、を備える。

好ましくは、前記第１所定方向は上向きであり、前記第２所定方向は下向きである。

好ましくは、前記移動方向検出手段は、
前記モバイル端末における重力センサが検出した重力数値を取得する、重力数値取得モジュールと、
前記重力数値が第１所定閾値より大きいとき、前記モバイル端末の移動方向を前記第１所定方向として特定する、第１移動方向特定モジュールと、
前記重力数値が第２所定閾値より小さいとき、前記モバイル端末の移動方向を前記第２所定方向として特定し、前記第１所定閾値は前記第２所定閾値より大きい、第２移動方向特定モジュールと、を備える。

好ましくは、前記スクリーン向き検出手段は、
前記モバイル端末における重力センサが収集したＺ軸データを取得する、データ取得モジュールと、
前記Ｚ軸データが正値のとき、前記モバイル端末のスクリーンの向きを前記第１所定方向として特定する、第１スクリーン向き特定モジュールと、
前記Ｚ軸データが負値のとき、前記モバイル端末のスクリーンの向きを前記第２所定方向として特定する、第２スクリーン向き特定モジュールと、を備える。

好ましくは、前記装置は、
前記モバイル端末のスクリーンの状態を検出するスクリーン状態検出手段をさらに備え、
前記スクリーン点灯手段は、さらに、前記モバイル端末のスクリーンがオフ状態のとき、前記モバイル端末のスクリーンを点灯し、
前記スクリーンオフ手段は、さらに、前記モバイル端末のスクリーンが点灯状態のとき、前記モバイル端末のスクリーンをオフにする。

本発明の実施例の第４の態様によれば、スクリーン制御装置を提供する。前記装置はスマートグラスに用いられ、
モバイル端末が送信したスクリーン識別指令を受信したとき、スクリーン識別操作を起動する、起動手段と、
スマートグラスの視野範囲内の画像を取得する、画像取得手段と、
前記画像中に前記モバイル端末のスクリーン特徴が含まれているかどうかを判断する、判断手段と、
前記画像中に前記モバイル端末のスクリーン特徴が含まれているとき、スクリーン識別成功情報を生成する、情報生成手段と、
前記スクリーン識別成功情報を前記モバイル端末へ送信する、情報送信手段と、を備える。

好ましくは、前記判断手段は、
前記画像中の特徴情報を抽出する、特徴情報抽出モジュールと、
前記モバイル端末の所定のスクリーン特徴テンプレートを取得する、特徴テンプレート取得モジュールと、
前記特徴情報と前記所定のスクリーン特徴テンプレートがマッチングするかどうかを判断する、マッチング判断モジュールと、
前記特徴情報と前記所定のスクリーン特徴テンプレートがマッチングするとき、画像中に前記モバイル端末のスクリーン特徴が含まれていることを特定する、第１スクリーン特徴特定モジュールと、
前記特徴情報と前記所定のスクリーン特徴テンプレートがマッチングしないとき、前記画像中に前記モバイル端末のスクリーン特徴が含まれていないことを特定する、第２スクリーン特徴特定モジュールと、を備える。

本発明の実施例の第４の態様によれば、モバイル端末を提供する。前記端末は、
プロセッサと、
前記プロセッサの実行可能な指令を記憶するためのメモリと、を備え、
前記プロセッサは、
前記モバイル端末の移動方向を検出し、
前記モバイル端末のスクリーンの向きを検出し、
所定のスマートウェアラブルデバイスが送信した姿態識別情報を受信し、
前記移動方向、前記スクリーンの向き及び前記姿態識別情報における手のひらの向きがいずれも第１所定方向であるとき、所定のスマートグラスへスクリーン識別指令を送信し、前記所定のスマートグラスが送信したスクリーン識別成功情報を受信したとき、前記モバイル端末のスクリーンを点灯し、
前記移動方向、前記スクリーンの向き及び前記姿態識別情報における手のひらの向きがいずれも第２所定方向であるとき、前記モバイル端末のスクリーンをオフにし、前記第１所定方向と前記第２所定方向は異なる方向となるように構成される。

本発明の実施例の第５の態様によれば、スマートグラスを提供する。前記スマートグラスは、
プロセッサと、
前記プロセッサの実行可能な指令を記憶するためのメモリと、を備え、
前記プロセッサは、
モバイル端末が送信したスクリーン識別指令を受信したとき、スクリーン識別操作を起動し、
スマートグラスの視野範囲内の画像を取得し、
前記画像中に前記モバイル端末のスクリーン特徴が含まれているかどうかを判断し、
前記画像中に前記モバイル端末のスクリーン特徴が含まれているとき、スクリーン識別成功情報を生成し、
前記スクリーン識別成功情報を前記モバイル端末へ送信するように構成される。

本発明の実施例にかかる技術案は、以下の格別な作用効果を含むことができる。

本発明の実施例にかかるスクリーン制御方法及び装置は、ユーザが手に持っているモバイル端末の移動方向、スクリーンの向き及び姿態識別情報における手のひらの向きが全てユーザの顔を向いていることを検出し、且つモバイル端末もユーザウェアラブルのスマートグラスが送信したスクリーン識別成功情報を受信したとき、ユーザがモバイル端末を閲覧又は操作する必要があると特定することができる。このとき、モバイル端末のスクリーンを点灯する。ユーザが特定ボタンに触れなければモバイル端末のスクリーンをオンにできないという煩雑性無くすことができるのみならず、モバイル端末のスクリーン点灯の正確性を高め、誤操作を避けることができる。

ユーザが手に持っているモバイル端末の移動方向、スクリーンの向き及び姿態識別情報における手のひらの向きが全てユーザの顔から離れていることを検出したとき、ユーザがモバイル端末を閲覧又は操作する必要がないと特定できる。これにより、当該モバイル端末のスクリーンをオフにして、モバイル端末の電力を節約して、駆動能力を高め、ユーザが特定ボタンに触れなければモバイル端末のスクリーンをオンにできないという煩雑性を回避することができる。

前記した一般的な記述及び後続する詳細な記述は、単に例示的及び解釈的なものであり、本発明を制限できるものでないと理解されるべきである。

ここでの図面は、明細書を構成する一部として見なされ、本発明に適した実施例を示し、且つ、明細書の文字記載とともに本発明の仕組みを解釈するために用いられる。
一実施例にかかるシナリオを示す図である。 別の一実施例にかかるスクリーン制御方法を示すフローチャートである。 図２におけるステップＳ２１０を示すフローチャートである。 さらなる一実施例にかかるシナリオを示す図である。 図２におけるステップＳ２２０を示すフローチャートである。 さらなる一実施例にかかるスクリーン制御方法を示すフローチャートである。 さらなる一実施例にかかるスクリーン制御方法を示すフローチャートである。 さらなる一実施例にかかるシナリオを示す図である。 図７におけるステップＳ７３０を示すフローチャートである。 一実施例にかかるスクリーン制御装置を示す構造模式図である。 図１０における移動方向検出手段を示す図である。 図１０におけるスクリーン向き検出手段を示す図である。 さらなる一実施例にかかるスクリーン制御装置を示す構造模式図である。 さらなる一実施例にかかるスクリーン制御装置を示す構造模式図である。 図１４における判断手段を示す図である。 一実施例にかかるモバイル端末を示す構造模式図である。

次に、実施例を詳細に説明し、例示が図に示されている。以下の記述が図にかかるとき、別途にて示さない限り、異なる図面における同じ符号は、同じまたは類似する要素を示す。以下の実施例に記述される実施形態は、本発明と一致する全ての実施形態を代表するとは限らない。逆に、それらは、添付する特許請求の範囲に記載されているように、本発明の一部の態様と一致する装置及び方法の例に過ぎない。

図１に示すように、図１は、一実施例にかかるシナリオを示す図である。図１は、携帯電話１００と、スマートグラス２００と、スマートブレスレット３００を備える。ここで、携帯電話１００は、それぞれスマートグラス２００と、スマートブレスレット３００と通信でき、この通信方法はブルートゥース（登録商標）、ワイヤレスネットワーク等の方法を用いることができる。

ユーザ携帯電話１００を手に持って操作するとき、もし携帯電話１００に移動が生じれば、携帯電話１００に内蔵の重力センサは当該携帯電話１００自身の重力数値を検出することができ、且つ携帯電話１００は当該重力数値に基づいて、自身の移動方向を判断することができる。この他に、スマートブレスレット３００自身は加速度センサを設置しており、当該加速度センサに基づいて数値を検出し、当該数値に基づいて、ユーザの姿態識別情報を識別することができる、且つ当該姿態識別情報を携帯電話１００へ送信する。例えば、当該姿態識別情報は、ユーザの手のひらの向きを含むことができる。

携帯電話１００が上方向に移動し、ユーザの手のひらが上向きであるとき、携帯電話１００はスマートグラス２００へスクリーン識別指令を送信する。スマートグラス２００は携帯電話１００が送信したスクリーン識別指令を受信したとき、スマートグラス２００は当該スクリーン識別指令に基づいて、スクリーン識別操作を起動し、スマートグラス２００の現在の視野内に携帯電話１００を含むかどうかを識別する。もしスマートグラス２００の現在の視野内に携帯電話１００を含む場合、スマートグラス２００は携帯電話１００へ識別成功情報を送信し、携帯電話１００はスマートグラス２００が送信した識別成功情報に基づいて、モバイル端末のスクリーンを点灯する。

説明が必要なことは、前記携帯電話１００が上方向に移動し、携帯電話のスクリーンが上向き且つユーザの手のひらも上向きであるとき、ユーザが携帯電話１００をユーザの顔に向けて移動しながら操作していることを示す。この方法によりユーザが意図的に携帯電話を閲覧していることを一定程度予測する。ユーザが携帯電話を閲覧する必要があるかどうかをより正確に判断するために、スマートグラス２００のスクリーン識別操作を組み合わせなければならない。これにより、ユーザがスクリーンを閲覧する必要があるかどうかをよりいっそう正確に判断することができる。さらに携帯電話１００のスクリーンを点灯し、通常はユーザが特定ボタンに触れなければ携帯電話のスクリーンをオンにできないという問題避けることができ、ユーザの操作に大きな便利を与えることができる。

携帯電話１００が下方向に移動し、携帯電話のスクリーンが下向き且つユーザの手のひらも下向きであるとき、ユーザは携帯電話１００を閲覧する必要がないことを示す。当然、携帯電話１００のスクリーンも点灯する必要がない。もしこのとき携帯電話１００のスクリーンが点灯状態であれば、携帯電話１００のスクリーンを直接オフにすることができる。

説明が必要なことは、図１における１００はタブレットＰＣ等のモバイルデバイスでも良く、３００はスマートウォッチ等のウェアラブルリストバンドデバイスでもよい。

前記実行フローを詳細に説明するために、本発明の実施例はモバイル端末に用いられるスクリーン制御方法を提供する。図２に示すように、当該方法は以下のステップを含んでもよい。

ステップＳ２１０では、モバイル端末の移動方向を検出する。

モバイル端末はユーザが頻繁に使用する携帯電話、タブレットＰＣ及び電子書籍等のポータブルデバイスでもよい。理解の便宜上、実施例ではモバイル端末は携帯電話を例にして説明を記述する。

現在、ユーザが使用している携帯電話は一般的に加速度センサのような携帯電話の移動方向を検出するセンサを設置している。携帯電話は、内部に設置したセンサが検出したパラメータ情報により、容易に自身の移動方向を識別することができる。

ステップＳ２２０では、モバイル端末のスクリーンの向きを検出する。

携帯電話のスクリーンの向きを上向きと下向きに区別することができる。同様に携帯電話内の加速度センサが検出したパラメータ情報を利用して、携帯電話のスクリーンの向きが上向きか下向きかどうかを判断することができる。例えば、携帯電話のスクリーンの向きは他の方向でもよく、ユーザの左側又は右側等でもよい。本発明に係る実施例はこれに限らず、上向きと下向きのみを例にする。

ステップＳ２３０では、所定のスマートウェアラブルデバイスが送信した姿態識別情報を受信する。

所定のスマートウェアラブルデバイスは現在常用しているスマートブレスレット、スマートウォッチ等のデバイスでもよいため、ここでは、スマートウォッチを例とする。一般的にスマートウォッチは加速度センサをしており、加速度センサが検出したパラメータ情報を取得することにより、スマートウォッチはより速く、ユーザのリストバンド部位かどうか動いているかを正確に識別し、ユーザの手のひらの現在の向きを判断することができる。

ステップＳ２４０では、移動方向、スクリーンの向き及び姿態識別情報における手のひらの向き全てが第１所定方向であるとき、所定のスマートグラスへスクリーン識別指令を送信する。

携帯電話の移動方向、スクリーンの向き及びユーザの手のひらの向き全てが第１所定方向であると検出したとき、例えば、第１所定方向が顔を向いているときは、ユーザが意図的に携帯電話を操作する必要があり、携帯電話のスクリーン上の関連情報を閲覧していることを示す。このとき、ユーザが携帯電話を閲覧する必要があるかどうかをより正確に確認するため、スマートグラスへスクリーン識別指令を送信し、ユーザが装着しているスマートグラスの視野内に当該携帯電話の画像特徴があるかどうかを確認しなければならない。

ステップＳ２５０では、所定のスマートグラスが送信したスクリーン識別成功情報を受信したとき、モバイル端末のスクリーンを点灯する。

スクリーン識別成功情報は、スマートグラスがユーザの眼球が携帯電話を注視していることの検出にした成功情報を含まなければならない。もしユーザが目を閉じている状態又はユーザの眼球が携帯電話を注視していない場合、ユーザはおそらく携帯電話を閲覧又は操作必要がないことを示す。誤操作を避けるため、このとき携帯電話のスクリーンも点灯する必要はない。

もし携帯電話が所定のスマートグラスが送信したスクリーン識別成功情報を受信した場合、携帯電話の移動方向、スクリーンの向き及びユーザの手のひらの向きを組み合わせ、ユーザが現在手に持っている携帯電話は自身の顔を向いて移動し、且つユーザの目は携帯電話を注視していることを示し、ユーザが当該携帯電話を閲覧又は操作しなければならないことを特定することができる。したがって、このとき、携帯電話のスクリーンを点灯することができる。ユーザが特定ボタンに触れなければ携帯電話のスクリーンを点灯できないという問題を避けることができ、前記ステップも大幅に携帯電話のスクリーン点灯の精度を高め、誤操作を避けることができる。

ステップＳ２６０では、移動方向、スクリーンの向き及び姿態識別情報における手のひらの向きがいずれも第２所定方向であるとき、モバイル端末のスクリーンをオフにする。

モバイル端末の移動方向、スクリーンの向き及び姿態識別情報における手のひらの向きがいずれも第２所定方向であるとき、例えば、向きがユーザの顔から離れているとき、ユーザはすでに携帯電話を閲覧又は操作する必要がないことを示す。もしこのとき携帯電話のスクリーンが点灯状態であれば、携帯電話の電力を節約するため、及びユーザが特定ボタンに触れなければ携帯電話のスクリーンをオンにできないことをさけるため、この場合は、自動で携帯電話のスクリーンをオフにして、携帯電話のスクリーンを非点灯状態にさせることができる。

説明が必要なことは、第１所定方向と第２所定方向は異なる。例えば、第１所定方向がユーザの顔を向いていれば、第２所定方向はユーザの顔から離れていてもよい。実施例にかかるユーザとは、実施例において携帯電話を操作するユーザをいう。当然、実施例にかかるウェアラブルデバイスも当該ユーザの体に装着しているものをいう。

本発明の実施例が提供するスクリーン制御方法は、検出したユーザが手に持っているモバイル端末の移動方向、スクリーンの向き及び姿態識別情報における手のひらの向きが全てユーザの顔方向にあり、且つモバイル端末もユーザウェアラブルのスマートグラスが送信したスクリーン識別成功情報を受信するとき、ユーザがモバイル端末を閲覧又は操作する必要があると特定することができる。このとき、モバイル端末のスクリーンを点灯する。ユーザが特定ボタンに触れなければモバイル端末のスクリーンをオンにできないという煩雑性を無くすことができるのみならず、モバイル端末のスクリーン点灯の正確性を高め、誤操作を避けることができる。

検出したユーザが手に持っているモバイル端末の移動方向、スクリーンの向き及び姿態識別情報における手のひらの向きが全てユーザの顔方向から離れているとき、ユーザがモバイル端末を閲覧又は操作する必要がないと特定できる。これにより、当該モバイル端末のスクリーンをオフにして、モバイル端末の電力を節約して、駆動能力を高め、ユーザが特定ボタンに触れなければモバイル端末のスクリーンをオンにできないという煩雑性を回避することができる。モバイルデバイス使用において、ユーザの操作に大きな便利を与えることができる。

説明が必要なことは、第１所定方向はユーザの顔を向いており、第２所定方向はユーザの顔から離れている。ユーザの状態は一般的には立っているか座っている状態であるため、前記ステップでは第１所定方向は上向きでよく、第２所定方向は下向きでよい。上向きである時は、ユーザの顔を向いていることを示す。モバイル端末が位置する水平面を境界線とすることができ、モバイル端末が当該水平面より上方向に移動している時は、当該モバイル端末は上方向に移動していると特定することができる。これに反して、当該モバイル端末が下方向に移動していれば、当然下方向に移動していると特定することができる。もし当該モバイル端末が当該水平面に沿って移動していれば、当該モバイル端末が移動している方向は水平方向となる。即ち、上向きに移動しておらず、下向きにも移動していない。

モバイル端末のスクリーンの向きも当該モバイル端末が位置する水平面を境界線とすることができ、モバイル端末のスクリーンが位置するスクリーンと当該水平面との夾角を判断基準にして、当該モバイル端末のスクリーンの向きを特定することができる。これらは従来技術であるため、繰り返して説明しない。

本発明の実施例にかかるスマートウェアラブルデバイスは主に、スマートブレスレット、スマートウォッチ等のリストバンドデバイスを指し、スマートグラスは含まない。スマートウェアラブルデバイスはユーザの腕に装着され、スマートウェアラブルデバイスとユーザの腕の相対位置はさほど変化しない。例えば、図１に示すように、スマートブレスレット３００の上端とユーザの手の甲の位置はさほど変化しない。これにより、スマートブレスレット３００に内蔵した加速度センサは、当該スマートブレスレットが動いている方位等の情報を検出することができる。さらに、ユーザの腕部の向き及びユーザ手の平の向きを直接検出することができる。

正確にモバイル端末の移動方向を検出するため、図２に示す方法の詳細として、さらなる一実施例において、図３に示すように、ステップＳ２１０はさらに以下のステップを含んでもよい。

ステップＳ２１１では、モバイル端末における重力センサが検出した重力数値を取得する。

現在、携帯電話、タブレットＰＣ等のユーザが使用しているモバイル端末デバイスには内部に全て重力センサを設置しており、モバイル端末は当該重力センサにより、自身の重力数値を取得することができる。

図４を組み合わせると、現在の重力センサはモバイル端末の三軸の重力数値、即ち（ｘ，ｙ，ｚ）を検出することができる。

ステップＳ２１２では、重力数値が第１所定閾値より大きいとき、モバイル端末の移動方向を第１所定方向であると特定する。

ステップＳ２１３では、重力数値が第２所定閾値より小さいとき、モバイル端末の移動方向を第２所定方向であると特定する。

現在のモバイル端末内部に設置した重力センサに基づいて、モバイル端末の移動方向を検出するステップは、多くの方法があるため、ここでは繰り返して説明しない。例えば、重力センサが検出したｚ軸重力数値に基づいて、当該モバイル端末の移動方向を判断することができる。もし当該ｚ軸重力数値が第１所定の数値より大きければ、モバイル端末は第１所定方向を向いて移動していると特定することができる。もし当該ｚ軸重力数値が第２所定閾値より小さければ、モバイル端末は第２所定方向を向いて移動していると特定することができる。

例えば、さらに当該ｚ軸重力数値がある正数より大きければ、モバイル端末上方向に移動していることを示し、もし当該ｚ軸重力数値がある負数より小さければ、当該モバイル端末が下向きに移動していることを示す。

当然、説明が必要なことは、第１所定閾値は第２所定閾値より大きい。

これにより、モバイル端末に内蔵した重力センサが検出した重力数値に基づいて、より速く、正確に出当該モバイル端末が移動している方向を判断することができる。

正確にモバイル端末のスクリーンの向きを検出するため、図２に示す方法の詳細として、さらなる一実施例において、図５に示すように、ステップＳ２２０はさらに以下のステップを含んでもよい。

ステップＳ２２１では、モバイル端末における重力センサが収集したＺ軸データを取得する。

ステップＳ２２２では、Ｚ軸データが正値のとき、モバイル端末のスクリーンの向きは第１所定方向であると特定する。

ステップＳ２２３では、Ｚ軸データが負値のとき、モバイル端末のスクリーンの向きは第２所定方向であるであると特定する。

前記ステップ及び図４を組み合わせて説明できるため、ここでは繰り返して説明しないが、モバイル端末に内蔵した重力センサが検出したｚ軸重力数値に基づいて、より速く、正確に当該モバイル端末モバイルスクリーンの向きを判断することができ、ｚ軸重力数値が正値のときは、当該モバイル端末のスクリーンが下向きであることを示し、ｚ軸重力数値が負値のときは、当該モバイル端末のスクリーンが上向きであることを示す。

正確にモバイル端末のスクリーンを点灯又はオフするため、図２に示す方法の詳細として、さらなる一実施例において、図６に示すように、当該方法はさらに以下のステップを含んでもよい。

ステップＳ２７０では、モバイル端末のスクリーンの状態を検出する。

ステップＳ２８０では、モバイル端末のスクリーンがオフ状態のとき、モバイル端末のスクリーンを点灯する。

ステップＳ２９０では、モバイル端末のスクリーンが点灯状態のとき、モバイル端末のスクリーンをオフにする。

図２に示す基礎において、もしこのときユーザが手に持っているモバイル端末をユーザの顔に向けて移動し、且つモバイル端末はスマートグラスが送信したスクリーン成功識別情報を受信すれば、当該ユーザが意図的に当該モバイル端末を閲覧又は操作したことを示し、当該モバイル端末のスクリーンの状態を検出しなければならない。もしこのとき、当該モバイル端末のスクリーンの状態がオフであれば、当該モバイル端末のスクリーンを点灯しなければならない。もしこのとき、モバイル端末のスクリーンがすでに点灯状態であれば、このときは操作する必要がない。

類似して、もしこのとき、ユーザが手に持っているモバイル端末をユーザの顔から離して移動していれば、ユーザはすでに当該モバイル端末を閲覧又は操作する必要がないことを示す。このとき、当該モバイル端末のスクリーンの状態がオフ状態であるかどうかをさらに検出しなければならなない。もしオフ状態でなければ、当該モバイル端末のスクリーンをオフにする。もしオフ状態であれば、操作する必要はない。

図２に示すスマートグラス２００側はいかにユーザがモバイル端末１００を閲覧しているかどうかを検出するステップを詳細に説明するため、さらなる一実施例において、図７において詳細に紹介する。図７に示すように、図７は、スマートグラスに用いられるスクリーン制御方法を提供する。当該方法は以下のステップを含んでもよい。

ステップＳ７１０では、モバイル端末が送信したスクリーン識別指令を受信したとき、スクリーン識別操作を起動する。

スマートグラスとモバイル端末は事前にペアリングしており、且つ両者はブルートゥース（登録商標）等の方法により通信することができる。スマートグラスはモバイル端末が送信したスクリーン識別指令を受信したとき、カメラを起動するなどスマートグラスのスクリーン識別操作をオンにする。

ステップＳ７２０では、スマートグラスの視野範囲内の画像を取得する。

ステップＳ７３０では、画像中にモバイル端末のスクリーン特徴が含まれているかどうかを判断する。

画像中にモバイル端末のスクリーン特徴を含むときは、ステップＳ７４０を実行する。

ステップＳ７４０では、スクリーン識別成功情報を生成する。

ステップＳ７５０では、スクリーン識別成功情報をモバイル端末へ送信する。

スマートグラスは自身のカメラをオンにすると、ある方向の視野範囲内にある景色を撮影しなければならない。このとき、２つの方法により識別判断を行うことができる。

第１方法では、従来技術において比較的成熟したアイトラッキング技術を利用してユーザが注視する方向にある景色を撮影し、ステップＳ７３０を実行する。このとき、スマートグラスが撮影した画像が含む視野範囲は小さい可能性がある。これにより、容易にユーザがモバイル端末のスクリーンを注視しているかどうかを識別することができる。

第２方法では、スマートグラスは自身に内蔵したカメラを起動し、視野範囲内に含むすべての景色の画像を撮影する。このような状況のもと、スマートグラスが撮影した画像が含む対象は多い可能性があるが、スマートグラスはユーザ頭部の移動に従い移動するため、即ち、スマートグラスとユーザ頭部の相対位置はさほど変化しない。これにより、撮影した画像の中心位置を中心として、所定の面積の画像を目標領域画像として取り出し、当該目標画像中にモバイル端末のスクリーン特徴が含まれているかどうかを検出する。即ち、ステップＳ７３０を実行する。図８を参照すると、図８に示すように、１００はモバイル端末であり、５００は前記スマートグラスが撮影した画像から選択した目標領域内の画像であり、４００はスマートグラスが撮影した画像である。

この他に、さらにユーザのグラスが目を閉じた状態であるかどうかを判断しなければならない。もしユーザが現在目を閉じた状態であれば、ユーザが手に持っているモバイル端末の動作は習慣性のある動作であり、当該モバイル端末を閲覧又は操作する必要がないことを示し、前記ステップの実行を終了することができる。もしスマートグラスが撮影した画像から、モバイル端末の特徴情報はスクリーン特徴ではないことを識別し、モバイル端末の側面又は背面であれば、ユーザが手に持っているモバイル端末の動作は習慣性のある動作であり、当該モバイル端末を閲覧又は操作する必要がないことを示し、前記ステップの実行を終了することができる。

前記ステップにおけるスマートグラスの視野範囲内に対する画像識別により、ユーザがモバイル端末のスクリーンを注視しているかどうか又はユーザがモバイル端末のスクリーンを眺めているかどうかを正確に判断することができる。もしユーザモバイル端末のスクリーンを注視していれば、スマートグラスはモバイル端末のスクリーン識別に成功したことを示し、スクリーン識別成功情報を生成し、モバイル端末へ送信することができる。これにより、モバイル端末は相応の操作を行う。

スマートグラスが撮影した画像がモバイル端末のスクリーン特徴を含むかどうかをいかに判断するかを詳細に説明するため、図７に示す方法の詳細として、在さらなる一実施例において、図９に示すように、ステップＳ７３０はさらに以下のステップを含んでもよい。

ステップＳ７３１では、画像中の特徴情報を抽出する。

スマートグラスが撮影した画像中の特徴情報を抽出するステップは、おもに当該画像中のモバイル端末を含むスクリーン特徴情報を抽出する。具体的には従来技術中の画像事前処理、興味のある領域の抽出により、画像中の特徴を抽出することができるが、ここでは繰り返して説明しない。

ステップＳ７３２では、モバイル端末の所定のスクリーン特徴テンプレートを取得する。

モバイル端末のスクリーン特徴テンプレートは事前に設置しており、スマートグラスのローカルデータベースに記憶することができる。多様なタイプのモバイル端末のスクリーン特徴モジュールを記憶でき、且つこれらのスクリーン特徴テンプレートは異なる姿態のモバイル端末のスクリーン特徴を含むことができる。

ステップＳ７３３では、特徴情報と所定のスクリーン特徴テンプレートがマッチングするかどうかを判断する。

マッチング度を設定でき、特徴情報とスクリーン特徴テンプレートのマッチング度がある設定の閾値より大きい又は等しいとき、特定特徴情報と当該スクリーン特徴テンプレートが互いにマッチングしていると特定する。特徴情報とスクリーン特徴テンプレートのマッチング度がある設定の閾値より大きくなく又は等しくないときはマッチングしない。

特徴情報と所定のスクリーン特徴テンプレートがマッチングするとき、ステップＳ７３４を実行する。

ステップＳ７３４では、画像中にモバイル端末のスクリーン特徴が含まれていることを特定する。

もし特徴情報とスクリーン特徴テンプレートが互いにマッチングすれば、当該画像中にモバイル端末のスクリーン特徴を含むことを示す。即ち、ユーザはモバイル端末のスクリーンを注視していることを示す。

特徴情報と所定のスクリーン特徴テンプレートがマッチングしないとき、ステップＳ７３５を実行する。

ステップＳ７３５では、画像中にモバイル端末のスクリーン特徴が含まれていないことを特定する。

もし特徴情報とスクリーン特徴テンプレートがマッチングしなければ、当該画像中にモバイル端末のスクリーン特徴を含まない、又は含んでいるスクリーン特徴が少ないことを示す。即ち、ユーザはモバイル端末のスクリーンを注視していないことを示す。

スマートグラスが撮影した画像に対する識別により、特徴マッチング方法を利用して当該画像中にモバイル端末のスクリーン特徴が含まれているかどうか正確に判断できる。即ち、ユーザがモバイル端末のスクリーンを注視又は眺めているかどうかを特定することができる。

以上の方法における実施例の記述により、当業者は、本発明はソフトウェアに必須の汎用ハードウェアプラットフォームを加えることにより実現することをできることを熟知している。当然ハードウェアによって実現することもでき、おおくの状況においては前者がより適切な実施方法である。このような理解に基づいて、本発明技術方案は本質上又は従来技術に貢献している部分はソフトウェア製品の形式により体現することができる。当該コンピュータソフトウェア製品は記憶媒体に記憶し、コンピュータデバイス（パーソナルコンピュータ、サーバ、又はネットワークデバイス等）に本発明の各実施例における前記方法の全て又は一部のステップを実行させる若干の指令を含む。前記記憶媒体は、読み出し専用メモリ（ＲＯＭ）、ランダムアクセスメモリ（ＲＡＭ）、磁気ディスク又はＣＤ−ＲＯＭ等の各種プログラムコード記憶可能な媒体を含む。

この他に、前記各実施例の実現として、本発明の実施例はさらにスクリーン制御装置を提供する。当該装置はモバイル端末中に位置し、図１０に示すように、図１０は、移動方向検出手段１０と、スクリーン向き検出手段２０と、情報受信手段３０と、指令送信手段４０と、スクリーン点灯手段５０と、スクリーンオフ手段６０と、を備える。

移動方向検出手段１０は、前記モバイル端末の移動方向を検出するように構成される。

スクリーン向き検出手段２０は、前記モバイル端末のスクリーンの向きを検出するように構成される。

ただし、情報受信手段３０は、所定のスマートウェアラブルデバイスが送信した姿態識別情報を受信するように構成される。

指令送信手段４０は、前記移動方向、前記スクリーンの向き及び前記姿態識別情報における手のひらの向き全てが第１所定方向であるとき、所定のスマートグラスへスクリーン識別指令を送信するように構成される。

スクリーン点灯手段５０は、前記所定のスマートグラスが送信したスクリーン識別成功情報を受信したとき、前記モバイル端末のスクリーンを点灯するように構成される。

スクリーンオフ手段６０は、前記移動方向前記スクリーンの向き及び前記姿態識別情報における手のひらの向きがいずれも第２所定方向であるとき、前記モバイル端末のスクリーンをオフにし、前記第１所定方向と前記第２所定方向は異なる方向となるように構成される。

この他に、前記第１所定方向は上向きであり、前記第２所定方向は下向きである。

さらなる一実施例において、図１０に基づいて、図１１が示すように、移動方向検出手段１０は、以下の重力数値取得モジュール１１と、第１移動方向特定モジュール１２と、第２移動方向特定モジュール１３と、を備える。ただし、
重力数値取得モジュール１１は、前記モバイル端末における重力センサが検出した重力数値を取得するように構成される。

第１移動方向特定モジュール１２は、前記重力数値が第１所定閾値より大きいとき、前記モバイル端末の移動方向を前記第１所定方向として特定するように構成される。

第２移動方向特定モジュール１３は、前記重力数値が第２所定閾値より小さいとき、前記モバイル端末の移動方向を特定し、前記第２所定方向とし、前記第１所定閾値は前記第２所定閾値より大きいように構成される。

さらなる一実施例において、図１０に基づいて、図１２に示すように、スクリーン向き検出手段２０は、データ取得モジュール２１と、第１スクリーン向き特定モジュール２２と、第２スクリーン向き特定モジュール２３と、を備える。ただし、
データ取得モジュール２１は、前記モバイル端末における重力センサが収集したＺ軸データを取得するように構成される。

第１スクリーン向き特定モジュール２２は、前記Ｚ軸データが正値のとき、前記モバイル端末のスクリーンの向きを前記第１所定方向として特定するように構成される。

第２スクリーン向き特定モジュール２３は、前記Ｚ軸データが負値のとき、前記モバイル端末のスクリーンの向きを前記第２所定方向として特定するように構成される。

さらなる一実施例において、図１０に基づいて、図１３に示すように、当該装置はさらに、スクリーン状態検出手段７０を備えてもよい。ただし、
前記スクリーン状態検出手段７０は、前記モバイル端末のスクリーンの状態を検出するように構成される。

前記スクリーン点灯手段５０は、さらに前記モバイル端末のスクリーンがオフ状態のとき、前記モバイル端末のスクリーンを点灯するように構成される。

前記スクリーンオフ手段６０は、さらに前記モバイル端末のスクリーンが点灯状態のとき、前記モバイル端末のスクリーンをオフにするように構成される。

この他に、本発明の実施例はスクリーン制御装置をさらに提供する。当該装置はスマートグラス内に位置し、図１４の示すように、当該装置は、起動手段９１０と、画像取得手段９２０と、判断手段９３０と、情報生成手段９４０と、情報送信手段９５０と、を備える。ただし、
起動手段９１０は、モバイル端末が送信したスクリーン識別指令を受信したとき、スクリーン識別操作を起動するように構成される。

画像取得手段９２０は、スマートグラスの視野範囲内の画像を取得するように構成される。

判断手段９３０は、前記画像中に前記モバイル端末のスクリーン特徴が含まれているかどうかを判断するように構成される。

情報生成手段９４０は、前記画像中に前記モバイル端末のスクリーン特徴が含まれているとき、スクリーン識別成功情報を生成するように構成される。

情報送信手段９５０は、前記スクリーン識別成功情報を前記モバイル端末へ送信するように構成される。

さらなる一実施例において、図１４に基づいて、図１５が示すように、判断手段９３０は、特徴情報抽出モジュール９３１と、特徴テンプレート取得モジュール９３２と、マッチング判断モジュール９３３と、第１スクリーン特徴特定モジュール９３４と、第２スクリーン特徴特定モジュール９３５と、を備える。ただし、
特徴情報抽出モジュール９３１は、前記画像中の特徴情報を抽出するように構成される。

特徴テンプレート取得モジュール９３２は、前記モバイル端末の所定のスクリーン特徴テンプレートを取得するように構成される。

マッチング判断モジュール９３３は、前記特徴情報と前記所定のスクリーン特徴テンプレートがマッチングするかどうかを判断するように構成される。

第１スクリーン特徴特定モジュール９３４は、前記特徴情報と前記所定のスクリーン特徴テンプレートがマッチングするとき、画像中に前記モバイル端末のスクリーン特徴が含まれていることを特定するように構成される。

第２スクリーン特徴特定モジュール９３５は、前記特徴情報と前記所定のスクリーン特徴テンプレートがマッチングしないとき、前記画像中に前記モバイル端末のスクリーン特徴が含まれていないことを特定するように構成される。

前記実施例における装置について、ここでは各モジュール実行操作の具体的方法はすでに関連する当該方法の実施例にて詳細に紹介したため、ここでは繰り返して説明しない。

図１６に示すように、図１６は一実施例にかかるモバイル端末を示す構造模式図である。例えば、端末１６００はモバイルフォン、コンピュータ、デジタルブロードキャスト端末、メッセージ送受信機器、ゲーム機、タブレット機器、医療機器、フィットネス機器、パーソナル・デジタル・アシスタント等である。

図１６を参照すると、端末１６００は、処理ユニット１６０２、メモリ１６０４、電源ユニット１６０６、マルチメディアユニット１６０８、オーディオユニット１６１０、入力/出力（Ｉ／Ｏ）インターフェース１６１２、センサユニット１６１４、及び、通信ユニット１６１６のうちの１つまたは複数を含んでもよい。

処理ユニット１６０２は、通常は、表示、電話発呼、データ通信、カメラ操作及び記録操作に関連する操作のような、装置１６００の全般操作を制御する。処理ユニット１６０２は、上記方法の全部または一部のステップを実施させるように、指令を実行するための１つまたは複数のプロセッサ１６２０を含んでもよい。また、処理ユニット１６０２は、処理ユニット１６０２と他のユニットとの間の相互作用を容易にするように、１つ又は複数のモジュールを含んでもよい。例えば、処理ユニット１６０２は、マルチメディアユニット１６０８と処理ユニット１６０２との間の相互作用を容易にするように、マルチメディアモジュールを含んでもよい。

メモリ１６０４は、各タイプのデータを記憶して装置１６００での操作をサポートするように構成される。これらのデータの例示は、装置１６００で操作するための任意のアプリケーションもしくは方法の指令、連絡人データ、電話帳データ、メッセージ、ピクチャ、ビデオなどを含む。メモリ１６０４は、如何なる種別の揮発性もしくは不揮発性記憶装置またはそれらの組合せで実現されてもよい。例えば、スタティックランダムアクセスメモリ（ＳＲＡＭ）、電気的に消去可能なプログラマブル読み出し専用メモリ（ＥＥＰＲＯＭ）、消去可能なプログラマブル読み出し専用メモリ（ＥＰＲＯＭ）、プログラマブル読み出し専用メモリ（ＰＲＯＭ）、読み出し専用メモリ（ＲＯＭ）、磁気メモリ、フラッシュメモリ、磁気ディスクまたは光ディスクであってもよい。

電源ユニット１６０６は、装置１６００のユニットのそれぞれに電力を供給する。電源ユニット１６０６は、電源管理システム、１つまたは複数の電源、並びに、装置１６００用の電力を生成、管理及び配分するに関する他のユニットを含んでもよい。

マルチメディアユニット１６０８は、前記装置１６００とユーザとの間に1つの出力インターフェースを供給するスクリーンを含む。一部の実施例では、スクリーンは、液晶ディスプレイ（ＬＣＤ）及びタッチパネル（ＴＰ）を含んでもよい。スクリーンは、タッチパネルを含む場合、ユーザからの入力信号を受信するように、タッチスクリーンとして実現されてもよい。タッチパネルは、タッチ、スライド及びタッチパネルでの姿態を感知するように、１つまたは複数のタッチセンサを含む。前記タッチセンサは、タッチあるいはスライド動作の境界を感知するだけではなく、前記タッチあるいはスライド操作と関連する持続時間及び圧力をさらに検出することができる。一部の実施例では、マルチメディアユニット１６０８は、１つのフロントカメラ及び/またはバックカメラを含む。装置１６００が操作モード、例えば、撮影モードあるいはビデオモードであるとき、フロントカメラ及び/またはバックカメラは、外部のマルチメディアデータを受信することができる。フロントカメラ及びバックカメラのそれぞれは、１つの固定の光学レンズシステムであってもよいし、焦点距離及び光学ズーム能力を有するものであってもよい。

オーディオユニット１６１０は、オーディオ信号を出力及び/または入力するように構成される。例えば、オーディオユニット１６１０は、マイク（ＭＩＣ）を備え、装置１６００が操作モード、例えば、発呼モード、記録モード及び音声識別モードであるとき、マイクは、外部オーディオ信号を受信するように構成される。受信されたオーディオ信号は、さらに、メモリ１６０４に格納される、または、通信ユニット１６１６を介して送信されることができる。一部の実施例では、オーディオユニット１６１０は、オーディオ信号を出力するためのスピーカをさらに含む。

Ｉ/Ｏインターフェース１６１２は、処理ユニット１６０２とペリフェラルインターフェースモジュールとの間でインターフェースを供給するものであり、前記ペリフェラルインターフェースモジュールは、キーボード、クリックホイール、ボタンなどであってもよい。これらのボタンには、ホームページボタン、ボリュームボタン、起動ボタン及びロックボタンが含まれてもよいが、それらに限定されない。

センサユニット１６１４は、様々な側面での状態推定を装置１６００に供給するための１つまたは複数のセンサを含む。例えば、センサユニット１６１４は、装置１６００のオン/オフ状態、ユニットの相対位置を検出することができ、前記ユニットは、例えば、装置１６００のディスプレイ及びキーパッドである。センサユニット１６１４は、さらに、装置１６００もしくは装置１６００の１つのユニットの位置変更、ユーザと装置１６００との接触の存在もしくは非存在、装置１６００の方位もしくは加速/減速及び装置１６００の温度変化をさらに検出することができる。センサユニット１６１４は、如何なる物理的接触もないとき、近辺にある物体の存在を検出するための近接センサを含んでもよい。センサユニット１６１４は、さらに、イメージングアプリケーションに使用される光センサ、例えばＣＭＯＳまたはＣＣＤ画像センサを含んでもよい。一部の実施例では、当該センサユニット１６１４は、さらに、加速度センサ、ジャイロセンサ、磁気センサ、圧力センサまたは温度センサを含んでもよい。

通信ユニット１６１６は、装置１６００と他の機器間の無線または有線方式の通信ができるように構成される。装置１６００は、通信規格に基づく無線ネットワーク、例えば、ＷｉＦｉ、２Ｇもしくは３Ｇ、またはそれらの組合せにアクセスすることができる。ある実施例では、通信ユニット１６１６は、外部ブロードキャスト管理システムからのブロードキャスト信号またはブロードキャスト関連情報をブロードキャストチャネルを介して受信する。ある実施例では、前記通信ユニット１６１６は、さらに、短距離通信を容易にするように、ニアフィールド通信（ＮＦＣ）モジュールを含む。例えば、ＮＦＣモジュールは、無線周波数識別（ＲＦＩＤ）技術、赤外データ協会（ＩｒＤＡ）技術、超広帯域（ＵＷＢ）技術、ブルートゥース（登録商標）（ＢＴ）技術及び他の技術によって実現されてもよい。

実施例では、装置１６００は、上記方法を実行するための１つ又は複数の特定用途向け集積回路（ＡＳＩＣ）、デジタル信号プロセッサ（ＤＳＰ）、デジタル信号処理デバイス（ＤＳＰＤ）、プログラマブルロジックデバイス（ＰＬＤ）、フィールドプログラマブルゲートアレイ（ＦＰＧＡ）、コントローラ、マイクロコントローラ、マイクロプロセッサまたは他の電子部品によって実現されてもよい。

実施例では、指令を含む非一時的コンピュータ読み取り可能な記憶媒体、例えば、指令を含むメモリ１６０４をさらに提供し、上記指令が装置１６００のプロセッサ１６２０によって実行されることで上述方法を実施させることができる。例えば、前記非一時的コンピュータ読み取り可能な記憶媒体は、ＲＯＭ、ランダムアクセスメモリ（ＲＡＭ）、ＣＤ−ＲＯＭ、磁気テープ、フロッピー（登録商標）ディスク及び光データ記憶機器などであってもよい。

ただし、端末１６００はモバイル端末でもよく、スマートグラスでもよい。

非一時的コンピュータ読み取り可能な記憶媒体は、前記記憶媒体中の指令をモバイル端末のプロセッサにより実行するとき、モバイル端末にスクリーン制御方法を実行させる。前記方法は、
前記モバイル端末の移動方向を検出するステップと、
前記モバイル端末のスクリーンの向きを検出するステップと、
所定のスマートウェアラブルデバイスが送信した姿態識別情報を受信するステップと、
前記移動方向、前記スクリーンの向き及び前記姿態識別情報における手のひらの向き全てが第１所定方向であるとき、所定のスマートグラスへスクリーン識別指令を送信するステップと、前記所定のスマートグラスが送信したスクリーン識別成功情報を受信したとき、前記モバイル端末のスクリーンを点灯するステップと、
前記移動方向、前記スクリーンの向き及び前記姿態識別情報における手のひらの向きがいずれも第２所定方向であるとき、前記モバイル端末のスクリーンをオフにし、前記第１所定方向と前記第２所定方向は異なる方向となるステップと、を含む。

この他に、非一時的コンピュータ読み取り可能な記憶媒体は、前記記憶媒体中の指令をスマートグラスのプロセッサにより実行するとき、スマートグラスにスクリーン制御方法を実行させる。前記方法は、
モバイル端末が送信したスクリーン識別指令を受信したとき、スクリーン識別操作を起動するステップと、
スマートグラスの視野範囲内の画像を取得するステップと、
前記画像中に前記モバイル端末のスクリーン特徴が含まれているかどうかを判断するステップと、
前記画像中に前記モバイル端末のスクリーン特徴が含まれているとき、スクリーン識別成功情報を生成するステップと、
前記スクリーン識別成功情報を前記モバイル端末へ送信するステップと、を含む。

理解できることは、本発明は多くの汎用又は専用の算定システム環境又は配置に用いることができる。例えば、パーソナルコンピュータ、サーバコンピュータ、ポータブルデバイス又は携帯式デバイス、タブレット型デバイス、マルチプロセッサと、システム、マイクロプロセッサに基づくシステム、セット トップ ボックス、書き込み可能な消費電子デバイス、ネットワークＰＣ、小型コンピュータ、大型コンピュータ等の以上のいかなるシステム又はデバイスの分散コンピューティング環境等を含む。

本発明は、例えば、プログラムモジュールのようなコンピュータにより実行したコンピュータの実行可能な指令の一般上下文中において記述することができる。一般的に、プログラムモジュールは、特定タスクを実行する又は抽象データタイプを特定するルーチン、プログラム、オブジェクト、ユニット、データ構造等を含む。分散コンピューティング環境において本発明を実践することもでき、これら分散コンピューティング環境において通信ネットワークにより接続した遠隔処理デバイスによりタスクを実行する。分散コンピューティング環境において、プログラムモジュール記憶デバイスを含むローカルまたは遠隔コンピュータ記憶媒体に位置することができる。

説明が必要なことは、本文において、「第１」と「第２」などの関連用語は１つのエンティティ又は操作と別のエンティティ又は操作を区別するために使用するもので、これらエンティティ又は操作にはいかなる関係又は順序を要求又は暗示するとは限らない。さらに、関連用語の「備える」、「含まれる」またはその他の変形例は、非排他的な含むという意味をカバーし、一連の要素の処理、方法、物品又は装置のみに含まれない要素を含み、明確に列挙された他の要素、もしくはこのような過程、方法、物品又は固有の要素を含む装置をさらに含む。多くの制限がない状況のもと、「を含む……」という語句が限定する要素は、過程、方法、物品またはデバイスにこれらと別の同様な要素を含むことを排除しない。

当業者は明細書を考慮し、ここに公開された開示を実践した後、本発明の他の実施案を容易に想到する。本願は、本発明の如何なる変形、用途又は適合もカバーすることを意図する。これらの変形、用途又は適合は、本発明の一般的な仕組みに従い、かつ、本発明に公開されていない当分野における公知常識又は慣用技術手段を含む。明細書及び実施例は単なる例示と見なされ、本発明の本当の範囲及び思想は添付する特許請求の範囲によって与えられる。

本発明が以上で記載され、且つ図面に示された正確な構造に限定されるものでなく、その要旨を逸脱しない範囲で様々な補正や変更も可能であることは理解されるべきである。本発明の範囲は、添付する特許請求の範囲のみによって限定される。

本発明は、出願番号が２０１５１０５４７１４４．３であり、出願日が２０１５年０８月３１日である中国特許出願を基に提出するものであり、当該中国特許出願の優先権を主張し、当該中国特許出願の全ての内容は、参照のため本願に援用される。

Claims (16)

1. モバイル端末に用いられるスクリーン制御方法であって、
   前記モバイル端末の移動方向を検出するステップと、
   前記モバイル端末のスクリーンの向きを検出するステップと、
   所定のスマートウェアラブルデバイスが送信した姿態識別情報を受信するステップと、
   前記移動方向、前記スクリーンの向き、及び前記姿態識別情報における手のひらの向きがいずれも第１所定方向であるとき、所定のスマートグラスへスクリーン識別指令を送信し、前記所定のスマートグラスが送信したスクリーン識別成功情報を受信したとき、前記モバイル端末のスクリーンを点灯するステップと、
   前記移動方向、前記スクリーンの向き、及び前記姿態識別情報における手のひらの向きがいずれも第２所定方向であるとき、前記モバイル端末のスクリーンをオフにするステップと、を含み、
   前記第１所定方向と前記第２所定方向は異なることを特徴とするスクリーン制御方法。
2. 前記第１所定方向は上向きであり、前記第２所定方向は下向きであることを特徴とする請求項１に記載のスクリーン制御方法。
3. 前記モバイル端末の移動方向を検出するステップは、
   前記モバイル端末における重力センサが検出した重力数値を取得するステップと、
   前記重力数値が第１所定閾値より大きいとき、前記モバイル端末の移動方向を前記第１所定方向として特定するステップと、
   前記重力数値が第２所定閾値より小さいとき、前記モバイル端末の移動方向を前記第２所定方向として特定するステップと、を含み、
   前記第１所定閾値は前記第２所定閾値より大きいことを特徴とする請求項１又は２に記載のスクリーン制御方法。
4. 前記モバイル端末のスクリーンの向きを検出するステップは、
   前記モバイル端末における重力センサが収集したＺ軸データを取得するステップと、
   前記Ｚ軸データが正値であるとき、前記モバイル端末のスクリーンの向きを前記第１所定方向として特定するステップと、
   前記Ｚ軸データが負値であるとき、前記モバイル端末のスクリーンの向きを前記第２所定方向として特定するステップと、を含むことを特徴とする請求項１又は２に記載のスクリーン制御方法。
5. 前記モバイル端末のスクリーンの状態を検出するステップと、
   前記モバイル端末のスクリーンがオフ状態のとき、前記モバイル端末のスクリーン点灯を実行するステップと、
   前記モバイル端末のスクリーンが点灯状態のとき、前記モバイル端末のスクリーンオフを実行するステップと、をさらに含むことを特徴とする請求項１に記載のスクリーン制御方法。
6. スマートグラスに用いられるスクリーン制御方法であって、
   モバイル端末が送信したスクリーン識別指令を受信したとき、スクリーン識別操作を起動するステップと、
   スマートグラスの視野範囲内の画像を取得するステップと、
   前記画像中に前記モバイル端末のスクリーン特徴が含まれているかどうかを判断するステップと、
   前記画像中に前記モバイル端末のスクリーン特徴が含まれているとき、スクリーン識別成功情報を生成するステップと、
   前記スクリーン識別成功情報を前記モバイル端末へ送信するステップと、を含むことを特徴とするスクリーン制御方法。
7. 前記画像中に前記モバイル端末のスクリーン特徴が含まれているかどうかを判断するステップは、
   前記画像中の特徴情報を抽出するステップと、
   前記モバイル端末の所定のスクリーン特徴テンプレートを取得するステップと、
   前記特徴情報と前記所定のスクリーン特徴テンプレートがマッチングするかどうかを判断するステップと、
   前記特徴情報と前記所定のスクリーン特徴テンプレートがマッチングするとき、前記画像中に前記モバイル端末のスクリーン特徴が含まれていることを特定するステップと、
   前記特徴情報と前記所定のスクリーン特徴テンプレートがマッチングしないとき、前記画像中に前記モバイル端末のスクリーン特徴が含まれていないことを特定するステップと、を含むことを特徴とする請求項６に記載のスクリーン制御方法。
8. モバイル端末に用いられるスクリーン制御装置であって、
   前記モバイル端末の移動方向を検出する、移動方向検出手段と、
   前記モバイル端末のスクリーンの向きを検出する、スクリーン向き検出手段と、
   所定のスマートウェアラブルデバイスが送信した姿態識別情報を受信する、情報受信手段と、
   前記移動方向、前記スクリーンの向き、及び前記姿態識別情報における手のひらの向きがいずれも第１所定方向であるとき、所定のスマートグラスへスクリーン識別指令を送信する、指令送信手段と、
   前記所定のスマートグラスが送信したスクリーン識別成功情報を受信したとき、前記モバイル端末のスクリーンを点灯する、スクリーン点灯手段と、
   前記移動方向、前記スクリーンの向き、及び前記姿態識別情報における手のひらの向きがいずれも第２所定方向であるとき、前記モバイル端末のスクリーンをオフにするスクリーンオフ手段と、を備え、
   前記第１所定方向と前記第２所定方向は異なることを特徴とするスクリーン制御装置。
9. 前記第１所定方向は上向きであり、前記第２所定方向は下向きであることを特徴とする請求項８に記載のスクリーン制御装置。
10. 前記移動方向検出手段は、
    前記モバイル端末における重力センサが検出した重力数値を取得する、重力数値取得モジュールと、
    前記重力数値が第１所定閾値より大きいとき、前記モバイル端末の移動方向を前記第１所定方向として特定する、第１移動方向特定モジュールと、
    前記重力数値が第２所定閾値より小さいとき、前記モバイル端末の移動方向を前記第２所定方向として特定する、第２移動方向特定モジュールと、を備え、
    前記第１所定閾値は前記第２所定閾値より大きいことを特徴とする請求項８又は９に記載のスクリーン制御装置。
11. 前記スクリーン向き検出手段は、
    前記モバイル端末における重力センサが収集したＺ軸データを取得する、データ取得モジュールと、
    前記Ｚ軸データが正値のとき、前記モバイル端末のスクリーンの向きを前記第１所定方向として特定する、第１スクリーン向き特定モジュールと、
    前記Ｚ軸データが負値のとき、前記モバイル端末のスクリーンの向きを前記第２所定方向として特定する、第２スクリーン向き特定モジュールと、を備えることを特徴とする請求項８又は９に記載のスクリーン制御装置。
12. 前記モバイル端末のスクリーンの状態を検出するスクリーン状態検出手段をさらに備え、
    前記スクリーン点灯手段は、さらに、前記モバイル端末のスクリーンがオフ状態のとき、前記モバイル端末のスクリーンを点灯し、
    前記スクリーンオフ手段は、さらに、前記モバイル端末のスクリーンが点灯状態のとき、前記モバイル端末のスクリーンをオフにすることを特徴とする請求項８に記載のスクリーン制御装置。
13. スマートグラスに用いられるスクリーン制御装置であって、
    モバイル端末が送信したスクリーン識別指令を受信したとき、スクリーン識別操作を起動する、起動手段と、
    スマートグラスの視野範囲内の画像を取得する、画像取得手段と、
    前記画像中に前記モバイル端末のスクリーン特徴が含まれているかどうかを判断する、判断手段と、
    前記画像中に前記モバイル端末のスクリーン特徴が含まれているとき、スクリーン識別成功情報を生成する、情報生成手段と、
    前記スクリーン識別成功情報を前記モバイル端末へ送信する、情報送信手段と、を備えることを特徴とするスクリーン制御装置。
14. 前記判断手段は、
    前記画像中の特徴情報を抽出する、特徴情報抽出モジュールと、
    前記モバイル端末の所定のスクリーン特徴テンプレートを取得する、特徴テンプレート取得モジュールと、
    前記特徴情報と前記所定のスクリーン特徴テンプレートがマッチングするかどうかを判断する、マッチング判断モジュールと、
    前記特徴情報と前記所定のスクリーン特徴テンプレートがマッチングするとき、画像中に前記モバイル端末のスクリーン特徴が含まれていることを特定する、第１スクリーン特徴特定モジュールと、
    前記特徴情報と前記所定のスクリーン特徴テンプレートがマッチングしないとき、前記画像中に前記モバイル端末のスクリーン特徴が含まれていないことを特定する、第２スクリーン特徴特定モジュールと、を備えることを特徴とする請求項１３に記載のスクリーン制御装置。
15. プロセッサと、
    前記プロセッサの実行可能な指令を記憶するためのメモリと、を備え、
    前記プロセッサは、
    モバイル端末の移動方向を検出し、
    前記モバイル端末のスクリーンの向きを検出し、
    所定のスマートウェアラブルデバイスが送信した姿態識別情報を受信し、
    前記移動方向、前記スクリーンの向き、及び前記姿態識別情報における手のひらの向きがいずれも第１所定方向であるとき、所定のスマートグラスへスクリーン識別指令を送信し、前記所定のスマートグラスが送信したスクリーン識別成功情報を受信したとき、前記モバイル端末のスクリーンを点灯し、
    前記移動方向、前記スクリーンの向き、及び前記姿態識別情報における手のひらの向きがいずれも第２所定方向であるとき、前記モバイル端末のスクリーンをオフするように構成され、
    前記第１所定方向と前記第２所定方向は異なることを特徴とするモバイル端末。
16. プロセッサと、
    前記プロセッサの実行可能な指令を記憶するためのメモリと、を備え、
    前記プロセッサは、
    モバイル端末が送信したスクリーン識別指令を受信したとき、スクリーン識別操作を起動し、
    スマートグラスの視野範囲内の画像を取得し、
    前記画像中に前記モバイル端末のスクリーン特徴が含まれているかどうかを判断し、
    前記画像中に前記モバイル端末のスクリーン特徴が含まれているとき、スクリーン識別成功情報を生成し、
    前記スクリーン識別成功情報を前記モバイル端末へ送信するように構成されることを特徴とするスマート端末。