JP6079337B2 - Input device, input control method, and input control program - Google Patents
Input device, input control method, and input control program Download PDFInfo
- Publication number
- JP6079337B2 JP6079337B2 JP2013054847A JP2013054847A JP6079337B2 JP 6079337 B2 JP6079337 B2 JP 6079337B2 JP 2013054847 A JP2013054847 A JP 2013054847A JP 2013054847 A JP2013054847 A JP 2013054847A JP 6079337 B2 JP6079337 B2 JP 6079337B2
- Authority
- JP
- Japan
- Prior art keywords
- touch panel
- holding
- display screen
- tracing
- input
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Landscapes
- Input From Keyboards Or The Like (AREA)
- Position Input By Displaying (AREA)
- User Interface Of Digital Computer (AREA)
- Telephone Function (AREA)
Description
本発明は、入力装置および入力制御方法並びに入力制御プログラムに関する。 The present invention relates to an input device, an input control method, and an input control program.
スマートフォンやタブレット型のパーソナルコンピュータなどのように、タッチパネルの表示部に対するタッチを伴う操作(以下、タッチ操作とも称する)により、アプリケーションの起動や動作中のアプリケーションへの情報の入力を行う端末装置がある。 There is a terminal device that activates an application or inputs information to an operating application by an operation that involves a touch on a display unit of a touch panel (hereinafter also referred to as a touch operation), such as a smartphone or a tablet personal computer. .
この種の端末装置では、例えば、端末装置の持ち方により、利用者がタッチ操作できる範囲が制限される場合がある。例えば、電車内などで、一方の手でつり革につかまりながら他方の手で端末装置を把持している場合などに、利用者がタッチ操作を行うことが可能な範囲は、端末装置を把持している方の手の指が届く範囲に制限される。 In this type of terminal device, for example, the range in which the user can perform a touch operation may be limited depending on how the terminal device is held. For example, in a train, etc., when the terminal device is gripped by the other hand while holding the strap with one hand, the range in which the user can perform the touch operation is to grip the terminal device. Is limited to the reach of the finger of the other hand.
一方、端末装置のオペレーティングシステムやアプリケーションプログラムがタッチパネルに表示させるメニューやアイコンなどの操作対象は、予め設定された位置に表示される。このため、利用者が端末装置を把持している方の手でタッチパネルによる入力操作をしようとしても、アプリケーションプログラムなどによって用意されたメニューやアイコンの表示位置に指が届かない場合がある。 On the other hand, operation targets such as menus and icons displayed on the touch panel by the operating system and application program of the terminal device are displayed at preset positions. For this reason, even if the user tries to perform an input operation on the touch panel with the hand holding the terminal device, the finger may not reach the display position of the menu or icon prepared by the application program or the like.
利用者によるタッチ操作が可能な範囲が制限される場合について、タッチパネルによる入力操作を支援する技術として、利用者によるタッチ操作でなぞられた軌跡に沿って選択可能な項目を示すメニューを表示する技術が提案されている(例えば、特許文献１参照)。 A technology that displays a menu showing items that can be selected along the trajectory traced by the touch operation by the user as a technology to support the input operation by the touch panel when the range in which the user can perform the touch operation is limited. Has been proposed (see, for example, Patent Document 1).
また、端末装置の画面に表示された操作対象の中から、利用者が注視している操作対象を識別し、識別した操作対象に対応する情報の入力を受け付ける技術が提案されている(例えば、非特許文献１参照)。 Further, a technique has been proposed in which an operation target that is being watched by a user is identified from among the operation targets displayed on the screen of the terminal device, and input of information corresponding to the identified operation target is accepted (for example, Non-patent document 1).
ところで、タブレット型のパーソナルコンピュータのように比較的大きなタッチパネルを搭載した端末装置を利用する際などに、利用者は、片方の腕の下膊部に端末装置を載せ、端末装置を載せた方の手で端末装置を抱えるように持つ場合がある。 By the way, when using a terminal device equipped with a relatively large touch panel such as a tablet-type personal computer, the user places the terminal device on the armpit of one arm, There are cases where the terminal device is held by hand.
タッチパネルでなぞった軌跡に沿ってメニューを表示する従来技術では、上述のように端末装置を片手で抱えるように持つ場合に、表示可能な選択肢が制限されてしまう場合がある。なぜなら、端末装置を抱えるように持っている状態で動かせる指は、人差し指のように動きの自由度が少ない指に限られるため、高い自由度を持つ親指による操作が可能な持ち方に比べて、タッチ操作でなぞることができる軌跡の長さが短くなるからである。 In the conventional technique for displaying a menu along a trace traced by a touch panel, there are cases where displayable options are limited when the terminal device is held with one hand as described above. Because the fingers that can be moved while holding the terminal device are limited to fingers with a low degree of freedom of movement, such as the index finger, compared to a holding method that can be operated with a thumb with a high degree of freedom, This is because the length of the trajectory that can be traced by the touch operation is shortened.
このため、タッチ操作でなぞられた軌跡に沿ってメニューを表示する従来技術では、タッチパネルを搭載した端末装置が利用される多様なシーンの少なくとも一部において、使いやすい操作環境を提供することが困難である。 For this reason, it is difficult to provide an easy-to-use operating environment in at least a part of various scenes in which a terminal device equipped with a touch panel is used in the conventional technology that displays a menu along a trace traced by a touch operation. It is.
一方、利用者の視線を操作対象の選択に利用する技術では、操作対象を確定させるために、例えば１秒程度の時間にわたって操作対象のアイコン等を注視することを利用者に対して求めるため、利用者に目が疲れるなどの不快感を抱かせてしまう場合がある。 On the other hand, in the technology that uses the user's line of sight for selection of the operation target, in order to determine the operation target, for example, to ask the user to watch the icon of the operation target over a time of about 1 second, The user may feel discomfort such as eyestrain.
本件開示の入力装置および入力制御方法並びに入力制御プログラムは、タッチパネルを搭載した端末装置について想定される様々な持ち方において、タッチパネルによる入力操作をしやすくするための技術を提供することを目的とする。 An input device, an input control method, and an input control program of the present disclosure are intended to provide a technique for facilitating an input operation using a touch panel in various ways assumed for a terminal device equipped with a touch panel. .
一つの観点による入力装置は、表示画面を含み、表示画面への接触を感知するタッチパネルと、表示画面をなぞる操作がタッチパネルによって感知された場合に、なぞる操作によって描かれた軌跡の特徴に基づいて、表示画面をなぞる操作方向が制限される持ち方である第１の持ち方と、表示画面をなぞる操作方向の自由度が第１の持ち方の操作方向よりも高い第２の持ち方とのいずれであるかを判別する判別部と、判別部で判別された複数種類の持ち方のそれぞれに対応して表示画面において操作可能な領域を設定し、設定した領域に少なくとも一つの操作対象を示す画像を表示させる制御部と、タッチパネルによって接触が感知された箇所に制御部によって表示された操作対象で示される情報の入力を受け付ける受け付け部とを備える。 An input device according to one aspect includes a display screen, a touch panel that senses contact with the display screen, and a trajectory drawn by the tracing operation when an operation that traces the display screen is sensed by the touch panel. The first holding method, which is a holding method in which the operation direction of tracing the display screen is restricted, and the second holding method, wherein the degree of freedom of the operation direction of tracing the display screen is higher than the operation direction of the first holding method. indicating a determination unit that determines which one, set the operable area in the display screen corresponding to each of the plurality of types of holding manners discriminated by the discrimination unit, at least one of the operation target in the configured area A control unit that displays an image, and a reception unit that receives input of information indicated by an operation target displayed by the control unit at a location where contact is detected by the touch panel.
また、別の観点による入力制御方法は、表示画面を有するタッチパネルにより、表示画面をなぞる操作が感知された場合に、なぞる操作によって描かれた軌跡の特徴に基づいて、表示画面をなぞる操作方向が制限される持ち方である第１の持ち方と、表示画面をなぞる操作方向の自由度が第１の持ち方の操作方向よりも高い第２の持ち方とのいずれであるかを判別し、判別された複数種類の持ち方のそれぞれに対応して操作可能な領域をタッチパネルの表示画面において設定し、設定した領域に少なくとも一つの操作対象を示す画像を表示させ、タッチパネルによって接触が感知された箇所に表示された操作対象で示される情報の入力を受け付ける。 In addition, according to another aspect of the input control method, when an operation of tracing the display screen is detected by a touch panel having a display screen, the operation direction of tracing the display screen is based on the characteristics of the locus drawn by the tracing operation. Determining whether the holding method is a first holding method or a second holding method in which the degree of freedom of the operation direction tracing the display screen is higher than the operation direction of the first holding method ; An area that can be operated corresponding to each of the determined types of holding is set on the display screen of the touch panel, an image showing at least one operation target is displayed in the set area, and a touch is detected by the touch panel. The input of information indicated by the operation target displayed at the location is accepted.
また、別の観点による入力制御プログラムは、表示画面を有するタッチパネルにより、表示画面をなぞる操作が感知された場合に、なぞる操作によって描かれた軌跡の特徴に基づいて、表示画面をなぞる操作方向が制限される持ち方である第１の持ち方と、表示画面をなぞる操作方向の自由度が第１の持ち方の操作方向よりも高い第２の持ち方とのいずれであるかを判別し、判別された複数種類の持ち方のそれぞれに対応して操作可能な領域をタッチパネルの表示画面において設定し、設定した領域に少なくとも一つの操作対象を示す画像を表示させ、タッチパネルによって接触が感知された箇所に表示された操作対象で示される情報の入力を受け付ける処理をコンピュータに実行させる。 Further, an input control program according to another aspect is configured such that, when an operation of tracing the display screen is sensed by a touch panel having a display screen, the operation direction of tracing the display screen is based on the characteristics of the locus drawn by the tracing operation. Determining whether the holding method is a first holding method or a second holding method in which the degree of freedom of the operation direction tracing the display screen is higher than the operation direction of the first holding method ; An area that can be operated corresponding to each of the determined types of holding is set on the display screen of the touch panel, an image showing at least one operation target is displayed in the set area, and a touch is detected by the touch panel. Causes the computer to execute a process of accepting input of information indicated by the operation target displayed at the location.
本件開示の入力装置および入力制御方法並びに入力制御プログラムは、タッチパネルを搭載した端末装置について想定される様々な持ち方において、タッチパネルによる入力操作をしやすくすることができる。 The input device, the input control method, and the input control program of the present disclosure can facilitate an input operation using the touch panel in various ways assumed for a terminal device equipped with a touch panel.
以下、図面に基づいて、実施形態を説明する。 Hereinafter, embodiments will be described with reference to the drawings.
図１は、入力装置の一実施形態を示す。 FIG. 1 shows an embodiment of an input device.
図１に示した入力装置１０は、タッチパネル１１と、判別部１２と、制御部１３と、受け付け部１４とを含んでいる。
The
また、図１に示した処理装置１は、入力装置１０の上位装置である。例えば、入力装置１０がスマートフォンやタブレット型のパーソナルコンピュータなどの端末装置に搭載されている場合に、処理装置１は、スマートフォンやタブレット型のパーソナルコンピュータなどに含まれるプロセッサに相当する。
In addition, the
タッチパネル１１は、メニューやアイコンなど選択可能な選択肢を示す操作対象を含む画像情報を表示する表示画面１１１を含み、表示画面１１１への接触を感知する。
The
判別部１２は、表示画面１１１をなぞる操作がタッチパネル１１によって感知された場合に、なぞる操作によって描かれた軌跡の特徴に基づいて、タッチパネル１１がどのような持ち方で把持されているかを判別する。判別部１２は、例えば、表示画面１１１をなぞる操作を示す情報をタッチパネル１１から受け取り、受け取った情報から、軌跡の特徴を示す情報として、軌跡の形状を示す情報および軌跡とタッチパネル１１の外周との相対位置を示す情報を抽出してもよい。また、判別部１２は、利用者がタッチパネル１１を操作する際に描かれることが想定される様々な軌跡の特徴を示す情報と、タッチパネル１１の持ち方との対応関係を示す情報に基づいて、抽出した軌跡の特徴に対応する持ち方を判別してもよい。
When the operation of tracing the
判別部１２は、タッチパネル１１を利用者が片手で把持する際の持ち方として、次に述べる第１の持ち方と第２の持ち方とを含む複数種類の持ち方を判別することが望ましい。
The
ここで、第１の持ち方とは、表示画面１１１をなぞる操作が可能な方向が、タッチパネル１１の外周に含まれる四辺のいずれかと概ね直交する方向に制限される持ち方である。第１の持ち方の一例は、タッチパネル１１を下膊部と掌および親指とで支え、親指以外の少なくとも１本の指をタッチパネル１１の外周に掛けた状態で抱えるような持ち方である。
Here, the first holding method is a holding method in which the direction in which the user can trace the
図１に実線で示した手形ｈ１は、第１の持ち方のうち、タッチパネル１１の外周の上辺に人差し指から小指までの４本の指を掛けて持つ場合の例を示している。また、図１に実線で示した手形ｈ１’は、第１の持ち方のうち、タッチパネル１１の外周の右辺に人差し指から小指までの４本の指を掛けて持つ場合の例を示している。なお、手形ｈ１、ｈ１’に示す持ち方は、同時に発生するものではない。また、図１においては、第１の持ち方のうち、タッチパネル１１の外周の左辺に人差し指から小指までの４本の指を掛けて持つ場合の例の図示は省略している。
A handprint h1 indicated by a solid line in FIG. 1 shows an example of a case of holding the four fingers from the index finger to the little finger on the upper side of the outer periphery of the
また、第２の持ち方とは、表示画面１１１をなぞる操作が可能な範囲が表示画面１１１において領域Ｒ２で示すように２次元的な広がりを有する持ち方である。第２の持ち方の一例は、人差し指から小指までの４本の指と掌とでタッチパネル１１を支え、掌と親指とでタッチパネル１１を挟み込むような持ち方である。
In addition, the second way of holding is a way of holding the
なお、図１に破線で示した手形ｈ２は、タッチパネル１１の外周の左辺が上述の第２の持ち方で把持されている場合に、タッチパネル１１の表面を親指でなぞる操作を行っている左手の形の例を示している。なお、図１においては、タッチパネル１１の外周の右辺を第２の持ち方で把持している状態で、タッチパネル１１の表面を親指でなぞる操作を行っている右手の形の図示は省略している。
Note that the handprint h2 indicated by a broken line in FIG. 1 is a left hand that performs an operation of tracing the surface of the
利用者がタッチパネル１１を第１の持ち方で把持している方の手でなぞる操作を行う場合に、なぞる操作に用いることができる指は、人差し指のように、動きの自由度が一方向である指に限られる。このため、第１の持ち方で把持している状態でのなぞる操作で描かれる軌跡は、タッチパネル１１の四辺のうち把持している縁に対応する辺に概ね直交する方向の直線状の軌跡に限られる。例えば、図１において符号Ｔｒ１で示した直線状の矢印は、第１の持ち方の一例である、タッチパネル１１の上辺に対応する縁に親指以外の４本の指を掛ける持ち方で把持した状態で、表示画面１１１上になぞる操作を行った際に描かれる軌跡の例を示している。
When the user performs an operation of tracing with the hand holding the
したがって、判別部１２は、タッチパネル１１の外周に含まれる四辺のいずれかと概ね直交する方向を持つ軌跡を示す情報を受け取った場合に、タッチパネル１１は第１の持ち方で把持されていると判別してもよい。
Therefore, when the
一方、利用者がタッチパネル１１を第２の持ち方で把持している方の手でなぞる操作を行う場合には、動きの自由度が大きい親指を使ってなぞる操作を行うことができる。このため、第２の持ち方で把持している状態では、２次元方向の自由度を持つ形状を有する軌跡を描くようになぞる操作が可能である。例えば、図１において符号Ｔｒ２で示した弧状の矢印は、第２の持ち方の一例である、タッチパネル１１の左辺に対応する縁を親指と親指以外の指とで挟み込む持ち方で把持した状態で、表示画面１１１上になぞる操作を行った際に描かれる軌跡の例を示している。
On the other hand, when the user performs an operation of tracing with the hand holding the
したがって、判別部１２は、表示画面１１１において２次元方向の自由度を有する形状を持つ軌跡を示す情報を受け取った場合に、タッチパネル１１は第２の持ち方で把持されていると判別してもよい。
Therefore, when the
制御部１３は、判別部１２で判別された持ち方に対応して、タッチパネル１１の表示画面１１１に操作可能な領域を設定するとともに、設定した領域に少なくとも一つの操作対象を示す画像を、判別された持ち方に合わせた並べ方で表示させる制御を行う。
The
制御部１３は、判別部１２から、判別された持ち方を示す情報とともに、表示画面１１１をなぞる操作により描かれた軌跡の特徴を示す情報を受け取ってもよい。
The
また、制御部１３は、判別部１２から受け取った情報に基づいて、タッチ操作が可能と推定される領域をタッチパネル１１の表示画面１１１において特定し、特定した領域を、判別された持ち方に対応する操作可能な領域として設定してもよい。
Further, the
ここで、第１の持ち方でタッチパネル１１が把持されている場合に、図１に示した軌跡Ｔｒ１を描いた指の他に、タッチパネル１１の外周に掛けられた指が、軌跡Ｔｒ１と概ね直交する方向に並んでいると推定できる。例えば、図１に示した手形ｈ１は、人差し指で上述した軌跡Ｔｒ１を描くタッチ操作を行っている様子を示すとともに、中指と薬指および小指がタッチパネル１１の外周に掛けられている様子を示している。また、図１に示した手形ｈ１に含まれる中指と薬指および小指が動く範囲は、上述した軌跡Ｔｒ１に概ね平行な方向に限られるものの、人差し指を含めて４本の指のそれぞれにより、タッチパネル１１へのタッチ操作は可能である。
Here, when the
そこで、制御部１３は、図１に示した軌跡Ｔｒ１を描く操作に応じて、第１の持ち方で把持されていると判別された場合に、タッチ操作が可能と推定される領域、すなわち、操作可能な領域として、例えば、図１において破線で示した領域Ｒ１を設定してもよい。ここで、領域Ｒ１は、軌跡Ｔｒ１の長さに対応する幅を持ち、タッチパネル１１の外周のうち上辺に沿う方向に長手方向を持つ帯状の領域であり、第１の持ち方の場合になぞる操作が可能な一方向を一辺とする矩形領域の一例である。
Therefore, the
なお、図１に示した領域Ｒ１は、タッチパネル１１の上辺に対応する縁が第１の持ち方で把持されていると判別された際に、制御部１３が、軌跡Ｔｒ１に基づいて、図１に示した手形ｈ１で示した指が届くと推定される範囲として特定する領域の一例である。同様にして、制御部１３は、タッチパネル１１の左辺または右辺に対応する縁が第１の持ち方で把持されている旨の判別結果に応じて、把持されている側の縁に対応する辺に沿う方向に長手方向を持つ帯状の領域を操作可能な領域として設定してもよい。
In the region R1 shown in FIG. 1, when it is determined that the edge corresponding to the upper side of the
一方、第２の持ち方でタッチパネル１１が把持されている場合に、図１に示した軌跡Ｔｒ２を描いた指、即ち、タッチパネル１１に対するタッチ操作が可能な指は、動きの自由度が高い親指であると推定できる。人間の親指は、指の付け根を中心とする扇型の範囲で動かすことが可能であるので、第２の持ち方でタッチパネル１１を把持した状態で、親指の指先によって操作可能な範囲は２次元的な広がりを持っている。
On the other hand, when the
そこで、制御部１３は、図１に示した軌跡Ｔｒ２を描く操作に応じて、第２の持ち方で把持されていると判別された場合に、タッチ操作が可能と推定される領域、すなわち、操作可能な領域として、例えば、図１において破線で示した領域Ｒ２を設定してもよい。ここで、領域Ｒ２は、タッチパネル１１の左辺に対応する縁の一点を中心とする扇形の領域であり、第２の持ち方でタッチパネル１１を把持した状態でなぞる操作が可能な範囲の一例である。
Therefore, the
なお、図１に示した領域Ｒ２は、タッチパネル１１の左辺に対応する縁が第２の持ち方で把持されていると判別された際に、制御部１３が、軌跡Ｔｒ２に基づいて、操作可能な指である親指が届くことが推定される範囲として特定する領域の一例である。同様にして、制御部１３は、タッチパネル１１の右辺に対応する縁が第２の持ち方で把持されている旨の判別結果に応じて、右辺に対応する縁の一点を中心とする扇形の領域を操作範囲として特定してもよい。
Note that the region R2 illustrated in FIG. 1 can be operated by the
また、制御部１３は、例えば、処理装置１がタッチパネル１１にメニューなどを表示させる際に、メニューに含まれる選択肢を示すオブジェクトを表示するための情報を、処理装置１から受け取る。なお、メニューに含まれる選択肢を示すオブジェクトを表示するための情報は、タッチパネル１１を介して利用者に選択可能な選択肢を提示するための情報の一例である。
For example, when the
制御部１３は、上述した第１の持ち方と第２の持ち方を含む持ち方のそれぞれと、持ち方に対応する操作範囲における操作対象の並べ方との対応関係を示す情報に基づいて、処理装置１から受け取った情報で示される操作対象を表示させてもよい。
The
図２は、操作対象の並べ方の例を示す。なお、図２に示した要素のうち、図１に示した要素と同等のものについては、同一の符号を付して示し、その説明は省略する。 FIG. 2 shows an example of how operation objects are arranged. 2 that are the same as those shown in FIG. 1 are denoted by the same reference numerals and description thereof is omitted.
図２(Ａ)は、利用者がタッチパネル１１を第１の持ち方で把持している場合に好適な操作対象の並べ方の例を示している。また、図２(Ｂ)は、利用者がタッチパネル１１を第２の持ち方で把持している場合に好適な操作対象の並べ方の例を示している。
FIG. 2A shows an example of how to arrange the operation objects suitable when the user is holding the
図２(Ａ)において、符号Ｍ１，Ｍ２，Ｍ３，Ｍ４で示した矩形のそれぞれは、メニューなどに含まれる選択肢を示す操作対象を示している。図２(Ａ)の例は、第１の持ち方に対応する操作範囲として設定された帯状の領域Ｒ１の内部に、手形ｈ１に含まれる４本の指のそれぞれに対応するように、操作対象Ｍ１，Ｍ２，Ｍ３，Ｍ４を並べた例である。 In FIG. 2A, each of the rectangles indicated by reference numerals M1, M2, M3, and M4 indicates an operation target indicating options included in a menu or the like. In the example of FIG. 2A, the operation target is set so as to correspond to each of the four fingers included in the bill h1 inside the band-shaped region R1 set as the operation range corresponding to the first holding method. In this example, M1, M2, M3, and M4 are arranged.
一方、図２(Ｂ)において、符号Ｍ１，Ｍ２，Ｍ３，Ｍ４で示した矩形のそれぞれは、メニューなどに含まれる選択肢を示す操作対象を示している。図２(Ｂ)の例は、図１に示した設定部１３によって操作範囲として設定された扇型の領域Ｒ２の内部に、操作対象Ｍ１，Ｍ２，Ｍ３，Ｍ４を２行２列のマトリックス状に並べた例である。なお、第２の持ち方における操作対象Ｍ１，Ｍ２，Ｍ３，Ｍ４の並べ方は、図２(Ｂ)の例に限られず、例えば、操作対象Ｍ１〜Ｍ３を縦に並べ、操作対象Ｍ４を操作対象Ｍ２の横に並べるなど、様々な変形が可能である。
On the other hand, in FIG. 2B, each of the rectangles indicated by reference numerals M1, M2, M3, and M4 indicates an operation target indicating options included in a menu or the like. In the example of FIG. 2B, the operation objects M1, M2, M3, and M4 are arranged in a matrix of 2 rows and 2 columns inside the fan-shaped region R2 set as the operation range by the setting
図１に示した制御部１３は、例えば、第１の持ち方と、図２(Ａ)に示した並べ方との対応関係を示す情報とともに、第２の持ち方と、図２(Ｂ)に示した並べ方との対応関係を示す情報を保持しておくことができる。
The
例えば、制御部１３は、第１の持ち方に対応して、判別部１２から受け取った情報で示される軌跡Ｔｒ１に最も近いタッチパネル１１の縁に沿う方向に操作対象を並べる旨の情報を保持しておいてもよい。また、制御部１３は、第２の持ち方に対応して、複数行複数列のマトリックス状に操作対象を並べる旨の情報を保持しておいてもよい。なお、第２の持ち方の場合に、制御部１３は、処理装置１から受け取った情報で示される操作対象の数や、図１に示した軌跡Ｔｒ２で示されるこの大きさなどに基づいて、操作対象を並べるマトリックスの行数および列数を決定してもよい。
For example, the
制御部１３は、判別部１２で第１の持ち方と判別された際に、第１の持ち方に対応付けて保持した情報に基づき、図２(Ａ)の例のように、タッチパネル１１の上側に設定された帯状の領域Ｒ１に、操作対象Ｍ１〜Ｍ４を横に並べて表示させることができる。
When the
このような制御を行うことにより、第１の持ち方でタッチパネル１１が把持されている状態での操作によって描かれた軌跡Ｔｒ１が短くても、軌跡Ｔｒ１の長さで示される範囲に表示可能な操作対象よりも多くの操作対象を選択肢として提示することができる。
By performing such control, even if the trajectory Tr1 drawn by the operation in the state where the
また、制御部１３は、第２の持ち方と判別された際に、第２の持ち方に対応付けて保持した情報に基づき、図２(Ｂ)の例のように、タッチパネル１１の左下側の扇型の領域Ｒ２に、操作対象Ｍ１〜Ｍ４をマトリックス状に並べて表示させることができる。
Further, when the
このような制御を行うことにより、第２の持ち方の場合に操作可能な指である親指の可動範囲が２次元的な広がりを持つことを利用し、自由度の高い並べ方で操作対象を表示させることができる。 By performing such control, it is possible to display the operation target with a high degree of freedom by utilizing the fact that the movable range of the thumb, which is a finger that can be operated in the second way of holding, has a two-dimensional spread. Can be made.
また、図２(Ｂ)に示した扇形の領域Ｒ２のように、２次元的な広がりを持つ操作範囲を設定した場合に、制御部１３は、軌跡Ｔｒ２およびその延長に沿って操作対象を並べる場合に比べて、より多くの操作対象を表示させることができる。例えば、制御部１３は、文字入力用の仮想的なキーボードに含まれる各キーを示す情報を処理装置１から受け取った場合に、これらのキーに対応する操作対象を４行３列などのマトリックス状に並べることで、全ての操作対象を表示することができる。なお、仮想的なキーボードに含まれる各キーに相当する操作対象をタッチパネル１１に表示させる例については、図５を用いて後述する。
Further, when an operation range having a two-dimensional expansion is set as in the sector-shaped region R2 illustrated in FIG. 2B, the
図１に示した受け付け部１４は、タッチパネル１１によって接触が感知された箇所に表示された操作対象で示される情報の入力を受け付ける。例えば、タッチパネル１１の表示画面１１１に複数の選択肢を含むメニューが表示されている場合に、受け付け部１４は、メニューに含まれる選択肢のうち、接触が感知された箇所に表示されている操作対象で示される選択肢を選択する旨を示す情報の入力を受け付ける。また、受け付け部１４は、受け付けた情報、例えば、選択する旨が示された選択肢を示す情報を、入力装置１０の上位装置である処理装置１に渡してもよい。
The receiving
図３は、図１に示した入力装置１０の動作を示す。図３に示したステップＳ３０１〜ステップＳ３０７の処理は、図１に示したタッチパネル１１の表示画面１１１をなぞる操作が行われた際に、図１に示した判別部１２、制御部１３および受け付け部１４によって実行される。
FIG. 3 shows the operation of the
ステップＳ３０１において、図１に示した判別部１２は、タッチパネル１１から表示画面１１１をなぞる操作で描かれた軌跡を示す情報を受け取り、受け取った情報で示される軌跡の特徴からタッチパネル１１がどのような持ち方で把持されているかを判別する。
In step S <b> 301, the
ステップＳ３０２において、図１に示した制御部１３は、ステップＳ３０１の処理で判別部１２が判別した持ち方が、第１の持ち方であるか否かを判定する。
In step S302, the
判別された持ち方が第１の持ち方である場合に(ステップＳ３０２の肯定判定(ＹＥＳ))、制御部１３は、ステップＳ３０３の処理を実行し、第２の持ち方である場合に（ステップＳ３０２の否定判定）)、ステップＳ３０４の処理を実行する。
When the determined holding method is the first holding method (Yes determination in step S302 (YES)), the
ステップＳ３０３において、制御部１３は、図２(Ａ)に示したような第１の持ち方に対応する並べ方で、処理装置１から受け取った情報で示される少なくとも一つの操作対象をタッチパネル１１に表示させる。
In step S <b> 303, the
一方、ステップＳ３０４において、制御部１３は、図２(Ｂ)に示したような第２の持ち方に対応する並べ方で、処理装置１から受け取った情報で示される少なくとも一つの操作対象をタッチパネル１１に表示させる。
On the other hand, in step S304, the
上述したステップＳ３０２〜ステップＳ３０４の処理によれば、ステップＳ３０１の処理で判別された持ち方に応じた並べ方で、処理装置１から受け取った情報で示される操作対象をタッチパネル１１の表示画面１１１に表示させることができる。
According to the processing of step S302 to step S304 described above, the operation target indicated by the information received from the
例えば、ステップＳ３０２の肯定判定に応じてステップＳ３０３の処理を実行することで、図２(Ａ)に示した並べ方で操作対象Ｍ１〜Ｍ４を表示させ、タッチパネル１１を第１の持ち方で把持した状態で操作可能な範囲に操作対象Ｍ１〜Ｍ４を提示することができる。
For example, by performing the process of step S303 in response to the affirmative determination of step S302, the operation objects M1 to M4 are displayed in the arrangement shown in FIG. 2A, and the
同様に、ステップＳ３０２の否定判定に応じてステップＳ３０４の処理を実行することで、図２(Ｂ)に示した並べ方で操作対象Ｍ１〜Ｍ４を表示させ、タッチパネル１１を第２の持ち方で把持した状態で操作可能な範囲に操作対象Ｍ１〜Ｍ４を提示することができる。
Similarly, by performing the process of step S304 in response to the negative determination of step S302, the operation objects M1 to M4 are displayed in the arrangement shown in FIG. 2B, and the
その後、ステップＳ３０５において、受け付け部１４は、タッチパネル１１から渡される接触を感知した箇所の位置を示す情報に基づいて、表示画面１１１に表示された操作対象のいずれかへの接触がタッチパネル１１によって感知されたか否かを判定する。
Thereafter, in step S <b> 305, the accepting
受け付け部１４は、制御部１３によって表示画面１１１に操作対象Ｍ１〜Ｍ４を表示する処理が実行された際などに、表示画面１１１における操作対象Ｍ１〜Ｍ４の表示位置を示す情報を制御部１３から取得し、取得した情報を保持していてもよい。
The receiving
受け付け部１４は、タッチパネル１１から受け取った情報が、操作対象のいずれかが表示された箇所を示す情報と一致した場合に、操作対象が選択されたと判断し（図３のステップＳ３０５の肯定判定(ＹＥＳ)）、ステップＳ３０６の処理を実行する。
The receiving
例えば、図２(Ａ)に示したように、操作対象Ｍ１が表示された箇所に利用者の指が接触した場合に、タッチパネル１１から操作対象Ｍ１の表示位置を示す情報が渡されるので、受け付け部１４は、操作対象Ｍ１への接触操作がなされたと判断する。
For example, as shown in FIG. 2A, when the finger of the user touches the location where the operation target M1 is displayed, information indicating the display position of the operation target M1 is passed from the
ステップＳ３０６において、受け付け部１４は、タッチパネル１１によって接触が感知された箇所に表示された操作対象が選択された旨の情報を処理装置１に通知する。
In step S <b> 306, the
上述したステップＳ３０６の処理の終了後に、受け付け部１４は、ステップＳ３０７の処理を実行する。また、ステップＳ３０５の処理で、例えば、所定の時間内に、操作対象のいずれかへの接触がタッチパネル１１で感知されなかった場合に（ステップＳ３０５の否定判定(ＮＯ)）、受け付け部１４は、ステップＳ３０７の処理を実行する。
After the process of step S306 described above is completed, the accepting
ステップＳ３０７において、受け付け部１４は、例えば、処理装置１から入力操作の受付を終了する旨の指示を受けたか否かに基づいて、入力操作の受け付けを終了するか否かを判定する。
In step S307, the receiving
入力操作の受け付けを終了しないと判定された場合に（ステップＳ３０７の否定判定(ＮＯ)）、受け付け部１４は、ステップＳ３０５の処理に戻り、タッチパネル１１への新たな操作を待ち受ける。
When it is determined not to end the input operation (No determination in step S307 (NO)), the
図１〜図３を用いて説明したように、図１に示した本件開示の入力装置１０によれば、表示画面１１１をなぞる操作で描かれた軌跡に基づいてタッチパネル１１の持ち方を判別し、判別した持ち方に応じて、異なる並べ方で操作対象を利用者に提示することができる。そして、タッチパネル１１の持ち方に応じて表示画面１１１に表示させる操作対象の並べ方を変更する入力装置１０によれば、持ち方によって操作可能な範囲が制限される状態においても、タッチパネル１１へのタッチ操作をしやすくすることができる。
As described with reference to FIGS. 1 to 3, according to the
例えば、本件開示の入力装置１０をスマートフォンやタブレット型のパーソナルコンピュータなどの端末装置に搭載すれば、端末装置の利用者が、片手で端末装置を把持しながら操作する場合にも使いやすい入力環境を提供することができる。つまり、本件開示の入力装置１０を端末装置に搭載すれば、一方の手でつり革につかまり、他方の手で端末装置を操作する場合などにも、利用者は、タッチパネル１１を介して快適な入力操作を行うことが可能になり、端末装置の使い勝手を向上することができる。即ち、本件開示の入力装置は、スマートフォンやタブレット型のパーソナルコンピュータを含む、タッチパネル１１に対するタッチ操作を受け付ける端末装置の操作性を向上させる上で有用である。
For example, if the
なお、本件開示の入力装置１０は、タッチパネル１１を搭載した端末装置を片手で把持する場合に限らず、端末装置を両手で把持した状態での入力操作を支援する用途にも適用することができる。
Note that the
図４は、図１に示したタッチパネル１１の持ち方の別例を示す。なお、図４に示した要素のうち、図１に示した要素と同等のものについては、同一の符号を付して示し、その説明は省略する。
FIG. 4 shows another example of how to hold the
図４に示した符号ｈ１＿Ｌは、タッチパネル１１の上辺に対応する縁のうち左端に近い部分を第１の持ち方で把持している利用者の左手の例を示し、符号Ｔｒ１＿Ｌは、符号ｈ１＿Ｌで示した利用者の左手による操作で描かれる軌跡の例を示している。また、図４に示した符号ｈ１＿Ｒは、タッチパネル１１の上辺に対応する縁の右端に近い部分を第１の持ち方で把持している利用者の右手の例を示し、符号Ｔｒ１＿Ｒは、符号ｈ１＿Ｒで示した利用者の右手による操作で描かれる軌跡の例を示している。
The symbol h1_L shown in FIG. 4 shows an example of the left hand of the user holding the portion close to the left end among the edges corresponding to the upper side of the
一方、図４に示した符号ｈ２＿Ｌは、タッチパネル１１の左辺に対応する縁の中央部分を第２の持ち方で把持している利用者の左手の例を示し、符号Ｔｒ２＿Ｌは、符号ｈ２＿Ｌで示した利用者の左手による操作で描かれる軌跡の例を示している。また、図４に示した符号ｈ２＿Ｒは、タッチパネル１１の右辺に対応する縁の中央部分を第２の持ち方で把持している利用者の右手の例を示し、符号Ｔｒ２＿Ｒは、符号ｈ２＿Ｌで示した利用者の右手による操作で描かれる軌跡の例を示している。
On the other hand, the symbol h2_L shown in FIG. 4 shows an example of the left hand of the user holding the center part of the edge corresponding to the left side of the
図１に示した判別部１２は、図４に示した軌跡Ｔｒ１＿Ｌあるいは軌跡Ｔｒ２＿Ｌを描く操作と、軌跡Ｔｒ１＿Ｒあるいは軌跡Ｔｒ２＿Ｒを描く操作が所定の時間内に行われた際に、それぞれの操作で描かれた軌跡から左右の手それぞれの持ち方を判別してもよい。
The discriminating
例えば、軌跡Ｔｒ１＿Ｌを描く操作と軌跡Ｔｒ２＿Ｒを描く操作が所定の時間内に行われた場合に、判別部１２は、タッチパネル１１は、利用者の左手により第１の持ち方で把持され、利用者の右手により第２の持ち方で把持されていると判別する。
For example, when the operation of drawing the trajectory Tr1_L and the operation of drawing the trajectory Tr2_R are performed within a predetermined time, the
また、図１に示した制御部１３は、判別部１２により、左右の手のそれぞれについて判別された持ち方に応じて、左右の手のそれぞれについて操作可能な領域を設定し、設定した領域の内側に、それぞれの持ち方に合わせた並べ方で操作対象を表示させてもよい。
Further, the
例えば、図４に示した符号Ｒ１＿Ｌは、利用者が左手の人差し指で軌跡Ｔｒ１＿Ｌを描く操作を行った際に、図１に示した制御部１３によって設定される操作可能な領域の例を示している。同様に、図４に示した符号Ｒ１＿Ｒは、利用者が右手の人差し指で軌跡Ｔｒ１＿Ｒを描く操作を行った際に、図１に示した制御部１３によって設定される操作可能な領域の例を示している。
For example, the symbol R1_L illustrated in FIG. 4 illustrates an example of an operable region set by the
また、図４に示した符号Ｒ２＿Ｌは、利用者が左手の親指で軌跡Ｔｒ２＿Ｌを描く操作を行った際に、図１に示した制御部１３によって設定される操作可能な領域の例を示している。同様に、図４に示した符号Ｒ２＿Ｒは、利用者が右手の人差し指で軌跡Ｔｒ２＿Ｒを描く操作を行った際に、図１に示した制御部１３によって設定される操作可能な領域の例を示している。
4 indicates an example of an operable region set by the
図５は、図１に示したタッチパネル１１に表示させる操作対象の並べ方の別例を示す。なお、図５に示した要素のうち、図１および図４に示した要素と同等のものについては、同一の符号を付して示し、その説明は省略する。
FIG. 5 shows another example of how to arrange the operation objects displayed on the
図５の例は、タッチパネル１１が左右ともに第２の持ち方で把持されていると判別された場合に、仮想的なキーボートに含まれる各キーに対応する操作対象を表示する際の並べ方の例を示している。
The example of FIG. 5 is an example of how to arrange the operation targets corresponding to the keys included in the virtual keyboard when it is determined that the
図５の例では、符号ｈ２＿Ｌで示した利用者の左手に対応して設定された領域Ｒ２＿Ｌに、編集処理のために設けられた機能キーに対応する操作対象を並べる場合を示している。また、図５の例では、符号ｈ２＿Ｒで示した利用者の右手に対応して設定された領域Ｒ２＿Ｌに、五十音の各列を示す文字入力キーに対応する操作対象を並べる場合を示している。 In the example of FIG. 5, an operation target corresponding to a function key provided for editing processing is arranged in an area R <b> 2 </ b> _L set corresponding to the left hand of the user indicated by a symbol h <b> 2 </ b> _L. Further, the example of FIG. 5 shows a case where the operation objects corresponding to the character input keys indicating each column of the Japanese syllabary are arranged in the region R2_L set corresponding to the right hand of the user indicated by the symbol h2_R. Yes.
図５の領域Ｒ２＿Ｌにおいて、符号「消去」、「挿入」、「変換」、「改行」、「選択」、「複写」で示した矩形は、編集処理用の機能キーの例を示し、上向きの矢印、右向きの矢印および左向きの矢印で示した矩形は、カーソル移動用の機能キーの例を示している。また、図５の領域Ｒ２＿Ｒにおいて、符号「あ」、「か」、「さ」、「た」、「は」、「ま」、「わ」で示した矩形は、五十音の各列を示す文字入力キーの例を示している。なお、図５の例では、右手の親指の図示によって隠されているが、領域Ｒ２＿Ｒの内部に表示させる文字入力キーは、五十音の「な」、「や」および「ら」の列に対応するキーを含んでいることが望ましい。 In the region R2_L in FIG. 5, the rectangles indicated by the symbols “erase”, “insert”, “conversion”, “line feed”, “select”, and “copy” indicate examples of function keys for editing processing. The rectangles indicated by arrows, right-pointing arrows, and left-pointing arrows indicate examples of function keys for moving the cursor. Further, in the region R2_R in FIG. 5, the rectangles indicated by the symbols “a”, “ka”, “sa”, “ta”, “ha”, “ma”, “wa” represent each column of the Japanese alphabet. The example of the character input key shown is shown. In the example of FIG. 5, although hidden by the right thumb, the character input keys to be displayed inside the region R2_R are arranged in columns of “na”, “ya”, and “ra” in the Japanese syllabary. It is desirable to include a corresponding key.
また、図５の例では、符号ｈ２＿Ｒで示した利用者の右手の親指により、五十音の「な」列を示す文字入力キーに対応する操作対象が操作され、文字入力領域Ｒｉｎに文字「な」が入力されている様子を示している。 In the example of FIG. 5, the operation target corresponding to the character input key indicating the “na” column of the Japanese syllabary is operated by the thumb of the right hand of the user indicated by the symbol h2_R, and the character “ It shows a state where “NA” is input.
図４および図５を用いて説明したように、図１に示した入力装置１０によれば、様々な持ち方でタッチパネル１１が把持されている場合に対応し、それぞれの場合に適した並べ方で仮想的なキーボードを含む多種多様な操作対象を表示させることができる。
As described with reference to FIGS. 4 and 5, the
つまり、本件開示の入力装置１０によれば、例えば、タブレット型のパーソナルコンピュータを両手で把持した状態のままで操作可能な位置に、図５に示したような仮想的なキーボードなどの操作対象を表示させ、文字入力を含む多彩な入力操作を実現できる。
In other words, according to the
また、上述のような多彩な入力操作を実現することで、例えば、ソファなどに仰向けに横になった利用者が、頭上に両手で把持したタブレット型のパーソナルコンピュータの画面に表示された動画を見ながら文字入力操作を行うなどの自由度の高い操作が可能となる。 In addition, by realizing various input operations as described above, for example, a user lying on his back on a sofa or the like can view a video displayed on the screen of a tablet personal computer held with both hands above the head. Operations with a high degree of freedom such as performing character input operations while watching are possible.
図６は、入力装置１０の別実施形態を示す。なお、図６に示した構成要素のうち、図１に示した構成要素と同等のものについては、同一の符号を付して示し、その説明は省略する。
FIG. 6 shows another embodiment of the
図６に示した判別部１２は、抽出部１２１と、照合部１２２と、条件テーブル１２３とを含んでいる。
抽出部１２１は、タッチパネル１１の表示画面１１１に予め設定された所定の範囲内においてタッチ操作が感知された際に、感知されたタッチ操作で描かれた軌跡を示す情報をタッチパネル１１から受け取る。また、抽出部１２１は、タッチパネル１１から受け取った情報から、上述の範囲において感知されたタッチ操作で描かれた軌跡の特徴を抽出する。
The
When the touch operation is detected within a predetermined range set in advance on the
図７は、タッチパネル１１の表示画面１１１に予め設定された所定の範囲の例を示す。なお、図７に示した要素のうち、図１に示した要素と同等のものについては、同一の符号を付して示し、その説明は省略する。また、以下の説明では、上述の所定の範囲を検出範囲と称する。
FIG. 7 shows an example of a predetermined range preset on the
図７において、点線で囲んで示した領域Ｒｄは、検出範囲の一例である。図７に示した領域Ｒｄは、開口部をタッチパネル１１の下側に向けた「コ」の字型の領域であり、図７に示した符号Ｗｈは、領域Ｒｄのうち、「コ」の字の開口部に対向する部分、即ち、タッチパネル１１の上辺に対応する部分の幅を示している。また、図７に示した符号ＷＬ，ＷＲのそれぞれは、上述の領域Ｒｄのうち、タッチパネル１１の左辺と右辺とのそれぞれに対応する部分の幅を示している。
In FIG. 7, a region Rd surrounded by a dotted line is an example of a detection range. A region Rd illustrated in FIG. 7 is a “U” -shaped region with an opening facing the lower side of the
図７に示した幅Ｗｈは、例えば、タッチパネル１１の上辺に対応する縁を利用者の手が把持している状態で、符号ｈ１で示した利用者の手の人差し指が届く範囲を考慮して決定することが望ましい。また、図７に示した幅ＷＬは、例えば、タッチパネル１１の左辺に対応する縁を利用者の手が把持している状態で、符号ｈ２で示した利用者の手の親指が届く範囲を考慮して決定することが望ましい。同様に、図７に示した幅ＷＬは、例えば、タッチパネル１１の右辺に対応する縁を利用者の手が把持している状態で、利用者の手の親指が届く範囲を考慮して決定することが望ましい。
The width Wh shown in FIG. 7 takes into account, for example, a range in which the index finger reaches the user's hand indicated by reference numeral h1 in a state where the user's hand is holding the edge corresponding to the upper side of the
ここで、図７に示した領域Ｒｄの内部をなぞる操作は、利用者が第１の持ち方あるいは第２の持ち方でタッチパネル１１を把持した状態で行った操作である可能性が高い。したがって、図７に示した領域Ｒｄの内部をなぞる操作が感知された際に、図６に示した抽出部１２１は、当該操作で描かれた軌跡を示す情報を受け取ることにより、利用者がどのような持ち方で把持しているかを示す情報を取得することができる。
Here, the operation of tracing the inside of the region Rd shown in FIG. 7 is likely to be an operation performed while the user is holding the
また、例えば、図７に符号ｈ１で示した利用者の手の人差し指により、軌跡Ｔｒ１を描く操作がなされる際には、タッチパネル１１により、中指から小指までの３本の指による接触が感知されている可能性が高い。
Further, for example, when an operation of drawing the trajectory Tr1 is performed with the index finger of the user's hand indicated by reference numeral h1 in FIG. 7, the touch with the three fingers from the middle finger to the little finger is detected by the
そこで、抽出部１２１は、図７に示した領域Ｒｄの内部をなぞる操作が行われた際に、当該なぞる操作で描かれた軌跡から所定の範囲内において別の接触が感知された場合に、当該接触に関する情報を、上述の軌跡を示す情報の一部として取得してもよい。
Therefore, when the operation of tracing the inside of the region Rd shown in FIG. 7 is performed, the
なお、軌跡を描く操作とは別の接触に関する情報を、軌跡を示す情報の一部として含めるか否かを決定するための所定の範囲としては、例えば、軌跡の始点あるいは終点を中心とし、利用者の手の幅と同程度の長さの半径を持つ円形の範囲を設定してもよい。上述の円形の範囲は、図７に符号ｈ１で示したように、利用者が第１の持ち方でタッチパネル１１を把持している状態で軌跡Ｔｒ１を人差し指で描く操作を行った際に、中指から小指までの３本の指がタッチパネル１１の表面に接触する箇所を含んでいる。
The predetermined range for determining whether or not to include information relating to contact different from the operation for drawing the locus as part of the information indicating the locus is, for example, centered on the start point or end point of the locus. A circular range having a radius approximately the same as the width of the person's hand may be set. As shown by the symbol h1 in FIG. 7, the circular range described above is obtained when the user performs an operation of drawing the trajectory Tr1 with the index finger while holding the
つまり、抽出部１２１は、例えば、図７に符号ｈ１で示した利用者の手の人差し指による軌跡Ｔｒ１を示す情報とともに、タッチパネル１１の縁に掛けられた中指から小指までの３本の指が接触した箇所示す情報を、タッチパネル１１から取得してもよい。
That is, for example, the
なお、タッチパネル１１の表示画面１１１上に設定される検出範囲は、図７に示した「コ」の字型の領域Ｒｄに限られず、利用者がタッチパネル１１を把持する際に指先が接触する可能性のある範囲を設定すればよい。例えば、検出範囲は、タッチパネル１１の外周の四辺に対応して同一の幅を持つ額縁状の領域として設定されてもよい。
Note that the detection range set on the
また、抽出部１２１は、タッチパネル１１から取得した情報から、上述した検出範囲の内側へのタッチ操作で描かれた軌跡の特徴を示す情報として、軌跡の形状を示す情報と、タッチパネル１１の外周と当該軌跡との相対位置を示す情報とを抽出してもよい。
Further, the
また、抽出部１２１は、タッチ操作で描かれた軌跡から所定の範囲内において別の接触が感知されている場合に、別の接触が感知された箇所と軌跡に最も近い縁との位置関係を示す情報を、軌跡の特徴を示す情報の一部として抽出してもよい。
Further, when another contact is sensed within a predetermined range from the locus drawn by the touch operation, the
図６に示した照合部１２２は、抽出部１２１で抽出された情報と、図６に示した条件テーブル１２３に保持された情報とを照合し、照合結果に基づいて、タッチパネル１１が第１の持ち方で把持されているか第２の持ち方で把持されているかを判定する。
The
条件テーブル１２３は、想定可能な操作で描かれる軌跡の形状と当該軌跡とタッチパネル１１の外周との相対位置との組み合わせで示される条件のそれぞれに対応して、第１の持ち方あるいは第２の持ち方を示す情報を保持している。つまり、条件テーブル１２３は、複数種類の持ち方のそれぞれに対応付けされた、なぞる操作によって描かれる可能性のある軌跡の特徴を示す情報の一例である。
The condition table 123 corresponds to each of the conditions indicated by the combination of the shape of the trajectory drawn by an assumed operation and the relative position of the trajectory and the outer periphery of the
例えば、条件テーブル１２３は、第１の持ち方に対応付けられる条件の一つとして、軌跡の形状が所定の長さ以下の直線状であることと、軌跡の方向と当該軌跡に最も近いタッチパネル１１の縁の方向とが概ね直交する位置関係であることとを保持していてもよい。また、条件テーブル１２３は、上述した形状と相対位置を持つ軌跡から所定の範囲内に、別の指がタッチパネル１１に接触している箇所があることを、第１の持ち方に対応付けられる条件の一つとして保持していてもよい。更に、条件テーブル１２３は、ほぼ同時に描かれた軌跡の形状が、概ね平行な所定の長さ以下の直線状であることを含む条件を、第１の持ち方に対応付けられる条件の一つとして保持していてもよい。
For example, the condition table 123 includes, as one of the conditions associated with the first holding method, that the shape of the locus is a straight line having a predetermined length or less, the direction of the locus, and the
また、条件テーブル１２３は、第２の持ち方に対応付けられる条件の一つとして、軌跡の形状がタッチパネル１１の外周上の点を中心とする円弧に近似していることを保持していてもよい。
Further, the condition table 123 holds that, as one of the conditions associated with the second holding method, the shape of the locus approximates an arc centered on a point on the outer periphery of the
また、条件テーブル１２３に、入力装置１０の利用者の好みを反映させることも可能である。例えば、利用者が、それぞれの持ち方でタッチパネル１１を把持している状態で可能な操作のうち、好みの操作で描かれる軌跡の特徴と、第１の持ち方および第２の持ち方を含む持ち方との対応関係を条件テーブル１２３に設定してもよい。このように、条件テーブル１２３の設定を行うことで、照合部１２２により、利用者に合わせてカスタマイズされた条件に基づいて、持ち方の判別を行うことができる。
In addition, it is possible to reflect the preference of the user of the
照合部１２２は、抽出部１２１で抽出された情報と条件テーブル１２３に保持された条件のそれぞれとを照合することで、タッチパネル１１の表示画面１１１において描かれた軌跡の特徴に一致する条件を条件テーブル１２３において探索する。そして、一致する条件が条件テーブル１２３に含まれている場合に、照合部１２２は、条件テーブル１２３において当該条件に対応付けられた持ち方を、判別部１２による判別結果として制御部１３に渡す。
The
上述したように、条件テーブル１２３には、例えば、タッチパネル１１の外周の様々な箇所を第１の持ち方および第２の持ち方で把持した際に実行することが可能な操作で描かれる軌跡の特徴を示す情報を予め保持させておくことができる。
As described above, in the condition table 123, for example, trajectories drawn by operations that can be executed when various positions on the outer periphery of the
したがって、図６に示した判別部１２によれば、条件テーブル１２３に保持された情報と抽出部１２１で抽出された情報とを照合部１２２で照合することにより、タッチパネル１１をなぞる操作が感知された箇所にかかわらず、持ち方を判別することができる。
Therefore, according to the
図６に示した制御部１３は、選択部１３１と、第１提示部１３２と、第２提示部１３３とを含んでいる。
The
選択部１３１は、上述した判別部１２で得られた判別結果を受ける。また、選択部１３１は、階層構造を持つ選択肢の集合のうち、上位の階層に属する選択肢のいずれかを選択する旨の指示がタッチパネル１１によって受け付けられた際に、選択された選択肢から派生する下位の選択肢を示す操作対象を処理装置１から受ける。判別部１２から第１の持ち方で把持されている旨の判別結果を受けた場合に、選択部１３１は、処理装置１から受けた下位の選択肢を示す操作対象を第１提示部１３２に渡す。一方、第２の持ち方で把持されている旨の判別結果を受けた場合に、選択部１３１は、処理装置１から受けた下位の選択肢を示す操作対象を第２提示部１４２に渡す。
The
第１提示部１３２は、タッチパネル１１に対する操作によって選択されたことが示された上位階層の選択肢を示す操作対象に代えて、選択部１３１を介して受けた下位の選択肢を示す操作対象を表示させることで、階層的な選択肢の提示を実現する。
The
一方、第２提示部１３３は、タッチパネル１１に対する操作によって選択されたことが示された上位階層の選択肢を示す操作対象に並べて、選択部１３１を介して受けた下位の選択肢を示す操作対象を表示させることで、階層的な選択肢の提示を実現する。
On the other hand, the
図８は、階層的な選択肢を提示するための操作対象の並べ方の例を示す。なお、図８に示した要素のうち、図２に示した要素と同等のものについては、同一の符号を付して示し、その説明は省略する。 FIG. 8 shows an example of how to arrange operation targets for presenting hierarchical options. Of the elements shown in FIG. 8, the same elements as those shown in FIG. 2 are designated by the same reference numerals, and the description thereof is omitted.
図８(Ａ)は、図６に示した第１提示部１３２がタッチパネル１１に操作対象を表示させる際の並べ方の例を示す。また、図８(Ｂ)は、図６に示した第２提示部１３３がタッチパネル１１に操作対象を表示させる際の並べ方の例を示す。なお、図８(Ａ)において、符号Ｓ１＿１，Ｓ１＿２，Ｓ１＿３，Ｓ１＿４は、図２(Ａ)に示した操作対象Ｍ１に対応する選択肢から派生した下位の選択肢に対応する操作対象を示している。また、図８(Ｂ)において、符号Ｓ３＿１，Ｓ３＿２，Ｓ３＿３，Ｓ３＿４は、図２(Ｂ)に示した操作対象Ｍ３に対応する選択肢から派生した下位の選択肢に対応する操作対象を示している。
FIG. 8A shows an example of how the
図８(Ａ)の例は、図２(Ａ)に示した操作対象Ｍ１を選択する操作がなされた際に、図６に示した第１提示部１３２が、操作対象Ｍ１で示される選択肢から派生した下位の選択肢を示す操作対象Ｓ１＿１〜Ｓ１＿４をタッチパネル１１に表示させた様子を示している。
In the example of FIG. 8A, when the operation for selecting the operation target M1 shown in FIG. 2A is performed, the
図８(Ａ)に示したように、第１提示部１３２は、上位の選択肢についての選択操作に応じて、上位の選択肢を示す操作対象Ｍ１〜Ｍ４に代えて、下位の選択肢を示す操作対象Ｓ１＿１〜Ｓ１＿４をタッチパネル１１に表示させる。
As shown in FIG. 8 (A), the
第１提示部１３２が上述の表示制御を行うことにより、第１の持ち方でタッチパネル１１が把持されている状態で操作可能な限られた範囲に、選択操作の対象となっている階層の選択肢を示す操作対象を表示することができる。
When the
したがって、図６に示した第１提示部１３２によれば、選択操作が既に完了した階層の選択肢を示す操作対象の表示を維持した場合に比べて、限られた操作可能な範囲を有効に利用することができる。
Therefore, according to the
図８(Ｂ)の例は、図２(Ｂ)に示した操作対象Ｍ３を選択する操作がなされた際に、図６に示した第２提示部１３３が、操作対象Ｍ３で示される選択肢から派生した下位の選択肢を示す操作対象Ｓ３＿１〜Ｓ３＿４をタッチパネル１１に表示させた様子を示している。
In the example of FIG. 8B, when the operation for selecting the operation target M3 shown in FIG. 2B is performed, the
図８(Ｂ)に示したように、第２提示部１３３は、上位の選択肢についての選択操作に応じて、上位の選択肢を示す操作対象Ｍ３の表示を維持しつつ、当該操作対象Ｍ３に並べて、下位の選択肢を示す操作対象Ｓ１＿１〜Ｓ１＿４をタッチパネル１１に表示させる。
As shown in FIG. 8B, the
第２提示部１３３が上述の表示制御を行うことにより、第２の持ち方でタッチパネル１１が把持されている状態で操作可能な２次元的に広がる範囲に、選択操作の対象となっている階層の選択肢を示す操作対象を階層構造とともに表示することができる。
When the
したがって、図６に示した第１提示部１３２によれば、２次元的な広がりを持つ操作可能な範囲を有効に利用し、利用者が市販のオペレーティングシステムなどの操作において慣れ親しんだ形式に沿って、階層的な構造を持つ選択肢を提示することができる。
Therefore, according to the
以上に説明した第１提示部１４１および第２提示部１４２を有する制御部１３によれば、第１の持ち方と第２の持ち方とのそれぞれに適した並べ方で操作対象を表示させることで、階層構造を持つ選択肢の集合を提示することができる。
According to the
したがって、図６に示した制御部１３を有する入力装置１０によれば、タッチパネル１１がいずれの持ち方で把持されている場合においても、階層構造を持つ選択肢の集合から所望の選択肢を選ぶ操作を容易にすることができる。
Therefore, according to the
図９は、図６に示した入力装置１０の動作を示す。なお、図９に示したステップのうち、図３に示したステップと同等のものについては、同一の符号を付して示し、その説明は省略する。図９に示したステップＳ３１１〜ステップＳ３１６の処理およびステップＳ３０５〜ステップＳ３０７の処理は、図１に示したタッチパネル１１の表示画面１１１をなぞる操作が行われた際に、入力装置１０によって実行される。
FIG. 9 shows the operation of the
ステップＳ３１１において、図６に示した抽出部１２１は、タッチパネル１１から渡された情報に基づいて、表示画面１１１をなぞる操作で描かれた軌跡の特徴を示す情報を抽出する。
In step S <b> 311, the
ステップ３１２において、照合部１２２は、ステップＳ３１１の処理で抽出された情報と図６に示した条件テーブル１２３に条件として保持された軌跡の形状および軌跡とタッチパネル１１の外周との位置関係とを示す情報とを照合する。
In
また、ステップＳ３１３において、入力装置１０は、ステップＳ３１２において照合部１２２により、条件テーブル１２３に保持された条件のいずれかとステップＳ３１１の処理で抽出された情報が一致する旨の照合結果が得られたか否かを判定する。
In step S313, the
ステップＳ３１１の処理で抽出された情報に一致する条件があるとされた場合に(ステップＳ３１３の肯定判定(ＹＥＳ))、照合部１２２は、ステップＳ３１４の処理を実行する。
When it is determined that there is a condition that matches the information extracted in the process of step S311 (Yes determination in step S313), the
ステップＳ３１４において、照合部１２２は、ステップＳ３１２の照合処理で、抽出部１２１で抽出された情報と一致するとされた条件に対応付けられて条件テーブル１２３に保持された持ち方を示す情報を、判別部１２による判別結果として制御部１４に渡す。
In step S <b> 314, the
ステップＳ３１５において、制御部１３は、ステップＳ３１４の処理で判別結果として受けた情報で示される持ち方に応じて設定された並べ方で、操作対象をタッチパネル１１に表示させる処理を行う。例えば、判別結果として第１の持ち方を示す情報を受けた場合に、制御部１３は、図３に示したステップＳ３０７と同様にして、第１の持ち方に対応する並べ方で操作対象を表示させる処理を実行する。一方、判別結果として第２の持ち方を示す情報を受けた場合に、制御部１３は、図３に示したステップＳ３０８と同様にして、第２の持ち方に対応する並べ方で操作対象を表示させる処理を実行する。
In step S <b> 315, the
なお、ステップＳ３１１の処理で抽出された情報に一致する条件がないとされた場合に(ステップＳ３１３の否定判定(ＮＯ))、判別部１２は、タッチパネル１１の持ち方を判別できないと判断し、処理を終了してもよい。
If it is determined that there is no condition that matches the information extracted in the process of step S311 (No determination in step S313 (NO)), the
図９に示した流れ図では、図６に示した制御部１３は、ステップＳ３０６の処理に続いて、ステップＳ３１６およびステップＳ３１７の処理を実行する。
In the flowchart shown in FIG. 9, the
ステップＳ３１６において、制御部１３は、図６に示した処理装置１から下位の操作対象を示す情報が渡されるか否かに基づき、ステップＳ３０６の処理で選択された旨を通知した選択肢の下位の選択肢として表示する選択肢があるか否かを判定する。
In step S316, the
下位の選択肢がある場合に(ステップＳ３１６の肯定判定(ＹＥＳ))、制御部１３は、ステップＳ３１７の処理を実行する。
When there is a lower option (Yes determination in step S316 (YES)), the
ステップＳ３１７において、制御部１３に含まれる選択部１３１は、ステップＳ３１５の処理で得られた判別結果に応じて、判別された持ち方に対応する並べ方で、下位の選択肢を示す操作対象をタッチパネル１１に表示させる処理を実行する。例えば、判別結果として第１の持ち方を示す情報を受けていた場合に、選択部１３１は、処理装置１から受け取った情報を図６に示した第１提示部１３２に渡すことで、下位の選択肢を示す操作対象を第１の持ち方に対応する並べ方で表示させる。一方、判別結果として第１の持ち方を示す情報を受けていた場合に、選択部１３１は、図６に示した第２提示部１３３に処理装置１から受け取った情報を渡すことで、下位の選択肢を示す操作対象を第２の持ち方に対応する並べ方で表示させる。
In step S317, the
一方、ステップＳ３０６の処理で選択された旨を通知した選択肢に対応して表示する下位の選択肢がない場合に(ステップＳ３１６の否定判定(ＮＯ))、入力装置１０は、ステップＳ３１７の処理を実行せずに、ステップＳ３０７の処理に進む。
On the other hand, when there is no lower-level option to be displayed corresponding to the option that has been selected in the process of step S306 (No determination in step S316 (NO)), the
図６、図７および図９を用いて説明したように、図６に示した判別部１２によれば、タッチパネル１１を把持した状態で可能な設定操作で描かれる軌跡の特徴と持ち方との対応関係を網羅的に示す情報に基づいて、タッチパネル１１の持ち方を判別できる。したがって、図６に示した判別部１２を有する入力装置によれば、利用者が把持している箇所がタッチパネル１１の外周のどこであっても、タッチパネル１１の持ち方を判別し、判別した持ち方に応じて操作対象を表示させることができる。
As described with reference to FIGS. 6, 7, and 9, according to the
更に、図６、図８および図９を用いて説明したように、図６に示した制御部１３によれば、階層構造を持つ選択肢の集合を示す情報が処理装置１から渡された場合に、タッチパネル１１の持ち方に応じた並べ方で下位の選択肢を表示することができる。
Furthermore, as described with reference to FIGS. 6, 8, and 9, according to the
したがって、図６に示した本件開示の入力装置１０の利用者は、好みにあった持ち方でタッチパネル１１を把持した状態で設定操作を行うことで、タッチパネル１１の表面上に所望の操作範囲を設定し、階層構造を有する複雑な選択肢の提示を受けることができる。
Therefore, the user of the
以上に説明した本件開示の入力装置１０は、例えば、スマートフォンやタブレット型のパーソナルコンピュータのようなタッチパネル１１を搭載した端末装置に含まれるプロセッサとソフトウェアとの協働によって実現することも可能である。
The
また、タッチパネル１１を搭載した端末装置のプロセッサとソフトウェアとの協働によって入力装置１０を実現する場合に、図３に示したフローチャートおよび図９に示したフローチャートは、本件開示の入力制御方法および入力制御プログラムの一実施形態である。
Further, when the
図１０は、図６に示した入力装置１０を搭載した端末装置のハードウェア構成例を示す。なお、図１０に示した構成要素のうち、図６に示した構成要素と同等のものについては、同一の符号を付して示し、その説明は省略する。
FIG. 10 shows a hardware configuration example of a terminal device on which the
図１０に示した端末装置２０は、タッチパネル１１と、プロセッサ２１と、メモリ２２と、ハードディスク装置２３と、入出力インタフェース２４と、ネットワークインタフェース２５とを含んでいる。更に、端末装置２０は、センサインタフェース２６と、視線検出センサ２７と、光学ドライブ装置２８とを含んでいる。図１０に示したプロセッサ２１と、メモリ２２と、ハードディスク装置２３と、入出力インタフェース２４と、ネットワークインタフェース２５と、センサインタフェース２６と、光学ドライブ装置２８とは、バスを介して互いに接続されている。また、プロセッサ２１は、入出力インタフェース２４を介してタッチパネル１１に接続されており、また、センサインタフェース２６を介して視線検出センサ２７に接続されている。更に、プロセッサ２１は、ネットワークインタフェース２５を介して、インターネットなどのネットワークＮＷに接続されており、ネットワークＮＷ上に設けられたサーバ装置２との間で情報の授受が可能である。
10 includes a
図１０に示したプロセッサ２１と、メモリ２２と、ハードディスク装置２３と、入出力インタフェース２４と、タッチパネル１１とは、入力装置１０に含まれている。
The
また、図１０に示した光学ドライブ装置２８は、光ディスクなどのリムーバブルディスク２９を装着可能であり、装着したリムーバブルディスク２７に記録された情報の読出および記録を行う。
Further, the
図１０に示したメモリ２２またはハードディスク装置２３は、端末装置２０のオペレーティングシステムとともに、プロセッサ２１が図３または図９に示した入力制御処理を実行するためのアプリケーションプログラムを格納している。なお、上述した入力制御処理を実行するためのアプリケーションプログラムは、例えば、光ディスクなどのリムーバブルディスク２９に記録して頒布することができる。そして、このリムーバブルディスク２９を光学ドライブ装置２８に装着して読み込み処理を行うことにより、入力制御処理を実行するためのアプリケーションプログラムを、メモリ２２およびハードディスク装置２３に格納させてもよい。また、ネットワークインタフェース２５を介してネットワークＮＷに接続し、入力制御処理を実行するためのアプリケーションプログラムをダウンロードすることで、メモリ２２およびハードディスク装置２３に読み込ませることもできる。
The
そして、プロセッサ２１は、メモリ２２に格納された入力制御処理のためのアプリケーションプログラムを実行することにより、図６に示した判別部１２、制御部１３および受け付け部１４の機能を果たしてもよい。なお、プロセッサ２１は、メモリ２２などに格納されたオペレーティングシステムなどを実行することにより、図６に示した処理装置１の機能を果たす。
Then, the
また、メモリ２２またはハードディスク装置２３は、更に、視線検出センサ２７で得られる検出結果に基づき、端末装置２０の利用者が注視している箇所に表示された操作対象を特定する処理のためのアプリケーションプログラムを格納していてもよい。
Further, the
図１１は、図１０に示した端末装置２０の動作を示す。図１１に示したステップＳ３２１〜ステップＳ３２３の各処理は、利用者が注視している箇所に表示された操作対象を特定する処理のためのアプリケーションプログラムに含まれる処理の一例である。また、図１１に示したステップＳ３２４〜ステップＳ３３１の各処理は、上述した入力制御処理のためのアプリケーションプログラムに含まれる処理の一例である。なお、ステップＳ３２４〜ステップＳ３３１の各処理は、本件開示の入力制御プログラムの位置実施形態でもある。また、図１１に示したステップＳ３２１〜ステップＳ３３１の各処理は、図１０に示したプロセッサ２１によって実行される。
FIG. 11 shows the operation of the
ステップＳ３２１において、プロセッサ２１は、図１０に示したセンサインタフェース２６を介して視線検出センサ２７で得られた検出結果を受け取り、受け取った検出結果に基づいて、利用者の視線が注視しているタッチパネル１１上の箇所を特定する。ここで、プロセッサ２１は、例えば、利用者が注視している箇所として、利用者の視線とタッチパネル１１の表面とが交差する位置に表示されているウィンドウなどを特定する情報を取得してもよい。
In step S321, the
ステップＳ３２２において、プロセッサ２１は、ステップＳ３２１の処理で特定された箇所に表示されているウィンドウなどを表示するための情報を解析する。例えば、プロセッサ２１は、ウェブサイトなどを表示するための画面のデザインをＨＴＭＬ(Hyper Text Mark-up Language)を用いて記述した情報として、図１０に示したサーバ装置２から受け取った情報に含まれるタグを解析してもよい。
In step S322, the
ステップＳ３２３において、プロセッサ２１は、ステップＳ３２２で得られた解析結果に基づいて、利用者が注視している箇所に、メニューやリンク先などの選択可能な選択肢を示す操作対象があるか否かを判定する。
In step S323, based on the analysis result obtained in step S322, the
操作対象があると判定された場合に(ステップＳ３２３の肯定判定(ＹＥＳ))、プロセッサ２１は、ステップＳ３２４〜ステップＳ３３１の処理を実行する。一方、操作対象がないと判定された場合に(ステップＳ３２３の否定判定(ＮＯ))、プロセッサ２１は、本件開示の入力装置１０による入力制御処理を終了する。
When it is determined that there is an operation target (Yes determination in step S323 (YES)), the
ステップＳ３２４において、プロセッサ２１は、図９に示したステップＳ３１１〜ステップＳ３１４と同様にして、タッチパネル１１の表面をなぞる操作で描かれた軌跡に基づき、利用者がタッチパネル１１を搭載した端末装置２０を把持している持ち方を判別する。
In step S324, the
端末装置２０が、スマートフォンやタブレット型のパーソナルコンピュータである場合に、タッチパネル１１は、端末装置２０に含まれる構成要素を収めた筐体の一つの側面をなすように搭載され、端末装置２０と一体となっている場合が多い。端末装置２０とタッチパネル１１とが一体となっている場合に、図９を用いて説明したステップＳ３１１〜ステップＳ３１４の処理によって判別したタッチパネル１１の持ち方は、即ち、端末装置２０の持ち方に相当する。
When the
ステップＳ３２５において、プロセッサ２１は、ステップＳ３２４の処理で得られた判別結果で示される持ち方に対応する並べ方で、ステップＳ３２２の処理で得られた解析結果で示される操作対象をタッチパネル１１に表示させる。
In step S325, the
ここで、ステップＳ３２２の処理により、利用者が注視している箇所に表示されたウィンドウが、それぞれ複数の操作対象を含む操作対象のグループを含んでいる旨の解析結果が得られる場合がある。また、ステップＳ３２４の処理により、利用者が両方の手で端末装置２０を把持している旨の判別結果が得られる場合もある。
Here, the processing of step S322 may obtain an analysis result indicating that the window displayed at the place where the user is gazing includes a group of operation targets each including a plurality of operation targets. In addition, the processing in step S324 may obtain a determination result indicating that the user is holding the
複数の操作対象のグループを示す解析結果が得られ、また、左右の手のそれぞれによる持ち方についての判別結果が得られた場合に、プロセッサ２１は、操作対象のグループのうち２つを、左右の手のそれぞれによる持ち方に応じて表示させてもよい。
When an analysis result indicating a plurality of operation target groups is obtained and a determination result about how to hold the left and right hands is obtained, the
図１２は、操作対象の並べ方の別例を示す。なお、図１２に示した要素のうち、図４に示した要素と同等のものについては、同一の符号を付して示し、その説明は省略する。 FIG. 12 shows another example of how the operation targets are arranged. Note that among the elements shown in FIG. 12, elements equivalent to those shown in FIG. 4 are denoted by the same reference numerals and description thereof is omitted.
図１２において、符号Ｗ１は、タッチパネル１１の表示画面１１１に表示されたウィンドウの例を示す。また、符号Ｇ１は、ウィンドウＷ１に含まれる拡大などの操作が可能な画像の例を示し、また、符号Ｌｇは、ウィンドウＷ１に含まれるリンク先のリストを示している。なお、図１２に示したリンク先のリストは、符号「リンク１」、符号「リンク２」、符号「リンク３」、および符号「リンクｋ」で示されるリンク先を含むｋ個のリンク先を含んでいる。
In FIG. 12, a symbol W <b> 1 indicates an example of a window displayed on the
図１２に示したウィンドウＷ１を表示するための情報は、画像Ｇ１についての操作を選択するための操作対象のグループを示す情報とともに、リンク先のリストＬｇに含まれる各リンク先へのジャンプを指示するための操作対象のグループを示す情報を含んでいる。 The information for displaying the window W1 shown in FIG. 12 indicates the jump to each link destination included in the link destination list Lg together with the information indicating the operation target group for selecting the operation for the image G1. It contains information indicating the group to be operated.
したがって、利用者がウィンドウＷ１を注視している旨の情報が得られた場合に、プロセッサ２１は、図１１に示したステップＳ３２２の処理により、画像Ｇ１とリンク先のリストＬｇとのそれぞれに対応する操作対象のグループを示す情報を取得することができる。
Therefore, when information indicating that the user is gazing at the window W1 is obtained, the
また、プロセッサ２１は、ステップＳ３２５の処理の際に、ステップＳ３２２の処理で得られた画像Ｇ１とリンク先のリストＬｇとのそれぞれに対応する操作対象のグループを、左右の手のそれぞれについて判別された持ち方に応じて表示させてもよい。
Further, in the process of step S325, the
図１２において破線で囲んで示した表示例ＭＬは、符号ｈ１＿Ｌで示した利用者の左手が第１の持ち方でタッチパネル１１を把持している場合に、プロセッサ２１が、タッチパネル１１に操作対象のグループを表示させる際の操作対象の並べ方の例を示す。また、図１２において破線で囲んで示した表示例ＭＲは、符号ｈ２＿Ｒで示した利用者の右手が第２の持ち方でタッチパネル１１を把持している場合に、プロセッサ２１が操作対象のグループをタッチパネル１１に表示させる際の操作対象の並べ方の例を示す。
In the display example ML surrounded by a broken line in FIG. 12, when the left hand of the user indicated by the symbol h <b> 1 </ b> _L is holding the
なお、図１２に示した表示例ＭＬは、画像Ｇ１について、拡大操作、縮小操作、時計回りの回転操作および反時計回りの回転操作を選択するための操作対象として、符号「拡大」、符号「縮小」、符号「−９０」、符号「＋９０」で示した操作対象を含んでいる。また、図１２に示した表示例ＭＲは、リンク先のリストＬｇについて、各リンク先へのジャンプを指示するための操作対象として、符号「リンク１」、符号「リンク２」、符号「リンク３」および符号「リンクｋ」で示した操作対象を含むｋ個の操作対象を含んでいる。
Note that the display example ML illustrated in FIG. 12 includes, as an operation target for selecting an enlargement operation, a reduction operation, a clockwise rotation operation, and a counterclockwise rotation operation for the image G1, reference signs “enlarge”, “ Operation objects indicated by “reduction”, “−90”, and “+90” are included. In addition, the display example MR shown in FIG. 12 has a symbol “
ここで、左右の手について判別された持ち方が異なっている場合に、プロセッサ２１は、図１１に示したステップＳ３２５の処理で、例えば、操作対象のグループに含まれる操作対象の数に基づいて、各操作対象のグループを表示させる箇所を決定してもよい。例えば、プロセッサ２１は、図１２に示したリンク先のリストＬｇのように、多くの選択肢を含む操作対象のグループを、第２の持ち方で把持していることが判別された側の手で操作可能な範囲に第２の持ち方に対応する並べ方で表示させることが望ましい。
Here, when the holding methods determined for the left and right hands are different, the
また、図１１に示したステップＳ３２６〜ステップＳ３３１の処理において、プロセッサ２１は、持ち方に応じた並べ方で表示させた操作対象による入力操作を受け付けるとともに、当該入力操作を待ち受ける期間を限定するための処理を行ってもよい。
In addition, in the processing of step S326 to step S331 shown in FIG. 11, the
ステップＳ３２６において、プロセッサ２１は、持ち方に応じた並べ方で表示させた操作対象による入力操作の待ち受けを開始してからの経過時間を計測する処理を開始する。例えば、プロセッサ２１は、経過時間を示す変数に初期値として例えば数値「０」を設定し、以降の処理において、経過時間を示す変数に所定の数値を加算する処理を行えばよい。
In step S <b> 326, the
ステップＳ３２７において、プロセッサ２１は、図１０に示したタッチパネル１１から取得した情報に基づき、ステップＳ３２５の処理によってタッチパネル１１に表示された操作対象のいずれかに対する接触が感知されたか否かを判定する。
In step S327, based on the information acquired from the
図１０に示した入出力インタフェース２４を介して、タッチパネル１１により操作対象のいずれかが表示された箇所への接触が感知された旨の情報を取得した場合に（ステップＳ３２７の肯定判定(ＹＥＳ)）、プロセッサ２１は、ステップＳ３２８の処理を実行する。
When information indicating that contact with a location where any of the operation objects is displayed is detected by the
ステップＳ３２８において、プロセッサ２１は、接触が感知された箇所に表示された操作対象で示される選択肢を選択する旨の入力操作として受け付ける処理を実行する。
In step S328, the
例えば、図１２に示した符号ｈ１＿Ｌで示した利用者の手の指が、操作対象「拡大」が表示された箇所に接触した場合に、プロセッサ２１は、入出力インタフェース２４を介して取得した情報に基づいて、操作対象「拡大」を選択する旨の入力操作を受け付ける。ここで、図１２に示した表示例ＭＬに含まれる操作対象「拡大」は、ステップＳ３２２の処理で得られた画像Ｇ１に対応する操作対象グループに含まれる操作対象に対応付けられている。したがって、プロセッサ２１は、図１２に示した表示例ＭＬに含まれる操作対象「拡大」が表示された箇所へのタッチ操作を、ウィンドウＷ１に含まれる画像Ｇ１が表示された箇所を操作した場合と同等の操作として受け付けることができる。
For example, when the finger of the user's hand indicated by the symbol h <b> 1 </ b> _L illustrated in FIG. 12 touches the location where the operation target “enlarged” is displayed, the
なお、プロセッサ２１は、ステップＳ３２８の処理の一部として、図９に示したステップＳ３１６およびステップＳ３１７の処理を実行し、選択された選択肢の下位に位置づけられた選択しに対応する操作対象を表示させる処理を実行してもよい。
Note that the
また、ステップＳ３２９において、プロセッサ２１は、上述した経過時間を示す変数に初期値「０」を設定する処理を行い、待ち受けを開始してからの経過時間をリセットしてもよい。
Further, in step S329, the
一方、タッチパネル１１により操作対象のいずれかが表示された箇所への接触が感知された旨の情報が所定の時間内に得られなかった場合に（ステップＳ３２７の肯定判定（ＹＥＳ））、プロセッサ２１は、ステップＳ３３０の処理を実行する。
On the other hand, when the information that the touch to the place where any of the operation targets is displayed on the
ステップＳ３３０において、プロセッサ２１は、待ち受けを開始してからの経過時間を示す変数に所定値を加算する処理を実行することで、経過時間が所定の時間だけ増大したことを示してもよい。
In step S330, the
その後、ステップＳ３３１において、プロセッサ２１は、待ち受けを開始してからの経過時間を示す変数の値が、待ち受け時間の上限として予め設定した期間を示す値を超えたか否かを判定する。
Thereafter, in step S331, the
経過時間を示す変数の値が、待ち受け時間の上限を示す値を超えている場合に（ステップＳ３３１の肯定判定(ＹＥＳ)）、プロセッサ２１は、入力操作を待ち受ける期間が経過したと判断し、本件開示の入力制御プログラムによる処理を終了する。
When the value of the variable indicating the elapsed time exceeds the value indicating the upper limit of the standby time (Yes in step S331), the
一方、経過時間を示す変数の値が、待ち受け時間の上限を示す値以下である場合に（ステップＳ３３１の否定判定(ＮＯ)）、プロセッサ２１は、ステップＳ３２７の処理に戻って、新たな入力操作を待ち受ける。
On the other hand, when the value of the variable indicating the elapsed time is equal to or less than the value indicating the upper limit of the standby time (No in step S331 (NO)), the
図１０〜図１２を用いて説明したように、本件開示の入力制御プログラムを図１０に示したプロセッサ２１によって実行することで、端末装置２０が把持されている持ち方に応じて操作対象を表示させ、操作対象で示される選択肢の入力を受けることができる。
As described with reference to FIGS. 10 to 12, by executing the input control program of the present disclosure by the
つまり、本件開示の入力制御プログラムによれば、端末装置２０に搭載されたタッチパネル１１において、利用者の指が届く範囲が、端末装置２０が把持されている持ち方に依存して制限される場合にも、快適な操作を実現することが可能である。
That is, according to the input control program of the present disclosure, in the
以上の詳細な説明により、実施形態の特徴点及び利点は明らかになるであろう。これは、特許請求の範囲が、その精神および権利範囲を逸脱しない範囲で、前述のような実施形態の特徴点および利点にまで及ぶことを意図するものである。また、当該技術分野において通常の知識を有する者であれば、あらゆる改良および変更を容易に想到できるはずである。したがって、発明性を有する実施形態の範囲を前述したものに限定する意図はなく、実施形態に開示された範囲に含まれる適当な改良物および均等物に拠ることも可能である。 From the above detailed description, features and advantages of the embodiment will become apparent. It is intended that the scope of the claims extend to the features and advantages of the embodiments as described above without departing from the spirit and scope of the right. Any person having ordinary knowledge in the technical field should be able to easily come up with any improvements and changes. Therefore, there is no intention to limit the scope of the inventive embodiments to those described above, and appropriate modifications and equivalents included in the scope disclosed in the embodiments can be used.
１…処理装置；２…サーバ装置；１０…入力装置；１１…タッチパネル；１２…判別部；１３…制御部；１４…受け付け部；１１１…表示画面；１２１…抽出部；１２２…照合部；１２３…条件テーブル；１３１…選択部；１３２…第１提示部；１３３…第２提示部；２０…端末装置；２１…プロセッサ；２２…メモリ；２３…ハードディスク装置；２４…入出力インタフェース；２５…ネットワークインタフェース；２６…センサインタフェース；２７…視線検出センサ；２８…光学ドライブ装置；２９…リムーバブルディスク；ＮＷ…ネットワーク
DESCRIPTION OF
Claims (6)
前記表示画面をなぞる操作が前記タッチパネルによって感知された場合に、前記なぞる操作によって描かれた軌跡の特徴に基づいて、前記表示画面をなぞる操作方向が制限される持ち方である第１の持ち方と、前記表示画面をなぞる操作方向の自由度が前記第１の持ち方の操作方向よりも高い第２の持ち方とのいずれであるかを判別する判別部と、
前記判別部で判別された複数種類の持ち方のそれぞれに対応して前記表示画面において操作可能な領域を設定し、設定した領域に少なくとも一つの操作対象を示す画像を表示させる制御部と、
前記タッチパネルによって接触が感知された箇所に前記制御部によって表示された操作対象で示される情報の入力を受け付ける受け付け部と
を備える
ことを特徴とする入力装置。 A touch panel including a display screen for sensing contact with the display screen;
A first holding method in which, when an operation for tracing the display screen is sensed by the touch panel, the operation direction for tracing the display screen is limited based on a trajectory drawn by the tracing operation. And a determination unit that determines whether the degree of freedom of the operation direction that traces the display screen is a second way of holding that is higher than the operation direction of the first way of holding ,
A control unit configured to set an operable region on the display screen corresponding to each of a plurality of types of holding methods determined by the determination unit, and to display an image indicating at least one operation target in the set region;
Input apparatus characterized by Ru and a reception unit for receiving an input of information indicated by the displayed operation target by the control unit to the location where contact is sensed by the touch panel.
前記表示画面をなぞる操作が一方向に制限される持ち方を前記第１の持ち方とし、前記表示画面をなぞる操作が複数方向に可能な持ち方を前記第２の持ち方とする場合、
前記制御部は、
前記判別部により、前記第１の持ち方が判別された場合に、前記一方向を一辺とする矩形領域を前記操作可能な領域として設定し、
前記判別部により、前記第２の持ち方が判別された場合に、前記表示画面をなぞる操作が可能な範囲を操作可能な領域として設定する
ことを特徴とする入力装置。 The input device according to claim 1 ,
If the operation of tracing the previous SL display screen your grip is limited in one direction by said first holding method, operation of tracing the display screen and the way of holding possible in a plurality of directions the second holding method,
The controller is
When the first holding method is determined by the determination unit, a rectangular region having one side as one side is set as the operable region,
The input device, wherein when the second holding method is determined by the determination unit, a range in which an operation of tracing the display screen can be set as an operable region.
前記判別部は、
前記複数種類の持ち方のそれぞれに対応付けされた、前記なぞる操作によって描かれる可能性のある軌跡の特徴を示す情報に基づいて、前記描かれた軌跡から前記タッチパネルの持ち方を判別する
ことを特徴とする入力装置。 The input device according to claim 1 or 2,
The discrimination unit
Determining how to hold the touch panel from the drawn trajectory based on information indicating characteristics of the trajectory that may be drawn by the tracing operation associated with each of the plurality of holding methods. Characteristic input device.
前記制御部は、
前記タッチパネルが前記第１の持ち方で把持されていると判別された場合に、階層構造を持つ選択肢の集合のうち、上位の階層に属する選択肢のいずれかを選択する旨の入力の受付に応じて、選択された選択肢を示す操作対象に代えて、前記選択された選択肢から派生する下位の選択肢を示す操作対象を表示させることで前記下位の選択肢を提示する第１提示部と、
前記タッチパネルが前記第２の持ち方で把持されていると判別された場合に、前記上位の階層に属する選択肢のいずれかを選択する旨の入力の受付に応じて、選択された選択肢を示す操作対象に並べて、前記選択された選択肢から派生する下位の選択肢を示す操作対象を表示させることで前記下位の選択肢を提示する第２提示部とを有する
ことを特徴とする入力装置。 The input device according to claim 2,
The controller is
When it is determined that the touch panel is held in the first way of holding, in response to receiving an input to select one of the options belonging to a higher hierarchy from the set of options having a hierarchical structure In place of the operation target indicating the selected option, a first presentation unit that presents the lower option by displaying the operation target indicating the lower option derived from the selected option;
When it is determined that the touch panel is held in the second way of holding, an operation indicating the selected option in response to receiving an input indicating that one of the options belonging to the higher hierarchy is selected An input device comprising: a second presenting unit that presents the lower option by displaying an operation target indicating a lower option derived from the selected option in a row.
判別された複数種類の持ち方のそれぞれに対応して操作可能な領域を前記タッチパネルの前記表示画面において設定し、設定した領域に少なくとも一つの操作対象を示す画像を表示させ、
前記タッチパネルによって接触が感知された箇所に表示された操作対象で示される情報の入力を受け付ける
ことを特徴とする入力制御方法。 When the touch panel having the display screen senses an operation of tracing the display screen, the operation direction of tracing the display screen is limited based on the characteristics of the trajectory drawn by the tracing operation. Determining whether the holding method of 1 and the second holding method in which the degree of freedom of the operation direction tracing the display screen is higher than the operation direction of the first holding method ;
An area that can be operated corresponding to each of the determined types of holding is set on the display screen of the touch panel, and an image showing at least one operation target is displayed in the set area,
An input control method characterized by receiving an input of information indicated by an operation target displayed at a location where contact is detected by the touch panel.
判別された複数種類の持ち方のそれぞれに対応して操作可能な領域を前記タッチパネルの前記表示画面において設定し、設定した領域に少なくとも一つの操作対象を示す画像を表示させ、
前記タッチパネルによって接触が感知された箇所に表示された操作対象で示される情報の入力を受け付ける
処理をコンピュータに実行させることを特徴とする入力制御プログラム。 When the touch panel having the display screen senses an operation of tracing the display screen, the operation direction of tracing the display screen is limited based on the characteristics of the trajectory drawn by the tracing operation. Determining whether the holding method of 1 and the second holding method in which the degree of freedom of the operation direction tracing the display screen is higher than the operation direction of the first holding method ;
An area that can be operated corresponding to each of the determined types of holding is set on the display screen of the touch panel, and an image showing at least one operation target is displayed in the set area,
An input control program that causes a computer to execute a process of receiving input of information indicated by an operation target displayed at a location where contact is detected by the touch panel.
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2013054847A JP6079337B2 (en) | 2013-03-18 | 2013-03-18 | Input device, input control method, and input control program |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2013054847A JP6079337B2 (en) | 2013-03-18 | 2013-03-18 | Input device, input control method, and input control program |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2014182435A JP2014182435A (en) | 2014-09-29 |
| JP6079337B2 true JP6079337B2 (en) | 2017-02-15 |
Family
ID=51701131
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2013054847A Active JP6079337B2 (en) | 2013-03-18 | 2013-03-18 | Input device, input control method, and input control program |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP6079337B2 (en) |
Families Citing this family (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN104461366A (en) * | 2014-12-16 | 2015-03-25 | 小米科技有限责任公司 | Method and device for activating operation state of mobile terminal |
Family Cites Families (7)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP5066055B2 (en) * | 2008-10-28 | 2012-11-07 | 富士フイルム株式会社 | Image display device, image display method, and program |
| JP2010108081A (en) * | 2008-10-28 | 2010-05-13 | Sharp Corp | Menu display device, method of controlling the menu display device, and menu display program |
| JP4853507B2 (en) * | 2008-10-30 | 2012-01-11 | ソニー株式会社 | Information processing apparatus, information processing method, and program |
| WO2011093033A1 (en) * | 2010-01-26 | 2011-08-04 | パナソニック株式会社 | Display control device, display control method, program and integrated circuit |
| JP2012108674A (en) * | 2010-11-16 | 2012-06-07 | Ntt Docomo Inc | Display terminal |
| JP5507494B2 (en) * | 2011-05-13 | 2014-05-28 | レノボ・シンガポール・プライベート・リミテッド | Portable electronic device with touch screen and control method |
| JP2012256153A (en) * | 2011-06-08 | 2012-12-27 | Panasonic Corp | Character input device and portable terminal |
-
2013
- 2013-03-18 JP JP2013054847A patent/JP6079337B2/en active Active
Also Published As
| Publication number | Publication date |
|---|---|
| JP2014182435A (en) | 2014-09-29 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US10402088B2 (en) | Method of operating a display unit and a terminal supporting the same | |
| EP2715499B1 (en) | Invisible control | |
| EP2752744B1 (en) | Arc menu index display method and relevant apparatus | |
| Gutwin et al. | Faster command selection on tablets with FastTap | |
| US9086741B2 (en) | User input device | |
| EP2360563A1 (en) | Prominent selection cues for icons | |
| JP2017050020A (en) | Wrist watch keyboard | |
| US20100241985A1 (en) | Providing Virtual Keyboard | |
| KR20150133688A (en) | Input device | |
| US20140354553A1 (en) | Automatically switching touch input modes | |
| US10387033B2 (en) | Size reduction and utilization of software keyboards | |
| KR20140117469A (en) | System for gaze interaction | |
| Uddin et al. | HandMark Menus: Rapid command selection and large command sets on multi-touch displays | |
| EP2595047B1 (en) | Method and apparatus for inputting character in touch device | |
| JP2010039558A (en) | Information processing apparatus and control method thereof | |
| JP2012141868A (en) | Information processing apparatus, information processing method, and computer program | |
| Rivu et al. | GazeButton: enhancing buttons with eye gaze interactions | |
| US11029824B2 (en) | Method and apparatus for moving input field | |
| CN103425430B (en) | The method and apparatus for supporting one-hand text input in the terminal | |
| JP6079337B2 (en) | Input device, input control method, and input control program | |
| CN107967091B (en) | Human-computer interaction method and computing equipment for human-computer interaction | |
| Uddin | Improving Multi-Touch Interactions Using Hands as Landmarks | |
| JP6232694B2 (en) | Information processing apparatus, control method thereof, and program | |
| JP4659047B2 (en) | Character input device and character input method in character input device | |
| JP5152639B2 (en) | Character input / function operation device, method, program, and portable terminal device |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20151106 |
|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20160817 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20160823 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20161020 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20161220 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20170102 |
|
| R150 | Certificate of patent or registration of utility model |
Ref document number: 6079337 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |