JP6291894B2 - Input device, input method, and program - Google Patents
Input device, input method, and program Download PDFInfo
- Publication number
- JP6291894B2 JP6291894B2 JP2014030501A JP2014030501A JP6291894B2 JP 6291894 B2 JP6291894 B2 JP 6291894B2 JP 2014030501 A JP2014030501 A JP 2014030501A JP 2014030501 A JP2014030501 A JP 2014030501A JP 6291894 B2 JP6291894 B2 JP 6291894B2
- Authority
- JP
- Japan
- Prior art keywords
- auxiliary icon
- priority
- extracted
- displayed
- content
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Landscapes
- Controls And Circuits For Display Device (AREA)
- User Interface Of Digital Computer (AREA)
Description
本発明は、タッチパネルを使用した端末の入力装置、入力方法及びそのプログラムに関する。 The present invention relates to an input device of a terminal using a touch panel, an input method, and a program thereof.
特許文献１は、タッチパネル入力補助装置を開示している。この装置では、平面形状のタッチパネルに脱着可能なボタン式入力シートを複数具備する。さらに、各ボタン式入力シートは、タッチパネルの感知領域に対応した凸状のボタンをそれぞれ有するため、操作者はタッチ操作時に、良好なクリック感を得ることができ、誤入力を防止することができる。
特許文献１には、タッチパネル上での操作において、タッチパネルに脱着可能なボタン式入力シートを具備することで良好なクリック感を得ることでき、誤入力を防止することができるといった記載はある。ユーザがタッチパネル上でタッチ操作する際には、タッチパネル上でスクロール可能な画面を表示している場合に、画面に表示されたwebサイトのアンカーリンクや、チェックボックス等のオブジェクトが小さい、又は密に隣接している場合に、意図しないオブジェクトをタッチし、誤入力が発生するといった課題がある。しかし、特許文献１記載の技術ではこの課題を解決することはできない。
そこで、本発明は上記課題を解決した入力装置、入力方法及びそのプログラムを提供することを目的とする。 Accordingly, an object of the present invention is to provide an input device, an input method, and a program for solving the above-described problems.
かかる目的を達成するため、本発明の入力装置は、入力対象となるオブジェクトを含むコンテンツを表示手段に表示するように制御するコンテンツ制御手段と、前記表示手段表示されているコンテンツからオブジェクトを抽出するオブジェクト抽出手段と、オブジェクトと、当該オブジェクトと同じ機能を有する補助アイコンを対応づけて記憶する記憶手段と、前記記憶手段から、前記抽出されたオブジェクトに対応する補助アイコンを読出し、前記オブジェクトとは別に表示する補助アイコン制御手段とを備える。 In order to achieve such an object, an input device according to the present invention extracts content from content displayed on the display means, content control means for controlling the display means to display content including the object to be input, and the display means. Object extraction means, storage means for associating and storing an auxiliary icon having the same function as the object, and reading the auxiliary icon corresponding to the extracted object from the storage means, separately from the object Auxiliary icon control means for displaying.
また、本発明は、入力対象となるオブジェクトを含むコンテンツを表示手段に表示するように制御し、前記表示手段表示されているコンテンツからオブジェクトを抽出するオブジェクト抽出し、オブジェクトと、当該オブジェクトと同じ機能を有する補助アイコンを対応づけて記憶し、前記記憶手段から、前記抽出されたオブジェクトに対応する補助アイコンを読出し、前記オブジェクトとは別に表示する入力方法を提供する。 In addition, the present invention controls the display unit to display content including the object to be input, extracts the object from the content displayed on the display unit, extracts the object, and the same function as the object And an auxiliary icon corresponding to the extracted object is read from the storage means and displayed separately from the object.
さらに、本発明は、入力対象となるオブジェクトを含むコンテンツを表示手段に表示するように制御するコンテンツ制御ステップと、前記表示手段表示されているコンテンツからオブジェクトを抽出するオブジェクト抽出ステップと、オブジェクトと、当該オブジェクトと同じ機能を有する補助アイコンを対応づけて記憶する記憶ステップと、前記記憶ステップから、前記抽出されたオブジェクトに対応する補助アイコンを読出し、前記オブジェクトとは別に表示する補助アイコン制御ステップと、をコンピュータに実行させる入力プログラムを提供する。 Further, the present invention provides a content control step for controlling the content including the object to be input to be displayed on the display means, an object extraction step for extracting the object from the content displayed on the display means, an object, A storage step of storing an auxiliary icon having the same function as the object, and an auxiliary icon control step of reading out an auxiliary icon corresponding to the extracted object from the storage step and displaying the auxiliary icon separately from the object; An input program for causing a computer to execute is executed.
本発明は、ユーザがタッチパネル上で入力操作する際に、誤入力を防止することができる。 The present invention can prevent erroneous input when a user performs an input operation on a touch panel.
＜第１の実施形態＞
以下、図面を参照して本発明に係る入力装置１００の実施形態を説明する。図１は、本実施形態に係る入力装置１００の構成を示す図である。本実施形態に係る入力装置１００は、コンテンツ制御部１０、オブジェクト抽出部２０、補助アイコン制御部３０、及び記憶部６０を包含する。また、コンテンツ制御部１０、及び補助アイコン制御部３０は、図示しない表示装置にそれぞれ接続されている。
<First Embodiment>
Hereinafter, an embodiment of an input device 100 according to the present invention will be described with reference to the drawings. FIG. 1 is a diagram illustrating a configuration of an input device 100 according to the present embodiment. The input device 100 according to the present embodiment includes a
表示装置は、例えば、タッチパネルである。入力装置１００は、携帯電話、スマートフォン、ＰＨＳ（Personal Handy-phone System）、ＰＤＡ（Personal Digital Assistant）、タブレット端末、及びＰＣ（Personal Computer）など一般的な端末が有する電話機能、無線ＬＡＮ（Local Area Network）通信機能などの他の機能を備える。入力装置１００には、ＯＳ（Operating System）が導入され、webブラウザをＯＳ上で動作するアプリケーションとして実行する。なお、本願発明における入力装置１００は、webページを取得する機能、webページのレンダリング情報から、webページ全体に対する、表示画面の位置情報を取得する機能などを備える。 The display device is, for example, a touch panel. The input device 100 includes a mobile phone, a smartphone, a PHS (Personal Handy-phone System), a PDA (Personal Digital Assistant), a tablet terminal, a telephone function that a general terminal such as a PC (Personal Computer) has, a wireless LAN (Local Area Network) Other functions such as communication functions are provided. An OS (Operating System) is installed in the input device 100, and a web browser is executed as an application operating on the OS. The input device 100 according to the present invention has a function of acquiring a web page, a function of acquiring position information of a display screen with respect to the entire web page from web page rendering information, and the like.
図３は、本実施形態に係る記憶部６０で記憶している情報を示す図である。本実施形態に係る記憶部６０は、予め各々のオブジェクト名、オブジェクト名に対応する処理を実行するためのアドレス情報、オブジェクトの開始位置と終了位置の座標情報と、それに対応する補助アイコンを記憶している。
FIG. 3 is a diagram illustrating information stored in the
また、本発明に係る入力装置１００を構成する各部は、論理回路等のハードウェアで構成される。また、各部は、コンピュータの制御部、記憶部、記憶部のロードされたプログラム、プログラムを格納するハードディスク等の記憶ユニット等からなり、ハードウェアとソフトウェアの任意の組合せによって実現されても良い。そして、断りのない限り、その実現方法、装置は限定されない。 Each unit constituting the input device 100 according to the present invention is configured by hardware such as a logic circuit. Each unit includes a control unit of a computer, a storage unit, a program loaded in the storage unit, a storage unit such as a hard disk for storing the program, and the like, and may be realized by any combination of hardware and software. As long as there is no notice, the realization method and apparatus are not limited.
図２は、本実施形態に係る入力装置１００の動作手順を示す図である。以下、図２を参照しながら、本実施形態に係る入力装置１００の動作手順を具体的に説明する。コンテンツ制御部１０は、表示装置にコンテンツを表示するように制御する。具体的には、ユーザが表示装置に表示されているオブジェクトをタッチすると、タッチされたオブジェクトに対応する処理を実行する。ここで、コンテンツとは、動画や静止画を含む画像、及びWebページ、Word文書等の文字等を含む。また、オブジェクトとは、表示装置に表示されたコンテンツに含まれる、webサイトのアンカーリンクや、チェックボックス等を指す。
FIG. 2 is a diagram illustrating an operation procedure of the input device 100 according to the present embodiment. Hereinafter, the operation procedure of the input apparatus 100 according to the present embodiment will be specifically described with reference to FIG. The
さらに、コンテンツ制御部１０は、ユーザのスクロール操作を認識し、表示装置に表示されているコンテンツの表示画面上での開始位置と終了位置の座標情報を取得し、オブジェクト抽出部２０へ座標情報を送信する（ステップＳ１）。
Further, the
図１５は、各点の座標情報を示す図である。具体的には、コンテンツ全体の開始位置の座標情報(0,0)、終了位置の座標情報(X1,Y1)と定義すると、表示装置に表示されているコンテンツの開始位置の座標情報は(X2,Y2)、終了位置の座標情報は(X3,Y3)と定義できる。同様に、オブジェクトの開始位置の座標情報は(X4,Y4)、終了位置の座標情報は(X5,X5)と定義できる。各点の座標情報を特定することで、表示装置に表示されているコンテンツ、及びオブジェクトの領域が特定できる。 FIG. 15 is a diagram showing coordinate information of each point. Specifically, if the coordinate information (0, 0) of the start position of the entire content and the coordinate information (X1, Y1) of the end position are defined, the coordinate information of the start position of the content displayed on the display device is (X2 , Y2), and the coordinate information of the end position can be defined as (X3, Y3). Similarly, the coordinate information of the start position of the object can be defined as (X4, Y4), and the coordinate information of the end position can be defined as (X5, X5). By specifying the coordinate information of each point, the content displayed on the display device and the area of the object can be specified.
オブジェクト抽出部２０は、コンテンツ制御部１０から、表示装置に表示されているコンテンツの座標情報を取得すると、表示装置に表示されているコンテンツの領域内に含まれるオブジェクトを抽出し、さらにその座標情報を抽出する。つまり、オブジェクト抽出部２０は、コンテンツの領域内に含まれるwebサイトのアンカーリンクや、チェックボックス等をオブジェクトとして、そのオブジェクトの開始位置と終了位置の座標情報を抽出する。表示されているコンテンツの領域内に含まれるオブジェクト、及びその座標情報の抽出は、既存技術を用いて行うものとする。
When the
オブジェクト抽出手段２０で抽出されたオブジェクトの座標情報は、補助アイコン制御部３０へ送信される（ステップＳ２）。 The coordinate information of the object extracted by the object extracting means 20 is transmitted to the auxiliary icon control unit 30 (step S2).
補助アイコン制御部３０では、オブジェクト抽出部２０で抽出されたオブジェクトの座標情報に対応する補助アイコンを特定し、該オブジェクトとは別の領域に表示する（ステップＳ３）。ここで、補助アイコンとは、各々のオブジェクトに付与され、この補助アイコンをタッチすることで、各々のオブジェクトに対応する処理を実行することができるアイコンである。
The auxiliary
具体的には、補助アイコン制御部３０は、オブジェクト抽出部２０から、オブジェクトの座標情報を取得すると、記憶部６０から該オブジェクトの座標情報に対応する補助アイコンを特定する。さらに、補助アイコン制御部３０は、特定した補助アイコンを、オブジェクトとは別の領域に補助アイコンを表示する（ステップＳ３）。
Specifically, when the auxiliary
図４は、本実施形態に係る入力装置１００の表示画面を示す図である。各々のオブジェクトには、対応する補助アイコンが吹き出し状に表示されている。さらに、この吹き出し状に表示された補助アイコンは１〜５まで、表示画面の下部にも配置されている。吹き出し状の補助アイコンをタッチすると、当該補助アイコンが収容する内容など当該補助アイコンの詳細情報が表示されてもよい。
FIG. 4 is a diagram showing a display screen of the input device 100 according to the present embodiment. Each object has a corresponding auxiliary icon displayed in a balloon shape. Further,
ユーザが、表示画面に表示された補助アイコンをタッチすると、コンテンツ制御部１０は、該補助アイコンに対応したオブジェクトの処理が実行される。さらに、表示画面の下部に横一列に表示されている補助アイコンの大きさ、各々の補助アイコンの配置間隔については、図４に示したものに限定されることはなく、本願発明のスコープ内で当業者が理解しうるような様々な変更をすることができる。
When the user touches an auxiliary icon displayed on the display screen, the
また、ユーザは、画面右下のアイコン「表示/非表示」アイコンをタッチすることで、補助アイコンの表示/非表示を設定することができる。なお、本実施形態において、表示装置に表示されている画面のタッチは、ユーザの指で行っても良いし、ペンなどを用いて画面のタッチを行ってもよい。 The user can set display / non-display of the auxiliary icon by touching the icon “display / non-display” icon at the lower right of the screen. In the present embodiment, the screen displayed on the display device may be touched with a user's finger, or the screen may be touched with a pen or the like.
以上、実施形態を参照して本願発明を説明してきたが、本願発明は、上記実施形態に限定されるものではない。本願発明の構成や詳細には、本願発明のスコープ内で当業者が理解しうるような様々な変更をすることができる。
＜第２の実施形態＞
図５は、第２の実施形態に係る入力装置１００の構成を示す図である。本実施形態に係る入力装置１００は、コンテンツ制御部１０、オブジェクト抽出部２０、補助アイコン制御部３０、優先度算出部４０、及び記憶部６０を包含する。また、コンテンツ制御部１０、補助アイコン制御部３０、及び優先度算出部４０は、記憶部６０にそれぞれ接続されている。また、コンテンツ制御部１０、及び補助ボタン制御部３０は図示しない表示装置に接続されている。
Although the present invention has been described with reference to the embodiments, the present invention is not limited to the above embodiments. Various changes that can be understood by those skilled in the art can be made to the configuration and details of the present invention within the scope of the present invention.
<Second Embodiment>
FIG. 5 is a diagram illustrating a configuration of the input device 100 according to the second embodiment. The input device 100 according to the present embodiment includes a
本実施形態における入力装置１００、及び表示装置は、前述の実施形態と同様であるため、ここでは説明を省略する。以下に優先度算出部４０について詳述する。優先度算出部４０は、コンテンツ領域内に含まれる各々のオブジェクトのスコア、及び優先度を算出する。ここで、優先度とは、どのオブジェクトに対応する補助アイコンを優先的に表示させるかの指標となる値である。つまり、オブジェクトの優先度の値が大きいほど、対応する補助アイコンを優先的に表示される。
Since the input device 100 and the display device in the present embodiment are the same as those in the above-described embodiment, description thereof is omitted here. The
図７は、本実施形態に係る記憶部６０で記憶している情報を示す図である。本実施形態に係る記憶部６０には、予め各々のオブジェクト名、オブジェクト名に対応する処理を実行するためのアドレス情報、オブジェクトの開始位置と終了位置の座標情報と、オブジェクトの長さ、スコア、優先度、及びオブジェクトに対応する補助アイコンが記憶されている。さらに、記憶装置には、ユーザの指が表示装置にタッチした際に検出されたユーザの指の接触開始位置と終了位置を示す座標情報、及びタッチしている指の長さを記憶している。
FIG. 7 is a diagram illustrating information stored in the
ここで、ユーザの指の接触開始位置と終了位置を示す座標情報は、投影型静電容量方式や表面型静電容量方式などを用いることで行っても良い。つまり、タッチパネルに備わったタッチセンサが、ユーザの指が近付くと、指とセンサ間の静電容量の変化、または周辺の電極パターンから電流の変化を検出することで、ユーザの指の座標情報を取得する。 Here, the coordinate information indicating the contact start position and the end position of the user's finger may be obtained by using a projection type capacitance method, a surface type capacitance method, or the like. In other words, when the touch sensor provided on the touch panel approaches the finger of the user, the coordinate information of the user's finger is obtained by detecting the change in capacitance between the finger and the sensor or the change in current from the surrounding electrode pattern. get.
オブジェクトの長さは、オブジェクトの開始位置と終了位置の座標情報を用いて算出される。具体的には、オブジェクトの開始位置のＸ座標と、終了位置のＸ座標の差分をとることでオブジェクトのＸ軸方向の長さを算出する。なお、Ｙ軸方向の長さも、同様の方法により算出してもよい。 The length of the object is calculated using coordinate information of the start position and end position of the object. Specifically, the length of the object in the X-axis direction is calculated by taking the difference between the X coordinate of the start position of the object and the X coordinate of the end position. The length in the Y-axis direction may be calculated by a similar method.
図６を用いて本実施形態に係る入力装置１００の動作手順を説明する。最初に、コンテンツ制御部１０が、表示装置に表示されているコンテンツの座標情報を取得し、オブジェクト抽出部２０に送信する（ステップＳ１）。
The operation procedure of the input device 100 according to this embodiment will be described with reference to FIG. First, the
オブジェクト抽出部２０は、コンテンツ制御部１０からコンテンツの座標情報を取得すると、コンテンツの領域内に含まれるオブジェクトを抽出し、抽出したオブジェクトの開始位置と終了位置の座標情報を優先度算出部４０へ送信する（ステップＳ２）。
When the
優先度算出部４０は、記憶部６０を参照し、オブジェクトの座標情報に対応するオブジェクトの長さと、ユーザの指の長さを抽出すると、所定の評価式に代入し、オブジェクトのスコアを算出し、記憶装置に記憶する（ステップＳ３）。
The
優先度算出部４０は、記憶部６０からユーザの指のＸ軸方向、及びＹ軸方向の長さ（Ｘ’,Ｙ’）、及びオブジェクトのＸ軸方向、及びＹ軸方向の長さ（Ｘ,Ｙ）を取得し、各々の座標情報を下記の評価式（１）を用いてスコアを算出する。
(X’- X)2+(Y’- Y)2 ・・・評価式（１）
The
(X'- X) 2 + (Y'- Y) 2 ... Evaluation formula (1)
評価式（１）は、ユーザの指のＸ軸方向の長さ(X’)からオブジェクトのＸ軸方向の長さ(X)を減じた値の２乗値と、ユーザの指のＹ軸方向の長さ(Y’)からオブジェクトのＹ軸方向の長さ (Y)を減じたものの２乗値とを加えた算出した値をスコアとし、これを評価したものである。 Evaluation formula (1) is the square value of the value obtained by subtracting the length (X) of the object in the X-axis direction from the length (X ′) of the user's finger in the X-axis direction, and the Y-axis direction of the user's finger. The calculated value obtained by adding the square value of the length (Y ′) of the object minus the length (Y) of the object in the Y-axis direction is used as a score, and this is evaluated.
この評価式では、(X’- X)、及び(Y’- Y)が０以下の値となった場合、０として評価する。(X’- X)、及び(Y’- Y) の値が大きいほど、これらを２乗して加えた値も大きくなるため、算出されたスコアも大きくなる。 In this evaluation formula, when (X′−X) and (Y′−Y) are 0 or less, they are evaluated as 0. As the values of (X′−X) and (Y′−Y) are larger, the value obtained by adding them to the square is also larger, so that the calculated score is larger.
スコアが大きいということは、ユーザの指が、オブジェクトに比べ大きく、ユーザにとって、タッチミスの可能性の高いオブジェクトであるといえる。そのため、補助アイコンとして表示するための優先度を高く設定する。オブジェクトの優先度は、スコアの大小で決まる。例えば、オブジェクトが複数ある場合には各々のスコアの大小を比較することで決定された優先度の高いオブジェクトの補助アイコンを優先的に表示させるようにしてもよい。 A high score means that the user's finger is larger than the object, and the user has a high possibility of touch error. Therefore, the priority for displaying as an auxiliary icon is set high. The priority of an object is determined by the magnitude of the score. For example, when there are a plurality of objects, auxiliary icons of objects having a high priority determined by comparing the respective scores may be preferentially displayed.
なお、優先度算出部４０で算出した各オブジェクトの優先度は、補助アイコン制御部３０に送信される。また、オブジェクトの優先度はオブジェクト名に対応づけて記憶部６０に記憶される（ステップＳ３）。
The priority of each object calculated by the
補助アイコン制御部３０は、優先度算出部４０から、オブジェクト名とその優先度を受信すると、優先度の高い順から該オブジェクト名に対応する補助アイコンを記憶部６０から読み出し、表示装置に表示する（ステップＳ４）。
When the auxiliary
本実施形態において、優先度を決定するスコアの算出には評価式（１）を用いたが、これ限られることなく、例えば、オブジェクトとユーザの指の面積同士の比較を行い優先度を決定しても良い。 In this embodiment, the evaluation formula (1) is used to calculate the score for determining the priority. However, without limitation, for example, the priority is determined by comparing the areas of the object and the user's finger. May be.
なお、本実施形態において、表示装置に表示されている画面のタッチは、ユーザの指で行っても良いし、ペンなどを用いて画面のタッチを行ってもよい。 In the present embodiment, the screen displayed on the display device may be touched with a user's finger, or the screen may be touched with a pen or the like.
以上、実施形態を参照して本願発明を説明してきたが、本願発明は、上記実施形態に限定されるものではない。本願発明の構成や詳細には、本願発明のスコープ内で当業者が理解しうるような様々な変更をすることができる。
＜第３の実施形態＞
図８は、本実施形態に係る入力装置１００の構成を示す図である。本実施形態に係る入力装置１００は、コンテンツ制御部１０、オブジェクト抽出部２０、補助アイコン制御部３０、受付部５０、及び記憶部６０を包含する。また、コンテンツ制御部１０、補助アイコン制御部３０、及び受付部５０は、図示しない表示装置に接続されている。
Although the present invention has been described with reference to the embodiments, the present invention is not limited to the above embodiments. Various changes that can be understood by those skilled in the art can be made to the configuration and details of the present invention within the scope of the present invention.
<Third Embodiment>
FIG. 8 is a diagram illustrating a configuration of the input device 100 according to the present embodiment. The input device 100 according to the present embodiment includes a
本実施形態に係る記憶部６０は、前述の実施形態１と同様に、予め各々のオブジェクト名、オブジェクト名に対応する処理を実行するためのアドレス情報、オブジェクトの開始位置と終了位置の座標情報と、それに対応する補助アイコンを記憶している。さらに、本実施形態に係る記憶部６０には、補助対象を示す領域のテンプレートが予め格納されている。補助対象となる領域とは、補助アイコンを表示したいオブジェクトを含んだ領域のことであり、ユーザによって任意に選択可能である。
Similar to the first embodiment, the
補助対象のテンプレートを図１０乃至図１２に示す。図１０は、表示画面のwebブラウザの高さを３分割し、上領域、中央領域、下領域の３つの範囲から選択できるようにしたテンプレートである。ユーザは、「上中下」と示された領域選択ボタンをタッチすることで、上中下の領域選択が可能である。また、ユーザは、選択終了ボタンをタッチすることで、領域選択を終了することができる。 A template to be supported is shown in FIGS. FIG. 10 shows a template in which the height of the web browser on the display screen is divided into three parts, and can be selected from three ranges: an upper region, a central region, and a lower region. The user can select the upper, middle, and lower areas by touching the area selection buttons indicated as “upper, middle, and lower”. Further, the user can end the region selection by touching the selection end button.
図１１は、ＨＴＭＬ（Hyper Text Markup Language）の論理的な領域の区切りである＜ＤＩＶ＞で区切られた領域を有するテンプレートである。ユーザは、「１２３」と示された領域選択ボタンをタッチすることで、上中下の領域選択が可能である。また、ユーザは、選択終了ボタンをタッチすることで、対応する領域選択を終了することができる。 FIG. 11 shows a template having an area delimited by <DIV>, which is a logical area delimiter of HTML (Hyper Text Markup Language). The user can select the upper, lower, and lower areas by touching an area selection button labeled “123”. Further, the user can end the corresponding area selection by touching the selection end button.
図１２は、上記２つのテンプレートを合わせたテンプレートである。ユーザは、「上中下」、「１２３」と示された領域選択ボタンをタッチすることで、上中下の領域選択が可能である。また、ユーザは、選択終了ボタンをタッチすることで、対応する領域選択を終了することができる。 FIG. 12 is a template obtained by combining the above two templates. The user can select the upper, middle, and lower areas by touching the area selection buttons indicated as “upper, middle, lower” and “123”. Further, the user can end the corresponding area selection by touching the selection end button.
図９は、本実施形態の入力装置１００の動作手順を示す図である。最初に、コンテンツ制御部１０は、表示装置に表示されているコンテンツのタッチパネル上での開始位置と終了位置の座標情報をオブジェクト抽出部２０へ送信する（ステップＳ１）。
FIG. 9 is a diagram illustrating an operation procedure of the input device 100 according to the present embodiment. First, the
次に、ユーザは、表示装置に表示されているコンテンツの中から、補助アイコンを表示させたいオブジェクトを含む領域を選択し、当該領域の情報を受付部５０に送信する。受付部５０は、ユーザから受付けた領域の情報をオブジェクト抽出部２０へ送信する（ステップＳ２）。ユーザが領域を選択する方法としては、入力装置１００に実装されている機能である領域選択モードにより、ユーザが記憶部６０を参照し、補助対象を示すテンプレートの中から選択しても良い。また、ユーザが補助アイコンを表示させたいオブジェクトの付近をタッチすると、当該オブジェクトを含むようにある一定領域が特定され、ユーザが選択できるようにしても良い。
Next, the user selects an area including an object for which an auxiliary icon is to be displayed from the content displayed on the display device, and transmits information on the area to the
オブジェクト抽出部２０は、ユーザが選択した領域に含まれるオブジェクトを抽出し、抽出したオブジェクトの座標情報を補助アイコン制御部３０へ送信する（ステップＳ３）。具体的には、オブジェクト抽出部２０は、コンテンツの領域内に含まれるwebサイトのアンカーリンクや、チェックボックス等をオブジェクトとしてその座標情報を抽出する。なお、オブジェクト、及びその座標情報の抽出は、既存の技術を用いて行う。
The
さらに、オブジェクト抽出手段２０で抽出したオブジェクトの座標情報は、補助アイコン制御部３０へ送信される。
Further, the coordinate information of the object extracted by the
補助アイコン制御部３０は、記憶部６０を参照し、オブジェクト抽出部２０で抽出されたオブジェクトの座標情報に対応する補助アイコンを特定し、当該補助アイコンを当該オブジェクトとは別の領域に表示する（ステップＳ４）。ユーザが、各々のオブジェクトに対応する補助アイコンをタッチすると、コンテンツ制御部１０は、ユーザがタッチした補助アイコンに対応する処理を行う。
The auxiliary
なお、本実施形態において、表示装置に表示されている画面のタッチは、ユーザの指で行っても良いし、ペンなどを用いて画面のタッチを行ってもよい。 In the present embodiment, the screen displayed on the display device may be touched with a user's finger, or the screen may be touched with a pen or the like.
以上、実施形態を参照して本願発明を説明してきたが、本願発明は、上記実施形態に限定されるものではない。本願発明の構成や詳細には、本願発明のスコープ内で当業者が理解しうるような様々な変更をすることができる。
＜第４の実施形態＞
図１３は、本実施形態に係る入力装置１００の構成を示す図である。本実施形態に係る入力装置１００は、コンテンツ制御部１０、オブジェクト抽出部２０、補助アイコン制御部３０、優先度算出部４０、受付部５０、及び記憶部６０を包含する。また、コンテンツ制御部１０、補助アイコン制御部３０、及び受付部５０は、図示しない表示装置に接続されている。また、コンテンツ制御部１０、補助アイコン制御部３０、及び受付部５０は、図示しない表示装置に接続されている。
Although the present invention has been described with reference to the embodiments, the present invention is not limited to the above embodiments. Various changes that can be understood by those skilled in the art can be made to the configuration and details of the present invention within the scope of the present invention.
<Fourth Embodiment>
FIG. 13 is a diagram illustrating a configuration of the input device 100 according to the present embodiment. The input device 100 according to the present embodiment includes a
本実施形態に係る記憶部６０には、予め各々のオブジェクト名、オブジェクト名に対応する処理を実行するためのアドレス情報、オブジェクトの開始位置と終了位置の座標情報と、オブジェクトの長さ、スコア、優先度、及びオブジェクトに対応する補助アイコンが記憶されている。さらに、記憶装置には、ユーザの指が表示装置にタッチした際に検出されたユーザの指の接触開始位置と終了位置を示す座標情報、及びタッチしている指の長さを記憶している。さらに、本実施形態に係る記憶部６０には、補助対象を示す領域のテンプレートが予め格納されている。補助対象となる領域とは、補助アイコンを表示したいオブジェクトを含んだ領域のことであり、ユーザによって任意に選択可能である。本実施形態に係る入力装置１００の各構成の説明は、前述した実施形態と同様のため、ここでは省略する。
In the
図１４は、本実施形態に係る入力装置１００の動作手順を示す図である。コンテンツ制御部１０は、表示装置に表示されているコンテンツの座標情報を取得し、オブジェクト抽出部２０へ送信する（ステップＳ１）。
FIG. 14 is a diagram illustrating an operation procedure of the input device 100 according to the present embodiment. The
次に、ユーザは、表示装置に表示されているコンテンツの中から、補助アイコンを表示させたいオブジェクトを含む領域を選択し、当該領域の情報を受付部５０に送信する。受付部５０は、ユーザから受付けた領域の情報をオブジェクト抽出部２０へ送信する（ステップＳ２）。ユーザが領域を選択する方法としては、入力装置１００に実装されている機能である領域選択モードにより、ユーザが記憶部６０を参照し、補助対象を示すテンプレートの中から選択しても良い。また、ユーザが補助アイコンを表示させたいオブジェクトの付近をタッチすると、当該オブジェクトを含むようにある一定領域が特定され、ユーザが選択できるようにしても良い。
Next, the user selects an area including an object for which an auxiliary icon is to be displayed from the content displayed on the display device, and transmits information on the area to the
オブジェクト抽出部２０は、ユーザが選択した領域に含まれるオブジェクトを抽出し、抽出したオブジェクトの座標情報を優先度算出部４０へ送信する（ステップＳ３）。
The
優先度算出部４０は、オブジェクトの座標情報に対応するオブジェクトの長さと、ユーザの指のＸ軸方向、及びＹ軸方向の長さを所定の評価式に代入し、オブジェクトのスコアを算出し、当該スコアから当該オブジェクトの優先度を決定する。オブジェクトのスコア算出については、前述した実施形態と同様のため、ここでは説明を省略する。優先度算出部４０は、算出したオブジェクト優先度を補助アイコン制御部３０へ送信する。さらに、優先度算出部４０は、オブジェクトのスコア、及び優先度を記憶部６０に記憶する（ステップＳ４）。
The
補助アイコン制御部３０は、優先度算出部４０から受信したオブジェクトの優先度に対応する補助アイコンを記憶部６０から読み出し、当該オブジェクトとは別の領域に表示する（ステップＳ５）。
The auxiliary
なお、本実施形態において、表示装置に表示されている画面のタッチは、ユーザの指で行っても良いし、ペンなどを用いて画面のタッチを行ってもよい。 In the present embodiment, the screen displayed on the display device may be touched with a user's finger, or the screen may be touched with a pen or the like.
以上、実施形態を参照して本願発明を説明してきたが、本願発明は、上記実施形態に限定されるものではない。本願発明の構成や詳細には、本願発明のスコープ内で当業者が理解しうるような様々な変更をすることができる。 Although the present invention has been described with reference to the embodiments, the present invention is not limited to the above embodiments. Various changes that can be understood by those skilled in the art can be made to the configuration and details of the present invention within the scope of the present invention.
１０ コンテンツ制御部
２０ オブジェクト抽出部
３０ 補助アイコン制御部
４０ 優先度算出部
５０ 受付部
６０ 記憶部
１００ 入力装置
DESCRIPTION OF
Claims (6)
前記表示手段に表示されているコンテンツからオブジェクトを抽出するオブジェクト抽出手段と、
オブジェクトと、当該オブジェクトと同じ機能を有する補助アイコンを対応づけて記憶する記憶手段と、
前記記憶手段から、前記抽出されたオブジェクトに対応する補助アイコンを読出し、前記オブジェクトとは別に表示する補助アイコン制御手段と、
前記表示手段の第１の方向及び前記第１の方向と交わる第２の方向の各々についてのタッチされた領域の長さと前記抽出されたオブジェクトの長さとの差に基づいて、前記タッチされた領域に対して相対的に小さい前記抽出されたオブジェクトに対してより高い優先度が設定されるように、前記抽出されたオブジェクトの優先度を算出する優先度算出手段とを備え、
前記補助アイコン制御手段は、前記優先度に基づいて前記抽出されたオブジェクトに対応する補助アイコンを前記オブジェクトとは別に表示する、
入力装置。 Content control means for controlling the content including the object to be input to be displayed on the display means;
And object extracting means for extracting an object from the content being displayed on said display means,
Storage means for associating and storing an object and an auxiliary icon having the same function as the object;
Auxiliary icon control means for reading an auxiliary icon corresponding to the extracted object from the storage means and displaying it separately from the object ;
The touched area based on the difference between the length of the touched area and the length of the extracted object in each of the first direction of the display means and the second direction intersecting the first direction Priority calculating means for calculating the priority of the extracted object so that a higher priority is set for the extracted object that is relatively smaller than
The auxiliary icon control means displays an auxiliary icon corresponding to the extracted object based on the priority separately from the object.
Input device.
請求項１記載の入力装置。 The object extracting means extracts an object included in an area selected by a user;
The input device according to claim 1 .
前記表示手段に表示されているコンテンツからオブジェクトを抽出するオブジェクト抽出し、
オブジェクトと、当該オブジェクトと同じ機能を有する補助アイコンを対応づけて記憶し、
前記記憶手段から、前記抽出されたオブジェクトに対応する補助アイコンを読出し、前記オブジェクトとは別に表示し、
前記表示手段の第１の方向及び前記第１の方向と交わる第２の方向の各々についてのタッチされた領域の長さと前記抽出されたオブジェクトの長さとの差に基づいて、前記タッチされた領域に対して相対的に小さい前記抽出されたオブジェクトに対してより高い優先度が設定されるように、前記抽出されたオブジェクトの優先度を算出し、
前記優先度に基づいて前記抽出されたオブジェクトに対応する補助アイコンを前記オブジェクトとは別に表示する、
入力方法。 Control to display the content including the object to be input on the display means,
Objects from the content being displayed object extraction extracts on the display means,
An object is stored in association with an auxiliary icon having the same function as the object,
Read the auxiliary icon corresponding to the extracted object from the storage means, display separately from the object ,
The touched area based on the difference between the length of the touched area and the length of the extracted object in each of the first direction of the display means and the second direction intersecting the first direction The priority of the extracted object is calculated such that a higher priority is set for the extracted object that is relatively smaller than
An auxiliary icon corresponding to the extracted object based on the priority is displayed separately from the object;
input method.
前記表示手段に表示されているコンテンツからオブジェクトを抽出するオブジェクト抽出ステップと、
オブジェクトと、当該オブジェクトと同じ機能を有する補助アイコンを対応づけて記憶する記憶ステップと、
前記記憶ステップから、前記抽出されたオブジェクトに対応する補助アイコンを読出し、前記オブジェクトとは別に表示する補助アイコン制御ステップと、
前記表示手段の第１の方向及び前記第１の方向と交わる第２の方向の各々についてのタッチされた領域の長さと前記抽出されたオブジェクトの長さとの差に基づいて、前記タッチされた領域に対して相対的に小さい前記抽出されたオブジェクトに対してより高い優先度が設定されるように、前記抽出されたオブジェクトの優先度を算出する優先度算出ステップと、をコンピュータに実行させ、
前記補助アイコン制御ステップでは、前記優先度に基づいて前記抽出されたオブジェクトに対応する補助アイコンを前記オブジェクトとは別に表示する、
プログラム。 A content control step for controlling the content including the object to be input to be displayed on the display means;
An object extraction step of extracting an object from the content being displayed on said display means,
A storage step of storing an object and an auxiliary icon having the same function as the object in association with each other;
An auxiliary icon control step of reading out an auxiliary icon corresponding to the extracted object from the storing step and displaying the auxiliary icon separately from the object ;
The touched area based on the difference between the length of the touched area and the length of the extracted object in each of the first direction of the display means and the second direction intersecting the first direction A priority calculation step of calculating a priority of the extracted object so that a higher priority is set for the extracted object relatively smaller than
In the auxiliary icon control step, an auxiliary icon corresponding to the extracted object based on the priority is displayed separately from the object.
program.
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2014030501A JP6291894B2 (en) | 2014-02-20 | 2014-02-20 | Input device, input method, and program |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2014030501A JP6291894B2 (en) | 2014-02-20 | 2014-02-20 | Input device, input method, and program |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2015156087A JP2015156087A (en) | 2015-08-27 |
| JP6291894B2 true JP6291894B2 (en) | 2018-03-14 |
Family
ID=54775371
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2014030501A Active JP6291894B2 (en) | 2014-02-20 | 2014-02-20 | Input device, input method, and program |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP6291894B2 (en) |
Families Citing this family (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP6910410B2 (en) * | 2017-03-06 | 2021-07-28 | 京セラ株式会社 | Electronics, control methods, and control programs |
| JP6612799B2 (en) * | 2017-03-06 | 2019-11-27 | 京セラ株式会社 | Electronic device, control method, and control program |
| CN113168279A (en) | 2018-11-29 | 2021-07-23 | 麦克赛尔株式会社 | Image display device and method |
Family Cites Families (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US6643824B1 (en) * | 1999-01-15 | 2003-11-04 | International Business Machines Corporation | Touch screen region assist for hypertext links |
| KR20100040844A (en) * | 2007-07-11 | 2010-04-21 | 가부시키가이샤 아쿠세스 | Portable information terminal |
| JP2010160564A (en) * | 2009-01-06 | 2010-07-22 | Toshiba Corp | Portable terminal |
| JP5431911B2 (en) * | 2009-12-24 | 2014-03-05 | 三星電子株式会社 | Content display device |
-
2014
- 2014-02-20 JP JP2014030501A patent/JP6291894B2/en active Active
Also Published As
| Publication number | Publication date |
|---|---|
| JP2015156087A (en) | 2015-08-27 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP6132644B2 (en) | Information processing apparatus, display control method, computer program, and storage medium | |
| JP6381032B2 (en) | Electronic device, control method thereof, and program | |
| US10048726B2 (en) | Display control apparatus, control method therefor, and storage medium storing control program therefor | |
| WO2012086133A1 (en) | Touch panel device | |
| JP6291894B2 (en) | Input device, input method, and program | |
| JP5782420B2 (en) | User interface device, user interface method and program | |
| JP6411067B2 (en) | Information processing apparatus and input method | |
| JP2012174247A (en) | Mobile electronic device, contact operation control method, and contact operation control program | |
| JP2021182405A (en) | Electronic apparatus and content display program | |
| JP6569598B2 (en) | Display device and display control program | |
| US10303346B2 (en) | Information processing apparatus, non-transitory computer readable storage medium, and information display method | |
| US20140157118A1 (en) | Information processing apparatuses, non-transitory computer readable medium, and information processing method | |
| JP2015001902A (en) | Electronic apparatus | |
| JP2014195202A (en) | Symbol inputting device and program | |
| US9690464B2 (en) | Terminal device and method for selecting object | |
| KR20120081422A (en) | Terminal having touch screen and method for inputting letter according to touch event thereof | |
| JP2003280803A (en) | Information processor | |
| JP6317809B2 (en) | Character input device and character input method | |
| JP2017219588A (en) | Display device and display control program | |
| JP2018170048A (en) | Information processing apparatus, input method, and program | |
| JP6844699B2 (en) | Display device and display method of display device | |
| JP2013033553A (en) | Character data input device | |
| JP2013073366A (en) | Information processing device | |
| JP2014165884A (en) | Character entry unit, character entry method, control program, and recording media | |
| KR101345847B1 (en) | Method of providing mobile graphic user interface |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20170116 |
|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20171026 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20171107 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20171226 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20180116 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20180129 |
|
| R150 | Certificate of patent or registration of utility model |
Ref document number: 6291894 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |