WO2015093005A1 - Display system - Google Patents

Display system Download PDF

Info

Publication number
WO2015093005A1
WO2015093005A1 PCT/JP2014/006126 JP2014006126W WO2015093005A1 WO 2015093005 A1 WO2015093005 A1 WO 2015093005A1 JP 2014006126 W JP2014006126 W JP 2014006126W WO 2015093005 A1 WO2015093005 A1 WO 2015093005A1
Authority
WO
WIPO (PCT)
Prior art keywords
input device
hand
display device
display
contact
Prior art date
Application number
PCT/JP2014/006126
Other languages
French (fr)
Japanese (ja)
Inventor
田中 剛
祥 園田
仁和 下中
Original Assignee
パナソニックIpマネジメント株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by パナソニックIpマネジメント株式会社 filed Critical パナソニックIpマネジメント株式会社
Publication of WO2015093005A1 publication Critical patent/WO2015093005A1/en

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04883Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text

Definitions

  • the present invention relates to an input device such as a touch pad and a display system including a display device.
  • a notebook personal computer As a device having an input device and a display device, for example, a notebook personal computer is known.
  • a notebook personal computer when an operator's finger contacts the input device, the display device shows a cursor at the position of the display device corresponding to the contact position (for example, Patent Document 1).
  • the display system includes an input device that detects contact, and a display device that is connected to the input device and has data for displaying a hand-shaped cursor.
  • the display device displays a hand-shaped cursor. Since the display system displays a hand-shaped cursor on the display device, the operator can operate more intuitively.
  • FIG. 1 is an overall view of a display system according to an embodiment.
  • FIG. 2 is an overall view when a finger is in contact with the input device in FIG.
  • FIG. 3 is an overall view when the input is confirmed for the display system.
  • FIG. 4 is an overall view when the finger is in contact with the input device when the display device of the display system displays the keyboard screen.
  • FIG. 5 is a diagram when the display device of the input device of the display system displays an audio screen.
  • 6 is a diagram of the display device when a finger is in contact with the input device in FIG.
  • FIG. 7 is a diagram when the display device of the display system displays a handwriting input screen.
  • FIG. 8 is a diagram of the display device when a finger is in proximity to the input device in FIG. FIG.
  • FIG. 9 is a screen transition diagram of the display device of the display system.
  • FIG. 10 is a flowchart for determining from the left or right side of the input device of the display system.
  • FIG. 11 is an explanatory diagram when determining from the left or right side of the input device of the display system.
  • FIG. 1 is an overall view of a display system according to an embodiment.
  • the display system 10 includes an input device 20 and a display device 30.
  • the display system 10 further includes a cable 40.
  • the input device 20 includes a touch pad 21, a home switch 22, a return switch 23, and a housing 24.
  • the touch pad 21 is a sensor that measures capacitance, for example. When the operator's finger touches the touch pad 21, the touch pad 21 detects a change in capacitance and detects that it has touched itself. The touch pad 21 further detects where the touch pad 21 is touched. When the operator's finger approaches the touch pad 21, that is, when the operator's finger approaches the touch pad 21, the touch pad 21 detects a change in electrostatic capacitance and detects that there is an object close to itself. In addition, it detects where its position is close. The touch pad 21 detects a difference between contact and proximity based on a difference in capacitance.
  • the home switch 22 is a switch for switching the image displayed on the display device 30 to the main menu 31.
  • the display device 30 displays the main menu 31.
  • the return switch 23 is a switch that returns the input to the input device 20 to the previous state.
  • the housing 24 holds a touch pad 21, a home switch 22, and a return switch 23.
  • the display device 30 is electrically connected to the input device 20 by the cable 40.
  • the display device 30 is a liquid crystal display, a plasma display, an organic electroluminescence display, or the like.
  • the display device 30 displays not only the main menu 31 but also a keyboard screen 32, an audio screen 33, a handwriting input screen 34, and the like which will be described later.
  • the main menu 31 includes a selection menu for calling a keyboard screen 32, an audio screen 33, a handwriting input screen 34, and the like.
  • the display device 30 displays a main menu 31.
  • the main menu 31 is a screen on which a keyboard icon 31A, an audio icon 31B, a navigation icon 31C, a handwriting input icon 31D, a test icon 31E, and a game icon 31F are displayed.
  • FIG. 2 is an overall view when the finger of the left hand 51 is in contact with the input device 20 in FIG. An index finger that is a part of the left hand 51 contacts the touch pad 21, and at this time, the display device 30 displays a left hand cursor 35.
  • the left hand cursor 35 has a transparent fingertip and the entire left hand other than the fingertip is translucent.
  • the left hand cursor 35 overlaps the main menu 31, but at least the portion where the left hand cursor 35 overlaps the keyboard icon 31 ⁇ / b> A that is the selection menu is transparent, so the left hand cursor 35 does not hide the keyboard icon 31 ⁇ / b> A.
  • the display device 30 has data for displaying the left hand cursor 35.
  • the left hand 51 is in contact with the keyboard icon 31A of the main menu 31. That is, the display system 10 recognizes that the keyboard icon 31A is selected. At this time, the display device 30 reverses the brightness of the keyboard icon 31A to convey the icon selected by the operator in an easy-to-understand manner.
  • FIG. 3 is an overall view when the input is confirmed for the display system 10.
  • the display system 10 confirms the selection of the icon that has been displayed. That is, the display system 10 confirms the selection of the keyboard icon 31A.
  • the display device 30 displays the keyboard screen 32 of FIG.
  • FIG. 4 is an overall view when the finger of the left hand 51 is in contact with the input device when the display device 30 of the display system 10 displays the keyboard screen 32. Since the left hand 51 is in contact with the touch pad 21 of the input device 20, the display device 30 displays the left hand cursor 35. At this time, the left hand cursor 35 is transparent at the fingertip and the entire left hand other than the fingertip is translucent, as in FIG. In the state of FIG. 4, the character “A” on the keyboard screen 32 is selected. When the left hand 51 is spoken from this state, the display system 10 determines the selection of the character “A” on the keyboard screen 32.
  • FIG. 5 is a diagram when the display device 30 of the display system 10 displays the audio screen 33.
  • the display device 30 displays the audio screen 33.
  • FIG. 6 is a diagram of the display device 30 when the finger of the right hand is in contact with the input device 20 in FIG.
  • the display device 30 displays the right hand cursor 36.
  • the right hand cursor 36 is transparent with the fingertips, and the entire right hand other than the fingertips is translucent.
  • the display device 30 has data for displaying the right hand cursor 36.
  • FIG. 7 is a diagram when the display device 30 of the display system 10 displays the handwriting input screen 34.
  • the display device 30 displays a handwriting input screen 34.
  • FIG. 8 is a diagram of the display device 30 when a finger is in proximity to the input device 20 in FIG.
  • the handwriting input screen 34 in FIG. 8 is a screen for direct handwriting input with a finger instead of input using a keyboard or icons.
  • the display device 30 displays a pencil cursor 37 when a finger approaches the touch pad 21.
  • FIG. 9 is a screen transition diagram of the display device 30 of the display system 10.
  • the main menu 31 transits to a keyboard screen 32, an audio screen 33, a handwriting input screen 34, and the like. From the keyboard screen 32, the audio screen 33, the handwriting input screen 34, etc., a transition is made to the main menu 31.
  • FIG. 10 is a flowchart for determining which side of the input device 20 of the display system 10 is in contact from the left or right side.
  • FIG. 11 is an explanatory diagram when determining from the left or right side of the input device 20 of the display system 10.
  • the touch pad 21 determines that there is a hover state if a part of the object is in the hover state.
  • the display device 30 does not display the hand icon (S400).
  • the touch pad 21 detects the position of the object in the hover state, that is, the hover coordinates (S120).
  • the touch pad 21 detects the presence or absence of contact with itself (S130). When there is no contact, the display device 30 does not display the hand cursor (S400). When there is contact, the touch pad 21 detects the position of contact with itself, that is, touch coordinates (S140).
  • the display system 10 calculates the angle of the line connecting the touch coordinates to the hover coordinates (S150). As shown in FIG. 11, the reference line when calculating the angle is the positive direction of the X axis of the XY coordinates set on the same plane as the touch pad 21.
  • the display system 10 determines whether this angle is within a predetermined angle range (S160). When it is within the predetermined angle range, the display system 10 determines that it is in contact from the right side (S200), and the display device 30 displays the left hand cursor 35 (S210). When this angle is outside the predetermined angle range determined in advance, the display system 10 determines that contact is made from the left side (S300), and the display device 30 displays the right hand cursor 36 (S310).
  • the touch pad 21 is touched from the right side of the input device 20. Judge that there is. In the present embodiment, when there is a contact from the right side, the display system 10 considers the contact by the left hand 51 and the display device 30 displays the left hand cursor 35.
  • the display system 10 regards the contact with the right hand 52 and the display device 30 displays the right hand cursor 36.
  • the input device 20 is disposed between the right seat and the left seat such as a driver seat and a passenger seat of an automobile, for example. Therefore, the contact from the right side is determined as the contact by the left hand of the person in the right seat, and the contact from the left side is determined as the contact by the right hand of the person in the left seat.
  • the position of the input device 20 and the assumption of whether the contact is from the left or right hand when there is contact from the right side and the contact from the left or right hand when there is contact from the left side It is set in advance in consideration of the usage method.
  • the angle of the line connecting from the touch coordinates to the hover coordinates is 90 degrees and 270 degrees, it may be set in advance that the operation is considered to be performed from either the left side or the right side.
  • the display system 10 displays a hand-shaped cursor on the display device 30 when the input device 20 is touched, the operator can operate intuitively. Furthermore, since the display system 10 detects which side of the input device 20 is touched from left and right, and the display device 30 displays a hand-shaped cursor on the side operated by the operator, the operator can Intuitive operation.
  • the display system displays a hand-shaped cursor on the display device when there is an input on the input device, so that the operation of the operator is intuitive and useful as a display system.

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Position Input By Displaying (AREA)

Abstract

A display system is provided with an input device for detecting touch and a display device connected to the input device, the display device having data for displaying a hand-shaped cursor. When the input device detects touch to the input device, the display device displays the hand-shaped cursor. The display system allows an operator to operate intuitively because, when the operator touches the input device in order to provide input to the input device, the display device displays the hand-shaped cursor.

Description

表示システムDisplay system
 本発明は、タッチパッドのような入力装置と、表示装置を備えた表示システムに関する。 The present invention relates to an input device such as a touch pad and a display system including a display device.
 入力装置と表示装置を有する機器としては、例えば、ノート型パーソナルコンピュータが知られている。ノート型パーソナルコンピュータにおいて、操作者の指が入力装置に接触すると、その接触位置に対応した表示装置の位置に表示装置はカーソルを示す(例えば、特許文献1)。 As a device having an input device and a display device, for example, a notebook personal computer is known. In a notebook personal computer, when an operator's finger contacts the input device, the display device shows a cursor at the position of the display device corresponding to the contact position (for example, Patent Document 1).
特開2010-140458号公報JP 2010-140458 A
 本発明による表示システムは、接触を検出する入力装置と、入力装置と接続され、手形状のカーソルを表示するデータを有する表示装置とを備える。入力装置は入力装置への接触を検出すると、表示装置は手形状のカーソルを表示する。表示システムは、表示装置に手形状のカーソルを表示するので、操作者はより直感的に操作できる。 The display system according to the present invention includes an input device that detects contact, and a display device that is connected to the input device and has data for displaying a hand-shaped cursor. When the input device detects contact with the input device, the display device displays a hand-shaped cursor. Since the display system displays a hand-shaped cursor on the display device, the operator can operate more intuitively.
図1は、一実施の形態における表示システムの全体図である。FIG. 1 is an overall view of a display system according to an embodiment. 図2は、図1において入力装置に指が接触しているときの全体図である。FIG. 2 is an overall view when a finger is in contact with the input device in FIG. 図3は、同表示システムに対し、入力を確定させたときの全体図である。FIG. 3 is an overall view when the input is confirmed for the display system. 図4は、同表示システムの表示装置がキーボード画面を表示しているときに、入力装置に指が接触しているときの全体図である。FIG. 4 is an overall view when the finger is in contact with the input device when the display device of the display system displays the keyboard screen. 図5は、同表示システムの入力装置の表示装置がオーディオ画面を表示しているときの図である。FIG. 5 is a diagram when the display device of the input device of the display system displays an audio screen. 図6は、図5において入力装置に指が接触しているときの表示装置の図である。6 is a diagram of the display device when a finger is in contact with the input device in FIG. 図7は、同表示システムの表示装置が手書き入力画面を表示しているときの図である。FIG. 7 is a diagram when the display device of the display system displays a handwriting input screen. 図8は、図7において入力装置に指が近接しているときの表示装置の図である。FIG. 8 is a diagram of the display device when a finger is in proximity to the input device in FIG. 図9は、同表示システムの表示装置の画面の遷移図である。FIG. 9 is a screen transition diagram of the display device of the display system. 図10は、同表示システムの入力装置の左右のいずれの側から接触しているかを判定するフローチャート図である。FIG. 10 is a flowchart for determining from the left or right side of the input device of the display system. 図11は、同表示システムの入力装置の左右のいずれの側から接触しているかを判定するときの説明図である。FIG. 11 is an explanatory diagram when determining from the left or right side of the input device of the display system.
 以下、本発明の一実施形態を図面に基づいて詳細に説明する。 Hereinafter, an embodiment of the present invention will be described in detail with reference to the drawings.
 図1は一実施の形態における表示システムの全体図である。 FIG. 1 is an overall view of a display system according to an embodiment.
 表示システム10は入力装置20および表示装置30を有する。表示システム10はケーブル40をさらに有する。 The display system 10 includes an input device 20 and a display device 30. The display system 10 further includes a cable 40.
 入力装置20は、タッチパッド21、ホームスイッチ22、リターンスイッチ23、および筐体24を有する。タッチパッド21は例えば静電容量を測定するセンサである。操作者の指がタッチパッド21に接触すると、タッチパッド21は静電容量の変化を検出し、自身に接触があったことを検出する。タッチパッド21は、さらに、自身のどこの位置に接触があるかを検出する。操作者の指がタッチパッド21に近づいたとき、即ち近接したときにも、タッチパッド21は、静電容量の変化を検出し、自身に近接する物体があることを検出する。さらに、自身のどこの位置に近接があるかを検出する。タッチパッド21は接触と近接の違いを静電容量の差によって検出する。 The input device 20 includes a touch pad 21, a home switch 22, a return switch 23, and a housing 24. The touch pad 21 is a sensor that measures capacitance, for example. When the operator's finger touches the touch pad 21, the touch pad 21 detects a change in capacitance and detects that it has touched itself. The touch pad 21 further detects where the touch pad 21 is touched. When the operator's finger approaches the touch pad 21, that is, when the operator's finger approaches the touch pad 21, the touch pad 21 detects a change in electrostatic capacitance and detects that there is an object close to itself. In addition, it detects where its position is close. The touch pad 21 detects a difference between contact and proximity based on a difference in capacitance.
 ホームスイッチ22は、表示装置30が表示する画像をメインメニュー31に切り替えるためのスイッチである。操作者がホームスイッチ22を押すことにより表示装置30はメインメニュー31を表示する。 The home switch 22 is a switch for switching the image displayed on the display device 30 to the main menu 31. When the operator presses the home switch 22, the display device 30 displays the main menu 31.
 リターンスイッチ23は入力装置20に対する入力を一つ前の状態に戻すスイッチである。 The return switch 23 is a switch that returns the input to the input device 20 to the previous state.
 筐体24はタッチパッド21、ホームスイッチ22、およびリターンスイッチ23を保持している。 The housing 24 holds a touch pad 21, a home switch 22, and a return switch 23.
 表示装置30はケーブル40によって入力装置20と電気的に接続する。表示装置30は、具体的には液晶ディスプレイ、プラズマディスプレイ、および有機エレクトロルミネッセンスディスプレイ等である。表示装置30はメインメニュー31だけでなく、後述するキーボード画面32、オーディオ画面33、または手書き入力画面34等を表示する。メインメニュー31は、キーボード画面32、オーディオ画面33、および手書き入力画面34等を呼び出す選択メニューで構成されている。図1において表示装置30はメインメニュー31を表示している。メインメニュー31はキーボードアイコン31A、オーディオアイコン31B、ナビゲーションアイコン31C、手書き入力アイコン31D、テストアイコン31E、およびゲームアイコン31Fが表示された画面である。 The display device 30 is electrically connected to the input device 20 by the cable 40. Specifically, the display device 30 is a liquid crystal display, a plasma display, an organic electroluminescence display, or the like. The display device 30 displays not only the main menu 31 but also a keyboard screen 32, an audio screen 33, a handwriting input screen 34, and the like which will be described later. The main menu 31 includes a selection menu for calling a keyboard screen 32, an audio screen 33, a handwriting input screen 34, and the like. In FIG. 1, the display device 30 displays a main menu 31. The main menu 31 is a screen on which a keyboard icon 31A, an audio icon 31B, a navigation icon 31C, a handwriting input icon 31D, a test icon 31E, and a game icon 31F are displayed.
 図2は、図1において入力装置20に左手51の指が接触しているときの全体図である。左手51の一部である人差し指がタッチパッド21に接触し、このとき表示装置30は左手カーソル35を表示する。左手カーソル35は指先が透明で指先以外の左手全体が半透明である。左手カーソル35はメインメニュー31に重なるが、少なくとも左手カーソル35が選択メニューであるキーボードアイコン31Aに重なった部分は透明であるので、左手カーソル35がキーボードアイコン31Aを隠さない。表示装置30は左手カーソル35を表示するデータを有する。 FIG. 2 is an overall view when the finger of the left hand 51 is in contact with the input device 20 in FIG. An index finger that is a part of the left hand 51 contacts the touch pad 21, and at this time, the display device 30 displays a left hand cursor 35. The left hand cursor 35 has a transparent fingertip and the entire left hand other than the fingertip is translucent. The left hand cursor 35 overlaps the main menu 31, but at least the portion where the left hand cursor 35 overlaps the keyboard icon 31 </ b> A that is the selection menu is transparent, so the left hand cursor 35 does not hide the keyboard icon 31 </ b> A. The display device 30 has data for displaying the left hand cursor 35.
 図2において、左手51はメインメニュー31のキーボードアイコン31Aに接している。即ち、表示システム10はキーボードアイコン31Aが選択されていると認識する。このとき、表示装置30はキーボードアイコン31Aの明暗を反転させて、操作者が選択しているアイコンをわかり易く伝える。 In FIG. 2, the left hand 51 is in contact with the keyboard icon 31A of the main menu 31. That is, the display system 10 recognizes that the keyboard icon 31A is selected. At this time, the display device 30 reverses the brightness of the keyboard icon 31A to convey the icon selected by the operator in an easy-to-understand manner.
 図3は、表示システム10に対し、入力を確定させたときの全体図である。図2の状態から左手51が入力装置20のタッチパッド21から接触しなくなると、言い換えると、左手51が入力装置20のタッチパッド21から離れると、左手51がタッチパッド21から離れる直前に選択されていたアイコンの選択を表示システム10は確定させる。すなわち、表示システム10はキーボードアイコン31Aへの選択を確定する。キーボードアイコン31Aへの選択が確定されると、表示装置30は図3のキーボード画面32を表示する。 FIG. 3 is an overall view when the input is confirmed for the display system 10. When the left hand 51 does not come into contact with the touch pad 21 of the input device 20 from the state of FIG. 2, in other words, when the left hand 51 leaves the touch pad 21 of the input device 20, the left hand 51 is selected immediately before leaving the touch pad 21. The display system 10 confirms the selection of the icon that has been displayed. That is, the display system 10 confirms the selection of the keyboard icon 31A. When the selection of the keyboard icon 31A is confirmed, the display device 30 displays the keyboard screen 32 of FIG.
 図4は、表示システム10の表示装置30がキーボード画面32を表示しているときに、入力装置に左手51の指が接触しているときの全体図である。左手51が入力装置20のタッチパッド21に接触しているので、表示装置30は左手カーソル35を表示する。このときの左手カーソル35は、図2のときと同様に、指先が透明で指先以外の左手全体が半透明である。この図4の状態では、キーボード画面32の「A」の文字が選択されている。この状態から左手51を話すと、表示システム10はキーボード画面32の「A」の文字の選択を確定する。 FIG. 4 is an overall view when the finger of the left hand 51 is in contact with the input device when the display device 30 of the display system 10 displays the keyboard screen 32. Since the left hand 51 is in contact with the touch pad 21 of the input device 20, the display device 30 displays the left hand cursor 35. At this time, the left hand cursor 35 is transparent at the fingertip and the entire left hand other than the fingertip is translucent, as in FIG. In the state of FIG. 4, the character “A” on the keyboard screen 32 is selected. When the left hand 51 is spoken from this state, the display system 10 determines the selection of the character “A” on the keyboard screen 32.
 図5は、表示システム10の表示装置30がオーディオ画面33を表示しているときの図である。図1で、オーディオアイコン31Bが選択され、そしてその選択が確定されると、表示装置30はオーディオ画面33を表示する。 FIG. 5 is a diagram when the display device 30 of the display system 10 displays the audio screen 33. In FIG. 1, when the audio icon 31 </ b> B is selected and the selection is confirmed, the display device 30 displays the audio screen 33.
 図6は、図5において入力装置20に右手の指が接触しているときの表示装置30の図である。図6においては、右手が入力装置20のタッチパッド21に接触することにより、表示装置30は右手カーソル36を表示する。右手カーソル36も左手カーソル35と同様に指先が透明で指先以外の右手全体が半透明である。表示装置30は右手カーソル36を表示するデータを有する。 FIG. 6 is a diagram of the display device 30 when the finger of the right hand is in contact with the input device 20 in FIG. In FIG. 6, when the right hand touches the touch pad 21 of the input device 20, the display device 30 displays the right hand cursor 36. As with the left hand cursor 35, the right hand cursor 36 is transparent with the fingertips, and the entire right hand other than the fingertips is translucent. The display device 30 has data for displaying the right hand cursor 36.
 図7は、表示システム10の表示装置30が手書き入力画面34を表示しているときの図である。メインメニュー31の手書き入力アイコン31Dの選択が確定されると、表示装置30は手書き入力画面34を表示する。 FIG. 7 is a diagram when the display device 30 of the display system 10 displays the handwriting input screen 34. When the selection of the handwriting input icon 31D of the main menu 31 is confirmed, the display device 30 displays a handwriting input screen 34.
 図8は、図7において入力装置20に指が近接しているときの表示装置30の図である。図8の手書き入力画面34はキーボードやアイコンを利用して入力するのではなく、指で直接手書き入力する画面である。手書き入力画面34において、表示装置30はタッチパッド21に指が近接すると鉛筆カーソル37を表示する。 FIG. 8 is a diagram of the display device 30 when a finger is in proximity to the input device 20 in FIG. The handwriting input screen 34 in FIG. 8 is a screen for direct handwriting input with a finger instead of input using a keyboard or icons. In the handwriting input screen 34, the display device 30 displays a pencil cursor 37 when a finger approaches the touch pad 21.
 図9は、表示システム10の表示装置30の画面の遷移図である。メインメニュー31からはキーボード画面32、オーディオ画面33、および手書き入力画面34等へ遷移する。キーボード画面32、オーディオ画面33、および手書き入力画面34等からはメインメニュー31へ遷移する。 FIG. 9 is a screen transition diagram of the display device 30 of the display system 10. The main menu 31 transits to a keyboard screen 32, an audio screen 33, a handwriting input screen 34, and the like. From the keyboard screen 32, the audio screen 33, the handwriting input screen 34, etc., a transition is made to the main menu 31.
 図10は、表示システム10の入力装置20の左右のいずれの側から接触しているかを判定するフローチャート図である。図11は、表示システム10の入力装置20の左右のいずれの側から接触しているかを判定するときの説明図である。 FIG. 10 is a flowchart for determining which side of the input device 20 of the display system 10 is in contact from the left or right side. FIG. 11 is an explanatory diagram when determining from the left or right side of the input device 20 of the display system 10.
 このフローが開始すると(S100)、最初にタッチパッド21が近接している物体の有無の検出、即ちホバー状態の物体の有無を検出する(S110)。タッチパッド21は、物体の一部がホバー状態にあれば、ホバー状態があると判定する。ホバー状態の物体がないときには、表示装置30は手アイコンを表示しない(S400)。ホバー状態の物体があるときには、タッチパッド21はホバー状態にある物体の位置、即ちホバー座標を検出する(S120)。 When this flow starts (S100), first, the presence / absence of an object with which the touch pad 21 is close, that is, the presence / absence of an object in a hover state is detected (S110). The touch pad 21 determines that there is a hover state if a part of the object is in the hover state. When there is no object in the hover state, the display device 30 does not display the hand icon (S400). When there is an object in the hover state, the touch pad 21 detects the position of the object in the hover state, that is, the hover coordinates (S120).
 次に、タッチパッド21は自身への接触の有無を検出する(S130)。接触がないときは、表示装置30は手カーソルを表示しない(S400)。接触があるときは、タッチパッド21は自身への接触の位置、即ちタッチ座標を検出する(S140)。 Next, the touch pad 21 detects the presence or absence of contact with itself (S130). When there is no contact, the display device 30 does not display the hand cursor (S400). When there is contact, the touch pad 21 detects the position of contact with itself, that is, touch coordinates (S140).
 次に、表示システム10はタッチ座標からホバー座標へ結ぶ線の角度を算出する(S150)。角度を算出するときの基準となる線は、図11に示すように、タッチパッド21と同一平面に設定されたXY座標のX軸の正方向である。表示システム10はこの角度が予め定められた所定角度範囲であるか否かを判定する(S160)。所定角度範囲であるときには、表示システム10は右側から接触していると判定し(S200)、そして表示装置30が左手カーソル35を表示する(S210)。この角度が予め定められた所定角度範囲外であるときには、表示システム10は左側から接触していると判定し(S300)、そして表示装置30が右手カーソル36を表示する(S310)。 Next, the display system 10 calculates the angle of the line connecting the touch coordinates to the hover coordinates (S150). As shown in FIG. 11, the reference line when calculating the angle is the positive direction of the X axis of the XY coordinates set on the same plane as the touch pad 21. The display system 10 determines whether this angle is within a predetermined angle range (S160). When it is within the predetermined angle range, the display system 10 determines that it is in contact from the right side (S200), and the display device 30 displays the left hand cursor 35 (S210). When this angle is outside the predetermined angle range determined in advance, the display system 10 determines that contact is made from the left side (S300), and the display device 30 displays the right hand cursor 36 (S310).
 本実施の形態において、タッチ座標からホバー座標へ結ぶ線の角度が270度を超え360度以内の場合と、0度以上90度未満の場合には、入力装置20の右側からタッチパッド21へ接触があると判定する。本実施の形態において、右側からの接触がある場合には、表示システム10は左手51による接触とみなし、表示装置30は左手カーソル35を表示する。 In the present embodiment, when the angle of the line connecting the touch coordinates to the hover coordinates is more than 270 degrees and less than 360 degrees, and when the angle is 0 degree or more and less than 90 degrees, the touch pad 21 is touched from the right side of the input device 20. Judge that there is. In the present embodiment, when there is a contact from the right side, the display system 10 considers the contact by the left hand 51 and the display device 30 displays the left hand cursor 35.
 タッチ座標からホバー座標へ結ぶ線の角度が90度を超え、270度未満の場合には、入力装置20の左側からタッチパッド21へ接触があると判定する。本実施の形態において、左側からの接触がある場合には、表示システム10は右手52による接触とみなし、表示装置30は右手カーソル36を表示する。 If the angle of the line connecting from the touch coordinates to the hover coordinates is more than 90 degrees and less than 270 degrees, it is determined that the touch pad 21 is touched from the left side of the input device 20. In the present embodiment, when there is a contact from the left side, the display system 10 regards the contact with the right hand 52 and the display device 30 displays the right hand cursor 36.
 表示装置30が手カーソルを表示しない(S400)、左手カーソル35を表示する(S210)、または右手カーソル36を表示する(S310)を実行すると、左右のいずれの側から接触しているかを判定するフローは終了する(S500)。 When the display device 30 does not display the hand cursor (S400), displays the left hand cursor 35 (S210), or displays the right hand cursor 36 (S310), it is determined from which side the left or right is touching. The flow ends (S500).
 なお、本実施の形態において、入力装置20は、例えば自動車の運転席と助手席のように右側座席と左側座席の間に配置されていることを想定している。従って、右側からの接触は、右側座席にいる人の左手による接触と判定し、左側からの接触は、左側座席にいる人の右手による接触と判定する。 In the present embodiment, it is assumed that the input device 20 is disposed between the right seat and the left seat such as a driver seat and a passenger seat of an automobile, for example. Therefore, the contact from the right side is determined as the contact by the left hand of the person in the right seat, and the contact from the left side is determined as the contact by the right hand of the person in the left seat.
 仮に、入力装置20が自動車の運転席の正面に位置するときには、右側からの接触は、運転者の右手による接触と判定し、左側からの接触は、運転者の左手による接触と判定する。 Temporarily, when the input device 20 is located in front of the driver's seat of the automobile, contact from the right side is determined as contact by the driver's right hand, and contact from the left side is determined as contact by the driver's left hand.
 右側からの接触があったときに左右いずれの手による接触であるか、および左側からの接触があったときに左右いずれの手による接触であるかについては、入力装置20の配置位置や、想定される使用方法を考慮して予め設定される。 The position of the input device 20 and the assumption of whether the contact is from the left or right hand when there is contact from the right side and the contact from the left or right hand when there is contact from the left side. It is set in advance in consideration of the usage method.
 タッチ座標からホバー座標へ結ぶ線の角度が90度のとき、および270度のときには、左側または右側のいずれかから操作されているとみなす設定を予めしておけばよい。 When the angle of the line connecting from the touch coordinates to the hover coordinates is 90 degrees and 270 degrees, it may be set in advance that the operation is considered to be performed from either the left side or the right side.
 表示システム10は入力装置20に接触があったときに、表示装置30に手形状のカーソルを表示するので、操作者が直覚的に操作できる。さらに、表示システム10は入力装置20の左右のいずれの側から接触があるかを検出し、表示装置30は操作者が操作している側の手形状のカーソルを表示するので、操作者はより直感的に操作できる。 Since the display system 10 displays a hand-shaped cursor on the display device 30 when the input device 20 is touched, the operator can operate intuitively. Furthermore, since the display system 10 detects which side of the input device 20 is touched from left and right, and the display device 30 displays a hand-shaped cursor on the side operated by the operator, the operator can Intuitive operation.
 表示システムは、入力装置に入力があった場合に、表示装置に手形状のカーソルを表示させるので、操作者の操作は直感的になり、表示システムとして有用である。 The display system displays a hand-shaped cursor on the display device when there is an input on the input device, so that the operation of the operator is intuitive and useful as a display system.
10  表示システム
20  入力装置
21  タッチパッド
22  ホームスイッチ
23  リターンスイッチ
30  表示装置
31  メインメニュー
31A  キーボードアイコン
31B  オーディオアイコン
31C  ナビゲーションアイコン
31D  手書き入力アイコン
31E  テストアイコン
31F  ゲームアイコン
32  キーボード画面
33  オーディオ画面
34  手書き入力画面
35  左手カーソル
36  右手カーソル
37  鉛筆カーソル
40  ケーブル
51  左手
52  右手
DESCRIPTION OF SYMBOLS 10 Display system 20 Input device 21 Touch pad 22 Home switch 23 Return switch 30 Display device 31 Main menu 31A Keyboard icon 31B Audio icon 31C Navigation icon 31D Handwritten input icon 31E Test icon 31F Game icon 32 Keyboard screen 33 Audio screen 34 Handwritten input screen 35 Left hand cursor 36 Right hand cursor 37 Pencil cursor 40 Cable 51 Left hand 52 Right hand

Claims (4)

  1. 接触を検出する入力装置と、
    前記入力装置と接続され、手形状のカーソルを表示するデータを有する表示装置とを備え、
    前記入力装置は前記入力装置への接触を検出すると、前記表示装置は前記手形状のカーソルを表示する、
    表示システム。
    An input device for detecting contact;
    A display device connected to the input device and having data for displaying a hand-shaped cursor;
    When the input device detects contact with the input device, the display device displays the hand-shaped cursor.
    Display system.
  2. 前記表示装置が有する前記データは右手を示す手形状のカーソルを表示するデータおよび左手を示す手形状のカーソルを表示するデータを含み、
    前記入力装置が前記入力装置の左側から接触されると、前記表示装置は予め設定された前記右手を示す手形状のカーソルおよび前記左手を示す手形状のカーソルのいずれか一方の手形状のカーソルを表示し、
    前記入力装置が前記入力装置の右側から接触されると、前記表示装置は前記一方の手形状のカーソルとは異なる他方の手形状のカーソルを表示する、
    請求項1記載の表示システム。
    The data included in the display device includes data for displaying a hand-shaped cursor indicating the right hand and data for displaying a hand-shaped cursor indicating the left hand,
    When the input device is touched from the left side of the input device, the display device displays either a preset hand-shaped cursor indicating the right hand or a hand-shaped cursor indicating the left hand. Display
    When the input device is touched from the right side of the input device, the display device displays the other hand-shaped cursor different from the one hand-shaped cursor;
    The display system according to claim 1.
  3. 前記入力装置は、前記入力装置への接触位置、前記入力装置への近接および近接位置をさらに検出し、
    前記入力装置が前記入力装置の左側および右側のいずれから接触されているかは、前記接触と前記近接の検出結果に基づいて判定される、
    請求項2記載の表示システム。
    The input device further detects a position of contact with the input device, proximity to the input device and proximity position;
    Whether the input device is in contact with the left side or the right side of the input device is determined based on the detection result of the contact and the proximity.
    The display system according to claim 2.
  4. 前記表示装置は選択メニューを表示し、
    前記手形状のカーソルと前記選択メニューとが重なった際に、
    前記表示装置は前記手形状のカーソルの指先を透明にし、かつ、指先以外のカーソル全体を半透明にして、前記選択メニューを表示する、
    請求項1記載の表示システム。
    The display device displays a selection menu;
    When the hand-shaped cursor and the selection menu overlap,
    The display device displays the selection menu by making the fingertip of the hand-shaped cursor transparent and making the entire cursor other than the fingertip translucent.
    The display system according to claim 1.
PCT/JP2014/006126 2013-12-16 2014-12-09 Display system WO2015093005A1 (en)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US201361916292P 2013-12-16 2013-12-16
US61/916,292 2013-12-16

Publications (1)

Publication Number Publication Date
WO2015093005A1 true WO2015093005A1 (en) 2015-06-25

Family

ID=53402384

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2014/006126 WO2015093005A1 (en) 2013-12-16 2014-12-09 Display system

Country Status (1)

Country Link
WO (1) WO2015093005A1 (en)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2022127852A1 (en) * 2020-12-18 2022-06-23 华为技术有限公司 Finger touch operation display method and apparatus

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006072854A (en) * 2004-09-03 2006-03-16 Matsushita Electric Ind Co Ltd Input device
JP2007276615A (en) * 2006-04-06 2007-10-25 Denso Corp Prompter-type operating device

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006072854A (en) * 2004-09-03 2006-03-16 Matsushita Electric Ind Co Ltd Input device
JP2007276615A (en) * 2006-04-06 2007-10-25 Denso Corp Prompter-type operating device

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2022127852A1 (en) * 2020-12-18 2022-06-23 华为技术有限公司 Finger touch operation display method and apparatus
CN114721576A (en) * 2020-12-18 2022-07-08 华为技术有限公司 Finger touch operation display method and device

Similar Documents

Publication Publication Date Title
JP4743267B2 (en) Information processing apparatus, information processing method, and program
JP4372188B2 (en) Information processing apparatus and display control method
JP5640486B2 (en) Information display device
US20140380209A1 (en) Method for operating portable devices having a touch screen
US20140062875A1 (en) Mobile device with an inertial measurement unit to adjust state of graphical user interface or a natural language processing unit, and including a hover sensing function
US20120068946A1 (en) Touch display device and control method thereof
US8456433B2 (en) Signal processing apparatus, signal processing method and selection method of user interface icon for multi-touch panel
JP5779156B2 (en) Information input device, input method thereof, and computer-executable program
TW201337717A (en) Electronic device with touch control
JP5846129B2 (en) Information processing terminal and control method thereof
EP2835722A1 (en) Input device
JP2012099005A (en) Input device, input method, and input program
JP2014176019A (en) Portable information processing device, input method for the same, and computer-executable program
JP5845585B2 (en) Information processing device
US20110119579A1 (en) Method of turning over three-dimensional graphic object by use of touch sensitive input device
JP2006085218A (en) Touch panel operating device
WO2015093005A1 (en) Display system
WO2018123320A1 (en) User interface device and electronic apparatus
JP2011221822A (en) Information processor, operation input device, information processing system, information processing method, program and information storage medium
TWI439922B (en) Handheld electronic apparatus and control method thereof
US20180292924A1 (en) Input processing apparatus
JP5330175B2 (en) Touchpad, information processing terminal, touchpad control method, and program
WO2014013587A1 (en) Display apparatus
US11893229B2 (en) Portable electronic device and one-hand touch operation method thereof
US20150138102A1 (en) Inputting mode switching method and system utilizing the same

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 14871047

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 14871047

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: JP