JP2016500458A - タッチ位置及びタッチ力に基づくタッチスクリーンシステム及び方法 - Google Patents

タッチ位置及びタッチ力に基づくタッチスクリーンシステム及び方法 Download PDF

Info

Publication number
JP2016500458A
JP2016500458A JP2015548036A JP2015548036A JP2016500458A JP 2016500458 A JP2016500458 A JP 2016500458A JP 2015548036 A JP2015548036 A JP 2015548036A JP 2015548036 A JP2015548036 A JP 2015548036A JP 2016500458 A JP2016500458 A JP 2016500458A
Authority
JP
Japan
Prior art keywords
touch
force
touch screen
display
light
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2015548036A
Other languages
English (en)
Inventor
デナシー ダイヒマン,オベロン
デナシー ダイヒマン,オベロン
ジェームズ ミラー,ウィリアム
ジェームズ ミラー,ウィリアム
ウェイン イアリー,ルーカス
ウェイン イアリー,ルーカス
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Corning Inc
Original Assignee
Corning Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Corning Inc filed Critical Corning Inc
Publication of JP2016500458A publication Critical patent/JP2016500458A/ja
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/044Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means by capacitive means
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/041Indexing scheme relating to G06F3/041 - G06F3/045
    • G06F2203/04105Pressure sensors for measuring the pressure or force exerted on the touch surface without providing the touch position
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/042Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means by opto-electronic means
    • G06F3/0421Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means by opto-electronic means by interrupting or reflecting a light beam, e.g. optical touch-screen

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Position Input By Displaying (AREA)

Abstract

タッチ位置及びタッチ力に基づくタッチスクリーンシステム及び方法が開示される。タッチスクリーンシステムは、タッチ位置及びタッチ力のいずれの情報も得ることができるように、静電容量方式タッチセンシングシステムとインターフェースされた光学方式力センシングシステムを備える。タッチスクリーンシステムを用いるディスプレイも開示される。

Description

関連出願の説明
本出願は、2012年12月17日に出願された米国仮特許出願第61/738047号の米国特許法第119条の下の優先権の恩典を主張する。本明細書は上記仮特許出願の明細書の内容に依存し、上記仮特許出願の明細書の内容はその全体が本明細書に参照として含められる。
本開示は、タッチスクリーンに関し、特に、タッチ位置及びダッチ力に基づくタッチスクリーンシステム及び方法に関する。本明細書に挙げられる刊行物、論文、特許明細書、特許出願公開明細書等は、米国仮特許出願第61/564003号及び第61/564024号の明細書を含めて、全てそれぞれの全体が本明細書に参照として含められる。
非機械的タッチ機能を有するディスプレイ及びその他のデバイス(例えば、キーボード)に対する市場は急速に成長している。この結果、タッチセンシング技術がディスプレイ及びその他のデバイスにタッチ機能をもたせるために開発されている。タッチセンシング機能は、スマートフォン、電子書籍リーダー、ラップトップコンピュータ及びタブレットコンピュータのような、モバイルデバイス用途に広く用いられるようになっている。
タッチセンシング面は、ユーザが携帯型電子デバイスと対話する、好ましい方法になっている。この目的のため、シングルタッチ、マルチタッチ及びスワイプのような、様々なタイプのタッチに応答する、タッチスクリーンの形態のタッチシステムが開発された。これらのシステムには支持フレームに対して固定されたままのタッチスクリーン面と光学的に接触すること基づく光散乱及び/または光減衰に依存するシステムがある。そのようなタッチスクリーンシステムの一例が特許文献1に説明されている。
スマートフォンのような民生用タッチベースデバイスは現在、デバイスのディスプレイ上またはその近くの物体(例えば、指、スタイラス)の存在として、ユーザからのインタラクションを検出する。これはユーザ入力と見なされ、
(1)インタラクションがおこったか否かを判定する、
(2)インタラクションのX−Y位置を計算する、及び
(3)インタラクションの長さを決定する、
ことによって数量化することができる。
タッチスクリーンデバイスには、ユーザ入力中に位置データ及びタイミングデータしか集めることができないという点で限界がある。効率的動作を可能にし、ユーザにとって煩雑でない、別の直感的入力が必要とされている。タッチイベント及び入力ジェスチャを用いることで、ユーザが長々としたメニューの仕分けを要求されることがなくなり、これは時間も節約し、電池寿命も延ばす。タッチ、スワイプ及びフリックの形態のユーザ入力を、次いでソフトウエアにイベントオブジェクトを生成するために用いられる、ジェスチャとみなすアプリケーションプログラミングインターフェース(API)が開発されている。しかし、APIに含めることができるユーザ入力が多ければ多いほど、タッチスクリーンデバイスの性能は一層堅牢になる。
米国特許出願公開第2011/0122091号明細書
本開示はタッチイベント中のユーザからの位置入力及び力入力のいずれをも用いるタッチスクリーンデバイスに向けられる。力測定値はユーザインタラクション中のカバーガラスの撓みによって数量化される。したがって、ソフトウエアにイベントオブジェクトを生成するため、さらに力の入力パラメータをAPIで利用することができる。本開示の目的は、人間が制御するインターフェースにおいてソフトウエアベースイベントを生成するための、タッチイベントからの力情報の、同じタッチイベントに対する投影型静電容量方式タッチ(PCT)データと合わせた利用である。
力タッチセンシングは、米国仮特許出願第61/640605号、同第61/651136号及び同第61/744831号の各明細書に説明されているシステム及び方法のような、光学方式モニタリングシステム及び方法を用いて達成することができる。
アナログ抵抗方式、投影型静電容量方式、表面静電容量方式、表面音響波(SAW)方式、赤外線方式、カメラ利用光学方式及びその他のいくつかの方式のような、多くのタイプのタッチ感応デバイスが存在する。本開示は、マルチタッチの検出を可能にし、非常に高感度で耐久性があるという利点を有する、投影型静電容量方式タッチ(PCT)デバイスのような静電容量利用デバイスとともに説明される。本明細書に開示されるタッチスクリーンシステムにおける位置センシングと力センシングの組合せは、ユーザによる一意的な力関連入力(ジェスチャ)の供給を可能にする。したがって、つまむ仕草のようなジェスチャは異なる大きさの力でタッチスクリーンを押しているジェスチャに置き換えることができる。
力センシングと位置センシングの組合せを利用するタッチスクリーンデバイスには数多くの利点がある。力モニタリングを用いることの主要な利点はユーザの経験を養う直感的インタラクションである。これは、ユーザが単一の位置を押し、オブジェクトプロパティを調節する(例えば、グラフィック画像を変更する、オーディオ出力の音量を変える、等)ことを可能にする。単指イベントにおける従来の企図では、スワイプまたはタッチスクリーンとの長時間接触のような、長押しジェスチャが用いられる。力データを用いることで、長押しジェスチャを不要にする高速応答時間が可能になる。長押しジェスチャは応答速度に対するあらかじめ定められた方程式を用いて動作させることができる(すなわち、長押しジェスチャは設定速度または急速に高まる速度でページをスクロールすることができる)が、力ベースセンシングでは、実時間インタラクションにおいて応答時間をユーザが能動的に変更することが可能になる。したがって、ユーザは、例えば単に印加タッチ力を変えることによって、スクロールを変えることができる。これは、一層インタラクティブであり、動作上一層効率的である、経験をユーザに提供する。
さらに、位置センシングと組み合わされた力センシングの使用により、以下で説明されるような、広範な新しいタッチスクリーン機能(API)が可能になる。
本開示のさらなる特徴及び利点は以下の詳細な説明に述べられ、ある程度は、当業者にはその説明から容易に明らかであろうし、あるいは、以下の詳細な説明、特許請求の範囲及び添付図面を含む、本明細書に説明されるように本開示を実施することによって認められるであろう。
特許請求の範囲は、また概要も、以下に述べられる詳細な説明に組み入れられて、詳細な説明の一部をなす。
図1Aは、本開示にしたがう、静電容量方式タッチスクリーンを用いてタッチ位置を測定することができ、光学方式力センシングシステムを用いてタッチ位置における印加力を測定することもできる、タッチスクリーンシステムの一例の略図である。 図1Bは図1Aのタッチスクリーンシステムを用いるディスプレイシステムの略図である。 図2Aは図1Aのタッチスクリーンシステムを用いるディスプレイシステムの一例の分解側面図である。 図2Bは組み立てられた図2Aのディスプレイシステムの側面図である。 図2Cは図2Bのディスプレイシステム例の、ただし透明カバーシートがない、上面図である。 図2Dは透明カバーシートを含む図2Bのディスプレイシステムの上面図である。 図3Aは、一例の光偏向素子に関して示され、マイクロコントローラに電気的に接続された、近接センサの一例の大観図である。 図3Bは、光偏向素子が近接センサに近づくかまたは遠ざかると、及び/または近接センサに対して回転すると、偏向光が光検出器の異なる面積をどのようにカバーするかを示す近接センサの上面図である。 図3Cは、光偏向素子が近接センサに近づくかまたは遠ざかると、及び/または近接センサに対して回転すると、偏向光が光検出器の異なる面積をどのようにカバーするかを示す近接センサの上面図である。 図4Aは、透明カバーシート及び隣接する静電容量方式タッチスクリーンを示す、図2Bのディスプレイシステムの縁端領域の拡大側面図である。 図4Bは、図4Aと同様であるが、タッチ位置においてカバーシートに印加されたタッチ力によって生じるカバーシートの撓みを近接センサがどのように測定するかを示す。 図4Cは、近接センサがカバーシートに近接して配置されている、別の実施形態のディスプレイシステムの縁端領域の拡大側面図を示す。 図4Dは、図4Cと同様であるが、タッチ位置においてカバーシートに印加されたタッチ力によって生じるカバーシートの撓みを近接センサがどのように測定するかの別の方法を示す。 図5Aは、ズームがタッチ位置におけるタッチ力の印加によって達成される、ディスプレイシステム上に表示されたグラフィック画像のズーム機能の一例をズーム前の画像で示す。 図5Bは、ズームがタッチ位置におけるタッチ力の印加によって達成される、ディスプレイシステム上に表示されたグラフィック画像のズーム機能の一例をズーム後の画像で示す。 図6Aは、書籍ページの形態にあるグラフィック画像のページめくり機能の一例を示し、ページめくりはタッチ位置におけるタッチ力の印加によって達成される。 図6Bは、書籍ページの形態にあるグラフィック画像のページめくり機能の一例を示し、ページめくりはタッチ位置におけるタッチ力の印加によって達成される。 図7は、タッチ位置におけるタッチ力の印加によって達成される、メニュー選択機能の一例を示す。 図8Aはスクロール機能の一例を示し、タッチ力の増加を示す。 図8Bはスクロール機能の一例を示し、タッチ力の増加によりスクロールレート(速度)が早くなり得ることを示す。 図9Aは図8Aと同様であり、力対スクロールバー位置機能を離散化することでいかにしてスクロール機能を1つの位置から次の位置にジャンプさせ得るかを示す。 図9Bは印加力の閾値に基づく位置の変化を示すグラフである。 図10Aは、線の形態にあるグラフィック画像を、選ばれた大きさのタッチ力の印加と組み合わされたスワイプによってどのように変え得るかの一例を示す。 図10Bは、線の形態にあるグラフィック画像を、選ばれた大きさのタッチ力の印加と組み合わされたスワイプによってどのように変え得るかの一例を示す。 図11は選ばれた大きさのタッチ力の印加を用いることでディスプレイ画像が視野にわたってどのように拡大またはパンされ得るかの一例を示す。 図12はオブジェクトの回転ラックの形態にあるグラフィック画像が選ばれた大きさのタッチ力の印加を用いてどのように操作され得るかの一例を示す。 図13は、大きさが増加していくタッチ力の印加ではなく、短い時間内のタッチ力の反復印加(ポンピングまたはパルシング)がどのように用いられ得るかを示す。
直交座標が参照のためにいくつかの図面に示されているが、方向または方位に関する限定としての目的はない。
本開示は、以下の詳細な説明、図面、実施例及び特許請求の範囲、並びにそれぞれの以前及び以降の説明を参照することで、一層容易に理解され得る。しかし、現在の組成、物品、デバイス及び方法の開示及び説明の前に、本開示が、別途に指定されない限り、本開示が特定の組成、物品、デバイス及び方法に限定されず、したがって、もちろん、変わり得ることは当然である。本明細書に用いられる用語が、特定の態様を説明する目的のためでしかなく、限定は目的とされていないことも当然である。
本開示の以下の説明は現在知られている実施形態において本開示の実行可能な教示として与えられる。この目的のため、当業者であれば、本明細書に説明される本開示の様々な態様に多くの変更がなされ得るであろうが、それでも本開示の有益な結果が得られることを認め、了承するであろう。本開示の所望の有益な結果のいくつかが本開示の特徴のいくつかを選択することにより、他の特徴を利用せずに、得られることも明らかであろう。したがって、当業者であれば、本開示に多くの改変及び改作が可能であり、いくつかの状況では望ましくさえあり得るし、本開示の一部であることを認めるであろう。すなわち、以下の説明は、本開示の限定ではなく、本開示の原理の例示として与えられる。
開示される方法及び組成物のために用いることができ、それらとともに用いることができ、それらの準備/作製に用いることができ、あるいはそれらの実施形態である、材料、化合物、組成物及びコンポーネントが開示される。上記及びその他の材料が本明細書に開示され、そのような材料の組合せ、サブセット、相互作用、群、等が開示される場合、それらの化合物の様々な個別的及び総括的な組合せ及び置換のそれぞれへの特定の言及は明示的に開示されていないかもしれない場合であっても、それぞれが具体的に本明細書で考えられ、説明されていると、了解される。
すなわち、置換要素A,B及びCからなる群が、また置換要素D,E及びFからなる群も、開示され、組合せ実施形態の一例A−Dが開示されていれば、それぞれは個別的及び総括的に考えられている。すなわち、この例においては、組合せA−E,A−F,B−D,B−E,B−F,C−D,C−E及びC−Fのそれぞれも具体的に考えられていて、A,B及び/またはCと、D,E及び/またはFと、組合せ例A−Dの開示により、開示されていると見なされるべきである。同様に、これらのいかなるサブセットまたは組合せも具体的に考えられ、開示されている。すなわち、例えば、A−E,B−F及びC−Eからなる部分群が、A,B及び/またはCと、D,E及び/またはFと、組合せ例A−Dの開示によって、具体的に考えられていて、開示されていると見なされるべきである。この概念は、開示される組成物の作製及び使用の方法における組成物のいかなる成分及び工程も含むがこれらには限定されない、本開示の全ての態様に適用される。すなわち、実施することができる様々な付加工程があれば、そのような付加工程のそれぞれが開示される方法の実施形態のいずれか特定の実施形態または実施形態の組合せとともに実施することができ、そのような組合せのそれぞれが具体的に考えられていて、開示されていると見なされるべきであると、了承される。
図1Aは本開示にしたがうタッチスクリーンシステム10の略図である。タッチスクリーンシステム10は様々な民生用エレクトロニクス製品に、例えば、携帯電話、キーボード、タッチスクリーン及び無線通信ができるデバイスのようなその他の電子デバイス、音楽プレイヤー、ノートブックコンピュータ、モバイルデバイス、ゲームコントローラ、コンピュータ「マウス」、電子書籍リーダー、等のためのディスプレイとともに、用いることができる。
タッチスクリーンシステム10は、PCTタッチスクリーンのような、従来の静電容量方式タッチスクリーンシステム12を備える。静電容量方式タッチスクリーンシステム12の例は、例えば、米国特許第4686443号、同第5231381号、5650597号、同第6825833号及び同第7333092号の各明細書に開示されている。タッチスクリーンシステム10は静電容量方式タッチスクリーンシステム12と動作可能な態様でインターフェースされているか、そうではなくとも動作可能な態様で組み合わされている、光学方式力センシングシステム14も備える。静電容量方式タッチスクリーンシステム12及び光学方式力センシングシステム14はいずれも、以下で説明されるように、タッチスクリーンシステム10の動作を制御するように構成された、マイクロコントローラ16に電気的に接続される。
一例において、マイクロコントローラ16は静電容量方式タッチスクリーンシステム12とともに与えられ(すなわち、タッチスクリーンシステムの一部を構成し)、力検知システム14に(例えば12Cバスを介して)直接に接続し、光学方式力センシングシステム14から力信号SFを受け取って処理するように再構成される(例えば、再プログラムされる)。マイクロコントローラ16は複数のセンサの取り付けを可能にするため、マルチプレクサ(図示せず)に接続することもできる。
図1Aは、例として示される指のような、タッチ具20によってタッチ位置TLにおいて力センシングシステム14におこるタッチイベントTEを示す。スタイラス、筆記具の先端、等のような、他のタイプのタッチ具20を用いることができる。応答して、光学方式力センシングシステム14は、タッチイベントTEにともなうタッチ力Fを表す、力センシング信号(力信号)SFを発生する。同様に、静電容量方式タッチスクリーン12は、タッチイベントTEにともなうタッチ位置を表す、位置センシング信号(位置信号)SLを発生する。力信号SF及び位置信号SLはマイクロコントローラ16に送られる。マイクロコントローラ16はこれらの信号を処理して、(例えば、APIにより)タッチ位置TL及びタッチイベント力Fのいずれにも基づくイベントオブジェクトをコントローラソフトウエアに生成するように構成される。一例において、マイクロコントローラは力信号SF及び位置信号SLの少なくとも一方に応答して(以下で紹介されて論じられる)ディスプレイ画像200の少なくとも1つの特徴を調節する。
一例において、光学方式力センシングシステム14は、従来の静電容量方式タッチスクリーンシステム12に位置センシング機能及び力センシング機能のいずれももたせるために後付け導入され得るように構成される。一例において、光学方式力センシングシステム14は静電容量方式タッチスクリーンシステム12に追加されるアダプタとして構成される。一例において、光学方式力センシングシステム14は、必要に応じて、マイクロコントローラ16とインターフェースされ、力信号SFがマイクロコントローラ16に与えられる前に力信号を状態調節する、(図1Aに破線の箱で示される)光学方式力センシングシステム自体のマイクロコントローラ15を有する。
図1Bは図1Aと同様であり、図1Aのタッチスクリーンシステム10を利用する、一例のディスプレイシステム11の略図である。ディスプレイシステム11は、タッチスクリーン10を通して見る人100が見ることができる、ディスプレイ画像200を生成するように構成されたディスプレイアセンブリ13を有する。
図2Aは、タッチスクリーンシステム10を利用する、一例のディスプレイシステム11の分解側面図であり、図2Bは図2Aのディスプレイシステム例の組立側面図である。ディスプレイシステム11は、上端33をもつ側壁32及び底壁34を有する、フレーム30を有する。側壁32及び底壁34は開放内室36を定める。ディスプレイシステム11はタッチスクリーンシステム10の前述したマイクロコントローラ16も有し、一例において、マイクロコントローラは他のディスプレイシステムコンポーネント、例えば少なくとも1つの電池18、とともに底壁34に隣接してフレーム内室36内にある。
ディスプレイシステム11はフレーム内室36内でマイクロコントローラ16及び電池18の上にあるフレックス回路50も有する。フレックス回路50は上面52及び縁端53を有する。フレックス回路50の縁端53近くの上面52上に複数の近接センサヘッド54Hが動作可能な態様で搭載される。図3Aを参照すれば、それぞれの近接センサヘッド54Hは光源(例えば、LED)54L及び光検出器(例えば、フォトダイオード)54Dを有する。フレックス回路50は異なる近接センサヘッド54Hをマイクロコントローラ16に接続する電気配線(結線)56を有する。一例において、配線56はバス(例えば12Cバス)を構成する。電気配線56は近接センサ54によって発生される力信号SFを伝える。
図2A及び2Bを再び参照すれば、ディスプレイシステム11はフレックス回路50の上面52上に配されたディスプレイ60をさらに有する。ディスプレイ60は、上面62及び下面64及び外端65を有する。1つ以上の間隔保持素子(スペーサ)66が外端65に隣接して上面62上に設けられる。ディスプレイ60は、ディスプレイ画像200の生成のような、ディスプレイの動作を制御するように構成されたディスプレイコントローラ61を有する。ディスプレイコントローラ61はタッチスクリーンマイクロコントローラ16に隣接して示され、タッチスクリーンマイクロコントローラ16に動作可能な態様で接続されている。一例において、個々のマイクロコントローラ16及び61ではなく、単一のマイクロコントローラだけが用いられる。
ディスプレイシステム11は、ディスプレイの上面62に隣接し、空隙67を定めるためにスペーサ66によってディスプレイ上面62から隔てられた、静電容量方式タッチスクリーン70も有する。静電容量方式タッチスクリーン70は上面72及び下面74を有する。静電容量方式タッチスクリーン70は、一例においてバス(例えば12Cバス)を構成する、電気配線(結線)76によってマイクロコントローラ16に電気的に接続される。電気配線76は静電容量方式タッチスクリーンによって発生される位置信号SLを伝える。
ディスプレイシステム11は上面82及び下面84及び外端85を有する透明カバーシート80も有する。透明カバーシート80は、フレーム30の上端33と接触している外端85またはその近くにおいて透明カバーシートの下面84で、フレームによって支持される。1つ以上の光偏向素子86が、対応する1つ以上の近接センサヘッド54Hと光学的に位置合わせされるように、外端85に隣接して外端85の内側で、カバーガラス80の下面84上に支持される。一例において、光偏向素子86は平面ミラーである。光偏向素子86は、以下でさらに詳細に説明されるように、近接センサ54の光源54Lと光検出器54Dの間のさらに良好な方向性光伝達を提供するために用いられる、傾けられた形状(例えばくさび形)とすることができる。一例において、光偏向素子は湾曲形状とされる。別の例において、光偏向素子は回折格子または散乱性表面を有する。それぞれの近接センサヘッド54H及び対応する光偏向素子86は、タッチイベントTEによって透明カバーシート80に印加されるタッチ力Fの大きさを確認するために透明カバーシートの変位を検出する近接センサ54を定める。
一例の実施形態において、透明カバーシート80は静電容量方式タッチスクリーン70に隣接し、密接して配置される。すなわち、透明カバーシート80の下面84は静電容量方式タッチスクリーン70の上面72と接触している。この接触は薄い透明接着剤層によって容易になり得る。透明カバーシート80と静電容量方式タッチスクリーン70を接触させて配置することで、以下で論じられるように、タッチ力Fがかけられたときに、透明カバーシート80と静電容量方式タッチスクリーン70が一緒に撓むことが可能になる。
ここで、図1の光学方式力センシングシステム14が透明カバーシート80,光偏向素子86,複数の近接センサ54,フレックス回路50及びフレックス回路50内の電気配線56によって構成されることに注意されたい。静電容量方式タッチスクリーンシステム12は静電容量方式タッチスクリーン70及び電気配線76によって構成される。ディスプレイシステム13は、特にディスプレイ60及びディスプレイコントローラ61を含む、残りのコンポーネントで構成される。
図2Bの参照を続ければ、ディスプレイ60は光68を放射し、光68は、空隙67,(光68に対して透明である)静電容量方式タッチスクリーン70及び透明カバーシート80を通って進む。光68は、例えば、グラフィック画像、図画、アイコン、シンボルまたは表示され得るいずれかとすることができる、ディスプレイ画像200として見る人100が視認できる。一例の実施形態において、ディスプレイシステム11は力信号SF及び位置信号SLに基づいて表示画像200の少なくとも1つの特徴(または特性、または属性、等)を変えるように構成される。ディスプレイ画像の特徴には、寸法、形状、倍率、位置、動き、色、方位、等を含めることができる。
図2Cは図2Bのディスプレイシステム11の、ただし透明カバーシート80がない、上面図であり、図2Dは同じであるが、透明カバーシートを含む、上面図である。透明カバーシート80は、光68の可視波長において透明である、ガラス、セラミックまたはガラス−セラミックでつくることができる。透明カバーシート80のための一例のガラスは、米国ニューヨーク州コーニング(Corning)のコーニング社(Corning Inc.)のGorillaガラスである。透明カバーシート80は、透明ガラスシートの下でディスプレイシステム11の外端85近くにある光偏向素子86及びその他のいずれのコンポーネントをユーザ100(図2B)に見えなくするために遮蔽するように、外端85に隣接する不透明カバー(ベゼル)88を有することができる。図2Dには図示を容易にするために不透明カバー88の一部だけが示されている。一例において、不透明カバー88は、少なくとも可視光を遮断するためにはたらき、ディスプレイシステム11のいくらかの領域をユーザ100に見えるままにしておくように構成された、いずれかのタイプの光遮断部材、ベゼル、フィルム、塗料、ガラス、コンポーネント、材料、表面模様、構造、等とすることができる。
図3Aは、上で論じたように、光源54L及び光検出器54Dを有するセンサヘッド54Hを有する、近接センサ54の一例の拡大大観図である。システム10のそれぞれの近接センサヘッド54Hは、少なくともある程度はフレックス回路50によって支持されるような、電気配線56によってマイクロコントローラ16に電気的に接続される。光源54Lの例には、LED、レーザダイオード、光ファイバベースレーザ、面光源、点光源、等がある。光検出器54Dは、フォトダイオードアレイ、大面積光センサ、リニア光センサ、フォトダイオードの集合体またはアレイ、CMOS検出器、CCDカメラ、等とすることができる。一例の近接センサヘッド54Hは、850nm光源54Lを用い、光検出器54Dには高リニア光センサを用いる、OSRAM近接センサヘッド、タイプSFH7773である。一例において、近接センサ54は光源54L及び光検出器54Dを有する必要はなく、いくつかの実施形態においてこれらのコンポーネントは相互に分離され、それでも目的の機能を果たすことができる。
図3Aは光源54L及び光検出器54Dの上方にある一例の光偏向素子86も示す。光偏向素子86は(図3Aには示されていない)透明カバーシート80の下面84上に配置されていることを想起されたい。一例において、光源54Lは光55を光偏向素子86に向けて放射し、光偏向素子86はこの光を偏向光55Rとして光検出器54Dに向けて戻す。近接センサヘッド54H及び光偏向素子86は、光偏向素子が第1の離隔及び第1の方位にあるときに偏向光55Rが光検出器54Dの第1の面積a1をカバーする(図3B)ように構成される。さらに光偏向素子86が第2の離隔(及び/または第2の方位)にあるときに、偏向光は光検出器の第2の面積a2をカバーする(図3C)。これは検出器(力)信号SFが光偏向素子86の位置及び/または方位によって変化することを意味する。
図4A及び4Bは、透明カバーシート80及び隣接する静電容量方式タッチスクリーン70を近接センサ54の1つとともに示す、ディスプレイシステム11の縁端領域の拡大側面図である。図4Aにおいて、タッチイベントはなく、ディスプレイシステム11にユーザ100による力は全くかけられていない。この場合、光源54Lからの光は光偏向素子86で偏向して、光検出器54Dのある領域(面積)をカバーする。これが、例として検出器面積全体をカバーする、太い黒線で表される55Rとして示される。
図4Bは、タッチイベントTEを生じさせるためにタッチ具(指)20がタッチ位置TLにおいて透明カバーシート80上に押し当てられている、一例の実施形態を示す。タッチイベントTEにともなう力Fが透明カバーシート80を撓ませる。この撓みが光偏向素子86を移動させるようにはたらき、特に、光偏向素子を近接センサ54に近づけ、いくつかの場合には若干回転させる。これは、続いて、異なる量の偏向光が光検出器54Dの受光面上に当たるように、偏向光55Rの光路を光検出器に対して変化させる。これが、光検出器54Dに対して変位されている偏向光55Rの広がりを表す太い黒線で簡略に示される。光検出器54Dによって検出される偏向光55Rの量の変化は検出器(力)信号SFの変化で表される。
透明カバーシート80の撓みが光源54Lと光検出器54Dの間の距離を変え、この距離の変化が光検出器において検出される放射照度の変化を生じさせ得ることにも注意されたい。また一例において、光検出器54Dは放射照度分布を、また透明カバーシート80の変位によって生じるような、放射照度分布に対する変化も、検出することができる。放射照度分布は、例えば、検出器面積にかけて移動する比較的小さな光点とすることができ、光点の位置が変位の大きさ、したがってタッチ力Fの大きさと相関される。別の例において、放射照度分布は光散乱によるようなパターンを有し、散乱パターンは透明カバーシートが変位するにしたがって変化する。
図4C及び4Dに示される別の実施形態において、近接検出器ヘッド54Hは透明カバーシート80の下面84上にあり、光偏向素子は、例えば、フレックス回路50の上面52上にある。この別の実施形態においても、フレックス回路50の電気配線56は近接センサヘッド54Hに接続される。
別の実施形態例において、透明カバーシート80,静電容量方式タッチスクリーン70及びディスプレイ60は接合される。この場合、近接センサ54をディスプレイ60に対して動作可能な態様で配置することができ、近接センサヘッド54Hまたは光偏向素子86をディスプレイの上面62上に動作可能な態様で配置することができる。
近接センサ54の多くの様々な例に関してタッチスクリーンシステム12の光学方式力センシングシステム14を上で説明したが、近接センサ54を改変することで他の光センシング手段を用いることができる。例えば、光を反射するのではなく、光を回折する回折格子を有する反射部材86を用い、回折光が光検出器54Dによって検出される、近接センサ54を構成することができる。
さらに、光は、スペクトル帯内の光の様々な波長を検出することができ、透明カバーシート80の与えられた変位の大きさ(したがって、透明カバーシート80に印加されたタッチ力Fの大きさ)に関係付けることができるような、スペクトル帯域幅を有することができる。光源54Lは透明カバーシート80の下面84上にある導波路に光を注入することもできる。光偏向素子86は導波光を引き出すように構成された導波路回折格子とすることができ、出力光は光検出器54Dに進み、透明カバーシートの変位に依存して異なる量または異なる位置で光検出器54Dに入射する。
別の実施形態において、近接検出器54は、光検出器に基準波形を与えるビームスプリッタを光路に挿入することで、マイクロ干渉計として構成することができる。コヒーレント光源54Lを用いれば、基準波形と光偏向素子86からの反射波形が光検出器54Dにおいて干渉することができる。次いで、タッチ力Fによる透明カバーシートの変位を確立するために、干渉縞パターン(放射照度分布)の変化を用いることができる。
また一例において、近接センサ54はファブリ−ペロキャビティを定めるように構成することができ、透明カバーシート80の変位が、変位を生じさせるために用いられた印加タッチ力Fの大きさに相関させることができる、ファブリ−ペロキャビティのフィネスに変化を生じさせる。これは、例えば、反射部材86に対して動作可能な態様で配された第2の部分反射窓(図示せず)を付加することで達成することができる。
近接センサヘッド54H及び対応する反射部材86は、タッチ力Fの大きさの変化の結果、透明カバーシート80の変位による力信号SFの変化が生じるように、構成される。一方、静電容量方式タッチスクリーン70は、既知の静電容量方式センシング手段によって検出されるようなタッチ力Fに関係付けられる、タッチイベントTEの(x,y)タッチ位置TLを表す位置信号SLをマイクロコントローラ16に送る。したがって、マイクロコントローラ16はタッチ位置TLにおいて与えられるタッチ力Fの大きさを表す力信号SFを、またタッチ位置TLの(x,y)位置を表す位置信号SLも、受け取る。一例において、異なる近接センサ54からの複数の力信号SFがマイクロコントローラ16によって受け取られて、処理される。
一例において、力信号SFに対して与えられた値(例えば、電圧)が力の大きさに対応するように、マイクロコントローラ16が較正される。マイクロコントローラの較正は、(光検出器54D上に入射する強度または放射照度の変化による)力信号の変化を測定し、測定値を1つ以上のタッチ位置TLにおいて印加された既知のタッチ力Fの大きさと関係付けることで実施することができる。すなわち、印加されたタッチ力Fと力信号の間の関係を、ディスプレイシステムまたはタッチスクリーンプロセスの較正プロセスの一環として経験的に確立することができる。
また一例において、近接センサ54をゼロ点規正するためにタッチイベントTEの発生を用いることができる。これは、異なる近接センサ54を異なってはたらかせるであろういかなる温度差に対してもセンサを補償するために行うことができる。
マイクロコントローラ16は、以下で説明されるように、タッチスクリーンシステム10の動作を制御するように、また、(例えば、ディスプレイ11に対する付帯動作を有するイベントオブジェクトのための)ディスプレイ機能を生成するために力信号SF及び位置信号SLの処理も行うように、構成される。いくつかの実施形態において、マイクロコントローラ16は、全てが動作可能な態様で、例えば、マザーボード上に配置されているか、あるいは1つの集積回路チップまたは構造に集積化されている(図示せず)、プロセッサ19a,メモリ19b、デバイスドライバ19c及びインターフェース回路19d(図4A,4B参照)を有する。
一例において、マイクロコントローラ16はファームウエア及び/またはソフトウエア(図示せず)に格納された命令を実行するように構成されるか、そうではなくとも適合される。一例において、マイクロコントローラ16は、タッチスクリーンシステム10の動作及び、圧力または力の相対的大きさ及び/または透明カバーシート80の変位を、またタッチイベントTEのタッチ位置も、測定するために必要ないかなる信号処理も含む、本明細書に説明される機能を実施するようにプログラムすることができる。本明細書に用いられるように、術語「マイクロコントローラ」は技術上コンピュータと称されるような集積回路だけに限定されず、広く、コンピュータ、プロセッサ、マイクロコンピュータ、プログラマブルロジックコントローラ、特定用途集積回路及びその他のプログラマブル回路を、またこれらの組合せも、指し、これらの術語は互換で用いられ得る。
一例において、マイクロコントローラ16は本明細書に開示されるタッチスクリーンシステム10の機能及び動作を実施するかまたは実施に役立つように構成されたソフトウエアを含む。ソフトウエアはマイクロコントローラ16に、その内部を含めて(例えば、プロセッサ19aに)動作可能な態様でインストールすることができる。ソフトウエア機能には、実行可能なコードを含む、プログラミングを含めることができ、そのような機能は本明細書に開示される方法を実施するために用いることができる。
そのようなソフトウエアコードはマイクロプロセッサによる実行が可能である。動作において、コード及びおそらくは関連するデータレコードが、汎用コンピュータプラットフォーム内、プロセッサユニット内、またはローカルメモリに格納される。しかし、場合によっては、ソフトウエアを、他の場所に格納する、及び/または適切な汎用コンピュータシステムにロードするために転送することができる。したがって、本明細書に論じられる実施形態は少なくとも1つの機械読取可能媒体によって運ばれる1つ以上のコードモジュールの形態にある1つ以上のソフトウエア製品を含む。コンピュータシステムのプロセッサによるかまたはプロセッサユニットによるそのようなコードの実行は、基本的に本明細書に論じられ、示される実施形態において実施される態様で、カタログ及び/またはソフトウエアのダウンロード機能のプラットフォームによる実施を可能にする。
図3Aを再び参照すれば、マイクロコントローラ16は光源信号S1によって光源54Lを制御し、また光検出器54Dから検出器信号SFを受け取って処理する。検出器信号SFは前述した力信号と同じであり、よって、以降は力信号と称される。複数の近接センサ54とマイクロコントローラ16を、前述した複数の電気配線56によって動作可能な態様で接続することができ、光学方式力センシングシステム14の一環と見なすことができる。すなわち、静電容量方式タッチスクリーン12及び1つ以上の近接センサ54のいずれもがマイクロコントローラ16に電気的に接続されて、位置信号SL及び力信号SFをマイクロコントローラに与える。
タッチスクリーンシステム10の一例の実施形態において、それぞれの力信号SFは選ばれた範囲の、例えば0〜255にわたる、カウント値を有する。一例において、0のカウント値は透明カバーシート80(またはその上の光偏向素子86)に接触している近接センサヘッド54Hを表し、255のカウント値は光偏向素子が近接センサヘッドから十分に離れている状況を表す。較正中、タッチスクリーンシステム10に力が印加されていない場合の近接センサ54からの読み値αが、指定された大きな値のタッチ力Fに対するセンサ読み値βとともに記録される。
下式は、力信号SFによって表されるデータが与えられた近接センサに対してどのように規格化されるかを、また他の近接センサにどのように適用されるかも、示す。規格化因子Nは:
N=[α−A]/[α−β]・100
で与えられる。ここで、Aは力信号SFに対する近接センサデータ、αは力Fがかかっていない場合の近接センサ読み値、βは力Fが最大の時の近接センサ読み値である。
次いで、規格化された近接センサ54の全てに対するデータの平均がとられる。さらに、データを平滑化するため、最近の3つの平均値をとることによるローリング平均工程が用いられる。下の表1はこの概念を示すに役立ち、‘Ac#n’は「アレイ列#n」を表し、‘AVG’は異なる時刻Tに対する「移動平均」を表す。開示時点において、空白の3列アレイがマイクロコントローラ16によって初期化され、値は入っていない。第1の時点中に、第1列(AC#1)に(P1で示される)全ての規格化されたセンサの平均が入る。次の時点において、P1に対するデータが第2列(AC#2)に移動され、AC#1は(P2で示される)第2の時点における全ての規格化されたセンサの平均で置き換えられる。
このプロセスがそれぞれの時点について持続する。最終値として3列のデータの平均がとられ、様々な用途のためにソフトウエアによってアクセスされる。アレイからのローリング平均は全ての列が埋められるまで無視される。パラメータPは:
P=規格化されたセンサデータ=規格化されたA+規格化されたB
+規格化されたC+規格化されたD
で与えられる。AVGに対する値は、スワイプ時に線の形態のディスプレイ画像の幅を修正するために、マイクロコントローラ16内のカスタム作図プログラムにおいて用いられる。スワイプ中、ある量の力Fが印加されると、線の幅が増加する。印加される力が小さいと、線幅は減じられる。
Figure 2016500458
本開示の実施形態例において、タッチイベントTEにともない、ある大きさのタッチ圧力またはタッチ力(圧力=F/面積)がタッチ位置TLにおいて印加される。本開示の態様は、透明カバーシート80の変位の関数としての印加力Fの相対的な大きさを含む、タッチイベントTEの発生のセンシングに向けられる。変位(または時間の経過にわたる複数の変位)の時間推移及び、したがって、タッチ力Fの時間推移も決定することができる。
すなわち、タッチ力Fの大きさも時間推移も、透明カバーシート80の撓みの大きさに基づいて近接センサ及びマイクロコントローラ16によって数量化される。力信号SFを平滑化する(例えば、フィルタリングする)、雑音を除去する及び力データを規格化するために、マイクロコントローラ16内のソフトウエアアルゴリズムが用いられる。このようにすれば、印加力Fを、システム10のグラフィカルユーザインターフェース(GUI)上のグラフィックオブジェクトの特性を操作するために位置情報と組み合わせて用いることができ、制御アプリケーションのために用いることもできる。単指イベント及び多指イベントのいずれをもモニタすることができる。力信号SFに埋め込まれた力情報を、とりわけ、選択、強調表示、スクロール、ズーム、回転及びパン、等のような、様々な動作をシステム10に実施させるために、軽打(タップ)、つまみ、回転、スワイプ、パン及び長押し動作のような、他のジェスチャベース制御の代わりに、またはこれらとともに、用いることができる。
例えば、図5A及び5Bを参照すれば、ズームベースイベントに対し、圧力(すなわち、力F)を含む単指イベントTEを、図示される家屋画像200のような、画像にズームインするために用いることができる。図5Bはズームインされた(高倍率)画像200を示す。図5Aに差し込まれたグラフは画像倍率が印加力Fにしたがってどのように変わり得るかの一例を示す。ズームアウトするには、別々の二本指イベントを用いることができ、圧力が減じられるとズームアウトする。ここでのタッチと力の組合せは、ズームをリセットするために力の減少を用いることができるから、有用である。この場合、ユーザはズームインするために単指による力で押し、次いで、ズームアウトしたければ別の指をタッチ面に当てて力Fの大きさを変える。
別の例において、システム10は、等価な機能に対して高速応答を可能にするため、長押しタッチのような、遅延ベース制御を置き換える。ディスプレイ画像200の特徴を変えるため、例えば作図アプリケーションにおいて、線の幅を修正するため、または使用中にブラシサイズ(すなわち、ペイントブラシサイズ、消しゴムサイズ)を変えるためにタッチ力Fを用いることができる。画像ベースアプリケーションに対し、写真を明るくする/暗くするかまたはコントラストを調節するために、力信号SFからの力情報を用いることができる。上で論じたように、画像アプリケーションまたはマッププログラムにおいて、力データは、パン中の画像の移動速度を、またはズーム機能中の画像拡大/縮小速度を、与えることができる。
ある動作(すなわち、ロック、ピン、クロップ)を実施するため、タッチベースデータを別のユーザジェスチャ(すなわち、ピンチ及びズーム)とともに用いることができる。ディスプレイ画像(例えば、グラフィックオブジェクト)を(表から裏に)反転させるかまたは選ばれた大きさだけ、例えば90°、回転させるために、タッチスクリーンの強押し(すなわち、比較的大きなタッチ力F)を用いることができる。図6A及び6Bを参照すれば、書籍画像200の複数のページを一度にめくるため、かなりのタッチ力FによるタッチイベントTEをスワイプジェスチャSWとともに用いることができる。スクロールイベント中の速度制御として力データを用いることができる。ゲームアプリケーションは、与えられたグラフィックオブジェクトまたは動作(例えば、コルフスイング、バットスイング、レース加速、等)に対する動作または速度のレベルの設定への有用性を見いだすであろう。図7に示されるように、メニューリスト210のサブメニューを開くためまたはリストをスクロールするために、力データを用いることができる。
図8Aはスクロールバー220を示し、スクロール位置に対応するタッチ位置において大きくなっていくタッチ力Fの印加が、未タッチスクロールバー(1)、初めに軽くタッチされたスクロールバー(2)及び力強く押されたスクロールバー(3)によって示されるように、スクロール速度を高める。図8Aの矢印は高められた移動率(速度)を示す。図8Bは、グラフィックオブジェクトが移動する速度を操作するために用いることができる、速度対圧力または力のグラフである。
図9A及び9Bは図8A及び8Bと同様であり、オブジェクトの1つの位置から別の位置への直接移動がなされ得るように印加タッチ力Fをスクロール位置の関数として離散化することができる、一例の実施形態を示す。
図10A及び10Bは、線の形態のグラフィック画像が、線幅を広げるために線の一端におけるタッチ位置TLにおいてタッチ力FTによってスワイプされる(SW)、一例の実施形態を示す。
図11は、タッチスクリーンシステム10上の1つ以上のタッチ位置(TL)におけるタッチ力の賢明な印加によってグラフィックオブジェクト200が視野(FOV)にわたってどのようにパンされ得るかを示す、ディスプレイシステム11の機能の別の例である。電子ドキュメント(すなわち、マップ、画像、等)のFOV内でFOV中心から離れた領域を、画像をその方向に移動させるために、押すことができる。押す力を強めるほど、画像は益々早くその方向に移動する。主要な方向は、矢印に示されるように、上、下、左または右であろう。
図12は、ユーザが、方向を定めるために選ばれたタッチ位置TLにタッチし、オブジェクトの回転ラックを形成している様々なグラフィックオブジェクトの回転速度を高めるために圧力を印加することができる、回転ラックアプリケーションを示す。
いくつかの場合に、用いられ得る最大タッチ力Fがあるであろう。最大タッチ力をこえるのではなく、一例において、与えられた時間内にタッチ具20が力を込めて複数回押す、ポンピング動作またはパルシング動作を用いることができる。このオプションは、ユーザが最大力印加時よりかなり高速でズームイン/アウトしたいであろう、ゲームのようなアプリケーションのために、または衛星画像において、有用であり得る。
図13は、未知のサイズの大量のデータを圧力センシング手法の制限無しにトラバースするための、タッチ位置TLにおけるポンピング動作またはパルシング動作の使用を簡略に示す。(速度ではなく)運動変換(motion translation)に直接圧力が必要とされる場合、ユーザはパルシング動作またはポンピング動作を用いて圧力を交互に増減することができる。このようにすれば、減じていく圧力は無視され、ユーザは単に圧力を印加しないことでインタラクションを終えることができる。この例において、ユーザはサイズ変更倍率を高めるため、直接圧力の精度を失うことなくより大きな倍率を与えることができる。
特定の態様及び特徴を参照して実施形態を本明細書で説明したが、これらの実施形態が望ましい原理及び応用の例示に過ぎないことは当然である。したがって、添付される特許請求の範囲の精神及び範囲を逸脱することなく、例示実施形態に数多くの改変がなされ得ること及び他の構成が案出され得ることは当然である。
10 タッチスクリーンシステム
11 ディスプレイシステム
12 静電容量方式タッチスクリーンシステム
13 ディスプレイアセンブリ
14 光学方式力センシングシステム
15,16 マイクロコントローラ
18 電池
19a プロセッサ
19b メモリ
19c デバイスドライバ
19d インターフェース回路
20 タッチ具
30 フレーム
32 フレーム側壁
33 フレーム側壁上端
34 フレーム底壁
36 開放内室
50 フレックス回路
52 フレックス回路上面
53 フレックス回路縁端
54 近接センサ
54D 光検出器
54H 近接センサヘッド
54L 光源
55,68 光
55R 偏向光
56,76 電気配線(結線)
60 ディスプレイ
61 ディスプレイコントローラ
62 ディスプレイ上面
64 ディスプレイ下面
65 ディスプレイ外端
66 間隔保持素子(スペーサ)
67 空隙
70 静電容量方式タッチスクリーン
72 静電容量方式タッチスクリーン上面
74 静電容量方式タッチスクリーン下面
80 透明カバーシート
82 透明カバーシート上面
84 透明カバーシート下面
85 透明カバーシート外端
86 光偏向素子
88 不透明カバー(ベゼル)
100 見る人
200 ディスプレイ画像
210 メニューリスト
220 スクロールバー
タッチ力
S1 光源信号
SF 力センシング信号(力信号)
SL 位置センシング信号(位置信号)
TE タッチイベント
TL タッチ位置

Claims (9)

  1. ディスプレイ画像を表示するため及びタッチイベントを検知するためのタッチスクリーンシステムにおいて、
    タッチ位置を検知して前記タッチイベントに対するタッチ位置を表す位置信号を発生するように構成された、静電容量方式タッチシステム、
    前記静電容量方式タッチシステムに対して動作可能な態様で配置された、前記タッチ位置において印加されたタッチ力を光学的に検出して前記タッチ位置において印加された前記タッチ力を表す力信号を発生するように構成された、光学方式力センシングシステム、及び
    前記静電容量方式タッチシステム及び前記光学方式力センシングシステムに電気的に接続されたマイクロコントローラ、前記マイクロコントローラは前記力信号及び前記位置信号を受け取り、前記力信号及び前記位置信号に基づいて前記表示画像の特徴を変更する、
    を備えることを特徴とするタッチスクリーンシステム。
  2. 前記光学方式力センシングシステムが、透明カバーシートに対して動作可能な態様で配置された少なくとも1つの光学方式近接センサであって、前記タッチ位置において印加された前記タッチ力による前記透明カバーシートの変位を光学的に検知し、それに応答して前記力信号を発生するように構成された少なくとも1つの光学方式近接センサを備え、
    前記光学方式近接センサのそれぞれが、
    前記透明カバーシートの下面上に配置された光偏向素子と、
    前記光偏向素子と光が通じている光源及び光検出器と、
    を有し、前記光源は、前記光偏向素子で偏向されて前記光検出器によって検出される偏向光を形成する光を放射し、前記透明カバーシートの前記変位が、前記光検出器によって検出される前記偏向光の量を変える、
    ことを特徴とする請求項1に記載のタッチスクリーンシステム。
  3. ディスプレイ画像を見るためのディスプレイシステムにおいて、
    請求項1または請求項2に記載のタッチスクリーンシステム、及び
    前記ディスプレイ画像が前記タッチスクリーンシステムを通して見えるように、前記タッチスクリーンシステムに対して動作可能な態様で配置された、ディスプレイユニット、
    を備えることを特徴とするディスプレイシステム。
  4. 前記ディスプレイユニットが、前記タッチスクリーンシステムから受け取った前記力信号及び前記位置信号に基づいて前記ディスプレイ画像の特徴を変更するように構成されることを特徴とする請求項3に記載のディスプレイユニット。
  5. ディスプレイシステム上に表示される画像の少なくとも1つの特徴を変更する方法において、
    タッチ位置におけるタッチイベントの位置を静電容量方式で検知し、それに応答して、前記タッチイベント位置を表すタッチ信号を発生する工程と、
    前記タッチイベントにともなうタッチ力を光学方式で検知し、それに応答して、前記タッチ力を表す少なくとも1つの力信号を発生する工程と、
    前記表示される画像の前記少なくとも1つの特徴を変更するために前記タッチ信号及び前記少なくとも1つの力信号を処理する工程と、
    を有してなり、
    前記光学方式で検知する工程が、前記ディスプレイシステムの透明カバーシートの変位を光学方式で測定する工程を含む、
    ことを特徴とする方法。
  6. 前記透明カバーシートの変位を光学方式で測定する工程が、前記変位によって生じる偏向光が進む光路の変化の結果としての、検出される光の量の変化を検出する工程を含むことを特徴とする請求項5に記載の方法。
  7. 前記表示される画像の前記特徴が、寸法、形状、倍率、位置、動き、色及び方位を含む特徴の群から選ばれる特徴を含むことを特徴とする請求項5または請求項6に記載の方法。
  8. 前記表示される画像が、
    複数のページを有する電子ドキュメント画像、ここで、前記表示される画像の前記少なくとも1つの特徴の変更は前記ページの変更を含む、または
    スクロール速度を有するスクロールバー、ここで、前記表示される画像の前記少なくとも1つの特徴の変更は前記スクロール速度の変更を含む、または
    幅を有する線、ここで、前記表示される画像の前記少なくとも1つの特徴の変更は前記線の前記幅の変更を含む、
    の内の1つを含むことを特徴とする請求項5〜7のいずれか1項に記載の方法。
  9. 前記タッチ力を光学方式で検知する工程が、透明カバーシートの変位を複数の光センサを用いて測定する工程を含み、前記方法が、
    前記複数の光センサからの複数の力信号を規格化する工程、及び
    2つ以上の時間枠に対して前記光センサのローリング平均をとる工程、
    をさらに含むことを特徴とする請求項5〜8のいずれか1項に記載の方法。
JP2015548036A 2012-12-17 2013-12-16 タッチ位置及びタッチ力に基づくタッチスクリーンシステム及び方法 Pending JP2016500458A (ja)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US201261738047P 2012-12-17 2012-12-17
US61/738,047 2012-12-17
PCT/US2013/075291 WO2014099728A1 (en) 2012-12-17 2013-12-16 Touch screen systems and methods based on touch location and touch force

Publications (1)

Publication Number Publication Date
JP2016500458A true JP2016500458A (ja) 2016-01-12

Family

ID=49920648

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2015548036A Pending JP2016500458A (ja) 2012-12-17 2013-12-16 タッチ位置及びタッチ力に基づくタッチスクリーンシステム及び方法

Country Status (6)

Country Link
US (1) US20140168153A1 (ja)
EP (1) EP2936286A1 (ja)
JP (1) JP2016500458A (ja)
KR (1) KR20150096701A (ja)
TW (1) TW201432539A (ja)
WO (1) WO2014099728A1 (ja)

Cited By (21)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2020518495A (ja) * 2017-01-03 2020-06-25 コーニング インコーポレイテッド 湾曲したカバーガラスとディスプレイまたはタッチパネルを有する乗り物内装システムおよびその形成方法
KR20210048196A (ko) * 2019-10-23 2021-05-03 엘지디스플레이 주식회사 근접 센서를 포함하는 터치 표시장치
JP2021523458A (ja) * 2018-05-07 2021-09-02 ベーア−ヘラー サーモコントロール ゲーエムベーハー 車両用操作装置
US11292343B2 (en) 2016-07-05 2022-04-05 Corning Incorporated Cold-formed glass article and assembly process thereof
US11331886B2 (en) 2016-06-28 2022-05-17 Corning Incorporated Laminating thin strengthened glass to curved molded plastic surface for decorative and display cover application
US11332011B2 (en) 2017-07-18 2022-05-17 Corning Incorporated Cold forming of complexly curved glass articles
US11384001B2 (en) 2016-10-25 2022-07-12 Corning Incorporated Cold-form glass lamination to a display
US11459268B2 (en) 2017-09-12 2022-10-04 Corning Incorporated Tactile elements for deadfronted glass and methods of making the same
US11518146B2 (en) 2018-07-16 2022-12-06 Corning Incorporated Method of forming a vehicle interior system
US11550148B2 (en) 2017-11-30 2023-01-10 Corning Incorporated Vacuum mold apparatus, systems, and methods for forming curved mirrors
US11597672B2 (en) 2016-03-09 2023-03-07 Corning Incorporated Cold forming of complexly curved glass articles
US11660963B2 (en) 2017-09-13 2023-05-30 Corning Incorporated Curved vehicle displays
US11685685B2 (en) 2019-07-31 2023-06-27 Corning Incorporated Method and system for cold-forming glass
US11685684B2 (en) 2017-05-15 2023-06-27 Corning Incorporated Contoured glass articles and methods of making the same
US11718071B2 (en) 2018-03-13 2023-08-08 Corning Incorporated Vehicle interior systems having a crack resistant curved cover glass and methods for forming the same
US11745588B2 (en) 2017-10-10 2023-09-05 Corning Incorporated Vehicle interior systems having a curved cover glass with improved reliability and methods for forming the same
US11767250B2 (en) 2017-11-30 2023-09-26 Corning Incorporated Systems and methods for vacuum-forming aspheric mirrors
US11768369B2 (en) 2017-11-21 2023-09-26 Corning Incorporated Aspheric mirror for head-up display system and methods for forming the same
US11772491B2 (en) 2017-09-13 2023-10-03 Corning Incorporated Light guide-based deadfront for display, related methods and vehicle interior systems
US11772361B2 (en) 2020-04-02 2023-10-03 Corning Incorporated Curved glass constructions and methods for forming same
US11899865B2 (en) 2017-01-03 2024-02-13 Corning Incorporated Vehicle interior systems having a curved cover glass and a display or touch panel and methods for forming the same

Families Citing this family (71)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8487759B2 (en) 2009-09-30 2013-07-16 Apple Inc. Self adapting haptic device
US9417754B2 (en) 2011-08-05 2016-08-16 P4tents1, LLC User interface system, method, and computer program product
WO2013169842A2 (en) 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for selecting object within a group of objects
AU2013259606B2 (en) 2012-05-09 2016-06-02 Apple Inc. Device, method, and graphical user interface for displaying additional information in response to a user contact
CN104487928B (zh) 2012-05-09 2018-07-06 苹果公司 用于响应于手势而在显示状态之间进行过渡的设备、方法和图形用户界面
WO2013169849A2 (en) 2012-05-09 2013-11-14 Industries Llc Yknots Device, method, and graphical user interface for displaying user interface objects corresponding to an application
CN109298789B (zh) 2012-05-09 2021-12-31 苹果公司 用于针对激活状态提供反馈的设备、方法和图形用户界面
AU2013259637B2 (en) 2012-05-09 2016-07-07 Apple Inc. Device, method, and graphical user interface for selecting user interface objects
WO2013169865A2 (en) 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for moving a user interface object based on an intensity of a press input
WO2013169851A2 (en) 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for facilitating user interaction with controls in a user interface
WO2013169843A1 (en) 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for manipulating framed graphical objects
EP2847661A2 (en) 2012-05-09 2015-03-18 Apple Inc. Device, method, and graphical user interface for moving and dropping a user interface object
CN107977084B (zh) 2012-05-09 2021-11-05 苹果公司 用于针对在用户界面中执行的操作提供触觉反馈的方法和装置
WO2013169875A2 (en) 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for displaying content associated with a corresponding affordance
WO2013169845A1 (en) 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for scrolling nested regions
US9619084B2 (en) * 2012-10-04 2017-04-11 Corning Incorporated Touch screen systems and methods for sensing touch screen displacement
WO2014105279A1 (en) 2012-12-29 2014-07-03 Yknots Industries Llc Device, method, and graphical user interface for switching between user interfaces
WO2014105275A1 (en) 2012-12-29 2014-07-03 Yknots Industries Llc Device, method, and graphical user interface for forgoing generation of tactile output for a multi-contact gesture
AU2013368443B2 (en) 2012-12-29 2016-03-24 Apple Inc. Device, method, and graphical user interface for transitioning between touch input to display output relationships
EP2939096B1 (en) 2012-12-29 2019-08-28 Apple Inc. Device, method, and graphical user interface for determining whether to scroll or select contents
CN105264479B (zh) 2012-12-29 2018-12-25 苹果公司 用于对用户界面分级结构进行导航的设备、方法和图形用户界面
WO2015047372A1 (en) 2013-09-30 2015-04-02 Pearl Capital Developments Llc Magnetic actuators for haptic response
US9317118B2 (en) 2013-10-22 2016-04-19 Apple Inc. Touch surface for simulating materials
US10276001B2 (en) 2013-12-10 2019-04-30 Apple Inc. Band attachment mechanism with haptic response
US10545604B2 (en) * 2014-04-21 2020-01-28 Apple Inc. Apportionment of forces for multi-touch input devices of electronic devices
KR102019505B1 (ko) 2014-09-02 2019-09-06 애플 인크. 햅틱 통지
US10353467B2 (en) 2015-03-06 2019-07-16 Apple Inc. Calibration of haptic devices
US9632664B2 (en) 2015-03-08 2017-04-25 Apple Inc. Devices, methods, and graphical user interfaces for manipulating user interface objects with visual and/or haptic feedback
US10048757B2 (en) 2015-03-08 2018-08-14 Apple Inc. Devices and methods for controlling media presentation
US9645732B2 (en) 2015-03-08 2017-05-09 Apple Inc. Devices, methods, and graphical user interfaces for displaying and using menus
US10095396B2 (en) 2015-03-08 2018-10-09 Apple Inc. Devices, methods, and graphical user interfaces for interacting with a control object while dragging another object
US9990107B2 (en) 2015-03-08 2018-06-05 Apple Inc. Devices, methods, and graphical user interfaces for displaying and using menus
US9785305B2 (en) 2015-03-19 2017-10-10 Apple Inc. Touch input cursor manipulation
US9639184B2 (en) 2015-03-19 2017-05-02 Apple Inc. Touch input cursor manipulation
US20170045981A1 (en) 2015-08-10 2017-02-16 Apple Inc. Devices and Methods for Processing Touch Inputs Based on Their Intensities
US10152208B2 (en) 2015-04-01 2018-12-11 Apple Inc. Devices and methods for processing touch inputs based on their intensities
AU2016100399B4 (en) 2015-04-17 2017-02-02 Apple Inc. Contracting and elongating materials for providing input and output for an electronic device
JP2016207128A (ja) * 2015-04-28 2016-12-08 富士通株式会社 入力装置、及び、電子機器
US9860451B2 (en) 2015-06-07 2018-01-02 Apple Inc. Devices and methods for capturing and interacting with enhanced digital images
US10346030B2 (en) 2015-06-07 2019-07-09 Apple Inc. Devices and methods for navigating between user interfaces
US9891811B2 (en) 2015-06-07 2018-02-13 Apple Inc. Devices and methods for navigating between user interfaces
US10200598B2 (en) 2015-06-07 2019-02-05 Apple Inc. Devices and methods for capturing and interacting with enhanced digital images
US9830048B2 (en) 2015-06-07 2017-11-28 Apple Inc. Devices and methods for processing touch inputs with instructions in a web page
US10248308B2 (en) 2015-08-10 2019-04-02 Apple Inc. Devices, methods, and graphical user interfaces for manipulating user interfaces with physical gestures
US9880735B2 (en) 2015-08-10 2018-01-30 Apple Inc. Devices, methods, and graphical user interfaces for manipulating user interface objects with visual and/or haptic feedback
US10235035B2 (en) 2015-08-10 2019-03-19 Apple Inc. Devices, methods, and graphical user interfaces for content navigation and manipulation
US10416800B2 (en) * 2015-08-10 2019-09-17 Apple Inc. Devices, methods, and graphical user interfaces for adjusting user interface objects
WO2017044618A1 (en) 2015-09-08 2017-03-16 Apple Inc. Linear actuators for use in electronic devices
KR102426695B1 (ko) * 2015-10-20 2022-07-29 삼성전자주식회사 화면 출력 방법 및 이를 지원하는 전자 장치
TWI579534B (zh) 2015-12-16 2017-04-21 和碩聯合科技股份有限公司 壓力感測系統
US20170220241A1 (en) * 2016-01-29 2017-08-03 Onshape Inc. Force touch zoom selection
US10039080B2 (en) 2016-03-04 2018-07-31 Apple Inc. Situationally-aware alerts
US10268272B2 (en) 2016-03-31 2019-04-23 Apple Inc. Dampening mechanical modes of a haptic actuator using a delay
KR102565951B1 (ko) * 2016-07-22 2023-08-11 삼성디스플레이 주식회사 터치 압력 감지 장치
US10152182B2 (en) 2016-08-11 2018-12-11 Microsoft Technology Licensing, Llc Touch sensor having jumpers
KR20180026983A (ko) * 2016-09-05 2018-03-14 삼성전자주식회사 전자 장치 및 그 제어 방법
US10712850B2 (en) 2017-01-03 2020-07-14 Corning Incorporated Vehicle interior systems having a curved cover glass and a display or touch panel and methods for forming the same
US10622538B2 (en) 2017-07-18 2020-04-14 Apple Inc. Techniques for providing a haptic output and sensing a haptic input using a piezoelectric body
CN110542445A (zh) 2018-05-29 2019-12-06 义明科技股份有限公司 光学感测模块
TWI676124B (zh) * 2018-05-29 2019-11-01 義明科技股份有限公司 光學感測模組
US10691211B2 (en) 2018-09-28 2020-06-23 Apple Inc. Button providing force sensing and/or haptic output
US10599223B1 (en) 2018-09-28 2020-03-24 Apple Inc. Button providing force sensing and/or haptic output
US10845913B1 (en) * 2019-05-22 2020-11-24 International Business Machines Corporation Touch sensitivity for robotically operated displays
US11380470B2 (en) 2019-09-24 2022-07-05 Apple Inc. Methods to control force in reluctance actuators based on flux related parameters
EP4066089A1 (en) * 2019-11-25 2022-10-05 FlatFrog Laboratories AB A touch-sensing apparatus
KR102414831B1 (ko) * 2020-07-07 2022-06-30 삼성전기주식회사 터치 센싱 장치 및 이를 구비하는 전자 기기
KR102434637B1 (ko) * 2020-12-16 2022-08-19 (재)한국나노기술원 접촉 압력 및 가스 농도 감지 장치
US11977683B2 (en) 2021-03-12 2024-05-07 Apple Inc. Modular systems configured to provide localized haptic feedback using inertial actuators
US11775021B2 (en) 2021-08-17 2023-10-03 Apple Inc. Moisture-insensitive optical touch sensors
US11809631B2 (en) 2021-09-21 2023-11-07 Apple Inc. Reluctance haptic engine for an electronic device
DE102021124731A1 (de) * 2021-09-24 2023-03-30 Valeo Schalter Und Sensoren Gmbh Kalibrierung einer Benutzereingabevorrichtung und Detektion einer Betätigung einer Benutzereingabevorrichtung eines Kraftfahrzeugs

Family Cites Families (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4686443A (en) 1986-07-25 1987-08-11 The United States Of America As Represented By The Secretary Of The Interior Constant current, fast and float rate, variable hysteresis battery charger
DE68928987T2 (de) 1989-10-02 1999-11-11 Koninkl Philips Electronics Nv Datenverarbeitungssystem mit einer Berührungsanzeige und einem Digitalisiertablett, beide integriert in einer Eingabevorrichtung
US5650597A (en) 1995-01-20 1997-07-22 Dynapro Systems, Inc. Capacitive touch sensor
US6825833B2 (en) 2001-11-30 2004-11-30 3M Innovative Properties Company System and method for locating a touch on a capacitive touch screen
US7333092B2 (en) 2002-02-25 2008-02-19 Apple Computer, Inc. Touch pad for handheld device
WO2005026938A2 (en) * 2003-09-12 2005-03-24 O-Pen Aps A system and method of determining a position of a radiation scattering/reflecting element
EP2034287A1 (en) * 2007-09-10 2009-03-11 Nederlandse Organisatie voor Toegepast-Natuuurwetenschappelijk Onderzoek TNO Optical sensor for measuring a force distribution
US8421483B2 (en) * 2008-06-13 2013-04-16 Sony Ericsson Mobile Communications Ab Touch and force sensing for input devices
US20100103140A1 (en) * 2008-10-27 2010-04-29 Sony Ericsson Mobile Communications Ab Touch sensitive device using optical gratings
US8253712B2 (en) * 2009-05-01 2012-08-28 Sony Ericsson Mobile Communications Ab Methods of operating electronic devices including touch sensitive interfaces using force/deflection sensing and related devices and computer program products
US9223431B2 (en) * 2010-09-17 2015-12-29 Blackberry Limited Touch-sensitive display with depression detection and method
US9513737B2 (en) * 2010-09-17 2016-12-06 Blackberry Limited Touch-sensitive display with optical sensor and method
CN102959494B (zh) * 2011-06-16 2017-05-17 赛普拉斯半导体公司 具有电容式传感器的光学导航模块

Cited By (31)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11597672B2 (en) 2016-03-09 2023-03-07 Corning Incorporated Cold forming of complexly curved glass articles
US11331886B2 (en) 2016-06-28 2022-05-17 Corning Incorporated Laminating thin strengthened glass to curved molded plastic surface for decorative and display cover application
US11338556B2 (en) 2016-06-28 2022-05-24 Corning Incorporated Laminating thin strengthened glass to curved molded plastic surface for decorative and display cover application
US11292343B2 (en) 2016-07-05 2022-04-05 Corning Incorporated Cold-formed glass article and assembly process thereof
US11850942B2 (en) 2016-07-05 2023-12-26 Corning Incorporated Cold-formed glass article and assembly process thereof
US11607958B2 (en) 2016-07-05 2023-03-21 Corning Incorporated Cold-formed glass article and assembly process thereof
US11384001B2 (en) 2016-10-25 2022-07-12 Corning Incorporated Cold-form glass lamination to a display
US11899865B2 (en) 2017-01-03 2024-02-13 Corning Incorporated Vehicle interior systems having a curved cover glass and a display or touch panel and methods for forming the same
US11586306B2 (en) 2017-01-03 2023-02-21 Corning Incorporated Vehicle interior systems having a curved cover glass and display or touch panel and methods for forming the same
JP2020518495A (ja) * 2017-01-03 2020-06-25 コーニング インコーポレイテッド 湾曲したカバーガラスとディスプレイまたはタッチパネルを有する乗り物内装システムおよびその形成方法
US11685684B2 (en) 2017-05-15 2023-06-27 Corning Incorporated Contoured glass articles and methods of making the same
US11332011B2 (en) 2017-07-18 2022-05-17 Corning Incorporated Cold forming of complexly curved glass articles
US11459268B2 (en) 2017-09-12 2022-10-04 Corning Incorporated Tactile elements for deadfronted glass and methods of making the same
US11713276B2 (en) 2017-09-12 2023-08-01 Corning Incorporated Tactile elements for deadfronted glass and methods of making the same
US12012354B2 (en) 2017-09-12 2024-06-18 Corning Incorporated Deadfront for displays including a touch panel on decorative glass and related methods
US11660963B2 (en) 2017-09-13 2023-05-30 Corning Incorporated Curved vehicle displays
US11772491B2 (en) 2017-09-13 2023-10-03 Corning Incorporated Light guide-based deadfront for display, related methods and vehicle interior systems
US11919396B2 (en) 2017-09-13 2024-03-05 Corning Incorporated Curved vehicle displays
US11745588B2 (en) 2017-10-10 2023-09-05 Corning Incorporated Vehicle interior systems having a curved cover glass with improved reliability and methods for forming the same
US11768369B2 (en) 2017-11-21 2023-09-26 Corning Incorporated Aspheric mirror for head-up display system and methods for forming the same
US11767250B2 (en) 2017-11-30 2023-09-26 Corning Incorporated Systems and methods for vacuum-forming aspheric mirrors
US11550148B2 (en) 2017-11-30 2023-01-10 Corning Incorporated Vacuum mold apparatus, systems, and methods for forming curved mirrors
US11718071B2 (en) 2018-03-13 2023-08-08 Corning Incorporated Vehicle interior systems having a crack resistant curved cover glass and methods for forming the same
JP2021523458A (ja) * 2018-05-07 2021-09-02 ベーア−ヘラー サーモコントロール ゲーエムベーハー 車両用操作装置
JP7496317B2 (ja) 2018-05-07 2024-06-06 ベーア-ヘラー サーモコントロール ゲーエムベーハー 車両用操作装置
US11518146B2 (en) 2018-07-16 2022-12-06 Corning Incorporated Method of forming a vehicle interior system
US11685685B2 (en) 2019-07-31 2023-06-27 Corning Incorporated Method and system for cold-forming glass
KR102600932B1 (ko) 2019-10-23 2023-11-10 엘지디스플레이 주식회사 근접 센서를 포함하는 터치 표시장치
KR20210048196A (ko) * 2019-10-23 2021-05-03 엘지디스플레이 주식회사 근접 센서를 포함하는 터치 표시장치
US11772361B2 (en) 2020-04-02 2023-10-03 Corning Incorporated Curved glass constructions and methods for forming same
US12011914B2 (en) 2020-04-02 2024-06-18 Corning Incorporated Curved glass constructions and methods for forming same

Also Published As

Publication number Publication date
KR20150096701A (ko) 2015-08-25
US20140168153A1 (en) 2014-06-19
EP2936286A1 (en) 2015-10-28
TW201432539A (zh) 2014-08-16
WO2014099728A1 (en) 2014-06-26

Similar Documents

Publication Publication Date Title
JP2016500458A (ja) タッチ位置及びタッチ力に基づくタッチスクリーンシステム及び方法
US10705562B2 (en) Transitioning between modes of input
US10732825B2 (en) Natural input for spreadsheet actions
US8525776B2 (en) Techniques for controlling operation of a device with a virtual touchscreen
JP6247651B2 (ja) メニュー操作方法及びこれを行うタッチ入力装置を含むメニュー操作装置
US8446389B2 (en) Techniques for creating a virtual touchscreen
US8386963B2 (en) Virtual inking using gesture recognition
US7924271B2 (en) Detecting gestures on multi-event sensitive devices
EP2666075B1 (en) Light-based finger gesture user interface
KR102669855B1 (ko) 터치 스크린의 병합된 플로팅 픽셀들
US10331219B2 (en) Identification and use of gestures in proximity to a sensor
JP6062913B2 (ja) タッチに基づいた対象動作制御システム及びその方法
US20160011715A1 (en) User interface for a touch screen
US8775958B2 (en) Assigning Z-order to user interface elements
US20080165255A1 (en) Gestures for devices having one or more touch sensitive surfaces
JP2014529138A (ja) タッチ入力を用いたマルチセル選択
KR101063939B1 (ko) 사용자 인터페이스 제어 장치 및 구현 방법
JP6401220B2 (ja) タッチに基づいた対象動作制御システム及びその方法
KR20140086805A (ko) 전자 장치, 그 제어 방법 및 컴퓨터 판독가능 기록매체
TWM511077U (zh) 觸控電子裝置