JP2013520727A - オンスクリーン入力を作るためのオフスクリーン・ジェスチャー - Google Patents

オンスクリーン入力を作るためのオフスクリーン・ジェスチャー Download PDF

Info

Publication number
JP2013520727A
JP2013520727A JP2012554008A JP2012554008A JP2013520727A JP 2013520727 A JP2013520727 A JP 2013520727A JP 2012554008 A JP2012554008 A JP 2012554008A JP 2012554008 A JP2012554008 A JP 2012554008A JP 2013520727 A JP2013520727 A JP 2013520727A
Authority
JP
Japan
Prior art keywords
bezel
menu
gesture
input
readable storage
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2012554008A
Other languages
English (en)
Other versions
JP5883400B2 (ja
JP2013520727A5 (ja
Inventor
ヒンクリー，ケネス・ピー
浩司 矢谷
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Microsoft Corp
Original Assignee
Microsoft Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Microsoft Corp filed Critical Microsoft Corp
Publication of JP2013520727A publication Critical patent/JP2013520727A/ja
Publication of JP2013520727A5 publication Critical patent/JP2013520727A5/ja
Application granted granted Critical
Publication of JP5883400B2 publication Critical patent/JP5883400B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/0483—Interaction with page-structured environments, e.g. book metaphor
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04883—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/033—Indexing scheme relating to G06F3/033
    • G06F2203/0339—Touch strips, e.g. orthogonal touch strips to control cursor movement or scrolling; single touch strip to adjust parameter or to implement a row of soft keys
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/048—Indexing scheme relating to G06F3/048
    • G06F2203/04808—Several contacts: gestures triggering a specific function, e.g. scrolling, zooming, right-click, when the user establishes several contacts with the surface simultaneously; e.g. using several fingers or a combination of fingers and pen

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • User Interface Of Digital Computer (AREA)
  • Position Input By Displaying (AREA)

Abstract

タッチ・ディスプレイ用ベゼル・ジェスチャーについて記載する。少なくとも一部の実施形態では、デバイスのベゼルが、いわゆるベゼル・ジェスチャーの使用によってアクセス可能な機能を拡張するために使用される。少なくとも一部の実施形態では、オフスクリーン・モーションをベゼルによって使用して、ベゼル・ジェスチャーによってスクリーン入力を作ることができる。ベゼル・ジェスチャーは、１本指のベゼル・ジェスチャー、複数指／同じ手のベゼル・ジェスチャー、および／または複数指、異なる手のベゼル・ジェスチャーを含む。
【選択図】図１

Description

従来技術
[0001] タッチ・ディスプレイのような、ユーザーが関与可能なディスプレイ(user-engageable display)を有するデバイスの設計者に直面し続ける課題の１つは、ユーザーに拡張機能を与えつつも、デバイスのユーザー・インターフェースの「クローム」の一部としてその機能を永続的に明示することを必要としないで済ませることである。
これは、大きなスクリーンまたは複数のスクリーンを有するデバイスだけでなく、タブレットＰＣ、ハンドヘルド・デバイス、小型のマルチスクリーン・デバイス等のような、更に小さいフットプリントを有するデバイスのコンテキストにおいても当てはまることである。
[0002] この摘要は、詳細な説明の章において以下で更に説明する概念から選択したものを紹介するために、設けられている。この摘要は、特許請求する主題の主要な特徴や必須の特徴を特定することを意図するのではなく、特許請求する主題の範囲を判断するときの補助として使用されることを意図するのでもない。
[0003] タッチ・ディスプレイのためのベゼル・ジェスチャーについて記載する。少なくとも一部の実施形態では、デバイスのベゼルを使用して、いわゆるベゼル・ジェスチャーの使用によってアクセス可能な機能を拡張する。少なくとも一部の実施形態では、オフスクリーン・モーションを、ベゼルに基づいて使用し、ベゼル・ジェスチャーを介してスクリーン入力を作ることができる。ベゼル・ジェスチャーは、１本指のベゼル・ジェスチャー、複数の指／同じ手のベゼル・ジェスチャー、および／または複数の指、異なる手のベゼル・ジェスチャーを含むことができる。
[0004] 添付図面を参照しながら詳細な説明を記載する。図面において、参照番号の左側にある桁（１つまたは複数）は、その参照番号が最初に出てくる図を特定する。説明および図面の異なる時点で同じ参照番号が使用されている場合、同様の項目または同一の項目を示すことができる。
図１は、１つ以上の実施形態による実施態様例における環境の図である。 図２は、図１を更に詳細に示す実施形態例におけるシステムの図である。 図３は、１つ以上の実施形態による計算デバイス例を示す。 図４は、１つ以上の実施形態による方法におけるステップを記述する流れ図である。 図５は、１つ以上の実施形態による方法におけるステップを記述する流れ図である。 図６は、１つ以上の実施形態による計算デバイス例を示す。 図７は、１つ以上の実施形態による計算デバイス例を示す。 図８は、１つ以上の実施形態による計算デバイス例を示す。 図９は、１つ以上の実施形態による計算デバイス例を示す。 図１０は、１つ以上の実施形態による方法におけるステップを記述する流れ図である。 図１１は、１つ以上の実施形態による方法におけるステップを記述する流れ図である。 図１２は、１つ以上の実施形態による計算デバイス例を示す。 図１３は、１つ以上の実施形態による計算デバイス例を示す。 図１４は、１つ以上の実施形態による計算デバイス例を示す。 図１５は、１つ以上の実施形態による方法におけるステップを記述する流れ図である。 図１６は、１つ以上の実施形態による方法におけるステップを記述する流れ図である。 図１７は、１つ以上の実施形態による計算デバイス例を示す。 図１８は、１つ以上の実施形態による方法におけるステップを記述する流れ図である。 図１９は、１つ以上の実施形態による計算デバイス例を示す。 図２０は、１つ以上の実施形態による方法におけるステップを記述する流れ図である。 図２１は、１つ以上の実施形態による計算デバイス例を示す。 図２２は、１つ以上の実施形態による計算デバイス例を示す。 図２３は、１つ以上の実施形態による計算デバイス例を示す。 図２４は、１つ以上の実施形態による計算デバイス例を示す。 図２５は、１つ以上の実施形態による方法におけるステップを記述する流れ図である。 図２６は、１つ以上の実施形態による方法におけるステップを記述する流れ図である。 図２７は、１つ以上の実施形態による計算デバイス例を示す。 図２８は、１つ以上の実施形態による計算デバイス例を示す。 図２９は、１つ以上の実施形態による計算デバイス例を示す。 図３０は、１つ以上の実施形態による方法におけるステップを記述する流れ図である。 図３１は、１つ以上の実施形態による方法におけるステップを記述する流れ図である。 図３２は、１つ以上の実施形態による方法におけるステップを記述する流れ図である。 図３３は、本明細書において記載する種々の実施形態を実現するために利用することができる計算デバイス例を示す。
全体像
[0038] タッチ・ディスプレイのためのベゼル・ジェスチャーについて記載する。少なくとも一部の実施形態では、デバイスのベゼルを使用して、いわゆるベゼル・ジェスチャーの使用によってアクセス可能な機能を拡張する。少なくとも一部の実施形態では、オフスクリーン・モーションを、ベゼルに基づいて使用し、ベゼル・ジェスチャーを介してスクリーン入力を作ることができる。ベゼル・ジェスチャーは、１本指のベゼル・ジェスチャー、複数の指／同じ手のベゼル・ジェスチャー、および／または複数の指、異なる手のベゼル・ジェスチャーを含むことができる。
[0039] 以下の論述では、計算デバイスにおいて機能を起動および／または実現するために、ベゼル・ジェスチャー、またはベゼル・ジェスチャーと関連したジェスチャーを伴う種々の異なる実施態様について説明する。このように、ユーザーは、効率的そして直感的に、計算デバイスの拡張機能に容易にアクセスすることができる。
[0040] 以下の論述では、本明細書において記載されるジェスチャー技法を採用するように動作可能な環境例について最初に説明する。次いで、前述の環境例および他の環境において採用することができる、ジェスチャーおよび手順の図示例について説明する。したがって、この環境例は、ジェスチャー例を行うことに限定されるのではなく、ジェスチャーはこの環境例における実施態様に限定されるのではない。
環境例
[0041] 図１は、本明細書において記載するベゼル・ジェスチャーおよび他の技法を採用するように動作可能な実施態様例における環境１００の図である。図示されている環境１００は、種々の方法で構成することができる計算デバイス１０２の一例を含む。例えば、計算デバイス１０２は、図２に関係付けて更に説明するように、従前からのコンピューター（例えば、デスクトップ・パーソナル・コンピューター、ラップトップ・コンピューター等）、移動局、娯楽機器、テレビジョンに通信可能に結合されているセット・トップ・ボックス、ワイヤレス・フォン、ネットブック、ゲーム・コンソール、ハンドヘルド・デバイス等として構成することができる。つまり、計算デバイス１０２は、相当なメモリーおよびプロセッサー・リソースを有する最大リソース・デバイス（例えば、パーソナル・コンピューター、ゲーム・コンソール）から、メモリーおよび／または処理リソースが制限された低リソース・デバイス（例えば、従前からのセット・トップ・ボックス、ハンドヘルド・ゲーム・コンソール）までの範囲をなすことができる。また、計算デバイス１０２は、計算デバイス１０２に、以下で説明するような１つ以上の動作を実行させるソフトウェアも含む。
[0042] 計算デバイス１０２は、このデバイスの筐体の一部をなすベゼル１０３を含む。このベゼルは、以下ではディスプレイ・デバイス１０８とも呼ばれる、デバイスのディスプレイに隣接する枠構造で構成されている。計算デバイス１０２は、ジェスチャー・モジュール１０４と、このジェスチャー・モジュール１０４の一部をなすベゼル・ジェスチャー・モジュール１０５とを含む。これらのジェスチャー・モジュールは、任意の適したタイプのハードウェア、ソフトウェア、ファームウェア、またはその組み合わせと共に実現することができる。少なくとも一部の実施形態では、ジェスチャー・モジュールは、何らかのタイプの有形のコンピューター読み取り可能媒体上に存在するソフトウェアで実現される。この媒体の例については、以下で示す。
[0043] ジェスチャー・モジュール１０４およびベゼル・ジェスチャー・モジュール１０５は、それぞれ、ジェスチャーおよびベゼル・ジェスチャーを認識する機能を表し、ジェスチャーに対応する動作を実行させる。ジェスチャーは、種々の異なる方法で、モジュール１０４、１０５によって認識することができる。例えば、ジェスチャー・モジュール１０４は、タッチスクリーン機能を使用して、計算デバイス１０２のディスプレイ・デバイス１０８に近接するユーザーの手１０６ａの指のようなタッチ入力を認識するように構成することができる。加えて、ベゼル・ジェスチャー・モジュール１０５は、ベゼル１０３上またはその近くでジェスチャーを開始しディスプレイ１０８上に進むユーザーの手１０６ｂの指のような、タッチ入力を認識するように構成することができる。任意の適した技術を利用して、ベゼル１０３上またはその近くで入力を検知することができる。例えば、少なくとも一部の実施形態では、ディスプレイ・デバイス１０８と関連したディジタイザーまたは検知エレメントが、ベゼル１０３の下に広がることができる。この場合、容量場技術のような技術、およびその他の技術を利用して、ベゼル１０３上またはその近くにおけるユーザーの入力を感知することができる。
[0044] 代わりにまたは加えて、ディスプレイ・デバイス１０８がベゼル１０３の下に広がらず、ベゼルと同一平面をなす実施形態では、ベゼル・ジェスチャー・モジュール１０５は、ユーザーの指がベゼル１０３からディスプレイ・デバイス１０８上に現れるにつれて、ユーザーの指の変化するコンタクト・プロファイルを検出することができる。代わりにまたは加えて、ユーザーのタッチ・プロファイルの重心を利用する手法を利用して、ベゼル・ジェスチャーを示唆する、重心コンタクトの変化を検出することができる。更に、指紋検知の技法を採用することもできる。具体的には、検知基板(sensing substrate)が、ディスプレイに触れている１本または複数の指の***を判定できる程に敏感である場合、この指（１本または複数）の向き、および指紋がベゼルによって切り取られた(clip)という事実を検出することができる。言うまでもないが、ベゼル１０３に対するユーザーの入力を検知するためには、任意の数の異なる技法を利用することができる。また、タッチ入力は、ジェスチャー・モジュール１０４、１０５によって認識される他のタッチ入力から、このタッチ入力を差別するために使用可能な属性（例えば、動き、選択点等）を含むものとして認識することもできる。次いで、この差別は、タッチ入力からジェスチャーを特定する、したがってジェスチャーの識別に基づいて実行される動作を特定する基準としての役割を果たすことができる。これによって、ベゼルから開始してスクリーン上に入ったジェスチャーは、一般に、オンスクリーン・コンテンツにアクセスする他のうわべだけ同様のジェスチャーから区別できるという総合的な利点が得られる。何故なら、ユーザーの意図がスクリーン上の何かと相互作用することであるならば、ユーザーが部分的にまたは完全にオフスクリーンで開始する彼らの指を位置付ける理由がないからである。したがって、スクリーン境界に近いオブジェクトに対してであっても、通常の直接操作ジェスチャーが可能であることに変わりなく、ベゼル・ジェスチャーと干渉することはない。そしてその逆も成り立つ。
[0045] 例えば、ユーザーの手１０６ａの指が、ディスプレイ・デバイス１０８によって表示されている画像１１２を選択する（１１０）ように図示されている。画像１１２の選択１１０、およびユーザーの手１０６ａの指のその後の動きは、ジェスチャー・モジュール１０４によって認識することができる。次いで、ジェスチャー・モジュール１０４は、画像１１２の位置を、ユーザーの手１０６ａの指がディスプレイ・デバイス１０８から持ち上げられたディスプレイ内の位置に変化させるための「ドラッグ・アンド・ドロップ」動作を示すものとして、この認識された動きを特定することができる。つまり、画像の選択を記述するタッチ入力の認識、選択点の他の位置への移動、次いでユーザーの手１０６ａの指の持ち上げは、ドラッグ・アンド・ドロップ動作を開始させるジェスチャー（例えば、ドラッグ・アンド・ドロップ・ジェスチャー）を特定するために用いることができる。
[0046] １つのタイプの入力（既に記載したドラッグ・アンド・ドロップ・ジェスチャーのようなタッチ・ジェスチャー）や、複数のタイプの入力を伴うジェスチャーというような、種々の異なるタイプのジェスチャーをジェスチャー・モジュール１０４、１０５によって認識することができる。例えば、モジュール１０４、１０５は、１本指のジェスチャーおよびベゼル・ジェスチャー、複数の指／同じ手のジェスチャーおよびベゼル・ジェスチャー、および／または複数の指／異なる手のジェスチャーおよびベゼル・ジェスチャーを認識するために利用することができる。
[0047] 例えば、計算デバイス１０２は、タッチ入力（例えば、ユーザーの手１０６ａ、１０６ｂの１本以上の指によって与えられる）とスタイラス入力（例えば、スタイラス１１６によって与えられる）を検出し、これらの間で差別するように構成することができる。この差別は、ユーザーの手１０６の指によって接触されたディスプレイ・デバイス１０８の量に対するスタイラス１１６によって接触されたディスプレイ・デバイス１０８の量を検出することによってというように、種々の方法で行うことができる。
[0048] このように、ジェスチャー・モジュール１０４、１０５は、スタイラスとタッチ入力との間の分割(division)、および異なるタイプのタッチ入力の認識および利用によって、種々の異なるジェスチャーをサポートすることができる。
[0049] したがって、ジェスチャー・モジュール１０４，１０５は、種々の異なるジェスチャーをサポートすることができる。ここで記載されるジェスチャーの例には、１本指のジェスチャー１１８、１本指のベゼル・ジェスチャー１２０、複数指／同じ手のジェスチャー１２２、複数指／同じ手のベゼル・ジェスチャー１２４、複数指／異なる手のジェスチャー１２６、および複数指／異なる手のベゼル・ジェスチャー１２８が含まれる。これらの異なるタイプのベゼル・ジェスチャーの各々について、以下で説明する。
[0050] 図２は、図１のジェスチャー・モジュール１０４およびベゼル・ジェスチャー・モジュール１０５を、複数のデバイスが中央計算デバイスを介して相互接続されている環境において実現されたものとして示すシステム例を表す。中央計算デバイスは、複数のデバイスに対してローカルであってもよく、または複数のデバイスから離れて位置付けられていてもよい。一実施形態では、中央計算デバイスは「クラウド」サーバー・ファームであり、ネットワークまたはインターネットまたは他の手段を介して複数のデバイスに接続されている１つ以上のサーバー・コンピューターを含む。
[0051] 一実施形態では、この相互接続アーキテクチャによって、複数のデバイスにわたって機能を配信し(deliver)、複数のデバイスのユーザーに共通でシームレスな体験を提供することが可能になる。複数のデバイスの各々は、異なる物理的要件および能力を有していてもよく、中央計算デバイスは、当該デバイスにとって特注でありしかも全てのデバイスに共通である体験のデバイスへの配信を可能にするプラットフォームを使用する。一実施形態では、ある「クラス」のターゲット・デバイスが作られ、体験はこの包括的なクラスのデバイスに対して特注される。デバイスのクラスは、そのデバイスの物理的特徴または用法あるいは他の共通する特性によって定めることができる。例えば、前述のように、計算デバイス１０２は、移動体２０２、コンピューター２０４、およびテレビジョン２０６の使用に対するように、種々の異なる方法で構成することができる。これらの構成の各々は、概略的に対応するスクリーン・サイズを有し、したがって、計算デバイス１０２は、これらのデバイス・クラスの１つとして、このシステム例２００において構成することができる。例えば、計算デバイス１０２は、移動体電話機、音楽プレーヤー、ゲーム・デバイス等を含む、移動体２０２クラスのデバイスであると考えることができる。また、計算機１０２は、パーソナル・コンピューター、ラップトップ・コンピューター、ネットブック等を含むコンピューター２０４クラスのデバイスであると考えることもできる。テレビジョン２０６の構成は、例えば、テレビジョン、セット・トップ・ボックス、ゲーム・コンソール等の、平常環境における表示を伴うデバイスの構成を含む。つまり、本明細書において記載される技法は、計算デバイス１０２のこれら種々の構成によってサポートすることができ、以下の章において記載される具体的な例には限定されない。
[0052] クラウド２０８は、ウェブ・サービス２１２のためのプラットフォーム２１０を含むものとして図示されている。プラットフォーム２１０は、クラウド２０８のハードウェア（例えば、サーバー）およびソフトウェア・リソースの基礎機能を抽象化しており、つまり「クラウド・オペレーティング・システム」として動作することができる。例えば、プラットフォーム２１０は、計算デバイス１０２を他の計算デバイスに接続するリソースを抽象化することができる。また、プラットフォーム２１０は、プラットフォーム２１０を介して実現されるウェブ・サービス２１２に対して生じた(encounter要求に、対応するレベルのスケールを提供するために、リソースのスケーリングを抽象化する役割を果たすこともできる。サーバー・ファームにおけるサーバーの負荷均衡、悪意のある連中（例えば、スパム、ウィルス、およびその他のマルウェア）に対する保護等というような、種々の他の例も考えられる。
[0053] つまり、クラウド２０８は、インターネットまたは他のネットワークを介して計算デバイス１０２に利用可能とされるソフトウェアおよびハードウェア・リソースに関する戦略の一部として含まれる。例えば、ジェスチャー・モジュール１０４、１０５は、部分的に計算デバイス１０２に実装し、更にウェブ・サービス２１２をサポートするプラットフォーム２１０を介して実装することができる。
[0054] 例えば、これらのジェスチャー・モジュールによってサポートされるジェスチャー技法は、移動体構成２０２におけるタッチスクリーン機能、コンピューター２０４の構成のトラック・パッド機能を使用して検出することができ、特定の入力デバイスとの接触を伴わない自然ユーザー・インターフェース（ＮＵＩ）のサポートの一部としてカメラによって検出すること等ができる。更に、入力を検出および認識して特定のジェスチャーを識別する動作の実行(performance)は、計算デバイス１０２および／またはクラウド２０８のプラットフォーム２１０によってサポートされるウェブ・サービス２１２によってというように、システム２００全体に分散することもできる。
[0055] 一般に、本明細書において記載される機能のうち任意のものは、ソフトウェア、ハードウェア、ファームウェア（例えば、固定論理回路）、手動処理、またはこれらの実施態様の組み合わせを使用して実現することができる。「モジュール」、「機能」、および「ロジック」という用語は、本明細書において使用される場合、一般に、ソフトウェア、ファームウェア、ハードウェア、またはその組み合わせを表す。ソフトウェアの実施態様の場合、モジュール、機能、またはロジックは、プロセッサー（例えば、１つまたは複数のＣＰＵ）において実行されると、指定されたタスクを実行するプログラム・コードを表す。プログラム・コードは、１つ以上のコンピューター読み取り可能メモリー・デバイスに格納することができる。以下で説明されるジェスチャー技法の特徴は、プラットフォーム独立ということであり、これが意味するのは、これらの技法が、種々のプロセッサーを有する種々の商用計算プラットフォームにおいて実現できるということである。
[0056] 以下に続く論述では、種々の章において、ベゼル・ジェスチャーの例、およびベゼル・ジェスチャーと関連したジェスチャーについて説明する。「入力メカニズムとしてのベゼルの使用」と題する最初の章では、計算デバイスのベゼルを入力メカニズムとして使用できる実施形態について説明する。これに続いて、「オンスクリーン入力を作るためのオフスクリーン・モーションの使用」と題する章では、デバイスのスクリーンから離れるモーションが、ジェスチャーを介して、どのように利用されてオンスクリーン入力を作ることができるかについて説明する。次に、「ジェスチャーリングのための複数の指の使用」と題する章では、ジェスチャー入力を与えるために複数の指をどのように利用できるかについて説明する。この章に続いて、「ラジアル・メニュー」(radial menus)と題する章では、入力選択肢のロバストな集合体を与えるためにラジアル・メニューを利用することができる実施形態について説明する。次に、「オンおよびオフスクリーン・ジェスチャーおよび組み合わせ−ページ／オブジェクト操作」と題する章では、ページおよび／またはオブジェクトを操作するために利用できる種々のタイプのジェスチャーおよび組み合わせについて説明する。最後に、「デバイス例」と題する章では、１つ以上の実施形態を実現するために利用することができるデバイス例の態様について説明する。
入力メカニズムとしてのベゼルの使用
[0057] １つ以上の実施形態では、デバイスのベゼルを入力メカニズムとして利用することができる。例えば、ディスプレイ・デバイスがベゼルの下に広がっている場合、ユーザーの指または他の入力メカニズムがベゼルの情報でホバリングするとき、または物理的に係合するときに、これを検知することができる。代わりにまたは加えて、ベゼルは、ベゼル上方でホバリングするまたは物理的に係合するユーザーの指または他の入力メカニズムを検知する赤外線メカニズムやその他のような検知メカニズムを含むことができる。ベゼルに対する入力のうち任意の組み合わせを、使用することができる。例えば、種々の入力をデバイスに供給するために、ベゼルを１回以上タップすること、保持すること、滑らせること、および／またはこれらまたは他の入力の任意の組み合わせを行うことができる。
[0058] 一例として、以下のことを検討する。多くの選択、操作、およびコンテキスト有効化(activation)方式が、デバイスの背景キャンバスとこのキャンバス上に現れるオブジェクトとの間の区別を利用する。ベゼルを入力メカニズムとして使用すると、ページ自体が多くの近接するオブジェクトによってカバーされていても、背景キャンバスにおけるページにアクセスする方法を得ることができる。例えば、ベゼル上でタップすると、全てのオブジェクトの選択を解除するメカニズムが得られる。ベゼルを保持することは、ページ上にあるコンテキスト・メニューをトリガするために使用することができる。一例として、ベゼル３０３とディスプレイ・デバイス３０８とを有する計算デバイス３０２を含む環境例３００を示す図３について検討する。この場合、ユーザーの手３０６ａの指がベゼル３０３上でタップしている。ベゼル上でタップすることによって、ユーザーの入力が検知され、この入力にマッピングされている関連した機能を与えることができる。先の例では、このような機能は、ディスプレイ・デバイス１０８上に現われる全てのオブジェクトの選択を解除することができる。加えて、ベゼル上の異なる位置で入力を受けることもでき、異なる機能にマッピングすることもできる。例えば、ベゼルの右側で受けた入力を第１機能にマッピングすることができ、ベゼルの左側で受けた入力を第２機能にマッピングすることができる等となる。更に、ベゼルの向きおよびユーザーがどのようにそれを保持しているかに依存して、ベゼル側面の異なる領域において受けた入力を異なる機能にマッピングすること、または何の機能にも全くマッピングしないことも可能である。ベゼル・エッジの一部は、割り当てされないままにしておくこともでき、またはタッチおよび保持には無感応にして、意図しない動作がトリガされないようにすることもできる。このように、ベゼルの任意の１つの特定の側面は、入力を受けるために利用することができ、したがって、ベゼルのどの領域がこの入力を受けたかに依存して、この入力を異なる機能にマッピングすることができる。尚、ベゼルを介して受け取られた入力は、ボタン、トラック・ボール、および関連したデバイスに配置されることもある他の手段というような、ハードウェア入力デバイスを介して受け取られた任意の入力とは独立して受け取ることができることは認められてしかるべきであり、言うまでもないことである。更に、少なくとも一部の実施形態では、ベゼルを介して受けた入力は、特定の機能を確認しこれにアクセスするために利用されるユーザー入力のみとすることができる。例えば、ベゼル上のみで受けた入力は、基準を規定することができ、これによってデバイス機能にアクセスすることができる。更に、実施形態によっては、方位センサー（例えば、加速度計）を入力として使用して、どのベゼル・エッジがアクティブなのか判断するのを助けることができる。実施形態の中には、素早い意図的なタップは利用可能であり続けるが、偶然ベゼル上に載っている指が単にデバイスを保持しているのと差別するために、タッチおよび保持のみは無視される場合もある。
[0059] 代わりにまたは加えて、少なくとも一部の実施家位置では、ベゼルと関連付けられたアクセス可能な機能のヒントまたは指示を与えるために、視覚的アフォーダンス(visual affordance)を利用することができる。具体的には、視覚的アフォーダンスは、ベゼル・ジェスチャーによってアクセスすることができる機能を指示するために利用することができる。視覚的アフォーダンスの任意の適したタイプを利用することができる。一例として、再度図３について検討する。ここでは、半透明ストリップ３０４という形態の視覚的アフォーダンスが、ベゼル・ジェスチャーの利用によって追加の機能にアクセスできることの指示を与える。この視覚的アフォーダンスは、任意の適した形態をなすことができ、ディスプレイ・デバイス３０８上の任意の適した位置に配置することができる。更に、視覚的アフォーダンスを任意の適した方法で露出することもできる。例えば、少なくとも一部の実施形態では、ベゼルを介して受けた入力は、視覚的アフォーダンスを露出するまたは表示するために使用することができる。具体的には、少なくとも一部の実施形態では、デバイスのベゼル上方におけるホバリングまたはデバイスのベゼルとの物理的係合を検出したことに応答し、「ピーク・アウト」(peek out)視覚的アフォーダンスを提示することができる。この「ピーク・アウト」視覚的アフォーダンスは、少なくとも一部の実施形態では、「ピーク・アウト」が隠されるように、ユーザーによって選択を解除することができる。
[0060] この特定例では、半透明ストリップ３０４と関連付けられた追加の機能は、いわゆるベゼル・メニューの形態で存在しており、このベゼル・メニューにはベゼル・ジェスチャーを使用してアクセスすることができる。具体的には、１つ以上の実施形態において、ユーザーの手３０６ｂの指がベゼルにタッチし、次いで示された矢印の方向にベゼルを横切って動きディスプレイ・デバイス３０８上に達するジェスチャーによって、ベゼル・メニューにアクセスすることができる。これによって、ベゼル・メニューをドロップ・ダウンさせることができる。これについては、以下で更に詳しく説明する。
[0061] したがって、種々の実施形態は、先の第１例におけるように、ベゼル自体を入力メカニズムとして使用することができる。代わりにまたは加えて、種々の他の実施形態では、ベゼル・ジェスチャーによって追加の機能にアクセスできることの手がかり(clue)をユーザーに与える視覚的アフォーダンスと共に、ベゼルを使用することができる。
[0062] 図４は、１つ以上の実施形態による方法におけるステップを記述する流れ図である。この方法は、任意の適したハードウェア、ソフトウェア、ファームウェア、またはその組み合わせと関連付けて実現することができる。少なくとも一部の実施形態では、この方法は、以上で説明したシステムおよび以下で説明するシステムというような、システムと関連付けて実現することができる。
[0063] ステップ４００では、ベゼルと関連した入力を受ける。任意の適したタイプの入力を受けることができるが、その例は先に示されている。ステップ４０２では、この受けた入力と関連付けられた機能にアクセスする。任意の適したタイプの機能にアクセスすることができる。種々の異なるタイプの認識可能な入力（例えば、タップ、タップの組み合わせ、タップ／ホールドの組み合わせ、スライド等）を与え、これらの認識可能な入力を異なるタイプの機能にマッピングすることによって、ユーザー入力メカニズムのロバストな集合体を設けることができる。
[0064] 図５は、１つ以上の実施形態による方法におけるステップを記述する流れ図である。この方法は、任意の適したハードウェア、ソフトウェア、ファームウェア、またはその組み合わせと関連付けて実現することができる。少なくとも一部の実施形態では、この方法は、以上で説明したシステムおよび以下で説明するシステムというような、システムと関連付けて実現することができる。
[0065] ステップ５００では、計算デバイスと関連したディスプレイ・デバイス上に視覚的アフォーダンスを表示する。任意の適したタイプの視覚的アフォーダンスを利用することができ、その一例は先に示されている。ステップ５０２では、この視覚アフォーダンスに対するベゼル・ジェスチャー入力を受ける。任意の適したタイプのベゼル・ジェスチャー入力を利用することができる。ステップ５０４では、受けたベゼル・ジェスチャー入力と関連付けられた機能にアクセスする。任意の適したタイプの機能にアクセスすることができ、その一例が先に示されており、以下で更に詳細に説明する。
[0066] 以上、ベゼルを入力メカニズムとして使用することができる例について検討したので、これよりスクリーンまたはディスプレイ入力を作るためにオフスクリーンまたはオフディスプレイ・モーションを利用する種々の実施形態について検討する。
オンスクリーン入力を作るためのオフスクリーン・モーションの使用
[0067] 少なくとも一部の実施形態では、オフスクリーンからオンスクリーンへのモーション（またはその逆）は、メニューを露出する、または何らかの他のタイプの機能をアクセスするためのメカニズムとして利用することができる。オフスクリーン・モーションまたは入力は、先に示したように、デバイスのベゼルに対して与えることができる。オフスクリーンからオンスクリーンへのモーションを実行するために、任意の適したタイプのベゼル・ジェスチャー入力を与えることができる。例えば、ベゼル・ジェスチャーまたは入力は、一例としてそして限定ではなく、ベゼル上で開始および終了する、ベゼルを交差または再交差する、ベゼルの異なる位置（例えば、角、または特定のエッジに沿った特定の範囲の座標）で交差する、および／または複数のスクリーンと関連した１つ以上のベゼル上で行うことができる（スクリーンまたはそのエッジに依存して異なる意味の可能性がある）。更に、ベゼル入力は、一例としてそして限定ではなく、１回接触ドラッグ（指またはペン）、２回接触ドラッグ（２本の指）、および／または手接触ドラッグ（複数の指／手全体／異なる手の複数の指または１本１本の指）を含むことができる。例えば、オフスクリーン空間（即ち、ベゼル上で開始する）からのピンチ・ジェスチャーを利用し、異なる機能にマッピングすることができる。例えば、複数の接触がスクリーンの異なるエッジから入ってくるベゼル・ジェスチャーは、異なる意味を有することができる。具体的には、２本の指がベゼルの隣接するエッジから入る（即ち、角を跨がる）ことは、ページ上で拡大した作業空間またはキャンバスを示すために拡大(zoom out)するズーム・アウト動作にマッピングすることができる。１つの手（スクリーンが非常に小さい場合）または２つの手（各手から１本の指）の２本の指が対向するエッジから入ることは、異なる機能にマッピングすることができる。複数の指がベゼルの１つのエッジにおいて入り、更に１本の指がベゼルの隣接するエッジまたは対向するエッジから入ることは、異なる機能にマッピングすることができる。加えて、複数の指が２つ以上のエッジから入ることは、更に追加の機能にマッピングすることができる。
[0068] 他の例として、図６について検討する。ここでは、デバイス６０２が、ベゼル６０３と、ディスプレイ・デバイス６０８上にレンダリングされた視覚的アフォーダンス６０４とを含む。先に注記したように、半透明のストリップという形態の視覚的アフォーダンス６０４は、アクセス可能な機能、この場合は、ベゼルと関連付けられたベゼル・メニューのヒントまたは指示を与えるために利用することができる。
[0069] １つ以上の実施形態では、ベゼル・メニューには、ユーザーの手６０６の指がベゼルにタッチし、次いで図示の矢印の方向にベゼルを横切りディスプレイ・デバイス６０８上に動くベゼル・ジェスチャーによってアクセスすることができる。これによって、ベゼル・メニュー６１０をドロップ・ダウンさせることができ、その時点でメニューは完全に不透明になることができる。
[0070] 図示し説明した実施形態では、ベゼル・メニュー６１０は、複数の選択可能なアイコンまたはスロット６１２、６１４、６１６、６１８、および６２０を含む。これらのアイコンまたはスロットの各々は、例えば、ペイント機能、ペン機能、ノート機能、オブジェクト作成、オブジェクト編集等というような異なる機能と関連付けられている。尚、任意のタイプの機能をアイコンまたはスロットに関連付けることができることは、認められてしかるべきであり言うまでもないであろう。
[0071] 図示し説明した環境では、ベゼル・メニュー６１０は、ユーザーがコマンド、ツール、およびオブジェクトにアクセスしこれらを有効化することを可能にすることができる。ベゼル・メニューは、タッチ入力およびペン入力双方に応答するように構成することができる。代わりにまたは加えて、ベゼル・メニューは、タッチ入力のみに応答するように構成することができる。
[0072] 少なくとも１つの実施形態では、ベゼル・メニュー６１０と関連付けられた機能にアクセスするために、異なるジェスチャー・モードを利用することができる。例えば、１つのジェスチャー・モードを初心者モードとすることができ、他のジェスチャー・モードを習熟者モードとすることができる。
[0073] 初心者モードでは、ユーザーがベゼル・メニュー６１０を見せるジェスチャーを行った後、ユーザーは彼らの指を上げることができる。すると、ベゼル・メニューは設定可能な間隔の間（またはいつまでも）開いたままになることができる。次いで、ユーザーは、アイコンまたはスロット６１２、６１４、６１６、６１８、および６２０のうち１つと関連付けられた所望の項目の上でタップすることができる。このジェスチャーによって、特定のアイコンまたはスロットと関連付けられた機能にアクセスすることができる。例えば、特定のアイコンまたはスロット上でタップすると、ディスプレイ・デバイス６０８と関連したキャンパス上に、オブジェクトを作らせることができる。少なくとも一部の実施形態では、初心者モードにおいて、ベゼル・メニューからアクセスされるオブジェクトは、キャンバス上のデフォルト位置に現れる。ユーザーは、ベゼル・メニューを逆にスライドさせてスクリーンから追いやることによって（オンスクリーン−オフスクリーン・ジェスチャー）またはベゼル・メニューの外側でタップすることによって、いずれの機能も有効化することなく、ベゼル・メニューを閉じることができる。
[0074] 習熟者モードでは、一旦ユーザーがベゼル・メニューからアクセス可能な通常使用項目の位置を熟知したなら、ユーザーは連続指ドラッグを実行することができる。連続指ドラッグは、スロットまたはアイコンを通過してキャンバス上に達し、関連付けられたオブジェクト（またはツール、あるいはインターフェース・モード）を作り、１回のトランザクションで、特定の所望の位置またはパスにドラッグする。次いで、ユーザーは、このオブジェクトを開始させ、それと相互作用することができる。一例として、図７について検討する。ここでは、ユーザーは、ベゼル・ジェスチャーを実行し終えており、アイコンまたはスロット６１４を横切ってドラッグして、ポスト・イット・ノート(post-it note)と関連付けられた機能にアクセスし、対応するノートを、指示するように、キャンバス上に位置付けている。この時点で、ユーザーは指を持ち上げて、関連するペンを使用して、所望通りに、デジタル・ポスト・イットに注釈を入れることができる。少なくとも一部の実施形態では、ベゼル・メニュー６１０は、特定の機能にアクセスした後に、完全に開いたままになっていても、なっていなくてもよい。
[0075] 少なくとも一部の実施形態では、習熟者モードにおいて、アイコンまたはスロットと関連付けられた機能にアクセスするために、ベゼル・メニューを必ずしも完全に表に出さなくてもよい。代わりに、特定のアイコンまたはスロットに対応する位置における視覚的アフォーダンスを交差するベゼル・ジェスチャーが、そのアイコンまたはスロットと関連付けられた機能にアクセスすることができる。一例として、図８について検討する。ここでは、視覚的アフォーダンス６０４が示されている。尚、ベゼル・ジェスチャーは、アイコンまたはスロット６１４（図７）に対応する視覚的アフォーダンスの一部を交差することに注意すること。また、このベゼル・ジェスチャーによって、対応するポスト・イット・ノートにアクセスされたことにも注意すること。この機構は、時間遅れ、例えば、１／３秒を使用し、ベゼル・ジェスチャーに応答してベゼル・メニューを展開するか否か実際に判断する前に、ユーザーの指の位置を考慮することによって、実現することができる。ここでの考えは、ユーザーが休止しているのでなければベゼル・メニューが隠されたままになっていること、または所望の項目からのドラッグ・オフ(drag-off)を完了することなく、単にメニューを引き出すということである。これは、ベゼル・メニューが滑り出す前に時間遅れを使用して遂行される。したがって、一旦ユーザーがベゼル・メニュー上にある特定の動作に習熟したなら、視覚メニュー自体を開くことによって煩わされる必要もなく、素早くそれをドラッグしてオブジェクトを作り位置付けることができる。これは、ウェッジの直接操作に基づく視覚的に導かれる動作よりもむしろ、手順の記憶によって動かされる弾道モーション(ballistic motion)に基づく習熟者動作を促すことができる。この概念が成功するのは、それを使用する初心者の方法が、それと作業する習熟者の方法を学習し促すのに役立つからである。
[0076] 一実施形態にしたがってどのようにこれが作用することができるのかの単なる一例として、以下について検討する。指が交差してスクリーン・ベゼルからベゼル・メニューのスロットに入ったことが観察されると、タイマーが起動される。他の即座視覚フィードバックは行われない。タイマーが終了したときに、ベゼル・メニューによって占められている領域に指が未だある場合、ベゼル・メニューが滑り出し、ユーザーの指によって追跡する。ユーザーの指がベゼル・メニュー・エリアの内側で持ち上げられると、ポストされたままになる。これは、前述の初心者モードである。ユーザーは、全てのスロットを調べるために、指を持ち上げることができ、所望のオブジェクトを作るために所望の１つの上でタップすることができる（それをドラッグするのではなく）。また、ユーザーは、初心者モードから、タッチ・ダウンしキャンバス上に項目をドラッグすることができる。指がしきい値距離または領域を超えてスライドした場合、ベゼル・メニューは閉じたままであるが、交差されたスロットによって示される機能が有効化される。例えば、ポスト・イットが作られ、ユーザーの指を追い始める。これは、前述の習熟者モードである。注意事項(implementation consideration)の１つは、習熟者モードのジェスチャーによって選択されるスロットは、指がスクリーン・エッジを交差する位置によって決定することができるということである。
[0077] 少なくとも１つの実施形態では、追加の機能へのアクセスを与えるために、ベゼル・メニューをスクロール可能にすることができる。例えば、ベゼル・メニューは、スクロールが可能になるように、いずれかの側に左および右矢印を有することができる。代わりにまたは加えて、ベゼル・メニューを開く方向に対して直交する方向に１本指または複数指でドラッグすると、矢印を全く必要とせずに、それをスクロールすることができる。
[0078] 少なくとも一部の実施形態では、ベゼル・メニューは、追加のスロットまたはアイコンのための空間を作ることができる。例えば、ベゼル・メニューのエッジに現れるスロットまたはアイコンの幅を狭めることによって、追加のスロットまたはアイコンを追加することができる。一例として、図９について検討する。
[0079] ここでは、デバイスは、ベゼル９０３と、ディスプレイ・デバイス９０８上に現れるベゼル・メニュー９１０とを含む。追加のスロットまたはアイコン９１２、９１４が、ベゼル・メニュー９１０の中に現れる。尚、スロットまたはアイコン９１２、９１４は、他のスロットまたはアイコンに対して、幅が狭められていることに注意すること。この例では、幅は約半分に狭められている。スロットまたはアイコン９１２、９１４と関連付けられたオブジェクトにアクセスするためには、図示のようにデバイスの側方からスロットまたはアイコン上をドラッグするベゼル・ジェスチャーを使用することができる。実施形態の中には、角のスロットまたはアイコンが特殊なステータスを有することができるものもある。例えば、角のスロットまたはアイコンには、特定の機能を永続的に割り当てることができ、カスタム化できないようにすることができる。
[0080] したがって、ベゼル・メニューは、スクリーンの有効領域(real estate)が永続的に占有されないように、または専用ハードウェア・ボタンの使用が必要とならないように、機能をユーザーに露出するために使用することができる。
[0081] 図１０は、１つ以上の実施形態による方法におけるステップを記述する流れ図である。この方法は、任意の適したハードウェア、ソフトウェア、ファームウェア、またはその組み合わせと関連付けて実現することができる。少なくとも一部の実施形態では、この方法は、以上で説明したシステムおよび以下で説明するシステムというような、システムと関連付けて実現することができる。
[0082] ステップ１０００では、アクセス可能なベゼル・メニューと関連付けられた視覚的アフォーダンスを表示する。適した視覚的アフォーダンスの例は、先に示されている。ステップ１００２では、視覚的アフォーダンスに対してベゼル・ジェスチャー入力を受ける。任意の適したベゼル・ジェスチャーを利用することができ、その一例は先に示されている。ステップ１００４では、ベゼル・ジェスチャー入力を受けたことに応答して、ベゼル・メニューを提示する。任意の適したベゼル・メニューを利用することができる。少なくとも一部の実施形態では、ベゼル・メニューは、視覚的アフォーダンスを必ずしも表示せずに、単にベゼル・ジェスチャーを受けることによって提示することができる。代わりにまたは加えて、ユーザーの指またはペンが関連したベゼル・エッジの上方でホバリングするときに、視覚的アフォーダンスが徐々に現れることもできる。
[0083] 図１１は、１つ以上の実施形態による方法におけるステップを記述する流れ図である。この方法は、任意の適したハードウェア、ソフトウェア、ファームウェア、またはその組み合わせと関連付けて実現することができる。少なくとも一部の実施形態では、この方法は、以上で説明したシステムおよび以下で説明するシステムというような、システムと関連付けて実現することができる。
[0084] ステップ１１００では、ジェスチャー入力を受ける。この入力は、ベゼル・メニューまたはベゼル・メニューと関連付けられた視覚的アフォーダンスに対して受けることができる。任意の適したジェスチャー入力を受けることができる。例えば、ジェスチャー入力は、ベゼルを使用しないまたは組み込まない入力を含むことができる。これの一例は、ベゼル・メニューの露出部分上でユーザーがタップすることに関して、図６の論述において先に示されている。代わりにまたは加えて、ジェスチャー入力はベゼル・ジェスチャー入力を含むことができる。これの一例は、図７から図９の論述において先に示されている。ステップ１１０２では、ジェスチャー入力と関連付けられた機能を確認する。ステップ１１０４では、ステップ１１０２において確認された機能にアクセスする。これをどのように行うことができるかの例は、先に示されている。
[0085] 以上の例は、１本の指を利用するベゼル・ジェスチャーを含む、ジェスチャーを示した。他の実施形態では、１本よりも多い指を、ベゼル・ジェスチャーを含むジェスチャーと合わせて利用することができる。
ジェスチャーリングのための複数の指の使用
[0086] １つ以上の実施形態では、複数の指を、ベゼル・ジェスチャーリングを含む、ジェスチャーリングに利用することができる。複数の指は、１つの手、または集合的に、双方の手に存在することができる。複数の指の使用によって、複数のタッチを、複数の機能に、または機能と関連付けられたオブジェクトにマッピングすることを可能にすることができる。例えば、２本指ジェスチャーまたはベゼル・ジェスチャーを、第１の機能またはそれと関連付けられた第１のオブジェクトにマッピングすることができ、３本指ジェスチャーまたはベゼル・ジェスチャーを第２の機能またはそれと関連付けられた第２オブジェクトにマッピングすることができる。一例として、図１２について検討する。
[0087] ここでは、デバイス１２０２は、ベゼル１２０３と、ディスプレイ・デバイス上にレンダリングされる視覚的アフォーダンス１２０４とを含む。先に注記したように、視覚的アフォーダンス１２０４は、半透明ストリップの形態となっており、ベゼルと関連付けられたアクセス可能な機能、この場合、ベゼル・メニュー１２１０のヒントまたは指示を与えるために利用することができる。
[0088] 先に注記したように、ベゼル・メニュー１２１０には、ベゼル・ジェスチャーによってアクセスすることができる。このベゼル・ジェスチャーでは、ユーザーの手の指がベゼルにタッチし、次いでベゼルを横切ってディスプレイ・デバイス上まで動いて、ベゼル・メニューを下に引き出す。
[0089] １つ以上の実施形態では、ベゼル・メニュー１２１０を露出し、更に１２１２に示す引き出し内に広げることができる。図示し説明した実施形態では、以下のベゼル・ジェスチャーを使用して引き出し１２１２を露出することができる。最初に、ユーザーが１本以上の指でベゼル１２０３上またはその近くにタッチ・ダウンする。これは、図１２の最上位部分に示されている。そこから、ユーザーは図１２の最下位部に示すように、ディスプレイ・デバイス上に複数の指をドラッグすることによって、引き出し１２１２を露出することができる。少なくとも一部の実施形態では、複数の指が同時にベゼル・メニューを交差するときには、デフォルトで、オブジェクトは作られない。即ち、これらの実施形態では、以上で説明したような複数指ジェスチャーは、引き出し１２１にアクセスしていることを示す。引き出し１２１２は、図示されているような、追加のオブジェクトを有することができる。追加のオブジェクトは、一例としてそして限定ではなく、追加のツール、色、および種々の他のオブジェクトを含むことができる。加えて、少なくとも一部の実施形態では、引き出し１２１２は、種々の項目を格納および／または配列するために利用することができる。項目は、ユーザーによる直接操作によってというようにして、例えば、引き出し内にあるオブジェクトをドラッグ・アンド・ドロップすることによって、任意の適した方法で、配列するまたは配列し直すことができる。
[0090] 少なくとも一部の実施形態では、手を上げることによって、引き出しを開いたままにすることができ、逆方向の同様のジェスチャーによって後にこれが閉じられるまで、開いたままとなる。少なくとも一部の実施形態では、ベゼル・メニュー１２１０は、例えば、引き出し１２１２からの内容を使用して、カスタム化することができる。一例として、図１３について検討する。
[0091] ここでは、ユーザーはドラッグ・アンド・ドロップ動作によって、ツールおよび／またはオブジェクトのデフォルトの割り当てを主ベゼル・メニュー・スロットに変更することができる。例えば、図１３の最上位部分において、ユーザーは新たなツール１３００上でタッチ・ダウンする。次いで、ユーザーはツール１３００をベゼル・メニュー１２１０のスロットのうちの１つにドラッグすることに移る。このジェスチャーによって、既にスロットと関連付けられているオブジェクトを、ユーザーによってドロップされた新たなオブジェクトと置き換える。
[0092] 代わりにまたは加えて、ユーザーはページまたはキャンパスからのコンテンツを引き出し１２１２の中にドラッグすることもできる。一例として、図１４について検討する。ここでは、ユーザーはページまたはキャンバス上にあるオブジェクト１４００上でタッチ・ダウンし、このオブジェクトを引き出し１２１２の中にドラッグし終えている。指を持ち上げることによって、オブジェクト１４００は引き出し１２１２の中に蓄えられる。
[0093] 尚、以上では１つの引き出しについて説明したが、種々の他の実施形態では複数の引き出しを利用できることは認められてしかるべきであり、言うまでもないことである。例えば、ディスプレイ・デバイスの他のエッジを異なる引き出しと関連付けることができる。これら異なる引き出しは、異なるツール、オブジェクト、または他のコンテンツを保持することができる。二重または複数スクリーン・デバイス上では、スクリーン・エッジ毎の引き出しが同一であってもよく、または別々であってもよい。少なくとも一部の実施形態では、引き出しを開く方向に対して直交してスライドすることによって、各スクリーン・エッジ上で複数の引き出しにアクセスすることもできる。これは、１回のタッチ、および／または複数回のタッチのいずれかによって行うことができる。ベゼル・メニューがスクリーン・エッジ間全体に広がる場合、直交するエッジからのベゼル・ジェスチャーによってこれを行うこともできる。
[0094] 丁度以上で説明した実施形態では、複数回のタッチを使用して引き出し１２１２にアクセスした。具体的には、図１２に示したように、３回のタッチを使用して、図示の引き出しにアクセスした。１つ以上の実施形態では、異なる引き出しにアクセスするために、異なる回数のタッチを利用することができる。例えば、２回のタッチを第１の引き出しにマッピングすることができ、３回のタッチを第２の引き出しにマッピングすることができ、４回のタッチを第３の引き出しにマッピングすることができる等である。代わりにまたは加えて、複数回のタッチの間の間隔、およびそれらの間の分散を異なる機能にマッピングすることができる。例えば、第１の間隔の２本指のタッチを第１の機能にマッピングすることができ、第２の、もっと広い間隔の２本指のタッチを第２の異なる機能にマッピングすることができる。
[0095] 図１５は、１つ以上の実施形態による方法におけるステップを記述する流れ図である。この方法は、任意の適したハードウェア、ソフトウェア、ファームウェア、またはその組み合わせと関連付けて実現することができる。少なくとも一部の実施形態では、この方法は、以上で説明したシステムおよび以下で説明するシステムというような、システムと関連付けて実現することができる。
[0096] ステップ１５００では、複数指ジェスチャー入力を受ける。任意の適したタイプのジェスチャーを利用することができ、一例としてそして限定ではなく、先に説明したようなベゼル・ジェスチャー入力を含む。ステップ１５０２では、この複数指ジェスチャー入力と関連付けられた機能を確認する。機能の例については、先に説明されている。ステップ１５０４では、確認された機能にアクセスする。これをどのように行うことができるかの例は、先に説明されている。
[0097] 図１６は、１つ以上の実施形態による方法におけるステップを記述する流れ図である。この方法は、任意の適したハードウェア、ソフトウェア、ファームウェア、またはその組み合わせと関連付けて実現することができる。少なくとも一部の実施形態では、この方法は、以上で説明したシステムおよび以下で説明するシステムというような、システムと関連付けて実現することができる。
[0098] ステップ１６００において、ベゼル・ジェスチャー入力を受ける。ベゼル・ジェスチャー入力の例は、先に説明されている。ステップ１６０２では、このベゼル・ジェスチャー入力と関連付けられた機能を確認する。この特定の実施形態では、ベゼル・ジェスチャー入力と関連付けられた機能は、１つ以上の引き出しにアクセスすることと関連付けられている機能である。ステップ１６０４では、１つ以上の引き出しをユーザーに露出する。これをどのように行うことができるかの低は、先に説明されている。
ラジアル・メニュー
[0099] 少なくとも一部の実施形態では、いわゆるラジアル・メニュー(radial menus)を、ベゼル・メニューのようなメニューと共に利用することができる。ラジアル・メニューについて説明するが、特許請求する主題の主旨および範囲から逸脱することなく、他のタイプのメニューも使用することができる。例えば、プル・ダウン・メニューをベゼル・メニューと共に使用することができる。ラジアル・メニューと関連した一般的な考えの１つは、ユーザーがある位置でタッチ・ダウンし、彼らの指をある方向に延ばすまたはスライドさせて、特定の機能またはメニュー・コマンドにアクセスしこれを実施することができるということである。ラジアル・メニューの存在は、ベゼル・メニューの大きなアイコンまたはスロットと関連付けられたそれよりも小さなアイコンによって示すことができる。一例として、図１７について検討する。
[00100] ここでは、デバイス１７０２は、ベゼル１７０３と、前述のようにディスプレイ・デバイス１７０８上に露出されているベゼル・メニュー１７１０とを含む。この図示し説明する実施形態では、ベゼル・メニュー１７１０は複数の選択可能なアイコンまたはスロットを含む。その１つが１７１２で示されている。これらのアイコンまたはスロットの各々は、例えば、ペイント機能、ペン機能、ノート機能、オブジェクト作成、オブジェクト編集等というような異なる機能と関連付けられている。尚、任意のタイプの機能をアイコンまたはスロットと関連付けることができることは認められてしかるべきであり言うまでもないことである。
[00101] 先に注記したように、ベゼル・メニュー１７１０は、ユーザーがコマンド、ツール、およびオブジェクトにアクセスしこれらを有効化することを可能にすることができる。ベゼル・メニューは、タッチ入力およびペン入力双方に応答するように構成することができる。代わりにまたは加えて、ベゼル・メニューはタッチ入力のみに応答するように構成することができる。この図示し説明する実施形態では、アイコンまたはスロット１７１２はラジアル・メニュー・アイコン１７１４を含む。このラジアル・メニュー・アイコン１７１４は、１つ以上のラジアル・メニュー、例えば、ラジアル・メニュー１７１５がこの特定のアイコンまたはスロットと関連付けられているという手がかりをユーザーに与える。この図示し説明する実施形態では、ラジアル・メニュー１７１５には、任意の適した方法で、例えば、ペンまたはタッチによってアクセスすることができる。例えば、少なくとも一部の実施形態では、ラジアル・メニュー１７１５には、ラジアル・メニュー・アイコン１７１４の上方またはその近くでペンをホバリングすることによってアクセスすることができる。代わりにまたは加えて、ペンまたは指を使用して、ラジアル・メニュー１７１５を引き出すこともできる。代わりにまたは加えて、ラジアル・メニュー１７１５には、ラジアル・メニュー・アイコン１７１４上またはその近くにおけるペンまたは指のタップおよびホールドによってアクセスすることもできる。実施形態の中には、ラジアル・メニュー・アイコン上でタップすると、デフォルト・アクションをトリガーするものもある。このデフォルト・アクションは、ベゼル・メニュー・スロット上におけるタップと関連付けられた動作と異なっていても、異なっていなくてもよい。
[00102] 一旦ラジアル・メニュー１７１５が露出されたなら、ユーザーは、ラジアル・メニュー・アイコン１７１４上またはその近くでタッチ・ダウンし、特定の方向に移動することによって、種々の機能またはコマンドにアクセスすることができる。この図示し説明する実施形態では、５つの異なる方向が矢印によって示されている。各方向は、異なる機能またはコマンドに対応する。各機能またはコマンドは、図では、網掛けした正方形によって表されている。少なくとも一部の実施形態では、各アイコンまたはスロット１７１２はデフォルトの機能またはコマンドを有する。特定のラジアル・メニュー機能またはコマンドを選択することによって、デフォルトの機能またはコマンドを、この選択した機能またはコマンドで置き換えることができる。
[00103] 少なくとも一部の実施形態では、ラジアル・メニューによって提示される選択肢の数は、ラジアル・メニューが関連付けられる対応のスロットまたはアイコンの位置に依存して、変化することができる。例えば、この図示し説明する実施形態では、スロットまたはアイコン１６１２はユーザーのために５つの選択肢を含む。ベゼル・メニュー１７１０の端部に現れるスロットまたはアイコンと関連付けられたラジアル・メニューは、間隔の制約のために、それよりも少ない選択肢を有するのであってもよい。代わりにまたは加えて、露出された引き出しの一部として現れるスロットまたはアイコンと関連付けられたラジアル・メニューは、もっと多くの選択可能な選択肢を有することもできる。
[00104] 少なくとも一部の実施形態では、ラジアル・メニューは、初心者モードおよび習熟者モード双方を含ませるように実現することができる。初心者モードでは、ラジアル・メニューを完全に露出して、そのアクセス可能な機能またはコマンドに不慣れなユーザーを、選択プロセスによって視覚的に誘導することを可能にすることができる。ラジアル・メニューのコンテンツおよび挙動に精通するユーザーを対象とする習熟者モードでは、ラジアル・メニューを全く露出しないのであってもよい。代わりに、アイコン１７１２のようなアイコンまたはスロットと関連付けられた素早いタッチ・アンド・ストローク・ジェスチャー(touch and stroke gesture)が、ラジアル・メニューの機能またはコマンドに直接アクセスすることを可能にしてもよい。
[00105] 図１８は、１つ以上の実施形態による方法におけるステップを記述する流れ図である。この方法は、任意の適したハードウェア、ソフトウェア、ファームウェア、またはその組み合わせと関連付けて実現することができる。少なくとも一部の実施形態では、この方法は、以上で説明したシステムおよび以下で説明するシステムというような、システムと関連付けて実現することができる。
[00106] ステップ１８００では、ベゼル・メニューを提示する。ベゼル・メニューの例は、先に示されている。ステップ１８０２では、このベゼル・メニューと関連付けられた１つ以上のラジアル・メニューの指示を与える。この図示し説明する実施形態では、この指示は、ベゼル・メニューのスロットまたはアイコン上に現れるラジアル・メニュー・アイコンの形態で存在する。ステップ１８０４では、ラジアル・メニューの１つと関連付けられたユーザー入力を受ける。これをどのようにして行うことができるかの例は、先に示されている。例えば、少なくとも一部の実施形態では、ラジアル・メニューは視覚的にユーザーに提示することができるので、ユーザーは次にタッチして特定の方向に引っ張って入力を与えることができる。代わりにまたは加えて、ラジアル・メニューを必ずしも視覚的に提示しなくてもよい。むしろ、ラジアル・メニューのコンテンツおよび挙動に精通するユーザーは、前述のように、対応してジェスチャーを行い入力を与えることができる。ステップ１８０６では、受けたユーザー入力に応答して、関連付けられた機能またはコマンドにアクセスする。
[00107] １つ以上の実施形態では、スクリーンの向きを回転させるときに、ベゼル・メニューを回転させてもさせなくてもよい。例えば、場合によっては、スクリーンの向きを回転させたときに、ベゼル・メニューを回転させないことが望ましい場合もある。これは、特に、コンテンツを回転させるべきでない、例えば、新聞ページのようなアプリケーション、またはユーザーが異なる描画角度を得るためにスクリーンを回転させるスケッチ・パッドにおいて関連があると考えられる。他の場合には、スクリーンの向きを回転させたときにベゼル・メニューを回転させることが望ましい場合もある。デフォルトでは、スクリーンの４つのエッジ全てにおいて同じ数のベゼル・メニュー・スロットをサポートして、いずれの項目も失わずに、スクリーンの長いエッジからスクリーンの短いエッジにメニュー項目を回転させることができることが望ましい。
[00108] 代わりにまたは加えて、ベゼル・メニューをスクリーンの向き毎にカスタム化可能にして、スクリーンの長いエッジおよび短いエッジにおいて、異なる数のスロットを使用することを可能にすることができる。場合によっては、スクリーンのエッジのどれかを、スクリーンの向きに依存して、ベゼル項目を割り当てないままにしておいてもよい。例えば、左および下のエッジの方が、右利きの人にとって、偶然にぶつかる可能性が高く、望ましければ、ベゼル・メニューを割り当てないままにしておくとよい。
オンおよびオフスクリーン・ジェスチャーならびに組み合わせ−ページ／オブジェクト操作
[00109] １つ以上の実施形態では、オンおよびオフスクリーン・ジェスチャーの組み合わせを利用して、ページおよび／または他のオブジェクトを操作することができる。例えば、オンおよびオフスクリーン・ジェスチャーの組み合わせは、１つの手を使用してオブジェクトに対してスクリーン上で入力を受け、ベゼル・ジェスチャーの形態の追加入力を、同じまたは異なる手を使用してそのオブジェクトに対して受けるジェスチャーを含むことができる。任意の適したタイプのジェスチャーの組み合わせを使用することができる。一例として、図１９について検討する。
[00110] ここでは、デバイス１９０２はベゼル１９０３を含む。ディスプレイ・デバイス（指定されていない）上にはページ１９０４が表示されている。この図示し説明する実施形態では、オンおよびオフスクリーン・ジェスチャーの組み合わせを使用して、引き抜き動作が実行される。具体的には、図１９の最下位部分において、ユーザーの左手または左人差し指が、この例では、ページ１９０４を含むオブジェクトを押さえている。右手を使用して、ユーザーはベゼル・ジェスチャーを開始する。このベゼル・ジェスチャーは、ベゼル１９０３上で開始し、示されている矢印の方向に動き、ページ１９０４の一部を通過する。１本の指を使用して引き抜き動作を示すことによって、このページの部分的な引き抜きが行われる。引き抜き動作は、引き抜かれたページの部分のビットマップを作り、引き抜かれなかったページの部分のみをレンダリングすることによって、実現することができる。代わりにまたは加えて、引き抜かれた部分を表すためにオブジェクトを作ることができる。この作られたオブジェクトにおいて、ページ上に現れる項目を表すために、引き抜かれた部分に現れるオブジェクトを作ることができる。
[00111] １つ以上の他の実施形態では、引き抜き動作は、複数の指を使用して実施することができる。これらの実施形態では、複数指入力を、ページが現れるキャンバスまたは本からそのページを完全に引き抜く動作にマッピングすることができる。
[00112] 少なくとも一部の実施形態では、引き抜く方向は、それと共に異なる意味を伝えることができる。例えば、上から下への引き抜きは、ページを引き抜いて削除することができる。下から上への引き抜きは、ページを切り離し、新たな位置への移動(dragging)を可能にすることができる。
[00113] 図２０は、１つ以上の実施形態による方法におけるステップを記述する流れ図である。この方法は、任意の適したハードウェア、ソフトウェア、ファームウェア、またはその組み合わせと関連付けて実現することができる。少なくとも一部の実施形態では、この方法は、以上で説明したシステムおよび以下で説明するシステムというような、システムと関連付けて実現することができる。
[00114] ステップ２０００では、オブジェクトと関連付けられたオンスクリーン入力を受ける。任意の適したタイプのオンスクリーン入力を受けることができ、一例としてそして限定ではなく、１本指の入力および／または複数指の入力を含む。ステップ２００２では、このオブジェクトと関連付けられたベゼル・ジェスチャー入力を受ける。任意の適したタイプのベゼル・ジェスチャー入力を受けることができ、一例としてそして限定ではなく、１本指の入力および／または複数指の入力を含む。ステップ２００４では、双方の入力と関連付けられた機能を確認する。ステップ２００６では、関連する機能にアクセスする。オンスクリーン入力およびベゼル・ジェスチャー入力の組み合わせによって、任意の適したタイプの機能にアクセスすることができる。入力の組み合わせの例は、先に示されている。
[00115] ベゼル・ジェスチャーを含むジェスチャーの使用によって、他のページ操作も与えることができる。例えば、ページめくり、およびページ保存（「ページ・ポケッティング」(page pocketing)とも言う）を、以下で説明するように設けることができる。
[00116] 一例として、図２１について検討する。ここでは、デバイス２１０２はベゼル２１０３とページ２１０４とを含む。図２１の最下位部分に示すように、ユーザーは、ベゼル・ジェスチャーを使用することによって、前のページにめくることができる。このベゼル・ジェスチャーは、ベゼル２１０３上で開始し、矢印の方向にスクリーンを横切って右方向に進む。こうすることによって、以前のページ２１０６が現れる。同様に、次のページにめくるには、ユーザーは同様のベゼル・ジェスチャーを利用するが、方向が逆になるだけである。このページめくりジェスチャーを使用するとき、ユーザーの指はスクリーン上の任意の適した位置で引き上げることができる。
[00117] １つ以上の実施形態では、ページめくりジェスチャーの意味が、先に記載したものとは異なることもできる。例えば、場合によっては、ページめくりジェスチャーを前述のように開始することができる。しかしながら、ユーザーがスクリーン上で彼らの指を止めた場合、複数のページをまとめてめくることができる。代わりにまたは加えて、ページめくりジェスチャーの最中にスクリーン上で指を止めると、セクション・タブ、コマンド・パレット、またはベゼル・メニューのような追加の制御部を表させることができる。
[00118] 代わりにまたは加えて、少なくとも一部の実施形態では、ユーザーの指がスクリーンを横切って進む程、多くのページをめくることができる。代わりにまたは加えて、前述のようにページめくりジェスチャーを開始し、次いで時計回り方向または反時計回り方向のいずれかに指を円運動させることによって、複数のページをめくることができる。この例では、時計回りの運動が前方へのめくりを表し、反時計回り方向が後方へのめくりを表す。この実施態様では、最後のＮサンプルの運動に円を当てはめることができる。運動の速度は、この円の直径の関数とすることができる。尚、この実施態様では、ユーザーはスクリーン上の任意の特定の位置を中心に円運動する必要はなく、正しい形状の円を描く必要もないことを注記しておく。逆に、任意の曲線運動を直感的にページめくりにマッピングすることができつつ、ユーザーが容易に止めて進路を逆にして、反対方向にめくることも可能にする。
[00119] 少なくとも一部の実施形態では、同様のジェスチャーを使用してページを保存するまたは「しまう」(pocket)ことができる。これらの実施形態では、ジェスチャーがスクリーン上で終了するのではなく、ページめくりの例におけるように、ジェスチャーはベゼル部分上、またはジェスチャーが開始されたスクリーンを横切って位置する他の構造上で終了することができる。一例として、図２２および図２３について検討する。
[00120] ここでは、デバイス２２０２はベゼル２２０３およびページ２２０４を含む。図２２の最下位部分に示すように、ユーザーは、ベゼル・ジェスチャーを使用することによってページを保存するするまたはしまうことができる。このベゼル・ジェスチャーは、ベゼル２２０３上で開始し、矢印の方向にスクリーンを横切って右に進み、ジェスチャーが開始したところと対向して位置するベゼル部分まで達する。こうすることによって、他のページ２２０６を表に出す。１つ以上の実施形態では、距離しきい値を定めることができ、このしきい値未満では、説明し図２１に示したような、ページめくり体験を与えることができる。定められた距離しきい値の後、異なるページ保存の体験またはしまう体験を与えることができる。例えば、図２２の例示では、ページ２２０４がサムネールに縮小されている。ページ保存体験またはページをしまう体験は、殆どのページめくりジェスチャーが完了しているときに、１／３秒というような最小のタイムアウトの後に、最小距離しきい値を経過することの組み合わせによって与えることができる。少なくとも一部の実施形態では、ユーザーが反対側のベゼルに達する前に彼らの指を持ち上げた場合、ページめくり動作を想定することができる。
[00121] 図２３は、デバイス２３０２を示す。デバイス２３０２は、ベゼル２３０３と、背２３０８で分離された２つの別の表示スクリーン２３０４、２３０６とを含む。背２３０８は、このデバイスのベゼルまたは物理的構造の一部を構成すると考えることができる。ページ２３１０が、表示スクリーン２３０４上に表示されているものとして示されている。
[00122] 図２３の最下位部分に示すように、ユーザーは、ベゼル・ジェスチャーを使用することによって、ページを保存するまたはしまうことができる。このベゼル・ジェスチャーは、ベゼル２３０４上で開始し、矢印の方向にスクリーンを横切って右に進み、ジェスチャーが開始したスクリーン２３０４を縦断する脊椎２３０８に達する。こうすることによって、ページ２３１２を表に出す。１つ以上の実施形態では、距離しきい値を定めることができ、このしきい値未満では、説明し図２１に示したような、ページめくり体験を与えることができる。定められた距離しきい値の後、異なるページ保存またはしまう体験を与えることができる。例えば、図２３の例示では、ページ２３１０がサムネールに縮小されている。ページを保存するまたはページをしまう体験は、殆どのページめくりジェスチャーが完了しているときに、１／３秒というような最小のタイムアウトの後に与えることができる。少なくとも一部の実施形態では、ユーザーが背２３０８に達する前に彼らの指を持ち上げた場合、ページめくり動作を想定することができる。
[00123] １つ以上の実施形態では、ページの一部を保存するまたはしまうことができる。一例として、図２４について検討する。ここでは、デバイス２４０２は、ベゼル２４０３と、背２４０８によって分離された２つの別の表示スクリーン２４０４、２４０６とを含む。背２４０８は、このデバイスのベゼルまたは物理的構造の一部を構成すると考えることができる。ページ２４１０は、表示スクリーン２４０４上に表示されているものとして示されている。
[00124] 図２４の最下位部分に示すように、ユーザーは、ベゼル・ジェスチャーを使用することによって、このページの一部を保存するまたはしまうことができる。最初に、ユーザーの手（この場合左手）の２本の指をベゼルからスクリーン上にさっとなでるように動かす。この特定の例では、ユーザーの左手は、背２４０８からベゼル・ジェスチャーを開始し、上向き矢印の方向に動かす。すると、ここでは２４１２で示される、２本の指の間の領域が強調される。次いで、ユーザーの他方の手がこの強調されたエリアをさっとなでるように動いて、ページの強調された部分を引き抜き、図示のように、この強調された部分を保存するまたはしまうことができる。１つ以上の実施形態では、このジェスチャーは、スクリーンの４つのエッジのうち任意のものにおいてサポートすることができ、つまり、水平方向または垂直方向の細片を、右利きまたは左利きのユーザーのいずれによっても、スクリーンから引き抜くことが可能になる。少なくとも一部の実施形態では、このページの引き抜かれた部分は、２つの引き抜かれたエッジと、２つのきれいに切り取られたエッジとを有し、しまったページまたは他のしまったオブジェクトからそれを区別することができる。
[00125] 図２５は、１つ以上の実施形態による方法におけるステップを記述する流れ図である。この方法は、任意の適したハードウェア、ソフトウェア、ファームウェア、またはその組み合わせと関連付けて実現することができる。少なくとも一部の実施形態では、この方法は、以上で説明したシステムおよび以下で説明するシステムというような、システムと関連付けて実現することができる。
[00126] ステップ２５００では、ページに対するベゼル・ジェスチャー入力を受ける。ステップ２５０２では、この入力と関連付けられたページ操作機能を確認する。任意の適したタイプのページ操作機能を確認することができる。その例は、先に示されている。ステップ２５０４では、確認されたページ操作機能にアクセスする。
[00127] 図２６は、１つ以上の実施形態による方法におけるステップを記述する流れ図である。この方法は、任意の適したハードウェア、ソフトウェア、ファームウェア、またはその組み合わせと関連付けて実現することができる。少なくとも一部の実施形態では、この方法は、以上で説明したシステムおよび以下で説明するシステムというような、システムと関連付けて実現することができる。
[00128] ステップ２６００では、ページに対するオンスクリーン入力を受ける。任意の適したタイプの入力を受けることができる。少なくとも一部の実施形態では、受けたスクリーン入力は、タッチ入力またはスタイラス入力を含む。ステップ２６０２では、このページに対するベゼル・ジェスチャー入力を受ける。任意の適したタイプのベゼル・ジェスチャー入力を受けることができる。その例は、先に示されている。ステップ２６０４では、この組み合わせ入力と関連付けられたページ操作機能を確認する。ページ操作機能の例は、先に示されている。ステップ２６０６では、ページに対する機能を実現する目的で、この確認したページ操作機能にアクセスする。
[00129] このように、ページめくりおよびページ保存動作は、少なくとも何らかの共通の態様を含むベゼル・ジェスチャーの使用によって、統一することができる。これら２つの動作の統一によって、ユーザーにとって簡素さが得られ発見可能性(discoverability)を促進する。
[00130] １つ以上の実施形態では、ベゼル・ジェスチャーの使用によって、他のページ操作動作も実現することができる。一例として、図２７について検討する。ここでは、デバイス２７０２はベゼル２７０３を含む。ディスプレイ・デバイス（指定されていない）上にページ２７０４が表示されている。この図示し説明する実施形態では、ベゼル・ジェスチャーの使用によって、ブックマーク・タブを作ることができる。具体的には、図２７の最下位部分に示すように、ベゼル２７０３上でジェスチャーを開始し、ページ２７０４上まで動かすことによって、ブックマーク・タブ２７０６を作ることができる。この図示し説明する実施形態では、ブックマーク・タブを作るベゼル・ジェスチャーは、図示のように、ベゼルの角において始まる。ベゼル上にある任意の適した位置を、ブックマーク・タブを作るために利用することができる。
[00131] 代わりにまたは加えて、ページの隅を折るためにベゼル・ジェスチャーを利用することができる。一例として、図２８について検討する。ここでは、デバイス２８０２はベゼル２８０３を含む。ディスプレイ・デバイス（指定されていない）上にページ２８０４が表示されている。この図示し説明する実施形態では、ベゼル・ジェスチャーの使用によって、ページ隅の折れを作ることができる。具体的には、図２８の最下位部分に示すように、ベゼル２８０３上でジェスチャーを開始し、ページ２８０４上に動き、ついで矢印で示すように反対方向にページから出ることによって、ページ隅の折れ２８０６を作ることができる。この図示し説明する実施形態では、ページ隅の折れを作るベゼル・ジェスチャーは、図示のように、ベゼルの角において始まる。ベゼル上にある任意の適した位置を、ページ隅の折れを作るために、利用することができる。例えば、他の実施形態では、ページ隅の折れは、ページの角を横切って切り裂くベゼル・ジェスチャーによって作ることができる。
[00132] １つ以上の実施形態では、文書の中にあるユーザーが作ったタブまたは予め定められているタブのようなタブを露出するために、ジェスチャーを利用することができる。一例として、図２９について検討する。ここでは、デバイス２９０２はベゼル２９０３を含む。ページ２９０４が、ディスプレイ・デバイス（指定されていない）上に表示されている。１つ以上の実施形態では、図示のように、ページ２９０４のエッジにおいて引っ張ってタブ構造２９０６を露出するベゼル・ジェスチャーを利用することによって、タブを露出することができる。ベゼル・ジェスチャーがスクリーン上まで動くと、ページが多少右側に引っ張られて、タブ構造２９０６を露出する。この場合、ジェスチャーは、２本以上の指が、図示のように、合わせて保持されており、それらの間にギャップはない。
[00133] １つ以上の実施形態では、ページをドラッグし続けることによって、更に別の構造を表に出すことができる。例えば、ページをドラッグし続けると、ページ２９０４の左側に、表組織図を露出することができる。少なくとも一部の実施形態では、ページ全体を横切ってジェスチャーを続けると、前述のように、ページ全体を保存するまたはしまうことができる。
[00134] 図３０は、１つ以上の実施形態による方法におけるステップを記述する流れ図である。この方法は、任意の適したハードウェア、ソフトウェア、ファームウェア、またはその組み合わせと関連付けて実現することができる。少なくとも一部の実施形態では、この方法は、以上で説明したシステムおよび以下で説明するシステムというような、システムと関連付けて実現することができる。
[00135] ステップ３０００では、ページに対するベゼル・ジェスチャー入力を受ける。ステップ３００２では、ベゼル・ジェスチャー入力を受けたことに応答して、このページに対するブックマーク・タブを作る。これをどのように行うことができるかの例は、以上で説明されている。
[00136] 図３１は、１つ以上の実施形態による方法におけるステップを記述する流れ図である。この方法は、任意の適したハードウェア、ソフトウェア、ファームウェア、またはその組み合わせと関連付けて実現することができる。少なくとも一部の実施形態では、この方法は、以上で説明したシステムおよび以下で説明するシステムというような、システムと関連付けて実現することができる。
[00137] ステップ３１００では、ページに対するベゼル・ジェスチャー入力を受ける。ステップ３１０２では、このベゼル・ジェスチャー入力を受けたことに応答して、ページ上にページ隅の折りを作る。これをどのように行うことができるかの例は、以上で説明している。
[00138] 図３２は、１つ以上の実施形態による方法におけるステップを記述する流れ図である。この方法は、任意の適したハードウェア、ソフトウェア、ファームウェア、またはその組み合わせと関連付けて実現することができる。少なくとも一部の実施形態では、この方法は、以上で説明したシステムおよび以下で説明するシステムというような、システムと関連付けて実現することができる。
[00139] ステップ３２００では、ページに対するベゼル・ジェスチャー入力を受ける。ステップ３２０２では、このページと関連付けられたタブ構造を露出する。 これをどのように行うことができるかの例は、以上で説明している。
デバイス例
[00140] 図３３は、本明細書において記載したジェスチャー技法の実施形態を実現するために、図１および図２を参照して説明したような、任意のタイプの携帯用デバイスおよび／またはコンピューター・デバイスとして実現することができるデバイス例３３００の種々のコンポーネントを示す。デバイス３３００は、デバイス・データー３３０４（例えば、受信データー、受信されているデーター、ブロードキャストの予定が組まれているデーター、データーのデーター・パケット等）の有線および／またはワイヤレス通信を可能にする通信デバイス３３０２を含む。デバイス・データー３０４または他のデバイス・コンテンツは、このデバイスのコンフィギュレーション設定値、このデバイスに格納されているメディア・コンテンツ、およびこのデバイスのユーザーと関連にある情報を含むことができる。デバイス３３００に格納されているメディア・コンテンツは、任意のタイプのオーディオ、ビデオ、および／または画像データーを含むことができる。デバイス３３００は、１つ以上のデーター入力３３０６を含み、これらを介して、ユーザー選択可能な入力、メッセージ、音楽、テレビジョン・メディア・コンテンツ、記録されているビデオ・コンテンツ、ならびに任意の他のタイプのオーディオ、ビデオ、および／または任意のコンテンツおよび／またはデーター・ソースから受信された画像データーというような、任意のタイプのデーター、メディア・コンテンツ、および／または入力を受けることができる。
[00141] また、デバイス３３００は、通信インターフェース３３０８も含む。通信インターフェース３３０８は、シリアルおよび／またはパラレル・インターフェース、ワイヤレス・インターフェース、任意のタイプのネットワーク・インターフェース、モデム、ならびに任意の他のタイプの通信インターフェースのうち任意の１つ以上として実現することができる。通信インターフェース３３０８は、デバイス３３００と通信ネットワークとの間に、接続および／または通信リンクを設け、これを介して、他の電子機器、計算デバイス、および通信デバイスがデバイス３３００とデーターを通信する。
[00142] デバイス３３００は、１つ以上のプロセッサー３３１０（例えば、マイクロプロセッサー、コントローラ等のうち任意のもの）を含む。プロセッサー３３１０は、デバイス３３００の動作を制御するため、そして以上で説明したジェスチャーの実施形態を実現するために、種々のコンピューター実行可能命令または読み取り可能命令を処理する。代わりにまたは加えて、デバイス３３００には、全体的に３３１２で識別される処理および制御回路と共に実装されるハードウェア、ファームウェア、または固定論理回路のうち任意のものまたは組み合わせを実装することができる。図示されていないが、デバイス３３００は、当該デバイス内部にある種々のコンポーネントを結合するシステム・バスまたはデーター転送バスを含むことができる。システム・バスは、メモリー・バスまたはメモリー・コントローラ、周辺バス、ユニバーサル・シリアル・バス、および／または種々のバス・アーキテクチャーのうち任意のものを利用するプロセッサー・バスまたはローカル・バスというような、異なるバス構造のうち任意の１つまたは組み合わせを含むことができる。
[00143] また、デバイス３３００は、１つ以上のメモリー・コンポーネントというような、コンピューター読み取り可能媒体３３１４も含む。その例には、ランダム・アクセス・メモリー（ＲＡＭ）、不揮発性メモリー（例えば、リード・オンリー・メモリー（ＲＯＭ）、フラッシュ・メモリー、ＥＰＲＯＭ、ＥＥＰＲＯＭ等のうち任意の１つ以上）、およびディスク記憶デバイスが含まれる。ディスク記憶デバイスは、ハード・ディスク・ドライブ、記録可能および／または書き換え可能コンパクト・ディスク（ＣＤ）、任意のタイプのディジタル・バーサタイル・ディスク（ＤＶＤ）等というような、磁気または光記憶デバイスのうち任意のタイプとして実現することができる。また、デバイス３３００は、大容量記憶媒体デバイス３３１６も含むことができる。
[00144] コンピューター読み取り可能媒体３３１４は、デバイス・データー３３０４、ならびに種々のデバイス・アプリケーション３３１８や、デバイス３３００の動作態様に関する任意の他のタイプの情報および／またはデーターを格納するデーター記憶メカニズムを設ける。例えば、オペレーティング・システム３３２０は、コンピューター読み取り可能媒体によってコンピューター・アプリケーションとして維持し、プロセッサー３３１０において実行することができる。デバイス・アプリケーション３３１８は、デバイス・マネージャー（例えば、制御アプリケーション、ソフトウェア・アプリケーション、信号処理および制御モジュール、特定のデバイスにネーティブなコード、特定のデバイスに対するハードウェア抽象レイヤー等）を含むことができる。また、デバイス・アプリケーション３３１８は、本明細書において記載したジェスチャー技法の実施形態を実現するための任意のシステム・コンポーネントまたはモジュールも含む。この例では、デバイス・アプリケーション３３１８は、インターフェース・アプリケーション３３２２およびジェスチャー・キャプチャー・ドライバー３３２４を含む。これらは、ソフトウェア・モジュールおよび／またはコンピューター・アプリケーションとして示されている。ジェスチャー・キャプチャー・ドライバ３３２４は、タッチスクリーン、トラック・パッド、カメラ等のような、ジェスチャーを取り込むように構成されているデバイスに、インターフェースを設けるために使用されるソフトウェアを代表する。代わりにまたは加えて、インターフェース・アプリケーション３３２２およびジェスチャー・キャプチャー・ドライバー３３２４は、ハードウェア、ソフトウェア、ファームウェア、またはその任意の組み合わせとして実現することができる。
[00145] また、デバイス３３００は、オーディオおよび／またはビデオ入力／出力システム３３２６も含む。システム３３２６は、オーディオ・データーをオーディオ・システム３３２８に供給し、および／またはビデオ・データーをディスプレイ・システム３３３０に供給する。オーディオ・システム３３２８およびディスプレイ・システム３３３０は、オーディオ、ビデオ、および画像データーを処理し、表示し、および／またはそれ以外でレンダリングする任意のデバイスを含むことができる。ビデオ信号およびオーディオ信号は、デバイス３３００からオーディオ・デバイスおよび／またはディスプレイ・デバイスに、ＲＦ(無線周波）リンク、Ｓ−ビデオ・リンク、複合ビデオ・リンク、コンポーネント・ビデオ・リンク、ＤＶＩ（ディジタル・ビデオ・インターフェース）、アナログ・オーディオ接続、または他の同様の通信リンクを介して伝達することができる。一実施形態では、オーディオ・システム３３２８および／またはディスプレイ・システム３３３０は、デバイス３３００に対して外部のコンポーネントとして実現される。あるいは、オーディオ・システム３３２８および／またはディスプレイ・システム３３３０は、デバイス例３３００の統合コンポーネントとして実現される。
結論
[00146] タッチ・ディスプレイに対するベゼル・ジェスチャーについて記載した。少なくとも一部の実施形態では、デバイスのベゼルを使用して、ベゼル・ジェスチャーの使用によってアクセス可能な機能を拡張する。少なくとも一部の実施形態では、オフスクリーン・モーションをベゼルによって使用して、ベゼル・ジェスチャーによるスクリーン入力を作ることができる。ベゼル・ジェスチャーは、１本指のベゼル・ジェスチャー、複数指／同じ手のベゼル・ジェスチャー、および／または複数指、異なる手によるベゼル・ジェスチャーを含むことができる。
[00147] 以上、構造的特徴および／または方法論的動作に特定の文言で実施形態について説明したが、添付した特許請求の範囲において定められている実施形態は、これら説明した特定の特徴や動作には必ずしも限定されないことは言うまでもない。逆に、これらの特定の特徴や動作は、特許請求する実施形態を実現する形態例として開示したまでである。

Claims (15)

  1. 計算デバイスのベゼル上においてベゼル・ジェスチャーを受けるステップと、
    前記受けたことに少なくとも部分的に応答して、提示可能なベゼル・メニューを介して利用可能な機能にアクセスするステップと、
    を含む、方法。
  2. 請求項１記載の方法において、前記ベゼル・ジェスチャーが、前記ベゼル上において開始し、前記計算デバイスと関連したディスプレイ・デバイス上まで動く、方法。
  3. 請求項１記載の方法において、前記受けるステップが、前記ベゼル・メニューにアクセスするために使用可能な視覚的アフォーダンスに関するベゼル・ジェスチャーを受けるステップを含む、方法。
  4. 請求項３記載の方法であって、更に、前記機能にアクセスする前に、かつ前記視覚的アフォーダンスに関する前記ベゼル・ジェスチャーを受けたことに応答して、前記ベゼル・メニューを提示するステップを含む、方法。
  5. 請求項４記載の方法において、前記ベゼル・メニューが、ドロップ・ダウン・メニューを含む、方法。
  6. 請求項１記載の方法において、前記ベゼル・メニューが、複数のスロットを含み、個々のスロットが、それぞれの機能と関連付けられた、方法。
  7. 請求項１記載の方法において、前記ベゼル・メニューが、コマンド、ツール、およびオブジェクトへのアクセスを可能にするように構成された、方法。
  8. コンピューター読み取り可能命令を具体化した１つ以上のコンピューター読み取り可能記憶媒体であって、前記命令が、
    計算デバイス上にベゼル・アクセス可能なメニューを実現する命令と、
    機能にアクセスする命令であって、少なくともその機能の一部が、ベゼル・ジェスチャー入力によって、前記ベゼル・アクセス可能メニューと関連付けられた、命令と、
    を含む、１つ以上のコンピューター読み取り可能記憶媒体。
  9. 請求項８記載の１つ以上のコンピューター読み取り可能記憶媒体において、前記ベゼル・ジェスチャー入力が、前記ベゼル上で開始または終了する入力、前記ベゼルを交差または再交差する入力、前記ベゼルを異なる位置で交差する入力、複数のスクリーンと関連した１つ以上のベゼル上において行われる入力、１接触ドラッグを含む入力、２接触ドラッグを含む入力、または手接触ドラッグを含む入力のうち少なくとも１つを含む、コンピューター読み取り可能記憶媒体。
  10. 請求項８記載の１つ以上のコンピューター読み取り可能記憶媒体において、前記ベゼル・メニューが、複数のスロットを含み、個々のスロットがそれぞれの機能と関連付けられた、１つ以上のコンピューター読み取り可能記憶媒体。
  11. 請求項８記載の１つ以上のコンピューター読み取り可能記憶媒体において、前記ベゼル・メニューが、複数のスロットを含み、個々のスロットがそれぞれの機能と関連付けられ、少なくとも１つのスロットが、他のスロットと比較して狭くした幅を有する、１つ以上のコンピューター読み取り可能記憶媒体。
  12. 請求項８記載の１つ以上のコンピューター読み取り可能記憶媒体において、前記ベゼル・メニューが、複数のスロットを含み、個々のスロットがそれぞれの機能と関連付けられ、少なくとも１つのスロットが、他のスロットと比較して狭くした幅を有し、前記少なくとも１つのスロットが角スロットを含む、１つ以上のコンピューター読み取り可能記憶媒体。
  13. 請求項８記載の１つ以上のコンピューター読み取り可能記憶媒体であって、更に、異なるジェスチャー・モードによって、前記ベゼル・アクセス可能メニューと関連付けられた機能に対するアクセスを可能にする命令を含む、１つ以上のコンピューター読み取り可能記憶媒体。
  14. 請求項８記載の１つ以上のコンピューター読み取り可能記憶媒体であって、更に、異なるジェスチャー・モードによって、前記ベゼル・アクセス可能メニューと関連付けられた機能に対するアクセスを可能にする命令を含み、第１ジェスチャー・モードが、前記ベゼル・アクセス可能メニューを見せる初心者モードを含み、第２ジェスチャー・モードが、前記ベゼル・アクセス可能メニューを見せない習熟者モードを含む、１つ以上のコンピューター読み取り可能記憶媒体。
  15. 請求項８記載の１つ以上のコンピューター読み取り可能記憶媒体であって、更に、前記ベゼル・アクセス可能メニューと関連付けられた機能にアクセスするために使用されるように構成された前記ベゼル・アクセス可能メニューと関連付けられた視覚的アフォーダンスを表示する命令を含む、１つ以上のコンピューター読み取り可能記憶媒体。
JP2012554008A 2010-02-19 2011-02-17 オンスクリーン入力を作るためのオフスクリーン・ジェスチャー Active JP5883400B2 (ja)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US12/709,204 US9274682B2 (en) 2010-02-19 2010-02-19 Off-screen gestures to create on-screen input
US12/709,204 2010-02-19
PCT/US2011/025131 WO2011103218A2 (en) 2010-02-19 2011-02-17 Off-screen gestures to create on-screen input

Publications (3)

Publication Number Publication Date
JP2013520727A true JP2013520727A (ja) 2013-06-06
JP2013520727A5 JP2013520727A5 (ja) 2014-04-03
JP5883400B2 JP5883400B2 (ja) 2016-03-15

Family

ID=44476093

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2012554008A Active JP5883400B2 (ja) 2010-02-19 2011-02-17 オンスクリーン入力を作るためのオフスクリーン・ジェスチャー

Country Status (6)

Country Link
US (1) US9274682B2 (ja)
EP (1) EP2537088B1 (ja)
JP (1) JP5883400B2 (ja)
CN (1) CN102884498B (ja)
CA (1) CA2788137C (ja)
WO (1) WO2011103218A2 (ja)

Cited By (19)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2013529339A (ja) * 2010-09-24 2013-07-18 リサーチ イン モーション リミテッド 携帯用電子デバイスおよびそれを制御する方法
JP2014229302A (ja) * 2013-05-21 2014-12-08 三星電子株式会社Ｓａｍｓｕｎｇ Ｅｌｅｃｔｒｏｎｉｃｓ Ｃｏ．，Ｌｔｄ． 電子装置の機能の実行方法及びその電子装置
JP2016512905A (ja) * 2013-03-15 2016-05-09 フェイスブック，インク． ユーザ・インターフェースから起動するための対話型要素
KR20160054382A (ko) * 2014-11-06 2016-05-16 삼성전자주식회사 전자 장치 및 전자 장치의 디스플레이 장치 화면 제어방법
JPWO2015159629A1 (ja) * 2014-04-18 2017-04-13 株式会社村田製作所 表示装置及びプログラム
JP2018032425A (ja) * 2017-10-18 2018-03-01 華為技術有限公司Ｈｕａｗｅｉ Ｔｅｃｈｎｏｌｏｇｉｅｓ Ｃｏ．，Ｌｔｄ． サイドメニュー表示方法、装置及び端末
JP2019164790A (ja) * 2015-06-07 2019-09-26 アップル インコーポレイテッドＡｐｐｌｅ Ｉｎｃ． ユーザインタフェース間をナビゲートするためのデバイス及び方法
US10691298B2 (en) 2013-12-30 2020-06-23 Huawei Technologies Co., Ltd. Side menu displaying method and apparatus and terminal
US11112957B2 (en) 2015-03-08 2021-09-07 Apple Inc. Devices, methods, and graphical user interfaces for interacting with a control object while dragging another object
US11182017B2 (en) 2015-08-10 2021-11-23 Apple Inc. Devices and methods for processing touch inputs based on their intensities
US11221675B2 (en) 2012-05-09 2022-01-11 Apple Inc. Device, method, and graphical user interface for providing tactile feedback for operations performed in a user interface
US11231831B2 (en) 2015-06-07 2022-01-25 Apple Inc. Devices and methods for content preview based on touch input intensity
US11240424B2 (en) 2015-06-07 2022-02-01 Apple Inc. Devices and methods for capturing and interacting with enhanced digital images
US11314407B2 (en) 2012-05-09 2022-04-26 Apple Inc. Device, method, and graphical user interface for providing feedback for changing activation states of a user interface object
US11327648B2 (en) 2015-08-10 2022-05-10 Apple Inc. Devices, methods, and graphical user interfaces for manipulating user interface objects with visual and/or haptic feedback
US11354033B2 (en) 2012-05-09 2022-06-07 Apple Inc. Device, method, and graphical user interface for managing icons in a user interface region
US11550471B2 (en) 2015-03-19 2023-01-10 Apple Inc. Touch input cursor manipulation
US11921975B2 (en) 2015-03-08 2024-03-05 Apple Inc. Devices, methods, and graphical user interfaces for manipulating user interface objects with visual and/or haptic feedback
US11989394B2 (en) 2012-05-18 2024-05-21 Apple Inc. Device, method, and graphical user interface for manipulating user interfaces based on fingerprint sensor inputs

Families Citing this family (144)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8018440B2 (en) 2005-12-30 2011-09-13 Microsoft Corporation Unintentional touch rejection
JP2010191892A (ja) * 2009-02-20 2010-09-02 Sony Corp 情報処理装置、表示制御方法、及びプログラム
US8803474B2 (en) * 2009-03-25 2014-08-12 Qualcomm Incorporated Optimization of wireless power devices
US8836648B2 (en) 2009-05-27 2014-09-16 Microsoft Corporation Touch pull-in gesture
US8239785B2 (en) 2010-01-27 2012-08-07 Microsoft Corporation Edge gestures
US9411504B2 (en) 2010-01-28 2016-08-09 Microsoft Technology Licensing, Llc Copy and staple gestures
US8261213B2 (en) 2010-01-28 2012-09-04 Microsoft Corporation Brush, carbon-copy, and fill gestures
US9519356B2 (en) 2010-02-04 2016-12-13 Microsoft Technology Licensing, Llc Link gestures
US20110209098A1 (en) * 2010-02-19 2011-08-25 Hinckley Kenneth P On and Off-Screen Gesture Combinations
US9965165B2 (en) 2010-02-19 2018-05-08 Microsoft Technology Licensing, Llc Multi-finger gestures
US9310994B2 (en) 2010-02-19 2016-04-12 Microsoft Technology Licensing, Llc Use of bezel as an input mechanism
US8799827B2 (en) 2010-02-19 2014-08-05 Microsoft Corporation Page manipulations using on and off-screen gestures
US9367205B2 (en) 2010-02-19 2016-06-14 Microsoft Technolgoy Licensing, Llc Radial menus with bezel gestures
US9075522B2 (en) * 2010-02-25 2015-07-07 Microsoft Technology Licensing, Llc Multi-screen bookmark hold gesture
US8539384B2 (en) * 2010-02-25 2013-09-17 Microsoft Corporation Multi-screen pinch and expand gestures
US8707174B2 (en) 2010-02-25 2014-04-22 Microsoft Corporation Multi-screen hold and page-flip gesture
US8751970B2 (en) 2010-02-25 2014-06-10 Microsoft Corporation Multi-screen synchronous slide gesture
US9454304B2 (en) 2010-02-25 2016-09-27 Microsoft Technology Licensing, Llc Multi-screen dual tap gesture
US8473870B2 (en) 2010-02-25 2013-06-25 Microsoft Corporation Multi-screen hold and drag gesture
KR20110121125A (ko) * 2010-04-30 2011-11-07 삼성전자주식회사 인터랙티브 디스플레이 장치 및 이의 동작 방법
US20110296351A1 (en) * 2010-05-26 2011-12-01 T-Mobile Usa, Inc. User Interface with Z-axis Interaction and Multiple Stacks
US20120050183A1 (en) 2010-08-27 2012-03-01 Google Inc. Switching display modes based on connection state
JP5001412B2 (ja) * 2010-09-03 2012-08-15 株式会社コナミデジタルエンタテインメント ゲーム装置、ゲーム制御方法、ならびに、プログラム
WO2012037689A1 (en) 2010-09-24 2012-03-29 Qnx Software Systems Limited Alert display on a portable electronic device
EP2434368B1 (en) * 2010-09-24 2018-08-01 BlackBerry Limited Method for conserving power on a portable electronic device and a portable electronic device configured for the same
US9684444B2 (en) 2010-09-24 2017-06-20 Blackberry Limited Portable electronic device and method therefor
US8823640B1 (en) 2010-10-22 2014-09-02 Scott C. Harris Display reconfiguration and expansion across multiple devices
US20120159395A1 (en) 2010-12-20 2012-06-21 Microsoft Corporation Application-launching interface for multiple modes
US8689123B2 (en) 2010-12-23 2014-04-01 Microsoft Corporation Application reporting in an application-selectable user interface
US8612874B2 (en) 2010-12-23 2013-12-17 Microsoft Corporation Presenting an application change through a tile
US8446363B1 (en) 2010-12-30 2013-05-21 Google Inc. Enhanced input using touch screen
JP5197777B2 (ja) * 2011-02-01 2013-05-15 株式会社東芝 インターフェイス装置、方法、およびプログラム
US20120256829A1 (en) * 2011-04-05 2012-10-11 Qnx Software Systems Limited Portable electronic device and method of controlling same
CN103999028B (zh) * 2011-05-23 2018-05-15 微软技术许可有限责任公司 不可见控件
US9104440B2 (en) 2011-05-27 2015-08-11 Microsoft Technology Licensing, Llc Multi-application environment
US9658766B2 (en) 2011-05-27 2017-05-23 Microsoft Technology Licensing, Llc Edge gesture
US8893033B2 (en) 2011-05-27 2014-11-18 Microsoft Corporation Application notifications
US9158445B2 (en) 2011-05-27 2015-10-13 Microsoft Technology Licensing, Llc Managing an immersive interface in a multi-application immersive environment
US9104307B2 (en) 2011-05-27 2015-08-11 Microsoft Technology Licensing, Llc Multi-application environment
WO2012167735A1 (zh) * 2011-06-07 2012-12-13 联想(北京)有限公司 电子设备、触摸输入方法和控制方法
US9792017B1 (en) 2011-07-12 2017-10-17 Domo, Inc. Automatic creation of drill paths
US9202297B1 (en) * 2011-07-12 2015-12-01 Domo, Inc. Dynamic expansion of data visualizations
US9454299B2 (en) * 2011-07-21 2016-09-27 Nokia Technologies Oy Methods, apparatus, computer-readable storage mediums and computer programs for selecting functions in a graphical user interface
US9417754B2 (en) 2011-08-05 2016-08-16 P4tents1, LLC User interface system, method, and computer program product
US20130057587A1 (en) 2011-09-01 2013-03-07 Microsoft Corporation Arranging tiles
US8743069B2 (en) * 2011-09-01 2014-06-03 Google Inc. Receiving input at a computing device
US9146670B2 (en) 2011-09-10 2015-09-29 Microsoft Technology Licensing, Llc Progressively indicating new content in an application-selectable user interface
US10318146B2 (en) * 2011-09-12 2019-06-11 Microsoft Technology Licensing, Llc Control area for a touch screen
US8810535B2 (en) 2011-10-18 2014-08-19 Blackberry Limited Electronic device and method of controlling same
JP5816516B2 (ja) 2011-10-24 2015-11-18 京セラ株式会社 電子機器、制御プログラム及び処理実行方法
US9990119B2 (en) * 2011-12-15 2018-06-05 Blackberry Limited Apparatus and method pertaining to display orientation
US20130154959A1 (en) * 2011-12-20 2013-06-20 Research In Motion Limited System and method for controlling an electronic device
US9030407B2 (en) * 2011-12-21 2015-05-12 Nokia Technologies Oy User gesture recognition
US9250768B2 (en) * 2012-02-13 2016-02-02 Samsung Electronics Co., Ltd. Tablet having user interface
US9594499B2 (en) * 2012-02-21 2017-03-14 Nokia Technologies Oy Method and apparatus for hover-based spatial searches on mobile maps
US9778706B2 (en) * 2012-02-24 2017-10-03 Blackberry Limited Peekable user interface on a portable electronic device
US20130222272A1 (en) * 2012-02-28 2013-08-29 Research In Motion Limited Touch-sensitive navigation in a tab-based application interface
CN102629185A (zh) * 2012-02-29 2012-08-08 中兴通讯股份有限公司 一种触摸操作的处理方法及移动终端
ES2845274T3 (es) * 2012-03-06 2021-07-26 Huawei Device Co Ltd Método de operación de pantalla táctil y terminal
US10078420B2 (en) * 2012-03-16 2018-09-18 Nokia Technologies Oy Electronic devices, associated apparatus and methods
FR2990020B1 (fr) * 2012-04-25 2014-05-16 Fogale Nanotech Dispositif de detection capacitive avec arrangement de pistes de liaison, et procede mettant en oeuvre un tel dispositif.
US9395852B2 (en) * 2012-05-07 2016-07-19 Cirque Corporation Method for distinguishing between edge swipe gestures that enter a touch sensor from an edge and other similar but non-edge swipe actions
WO2013169845A1 (en) 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for scrolling nested regions
US10108265B2 (en) 2012-05-09 2018-10-23 Apple Inc. Calibration of haptic feedback systems for input devices
WO2013169851A2 (en) 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for facilitating user interaction with controls in a user interface
WO2013169875A2 (en) 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for displaying content associated with a corresponding affordance
DE112013002410T5 (de) 2012-05-09 2015-01-22 Apple Inc. Variieren der Ausgabe für eine rechnende Vorrichtung basierend auf Tracking-Fenstern
WO2013169842A2 (en) 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for selecting object within a group of objects
WO2013169849A2 (en) 2012-05-09 2013-11-14 Industries Llc Yknots Device, method, and graphical user interface for displaying user interface objects corresponding to an application
WO2013169843A1 (en) 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for manipulating framed graphical objects
EP3264252B1 (en) 2012-05-09 2019-11-27 Apple Inc. Device, method, and graphical user interface for performing an operation in accordance with a selected mode of operation
WO2013169865A2 (en) 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for moving a user interface object based on an intensity of a press input
CN104487928B (zh) 2012-05-09 2018-07-06 苹果公司 用于响应于手势而在显示状态之间进行过渡的设备、方法和图形用户界面
EP3410287B1 (en) 2012-05-09 2022-08-17 Apple Inc. Device, method, and graphical user interface for selecting user interface objects
US20150109223A1 (en) 2012-06-12 2015-04-23 Apple Inc. Haptic electromagnetic actuator
CN102830901A (zh) * 2012-06-29 2012-12-19 鸿富锦精密工业（深圳）有限公司 办公装置
US8994678B2 (en) * 2012-07-18 2015-03-31 Samsung Electronics Co., Ltd. Techniques for programmable button on bezel of mobile terminal
US9886116B2 (en) * 2012-07-26 2018-02-06 Apple Inc. Gesture and touch input detection through force sensing
US20140055369A1 (en) * 2012-08-22 2014-02-27 Qualcomm Innovation Center, Inc. Single-gesture mobile computing device operations
EP3182261A1 (en) * 2012-09-17 2017-06-21 Huawei Device Co., Ltd. Touch operation processing method and terminal device
US9411461B2 (en) * 2012-10-17 2016-08-09 Adobe Systems Incorporated Moveable interactive shortcut toolbar and unintentional hit rejecter for touch input devices
TWI493386B (zh) * 2012-10-22 2015-07-21 Elan Microelectronics Corp 游標控制裝置及利用其啟動作業系統功能選單的控制方法
US9582122B2 (en) 2012-11-12 2017-02-28 Microsoft Technology Licensing, Llc Touch-sensitive bezel techniques
US9542018B2 (en) * 2012-11-12 2017-01-10 Htc Corporation Touch panel and electronic apparatus
KR20150106397A (ko) 2012-11-27 2015-09-21 톰슨 라이센싱 적응적 가상 키보드
WO2014083368A1 (en) 2012-11-27 2014-06-05 Thomson Licensing Adaptive virtual keyboard
JP2014127103A (ja) * 2012-12-27 2014-07-07 Brother Ind Ltd 資料共有プログラム、端末装置、資料共有方法
KR101958517B1 (ko) 2012-12-29 2019-03-14 애플 인크. 터치 입력에서 디스플레이 출력으로의 관계들 사이에서 전환하기 위한 디바이스, 방법, 및 그래픽 사용자 인터페이스
CN109375853A (zh) 2012-12-29 2019-02-22 苹果公司 对用户界面分级结构导航的设备、方法和图形用户界面
WO2014105277A2 (en) 2012-12-29 2014-07-03 Yknots Industries Llc Device, method, and graphical user interface for moving a cursor according to a change in an appearance of a control icon with simulated three-dimensional characteristics
WO2014105279A1 (en) 2012-12-29 2014-07-03 Yknots Industries Llc Device, method, and graphical user interface for switching between user interfaces
WO2014105275A1 (en) 2012-12-29 2014-07-03 Yknots Industries Llc Device, method, and graphical user interface for forgoing generation of tactile output for a multi-contact gesture
EP3564806B1 (en) 2012-12-29 2024-02-21 Apple Inc. Device, method and graphical user interface for determining whether to scroll or select contents
CN103076959A (zh) 2013-02-06 2013-05-01 华为终端有限公司 电子设备及其屏幕解锁方法
US9304587B2 (en) 2013-02-13 2016-04-05 Apple Inc. Force sensing mouse
US10578499B2 (en) 2013-02-17 2020-03-03 Microsoft Technology Licensing, Llc Piezo-actuated virtual buttons for touch surfaces
US20140232679A1 (en) * 2013-02-17 2014-08-21 Microsoft Corporation Systems and methods to protect against inadvertant actuation of virtual buttons on touch surfaces
CN104035694B (zh) * 2013-03-04 2018-11-09 观致汽车有限公司 车用多媒体交互方法及装置
CN103150095B (zh) * 2013-03-07 2015-12-23 东莞宇龙通信科技有限公司 终端和终端操控方法
CN104063037B (zh) * 2013-03-18 2017-03-29 联想(北京)有限公司 一种操作命令识别方法、装置和穿戴式电子设备
US9063576B1 (en) * 2013-04-04 2015-06-23 Amazon Technologies, Inc. Managing gesture input information
KR102157270B1 (ko) * 2013-04-26 2020-10-23 삼성전자주식회사 펜을 이용하는 사용자 단말 장치 및 그 제어 방법
US10481769B2 (en) * 2013-06-09 2019-11-19 Apple Inc. Device, method, and graphical user interface for providing navigation and search functionalities
JP2015005182A (ja) * 2013-06-21 2015-01-08 カシオ計算機株式会社 入力装置、入力方法及びプログラム並びに電子機器
US9367280B2 (en) * 2013-08-06 2016-06-14 Intel Corporation Dual screen visibility with virtual transparency
US9110561B2 (en) 2013-08-12 2015-08-18 Apple Inc. Context sensitive actions
GB2519558A (en) 2013-10-24 2015-04-29 Ibm Touchscreen device with motion sensor
WO2015069259A1 (en) * 2013-11-07 2015-05-14 Intel Corporation Controlling primary and secondary displays from a single touchscreen
US9448631B2 (en) 2013-12-31 2016-09-20 Microsoft Technology Licensing, Llc Input device haptics and pressure sensing
US9600172B2 (en) * 2014-01-03 2017-03-21 Apple Inc. Pull down navigation mode
US20150242037A1 (en) 2014-01-13 2015-08-27 Apple Inc. Transparent force sensor with strain relief
CN103793055A (zh) * 2014-01-20 2014-05-14 华为终端有限公司 一种手势响应方法及终端
US9477337B2 (en) 2014-03-14 2016-10-25 Microsoft Technology Licensing, Llc Conductive trace routing for display and bezel sensors
CN106170747A (zh) * 2014-04-14 2016-11-30 夏普株式会社 输入装置及输入装置的控制方法
US9798399B2 (en) 2014-06-02 2017-10-24 Synaptics Incorporated Side sensing for electronic devices
US10297119B1 (en) 2014-09-02 2019-05-21 Apple Inc. Feedback device in an electronic device
US20160077793A1 (en) * 2014-09-15 2016-03-17 Microsoft Corporation Gesture shortcuts for invocation of voice input
US9939901B2 (en) 2014-09-30 2018-04-10 Apple Inc. Haptic feedback assembly
US10048767B2 (en) * 2014-11-06 2018-08-14 Samsung Electronics Co., Ltd. Electronic apparatus and method of controlling multi-vision screen including a plurality of display apparatuses
CN104503682A (zh) * 2014-11-07 2015-04-08 联发科技（新加坡）私人有限公司 一种屏幕显示窗口的处理方法以及移动终端
CN105759950B (zh) * 2014-12-18 2019-08-02 宇龙计算机通信科技(深圳)有限公司 移动终端信息输入方法及移动终端
US9798409B1 (en) 2015-03-04 2017-10-24 Apple Inc. Multi-force input device
US10048757B2 (en) 2015-03-08 2018-08-14 Apple Inc. Devices and methods for controlling media presentation
US9990107B2 (en) 2015-03-08 2018-06-05 Apple Inc. Devices, methods, and graphical user interfaces for displaying and using menus
US9645732B2 (en) 2015-03-08 2017-05-09 Apple Inc. Devices, methods, and graphical user interfaces for displaying and using menus
US9785305B2 (en) 2015-03-19 2017-10-10 Apple Inc. Touch input cursor manipulation
US10152208B2 (en) 2015-04-01 2018-12-11 Apple Inc. Devices and methods for processing touch inputs based on their intensities
US10346030B2 (en) 2015-06-07 2019-07-09 Apple Inc. Devices and methods for navigating between user interfaces
US10200598B2 (en) 2015-06-07 2019-02-05 Apple Inc. Devices and methods for capturing and interacting with enhanced digital images
US9674426B2 (en) 2015-06-07 2017-06-06 Apple Inc. Devices and methods for capturing and interacting with enhanced digital images
US10235035B2 (en) 2015-08-10 2019-03-19 Apple Inc. Devices, methods, and graphical user interfaces for content navigation and manipulation
US10416800B2 (en) 2015-08-10 2019-09-17 Apple Inc. Devices, methods, and graphical user interfaces for adjusting user interface objects
US10248308B2 (en) 2015-08-10 2019-04-02 Apple Inc. Devices, methods, and graphical user interfaces for manipulating user interfaces with physical gestures
US10430051B2 (en) * 2015-12-29 2019-10-01 Facebook, Inc. Multi-user content presentation system
US9454259B2 (en) 2016-01-04 2016-09-27 Secugen Corporation Multi-level command sensing apparatus
DE102016208575A1 (de) * 2016-05-19 2017-11-23 Heidelberger Druckmaschinen Ag Touchpad mit Gestensteuerung für Wallscreen
CN109804339B (zh) * 2016-10-11 2021-01-01 华为技术有限公司 识别操作的方法、装置及移动终端
KR102442457B1 (ko) 2017-11-10 2022-09-14 삼성전자주식회사 전자 장치 및 그 제어 방법
USD875740S1 (en) * 2018-03-14 2020-02-18 Google Llc Display screen with graphical user interface
USD879114S1 (en) * 2018-03-29 2020-03-24 Google Llc Display screen with graphical user interface
WO2020000276A1 (zh) * 2018-06-27 2020-01-02 华为技术有限公司 一种快捷按键的控制方法及终端
JP6686084B2 (ja) * 2018-08-31 2020-04-22 レノボ・シンガポール・プライベート・リミテッド 電子機器
JP7382863B2 (ja) * 2020-03-16 2023-11-17 株式会社ワコム ポインタの位置検出方法及びセンサコントローラ
US11409410B2 (en) 2020-09-14 2022-08-09 Apple Inc. User input interfaces

Citations (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002055753A (ja) * 2000-08-10 2002-02-20 Canon Inc 情報処理装置、機能一覧表表示方法、及び記憶媒体
JP2005004690A (ja) * 2003-06-16 2005-01-06 Sony Corp 入力方法および入力装置
JP2005122271A (ja) * 2003-10-14 2005-05-12 Sony Ericsson Mobilecommunications Japan Inc 携帯型電子装置
JP2005149279A (ja) * 2003-11-18 2005-06-09 Matsushita Electric Ind Co Ltd 情報処理装置およびプログラム
US20060238517A1 (en) * 2005-03-04 2006-10-26 Apple Computer, Inc. Electronic Device Having Display and Surrounding Touch Sensitive Bezel for User Interface and Control
JP3143462U (ja) * 2007-05-15 2008-07-24 宏達國際電子股▲ふん▼有限公司 切り替え可能なユーザ・インターフェースを有する電子デバイスおよび便利なタッチ操作機能を有する電子デバイス
JP2008532185A (ja) * 2005-03-04 2008-08-14 アップル インコーポレイテッド マルチタッチセンシングデバイスを持つハンドヘルド電子装置
JP2010019643A (ja) * 2008-07-09 2010-01-28 Toyota Motor Corp 情報端末、ナビゲーション装置、選択肢表示方法
JP2010026834A (ja) * 2008-07-22 2010-02-04 Nec Corp 表示装置、通信端末、表示装置の表示方法、および表示制御用プログラム
US20100137027A1 (en) * 2008-11-28 2010-06-03 Bong Soo Kim Control of input/output through touch
US20100164959A1 (en) * 2008-12-26 2010-07-01 Brown Craig T Rendering a virtual input device upon detection of a finger movement across a touch-sensitive display

Family Cites Families (260)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4686332A (en) 1986-06-26 1987-08-11 International Business Machines Corporation Combined finger touch and stylus detection system for use on the viewing surface of a visual display device
US4843538A (en) * 1985-04-30 1989-06-27 Prometrix Corporation Multi-level dynamic menu which suppresses display of items previously designated as non-selectable
US6167439A (en) 1988-05-27 2000-12-26 Kodak Limited Data retrieval, manipulation and transmission with facsimile images
US5231578A (en) * 1988-11-01 1993-07-27 Wang Laboratories, Inc. Apparatus for document annotation and manipulation using images from a window source
US5237647A (en) 1989-09-15 1993-08-17 Massachusetts Institute Of Technology Computer aided drawing in three dimensions
US5898434A (en) * 1991-05-15 1999-04-27 Apple Computer, Inc. User interface system having programmable user interface elements
US5349658A (en) * 1991-11-01 1994-09-20 Rourke Thomas C O Graphical user interface
US5351995A (en) 1992-01-29 1994-10-04 Apple Computer, Inc. Double-sided, reversible electronic paper
US5661773A (en) 1992-03-19 1997-08-26 Wisconsin Alumni Research Foundation Interface for radiation therapy machine
US5821930A (en) 1992-08-23 1998-10-13 U S West, Inc. Method and system for generating a working window in a computer system
US6097392A (en) 1992-09-10 2000-08-01 Microsoft Corporation Method and system of altering an attribute of a graphic object in a pen environment
US5463725A (en) 1992-12-31 1995-10-31 International Business Machines Corp. Data processing system graphical user interface which emulates printed material
DE69430967T2 (de) * 1993-04-30 2002-11-07 Xerox Corp Interaktives Kopiersystem
EP0626635B1 (en) * 1993-05-24 2003-03-05 Sun Microsystems, Inc. Improved graphical user interface with method for interfacing to remote devices
US5583984A (en) * 1993-06-11 1996-12-10 Apple Computer, Inc. Computer system with graphical user interface including automated enclosures
US5497776A (en) * 1993-08-05 1996-03-12 Olympus Optical Co., Ltd. Ultrasonic image diagnosing apparatus for displaying three-dimensional image
US5596697A (en) * 1993-09-30 1997-01-21 Apple Computer, Inc. Method for routing items within a computer system
US5664133A (en) 1993-12-13 1997-09-02 Microsoft Corporation Context sensitive menu system/menu behavior
US5491783A (en) * 1993-12-30 1996-02-13 International Business Machines Corporation Method and apparatus for facilitating integrated icon-based operations in a data processing system
JPH086707A (ja) * 1993-12-30 1996-01-12 Xerox Corp スクリーン指向ディスプレー処理システム
US5555369A (en) 1994-02-14 1996-09-10 Apple Computer, Inc. Method of creating packages for a pointer-based computer system
US5664128A (en) * 1995-02-23 1997-09-02 Apple Computer, Inc. Object storage apparatus for use with data sets in computer applications
JPH0926769A (ja) 1995-07-10 1997-01-28 Hitachi Ltd 画像表示装置
US5694150A (en) 1995-09-21 1997-12-02 Elo Touchsystems, Inc. Multiuser/multi pointing device graphical user interface system
US6029214A (en) 1995-11-03 2000-02-22 Apple Computer, Inc. Input tablet system with user programmable absolute coordinate mode and relative coordinate mode segments
US5761485A (en) * 1995-12-01 1998-06-02 Munyan; Daniel E. Personal electronic book system
JPH10192A (ja) 1996-04-15 1998-01-06 Olympus Optical Co Ltd 超音波画像診断装置
US5969720A (en) 1997-03-07 1999-10-19 International Business Machines Corporation Data processing system and method for implementing an informative container for a file system
US6920619B1 (en) * 1997-08-28 2005-07-19 Slavoljub Milekic User interface for removing an object from a display
US6310610B1 (en) 1997-12-04 2001-10-30 Nortel Networks Limited Intelligent touch display
WO1999028811A1 (en) * 1997-12-04 1999-06-10 Northern Telecom Limited Contextual gesture interface
US6037937A (en) * 1997-12-04 2000-03-14 Nortel Networks Corporation Navigation tool for graphical user interface
US20010047263A1 (en) 1997-12-18 2001-11-29 Colin Donald Smith Multimodal user interface
EP2256605B1 (en) 1998-01-26 2017-12-06 Apple Inc. Method and apparatus for integrating manual input
US7760187B2 (en) * 2004-07-30 2010-07-20 Apple Inc. Visual expander
US8479122B2 (en) * 2004-07-30 2013-07-02 Apple Inc. Gestures for touch sensitive input devices
US20070177804A1 (en) 2006-01-30 2007-08-02 Apple Computer, Inc. Multi-touch gesture dictionary
US9292111B2 (en) 1998-01-26 2016-03-22 Apple Inc. Gesturing with a multipoint sensing device
US7663607B2 (en) * 2004-05-06 2010-02-16 Apple Inc. Multipoint touchscreen
US6639577B2 (en) 1998-03-04 2003-10-28 Gemstar-Tv Guide International, Inc. Portable information display device with ergonomic bezel
US6239798B1 (en) * 1998-05-28 2001-05-29 Sun Microsystems, Inc. Methods and apparatus for a window access panel
US6337698B1 (en) 1998-11-20 2002-01-08 Microsoft Corporation Pen-based interface for a notepad computer
US6507352B1 (en) * 1998-12-23 2003-01-14 Ncr Corporation Apparatus and method for displaying a menu with an interactive retail terminal
US6545669B1 (en) * 1999-03-26 2003-04-08 Husam Kinawi Object-drag continuity between discontinuous touch-screens
US6396523B1 (en) 1999-07-29 2002-05-28 Interlink Electronics, Inc. Home entertainment device remote control
US6992687B1 (en) 1999-12-07 2006-01-31 Microsoft Corporation Bookmarking and placemarking a displayed document in a computer system
US6957233B1 (en) 1999-12-07 2005-10-18 Microsoft Corporation Method and apparatus for capturing and rendering annotations for non-modifiable electronic content
JP4803883B2 (ja) 2000-01-31 2011-10-26 キヤノン株式会社 位置情報処理装置及びその方法及びそのプログラム。
US6859909B1 (en) * 2000-03-07 2005-02-22 Microsoft Corporation System and method for annotating web-based documents
JP2001265523A (ja) 2000-03-21 2001-09-28 Sony Corp 情報入出力システム及び情報入出力方法、並びにプログラム記憶媒体
US7290285B2 (en) * 2000-06-30 2007-10-30 Zinio Systems, Inc. Systems and methods for distributing and viewing electronic documents
WO2002059868A1 (en) * 2001-01-24 2002-08-01 Interlink Electronics, Inc. Game and home entertainment device remote control
US20020101457A1 (en) 2001-01-31 2002-08-01 Microsoft Corporation Bezel interface for small computing devices
US20020116421A1 (en) 2001-02-17 2002-08-22 Fox Harold L. Method and system for page-like display, formating and processing of computer generated information on networked computers
US6961912B2 (en) 2001-07-18 2005-11-01 Xerox Corporation Feedback mechanism for use with visual selection methods
US7085274B1 (en) * 2001-09-19 2006-08-01 Juniper Networks, Inc. Context-switched multi-stream pipelined reorder engine
US6762752B2 (en) * 2001-11-29 2004-07-13 N-Trig Ltd. Dual function input device and method
JP2003195998A (ja) 2001-12-26 2003-07-11 Canon Inc 情報処理装置及び情報処理装置の制御方法及び情報処理装置の制御プログラム及び記憶媒体
JP2003296015A (ja) 2002-01-30 2003-10-17 Casio Comput Co Ltd 電子機器
US20030179541A1 (en) 2002-03-21 2003-09-25 Peter Sullivan Double screen portable computer
US7158675B2 (en) * 2002-05-14 2007-01-02 Microsoft Corporation Interfacing with ink
US7330184B2 (en) 2002-06-12 2008-02-12 Smart Technologies Ulc System and method for recognizing connector gestures
US7023427B2 (en) 2002-06-28 2006-04-04 Microsoft Corporation Method and system for detecting multiple touches on a touch-sensitive screen
US20090143141A1 (en) * 2002-08-06 2009-06-04 Igt Intelligent Multiplayer Gaming System With Multi-Touch Display
US9756349B2 (en) * 2002-12-10 2017-09-05 Sony Interactive Entertainment America Llc User interface, system and method for controlling a video stream
US7663605B2 (en) 2003-01-08 2010-02-16 Autodesk, Inc. Biomechanical user interface elements for pen-based computers
CN100538292C (zh) 2003-02-10 2009-09-09 N-特莱格有限公司 数字化器的触摸检测
US7159189B2 (en) 2003-06-13 2007-01-02 Alphabase Systems, Inc. Method and system for controlling cascaded windows on a GUI desktop on a computer
KR100580245B1 (ko) 2003-06-26 2006-05-16 삼성전자주식회사 동시화면을 디스플레이 하는 장치 및 방법
JP2005026834A (ja) 2003-06-30 2005-01-27 Minolta Co Ltd 注釈付与装置および注釈付与プログラム
WO2005008444A2 (en) * 2003-07-14 2005-01-27 Matt Pallakoff System and method for a portbale multimedia client
US20050101864A1 (en) * 2003-10-23 2005-05-12 Chuan Zheng Ultrasound diagnostic imaging system and method for 3D qualitative display of 2D border tracings
US7532196B2 (en) 2003-10-30 2009-05-12 Microsoft Corporation Distributed sensing techniques for mobile devices
TWI275041B (en) * 2003-12-10 2007-03-01 Univ Nat Chiao Tung System and method for constructing large-scaled drawings of similar objects
JP4239090B2 (ja) 2004-01-08 2009-03-18 富士フイルム株式会社 ファイル管理プログラム
US7197502B2 (en) 2004-02-18 2007-03-27 Friendly Polynomials, Inc. Machine-implemented activity management system using asynchronously shared activity data objects and journal data items
EP1723632A4 (en) 2004-02-25 2007-07-25 Xplore Technologies Corp DEVICE FOR PROVIDING DIGITAL INPUTS WITH SEVERAL OPERATING TYPES
WO2005081631A2 (en) 2004-02-27 2005-09-09 N-Trig Ltd. Noise reduction in digitizer system
US7383500B2 (en) * 2004-04-30 2008-06-03 Microsoft Corporation Methods and systems for building packages that contain pre-paginated documents
JP4148187B2 (ja) 2004-06-03 2008-09-10 ソニー株式会社 携帯型電子機器、入力操作制御方法及びそのプログラム
US7743348B2 (en) * 2004-06-30 2010-06-22 Microsoft Corporation Using physical objects to adjust attributes of an interactive display application
TWI291642B (en) 2004-07-15 2007-12-21 N trig ltd A tracking window for a digitizer system
EP1787281A2 (en) * 2004-07-15 2007-05-23 N-Trig Ltd. Automatic switching for a dual mode digitizer
US8381135B2 (en) * 2004-07-30 2013-02-19 Apple Inc. Proximity detector in handheld device
US7454717B2 (en) 2004-10-20 2008-11-18 Microsoft Corporation Delimiters for selection-action pen gesture phrases
US20060092177A1 (en) 2004-10-30 2006-05-04 Gabor Blasko Input method and apparatus using tactile guidance and bi-directional segmented stroke
US7925996B2 (en) 2004-11-18 2011-04-12 Microsoft Corporation Method and system for providing multiple input connecting user interface
HK1122460A2 (en) 2005-03-04 2009-05-15 Apple Inc Multi-functional hand-held device
US7489324B2 (en) 2005-03-07 2009-02-10 Vistaprint Technologies Limited Automated image processing
US20060241864A1 (en) 2005-04-22 2006-10-26 Outland Research, Llc Method and apparatus for point-and-send data transfer within an ubiquitous computing environment
JP4603931B2 (ja) 2005-05-16 2010-12-22 任天堂株式会社 オブジェクト移動制御装置およびオブジェクト移動制御プログラム
US20060262105A1 (en) 2005-05-18 2006-11-23 Microsoft Corporation Pen-centric polyline drawing tool
US20060262188A1 (en) 2005-05-20 2006-11-23 Oded Elyada System and method for detecting changes in an environment
US7676767B2 (en) * 2005-06-15 2010-03-09 Microsoft Corporation Peel back user interface to show hidden functions
WO2006137078A1 (en) * 2005-06-20 2006-12-28 Hewlett-Packard Development Company, L.P. Method, article, apparatus and computer system for inputting a graphical object
US7734654B2 (en) 2005-08-16 2010-06-08 International Business Machines Corporation Method and system for linking digital pictures to electronic documents
JP4394057B2 (ja) 2005-09-21 2010-01-06 アルプス電気株式会社 入力装置
CN100583013C (zh) 2005-09-23 2010-01-20 鸿富锦精密工业（深圳）有限公司 用户操作控制装置及其方法
US7574628B2 (en) * 2005-11-14 2009-08-11 Hadi Qassoudi Clickless tool
US7868874B2 (en) 2005-11-15 2011-01-11 Synaptics Incorporated Methods and systems for detecting a position-based attribute of an object using digital codes
US7636071B2 (en) * 2005-11-30 2009-12-22 Hewlett-Packard Development Company, L.P. Providing information in a multi-screen device
US7603633B2 (en) 2006-01-13 2009-10-13 Microsoft Corporation Position-based multi-stroke marking menus
JP5092255B2 (ja) 2006-03-09 2012-12-05 カシオ計算機株式会社 表示装置
US20070097096A1 (en) * 2006-03-25 2007-05-03 Outland Research, Llc Bimodal user interface paradigm for touch screen devices
KR100672605B1 (ko) 2006-03-30 2007-01-24 엘지전자 주식회사 아이템 선택 방법 및 이를 위한 단말기
US20070236468A1 (en) 2006-03-30 2007-10-11 Apaar Tuli Gesture based device activation
US20100045705A1 (en) * 2006-03-30 2010-02-25 Roel Vertegaal Interaction techniques for flexible displays
US8587526B2 (en) 2006-04-12 2013-11-19 N-Trig Ltd. Gesture recognition feedback for a dual mode digitizer
US20090278806A1 (en) 2008-05-06 2009-11-12 Matias Gonzalo Duarte Extended touch-sensitive control area for electronic device
US20070262951A1 (en) 2006-05-09 2007-11-15 Synaptics Incorporated Proximity sensor device and method with improved indication of adjustment
KR100897806B1 (ko) 2006-05-23 2009-05-15 엘지전자 주식회사 아이템 선택 방법 및 이를 위한 단말기
US8086971B2 (en) * 2006-06-28 2011-12-27 Nokia Corporation Apparatus, methods and computer program products providing finger-based and hand-based gesture commands for portable electronic device applications
US7880728B2 (en) * 2006-06-29 2011-02-01 Microsoft Corporation Application switching via a touch screen interface
JP5186373B2 (ja) 2006-07-31 2013-04-17 株式会社Ａｃｃｅｓｓ 電子機器、表示システム、表示方法およびプログラム
JP4514830B2 (ja) 2006-08-15 2010-07-28 エヌ−トリグ リミテッド デジタイザのためのジェスチャ検出
US7813774B2 (en) * 2006-08-18 2010-10-12 Microsoft Corporation Contact, motion and position sensing circuitry providing data entry associated with keypad and touchpad
US8106856B2 (en) * 2006-09-06 2012-01-31 Apple Inc. Portable electronic device for photo management
US8564544B2 (en) * 2006-09-06 2013-10-22 Apple Inc. Touch screen device, method, and graphical user interface for customizing display of content category icons
US8564543B2 (en) * 2006-09-11 2013-10-22 Apple Inc. Media player with imaged based browsing
US7831727B2 (en) * 2006-09-11 2010-11-09 Apple Computer, Inc. Multi-content presentation of unassociated content types
US20080084400A1 (en) * 2006-10-10 2008-04-10 Outland Research, Llc Touch-gesture control of video media play on handheld media players
US8963842B2 (en) * 2007-01-05 2015-02-24 Visteon Global Technologies, Inc. Integrated hardware and software user interface
DE202007014957U1 (de) 2007-01-05 2007-12-27 Apple Inc., Cupertino Multimediakommunikationseinrichtung mit Berührungsbildschirm, der auf Gesten zur Steuerung, Manipulierung und Editierung von Mediendateien reagiert
US8970503B2 (en) * 2007-01-05 2015-03-03 Apple Inc. Gestures for devices having one or more touch sensitive surfaces
US7956847B2 (en) * 2007-01-05 2011-06-07 Apple Inc. Gestures for controlling, manipulating, and editing of media files using touch sensitive devices
US7877707B2 (en) * 2007-01-06 2011-01-25 Apple Inc. Detecting and interpreting real-world and security gestures on touch and hover sensitive devices
US8519963B2 (en) 2007-01-07 2013-08-27 Apple Inc. Portable multifunction device, method, and graphical user interface for interpreting a finger gesture on a touch screen display
US8665225B2 (en) * 2007-01-07 2014-03-04 Apple Inc. Portable multifunction device, method, and graphical user interface for interpreting a finger gesture
US8607167B2 (en) * 2007-01-07 2013-12-10 Apple Inc. Portable multifunction device, method, and graphical user interface for providing maps and directions
US10437459B2 (en) 2007-01-07 2019-10-08 Apple Inc. Multitouch data fusion
US7978182B2 (en) 2007-01-07 2011-07-12 Apple Inc. Screen rotation gestures on a portable multifunction device
WO2008095137A2 (en) * 2007-01-31 2008-08-07 Perceptive Pixel, Inc. Methods of interfacing with multi-point input devices and multi-point input systems employing interfacing techniques
JP4973245B2 (ja) 2007-03-08 2012-07-11 富士ゼロックス株式会社 表示装置及びプログラム
US8347206B2 (en) 2007-03-15 2013-01-01 Microsoft Corporation Interactive image tagging
US20080249682A1 (en) 2007-04-06 2008-10-09 Visteon Global Technologies, Inc. Touch control bezel for display devices
US20080278455A1 (en) 2007-05-11 2008-11-13 Rpo Pty Limited User-Defined Enablement Protocol
JP2008305036A (ja) 2007-06-06 2008-12-18 Hitachi Displays Ltd タッチパネル付表示装置
JP2008305087A (ja) 2007-06-06 2008-12-18 Toshiba Matsushita Display Technology Co Ltd 表示装置
US20090019188A1 (en) * 2007-07-11 2009-01-15 Igt Processing input for computing systems based on the state of execution
US7821780B2 (en) 2007-07-19 2010-10-26 Heng Kah Choy Dual screen presentation notebook computer
US20090033632A1 (en) * 2007-07-30 2009-02-05 Szolyga Thomas H Integrated touch pad and pen-based tablet input system
US8181122B2 (en) * 2007-07-30 2012-05-15 Perceptive Pixel Inc. Graphical user interface for large-scale, multi-user, multi-touch systems
KR20090013927A (ko) 2007-08-03 2009-02-06 에스케이 텔레콤주식회사 전자책 뷰어화면 상에서의 메모 실행 방법 및 이에적용되는 장치
US20090054107A1 (en) * 2007-08-20 2009-02-26 Synaptics Incorporated Handheld communication device and method for conference call initiation
US7778118B2 (en) * 2007-08-28 2010-08-17 Garmin Ltd. Watch device having touch-bezel user interface
US7941758B2 (en) 2007-09-04 2011-05-10 Apple Inc. Animation of graphical objects
US8122384B2 (en) * 2007-09-18 2012-02-21 Palo Alto Research Center Incorporated Method and apparatus for selecting an object within a user interface by performing a gesture
US20090079699A1 (en) * 2007-09-24 2009-03-26 Motorola, Inc. Method and device for associating objects
KR101386473B1 (ko) 2007-10-04 2014-04-18 엘지전자 주식회사 휴대 단말기 및 그 메뉴 표시 방법
DE202008018283U1 (de) * 2007-10-04 2012-07-17 Lg Electronics Inc. Menüanzeige für ein mobiles Kommunikationsendgerät
KR100869557B1 (ko) 2007-10-18 2008-11-27 김종대 무체인 자전거용 동력전달장치
TW200921478A (en) 2007-11-06 2009-05-16 Giga Byte Comm Inc A picture-page scrolling control method of touch panel for hand-held electronic device and device thereof
KR100930563B1 (ko) * 2007-11-06 2009-12-09 엘지전자 주식회사 휴대 단말기 및 그 휴대 단말기의 방송채널 또는 방송채널 리스트 전환 방법
US8294669B2 (en) * 2007-11-19 2012-10-23 Palo Alto Research Center Incorporated Link target accuracy in touch-screen mobile devices by layout adjustment
US20090153289A1 (en) 2007-12-12 2009-06-18 Eric James Hope Handheld electronic devices with bimodal remote control functionality
US8154523B2 (en) * 2007-12-13 2012-04-10 Eastman Kodak Company Electronic device, display and touch-sensitive user interface
US8395584B2 (en) * 2007-12-31 2013-03-12 Sony Corporation Mobile terminals including multiple user interfaces on different faces thereof configured to be used in tandem and related methods of operation
US20090167702A1 (en) 2008-01-02 2009-07-02 Nokia Corporation Pointing device detection
CA2711448A1 (en) 2008-01-09 2009-07-16 Smart Technologies Ulc Method and tool for organizing and manipulating electronic documents
CN101482790B (zh) 2008-01-09 2012-03-14 宏达国际电子股份有限公司 可于两显示元件上转移对象的电子装置及其控制方法
AU2009209018B2 (en) 2008-01-30 2014-03-20 Google Llc Notification of mobile device events
KR100981268B1 (ko) 2008-02-15 2010-09-10 한국표준과학연구원 촉각센서를 이용한 터치스크린장치
US8555207B2 (en) 2008-02-27 2013-10-08 Qualcomm Incorporated Enhanced input using recognized gestures
TW200943140A (en) 2008-04-02 2009-10-16 Asustek Comp Inc Electronic apparatus and control method thereof
US8289289B2 (en) 2008-04-03 2012-10-16 N-trig, Ltd. Multi-touch and single touch detection
KR20090106755A (ko) 2008-04-07 2009-10-12 주식회사 케이티테크 메모 입력 기능을 제공하는 방법, 단말 및 그 방법을실행하는 프로그램이 기록된 기록매체
US20090276701A1 (en) 2008-04-30 2009-11-05 Nokia Corporation Apparatus, method and computer program product for facilitating drag-and-drop of an object
TWI364699B (en) 2008-05-07 2012-05-21 Acer Inc Synchronous operating method of remote systems and synchronous operating method of local touch screens
US20090282332A1 (en) 2008-05-12 2009-11-12 Nokia Corporation Apparatus, method and computer program product for selecting multiple items using multi-touch
US20090284478A1 (en) 2008-05-15 2009-11-19 Microsoft Corporation Multi-Contact and Single-Contact Input
JP5164675B2 (ja) 2008-06-04 2013-03-21 キヤノン株式会社 ユーザインターフェースの制御方法及び情報処理装置及びプログラム
TW200951783A (en) 2008-06-06 2009-12-16 Acer Inc Electronic device and controlling method thereof
CN101566865A (zh) 2008-06-08 2009-10-28 许文武 多工作模式双屏笔记本电脑***及操作控制方法
US8245156B2 (en) 2008-06-28 2012-08-14 Apple Inc. Radial menu selection
JP2010015238A (ja) 2008-07-01 2010-01-21 Sony Corp 情報処理装置、及び補助情報の表示方法
WO2010005423A1 (en) 2008-07-07 2010-01-14 Hewlett-Packard Development Company, L.P. Tablet computers having an internal antenna
JP5606669B2 (ja) * 2008-07-16 2014-10-15 任天堂株式会社 ３次元パズルゲーム装置、ゲームプログラム、３次元パズルゲームシステムおよびゲーム制御方法
US8159455B2 (en) * 2008-07-18 2012-04-17 Apple Inc. Methods and apparatus for processing combinations of kinematical inputs
US8390577B2 (en) 2008-07-25 2013-03-05 Intuilab Continuous recognition of multi-touch gestures
US8924892B2 (en) * 2008-08-22 2014-12-30 Fuji Xerox Co., Ltd. Multiple selection on devices with many gestures
KR100969790B1 (ko) 2008-09-02 2010-07-15 엘지전자 주식회사 이동단말기 및 그 컨텐츠 합성방법
KR101529916B1 (ko) * 2008-09-02 2015-06-18 엘지전자 주식회사 휴대 단말기
US8686953B2 (en) * 2008-09-12 2014-04-01 Qualcomm Incorporated Orienting a displayed element relative to a user
KR101548958B1 (ko) 2008-09-18 2015-09-01 삼성전자주식회사 휴대단말기의 터치스크린 동작 제어 방법 및 장치
US8547347B2 (en) * 2008-09-26 2013-10-01 Htc Corporation Method for generating multiple windows frames, electronic device thereof, and computer program product using the method
US8600446B2 (en) * 2008-09-26 2013-12-03 Htc Corporation Mobile device interface with dual windows
US8284170B2 (en) 2008-09-30 2012-10-09 Apple Inc. Touch screen device, method, and graphical user interface for moving on-screen objects without using a cursor
US9250797B2 (en) * 2008-09-30 2016-02-02 Verizon Patent And Licensing Inc. Touch gesture interface apparatuses, systems, and methods
JP5362307B2 (ja) 2008-09-30 2013-12-11 富士フイルム株式会社 ドラッグアンドドロップ制御装置、方法、及びプログラム、並びにコンピュータ端末
KR101586627B1 (ko) * 2008-10-06 2016-01-19 삼성전자주식회사 멀티 터치를 이용한 리스트 관리 방법 및 장치
KR101503835B1 (ko) * 2008-10-13 2015-03-18 삼성전자주식회사 멀티터치를 이용한 오브젝트 관리 방법 및 장치
JP4683110B2 (ja) * 2008-10-17 2011-05-11 ソニー株式会社 表示装置、表示方法及びプログラム
US20100107067A1 (en) * 2008-10-27 2010-04-29 Nokia Corporation Input on touch based user interfaces
KR20100050103A (ko) * 2008-11-05 2010-05-13 엘지전자 주식회사 맵 상에서의 3차원 개체 제어방법과 이를 이용한 이동 단말기
CN201298220Y (zh) 2008-11-26 2009-08-26 陈伟山 基于lcd液晶显示屏的红外反射多点触摸装置
JP5268595B2 (ja) * 2008-11-28 2013-08-21 ソニー株式会社 画像処理装置、画像表示方法及び画像表示プログラム
US20100185949A1 (en) 2008-12-09 2010-07-22 Denny Jaeger Method for using gesture objects for computer control
US8749497B2 (en) 2008-12-12 2014-06-10 Apple Inc. Multi-touch shape drawing
TWI381305B (zh) 2008-12-25 2013-01-01 Compal Electronics Inc 使用者介面的顯示與操作方法以及電子裝置
US20100164878A1 (en) * 2008-12-31 2010-07-01 Nokia Corporation Touch-click keypad
US8330733B2 (en) 2009-01-21 2012-12-11 Microsoft Corporation Bi-modal multiscreen interactivity
US8279184B2 (en) 2009-01-27 2012-10-02 Research In Motion Limited Electronic device including a touchscreen and method
JP4771183B2 (ja) 2009-01-30 2011-09-14 株式会社デンソー 操作装置
US8219937B2 (en) 2009-02-09 2012-07-10 Microsoft Corporation Manipulation of graphical elements on graphical user interface via multi-touch gestures
TWI370473B (en) 2009-02-20 2012-08-11 Wistron Corp Switch structure mounted on the sidewall of circuit boards for electronic devices and manufacturing methods of the circuit boards thereof
WO2010096761A1 (en) 2009-02-23 2010-08-26 Provo Craft And Novelty, Inc. Controller device
US9250788B2 (en) 2009-03-18 2016-02-02 IdentifyMine, Inc. Gesture handlers of a gesture engine
US20100251112A1 (en) 2009-03-24 2010-09-30 Microsoft Corporation Bimodal touch sensitive digital notebook
US8134539B2 (en) 2009-03-30 2012-03-13 Eastman Kodak Company Digital picture frame having near-touch and true-touch
US8370762B2 (en) 2009-04-10 2013-02-05 Cellco Partnership Mobile functional icon use in operational area in touch panel devices
JP5229083B2 (ja) 2009-04-14 2013-07-03 ソニー株式会社 情報処理装置、情報処理方法及びプログラム
US8212788B2 (en) 2009-05-07 2012-07-03 Microsoft Corporation Touch input to modulate changeable parameter
TW201040823A (en) 2009-05-11 2010-11-16 Au Optronics Corp Multi-touch method for resistive touch panel
US8169418B2 (en) 2009-05-12 2012-05-01 Sony Ericsson Mobile Communications Ab Displays for electronic devices that detect and respond to the size and/or angular orientation of user input objects
CN101551728A (zh) 2009-05-21 2009-10-07 友达光电股份有限公司 电阻式触控式面板的多点触控方法
US8269736B2 (en) 2009-05-22 2012-09-18 Microsoft Corporation Drop target gestures
US8836648B2 (en) 2009-05-27 2014-09-16 Microsoft Corporation Touch pull-in gesture
US8549432B2 (en) 2009-05-29 2013-10-01 Apple Inc. Radial menus
US9405456B2 (en) 2009-06-08 2016-08-02 Xerox Corporation Manipulation of displayed objects by virtual magnetism
CN101576789B (zh) 2009-06-16 2011-07-27 广东威创视讯科技股份有限公司 拼墙定位***中跨屏书写笔画属性的保持和更改方法
US9152317B2 (en) * 2009-08-14 2015-10-06 Microsoft Technology Licensing, Llc Manipulation of graphical elements via gestures
US20110055753A1 (en) * 2009-08-31 2011-03-03 Horodezky Samuel J User interface methods providing searching functionality
US9262063B2 (en) * 2009-09-02 2016-02-16 Amazon Technologies, Inc. Touch-screen user interface
US9274699B2 (en) 2009-09-03 2016-03-01 Obscura Digital User interface for a large scale multi-user, multi-touch system
US20110072036A1 (en) 2009-09-23 2011-03-24 Microsoft Corporation Page-based content storage system
US20110117526A1 (en) * 2009-11-16 2011-05-19 Microsoft Corporation Teaching gesture initiation with registration posture guides
US20110126094A1 (en) * 2009-11-24 2011-05-26 Horodezky Samuel J Method of modifying commands on a touch screen user interface
US20110143769A1 (en) * 2009-12-16 2011-06-16 Microsoft Corporation Dual display mobile communication device
US20110167336A1 (en) 2010-01-04 2011-07-07 Hit Development Llc Gesture-based web site design
JP2011150413A (ja) 2010-01-19 2011-08-04 Sony Corp 情報処理装置、操作入力方法及び操作入力プログラム
US8239785B2 (en) 2010-01-27 2012-08-07 Microsoft Corporation Edge gestures
US20110185320A1 (en) 2010-01-28 2011-07-28 Microsoft Corporation Cross-reference Gestures
US8261213B2 (en) 2010-01-28 2012-09-04 Microsoft Corporation Brush, carbon-copy, and fill gestures
US20110185299A1 (en) 2010-01-28 2011-07-28 Microsoft Corporation Stamp Gestures
US9411504B2 (en) 2010-01-28 2016-08-09 Microsoft Technology Licensing, Llc Copy and staple gestures
US20110191704A1 (en) 2010-02-04 2011-08-04 Microsoft Corporation Contextual multiplexing gestures
US20110191719A1 (en) 2010-02-04 2011-08-04 Microsoft Corporation Cut, Punch-Out, and Rip Gestures
US9519356B2 (en) 2010-02-04 2016-12-13 Microsoft Technology Licensing, Llc Link gestures
US20110199386A1 (en) 2010-02-12 2011-08-18 Honeywell International Inc. Overlay feature to provide user assistance in a multi-touch interactive display environment
US20110231796A1 (en) 2010-02-16 2011-09-22 Jose Manuel Vigil Methods for navigating a touch screen device in conjunction with gestures
US9965165B2 (en) 2010-02-19 2018-05-08 Microsoft Technology Licensing, Llc Multi-finger gestures
US20110209098A1 (en) 2010-02-19 2011-08-25 Hinckley Kenneth P On and Off-Screen Gesture Combinations
US9310994B2 (en) 2010-02-19 2016-04-12 Microsoft Technology Licensing, Llc Use of bezel as an input mechanism
US8799827B2 (en) 2010-02-19 2014-08-05 Microsoft Corporation Page manipulations using on and off-screen gestures
US9367205B2 (en) 2010-02-19 2016-06-14 Microsoft Technolgoy Licensing, Llc Radial menus with bezel gestures
US8539384B2 (en) 2010-02-25 2013-09-17 Microsoft Corporation Multi-screen pinch and expand gestures
US20110209101A1 (en) 2010-02-25 2011-08-25 Hinckley Kenneth P Multi-screen pinch-to-pocket gesture
US9075522B2 (en) 2010-02-25 2015-07-07 Microsoft Technology Licensing, Llc Multi-screen bookmark hold gesture
US8751970B2 (en) 2010-02-25 2014-06-10 Microsoft Corporation Multi-screen synchronous slide gesture
US8473870B2 (en) * 2010-02-25 2013-06-25 Microsoft Corporation Multi-screen hold and drag gesture
US8707174B2 (en) * 2010-02-25 2014-04-22 Microsoft Corporation Multi-screen hold and page-flip gesture
US20110209058A1 (en) 2010-02-25 2011-08-25 Microsoft Corporation Multi-screen hold and tap gesture
US20110209089A1 (en) 2010-02-25 2011-08-25 Hinckley Kenneth P Multi-screen object-hold and page-change gesture
US9454304B2 (en) 2010-02-25 2016-09-27 Microsoft Technology Licensing, Llc Multi-screen dual tap gesture
US20110291964A1 (en) 2010-06-01 2011-12-01 Kno, Inc. Apparatus and Method for Gesture Control of a Dual Panel Electronic Device
USD631043S1 (en) * 2010-09-12 2011-01-18 Steven Kell Electronic dual screen personal tablet computer with integrated stylus
EP2437153A3 (en) 2010-10-01 2016-10-05 Samsung Electronics Co., Ltd. Apparatus and method for turning e-book pages in portable terminal
US8495522B2 (en) 2010-10-18 2013-07-23 Nokia Corporation Navigation in a display
US8640047B2 (en) 2011-06-01 2014-01-28 Micorsoft Corporation Asynchronous handling of a user interface manipulation
US8810533B2 (en) 2011-07-20 2014-08-19 Z124 Systems and methods for receiving gesture inputs spanning multiple input devices

Patent Citations (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002055753A (ja) * 2000-08-10 2002-02-20 Canon Inc 情報処理装置、機能一覧表表示方法、及び記憶媒体
JP2005004690A (ja) * 2003-06-16 2005-01-06 Sony Corp 入力方法および入力装置
JP2005122271A (ja) * 2003-10-14 2005-05-12 Sony Ericsson Mobilecommunications Japan Inc 携帯型電子装置
JP2005149279A (ja) * 2003-11-18 2005-06-09 Matsushita Electric Ind Co Ltd 情報処理装置およびプログラム
US20060238517A1 (en) * 2005-03-04 2006-10-26 Apple Computer, Inc. Electronic Device Having Display and Surrounding Touch Sensitive Bezel for User Interface and Control
JP2008532185A (ja) * 2005-03-04 2008-08-14 アップル インコーポレイテッド マルチタッチセンシングデバイスを持つハンドヘルド電子装置
JP3143462U (ja) * 2007-05-15 2008-07-24 宏達國際電子股▲ふん▼有限公司 切り替え可能なユーザ・インターフェースを有する電子デバイスおよび便利なタッチ操作機能を有する電子デバイス
JP2010019643A (ja) * 2008-07-09 2010-01-28 Toyota Motor Corp 情報端末、ナビゲーション装置、選択肢表示方法
JP2010026834A (ja) * 2008-07-22 2010-02-04 Nec Corp 表示装置、通信端末、表示装置の表示方法、および表示制御用プログラム
US20100137027A1 (en) * 2008-11-28 2010-06-03 Bong Soo Kim Control of input/output through touch
US20100164959A1 (en) * 2008-12-26 2010-07-01 Brown Craig T Rendering a virtual input device upon detection of a finger movement across a touch-sensitive display

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
VOLKER ROTH，THEA TURNER: ""Bezel Swipe: Conflict-Free Scrolling and Multiple Selection on Mobile Touch Screen Devices"", ［ONLINE］, JPN6015025525, 24 October 2009 (2009-10-24), ISSN: 0003103016 *

Cited By (27)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2013529339A (ja) * 2010-09-24 2013-07-18 リサーチ イン モーション リミテッド 携帯用電子デバイスおよびそれを制御する方法
US11947724B2 (en) 2012-05-09 2024-04-02 Apple Inc. Device, method, and graphical user interface for providing tactile feedback for operations performed in a user interface
US11354033B2 (en) 2012-05-09 2022-06-07 Apple Inc. Device, method, and graphical user interface for managing icons in a user interface region
US11314407B2 (en) 2012-05-09 2022-04-26 Apple Inc. Device, method, and graphical user interface for providing feedback for changing activation states of a user interface object
US11221675B2 (en) 2012-05-09 2022-01-11 Apple Inc. Device, method, and graphical user interface for providing tactile feedback for operations performed in a user interface
US11989394B2 (en) 2012-05-18 2024-05-21 Apple Inc. Device, method, and graphical user interface for manipulating user interfaces based on fingerprint sensor inputs
JP2016512905A (ja) * 2013-03-15 2016-05-09 フェイスブック，インク． ユーザ・インターフェースから起動するための対話型要素
JP2014229302A (ja) * 2013-05-21 2014-12-08 三星電子株式会社Ｓａｍｓｕｎｇ Ｅｌｅｃｔｒｏｎｉｃｓ Ｃｏ．，Ｌｔｄ． 電子装置の機能の実行方法及びその電子装置
US11188197B2 (en) 2013-12-30 2021-11-30 Huawei Technologies Co., Ltd. Side menu displaying method and apparatus and terminal
US10691298B2 (en) 2013-12-30 2020-06-23 Huawei Technologies Co., Ltd. Side menu displaying method and apparatus and terminal
JPWO2015159629A1 (ja) * 2014-04-18 2017-04-13 株式会社村田製作所 表示装置及びプログラム
US10649573B2 (en) 2014-04-18 2020-05-12 Murata Manufacturing Co., Ltd. Display device and program
KR102327146B1 (ko) * 2014-11-06 2021-11-16 삼성전자주식회사 전자 장치 및 전자 장치의 디스플레이 장치 화면 제어방법
KR20160054382A (ko) * 2014-11-06 2016-05-16 삼성전자주식회사 전자 장치 및 전자 장치의 디스플레이 장치 화면 제어방법
US11977726B2 (en) 2015-03-08 2024-05-07 Apple Inc. Devices, methods, and graphical user interfaces for interacting with a control object while dragging another object
US11112957B2 (en) 2015-03-08 2021-09-07 Apple Inc. Devices, methods, and graphical user interfaces for interacting with a control object while dragging another object
US11921975B2 (en) 2015-03-08 2024-03-05 Apple Inc. Devices, methods, and graphical user interfaces for manipulating user interface objects with visual and/or haptic feedback
US11550471B2 (en) 2015-03-19 2023-01-10 Apple Inc. Touch input cursor manipulation
US11240424B2 (en) 2015-06-07 2022-02-01 Apple Inc. Devices and methods for capturing and interacting with enhanced digital images
JP2019164790A (ja) * 2015-06-07 2019-09-26 アップル インコーポレイテッドＡｐｐｌｅ Ｉｎｃ． ユーザインタフェース間をナビゲートするためのデバイス及び方法
US11681429B2 (en) 2015-06-07 2023-06-20 Apple Inc. Devices and methods for capturing and interacting with enhanced digital images
US11231831B2 (en) 2015-06-07 2022-01-25 Apple Inc. Devices and methods for content preview based on touch input intensity
US11835985B2 (en) 2015-06-07 2023-12-05 Apple Inc. Devices and methods for capturing and interacting with enhanced digital images
US11327648B2 (en) 2015-08-10 2022-05-10 Apple Inc. Devices, methods, and graphical user interfaces for manipulating user interface objects with visual and/or haptic feedback
US11740785B2 (en) 2015-08-10 2023-08-29 Apple Inc. Devices, methods, and graphical user interfaces for manipulating user interface objects with visual and/or haptic feedback
US11182017B2 (en) 2015-08-10 2021-11-23 Apple Inc. Devices and methods for processing touch inputs based on their intensities
JP2018032425A (ja) * 2017-10-18 2018-03-01 華為技術有限公司Ｈｕａｗｅｉ Ｔｅｃｈｎｏｌｏｇｉｅｓ Ｃｏ．，Ｌｔｄ． サイドメニュー表示方法、装置及び端末

Also Published As

Publication number Publication date
US9274682B2 (en) 2016-03-01
CA2788137A1 (en) 2011-08-25
JP5883400B2 (ja) 2016-03-15
EP2537088A2 (en) 2012-12-26
WO2011103218A2 (en) 2011-08-25
EP2537088B1 (en) 2017-06-21
CA2788137C (en) 2017-12-05
US20110205163A1 (en) 2011-08-25
CN102884498B (zh) 2016-07-06
WO2011103218A3 (en) 2012-01-05
EP2537088A4 (en) 2016-03-09
CN102884498A (zh) 2013-01-16

Similar Documents

Publication Publication Date Title
JP5883400B2 (ja) オンスクリーン入力を作るためのオフスクリーン・ジェスチャー
JP5684291B2 (ja) オンおよびオフスクリーン・ジェスチャーの組み合わせ
US10268367B2 (en) Radial menus with bezel gestures
US20180225021A1 (en) Multi-Finger Gestures
US8799827B2 (en) Page manipulations using on and off-screen gestures
US9310994B2 (en) Use of bezel as an input mechanism
US11880626B2 (en) Multi-device pairing and combined display
EP2539803B1 (en) Multi-screen hold and page-flip gesture
EP2539799B1 (en) Multi-screen pinch and expand gestures
EP2539802B1 (en) Multi-screen hold and tap gesture
ES2939305T3 (es) Navegación entre actividades en un dispositivo informático
US9075522B2 (en) Multi-screen bookmark hold gesture
US20110209089A1 (en) Multi-screen object-hold and page-change gesture

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20140217

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20140217

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20141119

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20141125

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20150126

A711 Notification of change in applicant

Free format text: JAPANESE INTERMEDIATE CODE: A711

Effective date: 20150514

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20150625

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20150825

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20160107

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20160205

R150 Certificate of patent or registration of utility model

Ref document number: 5883400

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250