JP5964429B2 - セマンティックズーム - Google Patents
セマンティックズーム Download PDFInfo
- Publication number
- JP5964429B2 JP5964429B2 JP2014529687A JP2014529687A JP5964429B2 JP 5964429 B2 JP5964429 B2 JP 5964429B2 JP 2014529687 A JP2014529687 A JP 2014529687A JP 2014529687 A JP2014529687 A JP 2014529687A JP 5964429 B2 JP5964429 B2 JP 5964429B2
- Authority
- JP
- Japan
- Prior art keywords
- semantic
- zoom
- view
- content
- gesture
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
- 238000000034 method Methods 0.000 claims description 109
- 230000004044 response Effects 0.000 claims description 18
- 230000002441 reversible effect Effects 0.000 claims description 9
- 230000008859 change Effects 0.000 claims description 7
- 238000013507 mapping Methods 0.000 claims description 5
- 230000014509 gene expression Effects 0.000 claims description 3
- 230000006870 function Effects 0.000 description 36
- 230000033001 locomotion Effects 0.000 description 29
- 230000007704 transition Effects 0.000 description 20
- 238000004891 communication Methods 0.000 description 11
- 238000012937 correction Methods 0.000 description 11
- 230000003993 interaction Effects 0.000 description 8
- 238000004091 panning Methods 0.000 description 8
- 230000009471 action Effects 0.000 description 7
- 230000000007 visual effect Effects 0.000 description 7
- 238000010586 diagram Methods 0.000 description 6
- 238000012545 processing Methods 0.000 description 6
- 238000003860 storage Methods 0.000 description 6
- 238000005516 engineering process Methods 0.000 description 5
- 230000003287 optical effect Effects 0.000 description 5
- 230000001960 triggered effect Effects 0.000 description 5
- 239000011800 void material Substances 0.000 description 5
- 240000000220 Panda oleosa Species 0.000 description 4
- 235000016496 Panda oleosa Nutrition 0.000 description 4
- 239000008186 active pharmaceutical agent Substances 0.000 description 4
- 230000006399 behavior Effects 0.000 description 3
- 238000007796 conventional method Methods 0.000 description 3
- 239000000284 extract Substances 0.000 description 3
- 230000008569 process Effects 0.000 description 3
- ORILYTVJVMAKLC-UHFFFAOYSA-N Adamantane Natural products C1C(C2)CC3CC1CC2C3 ORILYTVJVMAKLC-UHFFFAOYSA-N 0.000 description 2
- 125000002066 L-histidyl group Chemical group [H]N1C([H])=NC(C([H])([H])[C@](C(=O)[*])([H])N([H])[H])=C1[H] 0.000 description 2
- 239000002131 composite material Substances 0.000 description 2
- 238000004883 computer application Methods 0.000 description 2
- 238000001514 detection method Methods 0.000 description 2
- 230000005057 finger movement Effects 0.000 description 2
- 230000009191 jumping Effects 0.000 description 2
- 230000007246 mechanism Effects 0.000 description 2
- 238000010079 rubber tapping Methods 0.000 description 2
- 230000009466 transformation Effects 0.000 description 2
- VYZAMTAEIAYCRO-UHFFFAOYSA-N Chromium Chemical compound [Cr] VYZAMTAEIAYCRO-UHFFFAOYSA-N 0.000 description 1
- 230000004913 activation Effects 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 230000005540 biological transmission Effects 0.000 description 1
- 238000004364 calculation method Methods 0.000 description 1
- 230000001413 cellular effect Effects 0.000 description 1
- 238000013500 data storage Methods 0.000 description 1
- 230000003111 delayed effect Effects 0.000 description 1
- 230000001419 dependent effect Effects 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 239000003292 glue Substances 0.000 description 1
- 235000019580 granularity Nutrition 0.000 description 1
- 238000003384 imaging method Methods 0.000 description 1
- 230000000977 initiatory effect Effects 0.000 description 1
- 238000012905 input function Methods 0.000 description 1
- 238000007726 management method Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 239000003607 modifier Substances 0.000 description 1
- 238000010606 normalization Methods 0.000 description 1
- 230000008447 perception Effects 0.000 description 1
- 230000002093 peripheral effect Effects 0.000 description 1
- 238000003825 pressing Methods 0.000 description 1
- 230000009467 reduction Effects 0.000 description 1
- 238000009877 rendering Methods 0.000 description 1
- 238000013341 scale-up Methods 0.000 description 1
- 230000005236 sound signal Effects 0.000 description 1
- 238000000844 transformation Methods 0.000 description 1
- 238000013519 translation Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
- G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
- G06F3/04883—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T3/00—Geometric image transformations in the plane of the image
- G06T3/40—Scaling of whole images or parts thereof, e.g. expanding or contracting
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
- G06F2203/048—Indexing scheme relating to G06F3/048
- G06F2203/04806—Zoom, i.e. interaction techniques or interactors for controlling the zooming operation
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
- G06F3/0482—Interaction with lists of selectable items, e.g. menus
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Human Computer Interaction (AREA)
- User Interface Of Digital Computer (AREA)
- Position Input By Displaying (AREA)
Description
平常通りのユーザでさえ典型的な日においてアクセスするコンテンツの量は、増加の一途をたどる。結果として、このようなコンテンツをナビゲートするために利用されてきた従来の技術は過度の負担がかかることとなり、ユーザのフラストレーションをもたらす。
図1は、ここで記載されるセマンティックズーム技術を用いるよう動作する実施例における環境100の例示である。例示される環境100は、様々な方法において構成され得るコンピュータ装置102の例を含む。例えば、コンピュータ装置102は、プロセッシングシステム及びメモリを有するよう構成されてよい。よって、コンピュータ装置102は、図19及び20に関して更に記載されるように、従来のコンピュータ(例えば、デスクトップ・パーソナルコンピュータ、ラップトップ・コンピュータ、等)、移動局、エンターテイメント機器、テレビ受像器と通信上結合されるセットトップボックス、無線電話機、ネットブック、ゲーム機等として構成されてよい。
セマンティックズームモジュール114は、ここで記載されるセマンティックズーム技術とのインタラクションを管理するよう様々な異なる閾値を用いてよい。例えば、セマンティックズームモジュール114は、例えば、第1及び第2の段階202、204の間でビューのスワップが起こるズームレベルを特定するために、セマンティック閾値を利用してよい。1又はそれ以上の実施において、これは、例えば、ピンチジェスチャにおける接触点の移動の量に依存した距離に基づく。
ユーザがズームイン又はアウトするよう入力を提供する(例えば、ピンチジェスチャにおいて自身の指を動かす)場合に、表示される面は、任意に、セマンティックズームモジュール114によって然るべく拡大縮小される。しかし、入力が停止する(例えば、ユーザがジェスチャをやめる)場合に、セマンティックズームモジュール114は、特定のズームレベルへのアニメーションを生成してよい。これは「スナップポイント」と呼ばれることがある。1又はそれ以上の実施において、これは、例えば、ユーザが“手を放す”場合に、入力が停止される現在のズームパーセンテージに基づく。
セマンティックズームと相互作用するために使用されるジェスチャは、様々な方法において構成されてよい。第1の例では、挙動は、ビューを“正しく”操作させる入力の検出時にサポートされる。例えば、再び図2を参照すると、ビューは、ユーザが自身の指をピンチジェスチャにおいて動かしたとの入力が検出されると直ぐに、縮小し始めてよい。更に、ズームは、“入力に従ってそれらが起こるように”ズームイン及びズームアウトするよう構成されてよい。これは、実時間のフィードバックを提供する操作に基づくジェスチャの例である。当然、逆のピンチジェスチャも入力に従うよう操作に基づいてよい。
再び図1を参照して、セマンティックズームモジュール114は、セマンティックビューにある間に様々な異なるインタラクションをサポートするよう構成されてよい。更に、それらのインタラクションは“レギュラー”の100パーセントビューとは異なるよう設定されてよいが、インタラクションが同じである他の例も考えられる。
セマンティック“ズームアウト”が起こる場合に、ズームは、ピンチ、タップ、カーソル又はフォーカス位置、等のような入力の位置に中心を置いてよい。計算は、どのグループが入力位置に最も近いかに関して、セマンティックズームモジュール114によって行われてよい。次いで、このグループは、ビューが、例えば、セマンティックスワップ後のビューとなる場合に、そのズームインされたビューからの対応するセマンティックグループ項目に合わせて左寄せにしてよい。グループ分けされたグリッドビューに関し、セマンティックグループ項目はヘッダと整列してよい。
図7は、セマンティックズームのために利用され得る補正アニメーションの実施例700を表す。実施例は、第1、第2及び第3の段階702、704、706の使用を通じて表される。第1の段階702で、スクロール可能な項目のリストが示され、リストには名前“Adam”、“Alan”、“Anton”及び“Arthur”が含まれている。名前“Adam”はディスプレイ装置108の左端に表示されており、名前“Arthur”はディスプレイ装置108の右端に表示されている。
図8は、セマンティックスワップの部分として使用され得るクロスフェードアニメーションが示される実施例800を表す。この実施例800は、第1、第2及び第3の段階802、804、806の使用を通じて表される。上述されたように、クロスフェードアニメーションは、ビュー間を遷移するようセマンティックスワップの部分として実施されてよい。表される実施例の第1、第2及び第3の段階802乃至806は、例えば、セマンティックスワップを開始するピンチ又は他の入力(例えば、キーボード又はカーソル制御装置)に応答して図2の第1及び第2の段階202、204に示されるビュー間を遷移するために使用されてよい。
ズームインが起こる場合に、セマンティックズームモジュール114は、“ズームイン”されているグループにおける第1の項目へフォーカスを適用してよい。これはまた、特定のタイムアウト後に、又はユーザがビューとのインタラクションを開始すると、フェードするよう構成されてよい。フォーカスが変更されなかった場合は、次いで、ユーザが100パーセントのビューへズームバックインする場合に、セマンティックスワップの前にフォーカスを有した同じ項目がフォーカスを有し続ける。
図9は、セマンティックヘッダを含むセマンティックビューの実施例900を表す。夫々のセマンティックヘッダの内容は、様々な方法において、例えば、ヘッダによって、エンドデベロッパ等によって(例えば、HTMLを用いる。)定義されるグループのための共通の記述をリストアップするように、提供されてよい。
セマンティックズームモジュール114はまた、アプリケーションデベロッパによって利用され得る異なるレイアウトのための様々な異なるテンプレートをサポートしてよい。例えば、そのようなテンプレートを用いるユーザインターフェースの例は、図10の実施例1000において表されている。この例において、テンプレートは、この場合には文字及び数字であるグループの識別子とともにグリッドにおいて配置されたタイルを含む。タイルはまた、存在する場合にグループの代表である項目を含む。例えば、“a”グループに関しては飛行機であるが、“e”グループは項目を含まない。よって、ユーザは、グループにデータが投入されているかどうかを容易に決定し、セマンティックズームのこのズームレベルにおいてグループ間をナビゲートしてよい。1又はそれ以上の実施において、ヘッダ(例えば、代表項目)は、セマンティックズーム機能を利用するアプリケーションのデベロッパによって特定されてよい。よって、この例は、グループ管理タスク、例えば、複数のグループからコンテンツを選択すること、グループを再配置すること、等のための機会及びコンテンツ構造の抽象化されたビューを提供してよい。
上述されたように、セマンティックズームは、ユーザがピンチジェスチャによりそれらのコンテンツの大域的なビューを得ることを可能にするタッチ機能として実施されてよい。セマンティックズームは、異なる細かさの程度で依然として容易にアクセス可能でありながら多くの項目がより小さな領域において適合することができるように、内在するコンテンツの抽象化されたビューを作成するようセマンティックズームモジュール114によって実施されてよい。1又はそれ以上の実施において、セマンティックズームは、例えば、日付、最初の文字、等によって、項目をカテゴリにグループ分けするために抽象化を利用してよい。
−28のグループが存在する
○26のラテンアルファベット文字
○数字のための1グループ
○記号のための1グループ
しかし、他の言語は異なるアルファベットを使用し、時々文字を一緒に並べる。これは、所与の文字の最初の文字を識別するのを困難にしうる。従って、セマンティックズームモジュール114は、それらの異なるアルファベットに対処するために様々な技術を用いてよい。
Half width(半値幅)
Full width(全幅)。
[外1]
言語学的に、それらの文字の夫々は固有の分類要素である。従って、文字“D”、“Dz”及び“Dzs”を同じグループにまとめることは誤って見え、典型的なハンガリー語ユーザにとって直感的に理解できない。幾つかの更なる極端な場合において、8よりも多いWCHARを含む幾つかのチベット語の“単一文字”が存在する。“複数キャラクタ”文字を伴う幾つかの他の言語には、クメール語、コルシカ方言、ブルトン語、マプチェ語、ソルビア語、マオリ語、ウイグル語、アルバニア語、クロアチア語、セルビア語、チェコ語、デンマーク語、グリーンランド語、ハンガリー語、スロバキア語、スペイン語(伝統的)、ウェールズ語、ベトナム語、等がある。
[外2]
“A”は、
[外3]
とははっきりと異なる文字であり、後者の2文字はアルファベットにおける“Z”の後にくる点に留意されたい。一方、英語に関して、2つのグループが英語では一般的に望まれないことから
[外4]
を“A”として扱うよう付加記号が除去されている。しかし、同じ論理がスウェーデン語に適用される場合は、複製の“A”グループが“Z”の後に置かれるか、又は言語が不正確に分類されるかのいずれかである。同様の状況は、ポーランド語、ハンガリー語、デンマーク語、ノルウェー語等を含む、特定のアクセント記号付き文字を別個の文字として扱う相当数の他の言語において遭遇され得る。
[外5]
東アジアの言語に関して、セマンティックズームモジュール114は、上記のグループのリストを返してよいが、日本語は以下のように仮名グループを更に含む:
[外6]
1又はそれ以上の実施において、セマンティックズームモジュール114は、しばしばラテン文字を使用するファイル名のための解決法を提供するために、非ラテンアルファベットを含む夫々のアルファベットにおいてラテン文字を含んでよい。
[外7]
に関して、作成された表示文字を用いて一緒であるとユーザに伝えてよい。現代的な用法において文字間をソートする古典的且つ珍しい文字に関し、セマンティックズームモジュール114はそれらの文字を従前の文字とともにグループ分けしてよい。
アプリケーションはセマンティックズームモジュール114の使用をサポートするよう構成されてよい。例えば、アプリケーション106は、アプリケーション106のデベロッパによって特定される機能を含むマニフェストを有するパッケージの部分としてインストールされてよい。特定され得る1つのそのような機能は音声名称特性を含む。音声名称特性は、項目のリストのためのグループ及びグループの識別を生成するために使用されるべき音声言語を特定するために使用されてよい。よって、音声名称特性がアプリケーションに関して存在する場合は、その最初の文字がソート及びグループ分けのために使用される。そうでない場合は、セマンティックズームモジュール114は、例えば、第三者のレガシアプリケーションに関して、表示名の最初の文字に依存してよい。
●大文字;
●付加記号(ソートキーがそれを考える場合に、ロケールにおける付加記号対独自文字);
●幅(半値幅);及び
●仮名タイプ(ひらがな)。
●ソートキーを生成する;
●付加記号が付加記号(例えば、英語における
[外8]
)又は文字(例えば、“Z”の後にソートするスウェーデン語における
[外9]
)として扱われるべきかどうかを確認しようと試みる;及び
●コードポイントを結合するようフォームCへ変換する、
○それらを解体するフォームD。
●ホワイトスペース及び非グリフをスキップする;
●次の文字境界までグリフに対してSHCarNextWを使用する(付録を参照);
●第1のグリフに対してソートキーを生成する;
●付加記号であるかどうかを伝えるようLCMapStringを見る(ソート重みを監視する);
●フォームDへ正規化する(NormalizeString);
●全ての付加記号を取り去るようGetStringTypeを用いて第2のパスを実行する:
C3_NonSpace|C3_Diacritic;及び
●ケース、幅及び仮名タイプを取り去るようLCMapStringを使用する。
●最初のピンイン(簡体字中国語);
●最初のボポモフォ文字(繁体字中国語−台湾);
●部首名/画数(繁体字中国語−香港);
●最初のハングルJamo(韓国);及び
●合字分類を有するハンガリー語のような言語(例えば、“ch”を単一文字として扱う)
のためのグループ分けを提供するために使用されてよい。
●ラテン−正確な順序においてグループ化される:
●仮名−正確な順序においてグループ化される;及び
●漢字−XJIS順序においてグループ化される(ユーザ展望から事実上ランダム)。
このように、セマンティックズームモジュール114は、直感的に理解できる識別子及びグループをコンテンツの項目へ提供するためにそれらの技術を用いてよい。
方向ヒントをユーザに提供するよう、セマンティックズームモジュール114は、様々な異なるアニメーションを用いてよい。例えば、ユーザが既にズームアウトされたビューにあり、更にズームアウトしようとする場合に、アンダーバウンスアニメーションがセマンティックズームモジュール114によって出力されてよく、そのとき、バウンスはビューのスケールダウンである。他の例では、ユーザが既にズームインされたビューにあり、更にズームインしようとする場合に、オーバーバウンスアニメーションが出力され、そのとき、バウンスはビューのスケールアップである。
セマンティックズームは、長いリストの有効なナビゲーションを可能にすることができる。しかし、その性質により、セマンティックズームは、“ズームイン”されたビューとその“ズームアウト”された対応するビューとの間の非幾何学的なマッピングを伴う。従って、“一般的な”実施は、一方のビューマップにおけるアイテムを他方のビューマップのアイテムに如何にしてマッピングすべきかと、2つの対応する項目の視覚表現を、それらの関係をズーム中にユーザに伝えるよう如何にして整列すべきかとを決定するために専門知識が必要とされ得るので、夫々の場合に関してうまく適合され得ない。
このメソッドは、セマンティックズームが開始される場合に両方の(both)制御において呼び出されてよく、制御の軸が変化するときはいつでも呼び出されてよい。このメソッドは、動的型付き言語、他の言語における列挙型のメンバー、等における文字列として構成され得る“horizontal”、“vertical”、“both”又は“none”のいずれかを返す。
上述されたように、このメソッドは、セマンティックズームが開始される場合に両方の(both)制御において呼び出されてよく、制御の軸が変化するときはいつでも呼び出されてよい。これは、ズーム挙動を実施する場合に使用され得る情報を子制御に提供する。以下は、このメソッドの特徴の幾つかである:
−isZoomedOutは、2つのビューのいずれであるかを子制御に知らせるために使用されてよい;
−isCurrentViewは、最初に可視的なビューであるかどうかを子制御に知らせるために使用されてよい;
−triggerZoomは、子制御が他のビューへ切り替えるために呼び出すことができるコールバック関数である。なお、現在可視的なビューでない場合は、この関数の呼出は有効でない;及び
−prefetchedPagesは、どれくらいのオフスクリーンコンテンツをズーム中に提示する必要があるかを制御に伝える。
このメソッドは、ズーム開始時にソース制御において呼び出されてよい。ユーザは、上述されたキーボード、マウス及びタッチを含む様々な入力装置を用いて、セマンティックズームモジュール114にビュー間を遷移させることができる。マウス及びタッチの場合に、マウスカーソル又はタッチ点のオンスクリーン座標は、どの項目が、例えば、ディスプレイ装置108上の位置“から”ズームされるべきかどうかを決定する。キーボード動作は先在する“現在の項目”に依存しうるので、入力メカニズムは、先在したか又は先の時点で設定されたかにかかわらず、最初に設定された位置に依存する項目を現在の項目とし、次いで“現在の項目”に関する情報を要求することによって、一元管理されてよい。
このメソッドは、視覚的なズーム遷移がまさに開始しようとしている場合に両方の制御において呼び出されてよい。これは、ズーム遷移がまさに開始しようとしていることを制御に知らせる。セマンティックズームモジュール114によって実施される制御は、スケーリングの間そのUIの部分(例えば、スクロールバー)を隠し、制御が拡大縮小される場合でさえ十分なコンテンツがビューポートを満たすようにレンダリングされることを確かにするよう構成されてよい。上述されたように、configureForZoomのprefetchedPagesパラメータは、どれくらい望まれるのかを制御に知らせるために使用されてよい。
このメソッドは、beginZoom直後にソース制御において呼び出されてよい。これに応答して、2つの情報片が現在の項目に関して返されてよい。それらは、それの抽象記述(例えば、動的型付き言語において、これは何らかのタイプの変数であってよい。)と、ビューポート座標におけるその境界長方形とを含む。C++又はC#のような静的型付き言語では、ストラクト又はクラスが返されてよい。動的型付き言語では、オブジェクトが“項目(item)”及び“位置(position)”と名付けられた特性とともに返されてよい。それは実際には、返されるそれらの2つの情報片のための“プロミス(Promise)”である点に留意されたい。これは動的型付き言語の約束事であるが、他の言語において同じ約束事が存在する。
このメソッドは、ソース制御におけるgetCurrentItemへの呼出が完了すると、且つ返されたPromiseが完了すると、ターゲット制御において呼び出されてよい。項目及び位置の各パラメータは、たとえ位置長方形がターゲット制御の座標空間に変換されるとしても、getCurrentItemへの呼出から返されるパラメータである。制御は異なるスケールでレンダリングされる。項目は、アプリケーションによって提供されるマッピング関数によって変換されているが、デフォルトによって、それは、getCurrentItemから返される同じ項目である。
このメソッドは、ズーム遷移の終わりに両方の制御において呼び出されてよい。セマンティックズームモジュール114は、beginZoomにおいて実行されたものと反対である動作を実行してよく、例えば、通常のUIを再び表示し、且つ、メモリリソースを節約するよう目下オフスクリーンである描画コンテンツを廃棄してよい。メソッド“isCurrentView”は、どちらの結果もズーム遷移後に可能であるから、現在可視的なビューであるかどうかを制御に伝えるために使用されてよい。メソッド“setFocus”は、その現在の項目に対するフォーカスが設定されるべきであるかどうかを制御に伝える。
このメソッドは、ポインタイベントへのリスニングを行い、扱うべき内在する制御へのポインタを残すべき場合にセマンティックズームモジュール114によって呼び出されてよい。制御へ送られるパラメータは、依然として下に向かうポインタのpointerIDである。1つのIDはhandlePointer()を通じて送られる。
●独立した操作を可能にするようビューポート範囲においてMsSetPointerCaptureを呼び出す;及び
●独立した操作を開始せずにタッチイベントに対する処理を実行するよう、それに設定されたスクロールに等しいオーバーフローを有さない要素においてMsSetPointerCaptureを呼び出す。
以下の説明は、上記のシステム及び装置を利用して実施され得るセマンティックズーム技術を記載する。プロシージャの夫々の態様は、ハードウェア、ファームウェア、若しくはソフトウェア、又はそれらの組み合わせにおいて実施されてよい。プロシージャは、1又はそれ以上の装置によって実行される動作を特定するブロックの組として示され、必ずしも、夫々のブロックによって動作を実行するために示された順序に制限されない。以下の説明の部分において、図1の環境100及び図2乃至9の実施200乃至900が夫々参照される。
は上述された。
図19は、図1を参照して記載されるコンピュータ装置102を含む例となるシステム1900を表す。例となるシステム1900は、パーソナルコンピュータ(PC)、テレビ受像器、及び/又はモバイル機器でアプリケーションを実行するときにシームレスなユーザ経験のためのユビキタス環境を可能にする。サービス及びアプリケーションは、アプリケーションを利用している、ビデオゲームをプレイしている、ビデオを見ている、等の間に1の装置から次の装置へ移る場合に、共通のユーザ経験のために、3つ全ての環境において実質的に同じに実行される。
本発明は、構造的な特徴及び/又は方法論的な動作に特有の言語において記載されてきたが、特許請求の範囲において定義される発明は、必ずしも、記載される具体的な特徴又は動作に制限されないことが理解されるべきである。むしろ、具体的な特徴及び動作は、請求される発明を実施する例となる形態として開示される。
Claims (10)
- 1又はそれ以上のコンピュータ装置によって実施される方法であって、
前記コンピュータ装置の少なくとも1つのアプリケーションへオペレーティングシステムによってセマンティックズーム機能を顕在化させるステップと、
前記アプリケーションによって特定されたコンテンツをマッピングするステップと
を有し、
前記マッピングは、ユーザインターフェースにおいて前記コンテンツの異なる表現を表示するようズーム入力の少なくとも1つの閾値に対応するセマンティックスワップをサポートするよう前記セマンティックズーム機能によって実行され、
前記セマンティックズーム機能は、ユーザが前記ユーザインターフェースによりズームイン又はズームアウトを指示することを停止することに応答して、該停止した時点でのズームレベルを前記閾値と比較し、該比較の結果に応じて前記異なる表現のうちのいずれかの表現を前記ユーザインターフェースに表示させる、方法。 - 前記セマンティックスワップは、前記コンテンツの前記表現の異なる配置を含む、
請求項1に記載の方法。 - 前記コンテンツは、前記コンピュータ装置のファイルシステムに関する、
請求項1に記載の方法。 - 前記セマンティックズーム機能は、前記表現の表示サイズを変更するよう前記閾値に達することなく前記ユーザインターフェースにおいて異なるズーム量をサポートするよう構成される、
請求項1に記載の方法。 - 前記セマンティックズーム機能は、異なるメタデータがユーザインターフェースにおいて表示されるように前記セマンティックスワップを実施するよう構成される、
請求項1に記載の方法。 - 前記セマンティックズーム機能は、コンテンツの単項目の表現がそれらの項目のグループの表現と置換されるように前記セマンティックスワップを実施するよう構成される、
請求項1に記載の方法。 - 前記ズーム入力はジェスチャを含む、
請求項1に記載の方法。 - 前記セマンティックズーム機能は、前記コンテンツが表現される細かさの程度を変更するジェスチャと、少なくとも1つの前記細かさの程度において前記コンテンツをナビゲートする他のジェスチャとをサポートするよう構成される、
請求項1に記載の方法。 - 前記ジェスチャは、ピンチジェスチャ又は逆ピンチジェスチャを含み、前記他のジェスチャは、パンジェスチャを含む、
請求項8に記載の方法。 - 前記セマンティックズーム機能は、前記ユーザインターフェースにおける前記コンテンツの表現の表示の終わりに達したことを示すアニメーションをサポートするよう構成される、
請求項9に記載の方法。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US13/228,707 US20130067398A1 (en) | 2011-09-09 | 2011-09-09 | Semantic Zoom |
US13/228,707 | 2011-09-09 | ||
PCT/US2011/055746 WO2013036264A1 (en) | 2011-09-09 | 2011-10-11 | Semantic zoom |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2014530396A JP2014530396A (ja) | 2014-11-17 |
JP5964429B2 true JP5964429B2 (ja) | 2016-08-03 |
Family
ID=47831009
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2014529687A Expired - Fee Related JP5964429B2 (ja) | 2011-09-09 | 2011-10-11 | セマンティックズーム |
Country Status (11)
Country | Link |
---|---|
US (1) | US20130067398A1 (ja) |
EP (1) | EP2754019A4 (ja) |
JP (1) | JP5964429B2 (ja) |
KR (1) | KR20140074889A (ja) |
CN (1) | CN102981728B (ja) |
AU (1) | AU2011376311A1 (ja) |
BR (1) | BR112014005410A8 (ja) |
CA (1) | CA2847682A1 (ja) |
MX (1) | MX2014002779A (ja) |
RU (1) | RU2611970C2 (ja) |
WO (1) | WO2013036264A1 (ja) |
Families Citing this family (54)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US8225231B2 (en) | 2005-08-30 | 2012-07-17 | Microsoft Corporation | Aggregation of PC settings |
US20100107100A1 (en) | 2008-10-23 | 2010-04-29 | Schneekloth Jason S | Mobile Device Style Abstraction |
US8238876B2 (en) | 2009-03-30 | 2012-08-07 | Microsoft Corporation | Notifications |
US8175653B2 (en) | 2009-03-30 | 2012-05-08 | Microsoft Corporation | Chromeless user interface |
US20120159395A1 (en) | 2010-12-20 | 2012-06-21 | Microsoft Corporation | Application-launching interface for multiple modes |
US20120159383A1 (en) | 2010-12-20 | 2012-06-21 | Microsoft Corporation | Customization of an immersive environment |
US8612874B2 (en) | 2010-12-23 | 2013-12-17 | Microsoft Corporation | Presenting an application change through a tile |
US8689123B2 (en) | 2010-12-23 | 2014-04-01 | Microsoft Corporation | Application reporting in an application-selectable user interface |
US9423951B2 (en) | 2010-12-31 | 2016-08-23 | Microsoft Technology Licensing, Llc | Content-based snap point |
US9383917B2 (en) | 2011-03-28 | 2016-07-05 | Microsoft Technology Licensing, Llc | Predictive tiling |
US9104307B2 (en) | 2011-05-27 | 2015-08-11 | Microsoft Technology Licensing, Llc | Multi-application environment |
US9158445B2 (en) | 2011-05-27 | 2015-10-13 | Microsoft Technology Licensing, Llc | Managing an immersive interface in a multi-application immersive environment |
US8893033B2 (en) | 2011-05-27 | 2014-11-18 | Microsoft Corporation | Application notifications |
US9658766B2 (en) | 2011-05-27 | 2017-05-23 | Microsoft Technology Licensing, Llc | Edge gesture |
US9104440B2 (en) | 2011-05-27 | 2015-08-11 | Microsoft Technology Licensing, Llc | Multi-application environment |
US8687023B2 (en) | 2011-08-02 | 2014-04-01 | Microsoft Corporation | Cross-slide gesture to select and rearrange |
US20130057587A1 (en) | 2011-09-01 | 2013-03-07 | Microsoft Corporation | Arranging tiles |
US8922575B2 (en) | 2011-09-09 | 2014-12-30 | Microsoft Corporation | Tile cache |
US10353566B2 (en) | 2011-09-09 | 2019-07-16 | Microsoft Technology Licensing, Llc | Semantic zoom animations |
US9557909B2 (en) | 2011-09-09 | 2017-01-31 | Microsoft Technology Licensing, Llc | Semantic zoom linguistic helpers |
US9244802B2 (en) | 2011-09-10 | 2016-01-26 | Microsoft Technology Licensing, Llc | Resource user interface |
US9146670B2 (en) | 2011-09-10 | 2015-09-29 | Microsoft Technology Licensing, Llc | Progressively indicating new content in an application-selectable user interface |
US8933952B2 (en) | 2011-09-10 | 2015-01-13 | Microsoft Corporation | Pre-rendering new content for an application-selectable user interface |
US9268848B2 (en) * | 2011-11-02 | 2016-02-23 | Microsoft Technology Licensing, Llc | Semantic navigation through object collections |
US10019139B2 (en) * | 2011-11-15 | 2018-07-10 | Google Llc | System and method for content size adjustment |
US9223472B2 (en) | 2011-12-22 | 2015-12-29 | Microsoft Technology Licensing, Llc | Closing applications |
US9128605B2 (en) | 2012-02-16 | 2015-09-08 | Microsoft Technology Licensing, Llc | Thumbnail-image selection of applications |
US20140089092A1 (en) * | 2012-09-27 | 2014-03-27 | Livingsocial, Inc. | Client-Based Deal Filtering and Display |
US20140372927A1 (en) * | 2013-06-14 | 2014-12-18 | Cedric Hebert | Providing Visualization of System Architecture |
USD732561S1 (en) * | 2013-06-25 | 2015-06-23 | Microsoft Corporation | Display screen with graphical user interface |
US10775971B2 (en) | 2013-06-28 | 2020-09-15 | Successfactors, Inc. | Pinch gestures in a tile-based user interface |
DE102013012474B4 (de) * | 2013-07-26 | 2024-07-04 | Audi Ag | Geräte-Bedienschnittstelle mit grafischen Bedienfeldern |
CN105359094A (zh) | 2014-04-04 | 2016-02-24 | 微软技术许可有限责任公司 | 可扩展应用表示 |
WO2015154276A1 (en) | 2014-04-10 | 2015-10-15 | Microsoft Technology Licensing, Llc | Slider cover for computing device |
WO2015154273A1 (en) | 2014-04-10 | 2015-10-15 | Microsoft Technology Licensing, Llc | Collapsible shell cover for computing device |
CA2893495C (en) * | 2014-06-06 | 2019-04-23 | Tata Consultancy Services Limited | System and method for interactively visualizing rules and exceptions |
US10175855B2 (en) * | 2014-06-25 | 2019-01-08 | Oracle International Corporation | Interaction in orbit visualization |
US9430142B2 (en) | 2014-07-17 | 2016-08-30 | Facebook, Inc. | Touch-based gesture recognition and application navigation |
US10007419B2 (en) | 2014-07-17 | 2018-06-26 | Facebook, Inc. | Touch-based gesture recognition and application navigation |
US10254942B2 (en) | 2014-07-31 | 2019-04-09 | Microsoft Technology Licensing, Llc | Adaptive sizing and positioning of application windows |
US10678412B2 (en) | 2014-07-31 | 2020-06-09 | Microsoft Technology Licensing, Llc | Dynamic joint dividers for application windows |
US10592080B2 (en) | 2014-07-31 | 2020-03-17 | Microsoft Technology Licensing, Llc | Assisted presentation of application windows |
US10642365B2 (en) | 2014-09-09 | 2020-05-05 | Microsoft Technology Licensing, Llc | Parametric inertia and APIs |
WO2016065568A1 (en) | 2014-10-30 | 2016-05-06 | Microsoft Technology Licensing, Llc | Multi-configuration input device |
US10229655B2 (en) * | 2015-02-28 | 2019-03-12 | Microsoft Technology Licensing, Llc | Contextual zoom |
DE112016001451T5 (de) * | 2015-03-27 | 2017-12-21 | Google Inc. | Techniken für das Anzeigen von Layouts und Übergangslayouts von Sätzen von Inhaltselementen in Reaktion auf Touch-Eingaben von Benutzern |
US11054981B2 (en) * | 2015-06-10 | 2021-07-06 | Yaakov Stein | Pan-zoom entry of text |
US10048829B2 (en) * | 2015-06-26 | 2018-08-14 | Lenovo (Beijing) Co., Ltd. | Method for displaying icons and electronic apparatus |
KR102426695B1 (ko) * | 2015-10-20 | 2022-07-29 | 삼성전자주식회사 | 화면 출력 방법 및 이를 지원하는 전자 장치 |
WO2018112925A1 (zh) * | 2016-12-23 | 2018-06-28 | 北京金山安全软件有限公司 | 信息显示方法、装置及终端设备 |
KR102316024B1 (ko) * | 2017-03-02 | 2021-10-26 | 삼성전자주식회사 | 디스플레이 장치 및 디스플레이 장치의 사용자 인터페이스 표시 방법 |
EP3844771A1 (en) | 2018-08-31 | 2021-07-07 | Ventana Medical Systems, Inc. | Contextually adaptive digital pathology interface |
CN110908581B (zh) * | 2019-11-20 | 2021-04-23 | 网易(杭州)网络有限公司 | 手势识别的方法及装置、计算机存储介质、电子设备 |
US20220019340A1 (en) * | 2020-07-15 | 2022-01-20 | yuchen du | Social knowledge graph for collective learning |
Family Cites Families (14)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20020018051A1 (en) * | 1998-09-15 | 2002-02-14 | Mona Singh | Apparatus and method for moving objects on a touchscreen display |
US7317449B2 (en) * | 2004-03-02 | 2008-01-08 | Microsoft Corporation | Key-based advanced navigation techniques |
EP1774429B1 (en) * | 2004-07-30 | 2018-06-06 | Apple Inc. | Gestures for touch sensitive input devices |
US7181373B2 (en) * | 2004-08-13 | 2007-02-20 | Agilent Technologies, Inc. | System and methods for navigating and visualizing multi-dimensional biological data |
US8418075B2 (en) * | 2004-11-16 | 2013-04-09 | Open Text Inc. | Spatially driven content presentation in a cellular environment |
US7725837B2 (en) * | 2005-03-31 | 2010-05-25 | Microsoft Corporation | Digital image browser |
US20070208840A1 (en) * | 2006-03-03 | 2007-09-06 | Nortel Networks Limited | Graphical user interface for network management |
US20080168402A1 (en) * | 2007-01-07 | 2008-07-10 | Christopher Blumenberg | Application Programming Interfaces for Gesture Operations |
US20090327969A1 (en) * | 2008-06-27 | 2009-12-31 | Microsoft Corporation | Semantic zoom in a virtual three-dimensional graphical user interface |
US20100175029A1 (en) * | 2009-01-06 | 2010-07-08 | General Electric Company | Context switching zooming user interface |
US8375292B2 (en) * | 2009-01-16 | 2013-02-12 | International Business Machines Corporation | Tool and method for mapping and viewing an event |
US20100302176A1 (en) * | 2009-05-29 | 2010-12-02 | Nokia Corporation | Zoom-in functionality |
US9152318B2 (en) * | 2009-11-25 | 2015-10-06 | Yahoo! Inc. | Gallery application for content viewing |
US8856688B2 (en) * | 2010-10-11 | 2014-10-07 | Facebook, Inc. | Pinch gesture to navigate application layers |
-
2011
- 2011-09-09 US US13/228,707 patent/US20130067398A1/en not_active Abandoned
- 2011-10-11 WO PCT/US2011/055746 patent/WO2013036264A1/en active Application Filing
- 2011-10-11 JP JP2014529687A patent/JP5964429B2/ja not_active Expired - Fee Related
- 2011-10-11 BR BR112014005410A patent/BR112014005410A8/pt not_active Application Discontinuation
- 2011-10-11 RU RU2014108844A patent/RU2611970C2/ru not_active IP Right Cessation
- 2011-10-11 AU AU2011376311A patent/AU2011376311A1/en not_active Abandoned
- 2011-10-11 MX MX2014002779A patent/MX2014002779A/es not_active Application Discontinuation
- 2011-10-11 EP EP11871863.4A patent/EP2754019A4/en not_active Withdrawn
- 2011-10-11 KR KR20147006306A patent/KR20140074889A/ko not_active Application Discontinuation
- 2011-10-11 CA CA 2847682 patent/CA2847682A1/en not_active Abandoned
-
2012
- 2012-09-10 CN CN201210331584.1A patent/CN102981728B/zh not_active Expired - Fee Related
Also Published As
Publication number | Publication date |
---|---|
RU2611970C2 (ru) | 2017-03-01 |
AU2011376311A1 (en) | 2014-03-20 |
RU2014108844A (ru) | 2015-09-20 |
JP2014530396A (ja) | 2014-11-17 |
CA2847682A1 (en) | 2013-03-14 |
KR20140074889A (ko) | 2014-06-18 |
WO2013036264A1 (en) | 2013-03-14 |
CN102981728A (zh) | 2013-03-20 |
EP2754019A4 (en) | 2015-06-10 |
MX2014002779A (es) | 2014-06-05 |
BR112014005410A8 (pt) | 2018-02-06 |
EP2754019A1 (en) | 2014-07-16 |
BR112014005410A2 (pt) | 2017-04-04 |
CN102981728B (zh) | 2016-06-01 |
US20130067398A1 (en) | 2013-03-14 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US11893230B2 (en) | Semantic zoom animations | |
JP5964429B2 (ja) | セマンティックズーム | |
JP6042892B2 (ja) | セマンティックズームのためのプログラミングインターフェース | |
US9557909B2 (en) | Semantic zoom linguistic helpers | |
JP2014530395A (ja) | セマンティックズームジェスチャ | |
US20150378602A1 (en) | Device, method, and graphical user interface for entering characters | |
US20120019540A1 (en) | Sliding Motion To Change Computer Keys | |
US20110175826A1 (en) | Automatically Displaying and Hiding an On-screen Keyboard |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20140925 |
|
A711 | Notification of change in applicant |
Free format text: JAPANESE INTERMEDIATE CODE: A711 Effective date: 20150523 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20151014 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20151020 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20160115 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20160531 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20160629 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 5964429 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
LAPS | Cancellation because of no payment of annual fees |