JP2008505382A - 不連続的なズーム - Google Patents

Abstract

表示装置におけるズームのための方法及び装置において、ディスプレイの画素のズームだけでなく、表示される画像における画素を有する区別可能なオブジェクトに対してズームが実行される。最初に、区別可能なオブジェクト間の空白が減少され、次いで区別可能なオブジェクトが最小表面積に達するまで該オブジェクトのサイズが増大される。最小表面積は、ディスプレイのサイズ及び解像度に基づく、ユーザによって認識可能な最小のサイズである。次いで、ユーザがオブジェクトの１つを選択するまで、ズームが中断される。次いで、最大ズーム倍率に達するまで、選択されたオブジェクトのみに対してズームが継続することが可能とされる。

Description

本発明はズームに関し、更に詳細には、表示装置上の区別可能なオブジェクトを含む画像信号のズームに関する。

ズームは通常、表示装置の表示画面上に提示されるアイテムの詳細を、ユーザがより容易に見ることができるようにするために利用される。関心のあるオブジェクトに近接する可視のオブジェクトはユーザの脳によって無視され得るが、該関心のあるオブジェクトの処理に不利な影響を与え得ること、即ち部分的には無視されるものの依然として気を散らすものであるということが、心理学から知られている。殆どのズーム機能は、このことを考慮に入れておらず、いずれの表示される画素もがズームインされるように連続的にズームする。このことは、画像の一部の拡大部が、オブジェクト自体のみならず、例えば表示画面上のオブジェクト間のスペースのような関係のない情報を持つことに導く。

しかしながら、幾つかのビデオ画像においては、画像中のオブジェクトは区別され得るが、先行技術のズーム方法はこれら区別可能なオブジェクトを無視し、ディスプレイ中の画素の全てに対してズームを続行する。

本発明の目的は、区別可能なオブジェクトを持つ画像信号を伴って提示される場合に、該区別可能なオブジェクト中の画素のみをズームすることにある。

本目的は、表示装置上のビデオ画像をズームする方法であって、前記ビデオ画像は複数のオブジェクトに区別可能であり、前記表示装置は前記オブジェクトについての最小表面積を持ち、前記方法は、前記表示装置の表示画面上に、それぞれが複数の画素を有する区別可能なオブジェクトを持つビデオ画像を表示するステップと、前記ビデオ画像中の前記オブジェクトを区別するステップと、前記区別可能なオブジェクトに含まれないビデオ画像における空間の面積を減少させ、前記区別可能なオブジェクトのサイズを前記区別可能なオブジェクトが前記最小表面積を持つに至るまで増大させることにより、前記ビデオ画像をズームするステップと、ユーザが前記区別可能なオブジェクトの１つを選択するまで前記ズームするステップを中断するステップと、前記区別可能なオブジェクトの中からユーザが選択したものを検出するステップと、前記選択された区別可能なオブジェクトのみをズームするステップと、を有する方法において達成される。

上述の目的はまた、表示装置上のビデオ画像をズームする機器であって、前記ビデオ画像は複数のオブジェクトに区別可能であり、前記表示装置は前記オブジェクトについての最小表面積を持ち、前記機器は、前記表示装置の表示画面上に、それぞれが複数の画素を有する区別可能なオブジェクトを持つビデオ画像を表示するビデオ画像プロセッサと、前記ビデオ画像中の前記オブジェクトを区別する手段と、前記区別可能なオブジェクトに含まれないビデオ画像における空間の面積を減少させ、前記区別可能なオブジェクトのサイズを前記区別可能なオブジェクトが前記最小表面積を持つに至るまで増大させることにより、前記ビデオ画像をズームし、ステータス信号を生成するズーム手段と、前記ステータス信号の受信に応じて前記ズームを中断する手段と、前記区別可能なオブジェクトの中からユーザが選択したものを検出する手段と、前記選択された区別可能なオブジェクトのみのズームを再開する手段と、を有する機器において達成される。

本出願人は、全ての表示される画素をズームするのではなく、幾つかのアプリケーションにおいて為されているように、ボタンのような視覚的なオブジェクト中の画素のみに対してズームを適用できることを見出した。現在のところ、このことはユーザが操作するためにより容易にアクセスできるように、ユーザインタフェースの要素を拡大するために利用されている。本出願人は、同様の原理を、ＸＭＬ又はＨＴＭＬのようなＸＭＬの派生物においてエンコードされた表示テキストに適用することを提案する。

ＸＭＬ及びＨＴＭＬのページは、例えば本体、広告バナー、ナビゲーション部といったテキストのオブジェクトが識別できるように構造化されている。このことは、これらの要素が認識され得るようにこれらのページが適切に構造化されていない場合であっても、例えばＨＴＭＬページからテーブルを抽出するといった文書の簡単な解析により可能である。

ページがオブジェクト及び（該ページの及び該オブジェクトの）画素に分割されることができれば、ズーム倍率についてのユーザの入力（即ち、ズームイン又はズームアウトのユーザ要求）は、表示されているものの変化へと変換され得る。個々のオブジェクトが有意に選択可能となるように全体のページが画面に合致する場合、即ちユーザが該ユーザが選択しようとするものを見ることができる場合、ユーザは所望のオブジェクトを選択することができ、ズームは該選択されたオブジェクトに基づいて継続する。

通常ズームは、ズーム無しでは個々の要素に対してユーザが操作をするために画面が小さ過ぎるために提供される。一方で、画像の概観が、パン及び／又はズームの全般的な方向を決定するために有意である。これらのような場合に、本発明の不連続なズームが有用である。ズームは最初に、ズームインするオブジェクトをユーザが選択できる点まで全体のページに対して動作し、該点においてズームが停止する。ユーザが関心のあるオブジェクトを選択すると、他のオブジェクトは表示から除外され、該選択されたオブジェクトに対してズームが動作する。

ズーム倍率は、ユーザに選択を為すことを要求するべきところで決定される必要がある。このことはページのサイズ並びに該ページ上のオブジェクトの絶対的な及び相対的なサイズに依存するため、ユーザがオブジェクトを選択する必要がある点におけるズーム倍率は、全てのページについて一定とはされない。画面のサイズに対して、認識されるべきオブジェクトについて、平均最小表面積が導出され得る。従って、ズーム処理において、全ての「空白」即ちオブジェクトの無い空間が削減され、次いで、表示されている全てのオブジェクトが決定された最小表面積を持つに至るまでオブジェクトをズームすることにより、ズーム処理が継続する。この時点において、ユーザがズームインするオブジェクトを選択するまで、ズームが中断される。

本発明の方法及び機器の実施例においては、区別されるオブジェクトのそれぞれのサイズの拡大は、関連する区別されるオブジェクトのサイズが前記最小表面積に達したときに停止する。表示されるオブジェクトのサイズが違いすぎると、１つのオブジェクトが、他のオブジェクトが最小限必要とされる表面積を持つ前に、画面を略完全に満たしてしまい得る。従って、本発明は、オブジェクトが最小表面積に達したときに、該オブジェクトのサイズを拡大することを停止する。このことは、他のより小さいオブジェクトがズームされて最小表面積に到達するための十分な空白を実現する。

本発明の方法及び機器の他の実施例においては、ユーザによって選択されたオブジェクトが強調される。このことは、どのオブジェクトが選択されたかについてユーザにフィードバックを提供する。

以下、意図される上述の及び更なる目的及び利点が示されつつ、本発明が添付図面を参照しながら説明されるであろう。

本発明は、３次元（３−Ｄ）ディスプレイ、即ち、ディスプレイの表面に対するポインタ、スタイラス又はユーザの指の水平及び垂直位置と共に、前記表示画面の表面からのポインタ、スタイラス又はユーザの指の距離を検出することが可能なディスプレイを利用する。例えば赤外線検知、静電容量検知等を利用する、種々の既知のタイプの３−Ｄディスプレイがある。３−Ｄディスプレイの１つのタイプは、米国特許出願公開ＵＳ２００２／００００９７７Ａ１に開示されており、参照によって本明細書に組み込まれたものとする。

図１Ａに示されるように、表示画面１０は、導電性の透明な導線のグリッドを重畳され、水平の導線１２は、垂直な導線１４と電気的に絶縁される。接続ブロック１８．１及び１８．２に接続された電圧源１６は、水平及び垂直の導線１２及び１４の両端に電位差を印加する。この構成は、図１Ｂに示されるような、ディスプレイ１０の表面から離れて延在する検出場２０を生じる。ここで、水平及び垂直の導線１２及び１４は、キャパシタのプレートとして働く。

例えば、ユーザの指が検出場２０に進入すると、導線１２と１４との間のキャパシタンスが影響を受け、垂直の導線１４に接続されたＸ軸検出器２２及び水平の導線１２に接続されたＹ軸検出器２４により検出される。検出器信号プロセッサ２６は、Ｘ及びＹ検出器２２及び２４からの出力信号を受信し、Ｘ及びＹ座標信号及びＺ距離信号を生成する。前記Ｘ及びＹ座標信号及びＺ距離信号は、ズームコントローラ２８に供給される。

加えて、図１Ａに示されるように、画像信号源３２は、画像信号プロセッサ３４に画像信号を供給する。画像信号プロセッサ３４は、ズームコントローラ２８からのズーム制御信号をも受信する。画像信号プロセッサ３４からの出力信号は、表示コントローラ３８に供給され、表示コントローラ３８は次いでビデオ信号を表示画面１０に供給する。

図２に示されるように、ズームコントローラ２８は、表示画面１０の表面からＺ方向（両方向矢印４０）に延在する領域Ａを確立する。領域Ａは、ユーザの指４２が閾値距離４４を通過したときに、ユーザの指４２が検出されズームが開始される領域を示す。

図３Ａは表示画面１０を示す。ここではビデオ画像が、空白５８によって分離された種々のサイズの区別可能なオブジェクト５０、５２、５４及び５６を含む。これらのオブジェクトは、画像信号プロセッサ３４において検出される。ズーム処理が開始すると（例えばユーザが該ユーザの指４２を表示画面１０に向けて動かし閾値４４を通過した場合）、画像信号プロセッサ３４は、ズームコントローラからのズーム制御信号に応じて、図３Ｂに示されるようにオブジェクト５０乃至５６間の空白５８のサイズを減少させる。次いで、画像信号プロセッサ３４は、オブジェクト５０乃至５６のサイズを、これらオブジェクトが最小表面積に達するまで増大させる（ズームする）（図３Ｃを参照のこと）。該最小表面積は、表示画面１０のサイズ及び解像度により予め決定され、オブジェクトが観測者によって区別可能であるオブジェクトの最小限のサイズを表す。この時点で、画像信号プロセッサ３４はズームコントローラ２８に信号送信し、ユーザがオブジェクトの１つを選択するまでズーム処理が中断される（即ちユーザの指の表示画面１０に向けての更なる移動が無視される）。３次元（３−Ｄ）タッチディスプレイを用いると、該選択は、ユーザが該ユーザの指をＸ／Ｙ方向に動かし、例えば該ユーザの指を僅かに後退させることによりオブジェクトを選択することで為されても良い。図３Ｃに示されるように、画像信号プロセッサ３４は、選択されたオブジェクト５４を強調しても良い。この時点で、選択されたオブジェクト５４がサイズを増大させ、選択されていないオブジェクト５０、５２及び５６は画像から外れるようにズーム処理が継続される。

図４は、ズーム処理を示すグラフであり、Ｘ軸が表示画面１０からの距離であり、Ｙ軸がズーム倍率である。ユーザの指４２が閾値４４を通過するまで、ズーム倍率曲線６０は、所定の最小値を呈する。ユーザの指４２が閾値４４を通過すると、ズーム倍率曲線６０は増加を開始し、空白が減少してオブジェクトの表面積が増大する。距離６２において、全てのオブジェクトが最小表面積に達し、ズーム倍率曲線６０の変化が中断され、ユーザがオブジェクトの１つを選択することを可能とする。距離６４によって示される当該選択の時点で、距離６６における最大ズーム倍率に至るまで、該選択されたオブジェクトのズームが再開する。

オブジェクト５０乃至５６が著しくサイズが異なる場合には、これらオブジェクトのサイズを拡大する処理の間、小さなオブジェクトよりもかなり前に、大きなオブジェクトが最小表面積に達し超えてしまい得る。小さなオブジェクトが最小表面積に到達する前にこれら大きなオブジェクトが表示画面１０を占めてしまうことを防ぐため、各オブジェクトが最小表面積に到達するとすぐに、当該オブジェクトのズームが中断され、小さなオブジェクトのズームは継続する。

本発明は３−Ｄタッチディスプレイ装置において実施されるものとして説明されたが、このことは必須ではない。携帯型表示装置７０が図５に示され、該装置は表示画面７２を持つ。携帯型表示装置７０は、ユーザが種々の機能を制御することを可能とする複数のキー７４を持つ。これらのキーの中には「−」キー７６及び「＋」キー７８があり、これらはズームを制御するために利用されることができる。とりわけ、ユーザが「＋」キー７８を押下するとズームが開始する。ここでもまた、最初に空間が減少され次いでオブジェクトの表面積がこれらオブジェクトが最小表面積を持つに至るまで増大する。次いで、ユーザが「＋」キー７８を押下し続けていても、ズームが中断される。キー７４を利用してユーザがオブジェクトの１つを選択し、次いでユーザが「＋」キーを押下すると、該選択されたオブジェクトのズームが、最大ズーム倍率にズームが達するまで継続する。

本発明は特定の実施例を参照しながら説明されたが、添付された請求項に記載された本発明の精神及び範囲から逸脱することなく、多くの変更が為され得ることは認識されるであろう。本明細書及び図面は従って例示的なものであり、添付される請求の範囲を制限することを意図したものではない。

添付される請求項の解釈において、以下のことが理解されるべきである。
ａ）「有する（comprising）」なる語は、請求項に列記されたもの以外の要素又は処理の存在を除外するものではない。
ｂ）要素に先行する「１つの（a又はan）」なる語は、複数の斯かる要素の存在を除外するものではない。
ｃ）請求項におけるいずれの参照記号も当該請求項の範囲を限定するものではない。
ｄ）幾つかの「手段（means）」は、同一のハードウェアのアイテム又はソフトウェアを実装された構造若しくは機能により表され得る。
ｅ）いずれの開示される要素も、ハードウェア部分（例えば別個の及び組み込まれた電子回路を含む）、ソフトウェア部分（例えばコンピュータプログラム）及びこれらのいずれかの組み合わせを有しても良い。
ｆ）ハードウェア部分は、アナログ部分及びディジタル部分の一方又は両方を有しても良い。
ｇ）いずれの開示される要素又はその部分も、明示的に記されていない限り、組み合わせられても良く又は更なる部分に分離されても良い。
ｈ）明示的に示されていない限り、特定の処理のシーケンスが必要とされることは意図されない。

静電容量センサが内蔵された表示装置のブロック図である。 図１（Ａ）のセンサアレイの検出線を示す図である。 表示画面の表面から延在する検出領域を示す図である。 表示装置の表示画面上のオブジェクトのズームの段階を示す。 表示装置の表示画面上のオブジェクトのズームの段階を示す。 表示装置の表示画面上のオブジェクトのズームの段階を示す。 表示装置の表示画面上のオブジェクトのズームの段階を示す。 表示画面からの距離に対するズーム倍率のグラフを示す。 ズームがキーによって制御される携帯型ビデオ装置の図を示す。

Claims (12)

1. 表示装置上のビデオ画像をズームする方法であって、前記ビデオ画像は複数のオブジェクトに区別可能であり、前記表示装置は前記オブジェクトについての最小表面積を持ち、前記方法は、
   前記表示装置の表示画面上に、それぞれが複数の画素を有する区別可能なオブジェクトを持つビデオ画像を表示するステップと、
   前記ビデオ画像中の前記オブジェクトを区別するステップと、
   前記区別可能なオブジェクトに含まれないビデオ画像における空間の面積を減少させ、前記区別可能なオブジェクトのサイズを前記区別可能なオブジェクトが前記最小表面積を持つに至るまで増大させることにより、前記ビデオ画像をズームするステップと、
   ユーザが前記区別可能なオブジェクトの１つを選択するまで前記ズームするステップを中断するステップと、
   前記区別可能なオブジェクトの中からユーザが選択したものを検出するステップと、
   前記選択された区別可能なオブジェクトのみをズームするステップと、
   を有する方法。
2. 前記方法は更に、前記検出するステップの後に、
   前記ビデオ画像から、前記選択された区別可能なオブジェクト以外の前記区別可能なオブジェクトを除去するステップを有する、請求項１に記載の方法。
3. 前記ズームするステップにおいて、関連する前記区別可能なオブジェクトが前記最小表面積に達したときに前記区別可能なオブジェクトのそれぞれのサイズの増大が停止する、請求項１に記載の方法。
4. 前記ビデオ画像は、ＸＭＬ又はＨＴＭＬオブジェクトベースの形式でエンコードされた、請求項１に記載の方法。
5. 前記検出するステップは、前記選択された区別可能なオブジェクトの周囲を強調するステップを有する、請求項１に記載の方法。
6. 前記表示装置は３次元仮想タッチディスプレイ装置であり、前記表示装置の表示面上のユーザの指の位置及び前記表示装置の表示面からの前記ユーザの指の距離を検出することによりズームが実行される、請求項１に記載の方法。
7. 表示装置上のビデオ画像をズームする機器であって、前記ビデオ画像は複数のオブジェクトに区別可能であり、前記表示装置は前記オブジェクトについての最小表面積を持ち、前記機器は、
   前記表示装置の表示画面上に、それぞれが複数の画素を有する区別可能なオブジェクトを持つビデオ画像を表示するビデオ画像プロセッサと、
   前記ビデオ画像中の前記オブジェクトを区別する手段と、
   前記区別可能なオブジェクトに含まれないビデオ画像における空間の面積を減少させ、前記区別可能なオブジェクトのサイズを前記区別可能なオブジェクトが前記最小表面積を持つに至るまで増大させることにより、前記ビデオ画像をズームし、ステータス信号を生成するズーム手段と、
   前記ステータス信号の受信に応じて前記ズームを中断する手段と、
   前記区別可能なオブジェクトの中からユーザが選択したものを検出する手段と、
   前記選択された区別可能なオブジェクトのみのズームを再開する手段と、
   を有する機器。
8. 前記ユーザが選択したものを検出する手段に応じて、前記ビデオ画像から、前記選択された区別可能なオブジェクト以外の前記区別可能なオブジェクトを除去する手段を更に有する、請求項７に記載の機器。
9. 前記ズーム手段は、関連する前記区別可能なオブジェクトのサイズが前記最小表面積に達するまで前記区別可能なオブジェクトのそれぞれのサイズを増大させる、請求項７に記載の機器。
10. 前記ビデオ画像は、ＸＭＬ又はＨＴＭＬオブジェクトベースの形式でエンコードされた、請求項７に記載の機器。
11. 前記検出する手段は、前記選択された区別可能なオブジェクトを強調する、請求項７に記載の機器。
12. 前記表示装置は３次元仮想タッチディスプレイ装置であり、前記ズーム手段が、前記表示装置の表示面上のユーザの指の位置及び前記表示装置の表示面からの前記ユーザの指の距離を検出する、請求項７に記載の機器。

Images