JP2013517568A - ディスプレイを使用した通信のためのターゲットオブジェクトの選択 - Google Patents

ディスプレイを使用した通信のためのターゲットオブジェクトの選択 Download PDF

Info

Publication number
JP2013517568A
JP2013517568A JP2012549052A JP2012549052A JP2013517568A JP 2013517568 A JP2013517568 A JP 2013517568A JP 2012549052 A JP2012549052 A JP 2012549052A JP 2012549052 A JP2012549052 A JP 2012549052A JP 2013517568 A JP2013517568 A JP 2013517568A
Authority
JP
Japan
Prior art keywords
mobile device
captured image
target objects
target object
dedicated computing
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2012549052A
Other languages
English (en)
Inventor
アーノルド・ジェイソン・ガム
Original Assignee
クアルコム，インコーポレイテッド
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by クアルコム，インコーポレイテッド filed Critical クアルコム，インコーポレイテッド
Publication of JP2013517568A publication Critical patent/JP2013517568A/ja
Pending legal-status Critical Current

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04W—WIRELESS COMMUNICATION NETWORKS
    • H04W76/00—Connection management
    • H04W76/10—Connection setup
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V30/00—Character recognition; Recognising digital ink; Document-oriented image-based pattern recognition
    • G06V30/10—Character recognition
    • G06V30/14—Image acquisition
    • G06V30/142—Image acquisition using hand-held instruments; Constructional details of the instruments
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04W—WIRELESS COMMUNICATION NETWORKS
    • H04W4/00—Services specially adapted for wireless communication networks; Facilities therefor
    • H04W4/02—Services making use of location information
    • H04W4/029—Location-based management or tracking services
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N2101/00—Still video cameras
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04W—WIRELESS COMMUNICATION NETWORKS
    • H04W4/00—Services specially adapted for wireless communication networks; Facilities therefor
    • H04W4/02—Services making use of location information
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04W—WIRELESS COMMUNICATION NETWORKS
    • H04W4/00—Services specially adapted for wireless communication networks; Facilities therefor
    • H04W4/02—Services making use of location information
    • H04W4/024—Guidance services

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Mobile Radio Communication Systems (AREA)
  • Telephone Function (AREA)
  • User Interface Of Digital Computer (AREA)
  • Studio Devices (AREA)

Abstract

本明細書で開示する主題は、ハンドヘルドモバイルデバイスの画像形成デバイスを使用してターゲットオブジェクトと対話することに関する。

Description

本明細書で開示する主題は、ハンドヘルドモバイルデバイスの画像形成デバイスを使用してターゲットオブジェクトと対話することに関する。
セル電話、携帯情報端末(PDA)などのハンドヘルドモバイルデバイスは、人気の上昇が続いている。そのようなデバイスは、デジタルカメラを含み得るが、後で閲覧するオブジェクトの写真を撮影することができる。そのような写真の画像内のオブジェクトに関する情報を判断する能力が望まれることがある。
一実装形態では、プロセスは、複数のターゲットオブジェクトのオブジェクト画像を含むモバイルデバイスからの画像をキャプチャするステップと、キャプチャ画像をモバイルデバイスのディスプレイデバイスに表示するステップと、表示されたキャプチャ画像内のターゲットオブジェクトの少なくとも1つの選択を受信するステップと、およびモバイルデバイスを介して選択に応答して選択ターゲットオブジェクトとの通信を開始するステップとを含むことができる。しかしながら、これは全体を通じて開示され論じられるプロセスおよび方法の特定の例にすぎないこと、ならびに特許請求する主題がこの特定の例に限定されないことを理解されたい。
非限定的かつ非網羅的な特徴について、以下の図を参照しながら説明し、様々な図を通じて同じ参照番号は同じ部分を指す。
一実装形態による、互いに通信することができるデバイスのシステムを示す図である。 一実装形態による、ターゲットオブジェクトの方へ方向付けられた画像キャプチャデバイスを示す概略図である。 一実装形態による、ターゲットオブジェクトの方へ方向付けられた画像キャプチャデバイスのビューファインダ画像を表す概略図である。 一実装形態による、ターゲットオブジェクトを含むキャプチャ画像を表す概略図である。 一実装形態による、ターゲットオブジェクトに関する情報を取得するプロセスを示す流れ図である。 一実装形態による、ターゲットオブジェクトを識別するプロセスを示す流れ図である。 一実装形態による、ディスプレイを表す概略図である。 一実装形態による、動きを感知すること、およびワイヤレスネットワークと通信することが可能なモバイルデバイスの概略図である。
本明細書全体を通した「1つの例(一例)」、「1つの特徴」、「例」または「特徴」への言及は、特徴および/または例に関して説明する特定の特徴、構造または特性が、特許請求する主題の少なくとも1つの特徴および/または例に含まれることを意味する。したがって、本明細書中の様々な場所における「一例では」、「例」、「1つの特徴では」または「特徴」という語句の出現は、同じ特徴および/または例にすべて言及しているとは限らない。さらに、特定の特徴、構造または特性は、1つまたは複数の例および/または特徴に合成されることがある。
本明細書で説明する実装形態は、ハンドヘルドモバイルデバイス(MD)を使用して、MDに結合されたディスプレイで特定のターゲットオブジェクトを選択した後、特定のターゲットオブジェクトを識別し、その後特定のターゲットオブジェクトと通信することを含む。たとえば、そのようなディスプレイは、建物、像、電子デバイスなどのいくつかのターゲットオブジェクトを含むキャプチャ画像(たとえば写真)を示すことができる。そのようなディスプレイおよびそのようなMDのユーザインターフェースを使用して、ユーザはいくつかの表示されたターゲットオブジェクトの中から特定のターゲットオブジェクトを選択することができる。そのような選択の後、以下で詳細に説明するように、MDは選択ターゲットオブジェクトを識別し、選択ターゲットオブジェクトとの通信を開始するプロセスを踏むことができる。特定の一実装形態では、特定のターゲットオブジェクトのそのような選択の結果、MDが(たとえばメモリデバイスに記憶された)特定のターゲットオブジェクトに関する情報をまだ含んでいない場合、MDはリモートソースからそのような情報を取得することができる。たとえば地上の基地局のようなリモートソースを使用して、ターゲットオブジェクトを識別することもできる。そのようなリモートソースは、たとえばどのオブジェクト(たとえばターゲットオブジェクト)がユーザにとって重要であり得るかを判断するサービスで、そのようなサービスにユーザが加入しているサービスによって、生成および/または維持されるターゲットオブジェクト情報を含むデータベースを含むことができる。そのような情報は、ターゲットオブジェクトに関する事実、ターゲットオブジェクトの履歴、ターゲットオブジェクトに関連する価格、ターゲットオブジェクトの利用可能性、ターゲットオブジェクトに関するナビゲーション指示、および/またはターゲットオブジェクトとの通信を開始するためにMDによって使用され得る情報を含むことができる。そのような情報の少なくとも一部分が、MDに結合されたディスプレイに示され得る。
一実装形態では、そのようなMDは、電子デバイスを含むターゲットオブジェクトとの通信を伴う様々な適用場面で使用できる。上記のように、ユーザはいくつかの表示されたターゲットオブジェクトの中から特定のターゲットオブジェクトを選択することができる。通信相手とするターゲットオブジェクトを指定する際、視覚識別マーク、バーコードもしくは数値指示子、視覚インジケータ、たとえばインジケータライトもしくは複数のインジケータライトの組合せ、スクリーンパターンなどだが、これらに限定されないターゲットデバイスによって提供される情報、ならびに/またはターゲットデバイスによってワイヤレスで提供される識別情報および特徴情報を利用することができる。そのような情報がワイヤレスで提供された場合、ターゲットデバイスからのワイヤレス送信が、MDからのブロードキャスト信号によって開始され得る。そのようなブロードキャスト信号は、デバイスタイプなどターゲットデバイスの特性情報を含むことができる。たとえば、ターゲットデバイスはテレビまたはVCRを含むことができる。ワイヤレス送信は、ブルートゥース、WiFiおよび/または他のパーソナルエリアネットワーキング技術もしくはローカルエリアネットワーキング技術など、複数のワイヤレス技術のうちのいずれか1つに関係し得る。受信された識別情報に応じて、MDはターゲットデバイスを、受信された識別情報に関連付けることができる。たとえば、バーコードまたは数字など視覚的手がかりを光学的に認識し、かつ/またはターゲットデバイスに関連付けることによって、デバイス識別に至ることができる。同様に、ターゲットデバイスに関連するワイヤレスで送信される識別情報は、特定の状況で特定のデバイスに固有になるように、事前に割り当てられ、かつ/またはランダムに生成され得る。識別情報は、サポートされる通信モード情報を含むこともある。識別が判断されると、MDは、識別情報が提供された同じモードを使用して、または他のサポートされる通信モードを使用して、ターゲットデバイスとの指示通信を開始することができる。
複数の同一のデバイスの場合、特定のターゲットデバイスとの指示通信を確立するには、フィードバックステップが必要な場合があり、このステップでは、通信が一連のデバイスとの間で確立され、各々がMDからの通信に応じて検出可能なフィードバック信号、たとえばパワーオンライト(power on light)または他のデバイス固有の検出可能な変化を提供する。次いでMDは、選択ターゲットデバイス通信が達成されるまで、一連のデバイスと交信することができる。
上記の実施形態は、通信の視覚的技法および/またはワイヤレス技法に対応するが、そのような実装形態は、同様の音声技法に適用することもでき、たとえば、MDによって検出され得る識別周波数トーンを使用して、ターゲットデバイス識別情報を少なくとも部分的に判断することができる。一実装形態では、MDは、ビデオ/音楽デバイス、アラームシステム、ドアロック、双方向ゲーム機など、複数の電子デバイスと通信し、その結果そのような電子デバイスを制御する汎用遠隔制御装置として機能することもできるセル電話を含むことができる。別の例では、MDとターゲットオブジェクトとの通信は、データファイルおよび/またはMDからリモートで保存される他の情報にアクセスするために、MDのユーザの認証を伴うことがある。ターゲットオブジェクトとの通信は、たとえばパスワード入力、および/またはクレジットカード/デビットカードの情報の確認など、認証手続きを伴うこともある。他の例として、クレジットカードでの購入、1つの金融勘定から別の金融勘定への株式移転(equity transfers)などの金融取引に関連する認証および/またはセキュリティ手順などが挙げられる。特定の一実装形態では、ターゲットオブジェクトは、ユーザが購入を希望するアイテムに関連し得る。そのような場合、そのようなアイテムを識別した後、MDは、購入価格、入手可能性などのアイテムに関する情報(MDに保存済みの場合、および/またはサーバからワイヤレスでダウンロード済みの場合がある)を表示することができる。次いで、アイテムの購入を決めたユーザは、たとえばクレジットカード情報を入力することができ、この情報は、購入アイテムに関連するターゲットオブジェクトとの通信を介して確認され得る。もちろん、そのような適用は例にすぎず、特許請求する主題はそのように限定されない。
特定の一実装形態について説明すると、MDに固定的に取り付けられているか、MDに統合されている画像形成デバイスを使用して、ターゲットオブジェクトに関する情報を取得することができる。そのような画像形成デバイスは、1つまたは複数のターゲットオブジェクトの画像をキャプチャするように位置付ける(向ける)ことができる。MDのディスプレイデバイスは、そのようなキャプチャ画像を表示することができる。ユーザは、たとえばタッチスクリーン、キーパッド、スタイラスおよび/またはボイスコマンドなどのユーザインターフェースを介して、表示されたキャプチャ画像と対話することができる。そのような対話中、ユーザは、表示されたキャプチャ画像に含まれる1つまたは複数のターゲットオブジェクトを選択することができる。特定の一実装形態では、ユーザは、表示されたキャプチャ画像に含まれる特定のターゲットオブジェクトを、画像内のターゲットオブジェクトにオーバーレイされた関連ラベルを選択する(たとえば、表示されたキャプチャ画像にオーバーレイされたタッチスクリーン上の1つの場所を選択する、カーソルを位置付ける、「クリックする」など)ことによって選択することができる。次いで、選択ターゲットオブジェクトが、以下で詳細に説明する1つまたは複数の各種技法によって識別され得る。そのような識別の後、MDは上記のように、選択ターゲットオブジェクトに関する情報を取得することができる。そのような情報は、たとえば、選択ターゲットオブジェクトとの通信を開始するために使用できる。たとえば、そのような情報は、ターゲットオブジェクトと通信するためにMDが使用できる通信プロトコルおよび/またはパラメータについて説明していることがある。
そのような実装形態の例として、ユーザはターゲットオブジェクトの画像をキャプチャすることができる。特定の一実装形態では、そのようなターゲットオブジェクトは、ユーザが通信および/または対話の相手として希望する電子デバイスを含むことができる。そのようなユーザは、電子デバイスの画像をキャプチャするために、全体的に電子デバイスの方向に(たとえばセルラー電話に含まれる)カメラを向けることができる。別の例として、ユーザは、情報を希望している特定の建物の画像を同様にキャプチャすることができる。いずれの例でも、そのようなキャプチャ画像は、1つまたは複数のターゲットオブジェクトの候補を含むことができる。言い換えれば、ユーザは、意図的または不注意に複数のターゲットオブジェクトの画像をキャプチャすることがある。たとえば、上記の例における特定の建物が別の建物の近くに位置するために、両方の建物がキャプチャ画像に含まれることがある。両方の建物をターゲットオブジェクトと考えることができるが、ユーザにとっては画像内のターゲットオブジェクトのうちの1つだけが重要であることもある。したがって、ユーザは、そのようなターゲットオブジェクトから特に重要なターゲットオブジェクトを選択するために、表示されたキャプチャ画像と対話することができる。たとえば、ユーザはセルラー電話のタッチスクリーンディスプレイを使用して、キャプチャ画像に含まれる複数のデバイスの画像から、特定の電子デバイスの画像を選択することができる。電子デバイスのそのような選択および識別の後、ユーザはMDを介して、選択電子デバイスと通信することができる。そのような電子デバイスは、アクセス制御、たとえば電子ドアロック、ステレオ、テレビ、通信デバイス、ならびに/またはユーザが制御、対話および/もしくは動作を希望し得る他のそのような電子デバイスなどを含むことができる。
特定の一実装形態では、上記の例における特定の建物のようなターゲットオブジェクトの正体は、ユーザ入力および/または画像認識技法などから判断できる。そのような識別を使用して、MDはターゲットオブジェクトに関する情報を、MDからのそのような情報の要求に応じる地上の基地局および/またはトランシーバを通じてワイヤレスで取得することができる。特定の一実装形態では、そのような情報は、MDが上述のようにターゲットオブジェクトと通信することを可能にし得る。そのような情報は、たとえば基地局および/またはトランシーバと通信するネットワーク上で維持されるデータベースに保存され得る。代替実装形態では、MDはそのようなデータベースまたはそのようなデータベースの一部分をMD上のメモリに格納することができる。そのようなデータベースは、画像キー付きデータベースを含むことができ、画像キー付きデータベースでは、データベースに保存された情報は、当該情報に関連する1つまたは複数の画像の視覚的属性に少なくとも部分的に基づいて編成およびアクセスされ得る。他のデータベースキーを組み合わせて、オブジェクトの場所などの検索フィールドを狭めることもできる。そのような視覚的属性は、たとえば、画像内のオブジェクトの場所、画像内のオブジェクトのタイプ、画像内のオブジェクトの大きさ、および/または画像内の近くのオブジェクトもしくは関連するオブジェクトを含むことができる。特定の実装形態を示すと、ターゲットオブジェクトの画像は、実質的に長方形の形状を有する建物を含むことがある。そのような画像に関連する情報を、たとえば実質的に長方形の形状、推定される階数、または推定される高さなど、視覚的外観または特性に少なくとも部分的に基づいてデータベースに保存し、インデックス付けすることができる。特定の一実装形態では、画像属性は視点の方向を含むことができ、ターゲットオブジェクトの視点は、ターゲットオブジェクトの正面からのものと、ターゲットオブジェクトの背面からのものとの対比であってよい。別の特定の実装形態では、画像属性は画像の倍率および/またはターゲットオブジェクトまでの距離を含むことができる。MDはたとえば、レーザー測距またはイメージングなどのいくつかの技法を使用して、そのような距離を判断することができる。もちろん、ターゲットオブジェクトに関する情報を取得し維持するそのような詳細は例にすぎず、特許請求する主題はそのように限定されない。
一実装形態では、MDの位置について記述した位置情報が、ユーザによってMDに提供可能であり、かつ/またはいくつかの利用可能な測位技法のうちのいずれか1つを使用して判断可能である。そのような測位技法には、衛星測位システム(SPS)、パーソナルエリアネットワーク(PAN)、ローカルエリアネットワーク(LAN)、広域ネットワーク(WAN)、超広帯域(UWB)、AFLT、デジタルTV、ワイヤレスリピータ、RFID、無線位置ビーコン、セルタワーID、および/またはブルートゥースなどがある。そのような位置情報は、たとえば画像認識プロセスを伴う検索中にターゲットオブジェクト候補のリスト範囲を狭めることによって、MDがターゲットオブジェクトを識別することをさらに可能にし得る。たとえば、MDが、ターゲットオブジェクトを含む画像をキャプチャしている間に特定の都市に位置している場合、そのようなターゲットオブジェクトは特定の都市または当該都市の特定の場所に位置すると判断できる。したがって、候補のターゲットオブジェクトの検索は、特定の都市またはおおよその場所にあるそのようなターゲットオブジェクトに限定され得る。セルタワーIDなど、そのような位置情報は、たとえばSPS信号などの他の位置情報と比較して精度が低いことがある。しかし、相対的に精度の低い位置情報は、候補のターゲットオブジェクトの検索範囲を狭めるのに十分であることもある。もちろん、位置情報を取得するそのような詳細は例にすぎず、特許請求する主題はそのように限定されない。
図1は、一実装形態による、互いに通信することができるデバイスのシステム107を示している。具体的には、MD104は、衛星航法信号110の受信、基地局108との間におけるワイヤレス通信信号112の送受信、および/またはターゲットオブジェクト105との間におけるワイヤレス通信信号111の送受信が可能な様々なモバイル受信機のうちのいずれか1つを含むことができる。信号110はたとえば、衛星ビークル(SV)106などの基準局から、かつ/または地上のビーコンもしくは基地局108などの地上の場所から送信され得る。MD104は、モバイル電話、ハンドヘルドナビゲーション受信機および/または携帯情報端末(PDA)などを含むことができる。上述のように、MD104はいくつかの技法のうちのいずれかを用いて、その位置を計算することができる。特定の一実装形態では、そのような測位技法は、それぞれ衛星106および/または地上の基地局108から受信するワイヤレス信号110および/またはワイヤレス信号112に少なくとも部分的に基づいてよい。いくつかの実装形態では、MD104は、音声および/またはデータの通信のためにSPS受信機とワイヤレス通信デバイスの両方を統合することができる。したがって、SPSシステムの具体例について本明細書で説明することもあるが、そのような原理および技法は、他の衛星測位システムまたは地上測位システム、たとえばワイヤレスネットワークに適用可能である。
前述のように、ユーザが特定のターゲットオブジェクト105を選択した後、MD104とターゲットオブジェクト105との間の通信がMD104によって開始され得る。そのような通信を介して、ユーザは、MD104を使用してターゲットオブジェクト105の動作にワイヤレスで影響を与えることができる。たとえば、ターゲットオブジェクト105は、MD104を使用してリモートかつワイヤレスで調整可能なボリューム制御を含むサウンドシステムを含むことができる。もちろん、MD104と通信する要素のそのような詳細は例にすぎず、特許請求する主題はそのように限定されない。
図2は、一実装形態による、MD200ならびにターゲットオブジェクト210、220および/または230を示す概略図である。そのようなターゲットオブジェクトは、たとえば通信アンテナ235とともに示されているターゲットオブジェクト230などの電子デバイスを含むことができる。MD200は、画像キャプチャデバイス206、ディスプレイ202、キーパッド204および/またはアンテナ208を含むことができる。そのような画像キャプチャデバイス(たとえば、カメラ)は、ビューファインダ画像および/またはキャプチャ画像をディスプレイ202に表示することができる。MD200は、以下でより詳細に説明するように、1つまたは複数のアプリケーションに対応する専用プロセッサ(図8)を含むことができる。MD200は、タッチスクリーンを含み得るキーパッド204および/またはディスプレイ202のような1つまたは複数のユーザインターフェースを含むことができる。アンテナ208は、たとえば測位システムから、基地局との間において、またはターゲットオブジェクトとの間において、様々な信号を送受信するためにMD200によって使用される送信機/受信機(図8)の一部分を含むことができる。一適用例では、MD200をたとえば、キャプチャ画像が特定のターゲットオブジェクトを中心としたものになるように方向付けること、または向けることができる。画像キャプチャデバイス206のビューファインダとして使用されるディスプレイ202は、シーンのどの部分を画像としてキャプチャするかをユーザが判断するのを支援する画像境界線240および画像中心線250を定めることができる。たとえば、複数のターゲットオブジェクト210、220および/または230を画像境界線240内に含めることができ、キャプチャ画像の中心にターゲットオブジェクト220が位置するように画像キャプチャデバイス206を向けることができる。そのようなターゲットオブジェクトは、人々、建物、像、湖、山、名所旧跡および/または電子デバイスなどを含むことができる。そのようなターゲットオブジェクトを画像でキャプチャできるが、たとえば人々などすべてのターゲットオブジェクトが本明細書で説明するプロセスおよび/または技法によって識別されるわけではない。たとえば、人が写真(キャプチャ画像)用にリンカーン記念館
の隣でポーズをとっていることがある。後述のようにそのような記念館を識別できるが、キャプチャ画像内の人などのオブジェクトは識別される必要がない。どのオブジェクトを識別するかを特定するプロセスについては、以下で詳細に説明する。代替的に、人または他のパーソナルオブジェクトは、パーソナル画像データベースを使用して識別可能であり、このデータベースでは、選択オブジェクト/人の画像が、ユーザに固有の画像のデータベースと比較される。
図3は、一実装形態による、ターゲットオブジェクト310、320および330の方へ方向付けられた画像キャプチャデバイス206のような画像キャプチャデバイスによってキャプチャされたビューファインダ画像300を表す概略図である。上述のように、そのようなビューファインダ画像は、ディスプレイ202によって示され得る。画像境界線240は、ビューファインダ画像300の端を定めることができる。中心線250は、画像センター360を定めることができ、これはたとえば十字線、円、および/またはユーザに画像センターを示す他のシンボルもしくは構成を含むことができる。ビューファインダ画像300は、光源レベル、シャッター速度、撮影された写真の数など、写真情報(不図示)を含むことができる。もちろん、そのようなビューファインダ画像の詳細は例にすぎず、特許請求する主題はそのように限定されない。
図4は、一実装形態による、ターゲットオブジェクト410、420および430を含むキャプチャ画像400を表す概略図である。そのようなターゲットオブジェクトは、たとえばオーバーレイされ、かつ/または重ね合わされたラベル415、425および/もしくは435によってラベル付けされ得る。たとえば、そのようなラベルは、ターゲットオブジェクト上に重ね合わされた半透明の番号および/または文字を含むことができる。そのようなラベル付けは、ユーザに複数のターゲットオブジェクトの中から特定のターゲットオブジェクトを選択する方法を提供することができる。特定の一実装形態では、MDは、キャプチャ画像に含まれるどのターゲットオブジェクトが識別可能かを判断し、その結果、そのような識別されたターゲットオブジェクトにラベルを配置することができる。MDは、キャプチャ画像のどの部分がターゲットオブジェクトを含むか、どの部分が単なる背景画像であるかを判断するために、画像認識技法を使用してキャプチャ画像を分析することができる。たとえば、キャプチャ画像は、キャプチャ画像の中央領域に、背景画像で囲まれた3つの隣接する像を含むことがある。そのような場合、画像認識技法を使用して、キャプチャ画像のどの部分がターゲットオブジェクト(たとえば、像)であるか、どの部分が単なる背景画像かを判断することができる。そのようなプロセス中にそのようなターゲットオブジェクトの識別に成功した場合、MDは前述のように、そのようなターゲットオブジェクトにラベルを付けることができる。ユーザは、そのようなラベルを使用してターゲットオブジェクトを識別すると、1つまたは複数のラベル付けされたターゲットオブジェクトを、キーパッド、タッチスクリーンおよび/またはボイスコマンドなどを介して選択することができる。別の態様では、ターゲットオブジェクトの場所など、確認された正体および特性を使用して、ターゲットオブジェクトの写真にラベルを付けることができる。
別の実装形態では、そのようなラベルがない場合、ユーザは、特定のターゲットオブジェクトを、マウスおよび/またはタッチパッドなどのポインティングデバイスを介して選択することができ、たとえば表示されたキャプチャ画像内の特定のターゲットオブジェクトにアイコンまたはシンボルをナビゲートして、特定のターゲットオブジェクトを選択することができる。たとえば、MDは、選択インジケータシンボルをディスプレイデバイスに表示して、表示されたキャプチャ画像内の複数のターゲットオブジェクトからどのターゲットオブジェクトが現在選択されているかを示すことができる。そのように示すことは、キャプチャ画像の他の部分と比較して選択物を明るくすること、選択物の周りにフレームを表示すること、および/または選択物の画像サイズを拡大することなどによって、現在の選択物を強調することを含むことができる。ユーザは、選択インジケータの一部分をトグルして、表示されたキャプチャ画像内のターゲットオブジェクト間でジャンプすることができる。たとえば、ユーザは、1つのターゲットオブジェクトから次のターゲットオブジェクトへの選択のジャンプごとにキーを1回押すことができる。次いでユーザは、そのような選択インジケータの位置に少なくとも部分的に基づいて、表示されたキャプチャ画像内のターゲットオブジェクトを選択することができる。
図5は、一実装形態による、ターゲットオブジェクトに関する情報を取得し、ターゲットオブジェクトと通信するプロセス500の流れ図である。ブロック510では、ユーザは、セル電話に含まれるカメラなどの画像キャプチャデバイスを、ユーザが情報を希望しているか、ユーザが通信を希望しているターゲットオブジェクトの方へ方向付けることができる。ユーザは、そのようなターゲットオブジェクトが、たとえば画像センター360によって示されるように、少なくとも近似的にビューファインダ画像内の中心に位置するように、画像キャプチャデバイスを向けることができる。代替的に、ユーザは、ブロック520で画像をキャプチャした後、そのようなターゲットオブジェクトを複数のターゲットオブジェクトから選択することができる。たとえば、画像認識プロセスを使用して、キャプチャ画像を複数のターゲットオブジェクトに分解することができる。1つのそのような画像認識プロセスは、たとえばFan、米国特許出願公開第US2007/0009159号に記載されている。ブロック530では、そのようなキャプチャ画像を、たとえばMDのディスプレイに表示できる。ブロック540では、ユーザは、たとえばタッチスクリーン、キーパッドおよび/またはボイスコマンドなどのユーザインターフェースを介して、そのような表示されたキャプチャ画像と対話することができる。ブロック550では、そのような対話中、ユーザは、表示されたキャプチャ画像に含まれる1つまたは複数のターゲットオブジェクトを選択することができる。特定の一実装形態では、前述のように、ユーザは、キャプチャ画像内の特定のターゲットオブジェクトを、画像内のターゲットオブジェクトにオーバーレイされた関連ラベルを選択することによって、選択することができる。次いでブロック560では、選択ターゲットオブジェクトが、たとえば画像認識および/またはユーザ入力などの1つまたは複数の各種技法によって識別され得る。そのような識別の後、ブロック570では、MDは、選択ターゲットオブジェクトに関する情報を取得することができる。そのような情報は、たとえば、ブロック580で、選択ターゲットオブジェクトとの通信を開始するために使用できる。もちろん、ターゲットオブジェクトの正体を判断し、ターゲットオブジェクトに関する情報を取得するそのような詳細
は例にすぎず、特許請求する主題はそのように限定されない。
図6は、一実装形態による、キャプチャ画像内のターゲットオブジェクトを識別するプロセス600の流れ図である。そのようなプロセスは、たとえば図5のブロック560で実行されるプロセスを含むことができる。そのような実装形態では、画像キャプチャ時におけるMDの位置を使用して、上記のように、ターゲットオブジェクトを識別するプロセス中における候補のターゲットオブジェクトの検索範囲を狭めることができる。ブロック610では、たとえば上記で特定されたいくつかの技法のうちのいずれか1つを使用して、MDの位置を判断することができる。そのような位置判断は、近似的なものであり得る。たとえば、プロセス600では、MDが位置する市、郡および/または地域を判断すれば十分なこともある。代替的に、ユーザは、たとえば、タッチスクリーン、キーパッドなどで場所を入力することによって、MDの場所を手動で示すことができる。特定の一実装形態では、文字の画像(たとえば、標識を含む写真)を含むターゲットオブジェクトが、文字認識を伴う1つまたは複数の技法を使用して識別され得る。そのような分析された文字は、前述のように、ターゲットオブジェクトに関連するデータベース情報を編成するために使用できる視覚的属性を含むことがある。
ブロック620では、MDは、そのような位置判断および/またはユーザ入力に少なくとも部分的に基づき、基地局または他のそのような地上の実体、たとえば画像データベースサーバに対し、識別情報のデータベースを要求することができる。そのようなデータベースは、MDの現在の場所を取り囲む地域内のターゲットオブジェクトに関する情報を含むことができる。一実装形態では、上述のように、そのような情報は、どのオブジェクトがユーザにとって重要であり得るかを判断するサービスで、そのようなサービスにユーザが加入しているサービスによって、生成および/または維持され得る。たとえば、ニューヨーク市に到着したユーザは、MDから半径1キロメートルの範囲内にあるターゲットオブジェクトに関する情報をダウンロードできるMDを所持していることがある。そのような範囲の規模は、そのような範囲内にあるターゲットオブジェクトの数、および/またはMDのメモリ容量に左右され得るが、特許請求する主題はそのように限定されない。たとえば、ニューヨーク市内の半径1キロメートルの範囲は、アリゾナ州の砂漠地帯における半径100キロメートルの範囲内と同じ数のターゲットオブジェクト(たとえば、データベースに記録されている重要なオブジェクト)を含み得る。MDは、ターゲットオブジェクトの識別で使用するために、現在のMDの場所のそのような情報を保存することができる。識別情報は、選択ターゲットオブジェクトを識別するためにMDが実行できる画像認識プロセスで使用される画像情報を含むことができる。たとえば、そのような情報は、たとえば、位置判断に従って、MDの近くに位置する名所旧跡、建物、像、標識および/または電子デバイスの画像を含むことができる。特定の一実装形態では、MDは、MDの場所の大幅な変更(たとえば、空港への到着)に伴い、かつ/または画像のキャプチャに伴い、そのような情報を適宜、定期的に要求することができる。したがって、そのようなMDは、MDの現在の場所に関するそのような情報を継続的に保存することができ、MDがもはや位置していない地域に関する古い情報を消去することができる。そのようなメモリの更新/消去のプロセスは、たとえばMDの限定的なメモリサイズに対応し得る。
ブロック630では、ブロック610でMDの位置が事前に判断されていることもあるが、MDは、MDによる画像のキャプチャ(写真撮影)に伴い、MDの位置の判断を再び行うことができる。しかしながら、MDが最近の位置判断から取得した十分に新しい位置情報をすでに含んでいる場合、ブロック630を省略することができる。別の実施形態では、画像データベースは、ネットワーク上に位置する画像データベースサーバに位置し得る。そのような実施形態では、画像の分解は、たとえば画像データベースサーバで、リモートで実行できる。
ブロック640では、画像認識プロセス中にMDのメモリに保存されている1つまたは複数の画像の特徴と選択ターゲットオブジェクトの画像の特徴とを比較することができる。ブロック645では、合致する画像が発見された場合、ターゲットオブジェクトを識別できる。たとえば、選択ターゲットオブジェクトが自由の女神の画像を含んでいる場合がある。そのような画像の1つまたは複数の特徴を、ニューヨーク市の地域内における名所旧跡などのオブジェクトの複数の保存画像の特徴のデータベースと比較することができる。選択ターゲットオブジェクトの画像が、既知の実体(本例では自由の女神)の画像と合致した場合、選択ターゲットオブジェクトを識別することができ、そのようなデータベースは、ターゲットオブジェクトに関する情報を提供することができる。一方、合致が見い出されなかった場合、プロセス600はブロック660に進むことができ、より大きなデータベースにアクセスことができる。特定の一実装形態では、MDは、選択ターゲットオブジェクトの画像を、地上の局またはMDから離れた他の実体に送信し、そのような地上の局で画像認識プロセスを実行するよう要求することができる。もちろん、画像情報のそのようなより大きなデータベースは、別のモバイルデバイスに位置することもあり、特許請求する主題は地上の実体に限定されない。
ブロック670では、画像認識プロセス中に画像キー付きデータベースに保存されている1つまたは複数の画像の特徴と選択ターゲットオブジェクトの画像の特徴とを比較することができる。ブロック675では、合致する画像が発見された場合、ターゲットオブジェクトを識別できる。したがって、画像キー付きデータベースは、識別されたターゲットオブジェクトに関連する情報をMDに送信することができる。上記で説明したように、そのような情報は、場合によりターゲットデバイスに関連する1つまたは複数の通信プロトコルに従って通信する関連ターゲットデバイスの能力に関する詳細を含むことができる。一方、合致が見い出されなかった場合、ブロック690において、画像キー付きデータベースは、ターゲット識別プロセスが成功しなかったことを示すメッセージをMDに送信することができる。もちろん、識別プロセスのそのような詳細は例にすぎず、特許請求する主題はそのように限定されない。
図7は、一実装形態による、ディスプレイ700を表す概略図である。MDはそのようなディスプレイを含むことができ、これはキャプチャ画像のサムネイル710、選択ターゲットオブジェクト730を示すグラフィックス720、および/または選択ターゲットオブジェクト730に関する情報を表示するウィンドウ740を含むことができる。そのようなサムネイル710は、キャプチャ画像の縮小版を含み、フルサイズのキャプチャ画像と比較してディスプレイ領域の占有割合を小さくすることができ、その結果、ディスプレイ700はウィンドウ740を表示する領域を含めることができる。そのような形で、ディスプレイは、選択ターゲットオブジェクト730を表示しつつ、ウィンドウ740で文字として表示されたターゲットオブジェクトに関する情報をユーザに提供することができる。もちろん、そのようなディスプレイは例にすぎず、特許請求する主題はそのように限定されない。
図8は、一実装形態による、ワイヤレスネットワークおよび/または電子デバイスを含むターゲットオブジェクトとの通信が可能なデバイスの概略図である。そのようなデバイスは、画像キャプチャデバイスを含むことができる。特定の一実装形態では、図1に示すMD104のようなMDは、疑似距離測定値を決定し、アンテナ810を通じてワイヤレス通信ネットワークと通信するために、アンテナ814で受信したSPS信号を処理することが可能なデバイス800を含むことができる。ここで、無線トランシーバ806は、データ、音声および/またはSMSメッセージなどのベースバンド情報を有するRF搬送波信号をRF搬送波に変調し、変調されたRF搬送波を復調してそのようなベースバンド情報を取得するように適合され得る。アンテナ810は、ワイヤレス通信リンクを介して変調されたRF搬送波を送信し、ワイヤレス通信リンクを介して変調されたRF搬送波を受信するように適合され得る。そのようなワイヤレス通信を使用して、たとえば電子デバイスを含むターゲットオブジェクトと通信することができる。
ベースバンドプロセッサ808は、中央処理装置(CPU)802からのベースバンド情報を、ワイヤレス通信リンクでの送信用にトランシーバ806に提供するように適合され得る。ここでCPU802は、たとえば環境知覚データ、動きセンサデータ、高度データおよび/または他のネットワークに対する近接度(たとえばZigbee(登録商標)、ブルートゥース、WiFi、ピアツーピア)を含み得る、ローカルインターフェース816からのそのようなベースバンド情報を取得することができる。そのようなベースバンド情報は、絶対位置および相対位置の情報(たとえば、デバイス800の場所の推定など)、ならびに/またはそのような位置を計算する際に使用できる情報(たとえば疑似距離測定値など)、ならびに/またはES位置情報のほか、オブジェクトに対する距離および方位情報も含むことができる。上述のように、そのようなES位置情報をユーザ入力から受信することもできる。チャネル復号器820は、ベースバンドプロセッサ808から受信したチャネルシンボルを下位ソースビット(underlying source bits)に復号するように適合され得る。
SPS受信機(SPS Rx)812は、SVからの送信を受信および処理し、処理された情報を相関器818に提供するように適合され得る。相関器818は、受信機812によって提供された情報から相関関数を導出するように適合され得る。
メモリ804は、説明または推奨してきたプロセス、例、実装形態またはその例のうちの1つまたは複数を行うために実行可能な機械可読命令を記憶するように適合され得る。CPU802は、そのような機械可読命令を入手、実行するように適合され得る。一実装形態では、CPU802は、選択ターゲットオブジェクトを識別し、選択ターゲットオブジェクトに関する情報を取得するように適合された専用プロセッサまたは専用コンピューティングデバイスを含むことができる。そのような専用コンピューティングデバイスは、ユーザが1つまたは複数の特定のターゲットオブジェクトを選択できるように、ディスプレイ環境を提供することができる。たとえば、CPU802は、表示されたキャプチャ画像に1つまたは複数のラベルをオーバーレイすることができ、関連ターゲットオブジェクトに対応する1つまたは複数のラベルのユーザ選択に基づくターゲットオブジェクトの選択を受信するように適合され得る。別の実装形態では、CPU802は、選択ターゲットオブジェクトの1つまたは複数の特徴を、複数の保存画像の1つまたは複数の特徴と比較するように適合され得る。たとえば、そのような専用コンピューティングデバイスは、RF環境で動作して、選択ターゲットオブジェクトの画像を、複数の保存画像を保存するメモリを含み得る遠隔場所に送信することによって、選択ターゲットオブジェクトの1つまたは複数の特徴を、そのような複数の保存画像の1つまたは複数の特徴と比較するように適合され得る。別の実装形態では、専用コンピューティングデバイスは、RF環境で動作して、モバイルデバイスの近似位置を判断するように適合され得る。そのような専用コンピューティングデバイスは、モバイルデバイスの近似位置の判断に少なくとも部分的に基づき、選択ターゲットオブジェクトを識別することができる。しかしながら、これらは特定の態様でCPUによって実行できるタスクの例にすぎず、特許請求する主題はこれらの点について限定されない。さらに、メモリ804は、1つまたは複数の所定の候補軌道を記憶するように適合可能で、CPU802は、推定軌道と1つまたは複数の所定の候補軌道との比較に少なくとも部分的に基づき、デバイス800の場所を判断するように適合可能である。特定の一実装形態では、CPU802は、ES位置情報に少なくとも部分的に
基づき、1つまたは複数の所定の候補軌道の数を減らすように適合され得る。
一実装形態では、画像キャプチャデバイス880は、たとえば光センサ、集光素子(focusing optics)、ビューファインダ、ならびに/もしくはCPU802およびメモリ804と通信するインターフェースエレクトロニクス(interfacing electronics)の電荷結合デバイス(CCD)配列ならびに/またはCMOS配列を含むカメラを含むことができる。ディスプレイデバイス885は、液晶ディスプレイ(LCD)を含むことができ、これはいくつかの実装形態では、ユーザ対話の手段を提供する接触反応型であり得る。ディスプレイデバイス885は、画像キャプチャデバイス880のビューファインダとして動作することができるが、特許請求する主題はそのように限定されない。上記のように、画像をメモリ804に保存して、保存画像を選択ターゲットオブジェクトとして取り出すことができる。
本明細書で説明する方法は、特定の特徴および/または例により適用場面に応じて様々な手段によって実施できる。たとえば、そのような方法は、ハードウェア、ファームウェア、ソフトウェアおよび/またはそれらの組合せで実施できる。たとえば、ハードウェア実装の場合、処理ユニットは、1つまたは複数の特定用途向け集積回路(ASIC)、デジタル信号プロセッサ(DSP)、デジタル信号処理デバイス(DSPD)、プログラマブル論理デバイス(PLD)、フィールドプログラマブルゲートアレイ(FPGA)、プロセッサ、コントローラ、マイクロコントローラ、マイクロプロセッサ、電子デバイス、本明細書で説明する機能を実行するように設計された他のデバイスユニット、および/またはそれらの組合せの中で実装できる。
ファームウェア実装および/またはソフトウェア実装の場合、本明細書で説明する機能を実行するモジュール(たとえば、手順、機能など)を使用して、各種方法を実施できる。命令を有形に具現する機械可読媒体を、本明細書で説明する方法を実施する際に使用できる。たとえば、ソフトウェアコードをメモリ、たとえば移動局のメモリに記憶し、専用プロセッサによって実行することができる。メモリは、プロセッサ内、またはプロセッサの外部に実装され得る。本明細書で使用する「メモリ」という用語は、任意のタイプの長期、短期、揮発性、不揮発性または他のメモリを指し、特定のタイプのメモリまたは特定の数のメモリまたはメモリが格納される特定のタイプの媒体に限定されない。
ワイヤレス端末のような実体は、ネットワークと通信してデータなどのリソースを要求することができる。モバイルデバイス(MD)は、セルラー電話、携帯情報端末(PDA)またはワイヤレスコンピュータを含むが、そのような実体のほんの数例にすぎない。そのような実体の通信は、ネットワークデータへのアクセスを含むことがあり、これは通信ネットワーク、回路または他のシステムハードウェアのリソースに負担をかけ(tax)得る。ワイヤレス通信ネットワークでは、ネットワークで動作する実体間でデータを要求し交換することができる。たとえば、MDは、ワイヤレス通信ネットワーク内で動作するMDの位置を判断するためにネットワークにデータを要求することができ、ネットワークから受信したデータは、そのような位置判断にとって有益であるか、場合によっては望ましいこともある。しかしながら、これらは特定の態様におけるMDとネットワークとの間のデータ交換の例にすぎず、特許請求する主題はこれらの点について限定されない。
例示的な特徴と現在考えられる内容を示し、説明してきたが、特許請求する主題から離れることなく様々な他の修正を行うことができ、同等物と交換できることが、当業者によって理解されよう。加えて、本明細書で説明する中心的概念から離れることなく、特許請求する主題の教示に特定の状況を適合させるために、多くの修正を行うことができる。したがって、特許請求する主題は、開示される特定の例に限定されず、また、そのような特許請求する主題は添付の特許請求の範囲内にあるすべての態様およびその同等物を含み得ることが意図されている。
104 MD
105 ターゲットオブジェクト
106 衛星ビークル(SV)
107 システム
108 基地局
110 衛星航法信号、ワイヤレス信号
111 ワイヤレス通信信号
112 ワイヤレス通信信号
200 MD
202 ディスプレイ
204 キーパッド
206 画像キャプチャデバイス
208 アンテナ
210 ターゲットオブジェクト
220 ターゲットオブジェクト
230 ターゲットオブジェクト
235 通信アンテナ
240 画像境界線
250 画像中央線
300 ビューファインダ画像
310 ターゲットオブジェクト
320 ターゲットオブジェクト
330 ターゲットオブジェクト
360 画像センター
400 キャプチャ画像
410 ターゲットオブジェクト
415 ラベル
420 ターゲットオブジェクト
425 ラベル
430 ターゲットオブジェクト
435 ラベル
500 プロセス
600 プロセス
700 ディスプレイ
710 サムネイル
720 グラフィックス
730 ターゲットオブジェクト
740 ウィンドウ
800 デバイス
802 中央処理装置(CPU)
804 メモリ
806 トランシーバ
808 ベースバンドプロセッサ
810 アンテナ
812 SPS受信機(SPS Rx)
814 アンテナ
816 ローカルインターフェース
818 相関器
820 チャネル復号器
880 画像キャプチャデバイス
885 ディスプレイデバイス

Claims (54)

  1. 複数のターゲットオブジェクトのオブジェクト画像を含むモバイルデバイスからの画像をキャプチャするステップと、
    前記キャプチャ画像を前記モバイルデバイスのディスプレイデバイスに表示するステップと、
    前記表示されたキャプチャ画像内の前記ターゲットオブジェクトの少なくとも1つの選択を受信するステップと、
    前記モバイルデバイスを介して前記選択に応答して前記選択ターゲットオブジェクトとの通信を開始するステップと
    を含む方法。
  2. 前記ターゲットオブジェクトの少なくとも1つを識別するステップと、
    前記識別された選択ターゲットオブジェクトに関する情報を取得するステップと
    をさらに含む、請求項1に記載の方法。
  3. 前記ディスプレイデバイスに前記選択ターゲットオブジェクトに関する前記情報を表示するステップ
    をさらに含む、請求項1に記載の方法。
  4. 前記情報が、前記1つまたは複数のターゲットオブジェクトによってサポートされる通信のモードの説明を含む、請求項3に記載の方法。
  5. 前記表示されたキャプチャ画像に1つまたは複数のラベルをオーバーレイするステップと、
    前記1つまたは複数のラベルの選択に基づき、前記選択ターゲットオブジェクトを選択するステップと
    をさらに含む、請求項1に記載の方法。
  6. 前記1つまたは複数のラベルが、前記複数のターゲットオブジェクトの前記画像にそれぞれオーバーレイされる、請求項5に記載の方法。
  7. 前記ディスプレイデバイスにアイコンを表示するステップと、
    前記表示されたキャプチャ画像内の前記ターゲットオブジェクトの前記少なくとも1つの1つに前記アイコンをナビゲートして、前記ターゲットオブジェクトの前記少なくとも1つの前記1つを選択するステップと
    をさらに含む、請求項1に記載の方法。
  8. 前記ディスプレイデバイス内に選択インジケータを表示して、前記表示されたキャプチャ画像内の前記ターゲットオブジェクトの前記少なくとも1つのうちどれが現在選択されているかを示すステップと、
    前記表示されたキャプチャ画像内の前記ターゲットオブジェクトの前記少なくとも1つの間で前記選択インジケータの位置をトグルするステップと、
    前記選択インジケータの前記位置に少なくとも部分的に基づいて、前記表示されたキャプチャ画像内の前記ターゲットオブジェクトの前記少なくとも1つの1つを選択するステップと
    をさらに含む、請求項1に記載の方法。
  9. 前記キャプチャ画像を前記複数の前記ターゲットオブジェクトに分解するステップ
    をさらに含む、請求項1に記載の方法。
  10. 前記モバイルデバイスの近似位置を判断するステップと、
    前記モバイルデバイスの前記近似位置の前記判断に少なくとも部分的に基づき、前記複数のターゲットオブジェクトを識別するステップと
    をさらに含む、請求項1に記載の方法。
  11. 前記モバイルデバイスの前記近似位置を前記判断するステップが、ニアフィールド通信(NFC)信号、WiFi信号、ブルートゥース信号、超広帯域(UWB)信号、広域ネットワーク(WAN)信号、デジタルTV信号、およびセルタワーIDを含む信号に少なくとも部分的に基づく、請求項10に記載の方法。
  12. 前記モバイルデバイスの前記近似位置を前記判断するステップが、前記モバイルデバイスにおける1つまたは複数の衛星測位システム信号の取得に少なくとも部分的に基づく、請求項10に記載の方法。
  13. 前記モバイルデバイスの前記近似位置を前記判断するステップが、ユーザ入力に少なくとも部分的に基づく、請求項10に記載の方法。
  14. 前記キャプチャ画像の1つまたは複数の特徴を、複数の保存画像の1つまたは複数の特徴と比較するステップ
    をさらに含む、請求項1に記載の方法。
  15. 前記キャプチャ画像の前記1つまたは複数の特徴を、前記複数の保存画像の1つまたは複数の特徴と前記比較するステップが、
    前記複数の保存画像を保存するメモリを含む場所であって、前記モバイルデバイスから離れている場所に前記キャプチャ画像を送信するステップ
    をさらに含む、請求項14に記載の方法。
  16. 前記情報が、基地局および/もしくはトランシーバを含む通信ネットワーク上に位置する画像キー付きデータベース上で保存され、かつ/またはインデックス付けされる、請求項1に記載の方法。
  17. 視覚識別マーク、視覚インジケータ、スクリーンパターン、および/またはバーコードもしくは数値指示子に少なくとも部分的に基づき、通信相手となる前記ターゲットオブジェクトの少なくとも1つを指定するステップ
    をさらに含む、請求項1に記載の方法。
  18. 複数のターゲットオブジェクトのオブジェクト画像を含むモバイルデバイスからの画像をキャプチャするための手段と、
    前記キャプチャ画像を前記モバイルデバイスのディスプレイデバイスに表示するための手段と、
    前記表示されたキャプチャ画像内の前記ターゲットオブジェクトの少なくとも1つの選択を受信するための手段と、
    前記モバイルデバイスを介して前記選択に応答して前記選択ターゲットオブジェクトとの通信を開始するための手段と
    を含む装置。
  19. 前記ターゲットオブジェクトの少なくとも1つを識別するための手段と、
    前記識別された選択ターゲットオブジェクトに関する情報を取得するための手段と
    をさらに含む、請求項18に記載の装置。
  20. 前記ディスプレイデバイスに前記選択ターゲットオブジェクトに関する前記情報を表示するための手段
    をさらに含む、請求項18に記載の装置。
  21. 前記表示されたキャプチャ画像に1つまたは複数のラベルをオーバーレイするための手段と、
    前記1つまたは複数のラベルの選択に基づき、前記選択ターゲットオブジェクトを選択するための手段と
    をさらに含む、請求項18に記載の装置。
  22. 前記1つまたは複数のラベルが、前記複数のターゲットオブジェクトの前記画像にそれぞれオーバーレイされる、請求項21に記載の装置。
  23. 前記ディスプレイデバイスにアイコンを表示するための手段と、
    前記表示されたキャプチャ画像内の前記ターゲットオブジェクトの前記少なくとも1つの1つに前記アイコンをナビゲートして、前記ターゲットオブジェクトの前記少なくとも1つの前記1つを選択するための手段と
    をさらに含む、請求項18に記載の装置。
  24. 前記ディスプレイデバイス内に選択インジケータを表示して、前記表示されたキャプチャ画像内の前記ターゲットオブジェクトの前記少なくとも1つのうちどれが現在選択されているかを示すための手段と、
    前記表示されたキャプチャ画像内の前記ターゲットオブジェクトの前記少なくとも1つの間で前記選択インジケータの位置をトグルするための手段と、
    前記選択インジケータの前記位置に少なくとも部分的に基づいて、前記表示されたキャプチャ画像内の前記ターゲットオブジェクトの前記少なくとも1つの1つを選択するための手段と
    をさらに含む、請求項18に記載の方法。
  25. 前記キャプチャ画像を前記複数の前記ターゲットオブジェクトに分解するための手段
    をさらに含む、請求項18に記載の装置。
  26. 前記モバイルデバイスの近似位置を判断するための手段と、
    前記モバイルデバイスの前記近似位置の前記判断に少なくとも部分的に基づき、前記複数のターゲットオブジェクトを識別するための手段と
    をさらに含む、請求項18に記載の装置。
  27. 前記モバイルデバイスの前記近似位置を判断するための前記手段が、ニアフィールド通信(NFC)信号、WiFi信号、ブルートゥース信号、超広帯域(UWB)信号、広域ネットワーク(WAN)信号、デジタルTV信号、および/またはセルタワーIDを含む信号に少なくとも部分的に基づく、請求項26に記載の装置。
  28. 前記モバイルデバイスの前記近似位置を判断するための前記手段が、前記モバイルデバイスにおける1つまたは複数の衛星測位システム信号の取得に少なくとも部分的に基づく、請求項26に記載の装置。
  29. 前記モバイルデバイスの前記近似位置を判断するための前記手段が、ユーザ入力に少なくとも部分的に基づく、請求項26に記載の装置。
  30. 前記キャプチャ画像の1つまたは複数の特徴を、複数の保存画像の1つまたは複数の特徴と比較するための手段
    をさらに含む、請求項18に記載の装置。
  31. 前記キャプチャ画像の前記1つまたは複数の特徴を、前記複数の保存画像の1つまたは複数の特徴と比較するための前記手段が、
    前記複数の保存画像を保存するメモリを含む場所であって、前記モバイルデバイスから離れている場所に前記キャプチャ画像を送信するための手段
    をさらに含む、請求項30に記載の装置。
  32. 1つまたは複数のターゲットオブジェクトの画像をキャプチャする画像形成デバイスと、
    前記キャプチャ画像を表示するディスプレイデバイスと、
    前記表示されたキャプチャ画像内の前記1つまたは複数のターゲットオブジェクトの少なくとも1つの選択を受信するユーザインターフェースと、
    前記モバイルデバイスを介して前記選択に応答して前記選択ターゲットオブジェクトとの通信を開始するように適合された専用コンピューティングデバイスと
    を含むモバイルデバイス。
  33. 前記専用コンピューティングデバイスが、
    前記表示されたキャプチャ画像に1つまたは複数のラベルをオーバーレイし、
    前記1つまたは複数のラベルの選択に基づき前記選択ターゲットオブジェクトの前記選択を受信する
    ようにさらに適合される、請求項32に記載のモバイルデバイス。
  34. 前記1つまたは複数のラベルが、前記1つまたは複数のターゲットオブジェクトの間の対応するターゲットオブジェクトにそれぞれオーバーレイされる、請求項33に記載のモバイルデバイス。
  35. 前記専用コンピューティングデバイスが、前記選択ターゲットオブジェクトの1つまたは複数の特徴を、複数の保存画像の1つまたは複数の特徴と比較するようにさらに適合される、請求項32に記載のモバイルデバイス。
  36. 前記専用コンピューティングデバイスが、RF環境で動作して、前記複数の保存画像を保存するメモリを含む場所であって、前記モバイルデバイスから離れている場所に前記選択ターゲットオブジェクトの画像を送信することによって、前記選択ターゲットオブジェクトの前記1つまたは複数の特徴を、前記複数の保存画像の1つまたは複数の特徴と比較するようにさらに適合される、請求項35に記載のモバイルデバイス。
  37. 前記専用コンピューティングデバイスが、RF環境で動作して、
    前記モバイルデバイスの近似位置を判断し、
    前記モバイルデバイスの前記近似位置の前記判断に少なくとも部分的に基づき、前記選択ターゲットオブジェクトを識別する
    ようにさらに適合される、請求項32に記載のモバイルデバイス。
  38. 前記専用コンピューティングデバイスが、RF環境で動作して、前記ハンドヘルドモバイルデバイスの前記近似位置を、ニアフィールド通信(NFC)信号、WiFi信号、ブルートゥース信号、超広帯域(UWB)信号、広域ネットワーク(WAN)信号、デジタルTV信号、および/またはセルタワーIDを含む信号に少なくとも部分的に基づいて判断するようにさらに適合される、請求項37に記載のモバイルデバイス。
  39. 前記専用コンピューティングデバイスが、RF環境で動作して、前記ハンドヘルドモバイルデバイスの前記近似位置を、前記モバイルデバイスにおける1つまたは複数の衛星測位システム信号の取得に少なくとも部分的に基づいて判断するようにさらに適合される、請求項32に記載のモバイルデバイス。
  40. 前記専用コンピューティングデバイスが、RF環境で動作して、前記ハンドヘルドモバイルデバイスの前記近似位置を、ユーザ入力に少なくとも部分的に基づいて判断するようにさらに適合される、請求項32に記載のモバイルデバイス。
  41. 専用コンピューティングデバイスによって実行されることに応じて、前記専用コンピューティングデバイスが、
    複数のターゲットオブジェクトのオブジェクト画像を含むモバイルデバイスからの画像をキャプチャし、
    前記キャプチャ画像を前記モバイルデバイスのディスプレイデバイスに表示し、
    前記表示されたキャプチャ画像内の前記ターゲットオブジェクトの少なくとも1つの選択を受信し、
    前記モバイルデバイスを介して前記選択に応答して前記選択ターゲットオブジェクトとの通信を開始する
    ことを可能にするように適合された機械可読命令を記録した記録媒体。
  42. 前記機械可読命令が、専用コンピューティングデバイスによって実行されることに応じて、前記専用コンピューティングデバイスが、
    前記ディスプレイデバイスに前記選択ターゲットオブジェクトに関する前記情報を表示する
    ことを可能にするようにさらに適合される、請求項41に記載の記録媒体。
  43. 前記機械可読命令が、専用コンピューティングデバイスによって実行されることに応じて、前記専用コンピューティングデバイスが、
    前記ターゲットオブジェクトの少なくとも1つを識別し、
    前記識別された選択ターゲットオブジェクトに関する情報を取得する
    ことを可能にするようにさらに適合される、請求項41に記載の記録媒体。
  44. 前記機械可読命令が、専用コンピューティングデバイスによって実行されることに応じて、前記専用コンピューティングデバイスが、
    前記表示されたキャプチャ画像に1つまたは複数のラベルをオーバーレイし、
    前記1つまたは複数のラベルの選択に基づき、前記選択ターゲットオブジェクトを選択する
    ことを可能にするようにさらに適合される、請求項41に記載の記録媒体。
  45. 前記1つまたは複数のラベルが、前記複数のターゲットオブジェクトの前記画像にそれぞれオーバーレイされる、請求項44に記載の記録媒体。
  46. 前記機械可読命令が、専用コンピューティングデバイスによって実行されることに応じて、前記専用コンピューティングデバイスが、
    前記ディスプレイデバイスにアイコンを表示し、
    前記表示されたキャプチャ画像内の前記ターゲットオブジェクトの前記少なくとも1つの1つに前記アイコンをナビゲートして、前記ターゲットオブジェクトの前記少なくとも1つの前記1つを選択する
    ことを可能にするようにさらに適合される、請求項41に記載の記録媒体。
  47. 前記機械可読命令が、専用コンピューティングデバイスによって実行されることに応じて、前記専用コンピューティングデバイスが、
    前記ディスプレイデバイス内に選択インジケータを表示して、前記表示されたキャプチャ画像内の前記ターゲットオブジェクトの前記少なくとも1つのうちどれが現在選択されているかを示し、
    前記表示されたキャプチャ画像内の前記ターゲットオブジェクトの前記少なくとも1つの間で前記選択インジケータの位置をトグルし、
    前記選択インジケータの前記位置に少なくとも部分的に基づいて、前記表示されたキャプチャ画像内の前記ターゲットオブジェクトの前記少なくとも1つの1つを選択する
    ことを可能にするようにさらに適合される、請求項41に記載の記録媒体。
  48. 前記機械可読命令が、専用コンピューティングデバイスによって実行されることに応じて、前記専用コンピューティングデバイスが、
    前記キャプチャ画像を前記複数の前記ターゲットオブジェクトに分解する
    ことを可能にするようにさらに適合される、請求項41に記載の記録媒体。
  49. 前記機械可読命令が、専用コンピューティングデバイスによって実行されることに応じて、前記専用コンピューティングデバイスが、
    前記モバイルデバイスの近似位置を判断し、
    前記モバイルデバイスの前記近似位置の前記判断に少なくとも部分的に基づき、前記複数のターゲットオブジェクトを識別する
    ことを可能にするようにさらに適合される、請求項41に記載の記録媒体。
  50. 前記モバイルデバイスの前記近似位置を前記判断するステップが、ニアフィールド通信(NFC)信号、WiFi信号、ブルートゥース信号、超広帯域(UWB)信号、広域ネットワーク(WAN)信号、デジタルTV信号、および/またはセルタワーIDを含む信号に少なくとも部分的に基づく、請求項49に記載の記録媒体。
  51. 前記モバイルデバイスの前記近似位置を前記判断するステップが、前記モバイルデバイスにおける1つまたは複数の衛星測位システム信号の取得に少なくとも部分的に基づく、請求項49に記載の記録媒体。
  52. 前記モバイルデバイスの前記近似位置を前記判断するステップが、ユーザ入力に少なくとも部分的に基づく、請求項49に記載の記録媒体。
  53. 前記機械可読命令が、専用コンピューティングデバイスによって実行されることに応じて、前記専用コンピューティングデバイスが、
    前記キャプチャ画像の1つまたは複数の特徴を、複数の保存画像の1つまたは複数の特徴と比較する
    ことを可能にするようにさらに適合される、請求項51に記載の記録媒体。
  54. 前記機械可読命令が、専用コンピューティングデバイスによって実行されることに応じて、前記専用コンピューティングデバイスが、
    前記複数の保存画像を保存するメモリを含む場所であって、前記モバイルデバイスから離れている場所に前記キャプチャ画像を送信する
    ことを可能にするようにさらに適合される、請求項53に記載の記録媒体。
JP2012549052A 2010-01-12 2011-01-12 ディスプレイを使用した通信のためのターゲットオブジェクトの選択 Pending JP2013517568A (ja)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US12/685,923 2010-01-12
US12/685,923 US8315673B2 (en) 2010-01-12 2010-01-12 Using a display to select a target object for communication
PCT/US2011/021015 WO2011088139A2 (en) 2010-01-12 2011-01-12 Using a display to select a target object for communication

Publications (1)

Publication Number Publication Date
JP2013517568A true JP2013517568A (ja) 2013-05-16

Family

ID=44147525

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2012549052A Pending JP2013517568A (ja) 2010-01-12 2011-01-12 ディスプレイを使用した通信のためのターゲットオブジェクトの選択

Country Status (6)

Country Link
US (1) US8315673B2 (ja)
EP (1) EP2524336A2 (ja)
JP (1) JP2013517568A (ja)
CN (1) CN102667812B (ja)
TW (1) TW201140427A (ja)
WO (1) WO2011088139A2 (ja)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2017069502A1 (ko) * 2015-10-19 2017-04-27 삼성전자 주식회사 디스플레이 장치, 그의 통합 리모컨 설정 방법 및 시스템
KR20170056932A (ko) * 2015-11-16 2017-05-24 삼성전자주식회사 전자 장치 및 그 제어 방법

Families Citing this family (35)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20110169947A1 (en) * 2010-01-12 2011-07-14 Qualcomm Incorporated Image identification using trajectory-based location determination
US8447070B1 (en) * 2010-04-19 2013-05-21 Amazon Technologies, Inc. Approaches for device location and communication
US8897816B2 (en) * 2010-06-17 2014-11-25 Nokia Corporation Method and apparatus for locating information from surroundings
KR101837082B1 (ko) * 2011-01-20 2018-03-09 삼성전자주식회사 기기 제어 방법 및 그 장치
JP5450560B2 (ja) * 2011-10-19 2014-03-26 東芝テック株式会社 商品データ処理装置、商品データ処理方法及び制御プログラム
JP5551140B2 (ja) * 2011-10-19 2014-07-16 東芝テック株式会社 情報処理装置及びプログラム
US20150127746A1 (en) * 2011-12-20 2015-05-07 Telefonaktiebolaget L M Ericsson (Publ) Methods, nodes, computer programs and comuter program products for activating remote access
US10254919B2 (en) * 2012-01-30 2019-04-09 Intel Corporation One-click tagging user interface
US20130328926A1 (en) * 2012-06-08 2013-12-12 Samsung Electronics Co., Ltd Augmented reality arrangement of nearby location information
TWI526041B (zh) * 2012-07-17 2016-03-11 廣達電腦股份有限公司 互動系統及互動方法
KR101953246B1 (ko) 2012-10-24 2019-02-28 에이치피프린팅코리아 유한회사 화상형성장치의 농도 보정 방법 및 이를 수행하기 위한 화상형성장치
JP6073774B2 (ja) * 2012-11-15 2017-02-01 東芝テック株式会社 商品認識装置及び商品認識プログラム
KR102090269B1 (ko) 2012-12-14 2020-03-17 삼성전자주식회사 정보 검색 방법, 그와 같은 기능을 갖는 디바이스 및 기록 매체
KR20140090297A (ko) * 2012-12-20 2014-07-17 삼성전자주식회사 근거리 무선 통신(nfc)을 이용하는 화상 형성 방법 및 장치
CN109889655A (zh) * 2013-01-09 2019-06-14 索尼公司 移动装置与用于建立无线链路的方法
US9503634B2 (en) 2013-03-14 2016-11-22 Futurewei Technologies, Inc. Camera augmented reality based activity history tracking
KR102109739B1 (ko) * 2013-07-09 2020-05-12 삼성전자 주식회사 위치 기반 소리 출력 방법 및 장치
IL229082A0 (en) 2013-10-24 2014-01-01 Tamir Nave A multiplayer platform for a fleet of toys controlled by a mobile electronic device
CN103605701A (zh) 2013-11-07 2014-02-26 北京智谷睿拓技术服务有限公司 通信对象的确定方法及确定装置
KR102265086B1 (ko) * 2014-11-07 2021-06-15 삼성전자 주식회사 정보를 공유하기 위한 가상 환경
US9693375B2 (en) 2014-11-24 2017-06-27 Apple Inc. Point-to-point ad hoc voice communication
KR102235707B1 (ko) * 2015-01-29 2021-04-02 한국전자통신연구원 콘텐츠 부가 정보 제공 방법 및 모바일 단말 및 콘텐츠 제어 서버
US10101885B1 (en) * 2015-05-20 2018-10-16 Amazon Technologies, Inc. Interact with TV using phone camera and touch
KR102398488B1 (ko) * 2015-06-26 2022-05-13 엘지전자 주식회사 복수의 디바이스에 대한 원격제어를 수행할 수 있는 이동 단말기
CN105243142A (zh) * 2015-10-10 2016-01-13 安徽尚舟电子科技有限公司 一种基于增强现实与可视计算的智能信息推送方法
KR20170059693A (ko) * 2015-11-23 2017-05-31 엘지전자 주식회사 모바일 디바이스 및 그 제어 방법
US20170161303A1 (en) * 2015-12-03 2017-06-08 Industrial Technology Research Institute Information querying method based on user location, device to device relay gateway system and controller
KR102514435B1 (ko) * 2015-12-22 2023-03-28 삼성전자주식회사 사물 인터넷 (IoT) 디바이스와 관련된 서비스를 제공하는 전자 디바이스 및 서버
KR101847200B1 (ko) * 2015-12-23 2018-04-09 삼성전자주식회사 객체 제어 방법 및 시스템
WO2017111234A1 (en) * 2015-12-23 2017-06-29 Samsung Electronics Co., Ltd. Method for electronic device to control object and electronic device
US11361380B2 (en) * 2016-09-21 2022-06-14 Allstate Insurance Company Enhanced image capture and analysis of damaged tangible objects
US11635872B2 (en) * 2016-11-22 2023-04-25 Snap Inc. Smart carousel of image modifiers
US9864890B1 (en) * 2017-01-25 2018-01-09 General Electric Company Systems and methods for contextualizing data obtained from barcode images
KR102217024B1 (ko) * 2018-03-13 2021-02-19 삼성전자주식회사 냉장고, 그 제어 방법 및 시스템
JP7304545B2 (ja) * 2018-07-06 2023-07-07 パナソニックＩｐマネジメント株式会社 異常予測システム及び異常予測方法

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH1165431A (ja) * 1997-08-25 1999-03-05 Nippon Telegr & Teleph Corp <Ntt> 景観ラベル付カーナビゲーション装置およびシステム
JP2001282825A (ja) * 2000-03-29 2001-10-12 Eighting:Kk 情報検索方法、情報検索サーバーおよび携帯端末
WO2004095374A1 (ja) * 2003-04-21 2004-11-04 Nec Corporation 映像オブジェクト認識装置および認識方法、映像アノテーション付与装置および付与方法ならびにプログラム
JP2006323578A (ja) * 2005-05-18 2006-11-30 Casio Hitachi Mobile Communications Co Ltd 機能表示装置、及び、機能表示方法
JP2007207252A (ja) * 2006-02-03 2007-08-16 Research In Motion Ltd コンタクト位置の視覚表示
JP2007243726A (ja) * 2006-03-09 2007-09-20 Fujifilm Corp 遠隔制御装置、方法およびシステム
JP2008047115A (ja) * 2006-08-15 2008-02-28 Fuji Xerox Co Ltd オブジェクト制御を支援する方法、システムおよびプログラム

Family Cites Families (23)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4801201A (en) 1984-12-31 1989-01-31 Precitronic Gesellschaft Fur Feinmechanik Und Electronic Mbh Method and device for laser-optical measurement of cooperative objects, more especially for the simulation of firing
JP4332964B2 (ja) 1999-12-21 2009-09-16 ソニー株式会社 情報入出力システム及び情報入出力方法
US7016532B2 (en) * 2000-11-06 2006-03-21 Evryx Technologies Image capture and identification system and process
US6781676B2 (en) 2002-03-22 2004-08-24 Trw Inc. Structured lighting detection of vehicle occupant type and position
US7268802B2 (en) 2003-08-20 2007-09-11 Hewlett-Packard Development Company, L.P. Photography system with remote control subject designation and digital framing
US20050046706A1 (en) * 2003-08-28 2005-03-03 Robert Sesek Image data capture method and apparatus
US20050063563A1 (en) * 2003-09-23 2005-03-24 Soliman Samir S. System and method for geolocation using imaging techniques
US20050131639A1 (en) 2003-12-11 2005-06-16 International Business Machines Corporation Methods, systems, and media for providing a location-based service
DE102004001595A1 (de) 2004-01-09 2005-08-11 Vodafone Holding Gmbh Verfahren zur informativen Beschreibung von Bildobjekten
US7720436B2 (en) 2006-01-09 2010-05-18 Nokia Corporation Displaying network objects in mobile devices based on geolocation
US7538813B2 (en) 2005-05-11 2009-05-26 Sony Ericsson Mobile Communications Ab Digital cameras with triangulation autofocus systems and related methods
US7728869B2 (en) 2005-06-14 2010-06-01 Lg Electronics Inc. Matching camera-photographed image with map data in portable terminal and travel route guidance method
US20070009159A1 (en) 2005-06-24 2007-01-11 Nokia Corporation Image recognition system and method using holistic Harr-like feature matching
US7775437B2 (en) 2006-06-01 2010-08-17 Evryx Technologies, Inc. Methods and devices for detecting linkable objects
RU2324145C1 (ru) 2006-11-09 2008-05-10 Николай Николаевич Слипченко Лазерный дальномер
US20080147730A1 (en) 2006-12-18 2008-06-19 Motorola, Inc. Method and system for providing location-specific image information
US20080170755A1 (en) 2007-01-17 2008-07-17 Kamal Nasser Methods and apparatus for collecting media site data
JP4914268B2 (ja) 2007-03-29 2012-04-11 株式会社日立製作所 検索サービスサーバの情報検索方法。
US20080309916A1 (en) 2007-06-18 2008-12-18 Alot Enterprises Company Limited Auto Aim Reticle For Laser range Finder Scope
US8639267B2 (en) 2008-03-14 2014-01-28 William J. Johnson System and method for location based exchanges of data facilitating distributed locational applications
US20090248300A1 (en) 2008-03-31 2009-10-01 Sony Ericsson Mobile Communications Ab Methods and Apparatus for Viewing Previously-Recorded Multimedia Content from Original Perspective
US20110169947A1 (en) * 2010-01-12 2011-07-14 Qualcomm Incorporated Image identification using trajectory-based location determination
WO2012018149A1 (en) * 2010-08-06 2012-02-09 Bizmodeline Co., Ltd. Apparatus and method for augmented reality

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH1165431A (ja) * 1997-08-25 1999-03-05 Nippon Telegr & Teleph Corp <Ntt> 景観ラベル付カーナビゲーション装置およびシステム
JP2001282825A (ja) * 2000-03-29 2001-10-12 Eighting:Kk 情報検索方法、情報検索サーバーおよび携帯端末
WO2004095374A1 (ja) * 2003-04-21 2004-11-04 Nec Corporation 映像オブジェクト認識装置および認識方法、映像アノテーション付与装置および付与方法ならびにプログラム
JP2006323578A (ja) * 2005-05-18 2006-11-30 Casio Hitachi Mobile Communications Co Ltd 機能表示装置、及び、機能表示方法
JP2007207252A (ja) * 2006-02-03 2007-08-16 Research In Motion Ltd コンタクト位置の視覚表示
JP2007243726A (ja) * 2006-03-09 2007-09-20 Fujifilm Corp 遠隔制御装置、方法およびシステム
JP2008047115A (ja) * 2006-08-15 2008-02-28 Fuji Xerox Co Ltd オブジェクト制御を支援する方法、システムおよびプログラム

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2017069502A1 (ko) * 2015-10-19 2017-04-27 삼성전자 주식회사 디스플레이 장치, 그의 통합 리모컨 설정 방법 및 시스템
US10347120B2 (en) 2015-10-19 2019-07-09 Samsung Electronics Co., Ltd. Display device, and integrated remote controller setting method and system for same
KR20170056932A (ko) * 2015-11-16 2017-05-24 삼성전자주식회사 전자 장치 및 그 제어 방법
WO2017086586A1 (ko) * 2015-11-16 2017-05-26 삼성전자 주식회사 전자 장치 및 그 제어 방법
US10868903B2 (en) 2015-11-16 2020-12-15 Samsung Electronics Co., Ltd. Electronic device and control method therefor
KR102343616B1 (ko) 2015-11-16 2021-12-28 삼성전자주식회사 전자 장치 및 그 제어 방법

Also Published As

Publication number Publication date
WO2011088139A3 (en) 2011-09-09
WO2011088139A2 (en) 2011-07-21
TW201140427A (en) 2011-11-16
EP2524336A2 (en) 2012-11-21
CN102667812B (zh) 2015-04-08
US20110170787A1 (en) 2011-07-14
US8315673B2 (en) 2012-11-20
CN102667812A (zh) 2012-09-12

Similar Documents

Publication Publication Date Title
US8315673B2 (en) Using a display to select a target object for communication
KR101436223B1 (ko) 궤적 기반 위치 결정을 이용한 이미지 식별
JP6272947B2 (ja) モバイルデバイスを使用した拡張メニューを伴うシステムおよび方法
US9074899B2 (en) Object guiding method, mobile viewing system and augmented reality system
US20160248505A1 (en) Smart device performing led-id/rf communication through a camera, and system and method for providing location-based services using the same
US8416309B2 (en) Camera-fitted information retrieval device
US9477687B2 (en) Mobile terminal and metadata setting method thereof
US10194273B2 (en) Positioning information processing method and apparatus
CN112149659B (zh) 定位方法及装置、电子设备和存储介质
KR20120053147A (ko) 무선기기에서 이미지 촬영을 통해 상대기기를 인식 및 연결하기 위한 장치 및 방법
CN104255022B (zh) 为相机添加虚拟变焦能力的服务器、客户终端、***和可读介质
JP5274192B2 (ja) 位置推定システム、位置推定サーバおよび位置推定方法
KR101397873B1 (ko) 증강 현실 표시 장치 및 방법
WO2015125210A1 (ja) 情報表示装置及び情報表示プログラム
KR20160141087A (ko) 증강현실 기반의 멀티미디어 영상 촬영지의 동영상 컨텐츠 제공 시스템 및 방법
KR101673196B1 (ko) 위치정보를 사용하는 영상기록 장치, 이와 연계된 스마트폰 및 그의 제어방법
WO2024067141A1 (zh) 一种提供服务的方法及电子设备
JP2006031529A (ja) 地図情報サービス方法、地図情報提供装置、及び地図情報提供プログラム

Legal Events

Date Code Title Description
A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20130911

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20130924

A601 Written request for extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A601

Effective date: 20131224

A602 Written permission of extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A602

Effective date: 20140107

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20140123

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20140623

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20141023

A911 Transfer to examiner for re-examination before appeal (zenchi)

Free format text: JAPANESE INTERMEDIATE CODE: A911

Effective date: 20141031

A912 Re-examination (zenchi) completed and case transferred to appeal board

Free format text: JAPANESE INTERMEDIATE CODE: A912

Effective date: 20150130