TWI423709B - 在主設備和目標設備之間自動介面連接 - Google Patents

在主設備和目標設備之間自動介面連接 Download PDF

Info

Publication number
TWI423709B
TWI423709B TW099123691A TW99123691A TWI423709B TW I423709 B TWI423709 B TW I423709B TW 099123691 A TW099123691 A TW 099123691A TW 99123691 A TW99123691 A TW 99123691A TW I423709 B TWI423709 B TW I423709B
Authority
TW
Taiwan
Prior art keywords
target device
target
image
interface
processor
Prior art date
Application number
TW099123691A
Other languages
English (en)
Other versions
TW201110784A (en
Inventor
Matthew S Grob
Spindola Serafin Diaz
Jr Gerald V Wright
Virginia Walker Keating
Original Assignee
Qualcomm Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Qualcomm Inc filed Critical Qualcomm Inc
Publication of TW201110784A publication Critical patent/TW201110784A/zh
Application granted granted Critical
Publication of TWI423709B publication Critical patent/TWI423709B/zh

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/00127Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture
    • H04N1/00281Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture with a telecommunication apparatus, e.g. a switched network of teleprinters for the distribution of text-based information, a selective call terminal
    • H04N1/00315Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture with a telecommunication apparatus, e.g. a switched network of teleprinters for the distribution of text-based information, a selective call terminal with a radio transmission apparatus
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04HBROADCAST COMMUNICATION
    • H04H60/00Arrangements for broadcast applications with a direct linking to broadcast information or broadcast space-time; Broadcast-related systems
    • H04H60/35Arrangements for identifying or recognising characteristics with a direct linkage to broadcast information or to broadcast space-time, e.g. for identifying broadcast stations or for identifying users
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/00127Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/0035User-machine interface; Control console
    • H04N1/00405Output means
    • H04N1/00408Display of information to the user, e.g. menus
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/0035User-machine interface; Control console
    • H04N1/00405Output means
    • H04N1/00408Display of information to the user, e.g. menus
    • H04N1/0044Display of information to the user, e.g. menus for image preview or review, e.g. to help the user position a sheet
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/64Computer-aided capture of images, e.g. transfer from script file into camera, check of taken image quality, advice or proposal for image composition or decision on when to take image
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/66Remote control of cameras or camera parts, e.g. by remote control devices
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/18Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • H04N7/183Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a single remote source
    • H04N7/185Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a single remote source from a mobile camera, e.g. for remote control
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W4/00Services specially adapted for wireless communication networks; Facilities therefor
    • H04W4/80Services using short range communication, e.g. near-field communication [NFC], radio-frequency identification [RFID] or low energy communication
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L63/00Network architectures or network communication protocols for network security
    • H04L63/08Network architectures or network communication protocols for network security for authentication of entities
    • H04L63/083Network architectures or network communication protocols for network security for authentication of entities using passwords
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/00127Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture
    • H04N1/00281Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture with a telecommunication apparatus, e.g. a switched network of teleprinters for the distribution of text-based information, a selective call terminal
    • H04N1/00307Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture with a telecommunication apparatus, e.g. a switched network of teleprinters for the distribution of text-based information, a selective call terminal with a mobile telephone apparatus
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N2201/00Indexing scheme relating to scanning, transmission or reproduction of documents or the like, and to details thereof
    • H04N2201/0008Connection or combination of a still picture apparatus with another apparatus
    • H04N2201/0013Arrangements for the control of the connected apparatus by the still picture apparatus
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N2201/00Indexing scheme relating to scanning, transmission or reproduction of documents or the like, and to details thereof
    • H04N2201/0008Connection or combination of a still picture apparatus with another apparatus
    • H04N2201/0034Details of the connection, e.g. connector, interface
    • H04N2201/0048Type of connection
    • H04N2201/0055By radio
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N2201/00Indexing scheme relating to scanning, transmission or reproduction of documents or the like, and to details thereof
    • H04N2201/0077Types of the still picture apparatus
    • H04N2201/0084Digital still camera

Landscapes

  • Engineering & Computer Science (AREA)
  • Signal Processing (AREA)
  • Multimedia (AREA)
  • Human Computer Interaction (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • User Interface Of Digital Computer (AREA)
  • Information Transfer Between Computers (AREA)
  • Computer Hardware Design (AREA)
  • Computer Security & Cryptography (AREA)
  • Computing Systems (AREA)
  • General Engineering & Computer Science (AREA)
  • Radar Systems Or Details Thereof (AREA)
  • Selective Calling Equipment (AREA)

Description

在主設備和目標設備之間自動介面連接
相關申請的交叉引用
本專利申請案主張2009年7月17日提出申請的美國臨時申請案第61/226,552號及2009年7月17日提出申請的美國臨時申請案第61/226,545號的權益,該等臨時申請案已被轉讓給本案受讓人並以引用之方式明確地併入本文。
無線設備正變得越來越普遍。與無線設備介面連接目前是相對較難或受限的過程。例如,使電子設備配對目前是複雜的任務,其要求使用者在雙方設備上均開啟協定,隨後請求探索,隨後配對。此外,一些電子設備具有很少或沒有內建的介面,從而使得很難與之互動。通常期望的顯示螢幕價格和較小的設備尺寸是在每個無線設備上放置豐富介面的障礙。
隨著無線設備使用的增加,在電子設備之間介面連接將會變得越加困難。例如,目前的電子設備通常包括與實體設備沒有關聯的無特異性設備名稱,並且對使用者而言易於混淆,例如,預設的電話藍芽名稱可能是NOK234B並且並不出現在該電話上。數目不斷增加的有可能配對的無線設備將使得使用者遭受的混淆越加嚴重。
因此,越來越需要能容易地且自然地與設備介面連接。
主設備對目標設備成像並使用該圖像來識別該目標設備。主設備隨後例如藉由與該目標設備配對來自動與所識別出的目標設備介面連接。主設備可取得與該目標設備有關的資料並顯示該有關資料,此顯示可以是在所顯示的該目標設備的圖像之上顯示該資料。該主設備可提供用來控制該目標設備或被用於將資料傳遞給該目標設備的介面。
該主設備接收來自目標設備的廣播資料,該廣播資料包括關於該目標設備的視覺外觀的資訊。該主設備可顯示該廣播資料並基於對所顯示的來自該目標設備的廣播資料的選擇來與該目標設備介面連接。該目標設備的圖像可被用於過濾來自多個目標設備的廣播資料以縮減由該主設備顯示其廣播資料的目標設備的數目。
本文中描述的系統和方法使用例如用主設備拍攝的目標設備的圖像來使該主設備與該目標設備配對或其他方式的介面連接自動化。該主設備可被用於提供與該目標設備有關的相關資訊,例如,藉由在該目標設備的圖像上覆蓋該資訊來提供。該主設備可包括比存在於該目標設備中的互動能力優越的互動能力,並可以使得能與該目標設備進行原本例如由於該目標設備有限的介面連接能力或沒有介面連接能力而困難或不可能的互動。
圖1是圖示了包括主設備110和目標設備180的無線連接的設備的示例性系統100的方塊圖。舉例而言,主設備110可以是行動電話或諸如超行動個人電腦(「UMPC」)之類的其他電子設備。在一個實施例中,主設備110可以是半行動或靜止的。例如,主設備110可位於固定或半固定的位置,例如,在商店中,其可被用於輕鬆地將新設備配對在一起。舉例而言,該目標設備可以是諸如數位相機、音樂播放器、電視、數位相框之類的設備,或任何其他設備。另外,應瞭解目標設備180可以是可攜式的,或者在某些情形中是相對或完全非便攜的。主設備110包括相機112和顯示器114。主設備110藉由使用相機112對目標設備180成像──該目標設備180的圖像180圖像 可在顯示器114中顯示,並使用圖像180圖像 來識別目標設備180來與該目標設備180介面連接。在識別出了目標設備180的情況下,主設備110隨後可以自動地與目標設備180介面連接,如箭頭116所圖示的。主設備110亦可在鏈路104上與舉例而言諸如網際網路之類的廣域網路等的網路102通訊,該通訊可被用於輔助識別目標設備180或與目標設備180介面連接。視需要,主設備110可藉由網路102間接地與目標設備180介面連接116a。
圖2是圖示了主設備110的實例的方塊圖。主設備110包括諸如相機112之類的用於成像的構件,及用於與目標設備介面連接的構件,諸如用於經由無線鏈路116(圖1中所示)通訊的無線介面130。主設備110亦可包括用於感測運動的構件,諸如可以是加速計或陀螺儀的用來偵測主設備110的運動的運動感測器118,其可被用於偵測用作使用者對主設備110的輸入的手勢。主設備110進一步包括用於識別目標設備180的構件,該構件可以是例如主設備控制單元120,其包括與含軟體126的記憶體124處於通訊中的處理器122,並可進一步包括硬體128和韌體129,並且可進一步包括諸如顯示器或鍵盤152之類的使用者介面150的各態樣。相機112和無線介面130及運動感測器118(若其被使用)被連接至控制單元120。控制單元120包括圖形引擎125,其被圖示為在功能上與處理器122分離,但實際上其可由處理器122執行。圖形引擎125產生可被顯示在例如目標設備180等的圖像之上的擴增資料。將可理解,如本文中所使用的處理器可以但不一定需要包括一或多個微處理器、嵌入式處理器、控制器、特殊應用積體電路(ASICs)、數位信號處理器(DSPs)及類似物。術語處理器意欲描述由系統而非特定硬體實施的功能。此外,如本文所使用的術語「記憶體」代表任何類型的電腦儲存媒體,包括與行動平臺相關聯的長期記憶體、短期記憶體或其他記憶體,並且並不被限定於任何特定類型的記憶體或特定數目的記憶體或其上儲存記憶體的媒體的類型。
主設備110亦包括使用者介面150,其包括諸如顯示器114之類的用於顯示的構件,及諸如鍵盤、觸控螢幕或其他合適的觸覺輸入設備之類的使用者輸入設備152。諸如當主設備110是行動電話之類時,使用者介面150亦可包括揚聲器154和話筒156。
無線介面130包括任何合適的天線132、接收機和發射機或是收發機,以使得主設備110可以在無線鏈路116上與一或多個目標設備通訊。視需要,無線介面130亦可具有處理能力以降低對處理器122的處理要求。
視需要,主設備110可包括諸如收發機之類的帶有天線142的網路介面140,用於經由鏈路104在網路102上通訊(圖1中所示)。例如,主設備110可經由有線通訊鏈路或無線通訊鏈路提供去往其他網路102(例如,諸如網際網路之類的廣域網路)的連通性。因此,主設備110可使其他目標設備180(例如,Wi-Fi站)能存取網路102。網路介面140可協同諸如無線廣域網路(WWAN)、無線區域網路(WLAN)、無線個人區域網路(WPAN)等包括蜂巢塔和來自無線通訊存取點的各種無線通訊網路來實施。術語「網路」和「系統」往往被可互換地使用。WWAN可以是分碼多工存取(CDMA)網路、分時多工存取(TDMA)網路、分頻多工存取(FDMA)網路、正交分頻多工存取(OFDMA)網路、單載波分頻多工存取(SC-FDMA)網路、長期進化(LTE),等等。CDMA網路可實施諸如cdma2000、寬頻CDMA(W-CDMA)等一或多種無線電存取技術(RATs)。Cdma2000涵蓋IS-95標準、IS-2000標準和IS-856標準。TDMA網路可實施行動通訊全球系統(GSM)、數位高級行動電話系統(D-AMPS)或其他某種RAT。GSM和W-CDMA在來自名為「第三代合作夥伴計畫」(3GPP)的聯盟的文件中描述。Cdma2000在來自名為「第三代合作夥伴計畫2」(3GPP2)的聯盟的文件中描述。3GPP文件和3GPP2文件是公眾可獲得的。WLAN可以是IEEE 802.11x網路,並且WPAN可以是藍芽網路、IEEE 802.15x或其他某種類型的網路。該等技術亦可聯合WWAN、WLAN及/或WPAN的任何組合來實施。
主設備110可視需要包括用於向主設備110的一或多個元件供電的電池121。主設備110可包括行動手持機、個人數位助理、膝上型電腦、耳機、車用免提設備或任何其他電子設備中的至少一者。特別地,本文的教示可被併入到各種各樣的設備中(例如,在其內實施或由其執行)。例如,本文中教示的一或多個態樣可被併入到電話(例如,蜂巢式電話)、個人資料助理(「PDA」)、UMPC、娛樂設備(例如,音樂設備或視訊設備)或任何其他併入相機112的設備中。
本文中所描述的方法取決於應用可藉由各種手段來實施。例如,該等方法可在硬體128、軟體126、韌體129或其任何組合中實施。對於硬體實施例,該等處理單元可以在一或多個特殊應用積體電路(ASICs)、數位信號處理器(DSPs)、數位信號處理設備(DSPDs)、可程式邏輯設備(PLDs)、現場可程式閘陣列(FPGAs)、處理器、控制器、微控制器、微處理器、電子設備、設計成執行本文中所描述的功能的其他電子單元或其組合內實施。
對於韌體及/或軟體實施,該等方法可用執行本文中描述的功能的模組(例如,程序、函數等等)來實施。任何有形地實施指令的機器可讀取媒體可被用來實施本文中所描述的方法。記憶體可以實施在處理單元內部或處理單元外部。如本文所使用的,術語「記憶體」代表任何類型的長期記憶體、短期記憶體、揮發性記憶體、非揮發性記憶體或其他記憶體,且並不限於任何特定類型的記憶體或特定數目的記憶體或其上儲存記憶體的媒體的類型。
例如,軟體126代碼可被儲存在記憶體124中並由處理器122執行並且可如本文中所描述地用來執行處理器並控制主設備110的操作。例如,儲存在諸如記憶體124之類的電腦可讀取媒體中的程式碼可包括用於使用目標設備的圖像來識別該目標設備的程式碼及用於與所識別出的目標設備介面連接的程式碼。電腦可讀取媒體可包括用於顯示從目標設備接收到的廣播資料並使用該廣播資料來輔助識別要與之介面連接的該目標設備的程式碼。
若在韌體及/或軟體中實施,則各功能可作為一或多個指令或代碼儲存在電腦可讀取媒體上。實例包括用資料結構編碼的電腦可讀取媒體和用電腦程式編碼的電腦可讀取媒體。電腦可讀取媒體包括實體電腦儲存媒體。儲存媒體可以是能被電腦存取的任何可用媒體。舉例而言(但非限定的),此類電腦可讀取媒體可以包括RAM、ROM、EEPROM、CD-ROM或其他光碟儲存設備、磁碟儲存設備或其他磁性儲存設備或可以被用來儲存指令或資料結構形式的期望程式碼且可以被電腦存取的任何其他媒體;如本文中所使用的磁碟(disk)和光碟(disc)包括壓縮光碟(CD)、雷射光碟、光碟、數位多功能光碟(DVD)、軟碟和藍光光碟,其中磁碟常常磁性地再現資料,而光碟用雷射光學地再現資料。上述的組合亦應被包括在電腦可讀取媒體的範疇內。
圖3是將主設備110與目標設備180介面連接的方法的流程圖。主設備110可藉由「配對」來與目標設備介面連接,「配對」是設備藉以相互登錄的過程。一旦配成對,設備通常只要落在射程以內並且處於有效時就可以彼此通訊,而無需重新執行該配對過程。為了方便引述,介面連接有時在本文中被稱為配對,但應理解的是在本文中亦構想了除配對以外的額外的介面連接形式。
如在圖3中所圖示的,使用主設備對待配對的目標設備成像(202)。目標設備的圖像可被顯示給使用者以確保主設備正與期望的目標設備介面連接。該圖像可使用相機產生為靜止圖像或者產生為視訊。主設備從該圖像識別該目標設備(204)。可基於該目標設備的視覺外觀或基於諸如條碼或其他類型的標記之類的出現在目標設備上的可視標記物進行識別。可進一步基於來自目標設備180的廣播信標進行識別,例如,基於標籤或頻率,其例如允許公開存取諸如地理位置、地理取向、ID或類別之類的受限資訊,其中類別諸如是但不限於目標設備的類型(例如,數位相機、mp3播放器等)、子類別(例如,對準拍攝數位相機)、品牌(例如,索尼,諾基亞等)、內容體裁(例如,電影、歌曲等),或其任何組合。主設備110可藉由使用視覺外觀、可視標記物或獲得自廣播信標的資訊從檢視表中取得匹配來識別目標設備180。在一個實施例中,主設備110可使用可用的非視覺感測器來縮窄有可能項目的檢視表,之後繼以使用關鍵點特徵或諸如線條之類的其他視覺參考來執行圖像對照檢視表的視覺匹配。該檢視表例如可包括先前儲存的消費電子工業設計的圖像或此類設計的3維模型。該檢視表可能例如儲存在主設備110上,儲存在目標設備180上或遠端位置,例如,儲存在經由鏈路104由網路102存取的伺服器上(圖1中所示)。
在一個實施例中,可基於由目標設備提供的視覺識別資訊進行識別。例如,目標設備可廣播關於該目標設備的視覺資訊,藉此視覺資訊該目標設備可被識別。目標設備可廣播該目標設備看起來什麼樣或者例如當目標設備是如圖9A中所圖示的數位相框等時廣播關於由該目標設備顯示的圖像的圖像或資訊,此在存在同樣的目標設備時可能是很有用的。主設備110隨後可以對目標設備成像並將由主設備110拍攝的圖像與例如當前顯示在數位相框上的圖像等的關於目標設備的廣播資訊相比較來識別該目標設備。例如,如圖9A所圖示的,主設備110可以使用數位相框180A的工業設計來識別該目標設備。然而,若有多個相似或同樣的相框,例如,由相框180A和180B所圖示的相同的工業設計,但各自顯示不同的螢幕圖像,則使用者將可以在相機視野中選擇一個(180A),並且主設備110將可以使用當前顯示的圖像來識別要與目標設備180A、180B中的哪個進行配對。可基於例如在數位相框等的情形中的所顯示的靜止圖像或基於所顯示的視訊來進行識別。對於基於視訊的識別,可例如基於作為對視訊在預定時間片段中「看起來什麼樣」的摘要的共享視訊簽名序列來作出匹配,或基於該視訊在已知時間產生的一訊框再加上比較了所選擇的訊框的每一側上的選定數目個訊框的錯誤校正來作出匹配。該等技術可配合諸如電腦、膝上型電腦、蜂巢式電話、音樂播放器等的其他目標設備使用。在一個實施例中,主設備110可顯示由目標設備廣播的資訊的圖像,使用者可從中選擇期望的目標設備來與之介面連接,此將為主設備110避免用主設備110對目標設備成像的需要。若期望,則由主設備110拍攝的目標設備的圖像可被用於過濾主設備110顯示供使用者選擇的可配對目標設備的數目。
基於對目標設備的識別,主設備可決定是否可與目標設備介面連接,如在可任選步驟206中所圖示的。主設備110可在顯示器114中的目標設備180的圖像上指示是否可與目標設備180介面連接並給予使用者指示是否期望介面連接的機會。例如,目標設備180的圖像可以帶輪廓地或發光地顯示在主設備110的顯示器114中以指示可配對性。對目標設備圖像的顯示的擴增可包括從來自目標設備180的廣播信標獲得的資訊。使用者可以選擇配對、不配對或隱藏目標設備的可配對性。可配對性可被隱藏例如一次、總是,或對特定類內的所有目標設備,例如對所有數位相框隱藏。
主設備110隨後可自動地或回應於使用者選擇與目標設備介面連接或配對(208)。當大於一個可配對目標設備存在於圖像中時,使用使用者選擇可能是有利的。舉例而言,可基於打手勢來進行使用者選擇,例如,其中不同的可配對目標設備基於手勢被高亮顯示,並且期望的目標設備一旦被高亮顯示就被選中。另外,使用者例如可指示期望配對,並且配對過程可以是自動的。在配對是自動的場合,可使用中間安全性步驟來確保使用者期望與目標設備配對。可針對特定位置的特定設備來對配對進行最佳化,例如,使用最低功率配對方法來延及主設備與目標設備之間的距離。此外,若主設備與目標設備的相對位置改變,則配對方法可視需要自動改變。為了介面連接或配對,主設備和目標設備必須首先探索彼此,例如,藉由進入可探索狀態來探索彼此,其中在可探索狀態中,設備藉由交換探索訊息來探索彼此。例如,主設備110可請求本端可配對目標設備進入探索模式。主設備110可起始該請求,例如,藉由網路102來起始。網路可激勵落在主設備110的區域中的任何可配對目標設備進入探索模式。或者,主設備可首先識別期望目標設備180,隨後起始探索請求,例如,藉由網路102起始探索請求以請求落在主設備110的區域內的所有類似目標設備進入探索模式。一旦探索,諸設備就可以彼此配對。配對至少部分地是限制對特定設備的配對的安全性功能。例如,配對可包括訊息交換,訊息交換可包括密碼認證方案,其中第一設備必須用密碼(諸如四數位數字,該數位數字往往是在工廠中為設備設定的)來回應第二設備以防止未授權或非期望的設備配對。在諸如藍芽之類的網路連接協定中,探索和配對是分開的程序,但可一起執行。實際的配對可以用任何當前的協定藉由該協定的標準實踐(例如,藍芽、WiFi、IR……)來完成。
若期望,則可使用例如由圖形引擎125提供的擴增資料來擴增顯示在主設備110上的圖像以指示目標設備的狀態,例如,如在可任選步驟210中所指示地確認配對。另外,在可任選步驟214中與目標設備有關的資料可被顯示在主設備上。
圖4A和圖4B舉例而言圖示了將主設備110與目標設備180配對,在此情形中目標設備180是數位相機,其中在配對之後與目標設備180有關的資料被顯示在主設備110上(214)。圖4A圖示了主設備110對目標設備180成像(202),在此目標設備圖像180圖像 被顯示在主設備110的顯示器114中。基於目標設備圖像180圖像 ,主設備110與目標設備180配對116並將與目標設備180有關的資料顯示在主設備110的顯示器114上,該資料在此情形中是由目標設備180拍攝的照片182,正如圖4B中所圖示的。由主設備110顯示的與目標設備180有關的資料可由使用者選擇或可被自動顯示。
與目標設備180有關的資料可以是關於目標設備的資訊。例如,該資料可以與目標設備的歷史或屬性、描述怎樣執行與目標設備有關的任務的說明檔案或其他此類資料有關。或者,此有關資料可以來自目標設備,諸如是來自數位相機的照片、諸如音樂或電影之類的檔案的列表或其他儲存在目標設備中的資訊。另外,此有關資料可以是應用或與目標設備的介面。舉例而言,圖5A和圖5B圖示了主設備110與USB快閃驅動器形式的目標設備180介面連接,並且該主設備110的顯示用與目標設備180有關的資料180資料 進行了擴增。如在圖5B中所圖示的,在配對116之後,有關資料180資料 被顯示,該資料可以是儲存在快閃驅動器上的檔案的列表或甚至打開儲存在快閃驅動器上的檔案。因此,當目標設備180自身沒有使用者介面時,主設備110可為目標設備180提供使用者介面。
圖6A、圖6B、圖6C和圖6D圖示了主設備110與手錶形式的目標設備180介面連接的另一實例,其中在主設備110上,與目標設備180有關的擴增資料180資料 被顯示在目標設備圖像180圖像 之上。如所圖示的,此有關資料180資料 可由主設備110顯示為與目標設備圖像180圖像 緊密對齊(圖6A)、鬆散對齊(圖6B)或不對齊(圖6C、圖6D)。如圖6D所圖示的,藉由對圖像180圖像 使用關鍵點追蹤,隨後將圖形擴增鎖定到該圖像,來自目標設備180的有關資料就可以被顯示在主設備110的整個顯示之上。
主設備110可被用於提供與具有有限使用者介面能力的目標設備的使用者介面或僅僅簡單地提供具有相對於目標設備的使用者介面所允許的功能性而言擴展的功能性的使用者介面。例如,圖7A和圖7B圖示了主設備110與具有有限的使用者介面能力的目標設備180配對。圖7A和圖7B中的目標設備180是MP3播放器的形式,其可能具有實體使用者介面但沒有用來提供圖形使用者介面(GUI)的螢幕。如圖7A所示,主設備110藉由對目標設備180成像來與該目標設備180配對。如圖7B所示,在配對116之後,主設備110上與目標設備180有關的資料是可以被用來例如允許MP3播放器的額外功能性的GUI。
圖8A和圖8B圖示了主設備110與目標設備180介面連接,在此主設備110提供擴展的功能性。圖8A和圖8B中的目標設備180是mp3播放器的形式,其具有圖形使用者介面。如圖8A中所示,主設備110藉由對目標設備180成像來與該目標設備180配對。如圖8B中所示,在配對116之後,主設備110上與目標設備180有關的資料是GUI,並且該介面提供擴展的功能性,諸如便於實現更容易的使用者互動的觸控螢幕、更大的螢幕、允許更多用於控制的自然手勢或提供額外的能力,諸如建立播放列表。
因此,與目標設備180有關的各種類型的資料可由主設備110顯示。例如,該資料可以是被動的,諸如在圖6A中所圖示的資訊之類,或是互動式的,諸如在圖7B中所顯示的音樂介面之類。此外,由目標設備或直接或藉由諸如圖1中所示的網路102之類的遠端源所曝露的功能性可被顯示。舉例而言,在圖5A、圖5B中,180資料 可來自網路102,而不是來自目標設備180本身。作為實例,當圖5A中所示的USB快閃驅動器180被***電腦中時,180資料 可在網路102中被同步。當主設備110與該USB快閃驅動器180配對時,主設備110實際上可以與網路102中被同步的資料配對。在另一個實例中,MP3播放器功能性被擴展,在此MP3播放器上的資料的副本在網路102上。由於擴展的功能性(例如,製作播放列表)在MP3播放器本身上或許是不可能的,因此主設備110可被用於在網路102上操縱該資料。一旦此互動完成(例如,新的播放列表製成),網路102就與該MP3播放器(目標設備)180同步。若期望,則主設備110與目標設備180之間的互動可以在擴增撥叫之間持續。例如,所顯示的擴增資料可以被保持在與其前次被查看時所呈現的相同的狀態。此外,主設備110可向目標設備180提供命令或資料。換言之,目標設備180可藉由與主設備110介面連接來被控制。資料可被儲存在主設備110上、目標設備180上或遠端位置,例如,經由網路102(圖1)存取的伺服器。
另外,主設備110亦可與多個目標設備介面連接。例如,如圖9B、圖9C和圖9D所圖示的,主設備110被用於與兩個目標設備介面連接,該兩個目標設備圖示為數位相機180和數位相框180A。主設備110可被用於從一個目標設備(例如,相機180)取得資料,並將該資料傳遞給另一目標設備,例如,數位相框180A。圖9B圖示了主設備110藉由對相機180成像來與相機180配對。數位相框180A可能已經或隨後以類似的方式被配對116A,如圖9C中所示。圖9C圖示了在主設備110與相機180之間配對116之後,資料由主設備110從相機180接收並由主設備110顯示。選中的資料隨後可從主設備110被傳遞至第二目標設備,例如,數位相框180A,並可如圖9D中所示地被顯示或以其他方式被該第二目標設備儲存或使用。此資料傳遞可以是自動的或由使用者互動引起的,包括藉由觸控螢幕或由主設備110中諸如加速計或陀螺儀之類的運動感測器118偵測到的使用者手勢來選擇。為了使用手勢來起始資料傳遞,可先決定一或多個目標設備180、180A關於彼此及/或主設備110的相對位置,例如藉由在對該兩個目標設備180、180A成像之間使用運動感測器118來偵測主設備110的位置上或取向上的改變來決定。或者,可以使用圖元流向追蹤來視覺地決定目標設備180、180A之間的關聯性。
在一個實施例中,主設備110可用於藉由與諸目標設備介面連接並起始諸目標設備之間的配對來輔助兩個或兩個以上目標設備之間的配對,此在目標設備的使用者介面使得彼等設備的直接配對很困難時會特別有用。例如,如圖10A、圖10B和圖10C所圖示的,主設備110被用於起始兩個目標設備之間的介面,該兩個目標設備被圖示為數位相機180和數位相框180A。圖10A圖示了主設備110藉由對相機180成像來與相機180配對116。圖10B圖示主設備110藉由對數位相框180A成像來與圖示為數位相框180A的標的目標設備配對116A。在該兩個目標設備180、180A與主設備110配對的情況下,如圖10C所圖示的,主設備110可被用於起始該兩個目標設備180、180A之間的配對116B。該兩個目標設備180、180A的配對可以自動地,或回應於諸如藉由主設備110的使用者介面進行的選擇之類的使用者互動,在主設備110知曉目標設備180、180A的相對位置的場合藉由目標設備180、180A之間的手勢,或藉由使用來自每個目標設備180、180A的協定規範來進行。目標設備180、180A之間的配對186可以在主設備110不在場時持續。
在另一個實施例中,如圖11中所示的流程圖所圖示的,主設備110可對被動目標190亦即不能被配對或以其他方式介面連接的目標成像(302),並且取得和顯示與該目標有關的資料。主設備110可識別被動目標(304)並取得與所識別出的目標有關的資料並在主設備110上顯示該資料(306)。被動目標190可以是任何可以由主設備110的相機112登錄的目標,包括不具連通性的設備,諸如手錶、釘書機或汽車;具備未被利用的連通性的設備,例如,具有藍芽的相機;諸如鉛筆、岩石或桌子之類的物體;諸如雜誌、螢幕單幅之類的印刷媒體或數位媒體;諸如手腕或腳之類的身體部位;或其他登錄的物體,諸如色彩或紋理。
被動目標190可從其視覺外觀來識別。此識別可基於被動目標的特定圖像,例如先前由使用者拍攝的圖像,該被動目標的紋理化3維模型,或一般類別的圖像,諸如手錶的一般圖像,而不是特定品牌的手錶。使用者可提供額外資訊來定義該圖像,諸如把該圖像標記為「手錶」,或提供用於特定目標或目標類別的PIN。由使用者提供的額外資訊可被輸入一次,例如在主設備110的訓練期間,並且後續使用所輸入資訊的識別是自動的。另外,被動目標可包括被成像並用於例如按類別、子類別、品牌、體裁或其任何組合來縮窄識別搜尋的視覺標記物。識別可由主設備110或例如藉由網路102(圖1)等遠端地執行。顯示在主設備110上的被動目標的圖像可藉由使用對該圖像的擴增來表明該被動目標已被識別出,例如,藉由使該被動目標發光或勾勒出該被動目標的輪廓。若期望,則使用者可選擇要識別的被動目標及要顯示的資料的類型。該資料可被自動顯示。對要識別的被動目標的選擇可由使用者執行一次,並且後續對該被動目標的成像導致自動識別。被動目標與所取得的資料之間的關係可以是由使用者定義的或者外部地或自動地定義的。此外,該資料可被儲存在主設備110上或遠端源上並由主設備110例如在網路102上取得(圖1)。有關資料可以是啟動諸如日曆應用的應用的形式。或者,應用可基於被動目標的圖像被取得或解鎖。有關資料可以是與被動目標有關的資訊,諸如指令或幫助資訊。有關資料可基於被動目標的圖像提供對該有關資料的存取或啟動對該有關資料的下載。例如,對書的封面成像可自動地下載音訊書或數位書。有關資料可以是任何媒體或者媒體的組合,並可包括但不限於二維或三維圖像、動畫、視訊、聲音、觸覺回饋或其他感官資料。
舉例而言,使用者可在主設備110內定義該使用者的手錶190的圖像自動在主設備110上啟動日曆應用並顯示該使用者的日曆,如圖12所圖示的。或者,使用者可個性化被動目標與所取得的資料之間的關係,諸如使用使用者的結婚戒指的圖像來打開使用者的婚禮的圖像。主設備110可藉由包括對被動目標成像及輸入設備名稱和要與該被動目標相關的期望資料、隨後由主設備110將此期望資料與該被動目標相關的過程來被訓練成識別個人的被動目標,諸如使用者的手錶、戒指、釘書機、汽車等。
另外,為被動目標190取得的有關資料可以外部地或自動地定義。例如,圖13A和圖13B圖示了主設備110對諸如不可配對的DVR之類的被動目標190成像的實例(圖13A),並且操作指令之類的操作指令192形式的有關資料從網路102被取得,並由主設備110自動顯示(圖13B)。此特定的DVR被識別出來,但不需要連接或配對也能從網路102獲得該等操作指令或其他關於該特定DVR的資訊。如圖13B中所圖示的,操作指令192可與該圖像緊密對齊地顯示。
圖14A和圖14B圖示了主設備110對被動目標190成像的實例,該被動目標諸如是電影的廣告,並且在本實例中是Dark Knight微標(圖14A),並且與Dark Knight有關的資料(192)被取得並顯示。例如,如圖14B中所示,Dark Knight電影可被自動地取得並顯示在主設備110上。或者,可以顯示其他與被成像的目標有關的資訊,諸如Dark Knight電影上映的地點和時間等。若期望,則被動目標190的圖像可基於視覺外觀,例如,微標本身,或可部分地或完全地基於視覺標記物194以輔助對該被動目標的識別。
在另一實施例中,主設備110可與可配對目標設備180介面連接並將獲得自另一個目標設備的圖像的資料提供給目標設備180,其中該另一個目標設備可以是可配對的或是被動的。在一個實施例中,可能有大於一個供獲得資料的目標設備,及/或大於一個標的目標設備180。例如,如圖15A、圖15B和圖15C所圖示的,主設備110可對被動目標190(諸如Dark Knight廣告)成像(圖15A)並如上所論述地基於該被動目標的圖像來識別和獲得資料。使用者可選擇要傳遞給諸如電視(圖15B)之類的配對(116)標的目標設備180的資料,並且該資料(例如,電影)被自動地傳遞給該目標設備180(圖15C)。該資料可由主設備110取得並被傳遞給目標設備180,或者替代地,主設備110可向目標設備180提供指令以自行取得該資料。
因此,主設備110可用來基於一或多個被動或可配對目標設備的圖像來向目標設備180傳遞命令。例如,主設備110可對特定品牌的跑鞋成像,隨後對mp3播放器成像並回應於此自動將例如運動音樂等的特定播放列表下載至該mp3播放器。在一個實施例中,主設備110下載例如音樂等的資料,並將該資料傳遞給目標設備,或替代地指令該目標設備自行取得該資料。為進行多項選擇,可將相機對準該等目標短暫的一段時間,或者使用者可例如藉由按壓或保持按鈕或使用手勢來指示開始或停止多項選擇等來與圖像互動。使用者可在圖像中選擇目標設備,目標設備可被自動選擇,或者使用者可選擇目標設備一次,並且後續選擇是自動的。回應於多項選擇發生的動作可以是使用者定義的或外部定義的。
儘管出於指導目的結合特定實施例圖示了本發明,但是本發明並不被限定於此。可作出各種適應和修改而不會脫離本發明的範疇。因此,所附請求項的精神和範疇不應當被限定於先前的描述。
100...系統
102...網路
104...鏈路
110...主設備
112...相機
114...顯示器
116...箭頭
116a...介面連接
116B...配對
118...運動感測器
120...主設備控制單元
121...電池
122...處理器
124...記憶體
125...圖形引擎
126...軟體
128...硬體
129...韌體
130...無線介面
132...天線
140...網路介面
142...天線
150...使用者介面
152...使用者輸入設備
154...揚聲器
156...話筒
180...目標設備
180A...數位相框
180B...數位相框
182...照片
190...被動目標
192...操作指令
194...視覺標記物
202...方塊
204...方塊
206...方塊
208...方塊
210...方塊
214...方塊
302...方塊
304...方塊
306...方塊
圖1是圖示了包括主設備和目標設備的無線連接的設備的示例性系統的方塊圖。
圖2是圖示了可自動地與目標設備介面連接的主設備的實例的方塊圖。
圖3是使該主設備與該目標設備介面連接的方法的流程圖。
圖4A和圖4B圖示了主設備與目標設備介面連接,其中與目標設備有關的資料被顯示在主設備上。
圖5A和圖5B圖示了主設備與目標設備介面連接並且該主設備的顯示器用與該目標設備有關的資料進行了擴增。
圖6A、圖6B、圖6C和圖6D圖示了主設備與目標設備介面連接,其中在主設備上與該目標設備有關的擴增資料被圖示在目標設備圖像之上。
圖7A和圖7B圖示了主設備與具有有限介面能力的目標設備介面連接。
圖8A和圖8B圖示了主設備與目標設備介面連接,其中該主設備為該目標設備提供擴展的功能性。
圖9A圖示了主設備使用目標設備所廣播的資訊來識別多個同樣的目標設備之一。
圖9B、圖9C和圖9D圖示了主設備被用於與兩個目標設備介面連接。
圖10A、圖10B和圖10C圖示了主設備被用於起始兩個目標設備之間的介面。
圖11是主設備可對自身不可能與其配對或介面連接的被動目標成像並且該主設備取得並顯示與該目標有關的資料的方法的流程圖。
圖12圖示了主設備基於目標的圖像自動地啟動並顯示應用。
圖13A和圖13B圖示了該主設備對被動目標成像並取得和顯示關於該被動目標的資訊。
圖14A和圖14B圖示了該主設備對被動目標成像並取得和顯示與該被動目標有關的資訊的另一個實例。
圖15A、圖15B和圖15C圖示了主設備對被動目標成像,取得與該目標有關的資料並將此資料傳遞給該主設備正在介面連接的目標設備。
202...方塊
204...方塊
206...方塊
208...方塊
210...方塊
214...方塊

Claims (40)

  1. 一種用於在一主設備與一目標設備之間介面連接的方法,其包括以下步驟:用該主設備對該目標設備成像並將該目標設備的該圖像顯示在該主設備上;使用該目標設備的該圖像來識別該目標設備;基於該目標設備的該識別,通過該主設備與該目標設備介面連接;及在該主設備上顯示用於該目標設備的一使用者介面,以用該主設備來控制該目標設備。
  2. 如請求項1之方法,其進一步包括以下步驟:在該主設備上顯示由該目標設備所曝露之功能性。
  3. 如請求項1之方法,其進一步包括以下步驟:使用該目標設備的該圖像來識別該目標設備為可配對的;及將該主設備與該目標設備配對。
  4. 如請求項1之方法,其中用於該目標設備而用來控制該目標設備的該使用者介面被顯示在該主設備上之該目標設備的該圖像之上。
  5. 如請求項1之方法,該方法進一步包括以下步驟:通過該主設備與一標的設備介面連接;其中與該目標設備介面連接之步驟包括以下步驟:從該目標設備取得資料;及將該資料傳遞給該標的設備。
  6. 如請求項1之方法,其進一步包括以下步驟:將該主設備與該目標設備配對;將該主設備與一第二目標設備配對;及使用該主設備來將該目標設備與該第二目標設備配對。
  7. 如請求項1之方法,其進一步包括以下步驟:接收來自該目標設備的廣播資料,該廣播資料包括關於該目標設備的一視覺外觀的資訊;其中該目標設備是藉由將該目標設備的該圖像與來自該目標設備的該廣播資料作比較來被識別的。
  8. 如請求項7之方法,其中關於該目標設備的該視覺外觀的該資訊包括該目標設備的一圖像和一紋理化3維模型中的至少一者。
  9. 如請求項1之方法,其進一步包括以下步驟:接收來自複數個目標設備的廣播資料,該廣播資料包 括關於該等複數個目標設備的視覺外觀的資訊;其中使用該目標設備的該圖像來識別該目標設備之步驟包括以下步驟:使用該目標設備的該圖像來過濾該廣播資料以產生一廣播資料子集;顯示該廣播資料子集;藉由使用者從該所顯示的廣播資料子集作出的選擇來識別該目標設備。
  10. 如請求項1之方法,其進一步包括以下步驟:通過該主設備將該目標設備與一廣域網路介面連接。
  11. 一種用於在一主設備與一目標設備之間介面連接的方法,其包括以下步驟:接收來自該目標設備的廣播資料,該廣播資料包括關於該目標設備的一視覺外觀的資訊,該視覺外觀是該目標設備的一模樣;在該主設備上顯示該廣播資料;及基於對該所顯示的來自該目標設備的廣播資料的一選擇來與該目標設備介面連接。
  12. 如請求項11之方法,其中該廣播資料包括關於由該目標設備顯示的一圖像的資訊。
  13. 如請求項11之方法,其進一步包括以下步驟:用該主設備對該目標設備成像;及藉由將該目標設備的該圖像與該所接收到的廣播資料作比較來識別該目標設備。
  14. 如請求項11之方法,其進一步包括以下步驟:藉由該主設備將該目標設備與一廣域網路介面連接。
  15. 一種用於介面連接一目標設備的裝置,其包括:一相機,該相機可操作用於對該目標設備成像;一無線收發機,該無線收發機能夠向該目標設備發射無線信號和從該目標設備接收無線信號;一處理器,該處理器連接至該相機和該無線收發機;記憶體,該記憶體連接至該處理器;一數位顯示器,該數位顯示器經耦合至該處理器;及軟體,該軟體被保持在該記憶體中並在該處理器中執行以致使該處理器使用由該相機提供的一圖像來識別該目標設備,通過該無線收發機與該所識別出的目標設備介面連接,並在該數位顯示器上顯示用於該目標設備的一使用者介面以供控制該目標設備。
  16. 如請求項15之裝置,其中由該目標設備所曝露之功能性被顯示在該數位顯示器上。
  17. 如請求項16之裝置,其中該由該目標設備所曝露之功能性係由該無線收發機從該目標設備接收。
  18. 如請求項16之裝置,其中該裝置進一步包括耦合至該處理器的一網路介面收發機,其中該由該目標設備所曝露之功能性係由該網路介面收發機接收。
  19. 如請求項15之裝置,其中該軟體致使該處理器使用該目標設備的該圖像來識別該目標設備為可配對的;並與該目標設備配對。
  20. 如請求項15之裝置,其中該軟體致使該處理器將用來控制該目標設備的用於該目標設備之該使用者介面顯示在該數位顯示器上,而該使用者介面係顯示在該目標設備的該圖像之上。
  21. 如請求項15之裝置,其中該軟體致使該處理器與一標的設備介面連接,與該目標設備介面連接包括從該目標設備取得資料;及通過該無線收發機向該標的設備發射該資料。
  22. 如請求項15之裝置,其中該軟體致使該處理器與該目標設備配對,與一第二目標設備配對;並且將該目標設備與該第二目標設備配對。
  23. 如請求項15之裝置,其中該無線收發機接收來自該目標設備的廣播資料並將該廣播資料提供給該處理器,該廣播資料包括關於該目標設備的一視覺外觀的資訊,該軟體致使該處理器藉由將由該相機提供的該圖像與從該目標設備接收到的該廣播資料作比較來識別該目標設備。
  24. 如請求項23之裝置,其中關於該目標設備的該視覺外觀的該資訊包括該目標設備的一圖像和一紋理化3維模型中的至少一者。
  25. 如請求項15之裝置,其進一步包括耦合至該處理器的一數位顯示器和耦合至該處理器的一使用者介面,其中該無線收發機接收來自複數個目標設備的廣播資料並將該廣播資料提供給該處理器,該廣播資料包括關於該等複數個目標設備的視覺外觀的資訊,該軟體致使該處理器藉由使用由該相機提供的該圖像來過濾該廣播資料以產生一廣播資料子集;在該數位顯示器上顯示該廣播資料子集,並且基於來自該使用者介面的一輸入從該廣播資料子集中識別該目標設備。
  26. 如請求項15之裝置,該裝置進一步包括耦合至該處理器的一網路介面收發機,其中該軟體致使該處理器通過該網路介面收發機將該目標設備與一廣域網路介面連接。
  27. 一種用於介面連接一目標設備的裝置,其包括:一無線收發機,該無線收發機能夠向該目標設備發射無線信號和從該目標設備接收無線信號,該無線收發機接收來自該目標設備的廣播資料,該廣播資料包括關於該目標設備的一視覺外觀的資訊,該視覺外觀係該目標設備的一模樣;一數位顯示器;一使用者介面;一處理器,該處理器連接至該相機和該數位顯示器和該使用者介面;記憶體,該記憶體連接至該處理器;及軟體,該軟體被保持在該記憶體中並在該處理器中執行以致使該處理器在該數位顯示器上顯示該廣播資料;並基於來自該使用者介面的一輸入來與該目標設備介面連接,該輸入係回應於該所顯示的廣播資料。
  28. 如請求項27之裝置,其中該無線收發機接收來自複數個目標設備的廣播資料,該裝置進一步包括一相機,該相機可操作用於對該目標設備成像,該軟體致使該處理器將該目標設備的該圖像與該所接收到的廣播資料作比較並使用由該相機提供的該圖像來過濾該廣播資料以產生一廣播資料子集;在該數位顯示器上顯示該廣播資料子集。
  29. 如請求項27之裝置,該裝置進一步包括耦合至該處理器的一網路介面收發機,其中該軟體致使該處理器通過該網路介面收發機將該目標設備與一廣域網路介面連接。
  30. 一種在一主設備與一目標設備之間介面連接的系統,其包括:用於用該主設備對該目標設備成像的構件;用於在該主設備上顯示該目標設備的該圖像的構件;用於使用該目標設備的該圖像來識別該目標設備的構件;用於與該所識別出的目標設備介面連接的構件;及用於顯示用於該所識別目標設備的一使用者介面以用該主設備來控制該所識別目標設備的構件。
  31. 如請求項30之系統,其進一步包括用於獲得由該目標設備所曝露之功能性的構件,其中該用於顯示該目標的該圖像的構件顯示該由該目標設備所曝露之功能性。
  32. 如請求項30之系統,其中該用於介面連接的構件將該主設備與該目標設備配對。
  33. 如請求項30之系統,其中該用於顯示用於該目標設備的該使用者介面以用該主設備控制該所識別出的目標設備的構件將用於該所識別目標設備之該使用者介面顯示 在該目標設備之該圖像之上。
  34. 如請求項30之系統,其中該用於與該所識別出的目標設備介面連接的構件進一步與一標的設備介面連接,該標的設備不同於該目標設備;該系統進一步包括用於從該所識別出的目標設備取得資料的構件;其中該用於介面連接的構件將該所取得的資料傳遞給該標的設備。
  35. 如請求項30之系統,其中該用於介面連接的構件將該主設備與該目標設備配對並將該主設備與一第二目標設備配對,該系統進一步包括用於通過該主設備將該目標設備與該第二目標設備配對的構件。
  36. 如請求項30之系統,其進一步包括:用於接收來自該目標設備的廣播資料的構件,該廣播資料包括關於該目標設備的該視覺外觀的資訊;其中該用於識別該目標設備的構件將該目標設備的該圖像與來自該目標設備的該廣播資料作比較。
  37. 如請求項36之系統,其中該關於該目標設備的該視覺外觀的資訊包括該目標設備的一圖像和一紋理化3維模型中的至少一者。
  38. 如請求項30之系統,其進一步包括: 用於接收來自複數個目標設備的廣播資料的構件,該廣播資料包括關於該等複數個目標設備的視覺外觀的資訊;其中該用於識別該目標設備的構件包括:用於使用該目標設備的該圖像來過濾該廣播資料以產生一廣播資料子集的構件,其中該用於顯示的構件顯示該廣播資料子集;用於基於該所顯示的廣播資料子集來選擇該目標設備的構件。
  39. 如請求項30之系統,其進一步包括用於將該目標設備介面連接到一廣域網路的構件。
  40. 一種用於在一主設備與一目標設備之間介面連接的非暫態電腦可讀取媒體,該非暫態電腦可讀取媒體包括程式碼儲存於其上,其包括:用於使用該目標設備的一圖像來識別該目標設備的程式碼;用於與該所識別出的目標設備介面連接的程式碼;及用於顯示用於該目標設備的一使用者介面以控制該目標設備的程式碼。
TW099123691A 2009-07-17 2010-07-19 在主設備和目標設備之間自動介面連接 TWI423709B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US22654509P 2009-07-17 2009-07-17
US22655209P 2009-07-17 2009-07-17
US12/786,886 US8818274B2 (en) 2009-07-17 2010-05-25 Automatic interfacing between a master device and object device

Publications (2)

Publication Number Publication Date
TW201110784A TW201110784A (en) 2011-03-16
TWI423709B true TWI423709B (zh) 2014-01-11

Family

ID=42990159

Family Applications (1)

Application Number Title Priority Date Filing Date
TW099123691A TWI423709B (zh) 2009-07-17 2010-07-19 在主設備和目標設備之間自動介面連接

Country Status (9)

Country Link
US (3) US8818274B2 (zh)
EP (3) EP2597796A3 (zh)
JP (2) JP2012533802A (zh)
KR (3) KR101755147B1 (zh)
BR (1) BR112012001134A2 (zh)
ES (1) ES2793332T3 (zh)
HU (1) HUE048977T2 (zh)
TW (1) TWI423709B (zh)
WO (1) WO2011009069A2 (zh)

Families Citing this family (78)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7953983B2 (en) 2005-03-08 2011-05-31 Microsoft Corporation Image or pictographic based computer login systems and methods
KR20100015246A (ko) * 2008-08-04 2010-02-12 삼성전자주식회사 디스플레이부를 구비한 저장장치 및 정보 디스플레이 방법
US8458485B2 (en) 2009-06-17 2013-06-04 Microsoft Corporation Image-based unlock functionality on a computing device
US8818274B2 (en) 2009-07-17 2014-08-26 Qualcomm Incorporated Automatic interfacing between a master device and object device
US10104183B2 (en) * 2010-06-22 2018-10-16 Microsoft Technology Licensing, Llc Networked device authentication, pairing and resource sharing
US20120005632A1 (en) * 2010-06-30 2012-01-05 Broyles Iii Paul J Execute a command
US20120098977A1 (en) * 2010-10-20 2012-04-26 Grant Edward Striemer Article Utilization
US9942304B2 (en) * 2011-01-08 2018-04-10 N99 Llc Remote control authority and authentication
US10778747B2 (en) * 2011-01-08 2020-09-15 N99 Llc Remote control authority and authentication
AU2011202415B1 (en) * 2011-05-24 2012-04-12 Microsoft Technology Licensing, Llc Picture gesture authentication
US20120309289A1 (en) * 2011-06-06 2012-12-06 Apple Inc. Techniques for facilitating interoperation between an accessory and multiple devices
US8989280B2 (en) * 2011-06-30 2015-03-24 Cable Television Laboratories, Inc. Frame identification
JP5772540B2 (ja) * 2011-11-23 2015-09-02 富士通株式会社 携帯型端末装置、エリア指定方法及びエリア指定プログラム
EP2602691A1 (en) * 2011-12-05 2013-06-12 Alcatel Lucent Method for gesture control, gesture server device and sensor input device
US10013857B2 (en) 2011-12-21 2018-07-03 Qualcomm Incorporated Using haptic technologies to provide enhanced media experiences
TW201352001A (zh) * 2012-06-11 2013-12-16 Quanta Comp Inc 多媒體互動系統及方法
TWI526041B (zh) * 2012-07-17 2016-03-11 廣達電腦股份有限公司 互動系統及互動方法
CN103576848B (zh) * 2012-08-09 2016-07-13 腾讯科技(深圳)有限公司 手势操作方法和手势操作装置
WO2014022905A1 (en) * 2012-08-10 2014-02-13 Research In Motion Limited Stacked device position identification
WO2014041235A1 (en) * 2012-09-14 2014-03-20 Nokia Corporation Remote control system
WO2014045860A1 (ja) * 2012-09-24 2014-03-27 Necカシオモバイルコミュニケーションズ株式会社 情報機器、対向機器、通信システム、情報機器の制御方法及びプログラム
US9477313B2 (en) 2012-11-20 2016-10-25 Samsung Electronics Co., Ltd. User gesture input to wearable electronic device involving outward-facing sensor of device
US11372536B2 (en) 2012-11-20 2022-06-28 Samsung Electronics Company, Ltd. Transition and interaction model for wearable electronic device
US9030446B2 (en) 2012-11-20 2015-05-12 Samsung Electronics Co., Ltd. Placement of optical sensor on wearable electronic device
US11157436B2 (en) 2012-11-20 2021-10-26 Samsung Electronics Company, Ltd. Services associated with wearable electronic device
US10185416B2 (en) 2012-11-20 2019-01-22 Samsung Electronics Co., Ltd. User gesture input to wearable electronic device involving movement of device
US10423214B2 (en) 2012-11-20 2019-09-24 Samsung Electronics Company, Ltd Delegating processing from wearable electronic device
US10551928B2 (en) 2012-11-20 2020-02-04 Samsung Electronics Company, Ltd. GUI transitions on wearable electronic device
US8994827B2 (en) 2012-11-20 2015-03-31 Samsung Electronics Co., Ltd Wearable electronic device
US11237719B2 (en) 2012-11-20 2022-02-01 Samsung Electronics Company, Ltd. Controlling remote electronic device with wearable electronic device
CN103905092A (zh) * 2012-12-27 2014-07-02 鸿富锦精密工业(武汉)有限公司 具有蓝牙功能的装置及蓝牙连接方法
US20140355389A1 (en) * 2013-05-29 2014-12-04 Nokia Corporation Method and apparatus for establishing device communication
US9373208B2 (en) * 2013-09-11 2016-06-21 Sony Corporation Secure remote control for operating closures such as garage doors
US20160182930A1 (en) * 2013-09-13 2016-06-23 Isabella V. Ortiz Systems and methods for enabling simultaneous second screen data access during ongoing primary screen programming
US9245192B2 (en) * 2013-09-20 2016-01-26 Here Global B.V. Ad collateral detection
KR102245362B1 (ko) * 2014-01-24 2021-04-28 엘지전자 주식회사 서로 다른 통신 프로토콜을 사용하는 디바이스들 간 무선 네트워크 연결을 제어하기 위한 방법 및 이를 위한 프로그램이 기록된 컴퓨터로 읽을 수 있는 기록 매체
CN106462526B (zh) 2014-02-07 2019-12-31 安晟信医疗科技控股公司 用于多主总线协议的方法及装置
TWI563853B (en) * 2014-02-27 2016-12-21 Beseye Cloud Security Co Ltd Surveillance system and the operation process thereof
US10691332B2 (en) 2014-02-28 2020-06-23 Samsung Electronics Company, Ltd. Text input on an interactive display
US20170149696A1 (en) * 2014-04-10 2017-05-25 Hewlett Packard Enterprise Development Lp Connection classification
US9712948B2 (en) * 2014-04-30 2017-07-18 Avago Technologies General Ip (Singapore) Pte. Ltd. Image triggered pairing
US9679538B2 (en) * 2014-06-26 2017-06-13 Intel IP Corporation Eye display interface for a touch display device
WO2016017945A1 (en) * 2014-07-29 2016-02-04 Samsung Electronics Co., Ltd. Mobile device and method of pairing the same with electronic device
KR102437104B1 (ko) * 2014-07-29 2022-08-29 삼성전자주식회사 모바일 디바이스에서 촬영된 전자 기기와 페어링하는 방법 및 장치
US9392398B2 (en) * 2014-09-30 2016-07-12 Apple Inc. Wireless proximity pairing of user-interface devices
KR102197851B1 (ko) * 2014-10-20 2021-01-04 한국전자통신연구원 단말간 직접 통신에서 대상 발견 방법 및 장치
KR102332752B1 (ko) * 2014-11-24 2021-11-30 삼성전자주식회사 지도 서비스를 제공하는 전자 장치 및 방법
KR102302327B1 (ko) * 2014-12-08 2021-09-15 엘지전자 주식회사 단말 장치, 정보 표시 시스템 및 단말 장치의 제어 방법
WO2016115068A1 (en) * 2015-01-13 2016-07-21 Thomson Licensing Atsc 3.0 display discovery via a mobile secondary device
JP6473014B2 (ja) * 2015-02-27 2019-02-20 トッパン・フォームズ株式会社 情報提供システム及び情報提供装置
US10353949B2 (en) * 2015-09-02 2019-07-16 David Webster Optically initiated configuration and cryptographic test key transfer for testing interconnected electronic devices
TWI563407B (en) * 2015-09-11 2016-12-21 Noodoe Corp Methods and systems for registering detection of electronic devices, and related computer program products
CN105204742B (zh) * 2015-09-28 2019-07-09 小米科技有限责任公司 电子设备的控制方法、装置及终端
US10061552B2 (en) * 2015-11-25 2018-08-28 International Business Machines Corporation Identifying the positioning in a multiple display grid
US10334076B2 (en) * 2016-02-22 2019-06-25 Google Llc Device pairing in augmented/virtual reality environment
US10120635B2 (en) * 2016-03-09 2018-11-06 Samsung Electronics Co., Ltd. Configuration and operation of display devices including device management
WO2017210908A1 (zh) 2016-06-08 2017-12-14 华为技术有限公司 处理方法与终端
WO2017219288A1 (zh) 2016-06-22 2017-12-28 华为技术有限公司 头戴式显示设备及其处理方法
KR101715142B1 (ko) * 2016-08-29 2017-03-14 주식회사 리얼야구존 모바일 기기를 이용하는 스크린 야구 경기 방법
US10560844B2 (en) * 2017-03-15 2020-02-11 International Business Machines Corporation Authentication of users for securing remote controlled devices
US20190034152A1 (en) * 2017-07-25 2019-01-31 Lenovo Enterprise Solutions (Singapore) Pte. Ltd. Automatic configuration of display settings based on a detected layout of multiple display devices
US10725629B2 (en) 2018-06-25 2020-07-28 Google Llc Identifying and controlling smart devices
WO2020022780A1 (en) * 2018-07-25 2020-01-30 Samsung Electronics Co., Ltd. Method and apparatus for establishing device connection
US11784845B2 (en) 2018-09-28 2023-10-10 Qualcomm Incorporated System and method for disambiguation of Internet-of-Things devices
KR102137194B1 (ko) * 2018-10-31 2020-07-24 엘지전자 주식회사 이동 단말기
US10812216B2 (en) 2018-11-05 2020-10-20 XCOM Labs, Inc. Cooperative multiple-input multiple-output downlink scheduling
US10659112B1 (en) 2018-11-05 2020-05-19 XCOM Labs, Inc. User equipment assisted multiple-input multiple-output downlink configuration
US10756860B2 (en) 2018-11-05 2020-08-25 XCOM Labs, Inc. Distributed multiple-input multiple-output downlink configuration
US10432272B1 (en) 2018-11-05 2019-10-01 XCOM Labs, Inc. Variable multiple-input multiple-output downlink user equipment
US10756795B2 (en) 2018-12-18 2020-08-25 XCOM Labs, Inc. User equipment with cellular link and peer-to-peer link
US11063645B2 (en) 2018-12-18 2021-07-13 XCOM Labs, Inc. Methods of wirelessly communicating with a group of devices
US11330649B2 (en) 2019-01-25 2022-05-10 XCOM Labs, Inc. Methods and systems of multi-link peer-to-peer communications
EP3690609B1 (en) * 2019-01-30 2021-09-22 DENTSPLY SIRONA Inc. Method and system for controlling dental machines
US10756767B1 (en) 2019-02-05 2020-08-25 XCOM Labs, Inc. User equipment for wirelessly communicating cellular signal with another user equipment
JPWO2020217909A1 (zh) * 2019-04-23 2020-10-29
US11348320B2 (en) 2020-04-02 2022-05-31 Samsung Electronics Company, Ltd. Object identification utilizing paired electronic devices
WO2021201638A1 (en) * 2020-04-02 2021-10-07 Samsung Electronics Co., Ltd. Electronic device and method for object identification utilizing paired electronic device
TWI824729B (zh) * 2021-10-15 2023-12-01 仁寶電腦工業股份有限公司 主機裝置的授權方法、非暫態電腦可讀取儲存媒體及主機裝置

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2003041000A1 (en) * 2001-11-05 2003-05-15 Evryx Technologies Image capture and identification system and process
WO2007027394A2 (en) * 2005-08-31 2007-03-08 Motorola, Inc. Advertising availability for ad-hoc networking based on stored device history
WO2007109366A2 (en) * 2006-03-20 2007-09-27 Absolute Software Corporation Method for determining identification of an electronic device
TW200923655A (en) * 2007-11-21 2009-06-01 Ind Tech Res Inst Intelligent remote interface apparatus, system and the method thereof
US20090156123A1 (en) * 2007-12-18 2009-06-18 Lg Electronics Inc. Mobile terminal and method for displaying wireless devices thereof
TW200931910A (en) * 2008-01-09 2009-07-16 Inventec Corp A NIC and method of booting of the remote device

Family Cites Families (28)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6037936A (en) * 1993-09-10 2000-03-14 Criticom Corp. Computer vision system with a graphic user interface and remote camera control
JPH0984147A (ja) 1995-09-08 1997-03-28 Sony Corp リモートコントローラ、電子機器、及び電子機器システム
US6353450B1 (en) * 1999-02-16 2002-03-05 Intel Corporation Placing and monitoring transparent user interface elements in a live video stream as a method for user input
US6396475B1 (en) * 1999-08-27 2002-05-28 Geo Vector Corp. Apparatus and methods of the remote address of objects
JP3756741B2 (ja) 2000-08-21 2006-03-15 株式会社東芝 情報交換装置およびキャッシュレジスタ装置
US7031875B2 (en) * 2001-01-24 2006-04-18 Geo Vector Corporation Pointing systems for addressing objects
US6783071B2 (en) * 2001-06-18 2004-08-31 Symbol Technologies, Inc Scanner pairing in a bluetooth POS network
JP3761505B2 (ja) 2002-03-04 2006-03-29 株式会社東芝 通信システム、無線通信端末及び無線通信装置
KR100530233B1 (ko) * 2003-02-17 2005-11-22 삼성전자주식회사 애드호크 네트워크로 연결가능한 기기를 사용자에게알려주어 사용자의 선택에 의해 효율적인 연결 설정을가능하게 해주는 블루투스 무선통신 장치 및 통신방법
EP1571584A1 (en) 2004-03-03 2005-09-07 Honda Research Institute Europe GmbH Integrating visual and object information in a pervasive computing environment
JP2005268941A (ja) 2004-03-16 2005-09-29 Sony Corp 遠隔制御装置、遠隔制御方法及びそのプログラム
JP4745737B2 (ja) * 2004-08-06 2011-08-10 キヤノン株式会社 撮像装置、通信システム、伝送方法、撮像装置の制御方法、及びコンピュータプログラム
US7602420B2 (en) * 2004-08-06 2009-10-13 Canon Kabushiki Kaisha Image capture apparatus, method for controlling the same and computer program
JP2006081028A (ja) 2004-09-10 2006-03-23 Kyocera Mita Corp 遠隔操作システム、通信装置及び電気機器
US20060190812A1 (en) * 2005-02-22 2006-08-24 Geovector Corporation Imaging systems including hyperlink associations
US7519200B2 (en) * 2005-05-09 2009-04-14 Like.Com System and method for enabling the use of captured images through recognition
CN101213550B (zh) * 2005-06-30 2011-09-28 诺基亚公司 允许对呈现和信息***的信息表面的目标位置进行操作的照相机控制装置
KR101170081B1 (ko) 2005-09-07 2012-08-01 삼성전자주식회사 움직임에 대응되는 리모콘 신호를 전송하는 리모트컨트롤러
JP4676303B2 (ja) * 2005-10-18 2011-04-27 株式会社日立製作所 端末装置
US20080125040A1 (en) * 2006-11-29 2008-05-29 Apple Computer, Inc. Location discovery using bluetooth
JP5064091B2 (ja) 2007-04-13 2012-10-31 株式会社Pfu スキャナ装置、および、画像読取表示方法
KR101375481B1 (ko) 2007-07-06 2014-03-19 삼성전자주식회사 통신 시스템에서 통신 모드 결정 방법 및 장치
US8059573B2 (en) * 2007-07-30 2011-11-15 Qualcomm Incorporated Method of pairing devices
WO2009046574A1 (en) 2007-10-11 2009-04-16 Motorola, Inc. Method and system for contact management and organization
JP5136040B2 (ja) 2007-12-13 2013-02-06 日本電気株式会社 携帯端末及びそれを用いた通信方法並びにプログラム
US20090176451A1 (en) * 2008-01-04 2009-07-09 Microsoft Corporation Encoded color information facilitating device pairing for wireless communication
EP2401865B1 (en) * 2009-02-27 2020-07-15 Foundation Productions, Llc Headset-based telecommunications platform
US8818274B2 (en) 2009-07-17 2014-08-26 Qualcomm Incorporated Automatic interfacing between a master device and object device

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2003041000A1 (en) * 2001-11-05 2003-05-15 Evryx Technologies Image capture and identification system and process
WO2007027394A2 (en) * 2005-08-31 2007-03-08 Motorola, Inc. Advertising availability for ad-hoc networking based on stored device history
WO2007109366A2 (en) * 2006-03-20 2007-09-27 Absolute Software Corporation Method for determining identification of an electronic device
TW200923655A (en) * 2007-11-21 2009-06-01 Ind Tech Res Inst Intelligent remote interface apparatus, system and the method thereof
US20090156123A1 (en) * 2007-12-18 2009-06-18 Lg Electronics Inc. Mobile terminal and method for displaying wireless devices thereof
TW200931910A (en) * 2008-01-09 2009-07-16 Inventec Corp A NIC and method of booting of the remote device

Also Published As

Publication number Publication date
US9667817B2 (en) 2017-05-30
TW201110784A (en) 2011-03-16
EP2597796A3 (en) 2013-12-11
KR20120049272A (ko) 2012-05-16
KR101755147B1 (ko) 2017-07-19
US20110016405A1 (en) 2011-01-20
JP2015038740A (ja) 2015-02-26
BR112012001134A2 (pt) 2016-02-23
EP2597796A1 (en) 2013-05-29
KR20160006262A (ko) 2016-01-18
WO2011009069A3 (en) 2011-04-28
JP6026474B2 (ja) 2016-11-16
CN102625981A (zh) 2012-08-01
JP2012533802A (ja) 2012-12-27
ES2793332T3 (es) 2020-11-13
WO2011009069A2 (en) 2011-01-20
KR101583245B1 (ko) 2016-01-08
HUE048977T2 (hu) 2020-08-28
EP3678309A1 (en) 2020-07-08
US20150138376A1 (en) 2015-05-21
EP2454834B1 (en) 2020-03-25
US8818274B2 (en) 2014-08-26
US20140327786A1 (en) 2014-11-06
KR20140090263A (ko) 2014-07-16
EP2454834A2 (en) 2012-05-23
US8971811B2 (en) 2015-03-03

Similar Documents

Publication Publication Date Title
TWI423709B (zh) 在主設備和目標設備之間自動介面連接
CN103748609B (zh) 用于传送来自不同设备的媒体回放的方法
CN103944963B (zh) 数据同步方法、装置、设备及***
US20130031261A1 (en) Pairing a device based on a visual code
CN104639972B (zh) 一种分享内容的方法、装置及设备
KR102011360B1 (ko) 디바이스에서 어플리케이션을 실행하는 방법 및 그 장치
CN110102063B (zh) 标识绑定方法、装置、终端、服务器及存储介质
US20210406304A1 (en) Electronic device for generating video comprising character and method thereof
WO2014135427A1 (en) An apparatus and associated methods
KR102501713B1 (ko) 영상 표시 방법 및 그 전자장치
US9571966B2 (en) Mobile device, server, and content management method for a system comprising same
US8953050B2 (en) Interaction with electronic device recognized in a scene captured by mobile device
CN104615743B (zh) 图片显示方法及装置
CN104125268B (zh) 文件下载方法、装置、路由设备及终端设备
US20150023547A1 (en) Information providing system having content providing apparatus and terminal apparatus, and control method thereof
KR20150059533A (ko) 슬라이드 쇼를 제공하는 시스템 및 방법
FR2968425A1 (fr) Procede de transfert de donnees multimedia dans un reseau
CN102625981B (zh) 用于在主设备和目标设备之间自动接口的方法和设备
WO2023211660A1 (en) Camera settings and effects shortcuts
TWI494779B (zh) 自動更新及過濾資訊的方法
JP2013106156A (ja) 機器制御装置、制御プログラム、記録媒体、機器制御方法、および機器制御システム

Legal Events

Date Code Title Description
MM4A Annulment or lapse of patent due to non-payment of fees