JP2013529408A - ソーシャルネットワーク用メディアフィンガープリント - Google Patents

ソーシャルネットワーク用メディアフィンガープリント Download PDF

Info

Publication number
JP2013529408A
JP2013529408A JP2013502870A JP2013502870A JP2013529408A JP 2013529408 A JP2013529408 A JP 2013529408A JP 2013502870 A JP2013502870 A JP 2013502870A JP 2013502870 A JP2013502870 A JP 2013502870A JP 2013529408 A JP2013529408 A JP 2013529408A
Authority
JP
Japan
Prior art keywords
information
content
user
media
users
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2013502870A
Other languages
English (en)
Other versions
JP5711355B2 (ja
Inventor
マリンソン ドミニク
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Interactive Entertainment Inc
Original Assignee
Sony Interactive Entertainment Inc
Sony Computer Entertainment Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Interactive Entertainment Inc, Sony Computer Entertainment Inc filed Critical Sony Interactive Entertainment Inc
Publication of JP2013529408A publication Critical patent/JP2013529408A/ja
Application granted granted Critical
Publication of JP5711355B2 publication Critical patent/JP5711355B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/40Information retrieval; Database structures therefor; File system structures therefor of multimedia data, e.g. slideshows comprising image and additional audio data
    • G06F16/43Querying
    • G06F16/432Query formulation
    • G06F16/433Query formulation using audio data
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/40Information retrieval; Database structures therefor; File system structures therefor of multimedia data, e.g. slideshows comprising image and additional audio data
    • G06F16/43Querying
    • G06F16/432Query formulation
    • G06F16/434Query formulation using image data, e.g. images, photos, pictures taken by a user
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00Commerce
    • G06Q30/02Marketing; Price estimation or determination; Fundraising
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/478Supplemental services, e.g. displaying phone caller identification, shopping application
    • H04N21/4788Supplemental services, e.g. displaying phone caller identification, shopping application communicating with other users, e.g. chatting
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/10File systems; File servers
    • G06F16/14Details of searching files based on file metadata
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/40Information retrieval; Database structures therefor; File system structures therefor of multimedia data, e.g. slideshows comprising image and additional audio data
    • G06F16/43Querying
    • G06F16/435Filtering based on additional data, e.g. user or group profiles
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/40Information retrieval; Database structures therefor; File system structures therefor of multimedia data, e.g. slideshows comprising image and additional audio data
    • G06F16/48Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00Commerce
    • G06Q30/02Marketing; Price estimation or determination; Fundraising
    • G06Q30/0241Advertisements
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
    • G06Q50/01Social networking
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/81Monomedia components thereof
    • H04N21/812Monomedia components thereof involving advertisement data

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Multimedia (AREA)
  • Business, Economics & Management (AREA)
  • General Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • Finance (AREA)
  • Strategic Management (AREA)
  • Development Economics (AREA)
  • Accounting & Taxation (AREA)
  • Databases & Information Systems (AREA)
  • Data Mining & Analysis (AREA)
  • Mathematical Physics (AREA)
  • Marketing (AREA)
  • General Business, Economics & Management (AREA)
  • Entrepreneurship & Innovation (AREA)
  • Economics (AREA)
  • Game Theory and Decision Science (AREA)
  • Signal Processing (AREA)
  • Information Transfer Between Computers (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Human Computer Interaction (AREA)

Abstract

映画、テレビ番組、およびラジオ放送などのメディアを識別するために、オーディオフィンガープリントおよびその他のメディアマッチング技術が利用されうる。ユーザデバイスは画像、音声および/または映像情報を記録し、さらに前記メディアを識別して前記ユーザに補足コンテンツあるいは情報を提供するために用いることができるマッチングサービスに情報をアップロードできる。ユーザはソーシャルネットワークサイトにこの情報をアップデートしたり、この情報をコンテナの一部としてピアネットワークのピアにパスするなどして 他のユーザとこの情報を共有することができる。ユーザはタグが付けられたコンテンツを追加し、コメントや評価をし、さらにそれ以外の方法で、少なくとも一部をタグが付けられたメディアコンテンツに基づきインタラクトすることができる。

Description

本願は米国特許出願第12/753,001号(2010年4月1日出願)の継続出願であり、該出願は本明細書に参考のために組み込まれている。本願は発明の名称を「Media Fingerprinting for Content Determination and Retrieval」とする、係属中の米国特許出願第12/752,979号(2010年4月1日出願)に関連し、該出願は本明細書に参考のために組み込まれている。
現代の消費者は増加しつつあるソースからの、ますます多くの様々な情報にさらされている。消費者はテレビをつけたまま、あるいはその他の情報源を再生した状態で、電子書籍を読んだり、友人とチャットしたり、携帯端末でゲームをしたり、といった別のことをすることが多い。また、ユーザは音声コンテンツや映像コンテンツが流れている部屋を単に行き来するだけの場合もある。
ユーザは再生されているメディアに意識を集中していないので、ユーザがメディアに意識を向けるのは、何か興味のあるものが示されたとき(例えば、コマーシャルや激しいアクションシーン、興味のある音楽)に限られてしまう。ユーザがメディアに意識を向けていなければ、ユーザは何が起きているのかを正確に理解することはできない。例えばコマーシャルの場合、ユーザはコマーシャルの終わり頃に意識をコマーシャルに向けることがある。この場合は遅すぎて宣伝されている商品やサービスを決定するには間に合わない。
別の場合では、ユーザは音声や映像表示に意識を集中させているが、そのような表示に関連する情報を欲しいと思う場合もある。例えば、ある商品のコマーシャルが画面に表示されると、ユーザはその商品の販売場所や値段といった、その商品に関する他の情報を得たいと思うことがある。ユーザがある映画を見ている場合、ユーザは現在流れているシーンに出ている俳優の名前やそのシーンの舞台、あるいは主役が着ているシャツの種類などを知りたいと思うことがある。ユーザはインターネット検索やその他これに類似するアプローチにより情報の検索を試みることができるが、消費者は必要なメモを取るための紙と筆記用具とを持ち合わせていないことが多く、あるいは、 書き留めるほどの詳細な情報でもない場合もある。消費者がすぐにメモを取ることができなければ、その表示に関する詳細を忘れてしまうことがあり、あるいは、そもそもその表示に興味を持ったことさえも忘れてしまうことがある。
さらに、既存の方法には、ユーザがこの情報を友人や他のユーザと素早く簡単に共有できるものはない。ユーザが例えば興味のある映画を識別することができたとしても、特定の面白い場面やその他の興味深い場面の一部をユーザが簡単に友人に示すことができる方法はない。ユーザはいつでも情報を検索し、そのコンテンツの一部を他のユーザに示すよう試みることはできるものの、それに必要な作業量が原因となって、ほとんどのユーザは、コンテンツに関する通常のコメント以上のものを提供することはない。
各種実施形態に従うシステムおよび方法は、上記のうちの少なくとも一部、およびメディア表示に関連する補足コンテンツや関連情報を識別、検索、および/またはこれらへアクセスするための従来のアプローチのほか、識別されたコンテンツや情報を共有するためのアプローチの問題点に取り組むものである。具体的には、ユーザは各種実施形態によりメディア表示に関する情報を得ることができ、例えば、適切なユーザデバイスを使用して表示の音声セグメントおよび/または映像セグメントを記録することによりそのような情報を得ることができる。このメディア表示は、生放送のテレビ番組、オンデマンド映画、物理的媒体からレンダリングしたビデオコンテンツなど、適切な表示であればどのようなものであってもよい。ユーザは、その映像表示の少なくとも1つの形態の識別を試みるために、あるいは該映像表示の少なくとも1つの形態に関する追加情報の取得を試みるために、遠隔システムや遠隔サービスにリクエストを送信することができる。
例えば、ユーザは特定の製品についてのコマーシャルに関する情報を得ることができる。これに応えて、該コマーシャルを識別するシステムは、製品情報、仕様、価格などの情報のほかに、メーカのウェブサイトやユーザがその製品を購入できる場所のリンクをユーザに送信しうる。別の例では、ユーザはある映画のあるシーンに関する情報を得ることができる。これに応えて、該映画を識別するシステムは、映画のタイトルや製作年、俳優情報、そのシーンで使用されている製品についての情報などの情報、あるいはその他これに類似する情報をユーザに送信しうる。さらに該システムは、ユーザに映画へのリンクを提供する、あるいは、映画版を特定のデバイスに配信するなど、ユーザが映画のコピーを入手することができるようにする。以下に、各種の実施形態との関連で各種のその他の例を記載する。
ユーザが情報を入手すると、ユーザは入手した情報を他のユーザと共有することができる。ある実施形態では、ユーザはソーシャルネットワークといった、ユーザが興味のある情報を投稿できるウェブサイトにこの情報をアップロードすることができる。ある実施形態では、このようなサイトは特定の種類あるいはインスタンスのコンテンツに関連する。ユーザはこのような種類あるいはインスタンスの様々なコンテンツをアップロードでき、タグを付けることができ、リンクすることができ、該コンテンツについてレビューおよび/またはコメントすることができる。
他の実施形態では、ピアネットワーク上のピアやその他の友人あるいはグループメンバーは、後述するコンテナをパスすることにより、あるいはそのグループが興味のある情報を含む別の仮想コンポーネントのコンテンツを共有することにより、情報を共有することができる。例えば、これらのユーザが興味があるとことが分かった映像や音声クリップをピア間で共有することができる。各ピアはコンテンツについてコメントあるいはレビューすることができ、さらに、自身のコンテンツを追加することができる。
本明細書に記載された教示や示唆に照らして、その他の様々な態様やアプローチが当業者にとって明らかである。
本発明の開示に従い各種実施形態を図面を参照して以下に記載する。
各種実施形態に従い利用可能な様々なユーザデバイスを示した説明図。 各種実施形態を実現することができる環境を示した説明図。 一実施形態に従う、コンテンツ情報のマッチングがあったときにユーザに示されうる画面を例示的に示した図。 一実施形態に従う、タグが付けられた映画のシーンを例示的に示した画面の図。 一実施形態に従う、様々な映画からタグが付けられたシーンを例示的に示した画面の図。 一実施形態に従う、タグが付けられた各種のコンテンツを例示的に示した画面の図。 各種実施形態に従う、使用可能なタグが付けられたコンテンツを共有するための第2の例示的構成を示す図。 各種実施形態に従う、使用可能なタグが付けられたコンテンツを共有するための第2の例示的構成を示す図。 各種実施形態に従う、使用可能なコンテンツにタグを付けて共有するための例示的プロセスを示す図。 各種実施形態の態様を実施するために利用されうる例示的デバイスの構成要素を示す図。
各種実施形態に従うシステム及び方法は、メディア表示に関連する補足コンテンツを識別するステップ、検出するステップ、および/あるいは該コンテンツにアクセスするステップを提供する。ユーザは本明細書に記載した様々な各種の方法により、他のユーザとこの情報を共有することができる。具体的には、各種実施形態に従うアプローチの各々は、少なくとも1つの電子デバイスを介して示されるコンテンツを識別するために、ビデオおよび/またはオーディオフィンガープリントなどの処理を利用するものである。ユーザは音声、画像および/または映像情報を記録、キャプチャ、あるいはこれ以外の別の方法で記憶し、これを利用して特定のメディアの一部の少なくともアイデンティティを決定することができる。この情報に少なくともある程度基づいて、メディアコンテンツの特定のインスタンスに「タグをつける」消費者は、そのメディアに関連する様々な情報あるいはコンテンツをいくつでも受信することができる。次いで、ユーザは、タグが付けられたコンテンツをソーシャルネットワークサイトにアップロードする、あるいはピアネットワークを介してピアと共有する、などによりこの情報を他のユーザと共有することができる。
図1は消費者がテレビやパソコンモニタ、特にビデオスクリーンなどの表示装置102に表示されるビデオプログラムを見ている例示的環境100を示す。典型的に、この表示装置102はビデオ画像だけでなく、これに対応する音声信号も提供する。しかし、静止画像、音声、あるいはビデオコンテンツだけを利用するその他のデバイスが利用可能である。消費者は表示装置102の視聴範囲内にいずれのその他の電子デバイスを複数有することができ、例えば、ビデオプレーヤやゲームシステム、あるいはセットトップボックスなどの表示装置に接続された少なくとも1つの固定された構成要素104を有することができる。さらに、消費者は携帯電話106、携帯ゲーム装置108、携帯用情報端末(PDA)110、あるいはいずれのその他これに類似するコンピューティングデバイスや電子デバイスを複数有することができる。
これらの電子デバイスの少なくとも1つは、表示装置102を介して示されるメディアについての情報を得ることができる。例えば、ある電子デバイスは表示装置に表示されるコンテンツのビデオセグメント、あるいは少なくとも1か2のフレームをキャプチャすることができるビデオカメラを備えうる。別のデバイスは、少なくとも最短の時間周期(例えば、少なくとも2秒、5秒、あるいは10秒)の間示されたメディアに対応する音声情報をキャプチャすることができるように、デジタル記録回路を備えうる。直接接続されたデバイスの各々に対しては、このオーディオフィードは(アナログ・デジタル変換(A2D)やピュアデジタルを介して)デバイスのモジュールやアプリケーションにより直接監視されうる。携帯デバイスの各々に対しては、マイクロホンやその他これに類似するメディアキャプチャリング要素(MCE:media capturing element)により、周期的に、継続的に、あるいは選択された時間で、放送中の音声(および/あるいは映像または画像)がサンプリングあるいはキャプチャされうる。さらに、電子デバイスは少なくとも1つの出力機構、例えばネットワーク接続や出力ポートを含みうる。これにより、キャプチャされたコンテンツに関する情報が電子デバイスにより外部システムやサービスへ送信できるようになる。
例えば、図2の環境200を検討する。この例では、ユーザデバイスは少なくとも1つのネットワークへの接続を介して遠隔サーバ208(あるいはその他これに類似のシステム、サービス、あるいはデバイス)に接続することができる。このネットワークは、セルラーネットワーク、ブロードバンドネットワーク、イントラネット、インターネット、プライベートピアツーピアネットワークなど、いずれの適切なネットワークあるいはネットワークの組合せであってよい。ユーザデバイス204は、セルラー接続やWi−Fi接続などのダイレクトネットワーク接続によりネットワークに接続されてもよい。あるいは、ドッキングステーションやホームコンピュータなどの1以上の媒介装置を介してネットワークに接続されてもよい。ユーザデバイス204は、キャプチャされたコンテンツに関する情報を遠隔サーバにアップデートさせることが可能であり、該サーバにおいて、該情報と、少なくとも1つのデータレポジトリ210に、あるいはこれに類似する記憶先に記憶された情報とのマッチングが試みられうる。
当然のことであるが、コンテンツおよび/または消費者についての情報を取得するために、1以上のデータソースに接続している1以上のサーバ(ウェブサーバやアプリケーションサーバなど)が様々なレベルで存在してもよいし、および/または、少なくとも1つのデータベースに接続している検索サーバが存在してもよい。少なくとも1つのサーバ208および少なくとも1つのデータベース210の他に、補足コンテンツプロバイダ、メディアマッチングサービス、あるいはその他これに類似のエンティティは、いずれの付加的構成要素および周知のアプリケーションあるいはそのような目的のために後に構築されたアプリケーションをいくつでも利用することができる。例えば、マッチングサービスはウェブサービスリクエストを受信するように構成されうる。リクエストの各々は少なくとも1つのルータおよび/またはウェブサーバにより受信される。各リクエストはアプリケーションサーバやその他これに類似する構成要素に送られ、各リクエストが処理される。少なくとも1つのアプリケーションサーバは、広告などのコンテンツを識別し、追加の広告情報あるいは製品情報など、対応の補足コンテンツを選択するために、認識モジュールあるいはその他これに類似の構成要素など、少なくとも1つのモジュールを提供するための命令を実行することができる。
各種の実施形態では、放送会社212や広告主214などのコンテンツプロバイダはコンテンツの特定のインスタンスに関する情報の提供が可能である。該情報は解析、分析、あるいは本明細書の他の箇所に記載しているようにそれ以外の方法で処理され、さらにこの後のコンテンツマッチングで利用するために、あるいはその他これに類似の目的で利用するためにデータベース210に記憶される。同様に、広告主214(およびいずれの他の適切なコンテンツプロバイダ)も各種の放送システム212、あるいはその他これに類似の放送エンティティへ情報の提供が可能であり、これにより、(コマーシャルとして、あるいはプロダクトプレースメントあるいはオーバーレイプログラムとして)コンテンツが放送されるようにすることができ、あるいはそれ以外の方法で放送受信装置および/または再生装置202によりコンテンツが送受信されるようにすることができる。
当技術分野で周知のように、あるいは当技術分野で後に構築されているように、放送信号を送信および/あるいは受信する目的でいずれの適切な構成要素あるいはシステムを利用することができる。放送受信装置および/または再生装置は、放送信号の受信およびデコードだけでなく、コンテンツの表示あるいはそれ以外の方法で伝達が可能な1以上の構成要素を含みうる。そのようなデバイスは、セットトップボックス、テレビ、衛星放送受信機、アナログあるいはデジタル音声受信機、ラジオ、テレビゲーム機、メディアプレーヤ、あるいはその他これらに類似の構成要素などを少なくとも1つ含みうる。さらに、無線放送の例が示されているが、いずれのその他の放送手段、例えば、デジタルケーブル、電波、衛星通信なども各種実施形態の範囲内で利用できることを理解されたい。各種実施形態に従い、いずれの種類のコンテンツの放送(ビデオ放送、テレビ放送、ラジオ放送など)が利用されうる。
マッチングが検出されれば、このマッチングに対応する情報がユーザに送信される。ユーザがスマートフォンなどのコンピューティングデバイスで情報をキャプチャする実施形態の各々では、コンテンツのアイデンティティなどの情報がデバイス自体に送信されうる。したがってユーザはコンテンツのキャプチャに使用したデバイスと同一のデバイスに情報を得ることができる。その他の実施形態の各々では、情報はユーザにより別のデバイスに送信されることもある。このデバイスはユーザにより特定されるか、その他の方法で決定されうる。例えば、ユーザは、コンテンツを携帯電話でキャプチャし、その結果をEメールまたは別の適切なメカニズムを介して、結果を関連のウェブサイト、製品のページ等の情報にアクセスできる自宅のパソコンに受信したい場合がある。別の実施形態の各々では、ユーザが番組の次回の放送を予約録画するために、情報がケーブルテレビ用チューナー(ケーブルボックス)あるいはデジタルビデオレコーダ(DVR)に送信されうる。
さらに別の実施形態の各々では、ユーザは情報をゲーム機、ポータブルメディアプレーヤ、あるいは、識別されたメディアに対応する特定コンテンツのダウンロードが可能であるか、それ以外の方法で該特定コンテンツにアクセス可能なその他これらに類似の電子デバイスに送信させることができる。ある実施形態では、情報がキャプチャされ、および/またはアップロードされて分析される時点でユーザはコンテンツを受信するためのデバイスを選択することができる。例えば、表示されている番組に興味のあるユーザはその結果をDVRに送信させることができ、これによりDVRがその番組の次回の放送を自動録画することができる。一方で、番組中で俳優が着用しているシャツに興味のあるユーザはホームコンピュータにその情報を送信させることができ、ユーザはこのホームコンピュータにおいてそのコンテンツに関する特定の情報をフォローするか選択することができる。さらに、ある実施形態では、ユーザは検索される情報の種類、例えば、コンテンツのコピー、表示されている製品に関する情報、俳優、あるいはその他番組固有情報、を特定することができる。本明細書に記載された教示や提案に照らして、当業者にとっては明らかであろうこのような情報を選択するためのいずれの適切なインタフェースを使用することができる。
ユーザによりキャプチャされたコンテンツをマッチングする一例では、キャプチャされたメディアファイル(例えば、音声、映像、および/または1以上の画像)あるいはキャプチャされたメディアファイルに対応する情報は、受信したメディアファイルの分析が可能なシステムあるいはサービスに受信され、ハッシュ値あるいはその他これに類似の識別特徴が抽出あるいは生成される。分析したメディアファイルに関する情報(例えば、ハッシュ情報)は少なくとも1つのデータベースあるいはその他これに類似の場所に記憶された類似する情報と比較される。ある実施形態では、オーディオフィンガープリントプロセスを利用して、ユーザがキャプチャした音声情報とデータベースに記憶された音声情報とが比較される。ユーザがキャプチャしたのが、例えば、音声コンテンツおよび映像コンテンツあるいは画像コンテンツであろうと音声コンテンツだけであろうと、ユーザによりキャプチャされたコンテンツの決定を試みるために音声部分が分析されうる。オーディオフィンガープリントについてのアプローチは、例えば、発明の名称を「Generating and Matching Hashes of Multimedia Content」とする米国特許第7,549,052号(2009年6月16日交付)に記載されており、該特許は本明細書に参考のために組み込まれている。データベースを利用してマッチングが検出されれば、そのマッチングコンテンツに対応するコンテンツ(本明細書中では「補足コンテンツ」と称する)が決定および/あるいは検出されうる。例えば、キャプチャされたコンテンツがある製品のコマーシャルであると判断されれば、補足コンテンツとしては、その製品名および/または製造メーカ名などの情報、該コマーシャルのデジタルコピー、リンク、あるいはその広告についての情報を検索をするためのその他のナビゲーション要素(例えば、その製品のウェブサイト)、あるいはその他これらに類似するコンテンツなどの情報が挙げられうる。
キャプチャされたコンテンツがあるテレビ番組に対応するものであれば、補足コンテンツとしては、その番組に出演していた俳優やその番組の撮影地のアイデンティティなどの情報、その番組にアクセスできる、あるいはその番組をダウンロードできる場所などの情報が挙げられうる。各種のその他補足コンテンツに加えて本明細書の他の部分で検討あるいは提案した補足コンテンツが提供されうる。次いで、検出された補足コンテンツはいずれも、リクエストのあったユーザデバイスに情報を送信する、識別されたメディアプレーヤあるいはその他これに類似するデバイスに番組を送信する、情報のページを集め、ユーザがアクセス可能なリンクを提供する、などにより、少なくとも1つの指定されたデバイスあるいは場所に提供されうる。ある実施形態では、ユーザは受信する補足コンテンツの種類、コンテンツを送信する場所、およびその他これに類似する情報を識別するか、それ以外の別の方法で選択することができる。
データベースでマッチングの検出がなければ、少なくとも閾値信頼レベルの範囲内で、あるいは他のこれに類似するマッチング精度基準の範囲内で、有用情報の検出を試みるために、キャプチャされたメディアファイルの情報がさらに処理されうる(314)。例えば、キャプチャされたコンテンツの有益な形態を決定するために、キャプチャされたコンテンツは音声認識や画像認識、光学式文字認識(OCR:Optical Character Recognition)により、あるいは本明細書の他の部分で検討したいずれの他の適切なアプローチにより分析されうる。例えば、OCRプロセスはコマーシャルにおけるウェブアドレス(URLなど)の存在を自動検出しうる。さらに、システムが別の方法でコンテンツをマッチングできようができまいが、少なくともウェブアドレスやリンクをユーザに提供しうる。有益情報が検出されれば、上述したいずれの方法(例えば、コンテンツに関する情報を送信するための方法)により該情報がユーザに提供されうる。例えば、システムは、コマーシャルを正確にはマッチングできないものの、クローズドキャプションに基づき、コンテンツおよび画像認識によって該コンテンツが特定の種類の靴であったとまでは判断できる場合があり、少なくともそれだけの情報に関してはユーザに提供することができる。
ある実施形態では、少なくとも1つの結果についての信頼スコアを高めるべく、この情報を画像マッチングアルゴリズムにフィードバックしてもよい。例えば、同一コマーシャルで長いバージョンと短いバージョンのものがあるとする。これらは当初、所与の信頼レベルの範囲においてマッチングしないことがある。しかしながら、少なくともその一部を、付加的に判断された情報に基づいて、信頼スコアが増加することがあり、その結果、同様のマッチングを判断できるようになる。有益情報と判断され得るものがなければ、あるいは、有益情報であっても少なくとも1つのマッチングが検出されない場合は、キャプチャされたコンテンツに対する情報は、例えば、放送局が別のコンテンツを提供後、あるいは、システムが一定期間にデータベースに情報を構築した後など、その後の分析のために記憶される。ある例では、ユーザはスポーツイベントなどの生放送やその他のリアルタイムでのパフォーマンスに対応するコンテンツを記録することができる。そのような場合、少なくともある程度はキャプチャされた情報に与えられたタイムスタンプおよび/またはチャネルに基づき決定されうるように、マッチングサービスは、システムが放送を分析し、適切なマッチング情報および/または補足コンテンツを提供できるようになるまで、特定のキューに、あるいはその他の場所に該情報を記憶しうる。該システムはさらに、あるエリア(例えば、地元のスポーツチーム)での放送に関する検索ウインドウの制限を試みるためにその他の情報、例えば、IPアドレス、あるいはその他の場所に関連する情報を利用することができる。マッチングコンテンツを決定するためのその他のアプローチおよび更なる情報は、発明の名称を「Media Fingerpringing for Content Determination and Retrieval」とする係属中の米国特許出願第12/752,979号(2010年4月1日出願)に記載されている。
図3は、キャプチャされたメディアファイルに対するマッチングが検出されるとコンピューティングデバイスのユーザに示されうる例示的インタフェース300を示す。本例では、メディアファイルは特定の映画のシーンにマッチングした。しかし、メディアファイルの一部を識別する他の情報も同様に利用することができる。本例では、識別情報を含む(とともに、これに加えて)情報302がユーザに示される。この画面には、タイトル、メディアファイルがキャプチャされたシーンのアイデンティティ、そのシーンに出演している俳優のアイデンティティ、および、そのシーンに対応する画像あるいは映像ファイル304を含む。情報の選択および種類は実施形態において変わるものであり、ユーザ毎に設定可能である。
例示のように、該情報はユーザが興味を示したシーンの少なくとも一部のデジタルコピー(あるいはデジタルコピーへのリンク)を含みうる。ある実施形態においては、ユーザはローカルマシンにそのシーンを保存でき、あるいはリンクを保存することができる。これにより、後日、ユーザはそのコンテンツに戻りストリーミングあるいはその他の手法で該コンテンツにアクセスを行うことができる。ある場合では、ユーザはこのシーンを他のユーザと共有するためのオプション308を有する。一実施形態では、ユーザはこのクリップをソーシャルネットワークサイトに、あるいは少なくとも1つのネットワークを通じて他のユーザによりアクセス可能なその他のコンテンツのコレクションあるいはコンテンツのグループに投稿することができる。ユーザはさらに、あるいはこれに代えて、タグが付けられたコンテンツをコンテナに追加することもできるし、あるいは特定のユーザやデバイスへの送信が可能な他の電子デバイスのグループに追加することもできる。このインタフェースは、コンテンツをアップロードする前や共有する前にタグが付けられたコンテンツにコメントを追加するためのオプション306など、各種のオプションも同様に含みうる。
図4は、一実施形態に従うソーシャルネットワークサイトのページに対応する、あるいはその他これに類似するコンテンツのページに対応する例示的画面400を示す。この場合、該ページは特定の映画に関連するものであり、ユーザはお気に入りのシーンの各々にタグを付けることができ、さらにこれらのシーンについてコメントすることができる。タグが付けられたコンテンツおよびその他の情報を利用して特定の映画、テレビ番組などについての完全な仮想コミュニティあるいはファンサイトが構築される場合がある。一例としてのコミュニティページには、多くのユーザによりタグが付けられた特定のシーンのほか、その他関連のコンテンツにユーザがアクセスできるリンクを含みうる。映画の基本情報(タイトル、ロケ地、出演俳優など)に加えて、該ページには、あるシーンで示された製品の各々に関する情報のほかに、これらの製品についてのウェブサイトへのリンクおよび/またはこれらの製品を販売するウェブサイトへのリンクを含みうる。ある場合では、該ページは特定のシーン、映像などをダウンロードするための、あるいはこれらにアクセスするためのリンクを含みうる。ユーザがサイトのメンバーであれば、該ユーザは特定のフォーマットで該コンテンツのフルバージョンをダウンロードあるいは購入することができる。
該ページはいずれのユーザも投稿やコメントをすることができる公開された公的ページであってもよいし、あるいは、ある一定のユーザのみがアクセス、アップロード、コメントできる、および/あるいはそれ以外の方法で該ページのコンテンツとインタラクトできる私的ページであってもよい。ある場合では、いずれのユーザも該ページにアクセスでき、コメントを見ることができるが、投稿するには登録が必要である。ある実施形態では、ユーザは招待あるいは承認後でなければ情報を見る、および/あるいは投稿することができない。ある実施形態では、投稿された映像はユーザによりキャプチャされた映像に実際に対応するものである。一方で別の実施形態では(少なくとも著作権を理由として)映像はコンテンツプロバイダ(例えば、映画会社やその他メディアのプロバイダ)から提供されることとなる。
該コンテンツプロバイダは、コンテンツの提供に基づき収益を生み出すことができる広告やその他のコンテンツも同様に提供することができる。ある実施形態では、映像は視聴者により、サイトを通じてストリームされるものであるが、ダウンロードはされない。この場合、プロバイダによる管理水準なしに映像を視聴することができる。ある実施形態では、広告へのリンクはメディアファイル自体に組み込まれることになる。したがって、デフォルトの広告をいつでも視聴することができ、あるいはメディアファイルが再生される場所に配置することができる。ある実施形態では、メディアファイルは識別子や他の情報をオンライン広告プロバイダやその他これに類似するエンティティに送信するなどして最新の広告の検出を試みるためにメディアプレーヤと連動しうる。そのようなアプローチにより、コンテンツプロバイダは収益を継続的に生み出すべく、コンテンツとともに継続的に広告をアップデートすることができる。さらに、広告へのコンタクト数は、ある特定のメディアファイルがどの程度特定ユーザに人気があるかを示しうる。
他の実施形態では、収集され、その後インタフェースを介して表示されたコンテンツは、特定のコンテンツプロバイダにより提供されたウェブページによっては提供されないが、このようなコンテンツは多くのユーザ間(ソーシャルネットワークサイト上の友人やピアネットワークグループのピア)でパスされうる情報の仮想コンテナ(あるいはこれに類似するグループ)に対応する。ある実施形態では、ユーザはアップデートが行われる度に、コンテナに関連づけられた友人やピアの各々に該コンテナのコピーを送信することができる。
別の実施形態では、友人やピアの各々はコンテナのローカルコピーを記憶するか、少なくとも該コンテナに対する一定量の情報を記憶し(例えば、各映像のコピーは記憶しないが、各映像を入手するためのリンクは記憶する場合がある)、アップデートされた情報(例えば、差分情報)だけをその他の友人やピアに送信することになる。ある場合では、ステートや他の識別子を使用することができ、これらはグループを通じて送信される各種のメッセージに添付することができる。したがって、特定のユーザあるいはデバイスが最新版のコンテナ情報を有していなければ、そのユーザあるいはデバイスはアップデートされた情報を要求することができる。当業者間で周知の、あるいはその後開発された、各種デバイス間でデータをアップデートする、および/または同期するための様々なアプローチも同様に用いることができる。
図5は、一実施形態に従う、ユーザに示されうる別の例示的な画面500を示す。本例では、コンテンツ502は特定の映画、テレビ番組、音楽アーティスト、あるいは他のこれに類似するエンティティに関連するものではないが、その代わり、ユーザは特定のトピック、ジャンル、あるいはその他の種類の情報に関連する情報を追加することができる。本例では、ユーザは映画のコメディシーンに関連するコメントを追加することができる。当然のことながら、そのような画面を通じて収集され示されるさまざまな種類のコンテンツがいくつあってもよい。
一実施形態では、ユーザはグループに参加でき、ページに登録し、あるいはそれ以外の方法で情報のグループにアクセスすることができる。特定ユーザたちは、トピックに関連するコンテンツを追加し、各種コンテンツを評価し、コメントすることができ、さらにそれ以外の方法でそのグループに含まれる情報を送信することができる。図3に示すように、ユーザがキャプチャしたメディアファイルをマッチングと見なす場合に、該ユーザは1以上のページ、サイト、コンテナ、あるいはマッチングコンテンツを追加するためのその他のグループを特定することができる。ある実施形態では、ユーザは、映像あるいは音声クリップが含まれるかどうか(利用可能であるか、権限が与えられているかどうか)、どれくらいの識別子を添付すべきかなど、追加される情報の種類を管理することができる。ある実施形態では、メディア情報は、コンテンツ視聴しているユーザが、オンライン小売業者などの適切な場所からコンテンツのコピーを購入できるようにする情報を含みうる。
図6は、各種の実施形態に従う、使用されうる別の種類のコンテンツグループの画面600を示す。本例では、特定ユーザによりタグが付けられた各種インスタンスのコンテンツ602は、個人のページなどに一緒に表示されうる。このページには、映画、テレビ、音楽、ゲームコンテンツなど、適切にタグが付けられたコンテンツが含まれうる。例えば、ユーザが映画、音楽、コマーシャル、あるいはテレビ番組にタグを付ける度に、該ユーザは該コンテンツを該ユーザのページに追加するオプションを有しうる。
例えば該ユーザがテレビゲームをし、ボスを打ち負かし、ある一定のレベルに到達し、ゲームが終了する、あるいはゲームにおいて別のそのような段階に達すれば、該ユーザはカットされたシーンや、ゲームにおいてその段階に到達後に再生されるテーマ曲などのメディアをキャプチャすることができ、さらに、該ユーザがゲームにおいてその段階に達したことを別のユーザに知らせるために、ページにその試合をアップロードすることができる。ある場合では、ユーザはさらにコメントを追加することができる。あるいは、そのユーザによるゲームプレイの質を証明するために、スクリーンキャプチャやスコア情報を自動的に追加するようにできる。
そのようなアプローチは、到達度の認識あるいはその他の認識方法が特定のゲームに、あるいは特定のゲームコンソールに含まれていない状況において少なくとも有利である。メディアをキャプチャし、ページやグループなどの特定のサイトにアップロードすることで、ユーザはそのようなメカニズムを提供しない既存のゲームおよび/またはコンソールに対する各々のゲームの到達度を共有することができる。既存のゲームおよびデバイスに上位互換性を提供できることから、各プロバイダはさらに既存の構成要素の寿命と収益とを伸ばすことができ、さらに、ユーザがこれらの構成要素からさらに楽しみを得るようにすることができる。ある実施形態では、ユーザは業務用ゲーム機械であるアーケードゲーム(古いアーケードゲームを含む)に対して同様の情報をキャプチャすることができ、世界中の他のユーザと偉業を共有することができる。
ある実施形態では、ユーザはページを非公開にし、該ユーザだけがページにアクセスできるようにすることができる。この場合では、該ページはパスワードあるいは他のセキュリティメカニズムを伴うウェブページであってもよいし、遠隔デバイスを介してアクセス不可能なコンピューティングデバイスにローカルに記憶されたページであってもよい。ある実施形態では、該ページはネットワークを通じてデバイスを介してアクセス可能であり、ユーザはページを登録することができるか、その他別の方法でアクセスできる(アクセスは制限されたものであるか、通常のアクセスである)。他の実施形態では、該情報をピアネットワーク上のピア間で共有することができる。各種のアプローチも同様に利用することができる。
図7は、第1の例示的な機器構成700であり、該構成において、第1ユーザによりタグが付けられたコンテンツは、少なくとも他の1名のユーザによりアクセスされうる。この例では、第1デバイス702のユーザはメディアファイルをキャプチャし、上記で検討あるいは提案したようなアプローチの1つを利用してマッチング情報を得る。ユーザは、第1デバイスに、インターネットなどの少なくとも1つのネットワーク704を通じて情報を送信させ、これを少なくとも1つのサーバ706(例えば、ウェブサーバ、データサーバ、および/あるいはアプリケーションサーバ)に受信させ、さらに、その後の検索用にデータベース708に記憶させる。
上記サーバおよびデータベースは、ウェブサイトやその他これに類似するインタフェースの一部としてユーザが該情報にアクセスできるようにするコンテンツプロバイダシステムの一部などであってよい。次いで、別のクライアントデバイス710の別のユーザは、ネットワーク704を通じてリクエスト(例えば、HTTPリクエスト)を送信することで、タグが付けられたコンテンツおよび/あるいはマッチしたコンテンツ、および関連のいずれの情報にもアクセスすることができる。このリクエストはサーバ706が受信する。該サーバはデータベース708からのコンテンツにアクセスでき、さらに、第2クライアントデバイス710に表示するためのコンテンツを提供する。コンテンツをリクエストおよび供給する方法の各々は当技術分野においては周知であり、本明細書では詳細に記載しない。
図8は、別の例示的な機器構成800であり、該構成において、ピアデバイス804の各々は少なくとも1つのネットワーク802を介して情報を共有できる。多くの場合、ネットワークはインターネットであるか、専用通信ネットワークであるが、他の実施形態の各々では、ネットワークはピアデバイス間での直接通信により提供されうる。例えば、ピアデバイスの各々は、それぞれが無線通信の範囲内にある場合に情報交換をすることができる。周知の、あるいはそのような目的のために後に構築されたいずれのその他のピア通信のためのアプローチを利用することができる。
ある実施形態では、各ピアはコンテナあるいはピア間で共有されている別のコンテンツグループのコピーを記憶することができる。他の実施形態では、各ピアは各ピアが所有するコンテンツを記憶し、別のピアの各々がそのピアからの情報をリクエストする。さらに別の実施形態では、コンテナのマスタコピーを記憶するマスタピアがあってもよく、これには少なくとも各ピアがコンテナに追加した情報の詳細な一覧が含まれる。したがって、コンテンツの一部へのアクセスを希望するピアは、そのマスタピアから識別情報をリクエストすることができる。この情報はコンテンツを入手することができる特定のピアを示すものである。各種の記憶および共有アプローチも同様に利用することができる。
図9は、一実施形態に従う、コンテンツを他のユーザと共有するためのプロセス900の一例を示す。この例では、ユーザは上記で検討あるいは提案したいずれの適切なプロセスを利用して、興味のあるコンテンツの少なくとも一部を記録あるいはそれ以外の方法でキャプチャする(902)。ユーザはマッチングサービスあるいはその他の適切なソースやエンティティにコンテンツを送信し(904)、マッチングコンテンツを識別する情報を受信する(906)。ユーザはマッチング情報を見て、オプションを選択し、該コンテンツを他のユーザと共有することができる(908)。次に、コンテンツに関連する情報がユーザデバイスから、別のユーザが該情報を見ることができる適切な場所に送信されうる(910)。
検討したように、ある場合では、ユーザは1以上のコンテンツのインスタンスを含んだコンテンツをキャプチャした可能性がある。あるいは、前のコンテンツのインスタンスが完了した直後にコンテンツをキャプチャした可能性がある。例えば、ユーザは映画のラストシーンのほか、その映画中に表示されたコマーシャルの始まりの部分を含んだメディアをキャプチャした可能性がある。この場合、ユーザにはオプションが示される。これは、キャプチャされたメディアファイルの一部に対して決定されたマッチングの各々を識別するものであり、さらにユーザは、ユーザが興味のあったコンテンツを選択することができる。ある実施形態では、この選択により、別のリクエストがマッチングシステムあるいはサービスに送信されうる。該システムやサービスはユーザの選択に対応した、より詳細な情報やコンテンツを提供しうるものである。本明細書に記載された教示や提案に照らして、当業者にとっては明らかであろう各種のスクリーンや入力、コンテンツが各種実施形態の範囲において提供あるいは利用されうる。
ある実施形態では、システムは、他のユーザがマッチングコンテンツを決定するのに役立つ、以前にマッチングしたコンテンツに関連する情報を記憶することができ、あるいはそれ以外の方法で該情報にアクセスすることができる。例えば、特定の俳優がアップロードされたシーンは、テレビシリーズの1以上のエピソード(話)とマッチングする可能性がある。ある場合では、システムは、特定のシーンがユーザの選択にマッチングする可能性を示すものとして、他のユーザによりタグが付けられたシーンを見ることができる。一例では、ユーザは、音質が不十分であって、少なくとも閾値の信頼範囲内で特定のシーンにマッチングさせることができない場合に、シーンの音声をキャプチャすることができる場合がある。潜在的なマッチングが3つあり、ユーザの大半によりこれらのシーンの1つにすでにタグが付けられていたとすると、これにより人気のあるシーンがユーザによりタグが付けられたシーンにマッチングする可能性が高いということが少なくともある程度示されうる。ある場合では、システムはユーザに3つ全てのマッチングを示すこともあり、少なくとも一部をユーザにより各シーンにタグが付けられた頻度や各シーンの視聴頻度、あるいはそれ以外の方法で他のユーザにアクセスされた頻度、に基づいてオプションの各々を評価することができる。
タグが付けられたコンテンツに基づいて人気情報を収集することは、その他多くのアプリケーションにとっても有益でありうる。例えば、テレビスタジオでは、どれくらいの頻度で各ゲストスターのシーンがタグ付けされるかを調査し、各スターの人気度を決定することができる。広告主は、特定の広告キャンペーンの人気度を決定するために、一定のコマーシャルの人気度を調査することができる。ある場合では、広告がキャプチャされたチャネルおよび時間などのその他の情報により、広告収入の最も有効な使い方を決定しようとしている広告主に貴重な情報が提供されうる。
ある実施形態では、人気情報は収集され分析されうる。次いで、各種ソースはプロバイダから特定のレポート、統計、あるいはその他の情報をリクエストできる。そのようなアプローチは、ユーザに提供されるコンテンツの権利を得るのに有用な収入源を提供しうる。ある場合では、情報が特定ユーザのプロフィールと結び付けられることがある。よって統計には、性別や年齢グループによる人気度などの一般の情報が含まれうる。その他各種のこれに類似する特徴は分析されてもよいし、含まれてもよく、このことは当業者にとっては明らかである。
上記のように、ユーザは、メディアをキャプチャしようとする場合に、キャプチャデバイスにすぐに到達できないことから目的とするコンテンツを見逃してしまうことがある。ある場合では、メディアセグメントをキャプチャするデバイスは、デバイス周辺の信号(音声および/あるいは映像)、あるいは直接接続されたデバイスの放送に含まれた信号を継続的にキャプチャする、サンプリングする、あるいは記録するように構成されうる。該デバイスは、最近記録された情報、例えば、最後の10〜20秒間にわたって、あるいはその他の適切な期間にわたってキャプチャされた情報のループをキャッシュに格納するか記憶することができる。その期間の経過後、データは破棄される。よって、該デバイスには直前の期間(例えば、常に最新10秒のデータ)に対するデータだけが記憶されることになる。データキャッシュは時間に対して「スライドウインドウ」のような役割を果たす。この場合、ウインドウは最新の期間のデータを表示するように構成され、さらに該ウインドウに対応するデータは継続的にアップデートされ(ウインドウは時間に対して前に「スライド」する)、最新のデータを表示するようにする。ユーザは、ほとんどの場合に興味のあるものが放送された後にキャプチャをアクティブにすることから、キャプチャをアクティブにする直前の期間にわたってコンテンツをキャッシュに格納するか、それ以外の方法で一時的に記憶することで、ユーザが興味を持ったコンテンツの少なくとも一部が含まれる可能性が大きい。
一実施形態では、ユーザはボタンを押すか、それ以外の方法でメディアへの関心を示すことができ、これにより、原則的に、原則的に、ボタンを押すなどにより、今現在スライドウインドウにより表示され、対応のバッファあるいはキャッシュに記憶されたデータのスナップショットがデバイスによりキャプチャされる。ある場合では、ユーザがボタンを押した(あるいはそれ以外の方法で関心を示した)後のある期間に対するデータも同様にキャプチャされる。したがって、スライドウインドウ毎に、ボタンを押す前のバッファに格納されたデータおよびユーザがボタンを押した数秒後のデータを含む、興味全体を示したトータルウインドウが生成される。したがって、この興味全体を示したトータルウインドウは、ユーザのアクション(例えば、ボタンを押す)の時間を取り囲み、該アクションの前後のデータを含むようにしたものである。このトータルウインドウ中のデータは、ユーザのアクションの時間に対応する少なくとも1つのタイムスタンプと組み合わせることができる。次に、このデータは本明細書の別の箇所に記載したようにサーバに送信され、分析されうる。ユーザがある広告に興味を示した場合、あるいは放送ストリームのプロダクトプレースメントに興味を示した場合、少なくともある程度をタイムスタンプに基づき、ユーザデバイスの適切なモジュールにより、記録された音声に対する情報の他に、対応するタイムスタンプがマッチングサービスに送信されうる。
ゲームコンソールなど、接続されたデバイスを使用する実施形態では、ゲームコンソールは1以上のステーション、例えば、現在見られているステーションを通じて放送される情報を継続的に記録することができ、さらに、常時更新している、直近に放送された期間の情報を前もってバッファリングするかそれ以外の方法で記憶することができる。ユーザは、ゲームコントローラのボタンを押す、あるいはリモコンの入力を選択するなど、選択またはそれ以外の方法で入力動作を行うことによりキャプチャあるいはマッチングプロセスをアクティブにすることができる。ゲームコンソールは、インターネットなどのネットワークに接続され、ハッシュ(あるいはその他の記録を表すもの)をマッチングサービスに送信しうる。
上述のように、一般にマッチングサービスには特定のプログラミング、広告、およびプロダクトプレースメントなどに対する音声のフィンガープリントがすでに提供されており、さらにマッチングの検出を試みうる。上述のように、マッチングサービスが各種のブロードキャストフィードにアクセスでき、ある放送フィードからメディアがキャプチャされた場合に、タイムスタンプを利用することでコンテンツのマッチングが支援される。キャプチャされた期間内に複数のメディアセグメントが含まれていれば、ユーザは各々に対する情報を受信することができる。あるいはユーザはこれらのセグメントのうちの少なくとも1つに対する情報を受信するために選択するためのオプションを受信することができる。ゲームコンソールがネットワークに接続されている本例では、今現在表示するために、あるいは後の検索用に、補足コンテンツがある実施形態のコンソールに配信されうる。
ある実施形態では、ユーザはスマートフォンや携帯メディアプレーヤなどのコンピューティングデバイスにアプリケーション(例えば、「アプリ」)を記憶させることができる。これは音声および/または映像情報のキャプチャを指示しうるものであり、あるいは、キャプチャされたメディア情報への少なくともアクセスを可能にするものであり、さらに、該メディア情報の少なくとも一部の分析を可能にするものである。したがって、ユーザデバイスは大量のデータをセントラルサーバやその他これに類似する場所にアップデートする必要がない。さらに、そのようなアプリケーションを使用することで、ユーザは好みを設定でき、あるいは、その他これに類似する情報であって、検索する情報の種類や、補足コンテンツあるいはその他これに類似する形態を受信するデバイスの種類などの情報を決定するために利用されうる情報を特定することができる。
図10は一実施形態に従うデバイスを実装するのに適したハードウェアシステムの一例を示す説明図である。本ブロック図において、コンピュータシステム1000が例示されており、これは、パソコン、テレビゲーム用コンソール、携帯端末、あるいはその他のデジタルデバイスなどの、本発明の実施形態を実行するのに適したものである。コンピュータシステム1000はソフトウェアアプリケーションおよび任意にオペレーションシステムを実行するための中央処理装置(CPU)1002を含む。CPU1002は、1以上の同種または異種の処理コアで構成されうる。メモリ1004は、CPU1002により使用されるアプリケーション及びデータを記憶する。ストレージ1006は、アプリケーション及びデータに対して不揮発性記憶装置及びその他のコンピュータ可読媒体を提供する。
また、ストレージ1006は固定ディスクドライブ、取り外し可能ディスクドライブ、フラッシュメモリデバイス、及びCD−ROM、DVD−ROM、Blu−ray、HD−DVDまたはその他の光学式記憶装置を含み、これらに加えて信号伝送及び記憶媒体を含みうる。ユーザ入力装置1008は、1名以上のユーザからの入力をコンピュータシステム1000に知らせる。入力装置の例としては、キーボード、マウス、ジョイスティック、タッチバッド、タッチスクリーン、静止カメラまたはビデオカメラ、及び/またはマイクロフォンなどが挙げられる。ネットワークインタフェース1010により、コンピュータシステム1000は電子通信ネットワーク経由でその他のコンピュータシステムと通信することができ、ローカルエリアネットワーク及びインターネットなどの広域ネットワークを介した有線または無線通信を含みうる。音声プロセッサ1012は、CPU1002、メモリ1004、及び/またはストレージ1006により提供される命令及び/またはデータからアナログ音声出力またはデジタル音声出力を生成するように構成される。CPU1002、メモリ1004、データストレージ1006、ユーザ入力装置1008、ネットワークインタフェース1010、及び音声プロセッサ1012を含むコンピュータシステム1000の構成要素は、1以上のデータバス1014経由で接続される。
グラフィックサブシステム1016は、データバス1014及びコンピュータシステム1000の構成要素に接続される。グラフィックサブシステム1016は、グラフィック処理ユニット(GPU)1018及びグラフィックメモリ1020を含む。グラフィックメモリ1020は、出力画像の各ピクセルに対するピクセルデータを記憶するために使用されるディスプレイメモリ(例えば、フレームバッファ)を含む。グラフィックメモリ1020は、GPU1018と同一の装置に内蔵されてもよいし、別の装置としてGPU1018と接続されてもよいし、及び/またはメモリ1004内に実装されてもよい。ピクセルデータはCPU1002から直接グラフィックメモリ1020に提供されてもよい。他の態様では、CPU1002はGPU1018に所望の出力画像を定義するデータ及び/または命令を提供し、GPU1018はこのデータ及び/または命令から1以上の出力画像のピクセルデータを生成する。所望の出力画像を定義するデータ及び/または命令は、メモリ1004及び/またはグラフィックメモリ1020に記憶されうる。一実施形態では、GPU1018は、形状、ライティング、シェーディング、テクスチャリング、運動、及び/またはカメラパラメータを場面に対して定義する命令及びデータから出力画像に対するピクセルデータを生成するための3Dレンダリング機能を含む。GPU1018は、シェーダプログラムを実行可能な1以上のプログラム可能実行ユニットをさらに含みうる。
グラフィックサブシステム1016は、グラフィックメモリ1020から画像に対するピクセルデータを周期的に出力し、表示装置1022に表示されるようにする。表示装置1022は、コンピュータシステム1000からの信号を受けて視覚情報を表示することができる装置であり、これにはブラウン管(CRT)、液晶表示装置(LCD)、プラズマ、及び誘起発光ダイオードディスプレイを含む。コンピュータシステム1000は、表示装置1022にアナログ信号またはデジタル信号を送信することができる。
各種の実施形態によれば、CPU1002は、1以上の処理コアを有する1以上の汎用マイクロプロセッサである。さらに各実施形態は、メディアアプリケーションやインタラクティブエンターテインメントアプリケーションなど、並列性が高くコンピュータ処理の多いアプリケーションに適したマイクロプロセッサのアーキテクチャを備えた1以上のCPUを使用して実装されうる。
さらなる実施形態の各々は、明細書および図面から当技術分野の当業者により予測されうる。別の実施形態では、上述したような発明を有利に組合せる、あるいは補助的に組合せることができる。理解しやすくするために、アーキテクチャのブロック図とフロー図とはグループ化されている。しかし、ブロックの組合せ、新たなブロックの追加、ブロックの再配置、などは本発明の別の実施形態において検討される。
従って、明細書および図面は限定的ではなく例示的であると解釈される。しかし、特許請求の範囲に記載されているように、より広い本発明の精神および範囲から逸脱することなく、様々な変形および変更が可能であることは明らかであろう。

Claims (20)

  1. コンピュータが実行する、ユーザ間でコンテンツを共有する方法であって、
    ユーザデバイスによりメディア表示から記録された音声および映像データの少なくとも1つを含むキャプチャされたメディアファイルに対応する情報を含むマッチングリクエストを受信するステップと、
    前記キャプチャされたメディアファイル情報に対するマッチングの検出を試みるために、少なくとも1つの処理装置を利用して、前記キャプチャされたメディアファイル情報を、記憶されたメディアデータのインスタンスと比較し、前記記憶されたメディアデータのインスタンスの少なくとも一部は、それぞれ識別された映像コンテンツに対応するものであるステップと、
    前記記憶されたメディアデータのインスタンスの1つとのマッチングが検出されると、少なくとも1つの処理装置を使用して、前記マッチングリクエストに応じて、前記対応する識別されたメディアコンテンツに対して決定された補足情報を提供するステップと、
    少なくとも1つのコンテンツ共有メカニズムを使用して、前記ユーザが他のユーザに前記補足情報を提供できるようにするステップと、を含む方法。
  2. 前記比較は、オーディオフィンガープリントプロセスあるいは画像認識プロセスのうちの少なくとも一方を利用して実行される、請求項1記載のコンピュータが実行する方法。
  3. 前記リクエストに含まれる、キャプチャされたメディアファイルに対応する前記情報は、ユーザアクションがトリガーとなって前記リクエストが生成される前の第1期間、あるいは、ユーザアクションがトリガーとなって前記リクエストが生成された後の第2期間の少なくとも一方の期間にキャプチャされた音声および映像データのうちの少なくとも1つを含む、請求項1記載のコンピュータが実行する方法。
  4. 前記決定された補足情報は、広告情報、製品情報、雑学的な情報、購入情報、ダウンロード情報、メディアファイル、あるいは関連コンテンツのアドレスやリンクの少なくとも1つを含む、請求項1記載のコンピュータが実行する方法。
  5. 前記少なくとも1つのコンテンツ共有メカニズムは、ソーシャルネットワークサイト、コンテンツ関連ウェブサイト、およびピアネットワークの少なくとも1つを含む、請求項1記載のコンピュータが実行する方法。
  6. 少なくとも1つのコンテンツ共有メカニズムを利用して、前記ユーザが他のユーザに前記補足情報を提供できるようにするステップは、前記キャプチャされたメディアファイルに対応する保存されたメディアファイルへのリンクを前記ユーザに提供するステップを含み、前記ユーザは前記少なくとも1つのコンテンツ共有メカニズムを介して他のユーザに前記リンクを与えることができる、請求項1記載のコンピュータが実行する方法。
  7. 前記少なくとも1つのコンテンツ共有メカニズムの他のユーザが、前記識別されたメディアコンテンツに対応するメディアのコピーを得ることができるようにするステップをさらに含む、請求項1記載のコンピュータが実行する方法。
  8. 前記少なくとも1つのコンテンツ共有メカニズムは、他のユーザが前記識別されたメディアコンテンツについて評価あるいはコメントするのを可能にするステップをさらに含む、請求項1記載のコンピュータが実行する方法。
  9. ユーザ間でコンテンツを共有するためのシステムであって、
    少なくとも1つのプロセッサと、
    前記プロセッサにより実行されたときに前記システムを動作させる命令を含んだメモリであって、前記動作には、
    ユーザデバイスによりメディア表示から記録された音声および映像データの少なくとも1つを含むキャプチャされたメディアファイルに対応する情報を含むマッチングリクエストを受信させ、
    前記キャプチャされたメディアファイル情報に対するマッチングの検出を試みるために、前記キャプチャされたメディアファイル情報を、少なくとも1つの処理装置を利用して、少なくとも一部がそれぞれ識別された映像コンテンツに対応する記憶されたメディアデータのインスタンスと比較させ、
    前記記憶されたメディアデータのインスタンスの1つとのマッチングが検出されれば、少なくとも1つの処理装置を利用して、前記マッチングリクエストに応えて、前記対応する識別されたメディアコンテンツに対して決定された補足情報を提供し、
    少なくとも1つのコンテンツ共有メカニズムを使用して、前記ユーザが前記補足情報を他のユーザに提供できるようにする、ことが含まれる、システム。
  10. 前記キャプチャされたメディア情報は、オーディオフィンガープリントプロセスあるいは画像認識プロセスの少なくとも一方を利用して、記憶されたメディアデータのインスタンスと比較される、請求項9記載のシステム。
  11. 前記少なくとも1つのコンテンツ共有メカニズムは、ソーシャルネットワークサイト、コンテンツ関連ウェブサイト、およびピアネットワークの少なくとも1つを含む、請求項9記載のシステム。
  12. 少なくとも1つのコンテンツ共有メカニズムを利用して、前記ユーザが前記補足情報を他のユーザに提供できるようにするステップは、前記キャプチャされたメディアファイルに対応する保存されたメディアファイルへのリンクを前記ユーザに提供するステップを含み、前記ユーザは前記少なくとも1つのコンテンツ共有メカニズムを介して他のユーザに前記リンクを提供することができる、請求項9記載のシステム。
  13. 前記少なくとも1つのコンテンツ共有メカニズムはさらに、他のユーザが前記識別されたメディアコンテンツについて評価あるいはコメントするのを可能にする、請求項9記載のシステム。
  14. ビデオコンテンツを識別するデバイスであって、
    プロセッサと、
    少なくとも1つのユーザ入力と、
    音声および映像情報の少なくとも一方をキャプチャするように動作可能な少なくとも1つのメディアキャプチャ要素と、
    前記プロセッサにより実行される場合に、前記装置に以下のこと、つまり、
    オペレーションがキャプチャモードにある場合に、前記少なくとも1つのメディアキャプチャ要素を利用してメディアコンテンツの表示に対応する音声および映像情報の少なくとも一方を含むメディア情報を継続してキャプチャさせ、前記装置は、少なくとも最新の特定期間に対する前記メディア情報をバッファリングするものであって、前記バッファリングされたメディア情報は新たにキャプチャされたメディア情報で継続してアップデートされ、前記特定の期間外にキャプチャされたメディア情報を削除するものであって、
    前記少なくとも1つのユーザ入力がアクティブにされたことに応じて、前記キャプチャされたメディア情報に少なくともある程度基づき前記映像コンテンツに対応する補足情報を取得するために、前記バッファリングされたメディア情報に対応するデータを含むリクエストを送信させ、
    さらに、前記映像コンテンツに対応する補足情報を受信したことを受けて、少なくとも1つのコンテンツ共有メカニズムを利用して、前記ユーザが前記補足情報を他のユーザに提供できるようにする、命令を含むメモリと、を含む映像コンテンツを識別するためのデバイス。
  15. 前記キャプチャされたメディアファイル情報は、オーディオフィンガープリントプロセスあるいは画像認識プロセスの少なくとも一方を利用して記憶されたメディアデータのインスタンスと比較される、請求項14記載のデバイス。
  16. 前記少なくとも1つのコンテンツ共有メカニズムは、ソーシャルネットワークサイト、コンテンツ関連ウェブサイト、およびピアネットワークの少なくとも1つを含む、請求項14記載のデバイス。
  17. 少なくとも1つのコンテンツ共有メカニズムを利用して、前記ユーザが前記補足情報を他のユーザに提供できるようにするステップは、前記キャプチャされたメディアファイルに対応する記憶されたメディアファイルへのリンクを前記ユーザに提供するステップを含み、前記ユーザは前記少なくとも1つのコンテンツ共有メカニズムを介して他のユーザに前記リンクを提供することができる、請求項14記載のデバイス。
  18. ユーザ間でコンテンツを共有するための命令を含むコンピュータ可読記憶媒体であって、前記命令は少なくとも1つのプロセッサにより実行されたときに、少なくとも1つのプロセッサを動作させるものであり、前記動作には、
    ユーザデバイスによりメディア表示から記録された音声および映像データの少なくとも1つを含むキャプチャされたメディアファイルに対応する情報を含むマッチングリクエストを受信させ、
    前記キャプチャされたメディアファイル情報に対するマッチングの検出を試みるために、前記キャプチャされたメディアファイル情報を、少なくとも1つの処理装置を利用して、少なくとも一部がそれぞれ識別された映像コンテンツに対応する記憶されたメディアデータのインスタンスと比較させ、
    前記記憶されたメディアデータのインスタンスの1つとのマッチングが検出されれば、少なくとも1つの処理装置を利用して、前記マッチングリクエストに応えて、前記対応する識別されたメディアコンテンツに対して決定された補足情報を提供し、
    少なくとも1つのコンテンツ共有メカニズムを使用して、前記ユーザが前記補足情報を他のユーザに提供可能とする、ことが含まれる、コンピュータ可読記憶媒体。
  19. 前記少なくとも1つのコンテンツ共有メカニズムは、ソーシャルネットワークサイト、コンテンツ関連ウェブサイト、およびピアネットワークの少なくとも1つを含む、請求項18記載のコンピュータ可読記憶媒体。
  20. 少なくとも1つのコンテンツ共有メカニズムを利用して、前記ユーザが前記補足情報を他のユーザに提供できるようにするステップは、前記キャプチャされたメディアファイルに対応する記憶されたメディアファイルへのリンクを前記ユーザに提供するステップを含み、前記ユーザは前記少なくとも1つのコンテンツ共有メカニズムを介して他のユーザに前記リンクを提供することができる、請求項18記載のコンピュータ可読記憶媒体。
JP2013502870A 2010-04-01 2011-03-31 ソーシャルネットワーク用メディアフィンガープリント Active JP5711355B2 (ja)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US12/753,001 2010-04-01
US12/753,001 US8560583B2 (en) 2010-04-01 2010-04-01 Media fingerprinting for social networking
PCT/US2011/030836 WO2011123720A2 (en) 2010-04-01 2011-03-31 Media fingerprinting for social networking

Publications (2)

Publication Number Publication Date
JP2013529408A true JP2013529408A (ja) 2013-07-18
JP5711355B2 JP5711355B2 (ja) 2015-04-30

Family

ID=44710868

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2013502870A Active JP5711355B2 (ja) 2010-04-01 2011-03-31 ソーシャルネットワーク用メディアフィンガープリント

Country Status (4)

Country Link
US (4) US8560583B2 (ja)
EP (1) EP2553937A4 (ja)
JP (1) JP5711355B2 (ja)
WO (1) WO2011123720A2 (ja)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2015177416A (ja) * 2014-03-17 2015-10-05 株式会社ニコン コンテンツ感想出力装置、コンテンツ感想出力システム、およびコンテンツ感想出力プログラム
JP2016539591A (ja) * 2013-09-11 2016-12-15 シンセイ、インコーポレイテッド コンテンツトランザクションアイテムの動的バインド
JP2019016392A (ja) * 2018-10-03 2019-01-31 株式会社ニコン コンテンツ感想出力装置およびコンテンツ感想出力システム
JP2019526138A (ja) * 2016-06-27 2019-09-12 フェイスブック,インク. 一致するコンテンツを特定するためのシステムおよび方法
US11017362B2 (en) 2013-09-27 2021-05-25 Aibuy, Inc. N-level replication of supplemental content

Families Citing this family (104)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20120209892A1 (en) * 2011-02-14 2012-08-16 Macaskill Don Systems and methods related to aggregation of disparate database content
US11388451B2 (en) 2001-11-27 2022-07-12 Comcast Cable Communications Management, Llc Method and system for enabling data-rich interactive television using broadcast database
US8042132B2 (en) 2002-03-15 2011-10-18 Tvworks, Llc System and method for construction, delivery and display of iTV content
US8413205B2 (en) 2001-09-19 2013-04-02 Tvworks, Llc System and method for construction, delivery and display of iTV content
AU2002327677A1 (en) 2001-09-19 2003-04-01 Meta Tv, Inc. Interactive user interface for television applications
US7703116B1 (en) 2003-07-11 2010-04-20 Tvworks, Llc System and method for construction, delivery and display of iTV applications that blend programming information of on-demand and broadcast service offerings
US8352983B1 (en) 2002-07-11 2013-01-08 Tvworks, Llc Programming contextual interactive user interface for television
US11070890B2 (en) 2002-08-06 2021-07-20 Comcast Cable Communications Management, Llc User customization of user interfaces for interactive television
US8220018B2 (en) 2002-09-19 2012-07-10 Tvworks, Llc System and method for preferred placement programming of iTV content
US11381875B2 (en) 2003-03-14 2022-07-05 Comcast Cable Communications Management, Llc Causing display of user-selectable content types
US8578411B1 (en) 2003-03-14 2013-11-05 Tvworks, Llc System and method for controlling iTV application behaviors through the use of application profile filters
US10664138B2 (en) 2003-03-14 2020-05-26 Comcast Cable Communications, Llc Providing supplemental content for a second screen experience
US8819734B2 (en) 2003-09-16 2014-08-26 Tvworks, Llc Contextual navigational control for digital television
US7818667B2 (en) 2005-05-03 2010-10-19 Tv Works Llc Verification of semantic constraints in multimedia data and in its announcement, signaling and interchange
US20100205628A1 (en) 2009-02-12 2010-08-12 Davis Bruce L Media processing methods and arrangements
US11832024B2 (en) 2008-11-20 2023-11-28 Comcast Cable Communications, Llc Method and apparatus for delivering video and video-related content at sub-asset level
US9264785B2 (en) 2010-04-01 2016-02-16 Sony Computer Entertainment Inc. Media fingerprinting for content determination and retrieval
US8560583B2 (en) * 2010-04-01 2013-10-15 Sony Computer Entertainment Inc. Media fingerprinting for social networking
US8730354B2 (en) 2010-07-13 2014-05-20 Sony Computer Entertainment Inc Overlay video content on a mobile device
US9159165B2 (en) 2010-07-13 2015-10-13 Sony Computer Entertainment Inc. Position-dependent gaming, 3-D controller, and handheld as a remote
US9143699B2 (en) 2010-07-13 2015-09-22 Sony Computer Entertainment Inc. Overlay non-video content on a mobile device
US9832441B2 (en) 2010-07-13 2017-11-28 Sony Interactive Entertainment Inc. Supplemental content on a mobile device
US9814977B2 (en) 2010-07-13 2017-11-14 Sony Interactive Entertainment Inc. Supplemental video content on a mobile device
EP2604000B1 (en) 2010-08-13 2016-12-28 Telefonaktiebolaget LM Ericsson (publ) Load distribution architecture for processing tunnelled internet protocol traffic
US8234411B2 (en) * 2010-09-02 2012-07-31 Comcast Cable Communications, Llc Providing enhanced content
US8533192B2 (en) 2010-09-16 2013-09-10 Alcatel Lucent Content capture device and methods for automatically tagging content
US8666978B2 (en) * 2010-09-16 2014-03-04 Alcatel Lucent Method and apparatus for managing content tagging and tagged content
US8655881B2 (en) 2010-09-16 2014-02-18 Alcatel Lucent Method and apparatus for automatically tagging content
US8774471B1 (en) * 2010-12-16 2014-07-08 Intuit Inc. Technique for recognizing personal objects and accessing associated information
US8643703B1 (en) 2011-03-30 2014-02-04 Amazon Technologies, Inc. Viewer tracking image display
US9112623B2 (en) 2011-06-06 2015-08-18 Comcast Cable Communications, Llc Asynchronous interaction at specific points in content
US8732739B2 (en) * 2011-07-18 2014-05-20 Viggle Inc. System and method for tracking and rewarding media and entertainment usage including substantially real time rewards
US8689255B1 (en) 2011-09-07 2014-04-01 Imdb.Com, Inc. Synchronizing video content with extrinsic data
US8255293B1 (en) * 2011-10-10 2012-08-28 Google Inc. Product catalog dynamically tailored to user-selected media content
US8438595B1 (en) 2011-11-04 2013-05-07 General Instrument Corporation Method and apparatus for temporal correlation of content-specific metadata with content obtained from disparate sources
US9223902B1 (en) * 2011-11-29 2015-12-29 Amazon Technologies, Inc. Architectures for content identification
US9852135B1 (en) 2011-11-29 2017-12-26 Amazon Technologies, Inc. Context-aware caching
US8949872B2 (en) * 2011-12-20 2015-02-03 Yahoo! Inc. Audio fingerprint for content identification
US9619123B1 (en) * 2012-02-16 2017-04-11 Google Inc. Acquiring and sharing content extracted from media content
US20190379931A1 (en) * 2012-02-21 2019-12-12 Gracenote, Inc. Media Content Identification on Mobile Devices
US9800951B1 (en) 2012-06-21 2017-10-24 Amazon Technologies, Inc. Unobtrusively enhancing video content with extrinsic data
US9628829B2 (en) 2012-06-26 2017-04-18 Google Technology Holdings LLC Identifying media on a mobile device
US20140004959A1 (en) * 2012-06-27 2014-01-02 Zynga Inc. Sharing photos of a game board within an online game
WO2014028072A1 (en) 2012-08-17 2014-02-20 Flextronics Ap, Llc Interactive channel navigation and switching
US11368760B2 (en) 2012-08-17 2022-06-21 Flextronics Ap, Llc Applications generating statistics for user behavior
US9237386B2 (en) 2012-08-31 2016-01-12 Google Inc. Aiding discovery of program content by providing deeplinks into most interesting moments via social media
US9113128B1 (en) * 2012-08-31 2015-08-18 Amazon Technologies, Inc. Timeline interface for video content
US8955021B1 (en) 2012-08-31 2015-02-10 Amazon Technologies, Inc. Providing extrinsic data for video content
US9704189B2 (en) * 2012-09-05 2017-07-11 Rakuten Kobo, Inc. System and method for a graphical user interface having recommendations
CN103780652B (zh) * 2012-10-23 2017-12-01 腾讯科技(深圳)有限公司 一种微博资源分享的方法及***
US11115722B2 (en) * 2012-11-08 2021-09-07 Comcast Cable Communications, Llc Crowdsourcing supplemental content
US9389745B1 (en) 2012-12-10 2016-07-12 Amazon Technologies, Inc. Providing content via multiple display devices
EP2936490A1 (en) * 2012-12-18 2015-10-28 Thomson Licensing Method, apparatus and system for indexing content based on time information
US9401947B1 (en) 2013-02-08 2016-07-26 Google Inc. Methods, systems, and media for presenting comments based on correlation with content
US10424009B1 (en) 2013-02-27 2019-09-24 Amazon Technologies, Inc. Shopping experience using multiple computing devices
US9258597B1 (en) 2013-03-13 2016-02-09 Google Inc. System and method for obtaining information relating to video images
US9553927B2 (en) 2013-03-13 2017-01-24 Comcast Cable Communications, Llc Synchronizing multiple transmissions of content
US9247309B2 (en) 2013-03-14 2016-01-26 Google Inc. Methods, systems, and media for presenting mobile content corresponding to media content
US9141723B2 (en) * 2013-03-14 2015-09-22 Facebook, Inc. Caching sliding window data
US10880609B2 (en) 2013-03-14 2020-12-29 Comcast Cable Communications, Llc Content event messaging
US9705728B2 (en) 2013-03-15 2017-07-11 Google Inc. Methods, systems, and media for media transmission and management
US9374411B1 (en) 2013-03-21 2016-06-21 Amazon Technologies, Inc. Content recommendations using deep data
US9787783B2 (en) * 2013-06-10 2017-10-10 Google Inc. Providing supplemental content in relation to embedded media
US20160139742A1 (en) * 2013-06-18 2016-05-19 Samsung Electronics Co., Ltd. Method for managing media contents and apparatus for the same
US11019300B1 (en) 2013-06-26 2021-05-25 Amazon Technologies, Inc. Providing soundtrack information during playback of video content
US10194189B1 (en) 2013-09-23 2019-01-29 Amazon Technologies, Inc. Playback of content using multiple devices
US10701127B2 (en) 2013-09-27 2020-06-30 Aibuy, Inc. Apparatus and method for supporting relationships associated with content provisioning
US11086592B1 (en) * 2013-11-14 2021-08-10 Twitter, Inc. Distribution of audio recording for social networks
US10002191B2 (en) 2013-12-31 2018-06-19 Google Llc Methods, systems, and media for generating search results based on contextual information
US9456237B2 (en) 2013-12-31 2016-09-27 Google Inc. Methods, systems, and media for presenting supplemental information corresponding to on-demand media content
US20150215654A1 (en) * 2014-01-24 2015-07-30 Sling Media Inc. Passive viewing data collection in a video place-shifting environment
US9639634B1 (en) * 2014-01-28 2017-05-02 Google Inc. Identifying related videos based on relatedness of elements tagged in the videos
US9838740B1 (en) 2014-03-18 2017-12-05 Amazon Technologies, Inc. Enhancing video content with personalized extrinsic data
CN104159136B (zh) * 2014-05-29 2016-01-13 腾讯科技(深圳)有限公司 互动信息的获取方法、终端、服务器及***
EP3152883A1 (en) * 2014-06-05 2017-04-12 Telefonaktiebolaget LM Ericsson (publ) Upload of multimedia content
US10206014B2 (en) 2014-06-20 2019-02-12 Google Llc Clarifying audible verbal information in video content
US9805125B2 (en) 2014-06-20 2017-10-31 Google Inc. Displaying a summary of media content items
US11783382B2 (en) 2014-10-22 2023-10-10 Comcast Cable Communications, Llc Systems and methods for curating content metadata
US11240349B2 (en) * 2014-12-31 2022-02-01 Ebay Inc. Multimodal content recognition and contextual advertising and content delivery
US9772813B2 (en) * 2015-03-31 2017-09-26 Facebook, Inc. Multi-user media presentation system
US10204104B2 (en) 2015-04-14 2019-02-12 Google Llc Methods, systems, and media for processing queries relating to presented media content
US10110660B2 (en) * 2015-04-20 2018-10-23 Cisco Technology, Inc. Instant file upload to a collaboration service by querying file storage systems that are both internal and external to the collaboration service
WO2016185557A1 (ja) * 2015-05-19 2016-11-24 楽天株式会社 情報処理装置、情報処理方法、プログラム
WO2017015149A1 (en) * 2015-07-17 2017-01-26 Chander Chawla Systems and methods of making video discoverable
US10271109B1 (en) 2015-09-16 2019-04-23 Amazon Technologies, LLC Verbal queries relative to video content
CN105847878A (zh) * 2016-03-23 2016-08-10 乐视网信息技术(北京)股份有限公司 数据推荐方法及装置
US10205794B2 (en) * 2016-09-08 2019-02-12 International Business Machines Corporation Enhancing digital media with supplemental contextually relevant content
US10565251B2 (en) * 2017-04-28 2020-02-18 Facebook, Inc. Media file upload awareness for online systems
US10567508B2 (en) * 2017-04-28 2020-02-18 Facebook, Inc. Media file upload awareness for online systems
CN107293293A (zh) * 2017-05-22 2017-10-24 深圳市搜果科技发展有限公司 一种语音指令识别方法、***及机器人
CN107295377B (zh) * 2017-07-14 2020-12-01 程工 影片制作方法、装置及***
EP3675015A4 (en) * 2017-08-24 2021-01-13 GungHo Online Entertainment, Inc. TERMINAL DEVICE, PROGRAM AND PROCEDURE
US11265597B2 (en) * 2018-10-23 2022-03-01 Rovi Guides, Inc. Methods and systems for predictive buffering of related content segments
US10504504B1 (en) * 2018-12-07 2019-12-10 Vocalid, Inc. Image-based approaches to classifying audio data
US10743041B1 (en) 2019-01-31 2020-08-11 DISH Technologies L.L.C. Systems and methods for facilitating adaptive content splicing
US11025354B2 (en) 2019-07-19 2021-06-01 Ibiquity Digital Corporation Targeted fingerprinting of radio broadcast audio
US11303943B2 (en) 2019-10-16 2022-04-12 Dish Network L.L.C. Systems and methods for facilitating adaptive content items for delivery in a packet stream
US11638049B2 (en) * 2019-10-16 2023-04-25 Dish Network L.L.C. Systems and methods for content item recognition and adaptive packet transmission
US10880351B1 (en) 2019-10-16 2020-12-29 Dish Network L.L.C. Systems and methods for adapting content items to endpoint media devices
WO2021101403A1 (ru) * 2019-11-22 2021-05-27 Акционерное Общество "Вьюэво" Способ электронной коммерции через общественную вещательную среду
US11245946B2 (en) 2020-01-21 2022-02-08 Dish Network L.L.C. Systems and methods for adapting content items to secured endpoint media device data
US11218525B2 (en) 2020-01-21 2022-01-04 Dish Network L.L.C. Systems and methods for adapting content delivery based on endpoint communications
US11012737B1 (en) 2020-04-27 2021-05-18 Dish Network L.L.C. Systems and methods for audio adaptation of content items to endpoint media devices
WO2022096461A1 (en) * 2020-11-03 2022-05-12 Interdigital Ce Patent Holdings, Sas Method for sharing content and corresponding apparatuses

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2008258984A (ja) * 2007-04-05 2008-10-23 Canon Inc 番組予約装置及びその制御方法
JP2008283344A (ja) * 2007-05-09 2008-11-20 Nikon Corp オンライン情報提供方法
WO2009036435A1 (en) * 2007-09-14 2009-03-19 Auditude.Com, Inc. Restoring program information for clips of broadcast programs shared online

Family Cites Families (85)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4843568A (en) 1986-04-11 1989-06-27 Krueger Myron W Real time perception of and response to the actions of an unencumbered participant/user
US4787051A (en) 1986-05-16 1988-11-22 Tektronix, Inc. Inertial mouse system
US5128671A (en) 1990-04-12 1992-07-07 Ltv Aerospace And Defense Company Control device having multiple degrees of freedom
US5528265A (en) 1994-07-18 1996-06-18 Harrison; Simon J. Orientation-operated cursor control device
SE504846C2 (sv) 1994-09-28 1997-05-12 Jan G Faeger Styrutrustning med ett rörligt styrorgan
US6209132B1 (en) 1995-06-15 2001-03-27 Intel Corporation Host apparatus for simulating two way connectivity for one way data streams
US5751672A (en) 1995-07-26 1998-05-12 Sony Corporation Compact disc changer utilizing disc database
US6161126A (en) 1995-12-13 2000-12-12 Immersion Corporation Implementing force feedback over the World Wide Web and other computer networks
US6240555B1 (en) 1996-03-29 2001-05-29 Microsoft Corporation Interactive entertainment system for presenting supplemental interactive content together with continuous video programs
US5929849A (en) 1996-05-02 1999-07-27 Phoenix Technologies, Ltd. Integration of dynamic universal resource locators with television presentations
US20030093790A1 (en) 2000-03-28 2003-05-15 Logan James D. Audio and video program recording, editing and playback systems using metadata
US6580870B1 (en) 1997-11-28 2003-06-17 Kabushiki Kaisha Toshiba Systems and methods for reproducing audiovisual information with external information
JP2000242661A (ja) 1999-02-23 2000-09-08 Fujitsu Ltd 関連情報検索装置および関連情報検索処理を実行するプログラムを記録した記憶媒体
US7302574B2 (en) 1999-05-19 2007-11-27 Digimarc Corporation Content identifiers triggering corresponding responses through collaborative processing
JP2001036875A (ja) 1999-07-16 2001-02-09 Nippon Telegr & Teleph Corp <Ntt> 映像情報連動提示方法および映像情報連動提示システム
AU7588100A (en) 1999-09-16 2001-04-17 Ixl Enterprises, Inc. System and method for linking media content
US6375572B1 (en) 1999-10-04 2002-04-23 Nintendo Co., Ltd. Portable game apparatus with acceleration sensor and information storage medium storing a game progam
US7200857B1 (en) 2000-06-09 2007-04-03 Scientific-Atlanta, Inc. Synchronized video-on-demand supplemental commentary
US8121843B2 (en) 2000-05-02 2012-02-21 Digimarc Corporation Fingerprint methods and systems for media signals
WO2001093473A2 (en) 2000-05-31 2001-12-06 Optinetix (Israel) Ltd. Systems and methods for distributing information through broadcast media
US20050193425A1 (en) 2000-07-24 2005-09-01 Sanghoon Sull Delivery and presentation of content-relevant information associated with frames of audio-visual programs
US6990453B2 (en) 2000-07-31 2006-01-24 Landmark Digital Services Llc System and methods for recognizing sound and music signals in high noise and distortion
JP2002118817A (ja) 2000-10-05 2002-04-19 Nippon Telegr & Teleph Corp <Ntt> 映像に対するインタラクション提供方法、システム、映像送信装置、映像受信装置、及びこれらを実現するプログラムを記録した記録媒体
US20020085097A1 (en) 2000-12-22 2002-07-04 Colmenarez Antonio J. Computer vision-based wireless pointing system
JP4038642B2 (ja) 2000-12-26 2008-01-30 ソニー株式会社 受信機
US7102688B2 (en) 2001-01-29 2006-09-05 Universal Electronics Inc. System and method for using a hand held device to display a readable representation of an audio track
ATE405101T1 (de) 2001-02-12 2008-08-15 Gracenote Inc Verfahren zum erzeugen einer identifikations hash vom inhalt einer multimedia datei
CN1628450B (zh) 2001-05-01 2010-05-26 Meta4hand公司 无线网络计算
US20050005308A1 (en) 2002-01-29 2005-01-06 Gotuit Video, Inc. Methods and apparatus for recording and replaying sports broadcasts
US7293275B1 (en) 2002-02-08 2007-11-06 Microsoft Corporation Enhanced video content information associated with video programs
JP4054585B2 (ja) 2002-02-18 2008-02-27 キヤノン株式会社 情報処理装置および方法
JP4351074B2 (ja) * 2002-04-25 2009-10-28 清二 加川 直線的易裂性熱可塑性樹脂フィルム並びにその製造方法及びその製造装置
US20030212762A1 (en) 2002-05-08 2003-11-13 You Networks, Inc. Delivery system and method for uniform display of supplemental content
US7461392B2 (en) 2002-07-01 2008-12-02 Microsoft Corporation System and method for identifying and segmenting repeating media objects embedded in a stream
JP4658598B2 (ja) 2002-07-01 2011-03-23 マイクロソフト コーポレーション ストリームに埋め込まれた反復オブジェクトに対するユーザ制御を提供するシステムおよび方法
JP4988158B2 (ja) 2002-10-09 2012-08-01 コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ マルチメディアデータをエンハンスする方法
US20040212589A1 (en) 2003-04-24 2004-10-28 Hall Deirdre M. System and method for fusing and displaying multiple degree of freedom positional input data from multiple input sources
KR100984257B1 (ko) 2003-07-14 2010-09-30 소니 주식회사 표시장치 및 표시방법
JP2005151147A (ja) 2003-11-14 2005-06-09 Toshiba Corp 再生装置及び再生方法
US20050108026A1 (en) 2003-11-14 2005-05-19 Arnaud Brierre Personalized subtitle system
US7707039B2 (en) 2004-02-15 2010-04-27 Exbiblio B.V. Automatic modification of web pages
EP1719273A4 (en) 2004-02-19 2009-07-15 Landmark Digital Services Llc METHOD AND DEVICE FOR IDENTIFYING THE RADIATION SOURCE
US20050220439A1 (en) 2004-03-19 2005-10-06 Carton Owen A Interactive multimedia system and method
US7221902B2 (en) 2004-04-07 2007-05-22 Nokia Corporation Mobile station and interface adapted for feature extraction from an input media sample
US8547401B2 (en) 2004-08-19 2013-10-01 Sony Computer Entertainment Inc. Portable augmented reality device and method
US7581034B2 (en) 2004-11-23 2009-08-25 Microsoft Corporation Sending notifications to auxiliary displays
US20060184960A1 (en) 2005-02-14 2006-08-17 Universal Music Group, Inc. Method and system for enabling commerce from broadcast content
US20070106551A1 (en) * 2005-09-20 2007-05-10 Mcgucken Elliot 22nets: method, system, and apparatus for building content and talent marketplaces and archives based on a social network
JP4676852B2 (ja) 2005-09-22 2011-04-27 日本放送協会 コンテンツ送信装置
KR20080073357A (ko) * 2005-11-29 2008-08-08 구글 인코포레이티드 방송 미디어에서 반복 콘텐츠 탐지
US20070136773A1 (en) 2005-12-14 2007-06-14 O'neil Douglas Systems and methods for providing television services using implicit content to indicate the availability of additional content
US7702279B2 (en) 2005-12-20 2010-04-20 Apple Inc. Portable media player as a low power remote control and method thereof
US8463000B1 (en) * 2007-07-02 2013-06-11 Pinehill Technology, Llc Content identification based on a search of a fingerprint database
CN101523369B (zh) * 2006-08-21 2016-08-03 斯灵媒体公司 捕捉和共享媒体内容以及对共享媒体内容的管理
JP5347217B2 (ja) 2006-10-18 2013-11-20 東洋インキScホールディングス株式会社 ポリマーエマルジョン含有水性塗料
GB0622451D0 (en) 2006-11-10 2006-12-20 Intelligent Earth Ltd Object position and orientation detection device
JP2008160337A (ja) 2006-12-22 2008-07-10 Hitachi Ltd コンテンツ連動型情報提示装置および提示方法
US20080155585A1 (en) 2006-12-22 2008-06-26 Guideworks, Llc Systems and methods for viewing substitute media while fast forwarding past an advertisement
GB0703974D0 (en) 2007-03-01 2007-04-11 Sony Comp Entertainment Europe Entertainment device
US8861898B2 (en) 2007-03-16 2014-10-14 Sony Corporation Content image search
US7898504B2 (en) 2007-04-06 2011-03-01 Sony Corporation Personal theater display
JP5337147B2 (ja) * 2007-05-03 2013-11-06 グーグル インコーポレイテッド デジタルコンテンツ投稿の換金化
KR101330637B1 (ko) 2007-05-15 2013-11-18 삼성전자주식회사 영상 및 영상 정보 검색 장치 및 방법, 그리고 그 시스템
WO2009017875A2 (en) * 2007-07-30 2009-02-05 Baytsp, Inc. System and method for authenticating content
JP2009043526A (ja) 2007-08-08 2009-02-26 Panasonic Corp 燃料電池コージェネレーションシステム
US10580459B2 (en) 2007-08-23 2020-03-03 Sony Interactive Entertainment America Llc Dynamic media interaction using time-based metadata
US20090063277A1 (en) * 2007-08-31 2009-03-05 Dolby Laboratiories Licensing Corp. Associating information with a portion of media content
US20100275235A1 (en) 2007-10-16 2010-10-28 Sanghyun Joo Sensory effect media generating and consuming method and apparatus thereof
US8059865B2 (en) 2007-11-09 2011-11-15 The Nielsen Company (Us), Llc Methods and apparatus to specify regions of interest in video frames
US8875212B2 (en) 2008-04-15 2014-10-28 Shlomo Selim Rakib Systems and methods for remote control of interactive video
US9177209B2 (en) 2007-12-17 2015-11-03 Sinoeast Concept Limited Temporal segment based extraction and robust matching of video fingerprints
EP2156869A1 (en) 2008-08-19 2010-02-24 Sony Computer Entertainment Europe Limited Entertainment device and method of interaction
US20100053151A1 (en) 2008-09-02 2010-03-04 Samsung Electronics Co., Ltd In-line mediation for manipulating three-dimensional content on a display device
JP2009033769A (ja) 2008-09-25 2009-02-12 Sony Corp 情報処理装置および方法、並びに媒体
US8359399B2 (en) 2008-10-16 2013-01-22 Echostar Technologies L.L.C. Method and device for delivering supplemental content associated with audio/visual content to a user
DK2180652T3 (en) 2008-10-21 2017-01-16 Telia Co Ab Method and system for transmitting media information
US9788043B2 (en) 2008-11-07 2017-10-10 Digimarc Corporation Content interaction methods and systems employing portable devices
EP2394224A1 (en) 2009-02-05 2011-12-14 Digimarc Corporation Television-based advertising and distribution of tv widgets for the cell phone
US20100257252A1 (en) 2009-04-01 2010-10-07 Microsoft Corporation Augmented Reality Cloud Computing
US8296253B2 (en) * 2009-06-15 2012-10-23 Hewlett-Packard Development Company, L. P. Managing online content based on its predicted popularity
US8188969B2 (en) 2009-06-26 2012-05-29 Panasonic Corporation Dual pointer management method using cooperating input sources and efficient dynamic coordinate remapping
US8682391B2 (en) 2009-08-27 2014-03-25 Lg Electronics Inc. Mobile terminal and controlling method thereof
US8677400B2 (en) 2009-09-30 2014-03-18 United Video Properties, Inc. Systems and methods for identifying audio content using an interactive media guidance application
US8463100B2 (en) 2009-11-05 2013-06-11 Cosmo Research Company Limited System and method for identifying, providing, and presenting content on a mobile device
US8560583B2 (en) * 2010-04-01 2013-10-15 Sony Computer Entertainment Inc. Media fingerprinting for social networking

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2008258984A (ja) * 2007-04-05 2008-10-23 Canon Inc 番組予約装置及びその制御方法
JP2008283344A (ja) * 2007-05-09 2008-11-20 Nikon Corp オンライン情報提供方法
WO2009036435A1 (en) * 2007-09-14 2009-03-19 Auditude.Com, Inc. Restoring program information for clips of broadcast programs shared online

Cited By (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2016539591A (ja) * 2013-09-11 2016-12-15 シンセイ、インコーポレイテッド コンテンツトランザクションアイテムの動的バインド
JP2016539590A (ja) * 2013-09-11 2016-12-15 シンセイ、インコーポレイテッド ビデオコンテンツの動的バインド
JP2019092209A (ja) * 2013-09-11 2019-06-13 アイバイ,インコーポレイテッド ビデオコンテンツの動的バインド
US10559010B2 (en) 2013-09-11 2020-02-11 Aibuy, Inc. Dynamic binding of video content
US11074620B2 (en) 2013-09-11 2021-07-27 Aibuy, Inc. Dynamic binding of content transactional items
US11763348B2 (en) 2013-09-11 2023-09-19 Aibuy, Inc. Dynamic binding of video content
US11017362B2 (en) 2013-09-27 2021-05-25 Aibuy, Inc. N-level replication of supplemental content
JP2015177416A (ja) * 2014-03-17 2015-10-05 株式会社ニコン コンテンツ感想出力装置、コンテンツ感想出力システム、およびコンテンツ感想出力プログラム
JP2019526138A (ja) * 2016-06-27 2019-09-12 フェイスブック,インク. 一致するコンテンツを特定するためのシステムおよび方法
US11030462B2 (en) 2016-06-27 2021-06-08 Facebook, Inc. Systems and methods for storing content
JP2019016392A (ja) * 2018-10-03 2019-01-31 株式会社ニコン コンテンツ感想出力装置およびコンテンツ感想出力システム

Also Published As

Publication number Publication date
WO2011123720A2 (en) 2011-10-06
US20140025699A1 (en) 2014-01-23
US9256601B2 (en) 2016-02-09
EP2553937A2 (en) 2013-02-06
EP2553937A4 (en) 2015-01-14
WO2011123720A3 (en) 2012-02-23
US20150026716A1 (en) 2015-01-22
US20150358679A1 (en) 2015-12-10
US20110246495A1 (en) 2011-10-06
US9113217B2 (en) 2015-08-18
US8874575B2 (en) 2014-10-28
JP5711355B2 (ja) 2015-04-30
US8560583B2 (en) 2013-10-15

Similar Documents

Publication Publication Date Title
JP5711355B2 (ja) ソーシャルネットワーク用メディアフィンガープリント
US10231023B2 (en) Media fingerprinting for content determination and retrieval
US12039776B2 (en) Systems and methods for presenting supplemental content in augmented reality
CN108965956B (zh) 提供视频呈现评论的方法、介质、服务器和***
US20140282677A1 (en) Second screen application linked to media content delivery
US20110246471A1 (en) Retrieving video annotation metadata using a p2p network
US20120324495A1 (en) Detecting and distributing video content identities
US20100158391A1 (en) Identification and transfer of a media object segment from one communications network to another
KR20200066361A (ko) 미디어 데이터에 있는 아이템을 인식하고 이와 관련된 정보를 전달하기 위한 시스템 및 방법
CN105230035A (zh) 用于选择的时移多媒体内容的社交媒体的处理
JP2015090716A (ja) 動画番組推奨方法及びそのサーバ
JP2015090717A (ja) 移動マルチメディア端末、動画番組推奨方法およびそのサーバ
US9635400B1 (en) Subscribing to video clips by source
US20130177286A1 (en) Noninvasive accurate audio synchronization
US20150281787A1 (en) Social Network Augmentation of Broadcast Media
TW201625009A (zh) 產生多媒體影音摘要的系統與方法
US11989758B2 (en) Ecosystem for NFT trading in public media distribution platforms
KR101380963B1 (ko) 관련 정보 제공 시스템 및 제공 방법

Legal Events

Date Code Title Description
A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20131120

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20131126

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20140127

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20140805

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20141105

A911 Transfer to examiner for re-examination before appeal (zenchi)

Free format text: JAPANESE INTERMEDIATE CODE: A911

Effective date: 20141118

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20150203

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20150305

R150 Certificate of patent or registration of utility model

Ref document number: 5711355

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250