JP2003157288A - 情報関連付け方法、端末装置、サーバ装置、プログラム - Google Patents

情報関連付け方法、端末装置、サーバ装置、プログラム

Info

Publication number
JP2003157288A
JP2003157288A JP2001355486A JP2001355486A JP2003157288A JP 2003157288 A JP2003157288 A JP 2003157288A JP 2001355486 A JP2001355486 A JP 2001355486A JP 2001355486 A JP2001355486 A JP 2001355486A JP 2003157288 A JP2003157288 A JP 2003157288A
Authority
JP
Japan
Prior art keywords
information
intermediary
terminal
mediation
range designation
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2001355486A
Other languages
English (en)
Other versions
JP4062908B2 (ja
Inventor
Masahiro Kageyama
昌広 影山
Tomokazu Murakami
智一 村上
Hisao Tanabe
尚男 田邊
Yoshihiro Yamada
佳弘 山田
Akio Shibata
明男 柴田
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Hitachi Ltd
Original Assignee
Hitachi Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Hitachi Ltd filed Critical Hitachi Ltd
Priority to JP2001355486A priority Critical patent/JP4062908B2/ja
Priority to US10/083,359 priority patent/US20030097301A1/en
Publication of JP2003157288A publication Critical patent/JP2003157288A/ja
Application granted granted Critical
Publication of JP4062908B2 publication Critical patent/JP4062908B2/ja
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/472End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
    • H04N21/4728End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content for selecting a Region Of Interest [ROI], e.g. for requesting a higher resolution version of a selected region
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/50Information retrieval; Database structures therefor; File system structures therefor of still image data
    • G06F16/58Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/90Details of database functions independent of the retrieved data types
    • G06F16/95Retrieval from the web
    • G06F16/951Indexing; Web crawling techniques
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00Commerce
    • G06Q30/02Marketing; Price estimation or determination; Fundraising
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00Commerce
    • G06Q30/02Marketing; Price estimation or determination; Fundraising
    • G06Q30/0241Advertisements
    • G06Q30/0251Targeted advertisements
    • G06Q30/0254Targeted advertisements based on statistics
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00Commerce
    • G06Q30/02Marketing; Price estimation or determination; Fundraising
    • G06Q30/0241Advertisements
    • G06Q30/0251Targeted advertisements
    • G06Q30/0255Targeted advertisements based on user history
    • G06Q30/0256User search
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00Commerce
    • G06Q30/02Marketing; Price estimation or determination; Fundraising
    • G06Q30/0241Advertisements
    • G06Q30/0251Targeted advertisements
    • G06Q30/0257User requested
    • G06Q30/0258Registration
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/4402Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/4402Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display
    • H04N21/440263Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display by altering the spatial resolution, e.g. for displaying on a connected PDA
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/478Supplemental services, e.g. displaying phone caller identification, shopping application
    • H04N21/4788Supplemental services, e.g. displaying phone caller identification, shopping application communicating with other users, e.g. chatting
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/482End-user interface for program selection
    • H04N21/4828End-user interface for program selection for searching program descriptors
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/65Transmission of management data between client and server
    • H04N21/658Transmission by the client directed to the server
    • H04N21/6581Reference data, e.g. a movie identifier for ordering a movie or a product identifier in a home shopping application
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/81Monomedia components thereof
    • H04N21/8146Monomedia components thereof involving graphical data, e.g. 3D object, 2D graphics
    • H04N21/8153Monomedia components thereof involving graphical data, e.g. 3D object, 2D graphics comprising still images, e.g. texture, background image
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/83Generation or processing of protective or descriptive data associated with content; Content structuring
    • H04N21/84Generation or processing of descriptive data, e.g. content descriptors
    • H04N21/8405Generation or processing of descriptive data, e.g. content descriptors represented by keywords
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/85Assembly of content; Generation of multimedia applications
    • H04N21/854Content authoring
    • H04N21/8547Content authoring involving timestamps for synchronizing content
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/16Analogue secrecy systems; Analogue subscription systems
    • H04N7/173Analogue secrecy systems; Analogue subscription systems with two-way working, e.g. subscriber sending a programme selection signal
    • H04N7/17309Transmission or handling of upstream communications
    • H04N7/17318Direct or substantially direct transmission and handling of requests

Landscapes

  • Engineering & Computer Science (AREA)
  • Business, Economics & Management (AREA)
  • Signal Processing (AREA)
  • Multimedia (AREA)
  • Strategic Management (AREA)
  • Finance (AREA)
  • Accounting & Taxation (AREA)
  • Development Economics (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • General Business, Economics & Management (AREA)
  • Economics (AREA)
  • Entrepreneurship & Innovation (AREA)
  • Game Theory and Decision Science (AREA)
  • Databases & Information Systems (AREA)
  • Marketing (AREA)
  • General Engineering & Computer Science (AREA)
  • Data Mining & Analysis (AREA)
  • Human Computer Interaction (AREA)
  • Computer Graphics (AREA)
  • Probability & Statistics with Applications (AREA)
  • Library & Information Science (AREA)
  • Computer Security & Cryptography (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)
  • Information Transfer Between Computers (AREA)

Abstract

(57)【要約】 【課題】 従来のWWWサーチエンジンを用いた検索で
は、ユーザによるキーワード入力を前提にしているた
め、TV放送等の映像情報をキーとしてホームページの検
索を行ったり、逆にキーワードからTV放送のシーンを検
索したりすることができなかった。 【解決手段】TV放送やコンピュータネットワークなどを
介して伝送される映像情報と、キーワードなどの文字情
報とを関連付け、TV放送等の映像情報をキーとしてWWW
上のホームページ検索を行ったり、逆にキーワードから
TV放送のシーンを検索したりすることを可能とする情報
関連付け方法、およびこれを利用した端末装置、サーバ
装置、プログラムおよび課金方法を提供する。

Description

【発明の詳細な説明】
【0001】
【発明の属する技術分野】本発明は、映像情報とテキス
ト情報を関連付ける情報関連付け方法に関し、特に映像
情報の一部若しくは全体を検索キーワードとして用いる
方法に関する。
【0002】
【従来の技術】インターネットなどのコンピュータネッ
トワーク(以下、ネットワーク)を利用して、様々な情報
が共有、交換されている。例えば、インターネットによ
って結合されたサーバ装置上に存在する情報は、ハイパ
ーリンクと呼ばれる手法によって互いに関連付け(リン
ク)され、WWW (World Wide Web)と呼ばれる巨大な情報
データベースを構成している。一般には、HTML (Hyper
Text Markup Language)と呼ばれる記述言語によって、
テキスト、音声、映像などの情報がお互いにリンクさ
れ、ホームページと呼ばれるひとつの情報単位を構成し
ている。このネットワーク上では、BBS(Bulletin Board
System)や電子掲示板システムなどと呼ばれる情報交換
システムが運営されており、ユーザは、インターネット
に接続されたPC(Personal Computer)等の端末を用いて
サーバ装置に接続し、情報を書き込んで登録するなどし
て情報交換を行っている。一方、インターネットによっ
て結合されたPCを利用するユーザどうしが、端末用ソフ
トウェアを用いて互いに文字(テキスト)情報を送受信す
ることによって、遠隔地に離れた人とリアルタイムに直
接会話(チャット)し情報を交換することも可能となって
いる。また、特開第2001-236350号公報には、情報交換
システムやチャットなどを介して交換されるテキスト情
報から、特定のキーワードを検出し、このキーワードに
関連した告知広告を閲覧できるようにする技術が開示さ
れている。また、検索技術としては、ユーザがキーワー
ドを入力し、そのキーワードを含むホームページをWWW
の中から検索するサーチエンジンと呼ばれる技術が開発
されている。(佐藤他;”WWWにおける情報検索技術の動
向”, 電子情報通信学会誌,Vol.82, No.12, pp.1237-12
42, 1999年12月)。また、「三須ほか;”複数観測情報
を統合したオクルージョンに対し頑強なオブジェクト追
跡法”, 2001年映像情報メディア学会年次大会講演予稿
集, No.5-5,pp.63-64, 2001年8月」には、テレビジョン
放送などの映像情報の中から、人などの映像オブジェク
トを切出して追跡する技術が開示されている。
【0003】
【発明が解決しようとする課題】TV放送を視聴時に、た
とえばドラマ番組の主演女優が身に付けている衣装等に
ついて検索したい場合、ネットワークに接続されたPC
からサーチエンジンにアクセスし、ユーザが考えた検索
キーワードを入力して検索する必要があった。このよう
に、従来のサーチエンジンでは、ユーザによるキーワー
ド入力を前提にしているため、TV放送等の映像情報をキ
ーとしてホームページの検索を行ったり、逆にキーワー
ドからTV放送のシーンを検索したりすることができな
い、という課題があった。本発明の目的は、上記課題を
解決し、TV放送やネットワークを介して伝送される映像
情報と、キーワードなどの文字情報とを関連付ける情報
関連付け方法、およびこれを利用した端末装置、サーバ
装置、プログラムを提供することにある。これにより、
TV放送の視聴者が、画面をマウスなどのポインティン
グデバイスで選択(クリック)することにより、その衣装
等のメーカ名や価格などの関連情報が画面上に表示され
るなど、TV受像機上に表示された映像の一部あるいは全
体を選択することで、映像と関連する情報を検索できる
機能を提供することが可能となる。
【0004】
【課題を解決するための手段】上記課題を解決するため
に、本発明は、端末装置(以下、端末)とサーバ装置(以
下、サーバ)とコンピュータネットワークと媒介情報を
用いて、媒介情報と該媒介情報に関連する情報(以下、
関連情報)との間に関連付けを行う情報関連付け方法と
して、第1の端末では、第1の媒介情報を受信あるいは
取得し、該第1の媒介情報を識別するための情報(以
下、第1の媒介情報識別情報)と該第1の媒介情報の一
部あるいは全体を指定するための情報(以下、第1の範
囲指定情報)とメッセージ情報の組を、コンピュータネ
ットワーク経由でサーバに送信し、該サーバでは、前記
第1の媒介情報識別情報と前記第1の範囲指定情報と前
記メッセージ情報の組を受信し、受信した前記メッセー
ジ情報の一部あるいは全体から関連情報を作成し、前記
第1の媒介情報識別情報と前記第1の範囲指定情報と前
記第1の関連情報とを相互に関連づけた形態でデータベ
ースに登録するようにしている。
【0005】また、情報関連付け方法として、サーバで
は、前記第1と第2の端末を含む2つ以上の端末からな
るグループを形成し、受信した前記メッセージ情報を、
前記グループに属し前記第2の端末を含む1つ以上の端
末にコンピュータネットワーク経由で送信し、前記第2
の端末では、受信した前記メッセージ情報を出力するよ
うにしている。また、情報関連付け方法として、第3の
端末では、第2の媒介情報を受信あるいは取得し、該第
2の媒介情報を識別するための情報(以下、第2の媒介
情報識別情報)と該第2の媒介情報の一部あるいは全体
を指定するための情報(以下、第2の範囲指定情報)の組
を、コンピュータネットワーク経由でサーバに送信し、
該サーバでは、受信した前記第2の媒介情報識別情報お
よび前記第2の範囲指定情報と、データベースに登録さ
れた前記第1の媒介情報識別情報および前記第1の範囲
指定情報を照合して両者が一致した場合に、該第1の媒
介情報識別情報および第1の範囲指定情報と組をなす前
記関連情報を、第3の端末にコンピュータネットワーク
経由で送信し、該第3の端末では、受信した前記関連情
報を出力するようにしている。
【0006】また、前記サーバでは、広告主から指定ま
たは依頼された広告キーワードと広告情報をデータベー
スに登録し、該広告キーワードが前記関連情報と関連す
るか否かを判定し、関連すると判定された場合には、前
記広告情報を前記第1または第2または第3の端末にコ
ンピュータネットワーク経由で送信し、該第1または第
2または第3の端末では、受信した広告情報を出力する
ようにしている。
【0007】また、サーバとコンピュータネットワーク
と媒介情報を用いて、媒介情報と関連情報の関連付けを
行う端末として、媒介情報を入力する手段と、媒介情報
識別情報を取得する手段と、範囲指定情報を取得する手
段と、メッセージ情報を入力する手段と、前記媒介情報
識別情報と前記範囲指定情報とメッセージ情報をコンピ
ュータネットワーク経由で送信する手段と、関連情報を
コンピュータネットワーク経由で受信して出力する手段
と、前記媒介情報のうち前記範囲指定情報で指定された
部分と関連情報とを関連づけて表示する手段を備えるよ
うにしている。
【0008】また、コンピュータネットワークを用いて
2つ以上の端末間で情報の交換を行うサーバ装置とし
て、第1の端末から送信された第1の媒介情報識別情報
と第1の範囲指定情報とメッセージ情報の組をコンピュ
ータネットワーク経由で受信する手段と、該メッセージ
情報の一部あるいは全体から関連情報を生成する手段
と、前記第1の媒介情報識別情報と前記第1の範囲指定
情報と前記メッセージ情報と前記関連情報を互いに関連
付けた形態でデータベースに蓄積する手段と、第2の端
末から送信された第2の媒介情報識別情報と第2の範囲
指定情報の組をコンピュータネットワーク経由で受信し
てデータベースに蓄積する手段と、前記第1と第2の媒
介情報識別情報および前記第1と第2の範囲指定情報を
それぞれ照合する照合手段と、照合の結果両者が一致し
た場合に前記メッセージ情報あるいは前記関連情報のど
ちらか一方あるいは両方の情報を前記第2の端末に対し
てコンピュータネットワーク経由で送信する手段を備え
るようにしている。また、サーバ装置として、広告主か
ら指定あるいは依頼された広告キーワードと広告情報を
データベースに登録する手段と、該広告キーワードが前
記関連情報と関連するか否かを判定する手段と、関連す
ると判定された場合には、前記広告情報を前記第1また
は第2の端末にコンピュータネットワーク経由で送信す
る手段を備えるようにしている。
【0009】また、サーバ装置として、前記第1の媒介
情報識別情報と、前記第1の範囲指定情報と、前記メッ
セージ情報と、前記関連情報と、前記第2の媒介情報識
別情報と、前記第2の範囲指定情報と、前記広告キーワ
ードのうちいずれか1つの情報、あるいは複数を組み合
わせた情報をもとにマーケティング情報を生成するマー
ケティング情報解析手段を備えるようにしている。ま
た、サーバ装置として、前記広告キーワードは、少なく
とも商品名、各種用品名、人名、施設名、都市等の地域
名を含む名詞、固有名詞、行動動作を表す動詞、形容詞
および代名詞と、これらを組み合わせた複合語、熟語、
文であるようにしている。
【0010】また、媒介情報を入力して手順と、該媒介
情報を識別するための情報(以下、媒介情報識別情報)を
取得する手順と、該媒介情報の一部あるいは全体を指定
するための情報(以下、範囲指定情報)を取得する手順
と、メッセージ情報を入力する手順と、前記媒介情報識
別情報と前記範囲指定情報とメッセージ情報をコンピュ
ータネットワーク経由で送信する手順と、関連情報をコ
ンピュータネットワーク経由で受信する手順と、前記媒
介情報のうち前記範囲指定情報で指定された部分と関連
情報とを関連づけて表示する手順をコンピュータに実行
させるためのプログラムとしている。また、第1の端末
から送信された第1の媒介情報識別情報と第1の範囲指
定情報とメッセージ情報の組をコンピュータネットワー
ク経由で受信する手順と、該メッセージ情報の一部ある
いは全体から関連情報を生成する手順と、前記第1の媒
介情報識別情報と前記第1の範囲指定情報と前記メッセ
ージ情報と前記関連情報を互いに関連付けた形態でデー
タベースに蓄積する手順と、第2の端末から送信された
第2の媒介情報識別情報と第2の範囲指定情報の組をコ
ンピュータネットワーク経由で受信してデータベースに
蓄積する手順と、前記第1と第2の媒介情報識別情報お
よび前記第1と第2の範囲指定情報をそれぞれ照合する
照合手順と、照合の結果両者が一致した場合に前記メッ
セージ情報あるいは前記関連情報のどちらか一方あるい
は両方の情報を前記第2の端末に対してコンピュータネ
ットワーク経由で送信する手順をコンピュータに実行さ
せるためのプログラムとしている。
【0011】
【発明の実施の形態】以下、本発明の実施例を図示によ
り説明する。
【0012】図1に本発明の実施例の構成図を示す。同
図において、まず2台の情報交換端末装置(以下、端
末)A101、B102と、情報交換サーバ装置(以下、サー
バ)103と、コンピュータネットワーク(以下、ネットワ
ーク)104と、TV放送など映像情報を含む媒介情報105を
用いて、文字情報(以下、テキスト)を含む会話(以下、
チャット)による情報交換システムを構築する。具体的
には、端末A101、端末B102に対して後述の媒介情報10
5をそれぞれ入力し、各端末はサーバ103を介して媒介情
報の識別情報108,112、範囲指定情報109,113、端末識別
情報110,114、テキストを含むメッセージ情報111,115、
などの情報をやりとりする。サーバ103は、媒介情報照
合手段106と情報交換用データベース107とキーワード抽
出手段116を持ち、各端末から送信された情報を受信し
て情報交換用データベース107に格納すると共に、キー
ワード媒介情報照合手段106を用いて端末どうしをグル
ープ化し、端末どうしの通信を可能にする。このグルー
プ化の方法については後述する。また、サーバ103は、
キーワード抽出手段116を用いて、各端末から送信され
たメッセージ情報111,115を解析し、後述するキーワー
ド情報、文脈情報、関連情報などを抽出して、情報交換
用データベース107に格納する。前記媒介情報105は、TV
放送の映像、ビデオCDやDVDビデオ等のパッケージ化さ
れた映像、インターネット等を通じて配信されるストリ
ーミング映像やホームページ、GPS(Global Positioning
System)によって位置や方向の特定された風景映像など
のように、双方で独立して識別できる(すなわち、他の
媒介情報と区別できる)ものであれば何でもよい。以
下、媒介情報105としてTV放送を用いた場合を例に挙げ
て説明する。前記端末A101では、前記媒介情報105を再
生し表示する。ここで、端末A(101)を操作するユーザ
が、再生されている映像の対象に興味を持った際に、ユ
ーザは端末A101に内蔵された座標ポインティングデバ
イス(マウス、タブレット、ペン、リモコンなど)を用い
て、画面上の位置と範囲を指定する。一例として図1で
は、画面に表示された花瓶の花の部分を選択してクリッ
クし、画面位置の指定と画面範囲の指定を行っている。
この時、端末A101は入力された媒介情報105を識別する
ための情報(すなわち、媒介情報の識別情報108)を取得
する。媒介情報の識別情報108としては、例えば、TV放
送の場合には放送チャンネル番号、受信地域などを用い
ればよい。ビデCDやDVDビデオ等のパッケージ映像や、
ネットワークを介して伝送されたストリーミングコンテ
ンツなどの場合などは、コンテンツに一意な情報(例え
ばID、URL(Uniform Resource Locator)、管理番号等)を
用いればよい。また同時に端末A101は、クリックされ
た時刻と、指定された画面位置、画面範囲から、媒介情
報における時刻と画面内位置の各範囲を識別する情報
(以下、範囲指定情報)を取得する。時刻については、
媒介情報がテレビジョン放送であれば放送時刻を用い、
パッケージ映像やストリーミングコンテンツでは先頭か
らの経過時刻や、経過時刻と対応するデータアドレスな
どを用いればよい。ここで前記時刻とは、年、月、日、
時、分、秒、フレーム番号などを含む。また、前記時刻
に範囲を与え、開始時刻と終了時刻の間に一定期間(例
えば1秒間)を定めてもよい。画面内位置の範囲として
は、形状(例えば円や長方形など)を指定する情報と、
パラメータ(形状を円とすれば中心点の座標と半径、長
方形とすれば重心の座標と縦横の辺の長さ)などを用い
ればよい。また、前記範囲指定情報を作成する際に、時
刻の範囲と画面内位置の範囲の両方を指定するのではな
く、時刻の範囲あるいは画面内位置の範囲のどちらか一
方だけを指定してもよく、また、媒介情報の全体を指定
してもよい。また、前記端末識別情報110として、例え
ば端末に設定されたIP(Internet Protocol)アドレスやM
AC(Media AccessControl)アドレスや電子メールアドレ
スなどのアドレス情報や、携帯電話などの場合には電話
番号や、ユーザ情報(氏名やハンドル名など)から端末を
一意に識別できる場合にはユーザ識別情報などを用いれ
ばよい。
【0013】一方、前記端末B102においても端末A101
と同様に、媒介情報105の入力と表示、およびユーザの
範囲指定動作を介して、媒介情報の識別情報112、範囲
指定情報113、端末識別情報114の取得が行われる。端末
B102は、前記媒介情報の識別情報112、範囲指定情報11
3、端末識別情報114を取得し、サーバ103に送信する。
前記サーバ103は、端末A101と端末B102から送信され
た媒介情報の識別情報108,112、範囲指定情報109,113、
端末識別情報110,114などの情報を受信し、これらの情
報を情報交換用データベース107に登録するとともに、
媒介情報照合手段108を用いて、端末A101と端末B102
をグループ化するかどうかを判定する。すなわち、端末
A101と端末B102から送信された媒介情報の識別情報10
8,112が同一で、範囲指定情報109,113がある程度重なる
範囲にあれば両端末でチャットができるように同じグル
ープにまとめる。具体的には、端末A101と端末B102が
同じ番組内容のTV放送を見ており、比較的近い画面範囲
を指定してクリックしたと仮定する。すると、サーバ10
3は、端末A101と端末B102が同じ対象を選択したと判
定して、これらの端末がチャット(すなわち、メッセー
ジ情報111,115の交換)をできるようにグループを形成し
て、相互に接続する。こうして同じグループ内で接続さ
れた端末どうしは、自由にチャットできるようになる。
なお、グループ形成方法はこれに限定されるわけではな
く、例えば、端末A101と端末B102が同一のグループと
なるように予めサーバに登録しておいてもよく、この場
合には前記媒介情報の識別情報108,112や範囲指定情報1
09,113の照合などは不要である。また、同時に3つ以上
の端末でチャットを行うようにグループ化してもよい。
続いて、サーバ103は、チャットを介して端末間で交換
されるメッセージ情報111,115から、キーワード抽出手
段116を用いてキーワードを抽出し、情報交換用データ
ベース107に格納する。このキーワード抽出方法につい
ては後述する。
【0014】以上の動作により、サーバ103では、端末
A101にて指定した対象(図1の例では花が映っている映
像部分)と、端末A101から送信されたメッセージ情報11
1の中のキーワードを関連づけて、情報交換用データベ
ース107に格納することが可能となる。端末B102につい
ても同様に、端末B102にて指定した対象とキーワード
とを関連づけて、情報交換用データベース107に格納す
るこのように映像対象とキーワードを関連づけた結果
を、検索に利用することができる。以下、この検索動作
について説明する。検索を行おうとする端末C117にお
いて、前記と同様に媒介情報105を入力して表示し、端
末C117を操作するユーザが、再生されている映像の対
象に関する情報を検索したいと思ったときにその対象が
映った画面上の位置と範囲を指定し、サーバ103に媒介
情報の識別情報118、範囲指定情報119、端末識別情報12
0を送信する。サーバ103では、媒介情報照合手段106と
情報交換用データベース107を用い、端末C117から送ら
れた媒介情報の識別情報118と範囲指定情報119に対応す
るキーワードを検索し、この検索結果121をネットワー
ク104経由で端末C117に送信し、端末C117にて表示す
る。具体的には、端末C117から送信された媒介情報の
識別情報118と情報交換用データベース107に格納されて
いる媒介情報の識別情報108が同一で、なおかつ端末C1
17から送信された範囲指定情報119と情報交換用データ
ベース107に格納されている範囲指定情報109がある程度
重なる範囲にあれば、これらは同じ対象を指していると
判定し、この対象と関連付けられているキーワードを検
索結果121とする。
【0015】なお、図1では、便宜上、チャットを行う
端末A101及び端末B102と、検索を行う端末C117を別
々の端末として示したが、これらを1つの端末に集約
し、チャットと検索の両方を行う端末としてもよい。ま
た、端末C117が検索要求をサーバに送信したのちに、
端末A101と端末B102の間でチャットが開始されること
もあるため、端末C117からの一度の検索要求に対して
サーバ103にて上記検索動作を定期的に複数回繰り返し
てもよい。また、チャットを行う端末A101及びB102と
検索を行う端末C117とをサーバにて区別するために、
チャットを行う端末A101及び端末B102はメッセージ交
換要求をサーバに送信し、検索を行う端末C117は検索
要求をサーバに送信してもよい。
【0016】図2を用いて、前記キーワード抽出手段11
6の動作について説明する。前述したように、媒介情報1
05が表示された前記端末A101のディスプレイ画面201上
でユーザが指定した指定範囲202と、端末A101と端末B
102の間で交わされたメッセージ情報203は、サーバ103
にて関連付けられている。キーワード抽出手段116で
は、メッセージ情報203の内容を分析し、特定の単語や
固有名詞などを含むキーワード情報205、キーワード間
の関係を示す文脈情報206、キーワードと関連したリン
ク情報207などを抽出する。図2に示した例では、「お
花」「名前」「アマリリス」「きれい」「値段」「10
00円」などがキーワード情報205である。次に、キー
ワード情報どうしの関係を示す文脈情報206を抽出す
る。文脈情報は、例えば、「名前」:名詞、「きれ
い」:形容詞のようにキーワードの属性や、「名前」→
「アマリリス」、「お花」→「きれい」のようにキーワ
ードどうしの関係を示す情報である。リンク情報207は
ホームページのアドレスや、ユーザのメールアドレスな
ど、特殊な用途に用いられるテキスト情報である。な
お、キーワード切り出しや文脈情報の抽出については、
特定の単語や単語間の意味的な関連づけを格納した辞書
データと照合するなどの従来の技術や、前記参考文献1
記載の技術を用いればよいため、図示は省略する。この
ように、メッセージ情報203の解析を行うことによっ
て、媒介情報105の中から一部を選択した指定範囲202と
キーワード情報205、文脈情報206、リンク情報207の関
連付けが可能となる。これにより、例えば映像の特定の
フレームに映っている選択対象からキーワード情報を取
得したいと思えば、前記端末C117はサーバに対してそ
の選択対象に関する媒介情報の識別情報118と範囲指定
情報119を送信し、サーバ103にてこれらの情報から選択
対象を特定し、「お花」「アマリリス」などのキーワー
ド情報205を検索して、検索結果121を端末C117に返
す。これによって映像情報からキーワード情報を得るこ
とが出来る。逆に、キーワード情報から映像情報を取得
したければ、端末はキーワード情報をサーバに送信する
ことによって、サーバがキーワード情報から選択対象を
特定し、媒介情報の識別情報と、範囲指定情報を検索結
果として端末に返す。端末はこれらの情報からフレー
ム、シーンを特定し、選択対象の映像を表示することが
できる。
【0017】さらに図3も用いて、前述した端末C117
とサーバ103による検索動作のステップ301について説明
する。同図において、まずステップ302において、サー
バ103では、チャットによって蓄積されたメッセージ情
報111,115を解析し、キーワード抽出結果204として情報
交換用データベース107に保存する。次にステップ303に
おいて、検索を行おうとする端末C117は、サーバ103に
対しクエリー情報を送信する。クエリー情報とは、映像
情報からキーワードを検索する場合には、映像を特定す
るための媒介情報の識別情報118と、範囲指定情報119
と、キーワードを検索するためのコマンドであり、キー
ワードから映像情報を検索する場合には、検索のための
キーワード文字列と、映像情報を検索するためのコマン
ドである。またサーバから端末C117に対して検索結果1
21を送信するために、前記クエリー情報に端末識別情報
120を含んでもよい。次にステップ304において、サーバ
は端末から送られたクエリー情報を元に、情報交換用デ
ータベース107内のキーワード抽出結果204を検索し、検
索結果121を端末C117に送信する。次にステップ305に
おいて、端末C117は検索結果121を受信して表示する。
例えば、検索結果121としてキーワード情報205を受信し
た場合には、キーワードの一覧を表示すればよい。ま
た、リンク情報207を受信した場合には、ホームページ
アドレスを示すリンク文字列を表示したり、そのリンク
文字列が指し示すHTML文書を表示したりすればよい。媒
介情報の識別情報と範囲指定情報を受信した場合には、
後述のように端末C117上に保存されている媒介情報の
中から該当するフレーム、シーンを抜き出して表示すれ
ばよい。また、これらを併用して表示してもよい。な
お、サーバ103から端末C117への検索結果121の送信方
法として、検索結果121をHTML文書などのように直接的
に表示できる形態で送信してもよいし、検索結果121を
含む電子メールや郵送などのように間接的に表示できる
形態で送信してもよい。
【0018】図4に、本発明で用いる端末の構成図を示
す。前述のステップを有するソフトウェアプログラムを
格納したプログラム格納メモリ404からの指示に基づ
き、情報処理装置405が装置全体の制御を行う。まず、
媒介情報受信部402から入力された媒介情報105は、情報
処理装置にてデジタルデータとして扱えるように符号化
する。媒介情報受信部は一般的なテレビチューナやPC用
のテレビチューナボードなどを用いればよい。この符号
化方式として、ISO/IEC規格にて規定されているMPEG(Mo
ving Picture Experts Group)方式やJPEG(Joint Photog
raphic Experts Group)方式などの一般的な方式を用い
ることができるため、図示は省略する。なおこのとき、
映像信号だけでなく、音声信号についても同様に符号化
してもよい。また、既に符号化された映像・音声信号が
媒介情報受信部に入力された場合には、前述した情報処
理装置での符号化は特に必要ではない。符号化された信
号は、情報処理装置にて復号化され、ディスプレイ403
に表示される。情報処理装置とは別に、符号化、復号化
を行うエンコーダ、デコーダを用意してもよい。ディス
プレイ403は、前記符号化された映像/音声信号の復号さ
れた信号だけでなく、チャットの際のメッセージ情報11
1,115に含まれる文字列や記号、サムネール画像、関連
情報や、検索結果121を表示するためのHTML文書等の出
力も行う。この際、映像・音声信号を出力するためのデ
ィスプレイ1と、HTML文書等の出力するためのディスプ
レイ2に別けて構成してもよく、ディスプレイ1として
TV受像機を用い、ディスプレイ2として携帯型端末(例
えば携帯電話装置等)を用いてもよい。また、符号化さ
れた信号をある時間間隔を置いたのちに再生であるタイ
ムシフトをおこなうために、一旦、記憶装置406に記録
してもよい。記憶装置の記録媒体409としては、CD(Comp
act Disc)やDVD(Digital Versatile Disc)、MO(Magneto
-Optical)、FDD(フロッピー(登録商標)ディスク)、HD
D(ハードディスク)などのディスク媒体、ビデオカセッ
トテープ等のテープ状の媒体や、RAM(Random Access Me
mory)、フラッシュメモリ等の固体メモリを用いればよ
い。タイムシフトの方法は、一般的な方法を用いればよ
いので図示は省略する。また、前記媒介情報受信部やデ
ィスプレイに関しては、別の装置の機能を流用する(す
なわち外付け構成とする)ことにより、端末の構成から
外してもよい。また、媒介情報受信部402では、媒介情
報の識別情報108,112と範囲指定情報109,113の取得だけ
を行い、媒介情報105そのものを情報処理装置405に取り
込まなくてもよい。操作部401では、前述のポインティ
ングデバイスからのデータに基づき、ユーザが興味を持
った映像が表示されたディスプレイ403の画面位置指定
(水平、垂直の画素位置の指定)と画面範囲指定(範囲を
表す半径などの指定)を行う。さらに、チャットのため
のメッセージ情報の入力 (キーボード入力や表示された
一覧の中からの選択など)や検索のためのクエリー情報
の入力などを行う。情報処理装置405はプログラム格納
メモリ404に格納されたプログラムの指示に従い、媒介
情報受信部402から媒介情報105を識別するための情報
(チャンネル、放送時刻、受信地域など)を取得して保持
する。また、タイムシフトを行う場合には、映像/音声
信号を記録する際に、この識別情報も併せて記録し、再
生時に読み出す。また、媒介情報受信部402や操作部401
やネットワークインタフェース407からの情報などを元
に、媒介情報の識別情報、範囲指定情報、アドレス情
報、メッセージ情報、クエリー情報等を作成し、ネット
ワークインタフェース407を用いてネットワーク408を経
由してサーバ103に情報を送信する。このネットワーク
インタフェース407は、ネットワークへのコマンドとデ
ータの送受信などの機能を提供するものであり、一般的
なPC用のネットワークインタフェースボード等を用いる
ことが可能であるため、図示は省略する。これらの機能
はテレビチューナ機能を内蔵したPC等によってソフトウ
ェア制御により実現することが可能であるが、これ以外
にもテレビジョン受像機等にこれらの機能を内蔵する形
態で実現してもよい。
【0019】端末は、サムネール画像作成機能を持つの
が好ましい。サムネール画像作成機能は、受信した媒介
情報、または記憶装置に保存した媒介情報と、媒介情報
の識別情報、範囲指定情報を入力とし、時刻情報と一致
する媒介情報を取り出し、これに画面範囲情報をユーザ
に理解できる表示形態で重ねて、サムネール画像を作成
する。媒介情報の識別情報、範囲指定情報はネットワー
ク経由で受信したものでもよいし、自端末において取得
したものでもよい。このサムネール画像作成機能を持つ
ことにより、サムネール画像自身をネットワーク経由で
伝送せずに、媒介情報の識別情報、範囲指定情報を伝送
することによって、遠隔地にある端末間で同じサムネー
ル画像を共有し、表示することが可能となる。
【0020】図5に、本発明で用いる端末A101および
端末B102の画面表示の一例を示す。ここでは、端末A1
01を操るユーザAと端末B102を操るユーザBが、同じ
テレビ番組を見ながらチャットを行っている場合の各端
末での画面表示を例に挙げて示す。ディスプレイ画面50
1上に媒介情報(TV放送)が映し出され、端末を操るユ
ーザAが興味のある対象をポインタ503を用いて指定範
囲502を設定して選択する様子を示している。ユーザA
はマウス505を用いてポインタ503の位置を制御し、マウ
スホイール507を用いることによって指定範囲502を示す
円の大きさを拡大・縮小し、マウスボタン506を用いて
指定範囲を決定する。指定範囲は図のように円で指定し
てもよいし、長方形などの他の形状で指定してもよい。
ユーザによって指定範囲が決定されると、決定された時
点の媒介情報における指定範囲の縮小表示画像として、
サムネール画像508が表示される。サムネール画像は、
自端末にて作成したものでもよいし、他の端末にて作成
されネットワーク経由で送信されたものでもよいし、前
述のように媒介情報の識別情報と範囲指定情報と自端末
の記憶装置内に格納しておいた媒介情報から作成したも
のでもよい。ユーザはキーボード504を用いて文字等を
入力し、他の端末と通信してチャットを行う。入力され
た文字等はメッセージ入力部510に表示される。キーボ
ードによって文字を直接入力する以外にも、予め用意さ
れた文字や記号の一覧の中から一文字ずつ選択してもよ
いし、予め用意された文章一覧の中から文章ごと選択し
てもよい。他の端末とメッセージ交換したチャットの内
容が、チャット表示部509に表示される。ユーザの名前
やメールアドレス、発言時刻などの付随情報を表示して
もよい。これらの付随情報は、チャット開始時に一度だ
け送信し、受信した端末やサーバに格納しておいたもの
を表示してもよいし、チャット入力があるたびに毎回送
信して表示してもよい。チャット表示部のそれぞれの発
言についてサムネール画像を表示してもよい。チャット
表示部のメッセージの数が多い場合には、画面スクロー
ル手段をつけてスクロール表示してもよい。
【0021】図6に、本発明で用いる端末C117の画面
表示の一例を示す。同図において、ディスプレイ画面50
1上にTV放送等の媒介情報が映し出され、前記端末C117
を操るユーザCが興味のある対象をポインタ503を用い
て指定範囲502を設定して選択し、これに関連した検索
結果を取得する様子を示している。前記と同様に、ユー
ザCはマウス505を用いてポインタ503の位置を制御し、
マウスホイール507を用いることによって指定範囲502を
示す円の大きさを拡大・縮小し、マウスボタン506を用
いて指定範囲を決定する。ユーザによって指定範囲が決
定されると、決定された時点の媒介情報における指定範
囲の縮小表示画像として、サムネール画像508が表示さ
れる。さらにユーザCが検索ボタン601を押すと、前述
のように媒介情報の識別情報118と範囲指定情報119をク
エリー情報としてサーバ103に送信し、サーバからの検
索結果121を待つ。検索結果121を受信したのちに、検索
結果表示部602に表示する。このとき、前述したよう
に、電子メールなどによって検索結果121を後日受信す
る場合もある。この場合には、検索結果121とともに媒
介情報の識別情報118と範囲指定情報119をサーバ103か
ら端末C117に送信するようにして、端末C117にてサム
ネール画像508を再生し、検索結果121と関連づけて表示
するようにすれば、ユーザCは何について検索したのか
を思い出しやすい。
【0022】図7を用いて、チャットを行う端末A101
および端末B102の動作と、検索を行う端末C117動作に
ついて説明する。端末A、B、C、D、Eの5つの端末が
あり、これらが同一の媒介情報105を入力していたと仮
定する。具体的には、TV放送の同じ番組、すなわち同じ
地域で同じチャンネルを見ていたと仮定する。ここで図
7に示すように、端末A、B、C、D、Eがそれぞれ、フレ
ーム703,704,705,706,702に示す時刻と画面範囲を指定
してクリックしたとする。ここで予め時間範囲701を設
定し、この時間範囲内にクリックした端末をグループ化
の可能性がある端末としてピックアップする。ここで
は、端末Dは一定時間以上離れているので除外する。こ
のとき、媒介情報のシーンチェンジしたフレームをサー
バ側あるいは端末側にて検出し、時間範囲701に収まっ
ている場合であっても、シーンチェンジしたフレームを
またがった場合には異なるグループと判定し、グループ
から除外してもよい。次に、残ったフレームについて時
間方向で合成707し、位置方向での判定を行う。ここ
で、端末Aと端末Bと端末Cが指定した画面範囲708,70
9,710は重なっているが、端末Eが指定した画面範囲は7
11は重なっていないので、端末Eを除外する。従って、
この例では端末Aと端末Bと端末Cを同一グループとし
て判定し、端末D、Eは除外する。画面範囲の重なり具
合の判定としては、一部でも重なった場合に同じグルー
プと判定してもよいし、一定の割合以上重なっている場
合にのみ同じグループとして判定してもよい。また、各
端末が指定するフレームや画面範囲は1つに限定される
わけではなく、複数のフレームや画面範囲をまとめて指
定してもよい。このように、媒介情報の識別情報および
範囲指定情報が一定の範囲に含まれる端末どうしをグル
ープ化することにより、ユーザどうしが同じ対象を見な
がらチャットすることが可能になるとともに、その対象
に関連した情報を検索することが可能となる。なお、サ
ーバ103では、上述のように同じ対象を指定したグルー
プ(すなわち、端末Aと端末Bと端末Cのグループ)ごと
に管理してもよいし、チャットする際のグループ(すな
わち、端末Aと端末Bから成るグループ)と、検索する際
のグループ(すなわち、端末Cと端末Aのグループ、お
よび端末Cと端末Bのグループ)をそれぞれ分けて管理
してもよい。
【0023】図8に、複数のフレーム802(本図では、
便宜上802-1から802-5で表示)にまたがって表示されて
いる対象をひとつの対象とみなす動作について示す。一
般に動画像では、着目する対象が映っている画面内位置
がフレーム間で移動したり、拡大・縮小したり、回転し
たりする。ここで、例えば端末Aがフレーム802-2に映
っている「花」の部分を指定し、端末Bがフレーム802-
3に映っている「花」の部分を指定した場合、前記図7
に示したグループ化方法では、別々の対象を指定したと
判定される可能性がある。そこで、例えば前記参考文献
3記載の技術などを用いて、映像情報の中から人や物な
どの映像オブジェクトを切出して追跡することにより、
フレーム802-2,802-3,802-4に映ったそれぞれの「花」
の映像部分をひとつの対象と認識することができるよう
になり、フレーム802-2の「花」の映像部分を指定した
端末Aと、フレーム802-3の「花」の映像部分を指定し
た端末Bを同じグループとして管理することができるよ
うになる。ここで、各端末で映像オブジェクト追跡を行
い、その結果を媒介情報の識別情報および範囲指定情報
とともにサーバに送ってもよいし、サーバに複数の媒介
情報105(すなわち、全チャンネルのTV放送)を入力し、
映像オブジェクト追跡を一括して行ってもよい。
【0024】図9を用いて、ひとつの対象に対して複数
のチャットが存在する場合の検索動作の一例について説
明する。同図において、端末Cのディスプレイ画面901
に表示されている検索対象(図9では花が映っている部
分)に対して、例えば端末A、Bからなるグループにて
行われるチャットと、端末F、G、Hからなるグループ
にて行われるチャットのように、複数のチャットが存在
する場合がある。すなわち、端末Cの指定範囲906と、
端末A、Bの指定範囲902と、端末F、G、Hの指定範囲
904の一部が重なることがある。この場合、端末A、B
間で交わされるメッセージ情報903と、端末F、G、H
間で交わされるメッセージ情報905の両方からキーワー
ド抽出を行い、端末Cにおける検索結果907としてもよ
い。この際、検索対象(花が映っている部分)と関連づけ
られた各キーワードに対し、後述する重要度908に基づ
いた順位づけを行い、サーバ側あるいは端末側で重要度
の高い順番にキーワードを並べ替えて検索結果907を表
示してもよい。ここで、重要度908として最も簡単な指
標は、メッセージ情報903,905における各キーワードの
出現頻度である。例えば、図9において「アマリリス」
というキーワードが3回出現しており、他のキーワード
よりも回数が多いので、上位に表示されるようにする。
【0025】また、図10に示すように各範囲指定の一
致度数H1010を算出し、前述したキーワード出現頻度に
重み付けを行ってもよい。例えば、同図に示すフレーム
1001内において、端末Aが指定した第1の指定範囲1004
は第1の指定位置(x1,y1)1002と半径r1(1003)により特
定される円とし、端末Cが指定した第2の指定範囲1007
は第2の指定位置(x2,y2)1005と第2の半径r2(1006)に
より特定される円とすると、両者の指定範囲1004,1007
の一致度数H1010は、2つの円が重なった部分の長さd100
9や面積(画素数)を用いて指標とすることができる。こ
こで、2つの円が重なった部分の長さd1009の場合を例に
挙げて具体的に説明すると、max(a,b)はaとbのうち小さ
くないほうを示し、min(a,b)はaとbのうち大きくないほ
うを示すと定義したとき、一方の円が他方に内包される
場合(すなわち、各円の中心間の距離D1008が、0≦D≦ma
x(r1,r2)−min(r1,r2)の関係を満たすとき)は、d=2×mi
n(r1,r2)(すなわち、大きくないほうの円の直径)とな
る。また、2つの円の一部が重なっている場合(すなわ
ち、max(r1,r2)−min(r1,r2)≦D≦(r1+r2)の関係を満た
すとき)には、d=(r1+r2−D)となる。また、2つの円が重
ならない場合(すなわち、(r1+r2)≦Dのとき)には、d=0
となる。さらに、一致度数H1010をH=d/(r1+r2)と定義す
ると、0≦H≦1の範囲に正規化できる。このように算出
した一致度数H1010を、図9に示した端末Cの指定範囲
と端末A、B、F、G、Hの各指定範囲のそれぞれにフレー
ム単位で求め、各メッセージ情報に含まれるキーワード
の出現頻度に一致度数H1010を乗じて重み付け加算する
ことにより、重要度908の信頼性(すなわち、検索対象が
各キーワードとどの程度一致しているかを示す指標)を
向上することができる。
【0026】図11を用いて、前記図3に示した検索動
作のステップ301を拡張し、前記検索方法によって得ら
れたキーワードから、さらに詳細な検索結果を得る動作
について説明する。前述したステップ301では、端末C1
17にて指定された媒介情報の識別情報118と範囲指定情
報119をサーバ103に送信し(ステップ303)、サーバ103
では他の端末間で交わされたチャット内容からキーワー
ド情報を抽出し(ステップ302)、検索結果121として端
末C117に送信して表示した(ステップ304)。同図で
は、さらにステップ1101を加える。ステップ1102では、
端末C117にて前記検索結果121として表示されたキーワ
ードの中からテキストを選択し、サーバに送信する。ス
テップ1103にて、受信したテキスト情報をもとにサーチ
エンジンによるWWWホームページ検索を実施し、前記テ
キスト情報が含まれるホームページの一覧を検索結果と
して、端末C117に送信する。ステップ1104では、端末
C117にて検索結果を受信し表示する。この際、サーチ
エンジンとして、前記参考文献2に記載の技術をそのま
ま用いることができる。
【0027】図12に、前記詳細検索前の表示結果(a)
と詳細検索後の表示結果(b)の一例を示す。同図(a)にお
いて、前記図9に示した端末Cにおける検索結果907の
中から、選択カーソル1201を用いてテキスト情報の一部
(図12の例では「アマリリス」)を選択する。このよう
に選択した状態で、詳細検索ボタン1202を押すと、前記
図11におけるステップ1101が実行され、端末Cでは同
図(b)に示すようなサーチエンジンによる検索結果1203
を得ることができる。その後、復帰ボタン1204などを用
いて、詳細検索前の表示結果(a)に戻るように構成して
もよい。以上のように、媒介情報と、チャットによるメ
ッセージ情報と、従来のサーチエンジンを併せて利用す
ることにより、媒介情報の一部を指定して詳細な検索結
果を得ることが可能になる。
【0028】図13に、前述した情報関連付け方法を利
用して、広告を実現する実施例の構成図を示す。一般
に、無作為に広告するよりも、ユーザが興味を持ってい
る対象に近い内容について広告するほうが、広告効果が
大きい。そこで、前述したようにユーザにより指定され
た対象(例えば花)と、それに関連した広告情報(例えば
花屋の店名、電話番号、地図、商品名、価格などを含む
情報)をサーバ1301にて関連づけ、前述したチャット表
示部509や検索結果表示部602や指定範囲502の近くに表
示する。同図において、サーバ1301は、前述したサーバ
103と広告生成手段1308と広告用データベース1307から
構成し、広告主1302から広告情報1303と広告キーワード
1304を受け取り、マーケティング情報1305と課金情報13
06を広告主1302に返す。具体的には、まず広告主1302
が、広告したい内容と関係を持った1つ以上のキーワー
ド(すなわち、広告キーワード1304)を指定し、サーバ13
01にて広告用データベース1307を経由してキーワード照
合手段1310に入力する。例えば、花屋に関する広告の場
合には、「花」「アマリリス」などが広告キーワード13
04に相当する。これ以外にも、広告キーワード1304とし
て、商品名、各種用品名、人名、施設名、都市等の地域
名を含む名詞、固有名詞、行動動作を表す動詞、形容詞
および代名詞と、これらを組み合わせた複合語、熟語、
文などが考えられる。キーワード照合手段1310では、前
述したキーワード抽出手段116を用いてチャットで交わ
されるメッセージ情報111,115からキーワード情報205を
抽出し、前記広告キーワード1304と関連するキーワード
が抽出された場合に、広告情報送信手段1309とマーケテ
ィング情報解析手段1311に通知する。このとき例えば、
キーワード情報205と広告キーワード1304が一致した場
合や、単語間の意味的な関連づけを格納した辞書データ
を用いてキーワード情報205から広告キーワード1304が
連想される場合(例えば、キーワード情報205が「アマリ
リス」で、広告キーワード1304が「花」などの場合)
に、キーワード情報205と広告キーワード1304が関連し
ていると判定してもよい。広告情報送信手段1309は、広
告主1302が指定した広告情報1303について広告用データ
ベース1307を経由して受取り、ネットワーク104を介し
て端末A101、端末B102、端末C117に送信する。この
動作により、広告主1302が指定した広告キーワード1304
を含むメッセージ情報111,115を直接的に交わした端末
A101と端末B102だけでなく、同じ映像対象を指定した
別の端末C117に対しても広告情報1303を送信できるよ
うになる。また、マーケティング情報解析手段1311で
は、前記キーワード照合手段1310からの通知に従って、
情報交換用データベース107から端末識別情報110,114,1
20を読み出してマーケティング情報1305とし、広告用デ
ータベース1307を介して広告主1302に提供する。また、
これと同時に、広告情報1303をサーバに登録する際の広
告情報のサイズや広告キーワード1304の個数、広告情報
1303が表示された回数や端末数などに課金し、この課金
情報1306を広告主1302に呈示する。前述した広告生成手
段1308は、前記参考文献1に記載の技術を用いて容易に
実現できるため、詳細な図示は省略する。また、前記マ
ーケティング情報1305に、各端末から送られてくる媒介
情報の識別情報108,112,118や範囲指定情報109,113,119
を加えてもよい。これにより、各ユーザが映像のどの部
分に興味を持ってチャットや検索を行ったかという情報
を広告主1302が収集できるようになり、より効果的な広
告を行うことができる。これを利用し、媒介情報の識別
情報や範囲指定情報や端末識別情報をリスト化して提供
するサービスに対して課金してもよい。以上のように、
媒介情報として、地上波/放送衛星/通信衛星/ケーブル
等の伝送媒体を利用した一般的なテレビジョン放送の場
合を例にあげて説明したが、本発明はこれに限定される
わけではなく、インターネットなどのネットワークを通
じて配信される動画像や静止画像、一般的なインターネ
ットホームページや、媒介情報の識別情報としての格納
場所が明確な動画データや静止画データなど、いろいろ
な情報(データ)を媒介情報として用いることが可能であ
る。また、端末とサーバ間で送受信する範囲指定情報と
して、画面内位置の範囲情報を用いず、時刻の範囲情報
だけを用いれば、映像を全く含まない音声情報などを媒
介情報とすることも可能であり、ラジオ放送やネットワ
ークを通じて配信される音声情報などにも同様に適用で
きる。また、コンピュータネットワークとして、インタ
ーネット以外にも、イントラネット(組織内ネットワー
ク)、エクストラネット(組織間ネットワーク)、専用通
信回線、固定電話回線、携帯電話回線などを用いること
ができる。また、媒介情報として、CDやDVDなどの記録
媒体に記録された情報を用いることもできる。また、前
述の例では、チャットの文字列や記号、サムネール画
像、関連情報を表示するためにHTML文書を用いて説明し
たが、本発明はこれに限定されるわけではなく、例えば
携帯電話端末に使用されるコンパクト−HTML(C-HTML)文
書などを用いてもよく、また文字列だけしか含まれない
場合にはテキスト文書としてもよい。
【0029】
【発明の効果】本発明により、TV放送やネットワーク経
由で伝送された映像情報をキーとしてWWW上のホームペ
ージ検索を行ったり、キーワードからTV放送のシーンを
検索したりすることが可能となる。また、本発明によ
り、テレビジョン番組などを視聴時にテレビジョン受像
機上に表示された映像の一部あるいは全体を選択するだ
けで、検索のための文字入力などを行わなくても、前記
映像に関連した他の情報を検索して取得する方法と装置
を提供できる。また、前記映像から他の情報を検索する
検索サービス事業や、前記映像と広告情報を関連づけた
広告サービス事業を実現できる効果がある。
【図面の簡単な説明】
【図1】本発明の一実施例の構成図である。
【図2】本発明の動作説明図である。
【図3】本発明の動作説明図である。
【図4】本発明における端末装置の構成図の一例であ
る。
【図5】本発明における端末装置の画面表示の一例であ
る。
【図6】本発明における端末装置の画面表示の一例であ
る。
【図7】本発明の動作説明図である。
【図8】本発明の動作説明図である。
【図9】本発明の動作説明図である。
【図10】本発明の動作説明図である。
【図11】本発明の動作説明図である。
【図12】本発明の動作説明図である。
【図13】本発明の他の実施例の構成図である。
【符号の説明】
101,102,117…端末、 103,1301…サーバ、 104,408…
ネットワーク、 105…媒介情報、 106…媒介情報照合
手段、 107…情報交換用データベース、 108,112,118
…媒介情報の識別情報、 109,113,119…範囲指定情
報、 110,114,120…端末識別情報、 111,115,203,90
3,905…メッセージ情報、 116…キーワード抽出手段、
121,907,1203…検索結果、 201,501,901…ディスプ
レイ画面、202,502,708,709,710,711,902,904,906,100
4,1007…指定範囲、 204…キーワード抽出結果、 205
…キーワード情報、 206…文脈情報、 207…関連情
報、401…操作部、 402…媒介情報受信部、 403…デ
ィスプレイ、 404…プログラム格納メモリ、 405…情
報処理装置、 406…記憶装置、 407…ネットワークイ
ンタフェース、 409…記録媒体、 503…ポインタ、
504…キーワード、505…マウス、 506…マウスボタ
ン、 507…マウスホイール、 508…サムネール画像、
509…チャット表示部、 510…メッセージ入力部、
601…検索ボタン、 602…検索結果表示部、 701…設
定された時間範囲、 702,703,704,705,706,801,802,10
01…フレーム、 707…時間方向で合成した図、 908…
重要度、 1002,1005…指定位置、 1003,1006…半径、
1008…中心間の距離、 1009…重なり部の長さ、 10
10…一致度数、 1201…選択カーソル、 1202…詳細検
索ボタン、 1204…復帰ボタン、 1302…広告主、 13
03…広告情報、 1304…広告キーワード、 1305…マー
ケティング情報、 1306…課金情報、 1307…広告用デ
ータベース、 1308…広告生成手段、 1309…広告送信
手段、 1310…キーワード照合手段、 1311…マーケテ
ィング情報解析手段、 1312…広告表示部。
───────────────────────────────────────────────────── フロントページの続き (51)Int.Cl.7 識別記号 FI テーマコート゛(参考) G06F 17/60 170 G06F 17/60 170A 326 326 // H04N 7/173 640 H04N 7/173 640Z (72)発明者 田邊 尚男 東京都国分寺市東恋ケ窪一丁目280番地 株式会社日立製作所中央研究所内 (72)発明者 山田 佳弘 東京都千代田区神田駿河台四丁目6番地 株式会社日立製作所システム事業部内 (72)発明者 柴田 明男 東京都千代田区神田駿河台四丁目6番地 株式会社日立製作所システム事業部内 Fターム(参考) 5B075 KK37 ND36 PP13 PQ32 5B082 AA13 EA10 FA16 GC04 5C064 BA07 BB01 BB10 BC01 BC04 BC18 BC23 BD02 BD07

Claims (11)

    【特許請求の範囲】
  1. 【請求項1】第1の端末装置は、第1の媒介情報を受信
    あるいは取得し、該第1の媒介情報を識別するための第
    1の媒介情報識別情報と該第1の媒介情報の一部あるい
    は全体を指定するための第1の範囲指定情報とメッセー
    ジ情報を、コンピュータネットワーク経由でサーバ装置
    に送信し、 サーバ装置は、前記第1の媒介情報識別情報と前記第1
    の範囲指定情報と前記メッセージ情報を受信し、受信し
    た前記メッセージ情報の一部あるいは全体から媒介情報
    関連情報を作成し、前記第1の媒介情報識別情報と前記
    第1の範囲指定情報と媒介情報関連情報とを相互に関連
    づけた形態でデータベースに登録することを特徴とする
    情報関連付け方法。
  2. 【請求項2】請求項1記載の情報関連付け方法におい
    て、前記サーバ装置は、前記第1の端末装置に加え第2
    の端末装置を含む2つ以上の端末装置からなるグループ
    から形成され、受信した前記メッセージ情報を、前記グ
    ループに属し前記第2の端末装置を含む1つ以上の端末
    装置にコンピュータネットワーク経由で送信し、 前記第2の端末装置では、受信した前記メッセージ情報
    を出力することを特徴とする情報関連付け方法。
  3. 【請求項3】第1の端末装置は、第1の媒介情報を受信
    あるいは取得し、該第1の媒介情報を識別するための媒
    介情報識別情報と該第1の媒介情報の一部あるいは全体
    を指定するための第1の範囲指定情報を、コンピュータ
    ネットワーク経由でサーバ装置に送信し、サーバ装置
    は、受信した前記第1の媒介情報識別情報および前記第
    1の範囲指定情報と、データベースに登録された第2の
    媒介情報識別情報および第2の範囲指定情報を照合して
    両者が一致した場合に、該第2の媒介情報識別情報およ
    び第2の範囲指定情報による前記媒介情報関連情報を、
    第2の端末装置にコンピュータネットワーク経由で送信
    し、該第2の端末装置は、受信した前記媒介情報関連情
    報を出力することを特徴とする情報関連付け方法。
  4. 【請求項4】請求項1乃至3記載の情報関連付け方法に
    おいて、 前記サーバ装置では、広告主から指定または依頼された
    広告キーワードと広告情報をデータベースに登録し、該
    広告キーワードが前記媒介情報関連情報と関連するか否
    かを判定し、関連すると判定された場合には、前記広告
    情報を端末装置にコンピュータネットワーク経由で送信
    し、 該端末装置では、受信した広告情報を出力することを特
    徴とする情報関連付け方法。
  5. 【請求項5】媒介情報を入力する手段と、媒介情報識別
    情報を取得する手段と、範囲指定情報を取得する手段
    と、メッセージ情報を入力する手段と、前記媒介情報識
    別情報と前記範囲指定情報とメッセージ情報をコンピュ
    ータネットワーク経由で送信する手段と、媒介情報関連
    情報をコンピュータネットワーク経由で受信して出力す
    る手段と、前記媒介情報のうち前記範囲指定情報で指定
    された部分と媒介情報関連情報とを関連づけて表示する
    手段を備えたことを特徴とする端末装置装置。
  6. 【請求項6】第1の端末装置から送信された第1の媒介
    情報識別情報と第1の範囲指定情報とメッセージ情報を
    コンピュータネットワーク経由で受信する手段と、該メ
    ッセージ情報の一部あるいは全体から媒介情報関連情報
    を生成する手段と、前記第1の媒介情報識別情報と前記
    第1の範囲指定情報と前記メッセージ情報と前記媒介情
    報関連情報を互いに関連付けた形態でデータベースに蓄
    積する手段と、第2の端末装置から送信された第2の媒
    介情報識別情報と第2の範囲指定情報の組をコンピュー
    タネットワーク経由で受信してデータベースに蓄積する
    手段と、前記第1と第2の媒介情報識別情報および前記
    第1と第2の範囲指定情報をそれぞれ照合する照合手段
    と、照合の結果両者が一致した場合に前記メッセージ情
    報あるいは前記媒介情報関連情報のどちらか一方あるい
    は両方の情報を前記第2の端末装置に対してコンピュー
    タネットワーク経由で送信する手段を備えたことを特徴
    とするサーバ装置装置。
  7. 【請求項7】請求項6記載のサーバ装置において、広告
    主から指定あるいは依頼された広告キーワードと広告情
    報をデータベースに登録する手段と、該広告キーワード
    が前記媒介情報関連情報と関連するか否かを判定する手
    段と、関連すると判定された場合には、前記広告情報を
    前記第1または第2の端末装置にコンピュータネットワ
    ーク経由で送信する手段を備えたことを特徴とするサー
    バ装置。
  8. 【請求項8】請求項7記載のサーバ装置において、前記
    第1の媒介情報識別情報と、前記第1の範囲指定情報
    と、前記メッセージ情報と、前記媒介情報関連情報と、
    前記第2の媒介情報識別情報と、前記第2の範囲指定情
    報と、前記広告キーワードのうちいずれか1つの情報、
    あるいは複数を組み合わせた情報をもとに統計に基づく
    マーケティング情報を生成するマーケティング情報解析
    手段を備えたことを特徴とするサーバ装置。
  9. 【請求項9】請求項7または請求項8記載のサーバ装置
    において、前記広告キーワードは、少なくとも商品名、
    各種用品名、人名、施設名、都市等の地域名を含む名
    詞、固有名詞、行動動作を表す動詞、形容詞および代名
    詞と、これらを組み合わせた複合語、熟語、文であるこ
    とを特徴とするサーバ装置。
  10. 【請求項10】媒介情報の入力を受け付けるステップ
    と、該媒介情報を識別するための媒介情報識別情報を取
    得するステップと、該媒介情報の一部あるいは全体を指
    定するための範囲指定情報を取得するステップと、メッ
    セージ情報の入力を受け付けるステップと、前記媒介情
    報識別情報と前記範囲指定情報とメッセージ情報をコン
    ピュータネットワーク経由で送信するステップと、媒介
    情報関連情報をコンピュータネットワーク経由で受信す
    るステップと、前記媒介情報のうち前記範囲指定情報で
    指定された部分と媒介情報関連情報とを関連づけて表示
    するステップとを備えたコンピュータで実行可能なプロ
    グラム。
  11. 【請求項11】コンピュータネットワーク経由で受信さ
    れた第1の端末装置から送信された第1の媒介情報識別
    情報と第1の範囲指定情報とメッセージ情報について、
    該メッセージ情報の一部あるいは全体から媒介情報関連
    情報を生成するステップと、前記第1の媒介情報識別情
    報と前記第1の範囲指定情報と前記メッセージ情報と前
    記媒介情報関連情報を互いに関連付けた形態でデータベ
    ースに蓄積するステップと、コンピュータネットワーク
    経由で受信された第2の端末装置から送信された第2の
    媒介情報識別情報と第2の範囲指定情報のデータベース
    に蓄積するステップと、前記第1と第2の媒介情報識別
    情報および前記第1と第2の範囲指定情報をそれぞれ照
    合するステップと、照合の結果両者が一致した場合に前
    記メッセージ情報あるいは前記媒介情報関連情報のどち
    らか一方あるいは両方の情報を前記第2の端末装置に対
    してコンピュータネットワーク経由で送信するステップ
    とを備えたコンピュータ実行可能なプログラム。
JP2001355486A 2001-11-21 2001-11-21 サーバ装置および画像表示装置 Expired - Fee Related JP4062908B2 (ja)

Priority Applications (2)

Application Number Priority Date Filing Date Title
JP2001355486A JP4062908B2 (ja) 2001-11-21 2001-11-21 サーバ装置および画像表示装置
US10/083,359 US20030097301A1 (en) 2001-11-21 2002-02-27 Method for exchange information based on computer network

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2001355486A JP4062908B2 (ja) 2001-11-21 2001-11-21 サーバ装置および画像表示装置

Related Child Applications (1)

Application Number Title Priority Date Filing Date
JP2007185216A Division JP2007317217A (ja) 2007-07-17 2007-07-17 情報関連付け方法、端末装置、サーバ装置、プログラム

Publications (2)

Publication Number Publication Date
JP2003157288A true JP2003157288A (ja) 2003-05-30
JP4062908B2 JP4062908B2 (ja) 2008-03-19

Family

ID=19167179

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2001355486A Expired - Fee Related JP4062908B2 (ja) 2001-11-21 2001-11-21 サーバ装置および画像表示装置

Country Status (2)

Country Link
US (1) US20030097301A1 (ja)
JP (1) JP4062908B2 (ja)

Cited By (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005167345A (ja) * 2003-11-28 2005-06-23 Sony Corp コミュニケーションシステム、コミュニケーション方法、端末装置、情報提示方法、メッセージ交換装置およびメッセージ交換方法
JP2006157688A (ja) * 2004-11-30 2006-06-15 Nippon Telegr & Teleph Corp <Ntt> 映像シーンに対する意味ラベル付与方法及び装置及びプログラム
JP2007318715A (ja) * 2006-05-26 2007-12-06 Cyberlink Corp 同一のチャンネル番号に対応するユーザーidとマルチメディアコンテンツを表示する方法及び通信装置
JP2009071623A (ja) * 2007-09-13 2009-04-02 Toshiba Corp 情報処理装置および情報表示方法
JP2009267474A (ja) * 2008-04-22 2009-11-12 Yahoo Japan Corp Tv番組と連動した動画対応広告装置及び方法
JPWO2008107986A1 (ja) * 2007-03-07 2010-06-10 パイオニア株式会社 データ閲覧装置及び方法
JP2011004231A (ja) * 2009-06-19 2011-01-06 Sharp Corp 表示装置、プログラムおよび記録媒体
JP2012234543A (ja) * 2011-04-30 2012-11-29 Samsung Electronics Co Ltd 多重ユーザ検索機能
JP2013506342A (ja) * 2009-09-29 2013-02-21 インテル・コーポレーション 異種のコンテンツソースの関連付け
JP2013102345A (ja) * 2011-11-08 2013-05-23 Sony Corp 送信装置、表示制御装置、コンテンツ送信方法、記録媒体、及びプログラム
JP2015057711A (ja) * 2010-02-15 2015-03-26 豊 塚本 仮想空間表示システムおよびプログラム
JP2015215901A (ja) * 2014-05-12 2015-12-03 ワイジェム カンパニー リミテッド 能動的な広告提供方法
WO2018163321A1 (ja) * 2017-03-08 2018-09-13 マクセル株式会社 情報処理装置および情報提供方法
WO2021095263A1 (ja) * 2019-11-15 2021-05-20 富士通株式会社 サービス連携プログラム、サービス連携方法および情報処理装置

Families Citing this family (52)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20040015542A1 (en) * 2002-07-22 2004-01-22 Anonsen Steven P. Hypermedia management system
US7240075B1 (en) * 2002-09-24 2007-07-03 Exphand, Inc. Interactive generating query related to telestrator data designating at least a portion of the still image frame and data identifying a user is generated from the user designating a selected region on the display screen, transmitting the query to the remote information system
US8055907B2 (en) * 2003-10-24 2011-11-08 Microsoft Corporation Programming interface for a computer platform
US20060129455A1 (en) * 2004-12-15 2006-06-15 Kashan Shah Method of advertising to users of text messaging
WO2006075301A1 (en) 2005-01-14 2006-07-20 Philips Intellectual Property & Standards Gmbh A method and a system for constructing virtual video channel
GB0500838D0 (en) * 2005-01-15 2005-02-23 Accentus Plc Catalytic reactor
JP4541998B2 (ja) * 2005-09-01 2010-09-08 キヤノン株式会社 画像処理装置及び画像処理方法
US9940626B2 (en) * 2006-06-23 2018-04-10 At&T Intellectual Property I, L.P. Methods and apparatus to provide an electronic agent
US20080120290A1 (en) * 2006-11-20 2008-05-22 Rexee, Inc. Apparatus for Performing a Weight-Based Search
US8379915B2 (en) * 2006-11-20 2013-02-19 Videosurf, Inc. Method of performing motion-based object extraction and tracking in video
US8059915B2 (en) * 2006-11-20 2011-11-15 Videosurf, Inc. Apparatus for and method of robust motion estimation using line averages
US8488839B2 (en) * 2006-11-20 2013-07-16 Videosurf, Inc. Computer program and apparatus for motion-based object extraction and tracking in video
US20080120328A1 (en) * 2006-11-20 2008-05-22 Rexee, Inc. Method of Performing a Weight-Based Search
US20080120291A1 (en) * 2006-11-20 2008-05-22 Rexee, Inc. Computer Program Implementing A Weight-Based Search
JP2008160337A (ja) * 2006-12-22 2008-07-10 Hitachi Ltd コンテンツ連動型情報提示装置および提示方法
US8213426B2 (en) 2007-01-30 2012-07-03 At&T Ip I, Lp Method and system for multicasting targeted advertising data
US20080195461A1 (en) * 2007-02-13 2008-08-14 Sbc Knowledge Ventures L.P. System and method for host web site profiling
US7899869B1 (en) * 2007-03-22 2011-03-01 Google Inc. Broadcasting in chat system without topic-specific rooms
US7865553B1 (en) 2007-03-22 2011-01-04 Google Inc. Chat system without topic-specific rooms
US7904500B1 (en) * 2007-03-22 2011-03-08 Google Inc. Advertising in chat system without topic-specific rooms
US7903899B2 (en) * 2007-05-23 2011-03-08 Videosurf, Inc. Method of geometric coarsening and segmenting of still images
US7920748B2 (en) * 2007-05-23 2011-04-05 Videosurf, Inc. Apparatus and software for geometric coarsening and segmenting of still images
US8060407B1 (en) 2007-09-04 2011-11-15 Sprint Communications Company L.P. Method for providing personalized, targeted advertisements during playback of media
US8239896B2 (en) * 2008-05-28 2012-08-07 Sony Computer Entertainment America Inc. Integration of control data into digital broadcast content for access to ancillary information
US20090319516A1 (en) * 2008-06-16 2009-12-24 View2Gether Inc. Contextual Advertising Using Video Metadata and Chat Analysis
US8364660B2 (en) * 2008-07-11 2013-01-29 Videosurf, Inc. Apparatus and software system for and method of performing a visual-relevance-rank subsequent search
WO2010006334A1 (en) * 2008-07-11 2010-01-14 Videosurf, Inc. Apparatus and software system for and method of performing a visual-relevance-rank subsequent search
JP2010087976A (ja) * 2008-10-01 2010-04-15 Sony Corp 情報処理装置、情報取得方法、情報取得プログラム及び情報検索システム
GB2468633A (en) * 2008-12-22 2010-09-22 Cvon Innovations Ltd System and method for selecting message content for a recipient
EP2207110A1 (en) * 2009-01-07 2010-07-14 THOMSON Licensing A method and apparatus for exchanging media service queries
KR20100088904A (ko) * 2009-02-02 2010-08-11 삼성전자주식회사 문답 서비스 방법, 문답 서비스 기능을 갖는 방송 수신기 및 저장 매체
US10108970B2 (en) * 2009-03-25 2018-10-23 Verizon Patent And Licensing Inc. Targeted advertising for dynamic groups
US20110047163A1 (en) 2009-08-24 2011-02-24 Google Inc. Relevance-Based Image Selection
US9400982B2 (en) * 2009-09-29 2016-07-26 Verizon Patent And Licensing Inc. Real time television advertisement shaping
US8990104B1 (en) * 2009-10-27 2015-03-24 Sprint Communications Company L.P. Multimedia product placement marketplace
US10043193B2 (en) * 2010-01-20 2018-08-07 Excalibur Ip, Llc Image content based advertisement system
US9652462B2 (en) * 2010-04-29 2017-05-16 Google Inc. Identifying responsive resources across still images and videos
US9508011B2 (en) 2010-05-10 2016-11-29 Videosurf, Inc. Video visual and audio query
EP2437512B1 (en) * 2010-09-29 2013-08-21 TeliaSonera AB Social television service
US20120096354A1 (en) * 2010-10-14 2012-04-19 Park Seungyong Mobile terminal and control method thereof
US9215506B2 (en) 2011-03-31 2015-12-15 Tivo Inc. Phrase-based communication system
US20130007807A1 (en) * 2011-06-30 2013-01-03 Delia Grenville Blended search for next generation television
EP2621180A3 (en) * 2012-01-06 2014-01-22 Kabushiki Kaisha Toshiba Electronic device and audio output method
US20140006153A1 (en) * 2012-06-27 2014-01-02 Infosys Limited System for making personalized offers for business facilitation of an entity and methods thereof
CN102779192B (zh) * 2012-07-04 2015-11-25 小米科技有限责任公司 一种关联用户的方法和装置
KR101821358B1 (ko) * 2013-01-22 2018-01-25 네이버 주식회사 다자간 메신저 서비스를 제공하는 방법 및 시스템
KR102099086B1 (ko) * 2013-02-20 2020-04-09 삼성전자주식회사 디지털 텔레비전 및 사용자 디바이스를 이용하여 사용자 맞춤형 인터랙션을 제공하는 방법, 그 디지털 텔레비전 및 사용자 디바이스
US10455276B2 (en) * 2013-03-04 2019-10-22 Time Warner Cable Enterprises Llc Methods and apparatus for controlling unauthorized streaming of content
WO2015015779A1 (ja) * 2013-07-31 2015-02-05 パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカ 情報提示方法、操作プログラム及び情報提示システム
US10944707B2 (en) * 2014-09-26 2021-03-09 Line Corporation Method, system and recording medium for providing video contents in social platform and file distribution system
KR102275180B1 (ko) * 2015-02-26 2021-07-08 에스케이플래닛 주식회사 메신저 서비스에서의 그룹 아이콘 구성 방법 및 이를 위한 장치
US10798425B1 (en) * 2019-03-24 2020-10-06 International Business Machines Corporation Personalized key object identification in a live video stream

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6282713B1 (en) * 1998-12-21 2001-08-28 Sony Corporation Method and apparatus for providing on-demand electronic advertising
JP3918374B2 (ja) * 1999-09-10 2007-05-23 富士ゼロックス株式会社 文書検索装置および方法

Cited By (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005167345A (ja) * 2003-11-28 2005-06-23 Sony Corp コミュニケーションシステム、コミュニケーション方法、端末装置、情報提示方法、メッセージ交換装置およびメッセージ交換方法
JP2006157688A (ja) * 2004-11-30 2006-06-15 Nippon Telegr & Teleph Corp <Ntt> 映像シーンに対する意味ラベル付与方法及び装置及びプログラム
JP2007318715A (ja) * 2006-05-26 2007-12-06 Cyberlink Corp 同一のチャンネル番号に対応するユーザーidとマルチメディアコンテンツを表示する方法及び通信装置
US8813163B2 (en) 2006-05-26 2014-08-19 Cyberlink Corp. Methods, communication device, and communication system for presenting multi-media content in conjunction with user identifications corresponding to the same channel number
JPWO2008107986A1 (ja) * 2007-03-07 2010-06-10 パイオニア株式会社 データ閲覧装置及び方法
JP2009071623A (ja) * 2007-09-13 2009-04-02 Toshiba Corp 情報処理装置および情報表示方法
JP2009267474A (ja) * 2008-04-22 2009-11-12 Yahoo Japan Corp Tv番組と連動した動画対応広告装置及び方法
JP2011004231A (ja) * 2009-06-19 2011-01-06 Sharp Corp 表示装置、プログラムおよび記録媒体
JP2013506342A (ja) * 2009-09-29 2013-02-21 インテル・コーポレーション 異種のコンテンツソースの関連付け
JP2015057711A (ja) * 2010-02-15 2015-03-26 豊 塚本 仮想空間表示システムおよびプログラム
JP2012234543A (ja) * 2011-04-30 2012-11-29 Samsung Electronics Co Ltd 多重ユーザ検索機能
JP2013102345A (ja) * 2011-11-08 2013-05-23 Sony Corp 送信装置、表示制御装置、コンテンツ送信方法、記録媒体、及びプログラム
US9436289B2 (en) 2011-11-08 2016-09-06 Sony Corporation Transmitting device, display control device, content transmitting method, recording medium, and program
JP2015215901A (ja) * 2014-05-12 2015-12-03 ワイジェム カンパニー リミテッド 能動的な広告提供方法
WO2018163321A1 (ja) * 2017-03-08 2018-09-13 マクセル株式会社 情報処理装置および情報提供方法
WO2021095263A1 (ja) * 2019-11-15 2021-05-20 富士通株式会社 サービス連携プログラム、サービス連携方法および情報処理装置

Also Published As

Publication number Publication date
US20030097301A1 (en) 2003-05-22
JP4062908B2 (ja) 2008-03-19

Similar Documents

Publication Publication Date Title
JP4062908B2 (ja) サーバ装置および画像表示装置
CN107846561B (zh) 确定和显示上下文定向内容的方法及***
US9930311B2 (en) System and method for annotating a video with advertising information
CN107093100B (zh) 多功能多媒体装置
US20180152767A1 (en) Providing related objects during playback of video data
US8478759B2 (en) Information presentation apparatus and mobile terminal
JP2003150529A (ja) 情報交換方法、情報交換端末装置、情報交換サーバ装置、プログラム
CN1326075C (zh) 自动视频检索器精灵
US20080088735A1 (en) Social media platform and method
US20030074671A1 (en) Method for information retrieval based on network
US20130132374A1 (en) Intelligent video summaries in information access
US20080209480A1 (en) Method for enhanced video programming system for integrating internet data for on-demand interactive retrieval
US20080082922A1 (en) System for providing secondary content based on primary broadcast
US20130198321A1 (en) Content associated with primary content
CN101566990A (zh) 一种嵌入于视频的搜索方法及其***
CN101072340A (zh) 流媒体中加入广告信息的方法与***
US20090193463A1 (en) Method and system for sharing information between users in media reproducing system
CN104685899A (zh) 动态媒体片段定价
JP2002108892A (ja) データ管理システム、データ管理方法、及び、記録媒体
KR101140318B1 (ko) 동영상 정보에 대응되어 저장되는 상업적 태그 등의 메타정보 기반 키워드 광고 서비스 방법 및 그 서비스를 위한시스템
CN101491089A (zh) 媒体演示中的嵌入式元数据
CN102272759B (zh) 交换媒体服务查询的方法和装置
JP5335500B2 (ja) コンテンツ検索装置及びコンピュータプログラム
CN106713973A (zh) 搜索节目的方法及装置
KR20110043568A (ko) 동영상 정보에 대응되어 저장되는 상업적 태그 등의 메타 정보 기반 키워드 광고 서비스 방법 및 그 서비스를 위한 시스템

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20040825

RD01 Notification of change of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7421

Effective date: 20060419

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20070123

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20070323

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20070515

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20070717

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20070828

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20071026

A911 Transfer to examiner for re-examination before appeal (zenchi)

Free format text: JAPANESE INTERMEDIATE CODE: A911

Effective date: 20071112

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20071211

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20071224

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20110111

Year of fee payment: 3

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20110111

Year of fee payment: 3

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120111

Year of fee payment: 4

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130111

Year of fee payment: 5

LAPS Cancellation because of no payment of annual fees