JP2002245050A - Method and device for retrieving symbol, program and recording medium recording program - Google Patents
Method and device for retrieving symbol, program and recording medium recording programInfo
- Publication number
- JP2002245050A JP2002245050A JP2001036297A JP2001036297A JP2002245050A JP 2002245050 A JP2002245050 A JP 2002245050A JP 2001036297 A JP2001036297 A JP 2001036297A JP 2001036297 A JP2001036297 A JP 2001036297A JP 2002245050 A JP2002245050 A JP 2002245050A
- Authority
- JP
- Japan
- Prior art keywords
- symbol
- image
- color
- search
- database
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Landscapes
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
- Image Analysis (AREA)
Abstract
Description
【０００１】[0001]
【発明の属する技術分野】本発明は、データベースに予
め登録した登録キーワード（シンボル）と、映像コンテ
ンツの中に現れるキーワード（シンボル）を検索するた
めのシンボル検索方法および装置に関する。BACKGROUND OF THE INVENTION 1. Field of the Invention The present invention relates to a registered keyword (symbol) previously registered in a database and a symbol search method and apparatus for searching for a keyword (symbol) appearing in video contents.
【０００２】[0002]
【従来の技術】近年、インターネットの常時接続サービ
スの拡大化、高速化が進み、イベントや映画などの映像
情報の通信が普及し始めている。また、放送分野では、
デジタルＢＳ放送で提供されるＢＳデータ放送の開始に
より、通信回線を使った双方向サービスも可能になって
きている。2. Description of the Related Art In recent years, the continuous connection service of the Internet has been expanded and speeded up, and communication of video information such as events and movies has begun to spread. In the broadcasting field,
With the start of BS data broadcasting provided by digital BS broadcasting, interactive services using communication lines have also become possible.
【０００３】これら双方向通信機能をもつ放送・通信シ
ステムにおける付加機能として、例えばドラマ等の放送
コンテンツに現れるシンボル（スポンサー名、ロゴ、看
板等）についての付加情報を付与しておき、放送コンテ
ンツの中に現れるロゴ等を視聴者等が指定することで、
当該シンボルに関連する付加情報を視聴者等に提供する
サービスがある。As an additional function in a broadcast / communication system having these two-way communication functions, for example, additional information about symbols (sponsor names, logos, signs, etc.) appearing in broadcast contents such as dramas is added, and By specifying the logo etc. appearing in the viewer, etc.,
There is a service that provides additional information related to the symbol to a viewer or the like.
【０００４】また、放送されるドラマの中で、俳優が身
につけている服飾をクリックすると、その服飾のブラン
ドのホームページを閲覧可能にする機能、あるいはスポ
ーツ番組であれば、テニスの中継と共にテニスツアーの
予約ができるＷｅｂのページを閲覧でき、その場で予約
ができる等のサービスがある。[0004] Also, in the drama to be broadcast, a function that allows the actor to click on the clothing worn by the actor to browse the homepage of the brand of the clothing, or, if the program is a sports program, a tennis tour along with a broadcast of tennis There is a service that allows users to browse a Web page where reservations can be made and make reservations on the spot.
【０００５】以上のような付加機能の実現には、放送・
通信の映像コンテンツの配信元側で放送・通信コンテン
ツに含まれるスポンサー名、ロゴ、看板等のシンボルを
検索および識別し、シンボル毎のキーワードと連携させ
た広告、ＵＲＬ等のコンテンツを付与しておくというコ
ンテンツ編集をしておく。[0005] To realize the above additional functions, broadcasting and
The distributor of the communication video content searches and identifies sponsor names, logos, signs, and other symbols included in the broadcast / communication contents, and provides advertisements, URLs, and other contents linked to keywords for each symbol. Content editing.
【０００６】これらの編集結果は、データベースに予め
登録しておき、付加機能を利用しようとする要求があっ
たときに、そのキーワードで当該データベースを検索
し、要求者に提供される。[0006] These editing results are registered in a database in advance, and when there is a request to use an additional function, the database is searched with the keyword and provided to the requester.
【０００７】[0007]
【発明が解決しようとする課題】前記の配信元側でのコ
ンテンツ編集において、放送・通信コンテンツに含まれ
るスポンサー名、ロゴ、看板等のシンボルを検索する際
に、光の当たり方、見る角度により色や形が変化するた
め、シンボル検索が困難になることがあった。また、映
像中のシンボルを検索する際にあたりをつけずに検索を
始めていたので、処理量が多く、検索間違いが多かっ
た。In the content editing on the distribution source side, when searching for a symbol such as a sponsor name, a logo, or a sign included in the broadcast / communication content, it depends on how light hits and a viewing angle. Because of the change in color and shape, symbol search was sometimes difficult. In addition, since the search was started without making a hit when searching for a symbol in a video, the amount of processing was large and the number of search errors was large.
【０００８】本発明の目的は、シンボルの検索間違いを
減らし、しかもシンボル検索処理量を減らすことができ
る映像中のシンボル検索方法、シンボル検索装置、プロ
グラムおよびそのプログラムを記録した記録媒体を提供
することにある。An object of the present invention is to provide a method for searching for a symbol in a video, a symbol searching apparatus, a program, and a recording medium on which the program can be reduced, which can reduce symbol search errors and reduce the amount of symbol search processing. It is in.
【０００９】[0009]
【課題を解決するための手段】本発明は、コンピュータ
グラフィックス処理で３次元モデルを生成してシンボル
データベースを作成することで、光の当たり方、見る角
度により色や形が変化することによるシンボル検索間違
いを減らし、さらにシンボル検索をする前にシンボル画
像の色と形に着目し、あたりをつけることでシンボル検
索の際の処理量を減らすようにしたもので、以下の検索
方法、装置、プログラムおよびそのプログラムを記録し
た記録媒体を特徴とする。According to the present invention, a symbol database is created by generating a three-dimensional model by computer graphics processing to create a symbol database. It reduces search errors, focuses on the color and shape of the symbol image before performing symbol search, and reduces the amount of processing at the time of symbol search by adding hits. And a recording medium on which the program is recorded.
【００１０】（１）シンボル画像を予め生成・保存した
シンボルデータベースを基に、映像中のシンボル画像を
検索するシンボル検索方法であって、コンピュータグラ
フィックス処理でシンボル画像の３次元モデルを生成し
て前記シンボルデータベースに保存しておく段階と、前
記映像中から１フレーム画像を抽出する段階と、前記抽
出したフレーム画像中のシンボル画像の色について、シ
ンボル画像の代表色を決定し、フレーム画像の色領域を
抽出し、候補領域を決定し、上位ｎ個のシンボルと領域
を選出する段階と、前記抽出したフレーム画像中のシン
ボル画像の形について、シンボル候補画像の変形画像を
作成し、フレーム画像とマッチングさせ、上位ｎ個のシ
ンボルと領域を選出する段階と、前記シンボル画像の色
と形の両方で選出されたシンボル画像を前記データベー
スから検索する段階と、前記シンボル検索の結果を出力
する段階と、を有することを特徴とするシンボル検索方
法。(1) A symbol search method for searching for a symbol image in a video based on a symbol database in which symbol images have been generated and stored in advance, wherein a three-dimensional model of the symbol image is generated by computer graphics processing. Storing the symbol image in the symbol database, extracting one frame image from the video, determining a representative color of the symbol image for the symbol image color in the extracted frame image, Extracting a region, determining a candidate region, selecting the top n symbols and regions, and creating a modified image of the symbol candidate image for the shape of the symbol image in the extracted frame image, Matching and selecting the top n symbols and regions, and selecting both the color and shape of the symbol image Symbol search method characterized by comprising the steps of searching the symbol image from the databases, and a step of outputting a result of the symbol lookup.
【００１１】（２）シンボル画像を予め生成・保存した
シンボルデータベースを基に、映像中のシンボル画像を
検索するシンボル検索装置であって、コンピュータグラ
フィックス処理でシンボル画像の３次元モデルを生成し
て保存しておくシンボルデータベースと、前記映像中か
ら１フレーム画像を抽出するフレーム情報取り出し部
と、前記抽出したフレーム画像中のシンボル画像の色に
ついて、シンボル画像の代表色を決定し、フレーム画像
の色領域を抽出し、候補領域を決定し、上位ｎ個のシン
ボルと領域を選出し、前記抽出したフレーム画像中のシ
ンボル画像の形について、シンボル候補画像の変形画像
を作成し、フレーム画像とマッチングさせ、上位ｎ個の
シンボルと領域を選出する検索候補抽出部と、前記シン
ボル画像の色と形の両方で選出されたシンボル画像を前
記データベースから検索するシンボル検索部と、前記シ
ンボル検索の結果を出力する検索結果出力部と、を備え
たことを特徴とするシンボル検索装置。(2) A symbol retrieval device for retrieving a symbol image in a video based on a symbol database in which symbol images have been generated and stored in advance. The symbol retrieval device generates a three-dimensional model of the symbol image by computer graphics processing. A symbol database to be stored; a frame information extracting unit for extracting one frame image from the video; and a symbol image representative color for the symbol image color in the extracted frame image. A region is extracted, a candidate region is determined, top n symbols and a region are selected, a modified image of the symbol candidate image is created for the shape of the symbol image in the extracted frame image, and the symbol image is matched with the frame image. A search candidate extraction unit for selecting the top n symbols and regions, and a color and shape of the symbol image. Symbol search apparatus characterized by comprising: a symbol search unit for searching the selected symbol image from the database, and the search result output unit for outputting a result of the symbol lookup and in the way.
【００１２】（３）シンボル画像を予め生成・保存した
シンボルデータベースを基に、映像中のシンボル画像を
検索する処理をコンピュータに実行させるためのプログ
ラムであって、コンピュータグラフィックス処理でシン
ボル画像の３次元モデルを生成して保存しておくデータ
ベース処理と、前記映像中から１フレーム画像を抽出す
るフレーム情報取り出し処理と、前記抽出したフレーム
画像中のシンボル画像の色について、シンボル画像の代
表色を決定し、フレーム画像の色領域を抽出し、候補領
域を決定し、上位ｎ個のシンボルと領域を選出する色に
よる抽出処理と、前記抽出したフレーム画像中のシンボ
ル画像の形について、シンボル候補画像の変形画像を作
成し、フレーム画像とマッチングさせ、上位ｎ個のシン
ボルと領域を選出する形による抽出処理と、前記シンボ
ル画像の色と形の両方で選出されたシンボル画像を前記
データベースから検索するシンボル検索処理と、前記シ
ンボル検索の結果を出力する検索結果出力処理と、を備
えたことを特徴とするプログラム。(3) A program for causing a computer to execute a process of searching for a symbol image in a video based on a symbol database in which symbol images have been generated and stored in advance. Database processing for generating and storing a dimensional model; frame information extraction processing for extracting one frame image from the video; and determining the representative color of the symbol image for the color of the symbol image in the extracted frame image. Then, the color region of the frame image is extracted, the candidate region is determined, the extraction process by the color for selecting the top n symbols and the region is performed, and the shape of the symbol image in the extracted frame image is determined. Create a deformed image, match it with the frame image, and select the top n symbols and regions Extraction process, a symbol search process for searching the symbol image selected by both the color and the shape of the symbol image from the database, and a search result output process for outputting a result of the symbol search. A program characterized by that:
【００１３】（４）シンボル画像を予め生成・保存した
シンボルデータベースを基に、映像中のシンボル画像を
検索する処理をコンピュータに実行させるためのプログ
ラムを記録した記録媒体であって、コンピュータグラフ
ィックス処理でシンボル画像の３次元モデルを生成して
保存しておくデータベース処理と、前記映像中から１フ
レーム画像を抽出するフレーム情報取り出し処理と、前
記抽出したフレーム画像中のシンボル画像の色につい
て、シンボル画像の代表色を決定し、フレーム画像の色
領域を抽出し、候補領域を決定し、上位ｎ個のシンボル
と領域を選出する色による抽出処理と、前記抽出したフ
レーム画像中のシンボル画像の形について、シンボル候
補画像の変形画像を作成し、フレーム画像とマッチング
させ、上位ｎ個のシンボルと領域を選出する形による抽
出処理と、前記シンボル画像の色と形の両方で選出され
たシンボル画像を前記データベースから検索するシンボ
ル検索処理と、前記シンボル検索の結果を出力する検索
結果出力処理と、をコンピュータが読み取り可能に記録
したことを特徴とする記録媒体。(4) A recording medium storing a program for causing a computer to execute a process of searching for a symbol image in a video based on a symbol database in which symbol images have been generated and stored in advance. A database process for generating and storing a three-dimensional model of the symbol image, a frame information extracting process for extracting one frame image from the video, and a symbol image for the color of the symbol image in the extracted frame image. , The color region of the frame image is extracted, the candidate region is determined, the upper n symbols and the extraction process by the color for selecting the region, and the shape of the symbol image in the extracted frame image , A deformed image of the symbol candidate image is created, matched with the frame image, and the top n Extraction processing in a form for selecting a bolt and an area, symbol search processing for searching a symbol image selected in both the color and shape of the symbol image from the database, and search result output processing for outputting a result of the symbol search And a computer readable recording medium.
【００１４】[0014]
【発明の実施の形態】図１は本発明の実施形態であるシ
ンボル検索装置の構成を示すブロック図である。１は画
像入力部、２は制御部、３は１フレーム情報取り出し
部、４は検索候補抽出部、５はシンボル検索部、６はシ
ンボルデータベース、７は検索結果出力部である。FIG. 1 is a block diagram showing the configuration of a symbol search device according to an embodiment of the present invention. 1 is an image input unit, 2 is a control unit, 3 is a 1-frame information extraction unit, 4 is a search candidate extraction unit, 5 is a symbol search unit, 6 is a symbol database, and 7 is a search result output unit.
【００１５】上記構成の接続関係を説明する。画像入力
部１から画像が入力されると、制御部２の中の１フレー
ム情報取り出し部３より、入力された画像から１フレー
ム毎の画像を取り出し、検索候補抽出部４より、検索対
象であるシンボルの色と形から、検索候補を取り出す。
シンボル検索部５は、上記検索候補抽出部より取り出さ
れた検索候補よりシンボルデータベース６のシンボルデ
ータとの間で、シンボルを検索する。検索結果出力部７
はシンボル検索結果を出力する。The connection relationship of the above configuration will be described. When an image is input from the image input unit 1, an image for each frame is extracted from the input image by the one-frame information extracting unit 3 in the control unit 2, and is searched by the search candidate extracting unit 4. Extract search candidates from the color and shape of the symbol.
The symbol search unit 5 searches for a symbol from the search candidates extracted from the search candidate extraction unit and the symbol data in the symbol database 6. Search result output unit 7
Outputs a symbol search result.
【００１６】次に、図２に示すフローチャートを参照し
て、本実施形態の動作を説明する。なお、以下の文中に
おけるＳ１００等は、フローチャート中のステップを示
す。Next, the operation of this embodiment will be described with reference to the flowchart shown in FIG. S100 and the like in the following text indicate steps in the flowchart.
【００１７】まず、検索対象となるシンボルは、コンピ
ュータグラフィックス処理でその３次元モデルを生成
し、シンボルデータベースを作成しておく（Ｓ１０
０）。First, a three-dimensional model of a symbol to be searched is generated by computer graphics processing, and a symbol database is created (S10).
0).
【００１８】次に、編集対象となる放送コンテンツ等の
映像から１フレーム画像を抽出する（Ｓ１０１）。ここ
で、シンボル画像の色による抽出処理を行う（Ｓ２０
０）。この処理は、シンボル画像のｎ色の代表色を決定
する（Ｓ２０１）。次に、フレーム画像の色領域を抽出
し、候補領域を決定する（Ｓ２０２）。次に、シンボル
の代表色に近いもの上位ｎ個のシンボルと領域（矩形）
を選出する（Ｓ２０３）。Next, one frame image is extracted from a video such as a broadcast content to be edited (S101). Here, extraction processing is performed using the color of the symbol image (S20).
0). In this process, the n representative colors of the symbol image are determined (S201). Next, a color region of the frame image is extracted, and a candidate region is determined (S202). Next, the top n symbols and areas (rectangles) that are close to the symbol's representative color
Is selected (S203).
【００１９】次に、シンボル画像の形による抽出処理を
行う（Ｓ３００）。この処理は、シンボル画像の拡大縮
小、回転、パースを考慮した変形画像を作成する（Ｓ３
０１）。次に、作成したシンボル画像とフレーム画像を
マッチングをとる（Ｓ３０２）。次に、２種類以上の解
像度の画像で、ほぼ同じ位置、サイズで選出されたシン
ボルと領域をｎ個選出する（Ｓ３０３）。Next, extraction processing is performed in the form of a symbol image (S300). In this process, a transformed image is created in consideration of the scaling, rotation, and perspective of the symbol image (S3).
01). Next, the created symbol image and the frame image are matched (S302). Next, n symbols and regions selected at substantially the same position and size are selected from images of two or more resolutions (S303).
【００２０】最後に、上記のシンボル画像の色と形によ
る選出処理で両方（論理積条件）でシンボル候補画像と
して選出されたシンボルを検索する（Ｓ１０２）。そし
てその検索結果を出力する（Ｓ１０３）。Finally, a symbol selected as a symbol candidate image in both (logical product conditions) in the selection process based on the color and shape of the symbol image is searched (S102). Then, the search result is output (S103).
【００２１】なお、本発明は、図１に示した装置の一部
又は全部の処理機能をプログラムとして構成してコンピ
ュータを用いて実現すること、あるいは図２で示した処
理手順をプログラムとして構成してコンピュータに実行
させることができる。また、コンピュータでその各部の
処理機能を実現するためのプログラム、あるいはコンピ
ュータにその処理手順を実行させるためのプログラム
を、そのコンピュータが読み取り可能な記録媒体、例え
ば、ＦＤ（フロッピーディスク：登録商標）、ＭＯ、Ｒ
ＯＭ、メモリカード、ＣＤ、ＤＶＤ、リムーバブルディ
スクなどに記録して、保存したり、提供したりすること
が可能であり、また、インターネットのような通信ネッ
トワークを介して配布したりすることが可能である。According to the present invention, some or all of the processing functions of the apparatus shown in FIG. 1 are implemented as a program and realized using a computer, or the processing procedure shown in FIG. 2 is implemented as a program. Computer. In addition, a program for realizing the processing function of each unit in the computer or a program for causing the computer to execute the processing procedure is stored in a recording medium readable by the computer, for example, FD (Floppy Disk: registered trademark), MO, R
It can be recorded on an OM, a memory card, a CD, a DVD, a removable disk, or the like, stored and provided, and can be distributed through a communication network such as the Internet. is there.
【００２２】[0022]
【発明の効果】以上のとおり、本発明によれば、予め生
成したシンボルデータベース（車のエンブレム、ブラン
ド品のロゴ、街の看板等）をもとに、映像中のシンボル
画像を検索するにおいて、シンボルデータベースの作成
にはコンピュータグラフィックス処理で３次元モデルを
生成しておくことで、シンボル検索における光の当たり
方、見る角度の違いによる検索間違いを減らすことがで
きる。As described above, according to the present invention, in searching for a symbol image in a video based on a symbol database (a car emblem, a brand logo, a city signboard, etc.) generated in advance, By creating a three-dimensional model by computer graphics processing to create a symbol database, it is possible to reduce search errors due to differences in how light hits and viewing angles in symbol searches.
【００２３】また、シンボル画像の色に着目して、シン
ボル画像の代表色を決定し、フレーム画像の色領域を抽
出し、候補領域を決定し、上位ｎ個のシンボルと領域を
選出する処理をし、シンボル画像の形に着目して、シン
ボル候補画像の変形画像を作成し、フレーム画像とマッ
チングさせ、上位ｎ個のシンボルと領域を選出する処理
をし、これらシンボル画像の色と形に着目した結果より
シンボル検索することで、検索処理量を減らし、検索間
違いを減らすことができる。Also, the process of determining the representative color of the symbol image, extracting the color region of the frame image, determining the candidate region, and selecting the top n symbols and the region is performed by focusing on the color of the symbol image. Focusing on the shape of the symbol image, create a deformed image of the symbol candidate image, match it with the frame image, select the top n symbols and regions, and focus on the color and shape of these symbol images By performing a symbol search from the result, the amount of search processing can be reduced, and search errors can be reduced.
【図１】本発明の実施形態を示すシンボル検索装置のブ
ロック構成図。FIG. 1 is a block diagram of a symbol search device according to an embodiment of the present invention.
【図２】本発明の実施形態におけるフローチャート。FIG. 2 is a flowchart in the embodiment of the present invention.
１…画像入力部 ２…制御部 ３…フレーム情報取り出し部 ４…検索候補抽出部 ５…シンボル検索部 ６…シンボルデータベース蓄積部 ７…検索結果出力部 REFERENCE SIGNS LIST 1 image input unit 2 control unit 3 frame information extracting unit 4 search candidate extracting unit 5 symbol search unit 6 symbol database storage unit 7 search result output unit
───────────────────────────────────────────────────── フロントページの続き (72)発明者 稲垣 博人 東京都千代田区大手町二丁目３番１号 日 本電信電話株式会社内 Ｆターム(参考） 5B075 ND12 NK06 PQ05 5L096 AA02 AA09 BA08 EA45 FA15 JA09 ────────────────────────────────────────────────── ─── Continuing on the front page (72) Inventor Hiroto Inagaki 2-3-1 Otemachi, Chiyoda-ku, Tokyo F-term within Nippon Telegraph and Telephone Corporation 5B075 ND12 NK06 PQ05 5L096 AA02 AA09 BA08 EA45 FA15 JA09
Claims (4)
ボルデータベースを基に、映像中のシンボル画像を検索
するシンボル検索方法であって、 コンピュータグラフィックス処理でシンボル画像の３次
元モデルを生成して前記シンボルデータベースに保存し
ておく段階と、 前記映像中から１フレーム画像を抽出する段階と、 前記抽出したフレーム画像中のシンボル画像の色につい
て、シンボル画像の代表色を決定し、フレーム画像の色
領域を抽出し、候補領域を決定し、上位ｎ個のシンボル
と領域を選出する段階と、 前記抽出したフレーム画像中のシンボル画像の形につい
て、シンボル候補画像の変形画像を作成し、フレーム画
像とマッチングさせ、上位ｎ個のシンボルと領域を選出
する段階と、 前記シンボル画像の色と形の両方で選出されたシンボル
画像を前記データベースから検索する段階と、 前記シンボル検索の結果を出力する段階と、を有するこ
とを特徴とするシンボル検索方法。1. A symbol search method for searching for a symbol image in a video based on a symbol database in which symbol images have been generated and stored in advance, wherein the symbol image is generated by a computer graphics process. Storing a symbol image in the symbol database; extracting a one-frame image from the video; determining a representative color of the symbol image with respect to a color of the symbol image in the extracted frame image; Extracting a candidate area, selecting the top n symbols and areas, creating a deformed image of the symbol candidate image with respect to the shape of the symbol image in the extracted frame image, and matching with the frame image And selecting the top n symbols and regions; and selecting both the color and the shape of the symbol image. Symbol search method characterized by comprising the the steps of the symbol image to search from the database, and a step of outputting a result of the symbol lookup.
ボルデータベースを基に、映像中のシンボル画像を検索
するシンボル検索装置であって、 コンピュータグラフィックス処理でシンボル画像の３次
元モデルを生成して保存しておくシンボルデータベース
と、 前記映像中から１フレーム画像を抽出するフレーム情報
取り出し部と、 前記抽出したフレーム画像中のシンボル画像の色につい
て、シンボル画像の代表色を決定し、フレーム画像の色
領域を抽出し、候補領域を決定し、上位ｎ個のシンボル
と領域を選出し、前記抽出したフレーム画像中のシンボ
ル画像の形について、シンボル候補画像の変形画像を作
成し、フレーム画像とマッチングさせ、上位ｎ個のシン
ボルと領域を選出する検索候補抽出部と、 前記シンボル画像の色と形の両方で選出されたシンボル
画像を前記データベースから検索するシンボル検索部
と、 前記シンボル検索の結果を出力する検索結果出力部と、
を備えたことを特徴とするシンボル検索装置。2. A symbol retrieval apparatus for retrieving a symbol image in a video based on a symbol database in which symbol images have been generated and stored in advance, wherein a three-dimensional model of the symbol image is generated and stored by computer graphics processing. A symbol database to be stored; a frame information extracting unit for extracting one frame image from the video; a symbol image representative color for the symbol image color in the extracted frame image; Is extracted, a candidate region is determined, the top n symbols and regions are selected, and a modified image of the symbol candidate image is created for the shape of the symbol image in the extracted frame image, and the resulting image is matched with the frame image. A search candidate extracting unit for selecting the top n symbols and regions, and both color and shape of the symbol image A symbol search unit for searching the selected symbol image from the database in the search result output unit for outputting a result of the symbol search,
A symbol search device comprising:
ボルデータベースを基に、映像中のシンボル画像を検索
する処理をコンピュータに実行させるためのプログラム
であって、 コンピュータグラフィックス処理でシンボル画像の３次
元モデルを生成して保存しておくデータベース処理と、 前記映像中から１フレーム画像を抽出するフレーム情報
取り出し処理と、 前記抽出したフレーム画像中のシンボル画像の色につい
て、シンボル画像の代表色を決定し、フレーム画像の色
領域を抽出し、候補領域を決定し、上位ｎ個のシンボル
と領域を選出する色による抽出処理と、 前記抽出したフレーム画像中のシンボル画像の形につい
て、シンボル候補画像の変形画像を作成し、フレーム画
像とマッチングさせ、上位ｎ個のシンボルと領域を選出
する形による抽出処理と、 前記シンボル画像の色と形の両方で選出されたシンボル
画像を前記データベースから検索するシンボル検索処理
と、 前記シンボル検索の結果を出力する検索結果出力処理
と、を備えたことを特徴とするプログラム。3. A program for causing a computer to execute a process of searching for a symbol image in a video based on a symbol database in which symbol images have been generated and stored in advance. Database processing for generating and storing a model; frame information extracting processing for extracting one frame image from the video; and determining the representative color of the symbol image for the color of the symbol image in the extracted frame image. Extracting a color region of the frame image, determining a candidate region, and extracting colors by selecting the top n symbols and regions; and transforming the symbol candidate image with respect to the shape of the symbol image in the extracted frame image. Create an image, match it with the frame image, and select the top n symbols and regions An extraction process based on a shape, a symbol search process for searching a symbol image selected in both a color and a shape of the symbol image from the database, and a search result output process for outputting a result of the symbol search. Program characterized by the following.
ボルデータベースを基に、映像中のシンボル画像を検索
する処理をコンピュータに実行させるためのプログラム
を記録した記録媒体であって、 コンピュータグラフィックス処理でシンボル画像の３次
元モデルを生成して保存しておくデータベース処理と、 前記映像中から１フレーム画像を抽出するフレーム情報
取り出し処理と、 前記抽出したフレーム画像中のシンボル画像の色につい
て、シンボル画像の代表色を決定し、フレーム画像の色
領域を抽出し、候補領域を決定し、上位ｎ個のシンボル
と領域を選出する色による抽出処理と、 前記抽出したフレーム画像中のシンボル画像の形につい
て、シンボル候補画像の変形画像を作成し、フレーム画
像とマッチングさせ、上位ｎ個のシンボルと領域を選出
する形による抽出処理と、 前記シンボル画像の色と形の両方で選出されたシンボル
画像を前記データベースから検索するシンボル検索処理
と、 前記シンボル検索の結果を出力する検索結果出力処理
と、をコンピュータが読み取り可能に記録したことを特
徴とする記録媒体。4. A recording medium storing a program for causing a computer to execute a process of searching for a symbol image in a video based on a symbol database in which symbol images have been generated and stored in advance. A database process for generating and storing a three-dimensional model of the symbol image; a frame information extracting process for extracting one frame image from the video; and a color of the symbol image in the extracted frame image. The representative color is determined, the color region of the frame image is extracted, the candidate region is determined, and the upper n symbols and the extraction process using the color for selecting the region are performed. For the shape of the symbol image in the extracted frame image, A deformed image of the symbol candidate image is created, matched with the frame image, and the top n thin images are created. Extraction processing in a form for selecting a symbol and an area, a symbol search processing for searching a symbol image selected in both a color and a shape of the symbol image from the database, and a search result output processing for outputting a result of the symbol search And a computer readable recording medium.
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2001036297A JP2002245050A (en) | 2001-02-14 | 2001-02-14 | Method and device for retrieving symbol, program and recording medium recording program |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2001036297A JP2002245050A (en) | 2001-02-14 | 2001-02-14 | Method and device for retrieving symbol, program and recording medium recording program |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| JP2002245050A true JP2002245050A (en) | 2002-08-30 |
Family
ID=18899590
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2001036297A Pending JP2002245050A (en) | 2001-02-14 | 2001-02-14 | Method and device for retrieving symbol, program and recording medium recording program |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP2002245050A (en) |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2009151586A (en) * | 2007-12-21 | 2009-07-09 | Hitachi Ltd | Image retrieval system |
-
2001
- 2001-02-14 JP JP2001036297A patent/JP2002245050A/en active Pending
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2009151586A (en) * | 2007-12-21 | 2009-07-09 | Hitachi Ltd | Image retrieval system |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US20190364329A1 (en) | Non-intrusive media linked and embedded information delivery | |
| US6922691B2 (en) | Method and apparatus for digital media management, retrieval, and collaboration | |
| US6941294B2 (en) | Method and apparatus for digital media management, retrieval, and collaboration | |
| US7613691B2 (en) | Dynamic insertion of supplemental video based on metadata | |
| CN101753913B (en) | Method and device for inserting hyperlinks in video, and processor | |
| US20070124282A1 (en) | Video data directory | |
| US20090228802A1 (en) | Contextual-display advertisement | |
| WO2002037841A1 (en) | Distribution system of digital image content and reproducing method and medium recording its reproduction program | |
| WO2008057226A2 (en) | System and method for tagging, searching for, and presenting items contained within video media assets | |
| JP2007324990A (en) | Information processing system, information processing apparatus, method and program | |
| US11657850B2 (en) | Virtual product placement | |
| WO2003005239A1 (en) | Apparatus and method for abstracting summarization video using shape information of object, and video summarization and indexing system and method using the same | |
| US20100281046A1 (en) | Method and web server of processing a dynamic picture for searching purpose | |
| JP2002245050A (en) | Method and device for retrieving symbol, program and recording medium recording program | |
| RU2739262C1 (en) | Information presentation control method | |
| KR100540748B1 (en) | Improved query method for content-based image retrieval and storage medium storing program for realizing the method | |
| CN114039958A (en) | Multimedia processing method and device | |
| JP4006194B2 (en) | Information providing apparatus, information providing program, and recording medium recording the program | |
| KR101915246B1 (en) | Methods of advertising using subtitles added to video content provided through a video platform. | |
| JP2007317217A (en) | Method for relating information, terminal device, server device, and program | |
| WO2012108089A1 (en) | Inter-video correspondence display system and inter-video correspondence display method | |
| JP2004318723A (en) | Related information provision schedule preparation method and device | |
| CN113542820B (en) | Video cataloging method, system, electronic equipment and storage medium | |
| KR101021655B1 (en) | Time Delaying Keyword Advertisement Contents Provding Method | |
| KR20030063239A (en) | Interface device intended to be used with a multimedia content restitution device to perform searches on a multimedia content being restored |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20050201 |
|
| A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20050712 |