JP6658040B2 - Vehicle information acquisition system, vehicle information acquisition method, vehicle information acquisition program, storage medium for storing vehicle information acquisition program - Google Patents

Description

本発明は、車両情報を取得する車両情報取得システム、車両情報取得方法、車両情報取得プログラム、車両情報取得プログラムを記憶する記憶媒体に関する。   The present invention relates to a vehicle information acquisition system for acquiring vehicle information, a vehicle information acquisition method, a vehicle information acquisition program, and a storage medium for storing the vehicle information acquisition program.

車両のナンバープレートに記載されている番号を読み取り、読み取られた文字を利用するシステムの一例について説明する。   An example of a system that reads a number written on a license plate of a vehicle and uses the read characters will be described.

特許文献１には、車両のナンバープレートを撮影した画像から文字を抽出し、ＤＢ（データベース）を検索するシステムが記載されている。同システムは、検索の結果、ヒットしたデータを表示装置に表示する。特許文献２には、車両番号等を読み込み、一時記憶するシステムが記載されている。同システムはさらに、連続読み込みの終了指示を受け付けると、一時記憶された番号を順次車両ＤＢから検索する。そして、同システムは、検索結果をディスプレイに表示する。   Patent Literature 1 describes a system that extracts characters from an image of a license plate of a vehicle and searches a DB (database). The system displays hit data as a result of the search on a display device. Patent Literature 2 describes a system that reads a vehicle number and the like and temporarily stores the vehicle number and the like. Further, when receiving an instruction to end continuous reading, the system sequentially searches the vehicle DB for the temporarily stored number. Then, the system displays the search result on a display.

平１１−２９６７８５号Hei 11-296785 特開２０００−３２２４２１号JP 2000-322421 A

しかしながら、上述したシステムは、ナンバープレートの検索結果を示すことはできるものの、撮影車両と登録車両とを比較可能な情報を表示することができないという問題点があった。そのため、上述のシステムを使用したユーザは、ナンバープレートが偽造等されている場合も、その事実を知ることができなかった。そこで、本発明の目的は、撮影車両と登録車両とを比較可能な情報を表示することができないとの課題を解決する車両情報取得システムを提供することにある。   However, the above-described system has a problem that, although it is possible to show the search result of the license plate, it is not possible to display information that can compare the photographed vehicle and the registered vehicle. Therefore, the user using the above-mentioned system cannot know the fact that the license plate is forged or the like. Therefore, an object of the present invention is to provide a vehicle information acquisition system that solves the problem that information capable of comparing a photographing vehicle and a registered vehicle cannot be displayed.

本発明の第一のシステムは、車両に取り付けられたナンバープレートの少なくとも一部が写る画像を取得する取得部と、前記画像における前記ナンバープレート部分から文字を抽出する文字抽出部と、登録車両の車両情報と文字とを対応付けて記憶する記憶部から、抽出された前記文字に対応する車両情報を取得する車両情報取得部と、取得された前記車両情報を表示部に表示させる表示制御部と、を有する。   A first system of the present invention is an acquisition unit that acquires an image in which at least a part of a license plate attached to a vehicle is captured, a character extraction unit that extracts characters from the license plate portion in the image, and a registered vehicle. From a storage unit that stores vehicle information and characters in association with each other, a vehicle information acquisition unit that acquires vehicle information corresponding to the extracted characters, and a display control unit that causes the display unit to display the acquired vehicle information. And

本発明によれば、撮影車両と登録車両とを比較可能な情報を表示することができる車両情報取得システムを提供することができる。   ADVANTAGE OF THE INVENTION According to this invention, the vehicle information acquisition system which can display the information which can compare a photography vehicle and a registered vehicle can be provided.

第一実施形態の構成例を示すブロック図である。FIG. 2 is a block diagram illustrating a configuration example of a first embodiment. ナンバープレートの撮影を説明する説明図である。FIG. 3 is an explanatory diagram for explaining image capturing of a license plate. 記憶部２３が記憶する情報の一例である。It is an example of information stored in the storage unit 23. 記憶部２３が記憶する情報の一例である。It is an example of information stored in the storage unit 23. 表示部１３による表示の一例である。It is an example of a display by the display unit 13. 第一実施形態の動作例を示すフローチャートである。6 is a flowchart illustrating an operation example of the first embodiment. 第二実施形態の構成例を示すブロック図である。It is a block diagram showing the example of composition of a second embodiment. 車両の撮影を説明する説明図である。FIG. 3 is an explanatory diagram illustrating photographing of a vehicle. 記憶部２５が記憶する情報の一例である。It is an example of information stored in the storage unit 25. 表示部１３による表示の一例である。It is an example of a display by the display unit 13. 第二実施形態の動作例を示すフローチャートである。It is a flowchart which shows the operation example of 2nd embodiment. 第三実施形態の構成例を示すブロック図である。It is a block diagram showing the example of composition of a third embodiment. 表示部による表示の一例である。It is an example of the display by a display part. ハードウェア構成の一例である。It is an example of a hardware configuration. ハードウェア構成の一例である。It is an example of a hardware configuration.

以下に、図面を参照して、本発明の実施形態について詳しく説明する。ただし、以下の実施形態に記載されている構成要素は例示であり、本発明の技術範囲をそれらに限定する趣旨のものではない。
（第一実施形態）
（第一実施形態の構成）
第一実施形態の構成例について説明する。図１は、車両情報取得システム１０００の構成例を示した図である。第一実施形態では、イベント等の開催時に車両の進入が規制されている特別エリアにおいて、本発明が使用されることを想定する。特別エリアへは、イベント関係者の車両、地域住民等の車両以外の車両は侵入が禁止されている。したがって、特別エリアを警備する者は、特別エリアを巡回し、特別エリア内に駐車されている車両が予め登録された関係者等の車両（以下、登録車両と呼ぶ）であることを確認する。または、特別エリアを警備する者は、特別エリアと他のエリアとの境界付近に設けられた検問所において車両の確認を行う。このとき、特別エリアを警備する者は、車両に取り付けられたナンバープレートが表示する文字が、登録車両のものであるか否かを確認する。 Hereinafter, embodiments of the present invention will be described in detail with reference to the drawings. However, components described in the following embodiments are mere examples, and are not intended to limit the technical scope of the present invention thereto.
(First embodiment)
(Configuration of the first embodiment)
A configuration example of the first embodiment will be described. FIG. 1 is a diagram showing a configuration example of the vehicle information acquisition system 1000. In the first embodiment, it is assumed that the present invention is used in a special area where entry of a vehicle is restricted when an event or the like is held. Vehicles other than those of the people involved in the event and vehicles of local residents are prohibited from entering the special area. Therefore, the person who guards the special area patrols the special area and confirms that the vehicle parked in the special area is a vehicle of a registered person or the like (hereinafter, referred to as a registered vehicle). Alternatively, a person who guards the special area checks the vehicle at a checkpoint provided near the boundary between the special area and another area. At this time, the person who guards the special area confirms whether the characters displayed on the license plate attached to the vehicle are those of the registered vehicle.

なお、ナンバープレートはライセンスプレートとも呼ばれる。ナンバープレートが表示する文字は、自動車登録番号、車両番号とも呼ばれる。また、文字には数字および記号が含まれるものとする。   The license plate is also called a license plate. The characters displayed on the license plate are also called an automobile registration number and a vehicle number. The characters include numbers and symbols.

ここで、ナンバープレートとは、自動車登録番号標、車両番号票、標識であり、交通に関する法律等により車両に取り付けることが義務付けられているものである。通常、ナンバープレートは各車両に固有の文字を表示する。そのため、ナンバープレートに記載された文字が、予め登録された文字と同一であれば、車両は特別エリアへの侵入が許可されたものである。しかし、不正に特別エリアに侵入しようとする者は、ナンバープレートを偽造する可能性がある。この場合、特別エリアを警備する者は、侵入が許可されていない車両を、登録車両として判断してしまう可能性がある。   Here, the license plate is a vehicle registration number mark, a vehicle number slip, and a sign, and is required to be attached to the vehicle according to traffic laws and the like. Usually, the license plate displays characters unique to each vehicle. Therefore, if the characters described on the license plate are the same as the characters registered in advance, the vehicle is permitted to enter the special area. However, anyone who attempts to illegally enter the special area may falsify the license plate. In this case, a person who guards the special area may determine a vehicle that is not permitted to enter as a registered vehicle.

そこで、第一実施形態の車両情報取得システム１０００は、以下の構成を採用している。以下、車両情報取得システム１０００のユーザおよび携帯端末１００のユーザは、特別エリアを警備する者として説明する。   Therefore, the vehicle information acquisition system 1000 according to the first embodiment employs the following configuration. Hereinafter, the user of the vehicle information acquisition system 1000 and the user of the mobile terminal 100 will be described as those who guard the special area.

車両情報取得システム１０００は、携帯端末１００と、サーバ２００を備える。携帯端末１００は、無線又は有線のネットワークを介してサーバ２００と通信可能に接続している。携帯端末１００は、取得部１０と、文字抽出部１１と、表示制御部１２と、送信部１４と、受信部１５と、表示部１３を有する。また、サーバ２００は、受信部２０と車両情報取得部２１と、送信部２２と、記憶部２３を有する。   The vehicle information acquisition system 1000 includes a mobile terminal 100 and a server 200. The mobile terminal 100 is communicably connected to the server 200 via a wireless or wired network. The mobile terminal 100 includes an acquisition unit 10, a character extraction unit 11, a display control unit 12, a transmission unit 14, a reception unit 15, and a display unit 13. Further, the server 200 includes a receiving unit 20, a vehicle information acquiring unit 21, a transmitting unit 22, and a storage unit 23.

携帯端末１００内の取得部１０は、車両に取り付けられたナンバープレートの少なくとも一部が写る画像を取得する。当該画像は、携帯端末１００が有する不図示の撮影部が撮影したもので良い。不図示の撮影部は、例えばＣＣＤ（Ｃｈａｒｇｅ Ｃｏｕｐｌｅｄ Ｄｅｖｉｃｅ）センサ、ＣＭＯＳ（Ｃｏｍｐｌｅｍｅｎｔａｒｙ Ｍｅｔａ Ｏｘｉｄｅ Ｓｅｍｉｃｏｎｄｕｃｔｏｒ）センサ、イメージプロセッサ等を有するカメラで良い。不図示の撮影部は、受光した光を画像データに変換することで、画像データを生成する。   The acquisition unit 10 in the mobile terminal 100 acquires an image in which at least a part of the license plate attached to the vehicle is captured. The image may be an image taken by an imaging unit (not shown) of the portable terminal 100. The imaging unit (not shown) may be, for example, a camera having a charge coupled device (CCD) sensor, a complementary metal oxide semiconductor (CMOS) sensor, or an image processor. The imaging unit (not shown) generates image data by converting the received light into image data.

図２は、携帯端末１００内の撮影部によるナンバープレートの撮影を説明する説明図である。携帯端末１００のユーザは、不図示の撮影部を撮影車両１の方に向けた状態で、携帯端末１００を操作して、撮影車両１に取り付けられたナンバープレートを撮影する。取得部１０は、不図示の撮影部が生成した画像を取得する。取得部１０が取得する画像には、ナンバープレートの少なくとも一部が写っていれば良い。画像２および画像３は、取得部１０が取得する画像の一例である。画像２には、撮影車両１に取り付けられたナンバープレート５の全体が写っている。一方、画像３にはナンバープレート５の一部が写っている。   FIG. 2 is an explanatory diagram illustrating how a license plate in the mobile terminal 100 is imaged by a license plate. The user of the portable terminal 100 operates the portable terminal 100 with the photographing unit (not shown) facing the photographing vehicle 1 to photograph the license plate attached to the photographing vehicle 1. The acquisition unit 10 acquires an image generated by an imaging unit (not shown). The image acquired by the acquiring unit 10 only needs to include at least a part of the license plate. The image 2 and the image 3 are examples of an image acquired by the acquisition unit 10. The image 2 shows the entire license plate 5 attached to the photographing vehicle 1. On the other hand, part of the license plate 5 is shown in the image 3.

文字抽出部１１は、取得部１０が取得した画像におけるナンバープレート部分から文字を抽出する。文字抽出部１１は、パターン認識等により画像におけるナンバープレート部分を特定しても良い。文字抽出部１１は、取得部１０から取得した画像に対して、ＯＣＲ（Ｏｐｔｉｃａｌ Ｃｈａｒａｃｔｅｒ Ｒｅｃｏｇｎｉｔｉｏｎ：光学文字認識）処理を行い、文字を抽出する。   The character extracting unit 11 extracts characters from a license plate portion in the image acquired by the acquiring unit 10. The character extracting unit 11 may specify a license plate portion in an image by pattern recognition or the like. The character extracting unit 11 performs OCR (Optical Character Recognition) processing on the image acquired from the acquiring unit 10 to extract characters.

例えば文字抽出部１１は、図２の画像２を取得した場合、「品川」「３００」「さ」「１２−３４」の文字を抽出する。また、文字抽出部は、抽出された文字の位置データと予め記憶された項目の位置データに基づいて、抽出された文字がどの項目に該当するかを決定する。項目の位置データは、記憶部２３が記憶していても良い。位置データが示す位置は、画像における絶対的な位置でも良いし、各文字または項目どうしの相対的な位置でも良い。また、項目とは、例えば例えば交通に関する法律により車両において表示が定められている情報の内容を示すものである。例えば項目は、「運輸支局等」、「種別」、「事業用の別」、「指定番号」を含んでいる。なお、文字抽出部１１は、文字に対応する項目を決定しなくても良い。   For example, when the image 2 of FIG. 2 is acquired, the character extracting unit 11 extracts characters “Shinagawa”, “300”, “sa”, and “12-34”. Further, the character extracting unit determines which item the extracted character corresponds to based on the position data of the extracted character and the position data of the item stored in advance. The storage unit 23 may store the position data of the item. The position indicated by the position data may be an absolute position in the image or a relative position between characters or items. The item indicates, for example, the content of information specified to be displayed on a vehicle by a law on traffic. For example, the items include “Transportation Bureau etc.”, “Type”, “Business Classification”, and “Designated Number”. Note that the character extracting unit 11 does not need to determine the item corresponding to the character.

携帯端末１００内の送信部１４は、文字抽出部１１が抽出した文字と、文字に対応する項目をサーバ２００に送信する。サーバ２００内の受信部２０は、送信部１４が送信した文字と項目を受信する。   The transmitting unit 14 in the mobile terminal 100 transmits the character extracted by the character extracting unit 11 and the item corresponding to the character to the server 200. The receiving unit 20 in the server 200 receives the characters and items transmitted by the transmitting unit 14.

サーバ２００内の記憶部２３は、登録車両の車両情報と文字とを対応付けて記憶する。   The storage unit 23 in the server 200 stores vehicle information of registered vehicles and characters in association with each other.

ここで、車両情報とは、車両に関する情報であれば何でも良い。例えば車両情報は、車台番号、型式、車体の形状、所有者の情報等の自動車検査証に記載される情報、車両に取り付けられたナンバープレートが表示する情報、当該車両を撮影した画像、当該画像の特徴量等でよい。記憶部２３が記憶する情報の一例を図３に示す。文字は、「運輸支局等」、「種別」、「事業用の別」、「指定番号」の項目に分けられている。これらの項目の内容となる文字は、交通に関する法律においてナンバープレートによる表示が定められている。また、車両情報には、「車種」「車名」「メーカー」「年式」「色」が含まれている。なお、記憶部２３が記憶する情報は図３に示すものに限られない。   Here, the vehicle information may be any information as long as the information is related to the vehicle. For example, vehicle information includes chassis number, model, body shape, information described in an automobile inspection certificate such as owner information, information displayed on a license plate attached to a vehicle, an image of the vehicle, an image of the vehicle, May be used. FIG. 3 shows an example of information stored in the storage unit 23. Characters are divided into items such as "Transportation Bureau, etc.", "Type", "Business Classification", and "Designated Number". The characters used as the contents of these items are specified by a license plate in the Traffic Law. The vehicle information includes "vehicle type", "vehicle name", "manufacturer", "year", and "color". The information stored in the storage unit 23 is not limited to the information shown in FIG.

図３より、文字「品川」「３００」「さ」「１２−３４」は、車両情報「普通乗用車」「プルリス」「トヨダ」「Ｈ２３」「白」に対応付いている。また、文字「品川」「３５０」「は」「３４−５６」は、車両情報「普通乗用車」「エリー」「Ｈ２５」「赤」に対応付いている。文字「柏」「５５０」「み」「５６−７８」は、車両情報「小型乗用車」「アルド」「ススキ」「Ｈ２０」「黒」に対応付いている。   From FIG. 3, the characters “Shinagawa”, “300”, “Sa”, and “12-34” correspond to the vehicle information “normal passenger car”, “Pullis”, “Toyoda”, “H23”, and “white”. The characters "Shinagawa", "350", "H" and "34-56" correspond to the vehicle information "normal passenger car", "Erie", "H25", and "red". The characters “Kashiwa”, “550”, “mi”, and “56-78” correspond to the vehicle information “small passenger car”, “Aldo”, “Susuki”, “H20”, and “black”.

さらに記憶部２３は、車両情報と比較用画像とを対応付けて記憶する。記憶部２３が記憶する情報の一例を図４に示す。図４では、車両情報「普通乗用車」「プルリス」「トヨダ」「Ｈ２３」「白」が、比較用画像「ａａａ.ｊｐｇ」に対応している。また、車両情報「普通乗用車」「プルリス」「トヨダ」「Ｈ２３」「黒」が、比較用画像「ｂｂｂ.ｊｐｇ」に対応している。車両情報「普通乗用車」「プルリス」「トヨダ」「Ｈ２３」「グレー」は、比較用画像「ｃｃｃ.ｊｐｇ」に対応している。   Further, the storage unit 23 stores the vehicle information and the comparison image in association with each other. FIG. 4 shows an example of information stored in the storage unit 23. In FIG. 4, the vehicle information “normal passenger car”, “Pullis”, “Toyoda”, “H23”, and “white” correspond to the comparison image “aaa.jpg”. The vehicle information “normal passenger car”, “Pullis”, “Toyoda”, “H23”, and “black” correspond to the comparison image “bbb.jpg”. The vehicle information “normal passenger car”, “Pullis”, “Toyoda”, “H23”, and “gray” correspond to the comparison image “ccc.jpg”.

なお、画像ファイルのフォーマットはＪＰＥＧ（Ｊｏｉｎｔ Ｐｈｏｔｏｇｒａｐｈｉｃ Ｅｘｐｅｒｔｓ Ｇｒｏｕｐ）に限られない。例えば、画像ファイルのフォーマットはＧＩＦ（Ｇｒａｐｈｉｃｓ Ｉｎｔｅｒｃｈａｎｇｅ Ｆｏｒｍａｔ）、ＰＮＧ（Ｐｏｒｔａｂｌｅ Ｎｅｔｗｏｒｋ Ｇｒａｐｈｉｃｓ）、ＢＭＰ（Ｍｉｃｒｏｓｏｆｔ Ｗｉｎｄｏｗｓ（登録商標） Ｂｉｔｍａｐ Ｉｍａｇｅ）等でも良い。   Note that the format of the image file is not limited to JPEG (Joint Photographic Experts Group). For example, the format of the image file may be GIF (Graphics Interchange Format), PNG (Portable Network Graphics), BMP (Microsoft Windows (registered trademark) Bitmap Image), or the like.

比較用画像には、車両情報を満たす車両の画像が含まれている。つまり、比較用画像は、車種、車名、メーカー、年式、色、等の車両情報が登録車両と一致する車両の画像を含む。例えば比較用画像「ａａａ.ｊｐｇ」には、車種が普通乗用車であり、車名がプルリスであり、メーカーがトヨダであり、年式がＨ２３であり、色が白である車両の画像が含まれている。比較用画像は、カタログ、製品紹介サイト等に掲載される車両の画像でもよい。また、比較画像は登録車両を撮影した画像でもよい。   The comparison image includes an image of a vehicle satisfying the vehicle information. That is, the comparison image includes an image of a vehicle whose vehicle information such as the vehicle type, the vehicle name, the manufacturer, the year, and the color matches the registered vehicle. For example, the comparison image “aaa.jpg” includes an image of a vehicle whose vehicle type is a normal passenger car, whose vehicle name is “Pullis”, whose manufacturer is “Toyoda”, whose model year is H23, and whose color is white. ing. The comparison image may be an image of a vehicle posted on a catalog, a product introduction site, or the like. The comparison image may be an image of a registered vehicle.

車両情報取得部２１は、受信部２００から文字を受け取る。そして、車両情報取得部２１は、記憶部２３から、抽出された文字に対応する車両情報を取得する。つまり車両情報取得部２１は、抽出された文字と一致する文字に対応する車両情報を、記憶部２３から取得する。例えば、抽出された文字が「品川」「３００」「さ」「１２−３４」であり、記憶部２３が図３に示す情報を記憶している場合を想定する。この場合、車両情報取得部２１は、記憶部２３を参照し、文字「品川」「３００」「さ」「１２−３４」に対応する車両情報「普通乗用車」「プルリス」「トヨダ」「Ｈ２３」「白」を取得する。   The vehicle information acquisition unit 21 receives a character from the reception unit 200. Then, the vehicle information acquisition unit 21 acquires vehicle information corresponding to the extracted character from the storage unit 23. That is, the vehicle information acquisition unit 21 acquires the vehicle information corresponding to the character that matches the extracted character from the storage unit 23. For example, it is assumed that the extracted characters are “Shinagawa”, “300”, “sa”, and “12-34”, and the storage unit 23 stores the information illustrated in FIG. In this case, the vehicle information acquisition unit 21 refers to the storage unit 23, and acquires the vehicle information “normal passenger car”, “Pullis”, “Toyoda”, “H23” corresponding to the characters “Shinagawa”, “300”, “sa”, and “12-34”. Get "white".

このとき車両情報取得部２１は、抽出された文字と記憶部２３が記憶する文字が一致するか否かを、項目ごとに確認しても良い。例えば車両情報取得部２１は、抽出された文字のうち、項目「運輸支局等」に対応する文字と、記憶部２３が記憶する文字のうち、項目「運輸支局等」に対応する文字との一致を判断する。同様に、「種別」、「事業用の別」、「指定番号」の項目に対応付けられた文字についても、項目ごとに一致を判断する。そして、全ての項目について文字が一致した場合、抽出された文字に対応する車両情報を記憶部２３から取得しても良い。   At this time, the vehicle information acquisition unit 21 may confirm whether or not the extracted characters match the characters stored in the storage unit 23 for each item. For example, the vehicle information acquisition unit 21 matches the character corresponding to the item “Transportation Bureau etc.” among the extracted characters with the character corresponding to the item “Transportation Bureau etc.” among the characters stored in the storage unit 23. Judge. Similarly, for characters associated with the items of “type”, “for business”, and “designated number”, the matching is determined for each item. Then, when the characters match for all items, vehicle information corresponding to the extracted characters may be acquired from the storage unit 23.

また、車両情報取得部２１は、車両情報に対応する項目を記憶部２３から取得する。例えば車両情報取得部２１は、「普通乗用車」に「車種」、「プルリス」に「車名」、「トヨダ」に「メーカー」、「Ｈ２３」に「年式」、「白」に「色」を対応付けて、これらを取得する。なお、車両情報取得部２１は記憶部２３から項目を取得しなくてもよい。   Further, the vehicle information acquisition unit 21 acquires an item corresponding to the vehicle information from the storage unit 23. For example, the vehicle information acquisition unit 21 determines that “vehicle type” is “normal passenger car”, “car name” is “pluris”, “maker” is “Toyoda”, “year” is “H23”, and “color” is “white”. And obtain them. Note that the vehicle information acquisition unit 21 does not need to acquire the item from the storage unit 23.

さらに、車両情報取得部２１は、車両情報とともに、車両情報に対応する比較用画像を記憶部２３から取得する。つまり、車両情報取得部２１は、記憶部２３が取得した車両情報に対応する比較用画像を、記憶部２３から取得する。例えば、図４より、車両情報取得部２１が車両情報として「普通乗用車」「プルリス」「トヨダ」「Ｈ２３」「白」を取得した場合、比較用画像「ａａａ.ｊｐｇ」を記憶部２３から取得する。サーバ２００内の送信部２２は、車両情報取得部２１が取得した車両情報、項目、および比較用画像を携帯端末１００に送信する。   Further, the vehicle information acquisition unit 21 acquires a comparison image corresponding to the vehicle information from the storage unit 23 together with the vehicle information. That is, the vehicle information acquisition unit 21 acquires, from the storage unit 23, a comparison image corresponding to the vehicle information acquired by the storage unit 23. For example, from FIG. 4, when the vehicle information acquisition unit 21 acquires “normal passenger car”, “Pullis”, “Toyoda”, “H23”, and “white” as the vehicle information, the comparison image “aaa.jpg” is acquired from the storage unit 23. I do. The transmission unit 22 in the server 200 transmits the vehicle information, the item, and the comparison image acquired by the vehicle information acquisition unit 21 to the mobile terminal 100.

携帯端末１００内の受信部１５は、サーバ２００から送信された車両情報、項目、および比較用画像を受信する。表示制御部１２は、車両情報取得部２１が取得した車両情報および項目を表示部１３に表示させる。このとき、表示制御部１２は、車両情報とともに比較用画像を表示部１３に表示させる。なお、表示制御部１２は、項目を表示部１３に表示させなくても良い。   The receiving unit 15 in the mobile terminal 100 receives the vehicle information, the item, and the comparison image transmitted from the server 200. The display control unit 12 causes the display unit 13 to display the vehicle information and items acquired by the vehicle information acquisition unit 21. At this time, the display control unit 12 causes the display unit 13 to display the comparison image together with the vehicle information. The display control unit 12 does not have to display the item on the display unit 13.

表示部１３は、表示制御部１２の制御により、車両情報、項目、および比較用画像を表示する。表示部１３による表示の例を図５に示す。図５では、携帯端末１００の表示部１３が、比較用画像「ａａａ.ｊｐｇ」、車両情報および項目を表示している。上述の通り、比較用画像「ａａａ.ｊｐｇ」に写る車両は、車種が普通乗用車であり、車名がプルリスであり、メーカーがトヨダであり、年式がＨ２３であり、色が白である。また、図５において表示部１３が表示する車両情報は、「普通乗用車」「プルリス」「トヨダ」「Ｈ２３」「白」である。また、表示部１３が表示する項目は、「車種」「車名」「メーカー」「年式」「色」である。   The display unit 13 displays vehicle information, items, and images for comparison under the control of the display control unit 12. FIG. 5 shows an example of display by the display unit 13. In FIG. 5, the display unit 13 of the mobile terminal 100 displays a comparison image “aaa.jpg”, vehicle information, and items. As described above, the vehicle shown in the comparative image “aaa.jpg” is a normal passenger car, has a vehicle name of Pullis, has a manufacturer of Toyoda, has a year of H23, and has a white color. Further, the vehicle information displayed on the display unit 13 in FIG. 5 is “normal passenger car”, “Pullis”, “Toyoda”, “H23”, and “white”. The items displayed on the display unit 13 are "vehicle type", "vehicle name", "manufacturer", "year", and "color".

なお、表示部１３による表示は、図４に示すものに限られない。例えば表示部１３は、項目を表示しなくても良い。また、表示部１３は、上記の表示とともに取得部１０が取得した画像（撮影車両１を撮影した画像）を表示しても良い。表示部１３は、文字抽出部１１が抽出した文字、すなわち撮影車両１のナンバープレートが表示する文字を表示しても良い。
（第一実施形態の動作）
次に、車両情報取得システム１０００の動作について説明する。図６は、車両情報システム１０００の動作を説明するシークエンス図である。 The display by the display unit 13 is not limited to that shown in FIG. For example, the display unit 13 does not have to display the items. Further, the display unit 13 may display an image (an image of the photographed vehicle 1) acquired by the acquiring unit 10 together with the above display. The display unit 13 may display the characters extracted by the character extraction unit 11, that is, the characters displayed on the license plate of the photographing vehicle 1.
(Operation of First Embodiment)
Next, the operation of the vehicle information acquisition system 1000 will be described. FIG. 6 is a sequence diagram illustrating the operation of vehicle information system 1000.

まず、携帯端末１００内の取得部１０は、車両に取り付けられたナンバープレートの少なくとも一部が写る画像を取得する（Ｓ１）。当該画像は、携帯端末１００が有する不図示の撮影部が撮影したもの良い。不図示の撮影部は、例えばＣＣＤセンサ、ＣＭＯＳセンサ、イメージプロセッサ等を有するカメラで良い。不図示の撮影部は、受光した光をデータに変換することで、画像を生成する。   First, the acquisition unit 10 in the mobile terminal 100 acquires an image in which at least a part of the license plate attached to the vehicle is captured (S1). The image may be captured by a capturing unit (not shown) of the mobile terminal 100. The imaging unit (not shown) may be, for example, a camera having a CCD sensor, a CMOS sensor, an image processor, and the like. The imaging unit (not shown) generates an image by converting the received light into data.

例えば取得部１０による画像の取得は、携帯端末１００のユーザが所定のアプリケーションを起動した後に行われても良い。例えばユーザが当該アプリケーションを起動すると、不図示の撮影部がナンバープレートを撮影する。そして、取得部１０は、不図示の撮影部から画像を取得する。   For example, the acquisition of the image by the acquisition unit 10 may be performed after the user of the mobile terminal 100 activates a predetermined application. For example, when the user activates the application, a photographing unit (not shown) photographs a license plate. Then, the acquisition unit 10 acquires an image from an imaging unit (not shown).

次に、文字抽出部１１は、取得部１０が取得した画像におけるナンバープレート部分から文字を抽出する（Ｓ２）。文字抽出部１１は、取得部１０から取得した画像に対して、ＯＣＲ処理を行い、文字を抽出する。また、文字抽出部１１は、抽出した文字に対応する項目を決定する。その後、送信部１４は、文字抽出部１１が抽出した文字と項目をサーバ２００に送信する。   Next, the character extracting unit 11 extracts characters from the license plate portion in the image acquired by the acquiring unit 10 (S2). The character extracting unit 11 performs OCR processing on the image acquired from the acquiring unit 10 and extracts characters. Further, the character extracting unit 11 determines an item corresponding to the extracted character. After that, the transmitting unit 14 transmits the characters and items extracted by the character extracting unit 11 to the server 200.

サーバ２００内の受信部２０は、送信部１４が送信した文字と項目を受信する。車両情報取得部２１は、受信部２０から文字と項目を受け取る。そして、車両情報取得部２１は、記憶部２３から、抽出された文字に対応する車両情報を取得する（Ｓ３）。このとき車両情報取得部２１は、車両情報に対応する項目を取得する。さらに車両情報取得部２１は、取得した車両情報に対応する比較用画像を記憶部２３から取得する（Ｓ４）。なお、車両情報取得部２１は、記憶部２３から項目を取得しなくても良い。   The receiving unit 20 in the server 200 receives the characters and items transmitted by the transmitting unit 14. The vehicle information acquisition unit 21 receives characters and items from the reception unit 20. Then, the vehicle information acquisition unit 21 acquires vehicle information corresponding to the extracted character from the storage unit 23 (S3). At this time, the vehicle information acquisition unit 21 acquires an item corresponding to the vehicle information. Further, the vehicle information acquisition unit 21 acquires a comparison image corresponding to the acquired vehicle information from the storage unit 23 (S4). Note that the vehicle information acquisition unit 21 does not need to acquire the item from the storage unit 23.

サーバ２００内の送信部２２は、車両情報取得部２１が取得した車両情報、項目、および比較用画像を携帯端末１００に送信する。すると、携帯端末１００内の受信部１５は、サーバ２００から送信された車両情報、項目、および比較用画像を受信する。   The transmission unit 22 in the server 200 transmits the vehicle information, the item, and the comparison image acquired by the vehicle information acquisition unit 21 to the mobile terminal 100. Then, the receiving unit 15 in the mobile terminal 100 receives the vehicle information, the item, and the comparison image transmitted from the server 200.

表示制御部１２は、受信部１５が受信した車両情報および項目とともに、比較用画像を表示部１３に表示させる。なお、表示制御部１２は、項目を表示部１３に表示させなくても良い。   The display control unit 12 causes the display unit 13 to display the comparison image together with the vehicle information and the item received by the receiving unit 15. The display control unit 12 does not have to display the item on the display unit 13.

以上より、本実施形態の車両情報取得システム１０００は、ナンバープレートの文字が撮影車両のものと一致する登録車両について、その車両情報を表示することができる。さらに、車両情報取得システム１００は、当該車両情報を満たす車両の画像を表示することができる。これによって、携帯端末１００のユーザは、例えば「プルリス」という車名の車両がどのような外観を有するかを知らなくても、表示された画像を見ることで、容易にその外観を把握することができる。そのため、ユーザは携帯端末１００が表示する画像と撮影車両の外観等とを比較することで、撮影車両と登録車両とが一致するか否かを効率的に判断することができる。   As described above, the vehicle information acquisition system 1000 of the present embodiment can display vehicle information on a registered vehicle whose license plate character matches that of the photographing vehicle. Further, the vehicle information acquisition system 100 can display an image of a vehicle satisfying the vehicle information. Thus, the user of the mobile terminal 100 can easily grasp the appearance by looking at the displayed image without knowing the appearance of the vehicle having the vehicle name “Pullis”, for example. Can be. Therefore, the user can efficiently determine whether or not the photographing vehicle and the registered vehicle match by comparing the image displayed by the mobile terminal 100 with the appearance of the photographing vehicle.

なお、サーバ２００が文字抽出部１１を有していても良い。この場合、携帯端末１００内の送信部１４は、取得部１０が取得した画像をサーバ２００に送信する。そして、サーバ２００内の文字抽出部１１は、携帯端末１００から受信した画像におけるナンバープレート部分から文字を抽出し、抽出した文字を車両情報取得部２１に受け渡す。   Note that the server 200 may include the character extracting unit 11. In this case, the transmission unit 14 in the mobile terminal 100 transmits the image acquired by the acquisition unit 10 to the server 200. Then, the character extracting unit 11 in the server 200 extracts characters from the license plate portion in the image received from the mobile terminal 100, and transfers the extracted characters to the vehicle information obtaining unit 21.

また、記憶部２３は、文字と車両情報を対応付けたデータと、車両情報と比較用画像とを対応付けたデータを別に有していたが、文字、車両情報、および比較用画像を対応付けたひとつのデータを有していても良い。この場合、車両情報取得部２１は、文字に対応する車両情報と比較用画像とを一度で取得することができるため、車両情報取得システム１０００の処理速度が向上する。   In addition, the storage unit 23 separately has data in which characters and vehicle information are associated and data in which vehicle information and comparison images are associated. It may have only one data. In this case, the vehicle information acquisition unit 21 can acquire the vehicle information corresponding to the character and the comparison image at one time, so that the processing speed of the vehicle information acquisition system 1000 is improved.

さらに、車両情報取得部２１は、抽出された文字と記憶部２３が記憶する文字との類似度を算出し、最も類似度が大きかった文字に対応する車両情報を取得しても良い。また、車両情報取得部２１は、類似度が閾値以上であった文字に対応する車両情報を全て取得しても良い。この場合、表示制御部１２は、車両情報取得部２１が取得した全ての車両情報を表示部２３に表示させても良い。表示制御部１２は、車両情報を類似度順に表示部２３に表示させても良い。これにより、画像中のナンバープレートが表示する文字が不鮮明な場合や、文字の一部が撮影されていない場合にも、ユーザが登録車両と撮影車両とを比較することができる。   Further, the vehicle information acquisition unit 21 may calculate the similarity between the extracted character and the character stored in the storage unit 23, and may acquire the vehicle information corresponding to the character having the highest similarity. Further, the vehicle information acquisition unit 21 may acquire all vehicle information corresponding to characters whose similarity is equal to or greater than the threshold. In this case, the display control unit 12 may cause the display unit 23 to display all the vehicle information acquired by the vehicle information acquisition unit 21. The display control unit 12 may cause the display unit 23 to display vehicle information in order of similarity. This allows the user to compare the registered vehicle with the photographed vehicle even when the characters displayed by the license plate in the image are unclear or when some of the characters have not been photographed.

また、車両情報取得部２１は、抽出された文字との類似度が閾値以上となる文字および抽出された文字と同一の文字が記憶部２３に記憶されていない場合、送信部２２を介してその旨を携帯端末１００に送信してもよい。その後、表示制御部１２は、撮影した車両が登録されていない旨のメッセージを表示部１３に表示させても良い。これにより、ユーザは撮影車両が登録車両でないことを知ることができる。又は、表示制御部１２は、再度の撮影を促すメッセージを表示部１３に表示させてもよい。これにより、ユーザは、再度同一の車両を撮影し、登録されているか否かを確認することができる。これらのメッセージは、予め携帯端末１００内の不図示の記憶部に記憶されていても良いし、サーバ２００が携帯端末１００に送信しても良い。   The vehicle information acquisition unit 21 transmits the extracted character via the transmission unit 22 when the storage unit 23 does not store a character whose similarity to the extracted character is equal to or larger than the threshold value and the same character as the extracted character. The effect may be transmitted to the mobile terminal 100. Thereafter, the display control unit 12 may cause the display unit 13 to display a message indicating that the photographed vehicle is not registered. This allows the user to know that the photographing vehicle is not a registered vehicle. Alternatively, the display control unit 12 may cause the display unit 13 to display a message that prompts the user to perform shooting again. Thereby, the user can take a picture of the same vehicle again and check whether or not it is registered. These messages may be stored in a storage unit (not shown) in the mobile terminal 100 in advance, or the server 200 may transmit the message to the mobile terminal 100.

さらに、記憶部２３は、文字に対応付けて登録車両の所有者に関する情報を記憶してもよい。例えば記憶部２３は、文字に対応付けて登録車両の所有者の顔画像を登録してもよい。この場合、車両情報取得部２１は、車両情報と共に当該顔画像を取得してもよい。また、表示制御部１２は、車両情報と共に、当該顔画像を表示部１３に表示させても良い。これにより、偽造されたナンバープレートが取り付けられた車両が登録車両と同一の車種・車名・色等である場合にも、ユーザは撮影車両の所有者を確認することで、撮影車両と登録車両とが一致するかを判断することができる。   Furthermore, the storage unit 23 may store information on the owner of the registered vehicle in association with the characters. For example, the storage unit 23 may register the face image of the registered vehicle owner in association with the character. In this case, the vehicle information acquisition unit 21 may acquire the face image together with the vehicle information. The display controller 12 may cause the display 13 to display the face image together with the vehicle information. Accordingly, even when the vehicle with the forged license plate is the same vehicle type, vehicle name, color, etc. as the registered vehicle, the user can confirm the owner of the photographing vehicle, and thus, the photographing vehicle and the registered vehicle can be checked. Can be determined.

また、本実施形態ではサーバ２００が記憶部２３を有しているが、本発明における記憶部は、複数のハードウェア構成によって実現されても良い。例えば、サーバ２００内の記憶装置が文字と車両情報とを対応付けたデータを記憶し、サーバ２００と通信可能な他のサーバ内の記憶装置が車両情報と比較用画像とを対応付けたデータを記憶しても良い。   Further, in the present embodiment, the server 200 has the storage unit 23, but the storage unit in the present invention may be realized by a plurality of hardware configurations. For example, a storage device in the server 200 stores data in which characters and vehicle information are associated with each other, and a storage device in another server that can communicate with the server 200 stores data in which the vehicle information and the comparison image are associated with each other. You may memorize it.

なお、ナンバープレートが表示する情報は、日本では道路運輸車両法が規定するが、他の国では異なる場合がある。そのため、ナンバープレートが表示する情報の項目も、国によって異なる場合がある。ナンバープレートが表示する内容は、これらの点を加味し、本実施形態に記載されたものに限られないものとする。
（第二実施形態）
（第二実施形態の構成）
第二実施形態の構成例について説明する。図７は、車両情報取得システム１００１の構成例を示した図である。車両情報取得システム１００１は、車両情報抽出部１６、照合部２４、記憶部２５を備える点で車両情報取得システム１０００と異なる。その余の構成については第一実施形態と同様であるため、適宜説明を省略する。 Note that the information displayed by the license plate is regulated by the Road Transport Vehicle Law in Japan, but may be different in other countries. Therefore, the information items displayed on the license plate may also differ depending on the country. Considering these points, the contents displayed by the license plate are not limited to those described in the present embodiment.
(Second embodiment)
(Configuration of Second Embodiment)
A configuration example of the second embodiment will be described. FIG. 7 is a diagram showing a configuration example of the vehicle information acquisition system 1001. The vehicle information acquisition system 1001 differs from the vehicle information acquisition system 1000 in that the vehicle information acquisition system 1001 includes a vehicle information extraction unit 16, a collation unit 24, and a storage unit 25. The rest of the configuration is the same as that of the first embodiment, and thus the description will be appropriately omitted.

取得部１０は、ナンバープレートの少なくとも一部が写る画像に加えて、車両の少なくとも一部が写る画像を取得する。車両の少なくとも一部が写る画像は、携帯端末１００が有する不図示の撮影部が撮影したもので良い。   The acquisition unit 10 acquires an image in which at least a part of the vehicle is shown in addition to an image in which at least a part of the license plate is shown. The image in which at least a part of the vehicle is captured may be an image captured by a capturing unit (not illustrated) included in the mobile terminal 100.

図８は、携帯端末１０１内の撮影部による撮影車両１の撮影を説明する説明図である。携帯端末１０１のユーザは、不図示の撮影部を撮影車両１の方に向けた状態で、携帯端末１０１を操作して撮影車両１を撮影する。すると、取得部１０は不図示の撮影部が生成した画像を取得する。取得部１０が取得する画像には、撮影車両１の少なくとも一部が写っていれば良い。しかし、車両の凹凸が多い部分や車名によって異なる部分が画像に写っていることが好ましい。例えば、画像には、車両のヘッドライト、グリル、バンパー、エンブレム、オーナメント、ホイール等が写っていることが好ましい。   FIG. 8 is an explanatory diagram illustrating shooting of the shooting vehicle 1 by the shooting unit in the mobile terminal 101. The user of the portable terminal 101 operates the portable terminal 101 to photograph the photographing vehicle 1 with the photographing unit (not shown) facing the photographing vehicle 1. Then, the acquisition unit 10 acquires an image generated by the imaging unit (not shown). The image acquired by the acquisition unit 10 only needs to include at least a part of the photographing vehicle 1. However, it is preferable that a portion having a lot of unevenness of the vehicle or a portion different depending on the vehicle name is shown in the image. For example, the image preferably includes a vehicle headlight, grill, bumper, emblem, ornament, wheel, and the like.

画像４および画像６は、取得部１０が取得する画像の一例である。画像４には、撮影車両１の全体が写っている。一方、画像６には撮影車両１の一部が写っている。   The image 4 and the image 6 are examples of images acquired by the acquisition unit 10. The image 4 shows the entire photographing vehicle 1. On the other hand, the image 6 shows a part of the photographing vehicle 1.

車両情報抽出部１６は、車両の少なくとも一部が写る画像から車両の車両情報を抽出する。本実施形態における車両情報は、例えば画像の特徴量である。車両情報抽出部１６は、取得部１０が取得した画像における車両部分から、特徴量を抽出する。車両情報抽出部１６は、パターン認識等により画像における車両部分を特定しても良い。特徴量の抽出は、ＳＩＦＴ（Ｓｃａｌｅ―Ｉｎｖａｒｉａｎｔ Ｆｅａｔｕｒｅ Ｔｒａｎｓｆｏｒｍ）やＨＯＧ（Ｈｉｓｔｏｇｒａｍｓ ｏｆ Ｏｒｉｅｎｔｅｄ Ｇｒａｄｉｅｎｔｓ）等の手法によって実現されても良い。ここで、例えば車両情報抽出部１６は、画像における車両部分から特徴量データＸを抽出したとする。   The vehicle information extracting unit 16 extracts vehicle information of the vehicle from an image in which at least a part of the vehicle is captured. The vehicle information in the present embodiment is, for example, a feature amount of an image. The vehicle information extraction unit 16 extracts a feature amount from a vehicle portion in the image acquired by the acquisition unit 10. The vehicle information extraction unit 16 may specify a vehicle portion in an image by pattern recognition or the like. The extraction of the feature amount may be realized by a method such as SIFT (Scale-Invariant Feature Transform) or HOG (Histograms of Oriented Gradients). Here, for example, it is assumed that the vehicle information extracting unit 16 has extracted the feature amount data X from the vehicle portion in the image.

送信部１４は、文字抽出部１１が抽出した文字「品川」「３００」「さ」「１２−３４」と、車両情報抽出部１６が抽出した特徴量データＸをサーバ２０１に送信する。   The transmitting unit 14 transmits the characters “Shinagawa”, “300”, “sa”, and “12-34” extracted by the character extracting unit 11 and the feature data X extracted by the vehicle information extracting unit 16 to the server 201.

サーバ２０１内の記憶部２５は、登録車両のナンバープレートが表示する文字に対応付けて登録車両の車両情報を記憶する。記憶部２５は、記憶部２３が記憶する情報に加えて、画像の特徴量を車両情報として記憶する。当該画像は、登録車両を実際に撮影した画像である。なお、当該画像は、登録車両を撮影した画像ではなく、登録車両と同一の車種、車名、色等を有する車両を撮影した画像でもよい。例えば当該画像は、カタログ、製品紹介サイト等に掲載される車両の画像でもよい。   The storage unit 25 in the server 201 stores the vehicle information of the registered vehicle in association with the characters displayed by the license plate of the registered vehicle. The storage unit 25 stores the feature amount of the image as vehicle information in addition to the information stored by the storage unit 23. The image is an image obtained by actually photographing the registered vehicle. Note that the image may be an image of a vehicle having the same vehicle type, vehicle name, color, and the like as the registered vehicle, instead of an image of the registered vehicle. For example, the image may be an image of a vehicle posted on a catalog, a product introduction site, or the like.

記憶部２５が記憶するデータの一例を図９に示す。図９より、文字「品川」「３００」「さ」「１２−３４」は、特徴量データＸに対応付いている。また、文字「品川」「３５０」「は」「３４−５６」は、特徴量データＹに対応付いている。文字「柏」「５５０」「み」「５６−７８」は、特徴量データＺに対応付いている。特徴量以外の車両情報については、図３と同様であるため説明を省略する。   FIG. 9 shows an example of data stored in the storage unit 25. From FIG. 9, the characters “Shinagawa”, “300”, “sa”, and “12-34” are associated with the feature amount data X. The characters “Shinagawa”, “350”, “H”, and “34-56” are associated with the feature amount data Y. The characters “kashiwa”, “550”, “mi”, and “56-78” are associated with the feature amount data Z. The vehicle information other than the feature amount is the same as that in FIG.

車両情報取得部２１は、受信部２０が受信した文字「品川」「３００」「さ」「１２−３４」に対応する車両特徴を記憶部２５から取得する。図９より、文字「品川」「３００」「さ」「１２−３４」に対応する車両特徴は特徴量データＸであるため、車両情報取得部２１は、車両特徴である特徴量データＸを取得する。さらに、車両情報取得部２１は、文字「品川」「３００」「さ」「１２−３４」に対応する車両情報である「普通乗用車」「プルリス」「トヨダ」「Ｈ２３」「白」を取得する。   The vehicle information acquisition unit 21 acquires, from the storage unit 25, the vehicle features corresponding to the characters “Shinagawa”, “300”, “sa”, and “12-34” received by the reception unit 20. From FIG. 9, since the vehicle features corresponding to the characters “Shinagawa”, “300”, “sa”, and “12-34” are the feature amount data X, the vehicle information acquisition unit 21 acquires the feature amount data X that is the vehicle feature. I do. Further, the vehicle information acquisition unit 21 acquires “normal passenger car”, “Pullis”, “Toyoda”, “H23”, and “white” that are vehicle information corresponding to the characters “Shinagawa”, “300”, “sa”, and “12-34”. .

照合部２４は、車両情報抽出部１６が抽出した車両情報を受信部２０から取得する。また、照合部２４は、車両情報取得部２１が取得した車両情報を取得する。そして、照合部２４は、抽出された車両情報と、車両情報取得部２１が取得した車両情報とを照合する。   The collating unit 24 acquires the vehicle information extracted by the vehicle information extracting unit 16 from the receiving unit 20. Further, the collating unit 24 acquires the vehicle information acquired by the vehicle information acquiring unit 21. Then, the collation unit 24 collates the extracted vehicle information with the vehicle information acquired by the vehicle information acquisition unit 21.

その後、照合部２４は、送信部２２を介して照合結果を携帯端末１０１に送信させる。照合結果は例えば、照合の成否、一致度等の情報である。なお、抽出された車両情報と、車両情報取得部が取得した車両情報とが完全に一致する場合でなくても、照合部２４は照合成功との照合結果を出力してもよい。例えば、抽出された車両情報と、車両情報取得部が取得した車両情報との一致度が所定の閾値以上である場合は、照合部２４は照合成功との照合結果を出力してもよい。   After that, the collation unit 24 causes the portable terminal 101 to transmit the collation result via the transmission unit 22. The collation result is, for example, information such as the success or failure of the collation and the degree of coincidence. Note that, even when the extracted vehicle information does not completely match the vehicle information acquired by the vehicle information acquisition unit, the collation unit 24 may output a collation result indicating successful collation. For example, when the degree of coincidence between the extracted vehicle information and the vehicle information acquired by the vehicle information acquisition unit is equal to or greater than a predetermined threshold, the collation unit 24 may output a collation result indicating successful collation.

例えば上述の例において、照合部２４は撮影車両１を撮影した画像の特徴量データＸを取得する。さらに、照合部２４は、登録車両を撮影した画像の特徴量データＸを取得する。そして、照合部２４は、取得したこれらの特徴量を照合し、照合結果を送信部２２に送信させる。   For example, in the above-described example, the matching unit 24 acquires the feature amount data X of an image of the photographed vehicle 1. Further, the matching unit 24 acquires the feature amount data X of the image of the registered vehicle. Then, the collating unit 24 collates the acquired feature amounts, and causes the transmitting unit 22 to transmit the collation result.

送信部２２は、車両情報取得部２１が取得した車両情報および照合部２４による照合結果を携帯端末１００に送信する。例えば送信部２２は、車両情報取得部２１が取得した「普通乗用車」「プルリス」「トヨダ」「Ｈ２３」「白」との文字と、照合結果を送信する。なお、送信部２２は、車両情報取得部２１が取得した特徴量を送信しても良い。   The transmission unit 22 transmits the vehicle information acquired by the vehicle information acquisition unit 21 and the collation result by the collation unit 24 to the mobile terminal 100. For example, the transmitting unit 22 transmits the characters “normal passenger car”, “Pullis”, “Toyoda”, “H23”, and “white” acquired by the vehicle information acquiring unit 21 and the collation result. Note that the transmission unit 22 may transmit the feature amount acquired by the vehicle information acquisition unit 21.

表示制御部１２は、受信部１５がサーバ２０１から受信した車両情報とともに、照合部２４による照合結果を表示部１３に表示させる。表示部１３による表示例を図１０に示す。図１０より、表示部１３は、「普通乗用車」「プルリス」「トヨダ」「Ｈ２３」「白」との文字とともに、「照合成功」との照合結果を表示している。
（第二実施形態の動作）
次に、車両情報取得システム１００１の動作について説明する。図１１は、車両情報システム１００１の動作を説明するシークエンス図である。図１０に示す車両情報取得システム１０００と同様の動作については、適宜説明を省略する。 The display control unit 12 causes the display unit 13 to display the verification result by the verification unit 24 together with the vehicle information received by the reception unit 15 from the server 201. FIG. 10 shows a display example on the display unit 13. From FIG. 10, the display unit 13 displays the characters “normal passenger car”, “Pullis”, “Toyoda”, “H23”, and “white”, and the collation result with “collation success”.
(Operation of Second Embodiment)
Next, the operation of the vehicle information acquisition system 1001 will be described. FIG. 11 is a sequence diagram illustrating the operation of vehicle information system 1001. Description of the same operation as that of the vehicle information acquisition system 1000 shown in FIG. 10 will be appropriately omitted.

携帯端末１００内の取得部１０は、ナンバープレートの少なくとも一部が写る画像から文字が抽出された（Ｓ２）後に、車両の少なくとも一部が写る画像を取得する。当該画像は、Ｓ１で取得される画像と同様、携帯端末１００が有する不図示の撮影部が撮影したもので良い。なお、Ｓ１で取得された画像に車両の少なくとも一部が写っている場合には、取得部１０は、再度画像を取得しなくても良い。また、取得部１０は、ナンバープレートの少なくとも一部が写る画像を取得する（Ｓ１）より前に、車両の少なくとも一部が写る画像を取得してもよい。   After the characters are extracted from the image in which at least a part of the license plate is captured (S2), the obtaining unit 10 in the mobile terminal 100 obtains an image in which at least a part of the vehicle is captured. The image may be an image captured by an imaging unit (not shown) included in the mobile terminal 100, similarly to the image acquired in S1. Note that when at least a part of the vehicle is captured in the image acquired in S1, the acquiring unit 10 does not need to acquire the image again. Further, the acquisition unit 10 may acquire an image in which at least a part of the vehicle is captured before acquiring an image in which at least a part of the license plate is captured (S1).

そして、車両情報抽出部１６は、車両の少なくとも一部が写る画像から車両の車両情報を抽出する（Ｓ６）。本実施形態における車両情報は、例えば画像の特徴量である。車両情報抽出部１６は、取得部１０が取得した画像における車両部分から、特徴量を抽出する。車両情報抽出部１６は、パターン認識等により画像における車両部分を特定しても良い。特徴量の抽出は、ＳＩＦＴ（Ｓｃａｌｅ―Ｉｎｖａｒｉａｎｔ Ｆｅａｔｕｒｅ Ｔｒａｎｓｆｏｒｍ）やＨＯＧ（Ｈｉｓｔｏｇｒａｍｓ ｏｆ Ｏｒｉｅｎｔｅｄ Ｇｒａｄｉｅｎｔｓ）等の手法によって実現されても良い。なお、Ｓ１、Ｓ２，Ｓ６の順序はこれに限られない。   Then, the vehicle information extraction unit 16 extracts vehicle information of the vehicle from an image in which at least a part of the vehicle is captured (S6). The vehicle information in the present embodiment is, for example, a feature amount of an image. The vehicle information extraction unit 16 extracts a feature amount from a vehicle portion in the image acquired by the acquisition unit 10. The vehicle information extraction unit 16 may specify a vehicle portion in an image by pattern recognition or the like. The extraction of the feature amount may be realized by a method such as SIFT (Scale-Invariant Feature Transform) or HOG (Histograms of Oriented Gradients). Note that the order of S1, S2, and S6 is not limited to this.

送信部１４は、文字抽出部１１が抽出した文字と、車両情報抽出部１６が抽出した車両情報をサーバ２０１に送信する。サーバ２００内の受信部２００は、送信部１４が送信した文字と車両情報を受信する。   The transmitting unit 14 transmits the character extracted by the character extracting unit 11 and the vehicle information extracted by the vehicle information extracting unit 16 to the server 201. The receiving unit 200 in the server 200 receives the characters and the vehicle information transmitted by the transmitting unit 14.

車両情報取得部２１は、抽出された文字に対応する車両情報を記憶部２５から取得する（Ｓ３）。車両情報取得部２１が取得する車両情報は、例えば、画像の特徴量である。   The vehicle information acquisition unit 21 acquires vehicle information corresponding to the extracted character from the storage unit 25 (S3). The vehicle information acquired by the vehicle information acquisition unit 21 is, for example, a feature amount of an image.

照合部２４は、車両情報抽出部１６が抽出した車両情報と、車両情報取得部２１が取得した車両情報を取得する。そして、照合部２４は、抽出された車両情報と、車両情報取得部が取得した車両情報とを照合する（Ｓ７）。その後、照合部２４は、送信部２２を介して照合結果を携帯端末１０１に送信させる。   The collation unit 24 acquires the vehicle information extracted by the vehicle information extraction unit 16 and the vehicle information acquired by the vehicle information acquisition unit 21. Then, the collating unit 24 collates the extracted vehicle information with the vehicle information acquired by the vehicle information acquiring unit (S7). After that, the collation unit 24 causes the portable terminal 101 to transmit the collation result via the transmission unit 22.

照合結果は例えば、照合の成否、一致度等の情報である。なお、抽出された車両情報と、車両情報取得部が取得した車両情報とが完全に一致する場合でなくても、照合部２４は照合成功との照合結果を出力してもよい。例えば、抽出された車両情報と、車両情報取得部が取得した車両情報との一致度が所定の閾値以上である場合は、照合部２４は照合成功との照合結果を出力してもよい。   The collation result is, for example, information such as the success or failure of the collation and the degree of coincidence. Note that, even when the extracted vehicle information does not completely match the vehicle information acquired by the vehicle information acquisition unit, the collation unit 24 may output a collation result indicating successful collation. For example, when the degree of coincidence between the extracted vehicle information and the vehicle information acquired by the vehicle information acquisition unit is equal to or greater than a predetermined threshold, the collation unit 24 may output a collation result indicating successful collation.

表示制御部１２は、受信部１５がサーバ２０１から受信した車両情報とともに、照合部２４による照合結果を表示部１３に表示させる（Ｓ８）。   The display control unit 12 causes the display unit 13 to display the collation result of the collation unit 24 together with the vehicle information received by the reception unit 15 from the server 201 (S8).

以上より、本実施形態の車両情報取得システム１００１は、撮影車両の車両情報と登録車両の車両情報とを照合し、照合結果を表示することができる。これによって、携帯端末１００のユーザは、自身で登録車両と撮影車両を見比べなくとも、登録車両と撮影車両がナンバープレート以外の点でも一致するか否かを知ることができる。つまり、ユーザはさらに効率的に登録車両と撮影車両とが一致するか否かを判断することができる。   As described above, the vehicle information acquisition system 1001 of the present embodiment can collate the vehicle information of the photographed vehicle with the vehicle information of the registered vehicle, and can display the collation result. Thereby, the user of the portable terminal 100 can know whether or not the registered vehicle and the photographed vehicle match at points other than the license plate without comparing the registered vehicle and the photographed vehicle by themselves. That is, the user can more efficiently determine whether the registered vehicle matches the photographing vehicle.

なお、本実施形態の車両情報抽出部１６は撮影車両１を撮影した画像から特徴量を取得するものとしたが、画像から取得する車両情報は特徴量に限られない。例えば車両情報は、車両の特徴部分の長さの比でも良い。車両の特徴部分とは、例えば車両のホイールベース、車高、全長等でよい。車両の特徴部分の長さは、車両情報抽出部１６が画像認識処理によって抽出しても良い。または、ユーザが不図示の入力部を介して入力した情報から、車両情報抽出部１６が車両の特徴部分の長さを抽出してもよい。不図示の入力部は、マウス、タッチパネル、キーボード等で良い。   Note that the vehicle information extraction unit 16 of the present embodiment acquires the feature amount from the image of the photographed vehicle 1, but the vehicle information acquired from the image is not limited to the feature amount. For example, the vehicle information may be a ratio of lengths of characteristic portions of the vehicle. The characteristic portion of the vehicle may be, for example, a wheelbase, a vehicle height, and a total length of the vehicle. The length of the characteristic portion of the vehicle may be extracted by the vehicle information extracting unit 16 through image recognition processing. Alternatively, the vehicle information extracting unit 16 may extract the length of the characteristic portion of the vehicle from information input by the user via an input unit (not shown). The input unit (not shown) may be a mouse, a touch panel, a keyboard, or the like.

このとき、車両情報抽出部１６は、抽出された２以上の特徴部分の長さを除算することで、特徴部分の長さの比を抽出する。携帯端末１０１は、抽出された特徴部分の長さの比をサーバ２０１に送信する。サーバ２０１内の記憶部２５は、車両の特徴部分の長さの比を車両情報として記憶する。そして、車両情報取得部２１は、抽出された文字に対応する特徴部分の長さの比を記憶部２５から取得する。照合部２５は、車両情報抽出部１６が抽出した特徴部分の長さの比と、車両情報取得部２１が取得した特徴部分の長さの比とを照合する。   At this time, the vehicle information extraction unit 16 extracts the ratio of the length of the characteristic portion by dividing the length of the extracted two or more characteristic portions. The mobile terminal 101 transmits the ratio of the length of the extracted characteristic portion to the server 201. The storage unit 25 in the server 201 stores the ratio of the length of the characteristic portion of the vehicle as vehicle information. Then, the vehicle information acquisition unit 21 acquires from the storage unit 25 the ratio of the length of the characteristic portion corresponding to the extracted character. The collation unit 25 collates the ratio of the length of the characteristic part extracted by the vehicle information extraction unit 16 with the ratio of the length of the characteristic part acquired by the vehicle information acquisition unit 21.

また、車両情報抽出部１６は、車両情報を項目ごとに抽出してもよい。例えば車両情報抽出部１６は、車両全体の特徴量と、車両の特徴部分の長さとをそれぞれ抽出してもよい。この場合、照合部２４は、車両特徴を項目ごとに照合してもよい。そして、照合部２４は、項目ごとの一致度に基づいて総合的な一致度を算出し、照合結果を出力してもよい。
（第三実施形態）
（第三実施形態の構成）
第三実施形態の構成例について説明する。図１２は、車両情報取得システム１００２の構成例を示した図である。車両情報取得システム１００２は、取得部３００、文字抽出部４００、車両情報取得部５００、表示制御部６００を備える。 Further, the vehicle information extraction unit 16 may extract the vehicle information for each item. For example, the vehicle information extraction unit 16 may extract the characteristic amount of the entire vehicle and the length of the characteristic portion of the vehicle. In this case, the matching unit 24 may match the vehicle features for each item. Then, the matching unit 24 may calculate the overall matching score based on the matching score for each item, and output the matching result.
(Third embodiment)
(Configuration of Third Embodiment)
A configuration example of the third embodiment will be described. FIG. 12 is a diagram showing a configuration example of the vehicle information acquisition system 1002. The vehicle information acquisition system 1002 includes an acquisition unit 300, a character extraction unit 400, a vehicle information acquisition unit 500, and a display control unit 600.

取得部３００は、車両に取り付けられたナンバープレートの少なくとも一部が写る画像を取得する。当該画像は、不図示の撮影部が撮影したもので良い。不図示の撮影部は、例えばＣＣＤ（Ｃｈａｒｇｅ Ｃｏｕｐｌｅｄ Ｄｅｖｉｃｅ）センサ、ＣＭＯＳ（Ｃｏｍｐｌｅｍｅｎｔａｒｙ Ｍｅｔａ Ｏｘｉｄｅ Ｓｅｍｉｃｏｎｄｕｃｔｏｒ）センサ、イメージプロセッサ等を有するカメラで良い。不図示の撮影部は、受光した光を画像データに変換することで、画像データを生成する。なお、不図示の撮影部は車両情報取得システム１００２内に存在しても良いし、外部のシステムに存在しても良い。   The obtaining unit 300 obtains an image in which at least a part of a license plate attached to a vehicle is captured. The image may be taken by a photographing unit (not shown). The imaging unit (not shown) may be, for example, a camera having a charge coupled device (CCD) sensor, a complementary metal oxide semiconductor (CMOS) sensor, or an image processor. The imaging unit (not shown) generates image data by converting the received light into image data. Note that the photographing unit (not shown) may exist in the vehicle information acquisition system 1002 or may exist in an external system.

文字抽出部４００は、取得部３００が取得した画像におけるナンバープレート部分から文字を抽出する。文字抽出部４００は、取得部３００から取得した画像に対して、ＯＣＲ（Ｏｐｔｉｃａｌ Ｃｈａｒａｃｔｅｒ Ｒｅｃｏｇｎｉｔｉｏｎ：光学文字認識）処理を行い、文字を抽出する。   The character extracting unit 400 extracts characters from the license plate portion in the image acquired by the acquiring unit 300. The character extraction unit 400 performs OCR (Optical Character Recognition) processing on the image acquired from the acquisition unit 300 to extract characters.

車両情報取得部５００は、登録車両の車両情報と文字とを対応付けて記憶する不図示の記憶部から、抽出された文字に対応する車両情報を取得する。なお、不図示の記憶部は車両情報取得ステム１００２内に存在しても良いし、外部のシステムに存在しても良い。車両情報は、車両に関する情報であれば何でも良い。例えば車両情報は、当該車両に取り付けられたナンバープレートが表示する情報（車台番号）、当該車両の車検証に記載される情報、当該車両を撮影した画像、当該画像の特徴量、当該車両の所有者に関する情報、等でよい。   The vehicle information acquisition unit 500 acquires vehicle information corresponding to the extracted characters from a storage unit (not shown) that stores vehicle information of registered vehicles and characters in association with each other. The storage unit (not shown) may exist in the vehicle information acquisition stem 1002 or may exist in an external system. The vehicle information may be anything as long as it is information on the vehicle. For example, the vehicle information includes information displayed on a license plate attached to the vehicle (vehicle number), information described in a vehicle verification of the vehicle, an image of the vehicle, a feature amount of the image, ownership of the vehicle, and the like. Information about the person.

表示制御部６００は、車両情報取得部５００が取得した車両情報を不図示の表示部に表示させる。なお、不図示の表示部は車両情報取得ステム１００２内に存在していても良いし、外部のシステムに存在していても良い。   The display control unit 600 causes the display unit (not shown) to display the vehicle information acquired by the vehicle information acquisition unit 500. The display unit (not shown) may exist in the vehicle information acquisition stem 1002 or may exist in an external system.

表示部による表示例を図１３に示す。図１３では、車種である「普通乗用車」と、車両の色である「白」を、表示部７００が登録車両の車両情報として表示している。しかし、表示部が表示する車両情報は、車種や車両の色に限られない。   FIG. 13 shows a display example on the display unit. In FIG. 13, the display unit 700 displays the vehicle type “normal passenger car” and the vehicle color “white” as vehicle information of the registered vehicle. However, the vehicle information displayed by the display unit is not limited to the vehicle type and the color of the vehicle.

本実施形態の車両情報取得システム１００３は、撮影車両のナンバープレートに基づいて定まる登録車両について、その車両情報を表示することができる。つまり、車両情報取得システム１００３のユーザは、撮影車両の外観等と、表示された登録車両の車両情報とを比較することで、撮影車両と登録車両とを比較することができる。換言すると、本実施形態は、撮影車両と登録車両とを比較可能な情報を表示することができる車両情報取得システムを提供することができる。
（ハードウェア構成）
次に、本発明のハードウェア構成例について説明する。図１４および図１５は、車両情報取得システム１０００乃至１００２のハードウェア構成の一例を示す図である。図１４に示すコンピュータ１００３と図１５に示す携帯端末とは、無線又は有線により通信可能に接続している。 The vehicle information acquisition system 1003 of the present embodiment can display vehicle information on a registered vehicle determined based on the license plate of the photographed vehicle. That is, the user of the vehicle information acquisition system 1003 can compare the captured vehicle with the registered vehicle by comparing the appearance of the captured vehicle and the displayed vehicle information of the registered vehicle. In other words, the present embodiment can provide a vehicle information acquisition system that can display information that allows comparison between a photographing vehicle and a registered vehicle.
(Hardware configuration)
Next, an example of a hardware configuration of the present invention will be described. 14 and 15 are diagrams illustrating an example of the hardware configuration of the vehicle information acquisition systems 1000 to 1002. The computer 1003 shown in FIG. 14 and the portable terminal shown in FIG. 15 are communicably connected wirelessly or by wire.

コンピュータ１００３は、あらゆる一般的なコンピュータで良い。例えば、コンピュータ１００３は、ノートＰＣ、デスクトップＰＣ，サーバ、ワークステーション、ブレードサーバ、などで良い。また、コンピュータ１００３は、サーバや、他のコンピュータ等と通信可能に接続していても良い。   Computer 1003 may be any common computer. For example, the computer 1003 may be a notebook PC, desktop PC, server, workstation, blade server, or the like. In addition, the computer 1003 may be communicably connected to a server, another computer, or the like.

図１４より、コンピュータ１００３は、プロセッサ１４０２、メモリ１４０４、ストレージ１４０６、メモリ１４０４と接続するノースブリッジ１４０８、拡張スロット１４１０を含む。また、コンピュータ１００３はさらに、通信インターフェース１４１４及びストレージ１４０６に接続するサウスブリッジ１４１２を含む。これらの構成要素は、互いにバスによって接続され、マザーボードに固定されている。   14, the computer 1003 includes a processor 1402, a memory 1404, a storage 1406, a north bridge 1408 connected to the memory 1404, and an expansion slot 1410. The computer 1003 further includes a south bridge 1412 connected to the communication interface 1414 and the storage 1406. These components are connected to each other by a bus and fixed to the motherboard.

プロセッサ１４０２は、メモリ１４０４、ストレージ１４０６等に記憶された命令を読み出して実行する。プロセッサ１４０２は、不図示の表示装置に映像を表示するために命令を実行してもよい。   The processor 1402 reads and executes instructions stored in the memory 1404, the storage 1406, and the like. Processor 1402 may execute instructions to display an image on a display device (not shown).

プロセッサ１４０２は、メモリ１４０４、ストレージ１４０６に記憶されたプログラムを読み出して実行する。プロセッサ１４０２は、ＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）、ＡＳＩＣｓ（Ａｐｐｌｉｃａｉｏｎ Ｓｐｅｃｉｆｉｃ Ｉｎｔｅｇｒａｔｅｄ Ｃｉｒｃｕｉｔｓ）等の回路で良い。また、プロセッサ１４０２は、車両情報取得部５００及び照合部２４の機能を実現する。すなわち、プロセッサ１４０２は、メモリ１４０４、ストレージ１４０６に記憶されたプログラムを読み出すことで、車両情報取得部５００及び照合部２４の機能を実現する。また、プロセッサ１４０２は、車両情報取得部２１の機能を実現しても良い。   The processor 1402 reads and executes a program stored in the memory 1404 and the storage 1406. The processor 1402 may be a circuit such as a CPU (Central Processing Unit) or an ASICs (Application Specific Integrated Circuits). In addition, the processor 1402 implements the functions of the vehicle information acquisition unit 500 and the matching unit 24. That is, the processor 1402 realizes the functions of the vehicle information acquisition unit 500 and the collation unit 24 by reading the programs stored in the memory 1404 and the storage 1406. Further, the processor 1402 may realize the function of the vehicle information acquisition unit 21.

メモリ１４０４は、情報を記憶するコンピュータ読み取り可能な記憶媒体である。メモリ１４０４は、ＲＡＭ等の揮発性の記憶媒体でも良いし、ＲＯＭ等の不揮発性の記憶媒体でも良い。また、メモリ１４０４は、光学ディスク、磁気ディスク等でもよい。ストレージ１４０６は、大容量なコンピュータ読み取り可能な記憶媒体で良い。ストレージ１４０６は、例えばフロッピー（登録商標）ディスク、ハードディスクドライブ、光学ディスク、フラッシュメモリ等で良い。コンピュータ読み取り可能な記憶媒体が記憶するコンピュータプログラムが含む命令は、実行されることで上述の実施形態を実現する。また、メモリ１４０４は、記憶部２６を実現する。記憶部２６は、第一実施形態の記憶部２３又は第二実施形態の記憶部２５でよい。   The memory 1404 is a computer-readable storage medium that stores information. The memory 1404 may be a volatile storage medium such as a RAM or a non-volatile storage medium such as a ROM. Further, the memory 1404 may be an optical disk, a magnetic disk, or the like. The storage 1406 may be a large-capacity computer-readable storage medium. The storage 1406 may be, for example, a floppy (registered trademark) disk, a hard disk drive, an optical disk, a flash memory, or the like. The instructions included in the computer program stored in the computer-readable storage medium are executed to realize the above-described embodiments. The memory 1404 implements the storage unit 26. The storage unit 26 may be the storage unit 23 of the first embodiment or the storage unit 25 of the second embodiment.

ノースブリッジ１４０８は、例えばＣＰＵやメモリなどコンピュータの頭脳となる部分をつなぎ、データを転送するタイミングや速度などをコントロールする。ノースブリッジ１４０８は、主に高速に動作する装置との間でデータの橋渡しをする。一方、サウスブリッジ１４１２は、比較的低速な装置との間でデータの橋渡しをする。例えばノースブリッジ１４０８は、メモリ１４０４、表示装置１４、不図示の拡張カードを受け入れ可能な拡張スロット１４１０と接続されていても良い。また、サウスブリッジ１４１２は、ストレージ１４０６、通信インターフェース１４１４と接続されていても良い。   The north bridge 1408 connects, for example, a brain part of a computer such as a CPU and a memory, and controls the timing and speed of data transfer. The north bridge 1408 mainly bridges data with a device operating at high speed. On the other hand, the south bridge 1412 bridges data with relatively slow devices. For example, the north bridge 1408 may be connected to the memory 1404, the display device 14, and an expansion slot 1410 that can receive an expansion card (not shown). Further, the south bridge 1412 may be connected to the storage 1406 and the communication interface 1414.

通信インターフェース１４１４は、ＵＳＢ，Ｂｌｕｅｔｏｏｔｈ（登録商標）、Ｅｔｈｅｒｎｅｔ（登録商標）,ｗｉｒｅｌｅｓｓ Ｅｔｈｅｒｎｅｔ等の様々なコミュニケーションポートを含んでも良い。また、これらのコミュニケーションポートは、一つまたは複数の入出力装置、例えばキーボード、ポインティングデバイス、スキャナ、無線ＬＡＮ（Ｌｏｃａｌ Ａｒｅａ Ｎｅｔｗｏｒｋ）アダプター、ルーター等の通信機器、と接続されても良い。すなわち、コンピュータ１００３は、通信インターフェース１４１４を介して携帯端末１００４と接続されてもよい。また、通信インターフェース１４１４は、無線ＬＡＮアダプターを含んでいても良い。通信インターフェース１４１４は、受信部２０及び送信部２２の機能を実現する。   The communication interface 1414 may include various communication ports such as USB, Bluetooth (registered trademark), Ethernet (registered trademark), and wireless Ethernet. In addition, these communication ports may be connected to one or more input / output devices, for example, communication devices such as a keyboard, a pointing device, a scanner, a wireless LAN (Local Area Network) adapter, and a router. That is, the computer 1003 may be connected to the mobile terminal 1004 via the communication interface 1414. Further, the communication interface 1414 may include a wireless LAN adapter. The communication interface 1414 implements the functions of the receiving unit 20 and the transmitting unit 22.

次に、図１５に示される携帯端末１００４について説明する。携帯端末１００４は、携帯電話、スマートフォン、ＰＤＡ（ｐｅｒｓｏｎａｌ ｄｉｇｉｔａｌ ａｓｓｉｓｔａｎｔ）等の携帯端末で良い。   Next, the mobile terminal 1004 shown in FIG. 15 will be described. The mobile terminal 1004 may be a mobile terminal such as a mobile phone, a smartphone, and a PDA (personal digital assistant).

携帯端末１００４は、ディスプレイ１４５４、トランシーバ１４６８、オーディオコーデック１４６０、コントロールインターフェース１４５８、ディスプレイインターフェース１４５６、を有していても良い。また、携帯端末１００４は、通信インターフェース１４６６、プロセッサ１４５２、ＧＰＳ（Ｇｒｏｂａｌ Ｐｏｓｉｔｉｏｎｉｎｇ Ｓｙｓｔｅｍ）受信モジュール１４７０、増設メモリ１４７４、メモリ１４６４、外部インターフェース１４６２をさらに有していても良い。   The mobile terminal 1004 may include a display 1454, a transceiver 1468, an audio codec 1460, a control interface 1458, and a display interface 1456. The mobile terminal 1004 may further include a communication interface 1466, a processor 1452, a GPS (Global Positioning System) receiving module 1470, an additional memory 1474, a memory 1464, and an external interface 1462.

ディスプレイ１４５４は、例えば、ＴＦＴ ＬＣＤ（Ｔｈｉｎ−ｆｉｌｍ―Ｔｒａｎｓｉｓｔｏｒ Ｌｉｑｕｉｄ Ｃｒｙｓｔａｌ Ｄｉｓｐｌａｙ）、ＯＬＥＤ（Ｏｒｇａｎｉｃ Ｌｉｇｈｔ Ｅｍｉｔｔｉｎｇ Ｄｉｏｄｅ ）ディスプレイ、その他のディスプレイで良い。また、ディスプレイは、コントロールインターフェース１４５８や、ディスプレイインターフェース１４５６と接続されていても良い。プロセッサ１４５２は、コントロールインターフェース１４５８やディスプレイインターフェース１４５６を介して、携帯端末１００４の利用者と情報をやりとりしてもよい。ディスプレイ１４５４は、表示部１３の機能を実現する。また、ディスプレイ１４５４は、表示部７００の機能を実現しても良い。   The display 1454 may be, for example, a TFT LCD (Thin-film-Transistor Liquid Crystal Display), an OLED (Organic Light Emitting Diode) display, or another display. In addition, the display may be connected to the control interface 1458 or the display interface 1456. The processor 1452 may exchange information with a user of the mobile terminal 1004 via the control interface 1458 and the display interface 1456. The display 1454 implements the function of the display unit 13. In addition, the display 1454 may realize the function of the display unit 700.

ディスプレイインターフェース１４５６は回路によって構成されても良い。ディスプレイインターフェース１４５６は、映像や他の情報を利用者に表示するためにディスプレイを制御する。ディスプレイインターフェース１４５６は表示制御部６００の機能を実現する。また、ディスプレイインターフェース１４５６は、表示制御部１２の機能を実現しても良い。   The display interface 1456 may be configured by a circuit. A display interface 1456 controls the display to display video and other information to a user. The display interface 1456 implements the function of the display control unit 600. Further, the display interface 1456 may realize the function of the display control unit 12.

コントロールインターフェース１４５８は利用者からのコマンドを受け取る。そして、コントロールインターフェース１４５８は、受け取ったコマンドをプロセッサ１４５２に受け渡すために変換しても良い。   The control interface 1458 receives a command from the user. The control interface 1458 may then convert the received command for delivery to the processor 1452.

また、携帯端末１００４は、外部装置とプロセッサ１４０２との通信を可能にする外部インターフェース１４６２を有していても良い。外部インターフェース１４６２は、有線通信又は無線通信を携帯端末１００４に提供しても良い。   Further, the mobile terminal 1004 may include an external interface 1462 that enables communication between an external device and the processor 1402. The external interface 1462 may provide wired communication or wireless communication to the mobile terminal 1004.

増設メモリ１４７４は、増設インターフェース１４７２を介して携帯端末１００４に接続する。また、増設メモリ１４７４は、例えばＳＩＭＭ（Ｓｉｎｇｌｅ Ｉｎ Ｌｉｎｅ Ｍｅｍｏｒｙ Ｍｏｄｕｌｅ）カードインターフェースを含んでいても良い。また、増設メモリ１４７４は、携帯端末１００４に追加の記憶領域を与え、アプリケーションやその他の情報を記憶しても良い。さらに、増設メモリ１４７４は、セキュリティに関する情報を記憶していても良い。増設メモリ１４７４は、携帯端末１００４のセキュリティ管理機器として機能してもよい。例えば増設メモリ１４７４には、携帯端末１００４の安全な利用を実現する命令がプログラムされている。   The additional memory 1474 is connected to the portable terminal 1004 via the additional interface 1472. In addition, the additional memory 1474 may include, for example, a SIMM (Single In Line Memory Module) card interface. Further, the additional memory 1474 may provide an additional storage area to the mobile terminal 1004 and store an application and other information. Further, the additional memory 1474 may store information related to security. The additional memory 1474 may function as a security management device of the mobile terminal 1004. For example, instructions for realizing the safe use of the portable terminal 1004 are programmed in the additional memory 1474.

携帯端末１００４は、通信インターフェース１４６６を介して無線通信を行う。つまり携帯端末１００４は、通信インターフェース１４６６を介してコンピュータ１００３と通信しても良い。通信インターフェース１４６６は、送信部１４および受信部１５の機能を実現する。   The mobile terminal 1004 performs wireless communication via the communication interface 1466. That is, the portable terminal 1004 may communicate with the computer 1003 via the communication interface 1466. The communication interface 1466 implements the functions of the transmission unit 14 and the reception unit 15.

通信インターフェース１４６６は、デジタル信号処理回路を含んでも良い。通信インターフェース１４６６は、ＧＭＳ（Ｇｌｏｂａｌ Ｓｙｓｔｅｍ ｆｏｒ Ｍｏｂｉｌｅ Ｃｏｍｍｕｎｉｃａｔｉｏｎ）、ＳＭＳ（Ｓｈｏｒｔ Ｍｅｓｓａｇｅ Ｓｅｒｖｉｃｅ），ＥＭＳ（Ｅｎｈａｎｃｅｄ Ｍｅｓｓａｇｉｎｇ Ｓｅｒｖｉｃｅ）等のモード、プロトコルの下で通信を実現しても良い。または、通信インターフェース１４６６は、ＭＭＳ（Ｍｕｌｔｉｍｅｄｉａ Ｍｅｓｓａｇｉｎｇ Ｓｅｒｖｉｃｅ），ＣＤＭＡ（Ｃｏｄｅ Ｄｉｖｉｓｉｏｎ Ｍｕｌｔｉｐｌｅ Ａｃｃｅｓｓ）、ＴＤＭＡ（ｔｉｍｅ ｄｉｖｉｓｉｏｎ ｍｕｌｔｉｐｌｅ ａｃｃｅｓｓ）等のモード、プロトコルの下で通信を実現しても良い。   Communication interface 1466 may include a digital signal processing circuit. The communication interface 1466 may realize communication under a mode or protocol such as GMS (Global System for Mobile Communication), SMS (Short Message Service), or EMS (Enhanced Messaging Service). Alternatively, the communication interface 1466 may implement communication under a mode or protocol such as Multimedia Messaging Service (MMS), Code Division Multiple Access (CDMA), or Time Division Multiple Access (TDMA).

さらに、通信インターフェース１４６６は、ＰＤＣ（Ｐｅｒｓｏｎａｌ Ｄｉｇｉｔａｌ Ｃｅｌｌｕｌａｒ），ＷＣＤＭＡ（登録商標）（Ｗｉｄｅｂａｎｄ Ｃｏｄｅ Ｄｉｖｉｓｉｏｎ Ｍｕｌｔｉｐｌｅ Ａｃｃｅｓｓ）、ＣＤＭＡ２０００、ＧＰＲＳ（Ｇｅｎｅｒａｌ ｐａｃｋｅｔ ｒａｄｉｏ ｓｅｒｖｉｃｅ）等のモード、プロトコルの下で通信を実現しても良い。上述の通信は、例えばトランシーバ１４６８を介して発生する。また、狭域の通信、例えばＢｌｕｅｔｏｏｔｈ，Ｗｉ−Ｆｉ（登録商標）等を利用した通信も、トランシーバ１４６８を介して発生しても良い。   Further, the communication interface 1466 includes a PDC (Personal Digital Cellular), a WCDMA (registered trademark) (Wideband Code Division Multiple Access), a CDMA2000, a GPRS (general packet radio service even under a general packet radio service protocol, and the like). good. The communication described above occurs, for example, via the transceiver 1468. In addition, communication using a narrow area, for example, communication using Bluetooth, Wi-Fi (registered trademark), or the like, may be generated via the transceiver 1468.

ＧＰＳ受信モジュール１４７０は、携帯端末１００４で動作するアプリケーションで利用されるデータを提供しても良い。当該データは、例えば位置やナビゲーションに関連したデータで良い。   The GPS receiving module 1470 may provide data used in an application operating on the mobile terminal 1004. The data may be, for example, data related to position and navigation.

また、携帯端末１００４は、オーディオコーデック１４６０を介して音声通信を行っても良い。オーディオコーデック１４６０は、利用者から音声情報を取得し、それをデジタル情報として利用可能に変換する。さらに、オーディオコーデック１４６０は利用者が聞き取り可能な音声を生成する。オーディオコーデック１４６０が扱う情報は、音声通話、録音された音（ボイスメッセージ、音楽ファイルなど）、携帯端末１００４上のアプリケーションが生成した音、等でも良い。   Further, the mobile terminal 1004 may perform voice communication via the audio codec 1460. The audio codec 1460 obtains audio information from the user and converts it into usable digital information. Further, audio codec 1460 generates audio that can be heard by the user. The information handled by the audio codec 1460 may be a voice call, a recorded sound (voice message, music file, or the like), a sound generated by an application on the mobile terminal 1004, or the like.

プロセッサ１４５２、及びメモリ１４６４については、コンピュータ１００３と同様であるため説明を省略する。プロセッサ１４５２は、取得部８００、文字抽出部４００、車両情報抽出部１６の機能を実現する。   The processor 1452 and the memory 1464 are the same as those of the computer 1003, and thus the description is omitted. The processor 1452 implements the functions of the acquisition unit 800, the character extraction unit 400, and the vehicle information extraction unit 16.

なお、車両情報取得システム１０００乃至１００２は、コンピュータ１００３又は携帯端末１００４のいずれか一方によって実現されても良い。この場合、例えばコンピュータ１００３内のプロセッサ１４０２は、取得部８００、文字抽出部４００、車両情報抽出部１６、表示制御部６００の機能も実現して良い。また、例えばプロセッサ１４５２は、車両情報取得部２１、照合部２４の機能も実現して良い。   Note that the vehicle information acquisition systems 1000 to 1002 may be realized by one of the computer 1003 and the portable terminal 1004. In this case, for example, the processor 1402 in the computer 1003 may also realize the functions of the acquisition unit 800, the character extraction unit 400, the vehicle information extraction unit 16, and the display control unit 600. Further, for example, the processor 1452 may also realize the functions of the vehicle information acquisition unit 21 and the matching unit 24.

上述した各実施形態は本発明を具体化した一例に過ぎず、請求の範囲に記載された本発明の趣旨の範囲内であれば、種々変更することができるものである。   Each of the embodiments described above is merely an example embodying the present invention, and various modifications can be made within the scope of the present invention described in the claims.

１ 車両
２ 画像
３ 画像
４ 画像
５ ナンバープレート
６ 画像
１０ 取得部
１１ 文字抽出部
１２ 表示制御部
１３ 表示部
１４ 送信部
１５ 受信部
１６ 車両情報抽出部
２０ 受信部
２１ 車両情報取得部
２２ 送信部
２３ 記憶部
２４ 照合部
２５ 記憶部
２６ 記憶部
１００ 携帯端末
１０１ 携帯端末
２００ サーバ
２０１ サーバ
３００ 取得部
４００ 文字抽出部
５００ 車両情報取得部
６００ 表示制御部
７００ 表示部
１０００ 車両情報取得システム
１００１ 車両情報取得システム
１００２ 車両情報取得システム
１００３ コンピュータ
１００４ 携帯端末
１４０２ プロセッサ
１４０４ メモリ
１４０６ ストレージ
１４０８ ノースブリッジ
１４１０ 拡張スロット
１４１２ サウスブリッジ
１４１４ 通信インターフェース
１４５２ プロセッサ
１４５４ ディスプレイ
１４５６ ディスプレイインターフェース
１４５８ コントロールインターフェース
１４６０ オーディオコーデック
１４６６ 通信インターフェース
１４６８ トランシーバ
１４６２ 外部インターフェース
１４６４ メモリ
１４７０ ＧＰＳ受信モジュール
１４７２ 増設インターフェース
１４７４ 増設メモリ Reference Signs List 1 vehicle 2 image 3 image 4 image 5 license plate 6 image 10 acquisition unit 11 character extraction unit 12 display control unit 13 display unit 14 transmission unit 15 reception unit 16 vehicle information extraction unit 20 reception unit 21 vehicle information acquisition unit 22 transmission unit 23 Storage unit 24 Collation unit 25 Storage unit 26 Storage unit 100 Mobile terminal 101 Mobile terminal 200 Server 201 Server 300 Acquisition unit 400 Character extraction unit 500 Vehicle information acquisition unit 600 Display control unit 700 Display unit 1000 Vehicle information acquisition system 1001 Vehicle information acquisition system 1002 Vehicle information acquisition system 1003 Computer 1004 Mobile terminal 1402 Processor 1404 Memory 1406 Storage 1408 Northbridge 1410 Expansion slot 1412 Southbridge 1414 Communication interface 1452 Processor 1454 displays 1456 display interface 1458 controls interface 1460 audio codec 1466 communication interface 1468 transceiver 1462 external interface 1464 memory 1470 GPS receiver module 1472 Expansion interface 1474 Additional Memory

Claims (7)

車両に取り付けられたナンバープレートの少なくとも一部が写る画像を取得する取得部と、
前記画像における前記ナンバープレート部分から文字を抽出する文字抽出部と、
登録車両の車両情報と文字とを対応付けて記憶する記憶部から、抽出された前記文字に対応する車両情報を取得する車両情報取得部と、
取得された前記車両情報を表示部に表示させる表示制御部と、
前記車両の少なくとも一部が写る画像から前記車両に係る部分の特徴量を抽出する車両情報抽出部と、
抽出された前記特徴量と、前記車両情報取得部が取得した前記車両情報と対応付けて前記記憶部に記憶される前記登録車両に係る画像の特徴量と、を照合する照合部と、を有し、
前記表示制御部はさらに、前記照合部による照合結果を前記表示部に表示させる、
車両情報取得システム。 An acquisition unit that acquires an image in which at least a part of a license plate attached to the vehicle is captured,
A character extraction unit that extracts characters from the license plate portion in the image,
A vehicle information acquisition unit that acquires vehicle information corresponding to the extracted characters from a storage unit that stores the vehicle information of the registered vehicles and the characters in association with each other,
A display control unit for displaying the obtained vehicle information on a display unit,
A vehicle information extraction unit that extracts a feature amount of a part related to the vehicle from an image in which at least a part of the vehicle is captured,
A matching unit that matches the extracted feature amount with a feature amount of an image of the registered vehicle stored in the storage unit in association with the vehicle information acquired by the vehicle information acquiring unit. And
The display control unit further causes the display unit to display a result of the comparison by the comparison unit,
Vehicle information acquisition system. 前記車両情報取得部は、前記車両情報とともに、前記車両情報に対応する比較用画像を前記記憶部から取得し、
前記表示制御部は、前記車両情報とともに、前記比較用画像を表示部に表示させる
請求項１に記載の車両情報取得システム。 The vehicle information acquisition unit, together with the vehicle information, acquires a comparison image corresponding to the vehicle information from the storage unit,
The vehicle information acquisition system according to claim 1, wherein the display control unit causes the display unit to display the comparison image together with the vehicle information. 前記車両情報取得部は、前記車両情報とともに、前記車両情報に対応する前記登録車両の所有者の顔画像を前記記憶部から取得し、  The vehicle information acquisition unit acquires the face image of the owner of the registered vehicle corresponding to the vehicle information from the storage unit, together with the vehicle information,
前記表示制御部は、前記車両情報とともに、前記顔画像を表示部に表示させる、  The display control unit causes the display unit to display the face image together with the vehicle information,
請求項１に記載の車両情報取得システム。The vehicle information acquisition system according to claim 1. 端末が、
車両に取り付けられたナンバープレートの少なくとも一部が写る画像を取得し、
前記画像における前記ナンバープレート部分から文字を抽出し、
前記車両の少なくとも一部が写る画像から前記車両に係る部分の特徴量を抽出し、
サーバが、
登録車両の車両情報と文字とを対応付けて記憶する記憶部から、前記端末により抽出された前記文字に対応する車両情報を取得し、
前記端末により抽出された前記特徴量と、取得した前記車両情報と対応付けて前記記憶部に記憶される前記登録車両に係る画像の特徴量と、を照合し、
取得された前記車両情報と、前記照合による照合結果と、を表示部に表示させる、
車両情報取得方法。 The terminal is
Obtain an image that shows at least a part of the license plate attached to the vehicle,
Extracting characters from the license plate portion in the image,
Extracting a feature amount of a portion related to the vehicle from an image in which at least a portion of the vehicle is captured,
The server is
From the storage unit that stores vehicle information and characters of the registered vehicle in association with each other, obtains vehicle information corresponding to the characters extracted by the terminal ,
The feature amount extracted by the terminal and the feature amount of the image related to the registered vehicle stored in the storage unit in association with the obtained vehicle information, are compared,
Causing the display unit to display the obtained vehicle information and a result of the comparison by the comparison ,
Vehicle information acquisition method. 前記サーバが、  Said server,
前記車両情報とともに、前記車両情報に対応する前記登録車両の所有者の顔画像を前記記憶部から取得し、Along with the vehicle information, a face image of an owner of the registered vehicle corresponding to the vehicle information is obtained from the storage unit,
前記車両情報とともに、前記顔画像を表示部に表示させる、  Displaying the face image on a display unit together with the vehicle information;
請求項４に記載の車両情報取得方法。The vehicle information acquisition method according to claim 4. コンピュータに、
車両に取り付けられたナンバープレートの少なくとも一部が写る画像を取得する取得処理と、
前記画像における前記ナンバープレート部分から文字を抽出する文字抽出処理と、
登録車両の車両情報と文字とを対応付けて記憶する記憶部から、抽出された前記文字に対応する車両情報を取得する車両情報取得処理と、
取得された前記車両情報を表示部に表示させる表示制御処理と、
前記車両の少なくとも一部が写る画像から前記車両に係る部分の特徴量を抽出する車両情報抽出処理と、
抽出された前記特徴量と、前記車両情報取得処理で取得した前記車両情報と対応付けて前記記憶部に記憶される前記登録車両に係る画像の特徴量と、を照合する照合処理と、を実行させ、
前記表示制御処理において、前記照合による照合結果も前記表示部に表示させる処理を実行させる、
車両情報取得プログラム。 On the computer,
An acquisition process of acquiring an image in which at least a part of a license plate attached to a vehicle is captured,
Character extraction processing for extracting characters from the license plate portion in the image,
Vehicle information acquisition processing for acquiring vehicle information corresponding to the extracted characters from a storage unit that stores the vehicle information and characters of the registered vehicle in association with each other,
Display control processing for displaying the obtained vehicle information on a display unit,
A vehicle information extraction process for extracting a feature amount of a portion related to the vehicle from an image in which at least a portion of the vehicle is captured,
Executing a matching process of matching the extracted feature amount with a feature amount of an image of the registered vehicle stored in the storage unit in association with the vehicle information acquired in the vehicle information acquisition process. Let
In the display control process, a process of displaying a result of the comparison by the comparison on the display unit is performed.
Vehicle information acquisition program. 前記車両情報取得処理において、前記車両情報とともに、前記車両情報に対応する前記登録車両の所有者の顔画像を前記記憶部から取得し、  In the vehicle information acquisition process, together with the vehicle information, acquires a face image of the owner of the registered vehicle corresponding to the vehicle information from the storage unit,
前記表示制御処理において、前記車両情報とともに、前記顔画像を表示部に表示させる処理を実行させる、  In the display control process, a process of displaying the face image on a display unit together with the vehicle information is performed.
請求項６に記載の車両情報取得プログラム。A vehicle information acquisition program according to claim 6.

Images