JP2014006854A - Vehicle number recognition device, vehicle number recognition method, and program - Google Patents

Vehicle number recognition device, vehicle number recognition method, and program Download PDF

Info

Publication number
JP2014006854A
JP2014006854A JP2012144133A JP2012144133A JP2014006854A JP 2014006854 A JP2014006854 A JP 2014006854A JP 2012144133 A JP2012144133 A JP 2012144133A JP 2012144133 A JP2012144133 A JP 2012144133A JP 2014006854 A JP2014006854 A JP 2014006854A
Authority
JP
Japan
Prior art keywords
image
size
vehicle number
license plate
unit
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2012144133A
Other languages
Japanese (ja)
Other versions
JP6053348B2 (en
Inventor
Yohei Kojima
洋平 小島
Tetsuya Tomonaka
哲也 塘中
Hiroyuki Nakayama
博之 中山
Mayumi Saito
真由美 斎藤
Yoshi Cho
凱 張
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Mitsubishi Heavy Industries Ltd
Original Assignee
Mitsubishi Heavy Industries Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Mitsubishi Heavy Industries Ltd filed Critical Mitsubishi Heavy Industries Ltd
Priority to JP2012144133A priority Critical patent/JP6053348B2/en
Publication of JP2014006854A publication Critical patent/JP2014006854A/en
Application granted granted Critical
Publication of JP6053348B2 publication Critical patent/JP6053348B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Image Processing (AREA)
  • Traffic Control Systems (AREA)
  • Image Analysis (AREA)

Abstract

PROBLEM TO BE SOLVED: To perform recognition of a vehicle number by using an appropriate parameter.SOLUTION: A storage unit 13 stores a relation between coordinates on an image and the size of a number plate on the image, and a size specification unit 14 specifies the size of the number plate on the image on the basis of the relation. A recognition unit 15 performs recognition processing of the vehicle number by using a parameter suited for the size of the number plate on the image specified by the size specification unit 14.

Description

本発明は、車両に設置されたナンバープレートから車両番号を認識するための車両番号認識装置、車両番号認識方法、及びプログラムに関する。   The present invention relates to a vehicle number recognition apparatus, a vehicle number recognition method, and a program for recognizing a vehicle number from a license plate installed in the vehicle.

従来のＥＲＰ（Ｅｌｅｃｔｒｏｎｉｃ Ｒｏａｄ Ｐｒｉｃｉｎｇ：電子道路課金）システムは、通路に設けられた第１ガントリ装置に撮像装置を備え、第１ガントリ装置より通路の車両進行方向前方に設けられた第２ガントリ装置に車両検知器を備えている（例えば、特許文献１参照）。このようなＥＲＰシステムでは、車両検知器が車両を検知したときに、撮像装置が車両を撮像し、ＣＣＳ（Ｃｅｎｔｒａｌ Ｃｏｍｐｕｔｅｒ Ｓｙｓｔｅｍ：中央コンピュータシステム）が当該撮像した画像に対して車両番号の認識処理を行っている。   A conventional ERP (Electronic Road Pricing) system includes an imaging device in a first gantry device provided in a passage, and a second gantry device provided in front of the passage in the vehicle traveling direction from the first gantry device. The vehicle detector is provided (for example, refer patent document 1). In such an ERP system, when the vehicle detector detects the vehicle, the imaging device images the vehicle, and a CCS (Central Computer System) performs a vehicle number recognition process on the captured image. Is going.

また、近年、ＧＰＳ（Ｇｌｏｂａｌ Ｐｏｓｉｔｉｏｎｉｎｇ Ｓｙｓｔｅｍ：全地球測位システム）や第３世代移動体通信を用いたＥＲＰシステム（以下、次世代ＥＲＰシステムと呼ぶ）の開発が計画されている。次世代ＥＲＰシステムでは、ＧＰＳや移動体通信を用いて車両の認識処理を行うことから、従来のＥＲＰシステムで通路に設置していたアンテナ及びガントリ装置が不要となる。   In recent years, development of an ERP system (hereinafter referred to as a next-generation ERP system) using GPS (Global Positioning System) or third-generation mobile communication is planned. In the next-generation ERP system, since the vehicle recognition process is performed using GPS or mobile communication, the antenna and the gantry device installed in the passage in the conventional ERP system become unnecessary.

特開２００２−２６０１６５号公報JP 2002-260165 A

従来のＣＣＳによるナンバープレートの認識処理は、ガントリ装置に設置された撮像装置が、車両検知器が車両を検知したときに撮像した車両に対してＯＣＲ処理を行うものであったため、画像上のナンバープレートのサイズはほぼ一定であった。そのため、ＣＣＳは、ナンバープレートのサイズに適したパラメータを用いてＯＣＲ処理を行うことで、精度良く車両番号の認識を行うことができた。   In the conventional license plate recognition processing by CCS, the image pickup device installed in the gantry device performs OCR processing on the imaged vehicle when the vehicle detector detects the vehicle. The plate size was almost constant. Therefore, the CCS can recognize the vehicle number with high accuracy by performing the OCR process using a parameter suitable for the size of the license plate.

他方、次世代ＥＲＰシステムでは、ガントリ装置が不要となることから、従来のＥＲＰシステムで第２ガントリ装置に備えていた車両検知器を用いない構成とすることが検討されている。そのため、路側に動画像を撮像する撮像装置を設け、当該動画像に対して画像処理を行うことで、車両番号の認識処理を行うことが検討されている。   On the other hand, in the next-generation ERP system, since a gantry device is not required, a configuration in which the vehicle detector provided in the second gantry device in the conventional ERP system is not used has been studied. For this reason, it has been studied to perform a vehicle number recognition process by providing an imaging device that captures a moving image on the road side and performing image processing on the moving image.

しかしながら、車両検知器を用いない構成とする場合、動画像の各フレームに写る車両の位置がまちまちになる。そのため、画像上のナンバープレートのサイズにばらつきが生じ、ナンバープレートのサイズに適したパラメータを特定することができないため、ＯＣＲ処理の精度が低下してしまうおそれがある。   However, when the vehicle detector is not used, the position of the vehicle shown in each frame of the moving image varies. Therefore, the size of the license plate on the image varies, and a parameter suitable for the size of the license plate cannot be specified, so that the accuracy of the OCR processing may be reduced.

本発明の目的は、車両検知器を用いずに、ナンバープレートのサイズに適したパラメータを用いて車両番号を認識することができる車両番号認識装置、車両番号認識方法、及びプログラムを提供することにある。   An object of the present invention is to provide a vehicle number recognition device, a vehicle number recognition method, and a program capable of recognizing a vehicle number using a parameter suitable for the size of a license plate without using a vehicle detector. is there.

本発明は上記の課題を解決するためになされたものであり、車両に設置されたナンバープレートから車両番号を認識するための車両番号認識装置であって、撮像装置が所定の範囲を撮像した画像を取得する画像取得部と、前記画像取得部が取得した画像において車両番号の認識対象とする位置を特定する位置特定部と、画像上の座標に関連付けて、当該座標にナンバープレートが存在する場合における当該ナンバープレートの画像上のサイズを記憶する記憶部と、前記位置特定部が特定した位置に関連付けられたサイズを前記記憶部から読み出すサイズ特定部と、前記画像取得部が取得した画像に対し、前記サイズ特定部が読み出したサイズに適したパラメータを用いて車両番号の認識を行う認識部とを備えることを特徴とする。   The present invention has been made to solve the above-described problem, and is a vehicle number recognition device for recognizing a vehicle number from a license plate installed in a vehicle, and an image in which a predetermined range is captured by an imaging device In the case where there is a license plate associated with the coordinates on the image in association with the coordinates on the image, the image acquisition unit for acquiring the position, the position specifying unit for specifying the position to be recognized as the vehicle number in the image acquired by the image acquisition unit A storage unit that stores the size of the license plate on the image, a size specifying unit that reads a size associated with the position specified by the position specifying unit from the storage unit, and an image acquired by the image acquisition unit And a recognition unit for recognizing a vehicle number using a parameter suitable for the size read by the size specifying unit.

また、本発明においては、前記記憶部は、画像上の座標に関連付けて、当該座標にナンバープレートが存在する場合における、当該ナンバープレートの設置高さに応じて変動する画像上のサイズの範囲を記憶し、前記サイズ特定部は、前記位置特定部が特定した位置に関連付けられたサイズの範囲を前記記憶部から読み出し、前記認識部は、前記画像取得部が取得した画像に対し、前記サイズ特定部が読み出した範囲内のサイズに適した複数のパラメータを用いて車両番号の認識を行うことが好ましい。   In the present invention, the storage unit associates the coordinate range on the image with a size range on the image that varies depending on the installation height of the license plate when the license plate exists at the coordinate. The size specifying unit reads out a size range associated with the position specified by the position specifying unit from the storage unit, and the recognizing unit performs the size specifying for the image acquired by the image acquiring unit. It is preferable to recognize the vehicle number using a plurality of parameters suitable for the size within the range read by the unit.

また、本発明においては、前記記憶部は、連続する座標群によって構成される画像の領域に関連付けて、当該領域内にナンバープレートが存在する場合における当該ナンバープレートの画像上のサイズを記憶し、前記サイズ特定部は、前記位置特定部が特定した位置に応じた領域に関連付けられたサイズを前記記憶部から読み出すことが好ましい。   In the present invention, the storage unit stores the size of the license plate on the image when there is a license plate in the region, in association with the region of the image formed by the continuous coordinate group, The size specifying unit preferably reads from the storage unit a size associated with an area corresponding to the position specified by the position specifying unit.

また、本発明は、車両に設置されたナンバープレートから車両番号を認識するための車両番号認識装置を用いた車両番号認識方法であって、画像取得部は、撮像装置が所定の範囲を撮像した画像を取得し、位置特定部は、前記画像取得部が取得した画像において車両番号の認識対象とする位置を特定し、サイズ特定部は、画像上の座標に関連付けて当該座標にナンバープレートが存在する場合における当該ナンバープレートの画像上のサイズを記憶する記憶部から、前記位置特定部が特定した位置に関連付けられたサイズを読み出し、認識部は、前記画像取得部が取得した画像に対し、前記サイズ特定部が読み出したサイズに適したパラメータを用いて車両番号の認識を行うことを特徴とする。   The present invention is also a vehicle number recognition method using a vehicle number recognition device for recognizing a vehicle number from a license plate installed in a vehicle, wherein the image acquisition unit images a predetermined range. An image is acquired, the position specifying unit specifies a position to be recognized as a vehicle number in the image acquired by the image acquiring unit, and the size specifying unit is associated with the coordinates on the image and a license plate exists at the coordinates. The size associated with the position specified by the position specifying unit is read from the storage unit that stores the size of the license plate on the image when the image is acquired by the recognition unit. The vehicle number is recognized using parameters suitable for the size read by the size specifying unit.

また、本発明は、車両に設置されたナンバープレートから車両番号を認識するための車両番号認識装置を、撮像装置が所定の範囲を撮像した画像を取得する画像取得部、前記画像取得部が取得した画像において車両番号の認識対象とする位置を特定する位置特定部、画像上の座標に関連付けて、当該座標にナンバープレートが存在する場合における当該ナンバープレートの画像上のサイズを記憶する記憶部から、前記位置特定部が特定した位置に関連付けられたサイズを読み出すサイズ特定部、前記画像取得部が取得した画像に対し、前記サイズ特定部が読み出したサイズに適したパラメータを用いて車両番号の認識を行う認識部として機能させるためのプログラムである。   Further, the present invention provides a vehicle number recognition device for recognizing a vehicle number from a license plate installed in a vehicle, an image acquisition unit that acquires an image obtained by capturing an image of a predetermined range by the imaging device, and the image acquisition unit A position specifying unit for specifying a position to be a vehicle number recognition target in the image, a storage unit that stores the size of the license plate on the image when there is a license plate at the coordinates in association with the coordinates on the image , A size specifying unit that reads a size associated with the position specified by the position specifying unit, and recognition of a vehicle number by using a parameter suitable for the size read by the size specifying unit for the image acquired by the image acquiring unit It is a program for making it function as a recognition part which performs.

本発明によれば、記憶部が画像上の位置とナンバープレートのサイズとの関係を記憶し、サイズ特定部が当該関係に基づいてナンバープレートのサイズを特定する。これにより、認識部は、適切なパラメータを用いて車両番号の認識を行うことができる。   According to the present invention, the storage unit stores the relationship between the position on the image and the size of the license plate, and the size specifying unit specifies the size of the license plate based on the relationship. Thereby, the recognition part can recognize a vehicle number using an appropriate parameter.

本発明の一実施形態による車両番号認識装置の構成を示す概略ブロック図である。It is a schematic block diagram which shows the structure of the vehicle number recognition apparatus by one Embodiment of this invention. 記憶部が記憶する情報の例を示す図である。It is a figure which shows the example of the information which a memory | storage part memorize | stores. 領域毎にナンバープレートの画像上のサイズが異なる理由を示す図である。It is a figure which shows the reason for the size on the image of a license plate differing for every area | region. 同一の領域においてナンバープレートの画像上のサイズに幅を設ける理由を示す図である。It is a figure which shows the reason for providing the width | variety on the size on the image of a license plate in the same area | region. 本発明の一実施形態による車両番号認識装置の動作を示すフローチャートである。It is a flowchart which shows operation | movement of the vehicle number recognition apparatus by one Embodiment of this invention.

以下、図面を参照しながら本発明の実施形態について詳しく説明する。
図１は、本発明の一実施形態による車両番号認識装置１０の構成を示す概略ブロック図である。
本実施形態による車両番号認識装置１０は、車両検知器による通知を受けず、撮像装置が撮像した動画像に基づいて動的に車両番号を認識する装置である。車両番号認識装置１０は、画像取得部１１、位置特定部１２、記憶部１３、サイズ特定部１４、認識部１５を備える。 Hereinafter, embodiments of the present invention will be described in detail with reference to the drawings.
FIG. 1 is a schematic block diagram showing a configuration of a vehicle number recognition apparatus 10 according to an embodiment of the present invention.
The vehicle number recognition device 10 according to the present embodiment is a device that dynamically recognizes a vehicle number based on a moving image captured by an imaging device without receiving notification from a vehicle detector. The vehicle number recognition device 10 includes an image acquisition unit 11, a position specification unit 12, a storage unit 13, a size specification unit 14, and a recognition unit 15.

画像取得部１１は、路側の所定の位置に設置され、所定の方向角、俯角及び画角で動画像を撮像する撮像装置から、動画像を取得する。なお、撮像装置は、車両の後部に設置されたナンバープレートが撮像できるように設置されている。
位置特定部１２は、画像取得部１１が取得した動画像の１フレームにおいてナンバープレートが含まれる可能性が高い座標（位置）を、車両番号の認識対象とする座標として特定する。
記憶部１３は、撮像装置が撮像した画像の領域と、当該領域内にナンバープレートが存在する場合の当該ナンバープレートのサイズとを関連付けて記憶する。
サイズ特定部１４は、位置特定部１２が特定した座標が属する領域に関連付けられたサイズを記憶部１３から読み出すことで、ナンバープレートの画像上のサイズを特定する。
認識部１５は、サイズ特定部１４が特定したサイズに応じたパラメータを用いてナンバープレートに記載された車両番号の認識を行う。 The image acquisition unit 11 is installed at a predetermined position on the road side, and acquires a moving image from an imaging device that captures a moving image at a predetermined direction angle, depression angle, and angle of view. In addition, the imaging device is installed so that the license plate installed in the rear part of the vehicle can be imaged.
The position specifying unit 12 specifies coordinates (positions) that are highly likely to include a license plate in one frame of the moving image acquired by the image acquiring unit 11 as coordinates for recognition of the vehicle number.
The storage unit 13 stores the area of the image captured by the imaging device and the size of the license plate when the license plate exists in the area in association with each other.
The size specifying unit 14 reads the size associated with the area to which the coordinates specified by the position specifying unit 12 belong from the storage unit 13 to specify the size of the license plate on the image.
The recognition unit 15 recognizes the vehicle number described on the license plate using a parameter corresponding to the size specified by the size specifying unit 14.

図２は、記憶部１３が記憶する情報の例を示す図である。
記憶部１３は、画像の領域、ｘ座標の最大値（ｘ＿ｍａｘ）及び最小値（ｘ＿ｍｉｎ）、ｙ座標の最大値（ｙ＿ｍａｘ）及び最小値（ｙ＿ｍｉｎ）、ナンバープレートの高さの最大値（ｈｅｉｇｈｔ＿ｍａｘ）及び最小値（ｈｅｉｇｈｔ＿ｍｉｎ）、並びにナンバープレートの幅の最大値（ｗｉｄｔｈ＿ｍａｘ）及び最小値（ｗｉｄｔｈ＿ｍｉｎ）を記憶する。但し、記憶部１３が記憶する座標の座標系は、画像の横方向に伸びる軸をｘ軸、画像の縦方向に伸びる軸をｙ軸とし、画像の左上の端点を原点とする座標系である。
ここで、画像の領域は、当該領域に関連付けられたｘ座標の最大値及び最小値、並びにｙ座標の最大値及び最小値の範囲の連続する座標群によって構成される画像の領域である。そして、ナンバープレートの高さの最大値及び最小値、並びにナンバープレートの幅の最大値及び最小値は、当該領域内にナンバープレートが存在する場合の当該ナンバープレートの画像上のサイズの範囲を示す。 FIG. 2 is a diagram illustrating an example of information stored in the storage unit 13.
The storage unit 13 stores the image area, the maximum value (x_max) and minimum value (x_min) of the x coordinate, the maximum value (y_max) and minimum value (y_min) of the y coordinate, and the maximum value (height_max) of the license plate height. And the minimum value (height_min), and the maximum value (width_max) and the minimum value (width_min) of the width of the license plate are stored. However, the coordinate system of the coordinates stored in the storage unit 13 is a coordinate system in which the axis extending in the horizontal direction of the image is the x axis, the axis extending in the vertical direction of the image is the y axis, and the upper left end point of the image is the origin. .
Here, the area of the image is an area of an image constituted by a coordinate group in which the range of the maximum value and the minimum value of the x coordinate and the range of the maximum value and the minimum value of the y coordinate associated with the area is continuous. The maximum value and minimum value of the license plate height and the maximum value and minimum value of the license plate width indicate the range of the size of the license plate on the image when the license plate exists in the area. .

ここで、領域毎にナンバープレートの画像上のサイズが異なり、更に同一の領域内でもナンバープレートの画像上のサイズに幅を設ける理由を説明する。
図３は、領域毎にナンバープレートの画像上のサイズが異なる理由を示す図である。
図４は、同一の領域においてナンバープレートの画像上のサイズに幅を設ける理由を示す図である。
上述したとおり、本実施形態による車両番号認識装置１０は、車両検知器による通知を受けずに車両番号を認識するため、動画像のフレーム毎に車両の車両番号を認識する必要がある。フレームのタイミングは固定的に予め定められたものであるため、各フレームに存在する車両の位置はまちまちである。また、撮像装置は、路側に設置されるため、車両の進行方向と撮像方向とが一致しない。 Here, the reason why the size of the license plate on the image differs from region to region, and the width of the size of the license plate on the image within the same region will be described.
FIG. 3 is a diagram illustrating the reason why the size of the license plate on the image is different for each region.
FIG. 4 is a diagram illustrating the reason why a width is provided for the size of the license plate on the image in the same region.
As described above, since the vehicle number recognition apparatus 10 according to the present embodiment recognizes the vehicle number without receiving notification from the vehicle detector, it is necessary to recognize the vehicle number of the vehicle for each frame of the moving image. Since the frame timing is fixed and predetermined, the position of the vehicle existing in each frame varies. In addition, since the imaging device is installed on the road side, the traveling direction of the vehicle does not match the imaging direction.

つまり、図３（Ａ）と図３（Ｂ）に示すように、動画像に含まれる車両のｙ座標が同一の値であっても、ｘ座標の値が異なる場合、車両の奥行き方向の位置が異なる。同様に、図３（Ｂ）と図３（Ｃ）に示すように、動画像に含まれる車両のｘ座標が同一の値であっても、ｙ座標の値が異なる場合、車両の奥行き方向の位置が異なる。車両の奥行き方向の位置が異なる場合、図３に示すとおり、それぞれナンバープレートの画像上のサイズが異なる。具体的には、車両が撮像方向の手前側に存在するほど、ナンバープレートの画像上のサイズは大きくなり、車両が撮像方向の奥側に存在するほど、ナンバープレートの画像上のサイズは小さくなる。つまり、２つの車両のナンバープレートの実寸が同一であったとしても、ナンバープレートの座標が異なる場合、ナンバープレートの画像上のサイズが異なる。そのため、本実施形態では、記憶部１３が記憶するナンバープレートの画像上のサイズは、領域毎に異なる値としている。   That is, as shown in FIGS. 3A and 3B, if the y coordinate of the vehicle included in the moving image has the same value, but the x coordinate value is different, the position in the depth direction of the vehicle Is different. Similarly, as shown in FIGS. 3B and 3C, even if the x-coordinates of the vehicles included in the moving image have the same value, if the y-coordinate values are different, The position is different. When the position of the vehicle in the depth direction is different, the size of the license plate on the image is different as shown in FIG. Specifically, the size of the license plate on the image increases as the vehicle is closer to the imaging direction, and the size of the license plate on the image decreases as the vehicle is closer to the imaging direction. . That is, even if the actual size of the license plates of the two vehicles is the same, if the coordinates of the license plates are different, the size of the license plates on the image is different. For this reason, in the present embodiment, the size of the license plate image stored in the storage unit 13 is different for each region.

また、車両によってナンバープレートの取り付け位置は異なっている。ナンバープレートの取り付け位置が異なる場合、同一の位置に存在する車両のナンバープレートのｙ座標の値が異なる。具体的には、ナンバープレートの取り付け位置が高いほどナンバープレートのｙ座標の値は小さくなり、ナンバープレートの取り付け位置が低いほどナンバープレートのｙ座標の値は大きくなる。したがって、２つの車両のナンバープレートの実寸が同一であり、かつ動画像においてナンバープレートの座標が同一であったとしても、ナンバープレートの取り付け位置が異なる場合、図４（Ａ）と図４（Ｂ）に示すように、車両の奥行き方向の位置が異なる。上述したように、車両の奥行き方向の位置が異なる場合、ナンバープレートの画像上のサイズが異なることとなる。そのため、本実施形態では、記憶部１３が同一の領域に関連付けて記憶するナンバープレートの画像上のサイズに幅を設けている。   In addition, the number plate is attached at different positions depending on the vehicle. When the installation position of the license plate is different, the y coordinate value of the license plate of the vehicle existing at the same position is different. More specifically, the higher the license plate mounting position, the smaller the y coordinate value of the license plate, and the lower the license plate mounting position, the larger the y coordinate value of the license plate. Therefore, even if the actual size of the license plates of the two vehicles is the same and the coordinates of the license plates in the moving image are the same, if the license plate mounting positions are different, FIG. 4 (A) and FIG. ), The position of the vehicle in the depth direction is different. As described above, when the position in the depth direction of the vehicle is different, the size of the license plate on the image is different. Therefore, in the present embodiment, a width is provided for the size on the image of the license plate that the storage unit 13 stores in association with the same area.

次に、本実施形態による車両番号認識装置１０の動作について説明する。
図５は、本発明の一実施形態による車両番号認識装置１０の動作を示すフローチャートである。
まず、画像取得部１１は、撮像装置が動画像の１フレームを撮像する毎に、当該フレーム画像を取得する（ステップＳ１）。次に、位置特定部１２は、画像取得部１１が取得したフレーム画像からナンバープレートが存在する可能性が高い座標を、車両番号の認識対象とする座標として特定する（ステップＳ２）。 Next, the operation of the vehicle number recognition apparatus 10 according to the present embodiment will be described.
FIG. 5 is a flowchart showing the operation of the vehicle number recognition apparatus 10 according to one embodiment of the present invention.
First, the image acquisition unit 11 acquires a frame image every time the imaging apparatus captures one frame of a moving image (step S1). Next, the position specifying unit 12 specifies the coordinates that are likely to have a license plate from the frame image acquired by the image acquiring unit 11 as the coordinates for which the vehicle number is to be recognized (step S2).

例えば、位置特定部１２は、フレーム画像の周波数解析を行い、フレーム画像のうち空間周波数が高い部分を、ナンバープレートが存在する可能性が高い座標と判定することができる。空間周波数が高い部分とは、すなわちコントラストの変化が大きく、かつ細かい模様がある部分である。つまり、背景とのコントラストが強く小さな文字が書かれたナンバープレートが存在する部分は、空間周波数が高くなるため、フレーム画像の周波数解析を行うことで、ナンバープレートが存在する可能性が高い座標を特定することができる。
なお、このような空間周波数解析の他、位置特定部１２は、既存の文字パターン認識技術による数字検出によってナンバープレート位置を特定しても良い。具体的には、プレートの数字領域（テンプレートとして予め記憶された０〜９の数字のうち、少なくとも１つが含まれる領域）を、パターンマッチング技術により検出し、ナンバープレートが含まれる可能性が高い座標を特定するようにしても良い。 For example, the position specifying unit 12 can analyze the frequency of the frame image and determine a portion having a high spatial frequency in the frame image as a coordinate that is highly likely to have a license plate. The portion having a high spatial frequency is a portion having a large contrast change and a fine pattern. In other words, since the spatial frequency is high in the portion where the license plate with strong contrast with the background and small letters is present, the coordinates that are highly likely to exist are obtained by performing frequency analysis of the frame image. Can be identified.
In addition to such a spatial frequency analysis, the position specifying unit 12 may specify the license plate position by detecting numbers using an existing character pattern recognition technique. Specifically, the number area of the plate (the area including at least one of the numbers 0 to 9 stored in advance as a template) is detected by the pattern matching technique, and the coordinates that are highly likely to include the number plate May be specified.

次に、サイズ特定部１４は、記憶部１３が記憶する領域のうち、位置特定部１２が特定した座標が属する領域を特定する（ステップＳ３）。つまり、図２に示すｘ＿ｍｉｎが位置特定部１２が特定したｘ座標以下、ｘ＿ｍａｘが位置特定部１２が特定したｘ座標以上、ｙ＿ｍｉｎが位置特定部１２が特定したｙ座標以下、かつｙ＿ｍａｘが位置特定部１２が特定したｙ座標以上である領域を特定する。   Next, the size specifying unit 14 specifies the region to which the coordinates specified by the position specifying unit 12 belong among the regions stored in the storage unit 13 (step S3). That is, x_min shown in FIG. 2 is not more than the x coordinate specified by the position specifying unit 12, x_max is not less than the x coordinate specified by the position specifying unit 12, y_min is not more than the y coordinate specified by the position specifying unit 12, and y_max is specified. The area | region which is more than y coordinate which the part 12 specified is pinpointed.

次に、サイズ特定部１４は、特定した領域に関連付けられた画像上のサイズの範囲を、記憶部１３から読み出す（ステップＳ４）。次に、認識部１５は、サイズ特定部１４が特定したサイズに応じたパラメータを特定する（ステップＳ５）。このとき、認識部１５は、サイズ特定部１４が特定したサイズに応じたパラメータが複数存在する場合、当該複数のパラメータを特定する。例えば、１０×２０〜２５×５０のサイズにおいてＯＣＲを行うのに適したパラメータＡと、２５×５０〜５０×１００のサイズにおいてＯＣＲを行うのに適したパラメータＢと、５０×１００〜８０×１６０のサイズにおいてＯＣＲを行うのに適したパラメータＣとが存在する場合に、サイズ特定部１４が特定したサイズが２０×４０〜４０×８０（図２の領域Ａ）であったとき、認識部１５は、パラメータＡとパラメータＢを、車両番号認識のパラメータとして特定する。   Next, the size specifying unit 14 reads the size range on the image associated with the specified region from the storage unit 13 (step S4). Next, the recognizing unit 15 specifies a parameter corresponding to the size specified by the size specifying unit 14 (step S5). At this time, when there are a plurality of parameters corresponding to the size specified by the size specifying unit 14, the recognizing unit 15 specifies the plurality of parameters. For example, a parameter A suitable for performing OCR at a size of 10 × 20 to 25 × 50, a parameter B suitable for performing OCR at a size of 25 × 50 to 50 × 100, and 50 × 100 to 80 × When there is a parameter C suitable for performing OCR at a size of 160, when the size specified by the size specifying unit 14 is 20 × 40 to 40 × 80 (area A in FIG. 2), the recognition unit 15 specifies parameter A and parameter B as vehicle number recognition parameters.

そして、認識部１５は、ステップＳ１で画像取得部が取得したフレーム画像に対し、ステップＳ５で特定したパラメータを用いて車両番号の認識処理を行う（ステップＳ６）。ステップＳ５で複数のパラメータを特定していた場合、それぞれのパラメータを用いて車両番号認識を行い、最も尤度が高い車両番号を用いる。このとき、認識部１５は、複数パターンの車両番号認識処理をそれぞれ行い、尤度が高いほうを選択する。複数パターンの車両番号認識処理とは、例えば、二輪車用の車両番号認識処理と四輪車用の車両番号認識処理である。   And the recognition part 15 performs the recognition process of a vehicle number using the parameter specified by step S5 with respect to the frame image which the image acquisition part acquired by step S1 (step S6). If a plurality of parameters are specified in step S5, vehicle number recognition is performed using each parameter, and the vehicle number with the highest likelihood is used. At this time, the recognition unit 15 performs a plurality of patterns of vehicle number recognition processing, and selects a higher likelihood. The multiple-pattern vehicle number recognition process is, for example, a two-wheeled vehicle number recognition process and a four-wheeled vehicle number recognition process.

次に、車両番号認識装置１０は、管理者などによる操作や割り込み処理などにより、外部から処理の終了要求を入力したか否かを判定する（ステップＳ７）。車両番号認識装置１０は、外部から終了要求を入力していないと判定した場合（ステップＳ７：ＮＯ）、ステップＳ１に戻り、次のフレームについて車両番号認識処理を実行する。他方、車両番号認識装置１０は、外部から終了要求を入力したと判定した場合（ステップＳ７：ＹＥＳ）、処理を終了する。   Next, the vehicle number recognizing device 10 determines whether or not a processing end request has been input from the outside by an operation by an administrator or an interruption process (step S7). When it is determined that the termination request is not input from the outside (step S7: NO), the vehicle number recognition apparatus 10 returns to step S1 and executes the vehicle number recognition process for the next frame. On the other hand, the vehicle number recognition apparatus 10 complete | finishes a process, when it determines with having input the completion | finish request | requirement from the outside (step S7: YES).

このように、本実施形態によれば、記憶部１３が画像上の座標とナンバープレートの画像上のサイズとの関係を記憶し、サイズ特定部１４が当該関係に基づいてナンバープレートのサイズを特定する。これにより、認識部１５は、適切なパラメータを用いて車両番号の認識を行うことができる。   Thus, according to the present embodiment, the storage unit 13 stores the relationship between the coordinates on the image and the size of the license plate on the image, and the size specifying unit 14 specifies the size of the license plate based on the relationship. To do. Thereby, the recognition part 15 can recognize a vehicle number using an appropriate parameter.

以上、図面を参照してこの発明の一実施形態について詳しく説明してきたが、具体的な構成は上述のものに限られることはなく、この発明の要旨を逸脱しない範囲内において様々な設計変更等をすることが可能である。
例えば、本実施形態では、ナンバープレートの設置高さが異なる場合を考慮して、領域に関連付けられたナンバープレートの画像上のサイズに幅を設ける場合について説明したが、これに限られない。例えば、ナンバープレートの設置高さの違いによる画像上のサイズの変動が、車両番号認識のパラメータに変化を与えない程度である場合、領域に関連付けられたナンバープレートの画像上のサイズに幅を設けなくても良い。 As described above, the embodiment of the present invention has been described in detail with reference to the drawings. However, the specific configuration is not limited to the above, and various design changes and the like can be made without departing from the scope of the present invention. It is possible to
For example, in the present embodiment, the case where the width on the image of the license plate associated with the region is provided in consideration of the case where the installation height of the license plate is different has been described, but the present invention is not limited to this. For example, if the change in the size on the image due to the difference in the installation height of the license plate does not change the vehicle number recognition parameter, a width is provided for the size on the image of the license plate associated with the area. It is not necessary.

また、本実施形態では、記憶部１３が画像上の領域に関連付けてナンバープレートの画像上のサイズを記憶する場合について説明したが、これに限られない。例えば、記憶部１３が画像上の座標を独立変数とし、ナンバープレートの画像上のサイズを従属変数とする関数を記憶するなど、ナンバープレートの画像上のサイズが画像上の領域に関連付けられない構成であっても良い。   In the present embodiment, the case where the storage unit 13 stores the size of the license plate on the image in association with the region on the image has been described. However, the present invention is not limited to this. For example, the storage unit 13 stores a function in which the coordinates on the image are independent variables and the size on the license plate image is a dependent variable, and the size of the license plate image is not associated with the region on the image. It may be.

また、本実施形態では、車両番号認識装置１０が、車両の後部に設置されたナンバープレートの撮影及び車両番号認識をする場合について説明したが、これに限られず、車両の前面に設置されたナンバープレートの撮影及び車両番号認識をしても良い。   Moreover, although this embodiment demonstrated the case where the vehicle number recognition apparatus 10 image | photographs the number plate installed in the rear part of a vehicle, and vehicle number recognition, it is not restricted to this, The number installed in the front surface of the vehicle You may perform photography of a plate and vehicle number recognition.

上述の車両番号認識装置１０は内部に、コンピュータシステムを有している。そして、上述した各処理部の動作は、プログラムの形式でコンピュータ読み取り可能な記録媒体に記憶されており、このプログラムをコンピュータが読み出して実行することによって、上記処理が行われる。ここでコンピュータ読み取り可能な記録媒体とは、磁気ディスク、光磁気ディスク、ＣＤ−ＲＯＭ、ＤＶＤ−ＲＯＭ、半導体メモリ等をいう。また、このコンピュータプログラムを通信回線によってコンピュータに配信し、この配信を受けたコンピュータが当該プログラムを実行するようにしても良い。   The vehicle number recognition device 10 described above has a computer system inside. The operation of each processing unit described above is stored in a computer-readable recording medium in the form of a program, and the above processing is performed by the computer reading and executing this program. Here, the computer-readable recording medium means a magnetic disk, a magneto-optical disk, a CD-ROM, a DVD-ROM, a semiconductor memory, or the like. Alternatively, the computer program may be distributed to the computer via a communication line, and the computer that has received the distribution may execute the program.

また、上記プログラムは、前述した機能の一部を実現するためのものであっても良い。さらに、前述した機能をコンピュータシステムにすでに記録されているプログラムとの組み合わせで実現できるもの、いわゆる差分ファイル（差分プログラム）であっても良い。   The program may be for realizing a part of the functions described above. Furthermore, what can implement | achieve the function mentioned above in combination with the program already recorded on the computer system, what is called a difference file (difference program) may be sufficient.

１０…車両番号認識装置 １１…画像取得部 １２…位置特定部 １３…記憶部 １４…サイズ特定部 １５…認識部   DESCRIPTION OF SYMBOLS 10 ... Vehicle number recognition apparatus 11 ... Image acquisition part 12 ... Position specification part 13 ... Memory | storage part 14 ... Size specification part 15 ... Recognition part

Claims (5)

車両に設置されたナンバープレートから車両番号を認識するための車両番号認識装置であって、
撮像装置が所定の範囲を撮像した画像を取得する画像取得部と、
前記画像取得部が取得した画像において車両番号の認識対象とする位置を特定する位置特定部と、
画像上の座標に関連付けて、当該座標にナンバープレートが存在する場合における当該ナンバープレートの画像上のサイズを記憶する記憶部と、
前記位置特定部が特定した位置に関連付けられたサイズを前記記憶部から読み出すサイズ特定部と、
前記画像取得部が取得した画像に対し、前記サイズ特定部が読み出したサイズに適したパラメータを用いて車両番号の認識を行う認識部と
を備えることを特徴とする車両番号認識装置。 A vehicle number recognition device for recognizing a vehicle number from a license plate installed in a vehicle,
An image acquisition unit that acquires an image obtained by imaging the predetermined range by the imaging device;
A position specifying unit for specifying a position to be recognized as a vehicle number in the image acquired by the image acquiring unit;
In association with the coordinates on the image, a storage unit that stores the size of the license plate on the image when a license plate exists at the coordinates;
A size specifying unit that reads from the storage unit a size associated with the position specified by the position specifying unit;
A vehicle number recognition apparatus comprising: a recognition unit configured to recognize a vehicle number using a parameter suitable for the size read by the size specifying unit with respect to an image acquired by the image acquisition unit. 前記記憶部は、画像上の座標に関連付けて、当該座標にナンバープレートが存在する場合における、当該ナンバープレートの設置高さに応じて変動する画像上のサイズの範囲を記憶し、
前記サイズ特定部は、前記位置特定部が特定した位置に関連付けられたサイズの範囲を前記記憶部から読み出し、
前記認識部は、前記画像取得部が取得した画像に対し、前記サイズ特定部が読み出した範囲内のサイズに適した複数のパラメータを用いて車両番号の認識を行う
ことを特徴とする請求項１に記載の車両番号認識装置。 The storage unit stores the range of the size on the image that varies according to the installation height of the license plate when the license plate exists at the coordinate in association with the coordinate on the image,
The size specifying unit reads a size range associated with the position specified by the position specifying unit from the storage unit,
The said recognition part recognizes a vehicle number using the several parameter suitable for the size in the range which the said size specific | specification part read with respect to the image acquired by the said image acquisition part. Vehicle number recognition apparatus as described in. 前記記憶部は、連続する座標群によって構成される画像の領域に関連付けて、当該領域内にナンバープレートが存在する場合における当該ナンバープレートの画像上のサイズを記憶し、
前記サイズ特定部は、前記位置特定部が特定した位置に応じた領域に関連付けられたサイズを前記記憶部から読み出す
ことを特徴とする請求項１または請求項２に記載の車両番号認識装置。 The storage unit stores the size of the license plate on the image when there is a license plate in the region, in association with the region of the image configured by the continuous coordinate group,
The vehicle number recognition apparatus according to claim 1, wherein the size specifying unit reads a size associated with an area corresponding to the position specified by the position specifying unit from the storage unit. 車両に設置されたナンバープレートから車両番号を認識するための車両番号認識装置を用いた車両番号認識方法であって、
画像取得部は、撮像装置が所定の範囲を撮像した画像を取得し、
位置特定部は、前記画像取得部が取得した画像において車両番号の認識対象とする位置を特定し、
サイズ特定部は、画像上の座標に関連付けて当該座標にナンバープレートが存在する場合における当該ナンバープレートの画像上のサイズを記憶する記憶部から、前記位置特定部が特定した位置に関連付けられたサイズを読み出し、
認識部は、前記画像取得部が取得した画像に対し、前記サイズ特定部が読み出したサイズに適したパラメータを用いて車両番号の認識を行う
ことを特徴とする車両番号認識方法。 A vehicle number recognition method using a vehicle number recognition device for recognizing a vehicle number from a license plate installed in a vehicle,
The image acquisition unit acquires an image captured by the imaging device within a predetermined range,
The position specifying unit specifies a position to be a vehicle number recognition target in the image acquired by the image acquisition unit,
The size specifying unit is a size associated with the position specified by the position specifying unit from the storage unit that stores the size of the license plate on the image when there is a license plate at the coordinates in association with the coordinates on the image. Read
The recognition unit recognizes a vehicle number for the image acquired by the image acquisition unit using a parameter suitable for the size read by the size specifying unit. 車両に設置されたナンバープレートから車両番号を認識するための車両番号認識装置を、
撮像装置が所定の範囲を撮像した画像を取得する画像取得部、
前記画像取得部が取得した画像において車両番号の認識対象とする位置を特定する位置特定部、
画像上の座標に関連付けて、当該座標にナンバープレートが存在する場合における当該ナンバープレートの画像上のサイズを記憶する記憶部から、前記位置特定部が特定した位置に関連付けられたサイズを読み出すサイズ特定部、
前記画像取得部が取得した画像に対し、前記サイズ特定部が読み出したサイズに適したパラメータを用いて車両番号の認識を行う認識部
として機能させるためのプログラム。 A vehicle number recognition device for recognizing a vehicle number from a license plate installed in the vehicle,
An image acquisition unit that acquires an image obtained by imaging the predetermined range by the imaging device;
A position specifying unit for specifying a position to be recognized as a vehicle number in the image acquired by the image acquiring unit;
A size specification that reads the size associated with the position specified by the position specifying unit from the storage unit that stores the size of the license plate on the image when there is a license plate at the coordinates in association with the coordinates on the image Part,
A program for causing an image acquired by the image acquisition unit to function as a recognition unit that recognizes a vehicle number using a parameter suitable for the size read by the size specifying unit.
JP2012144133A 2012-06-27 2012-06-27 Vehicle number recognition device, vehicle number recognition method, and program Active JP6053348B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2012144133A JP6053348B2 (en) 2012-06-27 2012-06-27 Vehicle number recognition device, vehicle number recognition method, and program

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2012144133A JP6053348B2 (en) 2012-06-27 2012-06-27 Vehicle number recognition device, vehicle number recognition method, and program

Publications (2)

Publication Number Publication Date
JP2014006854A true JP2014006854A (en) 2014-01-16
JP6053348B2 JP6053348B2 (en) 2016-12-27

Family

ID=50104482

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2012144133A Active JP6053348B2 (en) 2012-06-27 2012-06-27 Vehicle number recognition device, vehicle number recognition method, and program

Country Status (1)

Country Link
JP (1) JP6053348B2 (en)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10853680B2 (en) 2015-07-14 2020-12-01 Panasonic Intellectual Property Management Co., Ltd. Identification medium recognition device and identification medium recognition method
CN112950952A (en) * 2021-02-09 2021-06-11 联想(北京)有限公司 Processing method and electronic equipment
KR102368122B1 (en) * 2021-08-31 2022-02-25 이홍기 Method and system for recognizing vehicle number by using deep learning image recognition-based vehicle detection and tracking technology
KR102452756B1 (en) * 2021-08-31 2022-10-11 주식회사한맥아이피에스 Method for managing illegal parking in electric vehicle charing area based on deep learning and a charing device for electric vehicles

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20110057816A1 (en) * 2009-05-08 2011-03-10 Citysync, Ltd Security systems

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20110057816A1 (en) * 2009-05-08 2011-03-10 Citysync, Ltd Security systems

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10853680B2 (en) 2015-07-14 2020-12-01 Panasonic Intellectual Property Management Co., Ltd. Identification medium recognition device and identification medium recognition method
CN112950952A (en) * 2021-02-09 2021-06-11 联想(北京)有限公司 Processing method and electronic equipment
KR102368122B1 (en) * 2021-08-31 2022-02-25 이홍기 Method and system for recognizing vehicle number by using deep learning image recognition-based vehicle detection and tracking technology
KR102452756B1 (en) * 2021-08-31 2022-10-11 주식회사한맥아이피에스 Method for managing illegal parking in electric vehicle charing area based on deep learning and a charing device for electric vehicles

Also Published As

Publication number Publication date
JP6053348B2 (en) 2016-12-27

Similar Documents

Publication Publication Date Title
JP5699788B2 (en) Screen area detection method and system
US10803597B2 (en) Image processing device, method for controlling the same, program, and storage medium
KR101809543B1 (en) Method for recognizing contectless fingerprint and electronic apparatus for performing the same.
JP6237874B2 (en) Self-position calculation device and self-position calculation method
JP2017162116A (en) Image processing device, imaging device, movable body apparatus control system, image processing method and program
US9930306B2 (en) Image processing apparatus, image processing method, and computer-readable storage medium
WO2010047226A1 (en) Lane line detection device, lane line detection method, and lane line detection program
JP6053348B2 (en) Vehicle number recognition device, vehicle number recognition method, and program
JP2009230233A (en) Stripe pattern detection system, stripe pattern detection method, and program for stripe pattern detection
JP5691834B2 (en) Image identification apparatus and program
JP2017175378A (en) Information processing system, information processing method, and program
JP6221283B2 (en) Image processing apparatus, image processing method, and image processing program
JP5160366B2 (en) Pattern matching method for electronic parts
JP2014126887A (en) License plate determination device
JP5829155B2 (en) Pedestrian detection device and program
JP5062316B2 (en) Lane marking device, lane marking detection method, and lane marking detection program
JP2019175107A (en) Recognition device, recognition method, program, and data generation device
JP5176523B2 (en) Moving body detection apparatus, moving body detection method, and moving body detection program
JP2004362334A (en) Device for detecting area of traveling object
JP4107273B2 (en) Moving body detection device
JP2011170554A (en) Object recognition device, object recognition method, and object recognition program
JP2016099760A (en) Information providing system and printed matter
US11836218B2 (en) System and method for object detection and dimensioning
JP5531796B2 (en) Focus adjustment device and focus adjustment method
JP2023072441A (en) Key point correction device, key point correction method and program

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20150623

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20160316

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20160322

A711 Notification of change in applicant

Free format text: JAPANESE INTERMEDIATE CODE: A712

Effective date: 20160323

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A821

Effective date: 20160324

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20160523

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A821

Effective date: 20160524

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20161101

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20161129

R150 Certificate of patent or registration of utility model

Ref document number: 6053348

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

S531 Written request for registration of change of domicile

Free format text: JAPANESE INTERMEDIATE CODE: R313531

S533 Written request for registration of change of name

Free format text: JAPANESE INTERMEDIATE CODE: R313533

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350