JP7440442B2 - ナンバープレート認識装置、ナンバープレート認識方法、およびプログラム - Google Patents

Description

本開示は、ナンバープレート認識装置、ナンバープレート認識方法、およびプログラムに関する。

車両の車種判別、個体識別などを行うため、車両のナンバープレートを読み取る技術が用いられている。たとえば、特許文献１には、前方カメラと後方カメラとにより、車両の前方および後方のそれぞれに付されたナンバープレートを読み取る認識装置が記載されている。

特開２０１９－６１５０６号公報

ナンバープレートが車体の凹凸の影響で隠れている場合、ナンバープレート上に汚れが付着している場合など、前後の何れかのナンバープレートが正常に読み取れないことがある。そうすると、前後のナンバープレートの認識結果が一致しなくなる。また、車両が被牽引車を牽引している場合、被牽引車には車両と異なるナンバープレートが付されている。このため、牽引車および被牽引車からなる連結車両については、連結車両の前方側ナンバープレート（すなわち、牽引車のナンバープレート）と、後方側ナンバープレート（すなわち、被牽引車のナンバープレート）とでは、認識結果が異なってしまう。このように、車両の前後のナンバープレートの認識結果が異なる場合、認識装置は何れか一方の認識結果を採用しなければならない。したがって、車両の前後のナンバープレートの両方を認識する場合には、車両の車種判別または個体識別を正しく行えるように、いずれかの認識結果を採用するかを適切に判断することが求められている。

本開示は、このような課題に鑑みてなされたものであって、車両の前後のナンバープレートの認識結果が異なる場合に、より適切な認識結果を車両のナンバープレート情報として特定することができるナンバープレート認識装置、ナンバープレート認識方法、およびプログラムを提供する。

本開示の一態様によれば、ナンバープレート認識装置は、車線を走行する車両を前撮カメラで撮影した第１画像、および、当該車両を後撮カメラで撮影した第２画像を取得する画像取得部と、前記第１画像に対する画像認識処理により前記車両の前方側ナンバープレートの情報を示す第１ナンバープレート情報を読み取り、前記第２画像に対する画像認識処理により前記車両の後方側ナンバープレートの情報を示す第２ナンバープレート情報を読み取る情報読取部と、前記第１ナンバープレート情報と前記第２ナンバープレート情報とが異なっている場合に、前記画像認識処理における評価値が高いナンバープレート情報を前記車両のナンバープレート情報として特定する特定部と、を備える。

本開示の一態様によれば、ナンバープレート認識方法は、車線を走行する車両を前撮カメラで撮影した第１画像、および、当該車両を後撮カメラで撮影した第２画像を取得するステップと、前記第１画像に対する画像認識処理により前記車両の前方側ナンバープレートの情報を示す第１ナンバープレート情報を読み取り、前記第２画像に対する画像認識処理により前記車両の後方側ナンバープレートの情報を示す第２ナンバープレート情報を読み取るステップと、前記第１ナンバープレート情報と前記第２ナンバープレート情報とが異なっている場合に、前記画像認識処理における評価値が高いナンバープレート情報を前記車両のナンバープレート情報として特定するステップと、を有する。

本開示の一態様によれば、プログラムは、車線を走行する車両を前撮カメラで撮影した第１画像、および、当該車両を後撮カメラで撮影した第２画像を取得するステップと、前記第１画像に対する画像認識処理により前記車両の前方側ナンバープレートの情報を示す第１ナンバープレート情報を読み取り、前記第２画像に対する画像認識処理により前記車両の後方側ナンバープレートの情報を示す第２ナンバープレート情報を読み取るステップと、前記第１ナンバープレート情報と前記第２ナンバープレート情報とが異なっている場合に、前記画像認識処理における評価値が高いナンバープレート情報を前記車両のナンバープレート情報として特定するステップと、をナンバープレート認識装置のコンピュータに実行させる。

本開示に係るナンバープレート認識装置、ナンバープレート認識方法、およびプログラムによれば、前後のナンバープレートの読み取り結果が異なる場合に、より適切な認識結果を車両のナンバープレート情報として特定することができる。

本開示の第１の実施形態に係るナンバープレート認識システムの全体構成を示す図である。 本開示の第１の実施形態に係るナンバープレート認識装置の機能構成を示す図である。 本開示の第１の実施形態に係るナンバープレート認識装置の処理の一例を示す図である。 本開示の第２の実施形態に係るナンバープレート認識装置の処理の一例を示す図である。 本開示の一実施形態に係るナンバープレート認識装置のハードウェア構成の一例を示す図である。

＜第１の実施形態＞
以下、本開示の第１の実施形態に係るナンバープレート認識システム１について、図１～図３を参照しながら説明する。

（全体構成）
図１は、本開示の第１の実施形態に係るナンバープレート認識システムの全体構成を示す図である。
ナンバープレート認識システム１は、有料道路の入口または出口の料金所、違反取締地点等において、車線Ｌを走行する車両Ａのナンバープレート情報を特定する。ナンバープレート情報には、プレートサイズ（大板、中板、小板）、分類番号、一連番号等が含まれる。特定された車両Ａのナンバープレート情報は、たとえば車種判別装置（不図示）により、車両Ａの車種を判別する処理に用いられる。また、ナンバープレート情報は、違反取締装置（不図示）により、車両Ａを個々に識別する処理に用いられてもよい。

本実施形態では、ナンバープレート認識システム１が出口料金所に設けられている態様を例として説明する。以下、車線Ｌの延びる方向（±Ｘ方向）を「車線方向」と記載する。また、車線方向の有料道路側（－Ｘ側）を「上流側」、一般道路側（＋Ｘ側）を「下流側」とも記載する。更に、車線Ｌの幅方向（±Ｙ方向）を「車線幅方向」と記載する。

ナンバープレート認識システム１は、図１に示すように、車両検知器２と、車軸検知器３と、ナンバープレート認識装置１０とを備えている。

車両検知器２は、車線方向の所定位置である車両検知位置Ｘ１の路側に設置され、車両Ａの進入及び通過を検出する。車両検知器２は、たとえば図１に示すような透過型の車両検知器であり、車線Ｌを挟んで対向設置される投光器及び受光器の対を有している。車両検知器２は、投光器から投光された光を受光器が受光したか否かに基づいて、車両検知位置Ｘ１における車両の存在の有無を区別可能な車両検知信号を出力する。車両検知器２は、受光器が光を受光している間は、車両検知位置Ｘ１に車両が存在していないことを示す車両検知信号（ＯＦＦ）を出力する。一方、車両検知器２は、受光器が光を受光していない間は、車両検知位置Ｘ１に車両が存在することを示す車両検知信号（ＯＮ）を出力する。

図１の例では、ある時間ｔ１において車両Ａの先端が車両検知位置Ｘ１に進入すると、車両検知器２は「ＯＮ（車両が存在）」を示す車両検知信号を出力する。また、時間ｔ２において車両Ａの後端が車両検知位置Ｘ１を通過すると、車両検知器２は「ＯＦＦ（車両が非存在）」を示す車両検知信号を出力する。

車軸検知器３は、車両Ａの車軸数を検出する。本実施形態に係る車軸検知器３は、図１に示すように、車両検知位置Ｘ１において、車線Ｌの路面に埋設された踏板である。車軸検知器３は、車両検知器２が車両Ａの存在を検出している期間（図１の時間ｔ１～ｔ２）、当該車両Ａのタイヤによる踏み付けを検出して、車両Ａの車軸数を検出可能な車軸検知信号を出力する。

なお、他の実施形態では、車軸検知器３は、車線Ｌの路側に設置されたカメラまたはレーザスキャナであってもよい。この場合、車軸検知器３は、カメラにより撮影された画像に画像処理を行うことにより、または、レーザスキャナのスキャン結果から車両Ａのタイヤを検出して、車両Ａのタイヤの数（車軸数）を計測する。

ナンバープレート認識装置１０は、前撮カメラ１１と、後撮カメラ１２とを備えている。ナンバープレート認識装置１０は、前撮カメラ１１により撮影された画像（第１画像）から、車両Ａの前方側ナンバープレートＮＰ１の情報を示す第１ナンバープレート情報を読み取る。また、ナンバープレート認識装置１０は、後撮カメラ１２により撮影された画像（第２画像）から、車両Ａの後方側ナンバープレートＮＰ２の情報を示す第２ナンバープレート情報を読み取る。

前撮カメラ１１は、車両検知位置Ｘ１よりも車線方向の下流側（＋Ｘ側）のガントリＧ１上において、車線方向の上流側（－Ｘ側）を向くように設置される。前撮カメラ１１は、車両検知器２により車両Ａが車両検知位置Ｘ１に進入したことが検出されたタイミング（たとえば、図１の時間ｔ１において車両検知信号が「ＯＦＦ」から「ＯＮ」に切り替わったタイミング）で、車両Ａの前方側ナンバープレートＮＰ１を撮影する。

後撮カメラ１２は、車両検知位置Ｘ１よりも車線方向の上流側（－Ｘ側）のガントリＧ２上において、車線方向の下流側（＋Ｘ側）を向くように設置される。後撮カメラ１２は、車両検知器２により車両Ａが車両検知位置Ｘ１を通過したことが検出されたタイミング（たとえば、図１の時間ｔ２において車両検知信号が「ＯＮ」から「ＯＦＦ」に切り替わったタイミング）で、車両Ａの後方側ナンバープレートＮＰ２を撮影する。

なお、他の実施形態では、前撮カメラ１１および後撮カメラ１２は、車線Ｌの路側に設置されてもよい。

（機能構成）
図２は、本開示の第１の実施形態に係るナンバープレート認識装置の機能構成を示す図である。
図２に示すように、ナンバープレート認識装置１０は、前述の前撮カメラ１１および後撮カメラ１２に加え、ＣＰＵ１３と、インタフェース１４と、記憶媒体１５とをさらに備えている。

ＣＰＵ１３は、ナンバープレート認識装置１０の動作全体を司るプロセッサである。ＣＰＵ１３は、所定のプログラムに従って動作することにより、画像取得部１３０、情報読取部１３１、車軸数取得部１３２、特定部１３３としての機能を発揮する。

画像取得部１３０は、車線Ｌを走行する車両Ａを前撮カメラ１１で撮影した第１画像、および、当該車両Ａを後撮カメラ１２で撮影した第２画像を取得する。

情報読取部１３１は、第１画像に対する画像認識処理により第１ナンバープレート情報を読み取り、第２画像に対する画像認識処理により第２ナンバープレート情報を読み取る。

車軸数取得部１３２は、車軸検知器３の車軸検知信号に基づいて車両Ａの車軸数を取得する。

特定部１３３は、第１ナンバープレート情報と第２ナンバープレート情報とが異なっている場合に、情報読取部１３１による画像認識処理における評価値が高いナンバープレート情報を、車両Ａのナンバープレート情報として特定する。

また、特定部１３３は、車軸数取得部１３２が取得した車両Ａの車軸数に基づいて、車両Ａが単独車両（被牽引車を牽引していない車両）であると特定できない場合には、車両Ａが連結車両（牽引車および被牽引車からなる車両）である可能性があると判断する。連結車両については牽引車側のナンバープレート情報を、正規のナンバープレート情報（車種判別処理、個体識別処理等に用いる情報）として採用している。このため、特定部１３３は、牽引車のナンバープレート情報、すなわち、車両Ａの前方側ナンバープレートＮＰ１の情報である第１ナンバープレート情報を、車両Ａのナンバープレート情報として特定する。

インタフェース１４は、外部機器である車両検知器２、車軸検知器３等との接続インタフェースである。ナンバープレート認識装置１０は、インタフェース１４を介して、車両検知器２および車軸検知器３から検知信号を受信する。

記憶媒体１５は、ナンバープレート認識装置１０の各部の処理で用いられるデータ、取得、生成したデータ等を記憶する。

（処理フロー）
図３は、本開示の第１の実施形態に係るナンバープレート認識装置の処理の一例を示す図である。
以下、図３を参照しながら、ナンバープレート認識装置１０による車両Ａのナンバープレート認識処理の流れについて説明する。

まず、前撮カメラ１１は、車両検知器２の車両検知信号に基づいて、車両Ａが車両検知位置Ｘ１に進入したタイミングで、車両Ａを撮影する。画像取得部１３０は、前撮カメラ１１が撮影した第１画像を取得する（ステップＳ１００）。

次に、情報読取部１３１は、前撮カメラ１１が撮影した第１画像に所定の画像認識処理を行い、車両Ａの前方側ナンバープレートＮＰ１の情報を示す第１ナンバープレート情報を読み取る（ステップＳ１０１）。

本実施形態に係る情報読取部１３１は、たとえばテンプレートマッチングの技術を利用して第１ナンバープレート情報を読み取る。記憶媒体１５には、予めナンバープレートに用いられる文字または文字列に関する複数のテンプレートが記憶されている。テンプレートは、ナンバープレートの分類番号、一連番号等に用いられる文字の画像である。また、テンプレートは、ナンバープレートの地名を表す文字列（「神戸」等）の画像であってもよい。情報読取部１３１は、第１画像と複数のテンプレートそれぞれとを対比して、第１画像の前方側ナンバープレートＮＰ１の文字または文字列に対応する各領域について、テンプレートの類似度を計算する。情報読取部１３１は、各領域について最も類似度（スコア）の高いテンプレートから文字または文字列を特定することにより、分類番号、一連番号等を読み取る。なお、他の実施形態では、情報読取部１３１は、機械学習（深層学習を含む）の技術を利用してナンバープレート上の情報を読み取るようにしてもよい。

また、情報読取部１３１は、特定された文字または文字列それぞれのスコアを合計した評価値を求める。情報読取部１３１は、読み取った分類番号等を含む第１ナンバープレート情報と、評価値とを特定部１３３に出力する。

また、後撮カメラ１２は、車両検知器２の車両検知信号に基づいて、車両Ａが車両検知位置Ｘ１を通過したタイミングで、車両Ａを撮影する。画像取得部１３０は、後撮カメラ１２が撮影した第２画像を取得する（ステップＳ１０２）。

次に、情報読取部１３１は、後撮カメラ１２が撮影した第２画像に所定の画像認識処理を行い、車両Ａの後方側ナンバープレートＮＰ２の情報を示す第２ナンバープレート情報を読み取る（ステップＳ１０３）。当該処理は、ステップＳ１０１の処理と同様である。情報読取部１３１は、第２画像から読み取った分類番号等を含む第２ナンバープレート情報と、評価値とを特定部１３３に出力する。

次に、特定部１３３は、前方側ナンバープレートＮＰ１および後方側ナンバープレートＮＰ２の認識結果が同じであるか判断する（ステップＳ１０４）。

第１ナンバープレート情報と、第２ナンバープレート情報とが一致する（認識結果が同じ）場合（ステップＳ１０４：ＹＥＳ）、特定部１３３は、ナンバープレート認識処理を終了する。

一方、第１ナンバープレート情報と、第２ナンバープレート情報とが一致しない（認識結果が異なる）場合、特定部１３３は車両Ａのナンバープレート情報として、第１ナンバープレート情報および第２ナンバープレート情報のいずれを採用するか決定する処理を更に行う。

具体的には、まず、車軸数取得部１３２は、車軸検知器３から受信した車軸検知信号に基づいて、車両Ａの車軸数を取得する。そして、特定部１３３は、車軸数取得部１３２により取得された車軸数に基づいて、車両Ａが単独車両であるか判断する（ステップＳ１０５）。

車軸数が「２」のとき、車両Ａは必ず単独車両である。単独車両である車両Ａの前後には同一のナンバープレートが付されるので、第１ナンバープレート情報および第２ナンバープレートのいずれかが誤認識の可能性がある。このため、特定部１３３は、第１ナンバープレート情報の評価値と、第２ナンバープレート情報の評価値とを比較して、評価値が高いナンバープレート情報を採用する（ステップＳ１０６）。

たとえば、車両Ａの後方側ナンバープレートＮＰ２に汚れが付着しており、第２ナンバープレート情報の認識率（評価値）が低下していたとする。この結果、第１ナンバープレート情報の評価値は、第２ナンバープレートの評価値よりも高くなったとする。この場合、特定部１３３は、評価値の高い第１ナンバープレート情報を車両Ａのナンバープレート情報として採用する。

また、車軸数が「２」のとき、車両Ａは二輪車であり、後方側ナンバープレートＮＰ２のみを有している場合がある。この場合、情報読取部１３１は、第１ナンバープレート情報を読み取ることができないため、第１ナンバープレート情報の評価値をなし（または最低値）に設定する。そうすると、第１ナンバープレート情報に対し、第２ナンバープレート情報の評価値の方が高くなるので、特定部１３３は、第２ナンバープレート情報を車両Ａのナンバープレート情報として採用する。

一方、車軸数が「２」以外である場合、車両Ａは連結車両の可能性がある。上記したように、連結車両については、牽引車側のナンバープレート情報を正規のナンバープレート情報として採用している。したがって、特定部１３３は、車軸数が「２」ではない場合（ステップＳ１０５：ＮＯ）、牽引車側のナンバープレート情報に相当する第１ナンバープレート情報を、車両Ａのナンバープレート情報として採用する（ステップＳ１０７）。

なお、特定部１３３により特定されたナンバープレート情報は、車種判別装置、違反取締装置等の外部機器に出力され、外部機器における各種処理に用いられる。

ナンバープレート認識装置１０は、車両Ａが車両検知位置Ｘ１に進入する度に、図３の一連の処理を繰り返し実行する。

（作用効果）
以上のように、本実施形態に係るナンバープレート認識装置１０では、情報読取部１３１は、前撮カメラ１１が撮影した第１画像から画像認識処理により第１ナンバープレート情報を読み取り、後撮カメラ１２が撮影した第２画像から画像認識処理により第２ナンバープレート情報を読み取る。特定部１３３は、第１ナンバープレート情報と第２ナンバープレート情報とが異なっている場合に、これらのうち評価値が高い方を車両Ａのナンバープレート情報として特定する。

たとえば、車両Ａの車体の凹凸等によりナンバープレートが隠れてしまった場合、ナンバープレート上に汚れが付着していた場合には、ナンバープレート情報が正しく読み取れない場合がある。しかしながら、本実施形態に係るナンバープレート認識装置１０は、車両Ａの前後のナンバープレートの認識結果が異なる場合に、二つの認識結果のうち画像認識処理の評価値の高い方を適切に採用することができる。

また、ナンバープレート認識装置１０において、車軸数取得部１３２は、車軸検知器３の検知信号に基づいて車両Ａの車軸数を取得する。特定部１３３は、第１ナンバープレート情報と第２ナンバープレート情報とが異なっている場合、且つ、車両Ａの車軸数に基づいて前記車両が被牽引車を牽引していない単独車両であると特定できない場合には、第１ナンバープレート情報を車両Ａのナンバープレート情報として特定する。

このようにすることで、ナンバープレート認識装置１０は、車軸数から判断して車両Ａが連結車両の可能性がある場合は、第１ナンバープレート情報を採用することにより、牽引車側のナンバープレート情報を適切に特定できる。

また、ナンバープレート認識装置１０において、情報読取部１３１は、前方側ナンバープレートＮＰ１および後方側ナンバープレートＮＰ２それぞれから読み取った文字または各文字列のスコアを合計して、第１ナンバープレート情報および第２ナンバープレート情報の評価値を求める。

このようにすることで、ナンバープレート認識装置１０は、第１ナンバープレート情報および第２ナンバープレート情報それぞれに含まれる文字または文字列のスコアから、これら二つの認識結果の確からしさを表す評価値を求めることができる。これにより、ナンバープレート認識装置１０は、第１ナンバープレート情報および第２ナンバープレート情報のうち、評価値、すなわち、認識精度の高い方を採用することが容易となる。

なお、本実施形態では、情報読取部１３１が文字または文字列それぞれのスコアを合計した値を評価値とする例について説明したが、これに限られることはない。他の実施形態では、情報読取部１３１は、文字または文字列それぞれのスコアをそのまま評価値として、特定部１３３に出力してもよい。この場合、特定部１３３は、車両Ａが単独車両であると特定できる場合（ステップＳ１０５：ＹＥＳ）、すなわち、車両Ａの前方側ナンバープレートＮＰ１と後方側ナンバープレートＮＰ２の内容が同一であることが確定している場合に、第１ナンバープレート情報および第２ナンバープレート情報の対応する文字または文字列同士を比較して、スコアが高い方の文字または文字列を採用してつなぎ合わせた情報を、車両Ａのナンバープレート情報を特定するようにしてもよい。たとえば、特定部１３３は、第１ナンバープレート情報の１文字目の方が、第２ナンバープレート情報の１文字目よりもスコアが高い場合、第１ナンバープレート情報の１文字目を採用する。また、特定部１３３は、第２ナンバープレート情報の２文字目の方が、第１ナンバープレート情報の２文字目よりもスコアが高い場合、第２ナンバープレート情報の２文字目を採用する。特定部は、以降の文字（または文字列）についても同様にどちらの文字を採用するか判断して、車両Ａのナンバープレート情報を特定する。これにより、特定部１３３は、単独車両である車両Ａのナンバープレート情報の認識精度を向上させることができる。

＜第２の実施形態＞
次に、本開示の第２の実施形態に係るナンバープレート認識システム１について説明する。
第１の実施形態と共通の構成要素には同一の符号を付して詳細説明を省略する。第１の実施形態に係るナンバープレート認識装置１０は、車両Ａの第１ナンバープレート情報と第２ナンバープレート情報とが異なっている場合に、車両Ａの車軸数が「２」であるか否かに基づいていずれのナンバープレート情報を採用するか判断していた。これに対し、本実施形態に係るナンバープレート認識装置１０は、車両Ａの車軸数に代えて、車両Ａのナンバープレートに表示された分類番号に基づいて判断する。

（処理フロー）
図４は、本開示の第２の実施形態に係るナンバープレート認識装置の処理の一例を示す図である。
以下、図４を参照しながら、ナンバープレート認識装置１０による車両Ａのナンバープレート認識処理の流れについて説明する。なお、ここでは、主に第１の実施形態との相違点について説明する。

本実施形態において、ステップＳ２００～Ｓ２０４の処理は、それぞれ第１の実施形態（図３）のＳ１００～Ｓ１０４と同じである。

特定部１３３は、第１ナンバープレート情報と第２ナンバープレート情報とが一致しない場合（ステップＳ２０４：ＮＯ）、第１ナンバープレート情報および第２ナンバープレート情報の少なくとも一方に、連結車両の可能性が高いことを示す情報が含まれているか否かをさらに判断する（ステップＳ２０５）。

連結車両の可能性が高いことを示す情報として、たとえば、ナンバープレートのプレートサイズおよび分類番号が用いられる。第１ナンバープレート情報および第２ナンバープレート情報のプレートサイズおよび分類番号の先頭番号が「大板」および「１」の場合、車両Ａは大型トレーラー等である。また、第１ナンバープレート情報のプレートサイズおよび分類番号の先頭番号が「大板」および「１」であり、第２ナンバープレート情報のプレートサイズおよび分類番号の先頭番号が「大板」および「８」である場合、車両Ａはタンクローリー等である。このようなナンバープレート情報を有する車両Ａは、他の車両と比較して、被牽引車を牽引する連結車両である可能性が高い。このため、本実施形態に係る特定部１３３は、このように、プレートサイズおよび分類番号の組み合わせが所定の組み合わせであった場合に、連結車両である可能性が高い車両であると判断する。上記したように、連結車両については、牽引車側のナンバープレート情報を正規のナンバープレート情報として採用している。したがって、特定部１３３は、プレートサイズおよび分類番号の組み合わせが上記した例のいずれかである場合、連結車両である可能性が高いと判断し（ステップＳ２０５：ＹＥＳ）、牽引車側のナンバープレート情報に相当する第１ナンバープレート情報を、車両Ａのナンバープレート情報として採用する（ステップＳ２０６）。

一方、分類番号の先頭数字が「１」ではない場合（ステップＳ２０５：ＮＯ）、特定部１３３は、第１ナンバープレート情報と第２ナンバープレート情報とのうち何れか評価値が高い方を採用する（ステップＳ２０７）。

ナンバープレート認識装置１０は、車両Ａが車線Ｌに進入する度に、図４の一連の処理を繰り返し実行する。

（作用効果）
以上のように、本実施形態に係るナンバープレート認識装置１０において、特定部１３３は、第１ナンバープレート情報と第２ナンバープレート情報とが異なっている場合、且つ、第１ナンバープレート情報および第２ナンバープレート情報の少なくとも一方の分類番号が「１」である場合には、第１ナンバープレート情報を車両Ａのナンバープレート情報として特定する。

このようにすることで、ナンバープレート認識装置１０は、分類番号から判断して車両Ａが連結車両の可能性がある場合は、第１ナンバープレート情報を採用することにより、牽引車側のナンバープレート情報を適切に特定できる。

＜ハードウェア構成＞
図５は、本開示の一実施形態に係るナンバープレート認識装置のハードウェア構成の一例を示す図である。
図５に示すように、コンピュータ９００は、ＣＰＵ９０１（ＣＰＵ１３）、主記憶装置９０２、補助記憶装置９０３（記憶媒体１５）、インタフェース９０４（インタフェース１４）を備える。

上述の各実施形態に係るナンバープレート認識装置１０は、コンピュータ９００に実装される。そして、上述した各処理部の動作は、プログラムの形式で補助記憶装置９０３に記憶されている。ＣＰＵ９０１は、プログラムを補助記憶装置９０３から読み出して主記憶装置９０２に展開し、当該プログラムに従って上記処理を実行する。また、ＣＰＵ９０１は、プログラムに従って、上述した各記憶部に対応する記憶領域を主記憶装置９０２に確保する。

プログラムは、コンピュータ９００に発揮させる機能の一部を実現するためのものであってもよい。たとえば、プログラムは、補助記憶装置９０３に既に記憶されている他のプログラムとの組み合わせ、または他の装置に実装された他のプログラムとの組み合わせによって機能を発揮させるものであってもよい。なお、他の実施形態においては、コンピュータ９００は、上記構成に加えて、または上記構成に代えてＰＬＤ（Programmable Logic Device）などのカスタムＬＳＩ（Large Scale Integrated Circuit）を備えてもよい。ＰＬＤの例としては、ＰＡＬ(Programmable Array Logic)、ＧＡＬ(Generic Array Logic)、ＣＰＬＤ(Complex Programmable Logic Device)、ＦＰＧＡ（Field Programmable Gate Array）が挙げられる。この場合、ＣＰＵ９０１によって実現される機能の一部または全部が当該集積回路によって実現されてよい。

補助記憶装置９０３の例としては、磁気ディスク、光磁気ディスク、光ディスク、半導体メモリ等が挙げられる。補助記憶装置９０３は、コンピュータ９００のバスに直接接続された内部メディアであってもよいし、インタフェース９０４または通信回線を介してコンピュータ９００に接続される外部記憶装置９１０であってもよい。また、このプログラムが通信回線によってコンピュータ９００に配信される場合、配信を受けたコンピュータ９００が当該プログラムを主記憶装置９０２に展開し、上記処理を実行してもよい。少なくとも１つの実施形態において、補助記憶装置９０３は、一時的でない有形の記憶媒体である。

また、当該プログラムは、前述した機能の一部を実現するためのものであってもよい。
さらに、当該プログラムは、前述した機能を補助記憶装置９０３に既に記憶されている他のプログラムとの組み合わせで実現するもの、いわゆる差分ファイル（差分プログラム）であってもよい。

以上のとおり、本発明に係るいくつかの実施形態を説明したが、これら全ての実施形態は、例として提示したものであり、発明の範囲を限定することを意図していない。これらの実施形態は、その他の様々な形態で実施されることが可能であり、発明の要旨を逸脱しない範囲で種々の省略、置き換え、変更を行うことができる。これらの実施形態及びその変形例は、発明の要旨および技術的範囲に含まれる。

＜付記＞
上述の実施形態に記載のナンバープレート認識装置、ナンバープレート認識方法、およびプログラムは、例えば以下のように把握される。

本開示の第１の態様によれば、ナンバープレート認識装置（１０）は、車線を走行する車両を前撮カメラ（１１）で撮影した第１画像、および、当該車両を後撮カメラ（１２）で撮影した第２画像を取得する画像取得部（１３０）と、前記第１画像に対する画像認識処理により前記車両の前方側ナンバープレートの情報を示す第１ナンバープレート情報を読み取り、前記第２画像に対する画像認識処理により前記車両の後方側ナンバープレートの情報を示す第２ナンバープレート情報を読み取る情報読取部（１３１）と、前記第１ナンバープレート情報と前記第２ナンバープレート情報とが異なっている場合に、前記画像認識処理における評価値が高いナンバープレート情報を前記車両のナンバープレート情報として特定する特定部（１３３）と、を備える。

このようにすることで、ナンバープレート認識装置は、車両の前後のナンバープレートの認識結果が異なる場合に、二つの認識結果のうち画像認識処理の評価値の高い方、すなわち、読取精度の高い方を採用することにより、より正確に車両のナンバープレート情報を特定することができる。

本開示の第２の態様によれば、第１の態様に係るナンバープレート認識装置（１０）は、車軸検知器（３）の検知信号に基づいて前記車両の車軸数を取得する車軸数取得部（１３２）をさらに備え、前記特定部（１３３）は、前記第１ナンバープレート情報と前記第２ナンバープレート情報とが異なっている場合、且つ、前記車軸数に基づいて前記車両が被牽引車を牽引していない単独車両であると特定できない場合には、前記第１ナンバープレート情報を前記車両のナンバープレート情報として特定する。

このようにすることで、ナンバープレート認識装置は、車軸数から判断して車両が連結車両の可能性がある場合は、第１ナンバープレート情報を採用することにより、牽引車側のナンバープレート情報を適切に特定できる。

本開示の第３の態様によれば、第１の態様に係るナンバープレート認識装置（１０）において、前記特定部（１３３）は、前記第１ナンバープレート情報と前記第２ナンバープレート情報とが異なっている場合、且つ、前記第１ナンバープレート情報および前記第２ナンバープレート情報の少なくとも一方に、前記車両が被牽引車を牽引する連結車両である可能性が高いことを示す情報が含まれている場合には、前記第１ナンバープレート情報を前記車両のナンバープレート情報として特定する。

このようにすることで、ナンバープレート認識装置は、分類番号から判断して車両が連結車両の可能性がある場合は、第１ナンバープレート情報を採用することにより、牽引車側のナンバープレート情報を適切に特定できる。

本開示の第４の態様によれば、第１から第３の何れか一の態様に係るナンバープレート認識装置（１０）において、前記情報読取部（１３１）は、ナンバープレートに用いられる文字又は文字列に関する複数のテンプレートを用いたテンプレートマッチングを行うことにより、前記前方側ナンバープレートおよび前記後方側ナンバープレートに表示された複数の文字または文字列を認識するとともに、認識した文字または文字列それぞれと前記テンプレートとの類似度を合計して、前記第１ナンバープレート情報および前記第２ナンバープレート情報それぞれの前記評価値を求める。

このようにすることで、ナンバープレート認識装置は、第１ナンバープレート情報および第２ナンバープレート情報それぞれに含まれる文字または文字列の類似度から、これら二つの認識結果の確からしさを表す評価値を求めることができる。これにより、ナンバープレート認識装置は、第１ナンバープレート情報および第２ナンバープレート情報のうち、評価値、すなわち、認識精度の高い方を採用することが容易となる。

本開示の第５の態様によれば、第１から第３の何れか一の態様に係るナンバープレート認識装置（１０）において、前記情報読取部（１３１）は、前記前方側ナンバープレートおよび前記後方側ナンバープレートから読み取った複数の文字または文字列それぞれのスコアを前記評価値として求め、前記特定部（１３３）は、前記車両が被牽引車を牽引していない単独車両であると特定できた場合に、第１ナンバープレート情報および第２ナンバープレート情報の対応する文字または文字列同士のスコアを比較し、スコアが高い方の文字または文字列を採用してつなぎ合わせた情報を前記車両のナンバープレート情報として特定する。

これにより、ナンバープレート認識装置は、単独車両である車両のナンバープレート情報の認識精度を向上させることができる。

本開示の第５の態様によれば、ナンバープレート認識方法は、車線を走行する車両を前撮カメラで撮影した第１画像、および、当該車両を後撮カメラで撮影した第２画像を取得するステップと、前記第１画像に対する画像認識処理により前記車両の前方側ナンバープレートの情報を示す第１ナンバープレート情報を読み取り、前記第２画像に対する画像認識処理により前記車両の後方側ナンバープレートの情報を示す第２ナンバープレート情報を読み取るステップと、前記第１ナンバープレート情報と前記第２ナンバープレート情報とが異なっている場合に、前記画像認識処理における評価値が高いナンバープレート情報を前記車両のナンバープレート情報として特定するステップと、を有する。

本開示の第６の態様によれば、プログラムは、車線を走行する車両を前撮カメラで撮影した第１画像、および、当該車両を後撮カメラで撮影した第２画像を取得するステップと、前記第１画像に対する画像認識処理により前記車両の前方側ナンバープレートの情報を示す第１ナンバープレート情報を読み取り、前記第２画像に対する画像認識処理により前記車両の後方側ナンバープレートの情報を示す第２ナンバープレート情報を読み取るステップと、前記第１ナンバープレート情報と前記第２ナンバープレート情報とが異なっている場合に、前記画像認識処理における評価値が高いナンバープレート情報を前記車両のナンバープレート情報として特定するステップと、をナンバープレート認識装置のコンピュータに実行させる。

１ ナンバープレート認識システム
２ 車両検知器
３ 車軸検知器
１０ ナンバープレート認識装置
１１ 前撮カメラ
１２ 後撮カメラ
１３ ＣＰＵ
１３０ 画像取得部
１３１ 情報読取部
１３２ 車軸数取得部
１３３ 特定部
１４ インタフェース
１５ 記憶媒体
９００ コンピュータ
９０１ ＣＰＵ
９０２ 主記憶装置
９０３ 補助記憶装置
９０４ インタフェース
９１０ 外部記憶装置

Claims (6)

1. 車線を走行する車両を前撮カメラで撮影した第１画像、および、当該車両を後撮カメラで撮影した第２画像を取得する画像取得部と、
   前記第１画像に対する画像認識処理により前記車両の前方側ナンバープレートの情報を示す第１ナンバープレート情報を読み取り、前記第２画像に対する画像認識処理により前記車両の後方側ナンバープレートの情報を示す第２ナンバープレート情報を読み取る情報読取部と、
   前記第１ナンバープレート情報と前記第２ナンバープレート情報とが異なっている場合に、前記画像認識処理における評価値が高いナンバープレート情報を前記車両のナンバープレート情報として特定する特定部と、
   車軸検知器の検知信号に基づいて前記車両の車軸数を取得する車軸数取得部と、
   を備え、
   前記特定部は、前記第１ナンバープレート情報と前記第２ナンバープレート情報とが異なっている場合、且つ、前記車軸数に基づいて前記車両が被牽引車を牽引していない単独車両であると特定できない場合には、前記第１ナンバープレート情報を前記車両のナンバープレート情報として特定する、
   ナンバープレート認識装置。
2. 車線を走行する車両を前撮カメラで撮影した第１画像、および、当該車両を後撮カメラで撮影した第２画像を取得する画像取得部と、
   前記第１画像に対する画像認識処理により前記車両の前方側ナンバープレートの情報を示す第１ナンバープレート情報を読み取り、前記第２画像に対する画像認識処理により前記車両の後方側ナンバープレートの情報を示す第２ナンバープレート情報を読み取る情報読取部と、
   前記第１ナンバープレート情報と前記第２ナンバープレート情報とが異なっている場合に、前記画像認識処理における評価値が高いナンバープレート情報を前記車両のナンバープレート情報として特定する特定部と、
   を備え、
   前記特定部は、前記第１ナンバープレート情報と前記第２ナンバープレート情報とが異なっている場合、且つ、前記第１ナンバープレート情報および前記第２ナンバープレート情報の少なくとも一方に、前記車両が被牽引車を牽引する連結車両である可能性が高いことを示す情報が含まれている場合には、前記第１ナンバープレート情報を前記車両のナンバープレート情報として特定する、
   ナンバープレート認識装置。
3. 前記情報読取部は、前記前方側ナンバープレートおよび前記後方側ナンバープレートから読み取った複数の文字または文字列それぞれのスコアを合計して、前記第１ナンバープレート情報および前記第２ナンバープレート情報それぞれの前記評価値を求める、
   請求項１又は２に記載のナンバープレート認識装置。
4. 前記情報読取部は、前記前方側ナンバープレートおよび前記後方側ナンバープレートから読み取った複数の文字または文字列それぞれのスコアを前記評価値として求め、
   前記特定部は、前記車両が被牽引車を牽引していない単独車両であると特定できた場合に、第１ナンバープレート情報および第２ナンバープレート情報の対応する文字または文字列同士のスコアを比較し、スコアが高い方の文字または文字列を採用してつなぎ合わせた情報を前記車両のナンバープレート情報として特定する、
   請求項１又は２に記載のナンバープレート認識装置。
5. 車線を走行する車両を前撮カメラで撮影した第１画像、および、当該車両を後撮カメラで撮影した第２画像を取得するステップと、
   前記第１画像に対する画像認識処理により前記車両の前方側ナンバープレートの情報を示す第１ナンバープレート情報を読み取り、前記第２画像に対する画像認識処理により前記車両の後方側ナンバープレートの情報を示す第２ナンバープレート情報を読み取るステップと、
   前記第１ナンバープレート情報と前記第２ナンバープレート情報とが異なっている場合に、前記画像認識処理における評価値が高いナンバープレート情報を前記車両のナンバープレート情報として特定するステップと、
   車軸検知器の検知信号に基づいて前記車両の車軸数を取得するステップと、
   を有し、
   前記車両のナンバープレート情報を特定するステップにおいて、前記第１ナンバープレート情報と前記第２ナンバープレート情報とが異なっている場合、且つ、前記車軸数に基づいて前記車両が被牽引車を牽引していない単独車両であると特定できない場合には、前記第１ナンバープレート情報を前記車両のナンバープレート情報として特定する、
   ナンバープレート認識方法。
6. 車線を走行する車両を前撮カメラで撮影した第１画像、および、当該車両を後撮カメラで撮影した第２画像を取得するステップと、
   前記第１画像に対する画像認識処理により前記車両の前方側ナンバープレートの情報を示す第１ナンバープレート情報を読み取り、前記第２画像に対する画像認識処理により前記車両の後方側ナンバープレートの情報を示す第２ナンバープレート情報を読み取るステップと、
   前記第１ナンバープレート情報と前記第２ナンバープレート情報とが異なっている場合に、前記画像認識処理における評価値が高いナンバープレート情報を前記車両のナンバープレート情報として特定するステップと、
   車軸検知器の検知信号に基づいて前記車両の車軸数を取得するステップと、
   をナンバープレート認識装置のコンピュータに実行させるプログラムであって、
   前記車両のナンバープレート情報を特定するステップにおいて、前記第１ナンバープレート情報と前記第２ナンバープレート情報とが異なっている場合、且つ、前記車軸数に基づいて前記車両が被牽引車を牽引していない単独車両であると特定できない場合には、前記第１ナンバープレート情報を前記車両のナンバープレート情報として特定する、
   プログラム。

Images