JP2013182550A - Vehicle detection device, vehicle detection method and vehicle detection program - Google Patents

Vehicle detection device, vehicle detection method and vehicle detection program Download PDF

Info

Publication number
JP2013182550A
JP2013182550A JP2012047647A JP2012047647A JP2013182550A JP 2013182550 A JP2013182550 A JP 2013182550A JP 2012047647 A JP2012047647 A JP 2012047647A JP 2012047647 A JP2012047647 A JP 2012047647A JP 2013182550 A JP2013182550 A JP 2013182550A
Authority
JP
Japan
Prior art keywords
vehicle
unit
image
imaging
imaging unit
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2012047647A
Other languages
Japanese (ja)
Inventor
Yasuo Ogiuchi
康雄 荻内
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sumitomo Electric Industries Ltd
Original Assignee
Sumitomo Electric Industries Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sumitomo Electric Industries Ltd filed Critical Sumitomo Electric Industries Ltd
Priority to JP2012047647A priority Critical patent/JP2013182550A/en
Publication of JP2013182550A publication Critical patent/JP2013182550A/en
Pending legal-status Critical Current

Links

Images

Landscapes

  • Image Analysis (AREA)
  • Image Processing (AREA)
  • Closed-Circuit Television Systems (AREA)
  • Traffic Control Systems (AREA)

Abstract

PROBLEM TO BE SOLVED: To provide a vehicle detection device, a vehicle detection method and a vehicle detection program, which can acquire a detailed image of a vehicle without providing a high-performance imaging unit.SOLUTION: A vehicle detection device 100a includes: a detection unit 21 for detecting a vehicle area included in an image captured by a first imaging unit 1; an adjustment unit 22 for adjusting a second imaging unit 2 so that a part or the whole of the vehicle area detected by the detection unit 21 is captured by the second imaging unit 2 capable of adjusting to an angle of view smaller than the first imaging unit 1; and a recording unit 17 for recording the image captured by the second imaging unit 2. The first imaging unit 1 captures a wide area, and the second imaging unit 2 can capture the vehicle included in the image captured by the first imaging unit 1 in the angle of view smaller than the first imaging unit 1.

Description

本発明は、車両検出装置、車両検出方法および車両検出プログラムに関し、特に、撮像画像に含まれる車両を検出する車両検出装置、車両検出方法および車両検出プログラムに関する。   The present invention relates to a vehicle detection device, a vehicle detection method, and a vehicle detection program, and more particularly to a vehicle detection device, a vehicle detection method, and a vehicle detection program that detect a vehicle included in a captured image.

従来、例えば犯罪捜査などにおいて、特定の車両、およびその運転者または同乗者の画像は有力な情報である。このため、道路を走行している複数の車両を撮像し、撮像画像の中から特定の車両を検出して記録する車両検出装置が知られている。   Conventionally, for example in crime investigations, images of a specific vehicle and its driver or passenger are powerful information. For this reason, a vehicle detection apparatus that captures images of a plurality of vehicles traveling on a road, detects a specific vehicle from the captured image, and records the vehicle is known.

また、車両の運転者または同乗者の画像は、車両のフロントガラスの範囲に写っているため、運転者または同乗者の顔を把握するためには撮像画像中におけるフロントガラスの範囲を特定することが必要であり、撮像画像中における車両のフロントガラスの範囲を特定するための装置が知られている。例えば、物体が移動する場所を俯瞰するカメラにより、当該場所を周期的に撮像し、撮像した画像内に走行車両が検出された場合に、その走行車両の画像に表れる、走行車両の進行方向に垂直な走行車両の特徴ラインを検出し、当該特徴ラインを画面上で追跡することにより、当該特徴ラインの高さを算出する。そして、これらの特徴ラインの高さ情報を用いて、フロントガラス上端及び下端となる特徴ライン位置を特定する装置が知られている(特許文献1)。   In addition, since the image of the driver or passenger of the vehicle is reflected in the range of the windshield of the vehicle, in order to grasp the face of the driver or passenger, the range of the windshield in the captured image must be specified. And a device for identifying the range of the windshield of the vehicle in the captured image is known. For example, when a vehicle overlooking the place where an object moves is picked up periodically, and the traveling vehicle is detected in the captured image, the traveling vehicle appears in the traveling direction of the traveling vehicle. The feature line of the vertical traveling vehicle is detected, and the feature line is traced on the screen to calculate the height of the feature line. And the apparatus which identifies the characteristic line position used as the windshield upper end and lower end using the height information of these characteristic lines is known (patent document 1).

特許第4333683号公報Japanese Patent No. 4333683

しかしながら、車両のフロントガラスの範囲において車両の運転者または同乗者が写っている領域は、道路を撮像している画像全体の中の一部に相当する。このため、例えば、当該車両が犯罪車両であって、運転者または同乗者を取り締まるために当該運転者または同乗者の顔を把握しようとしても、運転者または同乗者の顔が写っている部分の解像度が低いことから、当該運転者または同乗者の顔を十分に把握することができないという問題があった。   However, the region in which the vehicle driver or passenger is shown in the range of the windshield of the vehicle corresponds to a part of the entire image capturing the road. For this reason, for example, even if the vehicle is a criminal vehicle and an attempt is made to grasp the driver or passenger's face in order to control the driver or passenger, Since the resolution is low, there is a problem that the driver's or passenger's face cannot be sufficiently grasped.

一方、道路の広い領域を撮像するために広い視野を確保しつつ、運転者または同乗者の顔など車両に関する詳細な画像を取得するためには、極めて高性能な撮像部を設ける必要があり、画像処理の際の負荷が大きくなるという問題があった。   On the other hand, in order to capture a wide field of view to capture a wide area of the road while acquiring a detailed image related to the vehicle such as the driver's or passenger's face, it is necessary to provide an extremely high-performance imaging unit, There has been a problem that the load during image processing increases.

この発明は、上述の課題を解決するためになされたもので、その目的は、高性能な撮像部を設けることなく、車両の詳細な画像を取得することができる車両検出装置、車両検出方法および車両検出プログラムを提供することである。   The present invention has been made to solve the above-described problems, and an object of the present invention is to provide a vehicle detection device, a vehicle detection method, and a vehicle detection device capable of acquiring a detailed image of a vehicle without providing a high-performance imaging unit. It is to provide a vehicle detection program.

(1)上記課題を解決するために、この発明のある局面に係わる車両検出装置は、第1撮像部により撮像された画像に含まれる車両領域を検出するための検出部と、上記検出部により検出された上記車両領域の一部または全部が、上記第1撮像部よりも小さな画角に調整可能な第2撮像部により撮像されるように、上記第2撮像部を調整するための調整部と、上記第2撮像部により撮像された画像を記録するための記録部とを備える。   (1) In order to solve the above problem, a vehicle detection apparatus according to an aspect of the present invention includes a detection unit for detecting a vehicle region included in an image captured by a first imaging unit, and the detection unit. An adjustment unit for adjusting the second imaging unit such that a part or all of the detected vehicle area is imaged by the second imaging unit that can be adjusted to a smaller angle of view than the first imaging unit. And a recording unit for recording the image captured by the second imaging unit.

このような構成により、第1撮像部が広い領域を撮像し、第2撮像部が第1撮像部により撮像された画像に含まれる車両領域の一部または全部を、第1撮像部よりも小さな画角で撮像することができるため、高性能な撮像部を設けることなく車両の詳細な画像を取得することができる。   With such a configuration, the first imaging unit captures a wide area, and the second imaging unit has a part or all of the vehicle area included in the image captured by the first imaging unit smaller than the first imaging unit. Since an image can be captured at an angle of view, a detailed image of the vehicle can be acquired without providing a high-performance imaging unit.

例えば、車両が犯罪車両など特定の車両である場合には、この特定の車両の詳細な画像が撮像されることにより犯罪捜査などにおいて有効な証拠を取得することができる。   For example, when the vehicle is a specific vehicle such as a criminal vehicle, effective evidence can be acquired in a criminal investigation or the like by capturing a detailed image of the specific vehicle.

(2)好ましくは、上記検出部は、車両のナンバープレートを検出対象に含み、上記調整部は、上記検出部により検出された上記ナンバープレートが撮像対象として上記第2撮像部により撮像されるように上記第2撮像部を調整する。   (2) Preferably, the detection unit includes a license plate of a vehicle as a detection target, and the adjustment unit is configured such that the license plate detected by the detection unit is imaged by the second imaging unit as an imaging target. The second imaging unit is adjusted.

このように、車両のナンバープレートを検出する構成により、第2撮像部により撮像された車両を容易に特定することができる。   Thus, the vehicle imaged by the 2nd image pick-up part can be easily specified by the composition which detects the license plate of the vehicle.

(3)好ましくは、上記車両検出装置は、さらに、上記第2撮像部により撮像された上記ナンバープレートの画像に基づいて上記車両の車両番号を認識し、認識結果を上記記録部に出力するための第1の画像処理部を備え、上記記録部は、上記ナンバープレートの画像とともに上記認識結果を記録する。   (3) Preferably, the vehicle detection device further recognizes a vehicle number of the vehicle based on an image of the license plate imaged by the second imaging unit, and outputs a recognition result to the recording unit. The first image processing unit, and the recording unit records the recognition result together with the image of the license plate.

このように、第2撮像部により撮像された車両の車両番号が認識されて記録されることにより、この車両番号を用いて対応する車両が、例えば犯罪車両として予め登録されている車両と一致するか否かの判断を精度よく行うことができる。   Thus, the vehicle number of the vehicle imaged by the second imaging unit is recognized and recorded, so that the corresponding vehicle using this vehicle number coincides with a vehicle registered in advance as a criminal vehicle, for example. Whether or not can be determined with high accuracy.

(4)好ましくは、上記検出部は、車両の座席領域を検出対象に含み、上記調整部は、上記検出部により検出された上記座席領域が撮像対象として上記第2撮像部により撮像されるように上記第2撮像部を調整する。   (4) Preferably, the detection unit includes a seat area of a vehicle as a detection target, and the adjustment unit is configured to capture the seat area detected by the detection unit as an imaging target by the second imaging unit. The second imaging unit is adjusted.

このような構成により、第2撮像部により撮像された画像を、例えば車両の搭乗者が指名手配されている人物であるか否かを判定するために用いることができるので、犯罪捜査などにおいて有効な証拠を取得することができる。   With such a configuration, the image captured by the second imaging unit can be used, for example, to determine whether or not the vehicle occupant is a person who has been nominated, so it is effective in criminal investigations and the like. Proof can be obtained.

(5)好ましくは、上記車両検出装置は、さらに、上記第2撮像部により撮像された上記座席領域の画像に基づいて上記車両の搭乗者の特徴情報を認識し、認識した上記特徴情報を上記記録部に出力するための第2の画像処理部を備え、上記記録部は、上記座席領域の画像とともに上記特徴情報を記録する。   (5) Preferably, the vehicle detection device further recognizes feature information of a passenger of the vehicle based on an image of the seat area imaged by the second imaging unit, and the recognized feature information is A second image processing unit for outputting to the recording unit is provided, and the recording unit records the feature information together with the image of the seat area.

このように、第2撮像部により撮像された車両の搭乗者の特徴情報が認識されて記録されることにより、この特徴情報を用いて対応する車両の搭乗者が、例えば犯罪者として予め登録されている人物と一致するか否かの判断を精度よく行うことができる。   In this way, the feature information of the vehicle occupant imaged by the second imaging unit is recognized and recorded, so that the corresponding vehicle occupant is registered in advance as a criminal, for example, using this feature information. It is possible to accurately determine whether or not the person matches.

(6)好ましくは、上記検出部は、オートバイの座席領域およびナンバープレートを検出対象に含み、上記調整部は、上記オートバイの前方から、上記検出部により検出された上記座席領域が撮像対象として上記第2撮像部により撮像され、上記オートバイの後方から、上記検出部により検出された上記ナンバープレートが撮像対象として上記第2撮像部により撮像されるように上記第2撮像部を調整する。   (6) Preferably, the detection unit includes a motorcycle seat region and a license plate as detection targets, and the adjustment unit is configured to detect the seat region detected by the detection unit from the front of the motorcycle as an imaging target. The second imaging unit is adjusted such that the number plate picked up by the second imaging unit and detected by the detection unit from behind the motorcycle is imaged by the second imaging unit as an imaging target.

このような構成により、車両がオートバイである場合であっても当該オートバイの座席およびナンバープレートを第2撮像部により撮像することができる。   With such a configuration, even if the vehicle is a motorcycle, the seat and license plate of the motorcycle can be imaged by the second imaging unit.

(7)好ましくは、上記検出部は、上記第1撮像部により撮像された画像全体について、車両の形状のHOG(Histograms of Oriented Gradients)特徴量を算出し、算出したHOG特徴量について、SVM(Support vector machine)を用いてパターン認識を行うことにより、上記第1撮像部により撮像された画像において上記車両領域を検出する。   (7) Preferably, the detection unit calculates a HOG (Histograms of Oriented Gradients) feature amount of the shape of the vehicle for the entire image captured by the first imaging unit, and for the calculated HOG feature amount, the SVM ( The vehicle area is detected in the image captured by the first imaging unit by performing pattern recognition using a support vector machine.

このような構成により、検出部は、第1撮像部により撮像された広い領域の撮像画像の中から車両領域を正確に検出することができる。   With such a configuration, the detection unit can accurately detect the vehicle area from the wide area captured image captured by the first imaging unit.

(8)好ましくは、上記検出部は、上記第1撮像部により撮像された画像から複数の車両領域を検出した場合には、予め定められた基準に従って上記複数の車両領域の優先順位をそれぞれ設定し、上記調整部は、上記優先順位が高い車両領域の一部または全部から順に上記第2撮像部により撮像されるように、上記第2撮像部を調整する。   (8) Preferably, when the detection unit detects a plurality of vehicle areas from the image captured by the first imaging unit, the priority order of the plurality of vehicle areas is set according to a predetermined criterion, respectively. Then, the adjustment unit adjusts the second imaging unit so that the second imaging unit sequentially captures an image from a part or the whole of the vehicle area having a high priority.

このような構成により、検出部が複数の車両領域を検出した場合であっても、第2撮像部により撮像される必要性の高い車両領域を選択し、選択された車両領域の詳細な画像を優先的に撮像することができる。   With such a configuration, even when the detection unit detects a plurality of vehicle regions, a vehicle region that is highly necessary to be imaged by the second imaging unit is selected, and a detailed image of the selected vehicle region is displayed. Imaging can be performed with priority.

(9)好ましくは、上記記録部は、上記第2撮像部により撮像された画像とともに、上記第1撮像部が設置されている位置を示す位置情報を記録する。   (9) Preferably, the said recording part records the positional information which shows the position in which the said 1st imaging part is installed with the image imaged by the said 2nd imaging part.

このような構成により、第2撮像部により撮像された車両が犯罪車両である場合などにおいて、当該車両の搭乗者を取り締まる際に有効な情報である車両の走行場所を容易に特定することができる。   With such a configuration, when the vehicle imaged by the second imaging unit is a criminal vehicle, it is possible to easily specify the traveling location of the vehicle, which is effective information when cracking down the passenger of the vehicle. .

(10)好ましくは、上記車両検出装置は、さらに、上記第1撮像部により撮像された画像に基づいて交通情報を作成するための交通情報作成部を備える。   (10) Preferably, the said vehicle detection apparatus is further provided with the traffic information preparation part for producing traffic information based on the image imaged by the said 1st imaging part.

このような構成により、渋滞情報などの交通情報を作成して運転者等に伝えることができるため、交通情報を取得するために他の装置を設置する必要がない。   With such a configuration, traffic information such as traffic jam information can be created and communicated to the driver or the like, so there is no need to install another device to acquire the traffic information.

また、この発明のある局面に係わる車両検出装置において、好ましくは、上記調整部は、上記第2撮像部の画角を調整することにより、上記第2撮像部により撮像される画像における撮像対象の画像領域の大きさを所定の大きさに調整する。   In the vehicle detection device according to an aspect of the present invention, it is preferable that the adjustment unit adjusts an angle of view of the second imaging unit to detect an imaging target in an image captured by the second imaging unit. The size of the image area is adjusted to a predetermined size.

このように、例えば複数の車両についてナンバープレートが撮像対象として撮像される場合に、複数のナンバープレートの画像領域の大きさが統一されることにより、複数のナンバープレート画像の画像処理を容易に行うことができる。   As described above, for example, when license plates are imaged as imaging targets for a plurality of vehicles, the image areas of the plurality of license plates are unified, thereby easily performing image processing of the plurality of license plate images. be able to.

また、この発明のある局面に係わる車両検出装置において、好ましくは、上記車両検出装置は、さらに、上記第2撮像部により撮像された画像に対して画像処理を行うための画像処理部を備え、上記画像処理部は、上記第2撮像部により撮像された画像に対する撮像対象の画像領域の歪みを補正する。   In the vehicle detection device according to an aspect of the present invention, preferably, the vehicle detection device further includes an image processing unit for performing image processing on an image captured by the second imaging unit, The image processing unit corrects distortion of an image region to be imaged with respect to an image captured by the second imaging unit.

このように、ナンバープレートなど撮像対象の画像領域の歪みが補正されることにより、例えば、ナンバープレートの画像に対応する車両が犯罪車両と一致するか否かの判断処理等を容易に行うことができる。   In this way, by correcting the distortion of the image area to be imaged such as the license plate, for example, it is possible to easily determine whether or not the vehicle corresponding to the license plate image matches the criminal vehicle. it can.

(11)上記課題を解決するために、この発明のある局面に係わる車両検出方法は、車両検出装置における車両検出方法であって、第1撮像部により撮像された画像に含まれる車両領域を検出するステップと、検出した上記車両領域の一部または全部が、上記第1撮像部よりも小さな画角に調整可能な第2撮像部により撮像されるように、上記第2撮像部を調整するステップとを含む。   (11) In order to solve the above-described problem, a vehicle detection method according to an aspect of the present invention is a vehicle detection method in a vehicle detection device, and detects a vehicle region included in an image captured by a first imaging unit. And adjusting the second imaging unit so that a part or all of the detected vehicle area is imaged by the second imaging unit that can be adjusted to a smaller angle of view than the first imaging unit. Including.

このような構成により、第1撮像部が広い領域を撮像し、第2撮像部が第1撮像部により撮像された画像に含まれる車両領域の一部または全部を、第1撮像部よりも小さな画角で撮像することができるため、高性能な撮像部を設けることなく車両の詳細な画像を取得することができる。   With such a configuration, the first imaging unit captures a wide area, and the second imaging unit has a part or all of the vehicle area included in the image captured by the first imaging unit smaller than the first imaging unit. Since an image can be captured at an angle of view, a detailed image of the vehicle can be acquired without providing a high-performance imaging unit.

例えば、車両が犯罪車両など特定の車両である場合には、この特定の車両の詳細な画像が撮像されることにより犯罪捜査などにおいて有効な証拠を取得することができる。   For example, when the vehicle is a specific vehicle such as a criminal vehicle, effective evidence can be acquired in a criminal investigation or the like by capturing a detailed image of the specific vehicle.

(12)上記課題を解決するために、この発明のある局面に係わる車両検出プログラムは、車両検出装置に用いられる車両検出プログラムであって、コンピュータに、第1撮像部により撮像された画像に含まれる車両領域を検出するステップと、検出した上記車両領域の一部または全部が、上記第1撮像部よりも小さな画角に調整可能な第2撮像部により撮像されるように、上記第2撮像部を調整するステップとを実行させるためのプログラムである。   (12) In order to solve the above problem, a vehicle detection program according to an aspect of the present invention is a vehicle detection program used for a vehicle detection device, and is included in an image captured by a first imaging unit in a computer. The second imaging unit so that a part or all of the detected vehicle region is imaged by a second imaging unit that can be adjusted to a smaller angle of view than the first imaging unit. Is a program for executing a step of adjusting a section.

このような構成により、第1撮像部が広い領域を撮像し、第2撮像部が第1撮像部により撮像された画像に含まれる車両領域の一部または全部を、第1撮像部よりも小さな画角で撮像することができるため、高性能な撮像部を設けることなく車両の詳細な画像を取得することができる。   With such a configuration, the first imaging unit captures a wide area, and the second imaging unit has a part or all of the vehicle area included in the image captured by the first imaging unit smaller than the first imaging unit. Since an image can be captured at an angle of view, a detailed image of the vehicle can be acquired without providing a high-performance imaging unit.

例えば、車両が犯罪車両など特定の車両である場合には、この特定の車両の詳細な画像が撮像されることにより犯罪捜査などにおいて有効な証拠を取得することができる。   For example, when the vehicle is a specific vehicle such as a criminal vehicle, effective evidence can be acquired in a criminal investigation or the like by capturing a detailed image of the specific vehicle.

本発明によれば、高性能な撮像部を設けることなく、車両の詳細な画像を取得することができる。   According to the present invention, it is possible to acquire a detailed image of a vehicle without providing a high-performance imaging unit.

本発明の実施の形態1から実施の形態3に係る車両検出装置の設置例を示す図である。It is a figure which shows the example of installation of the vehicle detection apparatus which concerns on Embodiment 1 to Embodiment 3 of this invention. 本発明の実施の形態1から実施の形態3に係る車両検出装置の外観を示す図である。It is a figure which shows the external appearance of the vehicle detection apparatus which concerns on Embodiment 1 to Embodiment 3 of this invention. 本発明の実施の形態1から実施の形態3に係る車両検出装置の構成を示すブロック図である。It is a block diagram which shows the structure of the vehicle detection apparatus which concerns on Embodiment 1 to Embodiment 3 of this invention. (a)は、本発明の実施の形態1に係る車両検出装置の広角カメラにより撮像された広角画像の一例を示す図であり、(b)は、本発明の実施の形態1に係る車両検出装置のPTZカメラにより撮像された拡大画像の一例を示す図である。(A) is a figure which shows an example of the wide angle image imaged with the wide angle camera of the vehicle detection apparatus which concerns on Embodiment 1 of this invention, (b) is the vehicle detection which concerns on Embodiment 1 of this invention. It is a figure which shows an example of the enlarged image imaged with the PTZ camera of the apparatus. 本発明の実施の形態1に係る車両検出装置による、車両の詳細な画像の取得動作手順を示すフローチャートである。It is a flowchart which shows the acquisition operation | movement procedure of the detailed image of a vehicle by the vehicle detection apparatus which concerns on Embodiment 1 of this invention. (a)は、本発明の実施の形態2に係る車両検出装置の広角カメラにより撮像された広角画像の一例を示す図であり、(b)は、本発明の実施の形態2に係る車両検出装置のPTZカメラにより撮像された拡大画像の一例を示す図である。(A) is a figure which shows an example of the wide angle image imaged with the wide angle camera of the vehicle detection apparatus which concerns on Embodiment 2 of this invention, (b) is the vehicle detection which concerns on Embodiment 2 of this invention. It is a figure which shows an example of the enlarged image imaged with the PTZ camera of the apparatus. (a)は、本発明の実施の形態3に係る車両検出装置の広角カメラにより撮像された広角画像の一例を示す図であり、(b)は、本発明の実施の形態3に係る車両検出装置のPTZカメラにより撮像されたオートバイの座席の拡大画像の一例を示す図であり、(c)は、本発明の実施の形態3に係る車両検出装置のPTZカメラにより撮像されたオートバイのナンバープレートの拡大画像の一例を示す図である。(A) is a figure which shows an example of the wide angle image imaged with the wide angle camera of the vehicle detection apparatus which concerns on Embodiment 3 of this invention, (b) is the vehicle detection which concerns on Embodiment 3 of this invention. It is a figure which shows an example of the enlarged image of the motorcycle seat imaged with the PTZ camera of the apparatus, (c) is a motorcycle license plate imaged with the PTZ camera of the vehicle detection apparatus which concerns on Embodiment 3 of this invention. It is a figure which shows an example of these enlarged images.

以下、本発明の実施の形態1から実施の形態3に係る車両検出装置について図面を用いて説明する。   Hereinafter, a vehicle detection device according to Embodiments 1 to 3 of the present invention will be described with reference to the drawings.

(実施の形態1)
[構成および基本動作]
以下、本発明の実施の形態1について図面を用いて説明する。なお、図中同一または相当部分には同一符号を付してその説明は繰り返さない。
(Embodiment 1)
[Configuration and basic operation]
Hereinafter, Embodiment 1 of the present invention will be described with reference to the drawings. In the drawings, the same or corresponding parts are denoted by the same reference numerals and description thereof will not be repeated.

図1は、本発明の実施の形態1から実施の形態3に係る車両検出装置100a,100b,100cの設置例を示す図であり、図2は、本発明の実施の形態1から実施の形態3に係る車両検出装置100a,100b,100cの外観を示す図であり、図3は、本発明の実施の形態1から実施の形態3に係る車両検出装置100a,100b,100cの構成を示すブロック図である。   FIG. 1 is a diagram illustrating an installation example of vehicle detection devices 100a, 100b, and 100c according to Embodiments 1 to 3 of the present invention, and FIG. 2 is a diagram illustrating Embodiments 1 to 3 of the present invention. 3 is an external view of the vehicle detection devices 100a, 100b, and 100c according to FIG. 3, and FIG. 3 is a block diagram illustrating the configuration of the vehicle detection devices 100a, 100b, and 100c according to the first to third embodiments of the present invention. FIG.

(車両検出装置の構成)
図1を参照して、本発明の実施の形態1に係る車両検出装置100aは、例えば交差点などの道路において、信号灯器31と一体化して設置されている。信号灯器31は、例えば交通信号灯器であって、交通信号制御装置30から制御信号を受けることにより、青、黄または赤のいずれかの色の信号を点灯する。また、信号灯器31が車両の進行することのできる方向を矢印にて表示する矢印式信号灯器である場合には、信号灯器31は、交通信号制御装置30から制御信号を受けることにより、左折可、直進可または右折可のいずれかを示す矢印を点灯可能である。なお、信号灯器31は、交通信号灯器に限られず、例えば踏切信号などであってもよい。
(Configuration of vehicle detection device)
Referring to FIG. 1, vehicle detection device 100a according to Embodiment 1 of the present invention is installed integrally with signal lamp 31 on a road such as an intersection. The signal lamp 31 is, for example, a traffic signal lamp, and lights a blue, yellow, or red signal by receiving a control signal from the traffic signal control device 30. When the signal lamp 31 is an arrow type signal lamp that displays the direction in which the vehicle can travel with an arrow, the signal lamp 31 can turn left by receiving a control signal from the traffic signal control device 30. The arrow indicating whether the vehicle can go straight or turn right can be lit. The signal lamp 31 is not limited to a traffic signal lamp, and may be a railroad crossing signal, for example.

図2を参照して、車両検出装置100aは、画像取得部10と、広角カメラ1(第1撮像部)と、PTZ(パン・チルト・ズーム)カメラ2(第2撮像部)とを備えている。   Referring to FIG. 2, the vehicle detection device 100a includes an image acquisition unit 10, a wide-angle camera 1 (first imaging unit), and a PTZ (pan / tilt / zoom) camera 2 (second imaging unit). Yes.

広角カメラ1は、例えば交差点などの道路を常時撮像して広角画像を取得する。PTZカメラ2は、上下左右に撮像方向を移動させることができ、かつ、画角を調整可能である。PTZカメラ2は、画像取得部10により広角カメラ1より小さな画角に調整されて、道路のうちの特定の領域を撮像して拡大画像を取得する。   The wide-angle camera 1 acquires a wide-angle image by always capturing a road such as an intersection. The PTZ camera 2 can move the imaging direction vertically and horizontally and can adjust the angle of view. The PTZ camera 2 is adjusted to an angle of view smaller than that of the wide-angle camera 1 by the image acquisition unit 10, and captures a specific area of the road to acquire an enlarged image.

また、広角カメラ1とPTZカメラ2とは、それぞれ並行して画像の撮像を行う。なお、広角カメラ1およびPTZカメラ2は、車両検出装置100aから分離され、車両検出装置100aに対して外付けする構成であってもよい。また、広角カメラ1の代わりに最大画角がPTZカメラ2よりも大きなPTZカメラを用いることもできる。また、PTZカメラ2の代わりに最小画角が広角カメラ1よりも小さな広角カメラを用いることもできる。   The wide-angle camera 1 and the PTZ camera 2 capture images in parallel. The wide-angle camera 1 and the PTZ camera 2 may be separated from the vehicle detection device 100a and externally attached to the vehicle detection device 100a. Further, instead of the wide-angle camera 1, a PTZ camera having a larger maximum angle of view than the PTZ camera 2 can be used. Further, instead of the PTZ camera 2, a wide-angle camera whose minimum field angle is smaller than that of the wide-angle camera 1 can be used.

さらに、広角カメラ1とPTZカメラ2とは一体型である必要はないが、広角カメラ1およびPTZカメラ2をそれぞれ例えば交差点付近に設置すること、および、広角画像と拡大画像とを対応づけて管理することを考慮すると、これら広角カメラ1とPTZカメラ2とは一体型であることが好ましい。   Further, the wide-angle camera 1 and the PTZ camera 2 do not need to be integrated, but the wide-angle camera 1 and the PTZ camera 2 are installed near the intersection, for example, and the wide-angle image and the enlarged image are associated with each other and managed. In view of this, it is preferable that the wide-angle camera 1 and the PTZ camera 2 are integrated.

図3を参照して、車両検出装置100aは、さらに、外部モニタ3を備えている。外部モニタ3は、広角カメラ1により撮像される広角画像およびPTZカメラ2により撮像される拡大画像を表示する。例えば、外部モニタ3は、広角カメラ1により撮像された広角画像とPTZカメラ2により撮像された拡大画像とを1画面に表示する。   Referring to FIG. 3, vehicle detection device 100 a further includes an external monitor 3. The external monitor 3 displays a wide-angle image captured by the wide-angle camera 1 and an enlarged image captured by the PTZ camera 2. For example, the external monitor 3 displays a wide-angle image captured by the wide-angle camera 1 and an enlarged image captured by the PTZ camera 2 on one screen.

(画像取得部の詳細な構造)
画像取得部10は、映像入力部11と、A/D変換部12と、RAM13と、映像入力部14と、A/D変換部15と、情報処理部16と、メモリ17(記録部)と、D/A変換部18と、出力部19と、タイマー20とを含む。
(Detailed structure of the image acquisition unit)
The image acquisition unit 10 includes a video input unit 11, an A / D conversion unit 12, a RAM 13, a video input unit 14, an A / D conversion unit 15, an information processing unit 16, and a memory 17 (recording unit). , A D / A conversion unit 18, an output unit 19, and a timer 20.

映像入力部11は、広角カメラ1により撮像された広角画像のアナログ信号を受けて、このアナログ信号をA/D変換部12に出力する。A/D変換部12は、映像入力部11から受けた広角画像のアナログ信号をデジタル信号に変換し、RAM13に出力する。これにより、RAM13には、広角カメラ1により撮像される広角画像のデジタル信号が順次記録され、上書きされる。   The video input unit 11 receives an analog signal of a wide-angle image captured by the wide-angle camera 1 and outputs this analog signal to the A / D conversion unit 12. The A / D converter 12 converts the analog signal of the wide-angle image received from the video input unit 11 into a digital signal and outputs it to the RAM 13. As a result, digital signals of wide-angle images picked up by the wide-angle camera 1 are sequentially recorded in the RAM 13 and overwritten.

また、RAM13には、広角カメラ1が設置されている位置を示す位置情報が、広角画像のデジタル信号とともに記録される。この位置情報は、例えば、広角カメラ1が設定されている場所の住所および交差点の名称などである。   Further, the RAM 13 records position information indicating the position where the wide-angle camera 1 is installed together with the digital signal of the wide-angle image. This position information is, for example, the address of the place where the wide-angle camera 1 is set and the name of an intersection.

映像入力部14は、PTZカメラ2により撮像された拡大画像のアナログ信号を受けて、このアナログ信号をA/D変換部15に出力する。A/D変換部15は、映像入力部14から受けた拡大画像のアナログ信号をデジタル信号に変換し、RAM13に出力する。これにより、RAM13には、PTZカメラ2により撮像される拡大画像のデジタル信号が順次記録され、上書きされる。   The video input unit 14 receives an analog signal of an enlarged image captured by the PTZ camera 2 and outputs the analog signal to the A / D conversion unit 15. The A / D conversion unit 15 converts the analog signal of the enlarged image received from the video input unit 14 into a digital signal and outputs the digital signal to the RAM 13. As a result, digital signals of enlarged images picked up by the PTZ camera 2 are sequentially recorded in the RAM 13 and overwritten.

タイマー20は、日時情報をRAM13に出力する。これにより、RAM13は、広角画像と広角画像が撮像された日時とを対応づけて記録する。また、RAM13は、拡大画像と拡大画像が撮像された日時とを対応づけて記録する。   The timer 20 outputs date / time information to the RAM 13. Thereby, the RAM 13 records the wide-angle image and the date and time when the wide-angle image was captured in association with each other. The RAM 13 records the enlarged image and the date and time when the enlarged image was captured in association with each other.

RAM13は、広角画像と、当該広角画像に対応づけられた日時と、拡大画像と、当該拡大画像に対応づけられた日時とを対応づけて記録する。また、RAM13は、広角画像とともに、RAM13に記録されている広角カメラ1の設置位置を示す位置情報を記録する。   The RAM 13 records the wide angle image, the date and time associated with the wide angle image, the enlarged image, and the date and time associated with the enlarged image in association with each other. The RAM 13 records position information indicating the installation position of the wide-angle camera 1 recorded in the RAM 13 together with the wide-angle image.

D/A変換部18は、RAM13から広角画像および拡大画像のデジタル信号を取得して、このデジタル信号をアナログ信号に変換し、出力部19に出力する。   The D / A converter 18 acquires the digital signals of the wide-angle image and the enlarged image from the RAM 13, converts the digital signals into analog signals, and outputs them to the output unit 19.

出力部19は、D/A変換部18から出力された広角画像および拡大画像のアナログ信号を外部モニタ3に出力する。これにより、広角画像と拡大画像とが1画面により外部モニタ3により表示される。なお、出力部19は、外部モニタ3に広角画像または拡大画像のいずれか一方が表示されるように、広角画像または拡大画像のいずれか一方のアナログ信号を外部モニタ3に出力してもよい。   The output unit 19 outputs analog signals of the wide-angle image and the enlarged image output from the D / A conversion unit 18 to the external monitor 3. As a result, the wide-angle image and the enlarged image are displayed on the external monitor 3 by one screen. Note that the output unit 19 may output an analog signal of either the wide-angle image or the enlarged image to the external monitor 3 so that either the wide-angle image or the enlarged image is displayed on the external monitor 3.

情報処理部16は、例えばCPU(Central Processing Unit)であり、検出部21と、調整部22と、画像処理部23(第1の画像処理部)と、通信部24と、交通情報作成部25と、メモリ26とを有する。   The information processing unit 16 is, for example, a CPU (Central Processing Unit), and includes a detection unit 21, an adjustment unit 22, an image processing unit 23 (first image processing unit), a communication unit 24, and a traffic information creation unit 25. And a memory 26.

(a)検出部
検出部21は、RAM13から広角画像のデジタル信号を取得して、広角画像に含まれる1または複数の車両領域を検出する。具体的には、検出部21は、RAM13から取得した広角画像のデジタル信号に基づいて、広角画像全体について、車両である車またはオートバイの形状のHOG(Histograms of Oriented Gradients)特徴量を算出する。そして、検出部21は、算出したHOG特徴量について、例えばSVM(Support vector machine)を用いてパターン認識を行うことにより、広角画像において車両が写っている領域を検出する。
(A) Detection part The detection part 21 acquires the digital signal of a wide angle image from RAM13, and detects the 1 or several vehicle area | region contained in a wide angle image. Specifically, the detection unit 21 calculates HOG (Histograms of Oriented Gradients) feature values of the shape of a vehicle or a motorcycle that is a vehicle for the entire wide-angle image based on the digital signal of the wide-angle image acquired from the RAM 13. And the detection part 21 detects the area | region where the vehicle is reflected in the wide angle image by performing pattern recognition about the calculated HOG feature-value using SVM (Support vector machine), for example.

また、検出部21は、車両を検出した場合、例えば車両が写っている矩形座標の大きさに基づいて、当該車両が車であるか、またはオートバイであるかを判断する。   Further, when detecting the vehicle, the detection unit 21 determines, for example, whether the vehicle is a car or a motorcycle based on the size of rectangular coordinates in which the vehicle is reflected.

また、メモリ26には、例えば、車の車種、オートバイの車種、各車種の形状、および、各車種における路面からナンバープレートまでの高さなどが予め記録されている。   Further, in the memory 26, for example, the vehicle type, the motorcycle type, the shape of each vehicle type, the height from the road surface to the license plate in each vehicle type, and the like are recorded in advance.

そして、検出部21は、車両が車であると判断した場合には、メモリ26に記録されている各車種における路面からナンバープレートまでの高さ等の情報に基づいて、当該車の前部または後部に設置されているナンバープレートを検出する。具体的には、検出部21は、例えば算出したHOG特徴量に基づいて、メモリ26に記録されている車の車種の中から、広角画像から検出した車の車種を特定する。そして、検出部21は、特定した車の車種および当該車種における路面からナンバープレートまでの高さに基づいて、広角画像から検出した車の前部または後部に設置されているナンバープレートを検出する。   When the detection unit 21 determines that the vehicle is a vehicle, the front portion of the vehicle or the front portion of the vehicle is determined based on information such as the height from the road surface to the license plate in each vehicle type recorded in the memory 26. The number plate installed at the rear is detected. Specifically, the detection unit 21 identifies the vehicle type detected from the wide-angle image from among the vehicle types recorded in the memory 26 based on, for example, the calculated HOG feature value. And the detection part 21 detects the number plate currently installed in the front part or rear part of the vehicle detected from the wide angle image based on the height from the road surface in the said vehicle type and the road surface to the number plate in the said vehicle type.

また、検出部21は、車両がオートバイであると判断した場合には、メモリ26に記録されている各車種における路面からナンバープレートまでの高さ等の情報に基づいて、に基づいて、当該オートバイの後部に設置されているナンバープレートを検出する。そして、検出部21は、広角画像のうち検出したナンバープレートが写っている領域の矩形座標を調整部22に出力する。   In addition, when the detection unit 21 determines that the vehicle is a motorcycle, based on the information such as the height from the road surface to the license plate in each vehicle type recorded in the memory 26, the motorcycle 21 Detect the license plate installed at the rear. Then, the detection unit 21 outputs the rectangular coordinates of the region where the detected license plate is captured in the wide-angle image to the adjustment unit 22.

ここで、例えば、広角画像ではオートバイが前方から撮像されているために、オートバイの後部に設置されているナンバープレートが当該広角画像に含まれていないことがある。この場合、検出部21は、例えば、広角画像においてオートバイが写っている領域の矩形座標の位置の変化に基づいてオートバイの走行速度および走行方向を算出し、算出した走行速度および走行方向に基づいてPTZカメラ2が当該オートバイを後方から撮像可能なタイミングを算出する。   Here, for example, since a motorcycle is imaged from the front in a wide-angle image, the license plate installed at the rear of the motorcycle may not be included in the wide-angle image. In this case, for example, the detection unit 21 calculates the traveling speed and traveling direction of the motorcycle based on the change in the position of the rectangular coordinates of the region where the motorcycle is captured in the wide-angle image, and based on the calculated traveling speed and traveling direction. The timing at which the PTZ camera 2 can capture the motorcycle from behind is calculated.

そして、検出部21は、PTZカメラ2がオートバイを後方から撮像する場合における撮像タイミング、当該タイミングにおけるオートバイの推定走行位置および当該推定走行位置におけるオートバイのナンバープレートの矩形座標を調整部22に出力する。   Then, the detection unit 21 outputs the imaging timing when the PTZ camera 2 captures the motorcycle from the rear, the estimated traveling position of the motorcycle at the timing, and the rectangular coordinates of the motorcycle license plate at the estimated traveling position to the adjustment unit 22. .

また、検出部21は、広角画像から複数の車両を検出した場合には、予め定められた基準に従って複数の車両に対して優先順位をそれぞれ設定する。   In addition, when detecting a plurality of vehicles from the wide-angle image, the detection unit 21 sets a priority order for each of the plurality of vehicles according to a predetermined criterion.

例えば、検出部21は、検出した複数の車両の広角画像における矩形座標に基づいて、各車両の走行速度および走行方向を算出する。そして、検出部21は、算出した各車両の走行速度および走行方向に基づいて、広角カメラ1の撮像領域から外れる順番が早いと推定される車両から順に優先順位を高く設定する。   For example, the detection unit 21 calculates the traveling speed and the traveling direction of each vehicle based on the detected rectangular coordinates in the wide-angle images of the plurality of vehicles. And the detection part 21 sets a high priority in order from the vehicle estimated that the order which remove | deviates from the imaging area of the wide angle camera 1 is early based on the calculated traveling speed and traveling direction of each vehicle.

また、他の優先順位の設定方法として次のような方法がある。例えばメモリ26には、犯罪車両の色または形状などの車両特徴が予め記録されている。そして、検出部21は、検出した複数の車両のうち、メモリ26に予め記録された車両特徴を有する車両が存在する場合には当該車両特徴を有する車両の優先順位を高く設定してもよい。   As another priority setting method, there is the following method. For example, in the memory 26, vehicle characteristics such as the color or shape of the crime vehicle are recorded in advance. And the detection part 21 may set the priority of the vehicle which has the said vehicle characteristic high, when the vehicle which has the vehicle characteristic previously recorded on the memory 26 among the some detected vehicles exists.

そして、検出部21は、優先順位の高い車両から順にナンバープレートを検出し、検出したナンバープレートの矩形座標を調整部22に出力する。   Then, the detection unit 21 detects the number plate in order from the vehicle with the highest priority, and outputs the detected rectangular coordinates of the number plate to the adjustment unit 22.

なお、検出部21は、複数の車両を検出した場合に、各車両のナンバープレートを検出した後にこれら複数のナンバープレートに対して優先順位をそれぞれ設定することも可能である。   In addition, the detection part 21 can also set a priority order with respect to these several number plates, after detecting the number plate of each vehicle, when a several vehicle is detected.

この場合、例えば、検出部21は、広角画像に含まれる複数のナンバープレートを検出した後に、広角画像が撮像されたタイミングにおけるPTZカメラ2の撮像方向を示す方向情報を調整部22から取得する。そして、検出部21は、この方向情報に基づいて、検出した複数のナンバープレートのうち、広角画像が撮像されたタイミングにおいてPTZカメラ2の撮像領域に含まれるナンバープレートまたは当該撮像領域の近くに位置するナンバープレート、すなわちPTZカメラ2が撮像方向を大きく変更することなく撮像することのできるナンバープレートから順に優先順位を高く設定する。そして、検出部21は、優先順位の高いナンバープレートの矩形座標から順に調整部22に出力する。   In this case, for example, after detecting a plurality of license plates included in the wide-angle image, the detection unit 21 acquires direction information indicating the imaging direction of the PTZ camera 2 at the timing when the wide-angle image is captured from the adjustment unit 22. Based on this direction information, the detection unit 21 is located near the number plate included in the imaging region of the PTZ camera 2 or near the imaging region at the timing when the wide-angle image is captured among the detected number plates. The priority is set in order from the license plate that is to be picked up, that is, the number plate that the PTZ camera 2 can pick up without greatly changing the image pickup direction. And the detection part 21 is output to the adjustment part 22 in an order from the rectangular coordinate of a license plate with a high priority.

(b)調整部
調整部22は、検出部21から出力されたナンバープレートの矩形座標に基づいて、広角画像における車両領域の一部または全部に相当する当該ナンバープレートがPTZカメラ2の撮像対象となるようにPTZカメラ2を調整する。また、調整部22は、検出部21により検出された車両がオートバイであり、検出部21から、PTZカメラ2によりオートバイが後方から撮像される場合における撮像タイミング、当該タイミングにおけるオートバイの推定走行位置および当該推定走行位置におけるオートバイのナンバープレートの矩形座標が出力された場合には、これらの出力情報に基づいてPTZカメラ2を調整する。
(B) Adjustment unit The adjustment unit 22 determines that the license plate corresponding to a part or all of the vehicle area in the wide-angle image is the imaging target of the PTZ camera 2 based on the rectangular coordinates of the license plate output from the detection unit 21. The PTZ camera 2 is adjusted so that The adjusting unit 22 also includes an imaging timing when the vehicle detected by the detecting unit 21 is a motorcycle and the PTZ camera 2 captures an image of the motorcycle from behind, an estimated traveling position of the motorcycle at the timing, and When the rectangular coordinates of the motorcycle license plate at the estimated travel position are output, the PTZ camera 2 is adjusted based on the output information.

このとき、調整部22は、PTZカメラ2と撮像対象であるナンバープレートとの距離等に応じてPTZカメラ2の画角を調整することにより、PTZカメラ2により撮像される拡大画像におけるナンバープレートの大きさを所定の大きさに統一させる。また、調整部22は、ナンバープレートが拡大画像の略中心に撮像されるようにPTZカメラ2の向きを調整する。   At this time, the adjusting unit 22 adjusts the angle of view of the PTZ camera 2 in accordance with the distance between the PTZ camera 2 and the license plate that is the imaging target, and thereby the license plate in the enlarged image captured by the PTZ camera 2. The size is unified to a predetermined size. The adjustment unit 22 adjusts the orientation of the PTZ camera 2 so that the license plate is imaged at the approximate center of the enlarged image.

ここで、図4(a)は、本発明の実施の形態1に係る車両検出装置100aの広角カメラ1により撮像された広角画像の一例を示す図であり、図4(b)は、本発明の実施の形態1に係る車両検出装置100aのPTZカメラ2により撮像された拡大画像の一例を示す図である。   Here, Fig.4 (a) is a figure which shows an example of the wide angle image imaged with the wide angle camera 1 of the vehicle detection apparatus 100a which concerns on Embodiment 1 of this invention, FIG.4 (b) is this invention. It is a figure which shows an example of the enlarged image imaged with the PTZ camera 2 of the vehicle detection apparatus 100a which concerns on this Embodiment 1. FIG.

例えば、図4(a)に示すように、広角カメラ1により撮像された広角画像に車Aが含まれている場合には、検出部21がこの車Aを検出し、さらに、車AのナンバープレートN1を検出する。そして、検出部21が、ナンバープレートN1の広角画像における矩形座標を調整部22に出力する。そして、調整部22が、出力された矩形座標に基づいてPTZカメラ2を調整することにより、PTZカメラ2が、図4(b)に示すようなナンバープレートN1の拡大画像を撮像する。   For example, as shown in FIG. 4A, when the car A is included in the wide-angle image captured by the wide-angle camera 1, the detection unit 21 detects the car A, and further, the number of the car A Detect plate N1. Then, the detection unit 21 outputs rectangular coordinates in the wide-angle image of the license plate N1 to the adjustment unit 22. Then, the adjusting unit 22 adjusts the PTZ camera 2 based on the output rectangular coordinates, so that the PTZ camera 2 captures an enlarged image of the license plate N1 as shown in FIG. 4B.

なお、調整部22は、例えば警察などにおいて、撮像画像を管理する者により操作された場合には、管理する者の所望の箇所の拡大画像が撮像されるように、当該操作に従ってPTZカメラ2を調整する。   In addition, when the adjustment unit 22 is operated by a person who manages the captured image, for example, in the police, the PTZ camera 2 is operated according to the operation so that an enlarged image of a desired location of the administrator is captured. adjust.

また、車両検出装置100aは複数のPTZカメラ2を備えていてもよく、この場合には、調整部22はこれら複数のPTZカメラ2を調整する。例えば、車両検出装置100aはPTZカメラ2a,2bを備え、これらPTZカメラ2a,2bはそれぞれ異なる方向を撮像方向とするように設定されている場合、調整部22は、PTZカメラ2aが車の前部に設置されているナンバープレートを撮像し、PTZカメラ2bが車またはオートバイの後部に設置されているナンバープレートをPTZカメラ2aとは異なる撮像タイミングで撮像するようにPTZカメラ2a,2bを調整することも可能である。   Further, the vehicle detection device 100a may include a plurality of PTZ cameras 2, and in this case, the adjustment unit 22 adjusts the plurality of PTZ cameras 2. For example, when the vehicle detection apparatus 100a includes PTZ cameras 2a and 2b, and these PTZ cameras 2a and 2b are set to have different directions as the imaging directions, the adjustment unit 22 causes the PTZ camera 2a to be in front of the car. The PTZ cameras 2a and 2b are adjusted so that the PTZ camera 2b captures the license plate installed at the rear of the car or motorcycle at an imaging timing different from that of the PTZ camera 2a. It is also possible.

(c)画像処理部
画像処理部23は、PTZカメラ2により車両のナンバープレートが撮像された場合には、RAM13に記録されたナンバープレートの拡大画像を取得して、このナンバープレートに示されている車両番号を認識する。
(C) Image processing unit When the vehicle license plate is imaged by the PTZ camera 2, the image processing unit 23 acquires an enlarged image of the license plate recorded in the RAM 13, and is displayed on the license plate. Recognize the vehicle number.

また、画像処理部23は、車両番号の認識において、アフィン変換等を用いることにより、拡大画像におけるナンバープレートの画像がPTZカメラ2の向きに影響されて歪むことのないように、拡大画像に含まれるナンバープレートの画像領域の歪みを補正する。   The image processing unit 23 includes the enlarged image so that the license plate image in the enlarged image is not distorted by the orientation of the PTZ camera 2 by using affine transformation or the like in the recognition of the vehicle number. Correct the distortion of the image area of the license plate.

そして、画像処理部23は、RAM13に記録されている拡大画像と、当該拡大画像に対応づけられた日時と、広角画像と、広角カメラ1が設置されている位置を示す位置情報とに加えて、車両の車両番号をメモリ17に出力し、メモリ17はこれらを記録する。なお、メモリ17は、例えばSDメモリカードなどのリムーバブルハードディスクである。   Then, the image processing unit 23 adds to the enlarged image recorded in the RAM 13, the date and time associated with the enlarged image, the wide-angle image, and the position information indicating the position where the wide-angle camera 1 is installed. The vehicle number of the vehicle is output to the memory 17, and the memory 17 records these. The memory 17 is a removable hard disk such as an SD memory card, for example.

このようにして、検出部21が車両を検出し、車両のナンバープレートを検出すると、その都度、調整部22がPTZカメラ2を調整し、ナンバープレートの拡大画像がPTZカメラ2により撮像される。そして、画像処理部23がナンバープレートの拡大画像に基づいて対応する車両の車両番号を認識し、認識された車両番号がメモリ17に順次記録されていく。   In this way, each time the detection unit 21 detects the vehicle and detects the license plate of the vehicle, the adjustment unit 22 adjusts the PTZ camera 2, and an enlarged image of the license plate is captured by the PTZ camera 2. Then, the image processing unit 23 recognizes the vehicle number of the corresponding vehicle based on the enlarged image of the license plate, and the recognized vehicle number is sequentially recorded in the memory 17.

なお、例えば、メモリ26は予め犯罪車両の車両番号を記録し、画像処理部23は、メモリ26に記録された車両番号と、拡大画像に基づいて認識した車両番号とが一致するか否かを判断することにより、対応する車両が犯罪車両であるか否かを判断することも可能である。   For example, the memory 26 records the vehicle number of the crime vehicle in advance, and the image processing unit 23 determines whether the vehicle number recorded in the memory 26 matches the vehicle number recognized based on the enlarged image. By determining, it is possible to determine whether or not the corresponding vehicle is a criminal vehicle.

また、メモリ17は、検出部21が車両を検出したタイミングよりもわずかにさかのぼったタイミングからの広角画像を記録してもよい。詳細には、メモリ17は、時刻tにおいて検出部21が車両を検出した場合、車両が検出されたタイミングよりも所定時間さかのぼったタイミング(例えば、時刻t−1)からの、広角画像のデータをRAM13から取得して記録してもよい。   In addition, the memory 17 may record a wide-angle image from a timing slightly retroactive to the timing at which the detection unit 21 detects the vehicle. Specifically, when the detection unit 21 detects a vehicle at time t, the memory 17 stores wide-angle image data from a timing (for example, time t−1) that goes back a predetermined time from the timing at which the vehicle is detected. It may be acquired from the RAM 13 and recorded.

(d)通信部
通信部24は、メモリ17に記録されている広角画像と、広角画像に対応づけられている広角カメラ1の位置情報、日時情報および拡大画像と、画像処理部23により認識された車両番号とを取得して、予め登録されている警察のデータベースなどであるデータ蓄積部50に送信する。なお、通信部24は、車両の動きなどを伝えるためのテキスト文を合わせてデータ蓄積部50に送信してもよい。
(D) Communication unit The communication unit 24 is recognized by the image processing unit 23, the wide-angle image recorded in the memory 17, the position information, date / time information, and the enlarged image of the wide-angle camera 1 associated with the wide-angle image. The vehicle number is acquired and transmitted to the data storage unit 50 such as a police database registered in advance. Note that the communication unit 24 may transmit a text sentence for transmitting the movement of the vehicle and the like to the data storage unit 50.

これにより、例えば、通信部24から送信される車両番号が警察において予め登録されている犯罪車両番号と一致する場合には、通信部24から送信された画像等に基づいて当該犯罪車両の位置および動き等を特定し、犯罪捜査に有力な情報として用いることができる。   Thereby, for example, when the vehicle number transmitted from the communication unit 24 matches the crime vehicle number registered in advance in the police, the position of the criminal vehicle and the crime vehicle number transmitted from the communication unit 24 It can identify movement and use it as powerful information for criminal investigations.

(e)交通情報作成部
交通情報作成部25は、RAM13に記録されている広角画像を取得し、取得した広角画像に基づいて交通情報を作成する。例えば、交通情報作成部25は、所定時間内に交差点を走行する車両の数を測定したり、特定の車両が所定時間内に移動する距離を測定したりすることにより渋滞状況を示す交通情報を作成する。また、交通情報作成部25は、作成した交通情報を交通情報管理装置60に送信する。
(E) Traffic information creation part The traffic information creation part 25 acquires the wide-angle image currently recorded on RAM13, and produces traffic information based on the acquired wide-angle image. For example, the traffic information creation unit 25 measures traffic information indicating a traffic jam condition by measuring the number of vehicles traveling at an intersection within a predetermined time or measuring the distance that a specific vehicle moves within a predetermined time. create. Further, the traffic information creation unit 25 transmits the created traffic information to the traffic information management device 60.

なお、交通情報作成部25は、例えば、検出部21、調整部22および画像処理部23により行われる車両の詳細な画像の取得と並行して交通情報を作成する。なお、検出部21、調整部22および画像処理部23による車両の詳細な画像取得のための動作モードと、交通情報作成部25による交通情報作成のための動作モードとが切り替えられてもよい。   The traffic information creation unit 25 creates traffic information in parallel with the acquisition of detailed images of the vehicle performed by the detection unit 21, the adjustment unit 22, and the image processing unit 23, for example. In addition, the operation mode for acquiring a detailed image of the vehicle by the detection unit 21, the adjustment unit 22, and the image processing unit 23 and the operation mode for creating traffic information by the traffic information creation unit 25 may be switched.

[動作]
次に、本発明の実施の形態1に係る車両検出装置100aによる車両の詳細な画像取得のための動作について説明する。図5は、本発明の実施の形態1に係る車両検出装置100aによる、車両の詳細な画像の取得動作手順を示すフローチャートである。
[Operation]
Next, an operation for acquiring a detailed image of the vehicle by the vehicle detection device 100a according to Embodiment 1 of the present invention will be described. FIG. 5 is a flowchart illustrating a procedure for acquiring a detailed image of the vehicle by the vehicle detection device 100a according to the first embodiment of the present invention.

車両検出装置100aは、フローチャートの各ステップを含むプログラムを図示しないメモリから読み出して実行する。このプログラムは、外部からインストールすることができる。このインストールされるプログラムは、たとえば記録媒体に格納された状態で流通する。   The vehicle detection device 100a reads and executes a program including each step of the flowchart from a memory (not shown). This program can be installed externally. The installed program is distributed in a state stored in a recording medium, for example.

図5を参照して、まず、広角カメラ1が道路を撮像し、この広角カメラ1により撮像された広角画像のデータであるデジタル信号がRAM13に出力され、RAM13に順次記録される(ステップS1)。   Referring to FIG. 5, first, wide-angle camera 1 images a road, and a digital signal that is data of a wide-angle image captured by wide-angle camera 1 is output to RAM 13 and sequentially recorded in RAM 13 (step S1). .

次に、検出部21が、RAM13から広角画像のデジタル信号を取得して、広角画像に含まれる車両の検出処理を行う(ステップS2)。そして、検出部21が、車両の検出処理(ステップS2)において車両を検出したか否かを判断する(ステップS3)。   Next, the detection part 21 acquires the digital signal of a wide angle image from RAM13, and performs the detection process of the vehicle contained in a wide angle image (step S2). And it is judged whether the detection part 21 detected the vehicle in the detection process (step S2) of a vehicle (step S3).

そして、検出部21が、車両を検出した場合には(ステップS3において「YES」)、検出した車両が複数であるか否かを判断する(ステップS4)。そして、検出部21が検出した車両が複数である場合には(ステップS4において「YES」)、検出部21が、予め定められた基準に従って複数の車両の優先順位をそれぞれ設定する(ステップS5)。   If the detection unit 21 detects a vehicle (“YES” in step S3), it determines whether there are a plurality of detected vehicles (step S4). If there are a plurality of vehicles detected by the detection unit 21 (“YES” in step S4), the detection unit 21 sets the priorities of the plurality of vehicles according to predetermined criteria (step S5). .

次に、検出部21が、最も高い優先順位を設定した車両が、車であるか、またはオートバイであるかを判断する。そして、検出部21が、検出した車両が車であるか、またはオートバイであるかという判断結果、および、メモリ26に記録されている各車種における路面からナンバープレートまでの高さ等の情報に基づいて、検出した車両の前部または後部に設置されているナンバープレートを撮像対象として検出する(ステップS6)。そして、検出部21が、検出したナンバープレートの広角画像における矩形座標を調整部22に出力する。   Next, the detection unit 21 determines whether the vehicle for which the highest priority is set is a car or a motorcycle. Then, based on the determination result whether the detected vehicle is a car or a motorcycle, and information such as the height from the road surface to the license plate in each vehicle type recorded in the memory 26. Then, the number plate installed at the front or rear of the detected vehicle is detected as an imaging target (step S6). Then, the detection unit 21 outputs the detected rectangular coordinates in the wide-angle image of the license plate to the adjustment unit 22.

また、例えば、検出部21が前方から撮像されたオートバイを検出した場合など、広角画像に撮像対象とすべきナンバープレートが含まれていない場合には、検出部21が、PTZカメラ2による当該ナンバープレートの撮像タイミング、当該タイミングにおける対応する車両の推定走行位置および当該推定走行位置における当該ナンバープレートの矩形座標を調整部22に出力する。   In addition, for example, when the detection unit 21 detects a motorcycle imaged from the front, when the license plate to be imaged is not included in the wide-angle image, the detection unit 21 detects the number obtained by the PTZ camera 2. The imaging timing of the plate, the estimated traveling position of the corresponding vehicle at the timing, and the rectangular coordinates of the license plate at the estimated traveling position are output to the adjustment unit 22.

次に、調整部22が、検出部21から出力された撮像対象の矩形座標または撮像タイミング等に基づいて、PTZカメラ2の撮像方向および画角を算出する(ステップS7)。そして、調整部22が、算出した撮像方向および画角に基づいてPTZカメラ2を設定する(ステップS8)。また、調整部22が、検出部21から撮像タイミング等の情報を取得している場合には、この情報等に基づいてPTZカメラ2の撮像タイミング等を設定する。   Next, the adjustment unit 22 calculates the imaging direction and the angle of view of the PTZ camera 2 based on the rectangular coordinates of the imaging target output from the detection unit 21 or the imaging timing (step S7). Then, the adjustment unit 22 sets the PTZ camera 2 based on the calculated imaging direction and angle of view (step S8). When the adjustment unit 22 acquires information such as the imaging timing from the detection unit 21, the imaging timing of the PTZ camera 2 is set based on this information and the like.

次に、PTZカメラ2が、設定された撮像方向、画角および撮像タイミング等に基づいて撮像を行うことにより、ナンバープレートの拡大画像が映像入力部14およびA/D変換部15を介して、RAM13に順次記録される。   Next, when the PTZ camera 2 performs imaging based on the set imaging direction, angle of view, imaging timing, and the like, an enlarged image of the license plate is transmitted via the video input unit 14 and the A / D conversion unit 15. Recorded sequentially in the RAM 13.

なお、RAM13に記録される広角画像、および、広角画像に対応づけられた拡大画像は、D/A変換部18および出力部19を介して外部モニタ3に表示される。この場合、調整部22によるPTZカメラ2の設定処理(ステップS8)において、例えば警察など撮像画像を管理する者は、外部モニタ3に表示される画像を目視しながら、例えば車両の形状等を詳細に確認できるように、調整部22を操作してPTZカメラ2を調整することが可能である。   The wide-angle image recorded in the RAM 13 and the enlarged image associated with the wide-angle image are displayed on the external monitor 3 via the D / A conversion unit 18 and the output unit 19. In this case, in the setting process of the PTZ camera 2 by the adjustment unit 22 (step S8), for example, a person who manages a captured image such as the police observes the image displayed on the external monitor 3 and details the shape of the vehicle, for example. It is possible to adjust the PTZ camera 2 by operating the adjustment unit 22 so that it can be confirmed.

次に、画像処理部23が、拡大画像、拡大画像に対応づけられている広角画像、および広角画像に対応づけられている広角カメラ1の位置情報をRAM13から取得する。そして、画像処理部23が拡大画像に対して画像処理を行うことにより、拡大画像に含まれるナンバープレートの画像領域の歪みを補正し、補正後の画像を取得する(ステップS9)。   Next, the image processing unit 23 acquires from the RAM 13 the enlarged image, the wide-angle image associated with the enlarged image, and the position information of the wide-angle camera 1 associated with the wide-angle image. Then, the image processing unit 23 performs image processing on the enlarged image, thereby correcting the distortion of the image area of the license plate included in the enlarged image, and obtaining a corrected image (step S9).

次に、画像処理部23が、取得したナンバープレートの画像に基づいて、対応する車両の車両番号を認識する(ステップS10)。   Next, the image processing unit 23 recognizes the vehicle number of the corresponding vehicle based on the acquired license plate image (step S10).

そして、画像処理部23が、拡大画像、広角画像、広角カメラ1の位置情報、日時情報および車両の車両番号をメモリ17に出力し、メモリ17がこれらを対応づけて記録する。   Then, the image processing unit 23 outputs the enlarged image, the wide-angle image, the position information of the wide-angle camera 1, the date / time information, and the vehicle number of the vehicle to the memory 17, and the memory 17 records them in association with each other.

次に、通信部24が、メモリ17に記録されている拡大画像、広角画像、広角カメラ1の位置情報、日時情報および車両の車両番号を取得して、例えば予め登録されているデータ蓄積部50に送信する(ステップS11)。   Next, the communication unit 24 acquires the enlarged image, the wide-angle image, the position information of the wide-angle camera 1, the date / time information, and the vehicle number of the vehicle recorded in the memory 17, for example, a pre-registered data storage unit 50. (Step S11).

次に、検出部21が、ステップS3において検出した車両のうち、ナンバープレートの矩形座標または撮像タイミング等を調整部22に出力していない車両、すなわち優先順位が2番目以降に設定されている車両があるか否かを判断する(ステップS12)。そして、検出部21が、優先順位が2番目以降に設定されている車両があると判断した場合には(ステップS12において「NO」)、検出部21が、優先順位が2番目以降に設定されている車両に対して再び優先順位を設定する(ステップS5)。   Next, among the vehicles detected by the detection unit 21 in step S3, vehicles that do not output the rectangular coordinates of the license plate or the imaging timing to the adjustment unit 22, that is, vehicles whose priority is set to second or later. It is determined whether or not there is (step S12). If the detection unit 21 determines that there is a vehicle with the priority set to the second or higher ("NO" in step S12), the detection unit 21 is set to the second or higher priority. The priority order is set again for the existing vehicle (step S5).

そして、検出部21が、再び優先順位を設定した車両のうち、最も高い優先順位を設定した車両について、撮像対象の検出処理(ステップS6)を行い、上述した処理(ステップS6からステップS12)が繰り返される。   And the detection part 21 performs the detection process (step S6) of imaging object about the vehicle which set the highest priority among the vehicles which set the priority again, and the process (step S6 to step S12) mentioned above is performed. Repeated.

一方、検出部21が、ナンバープレートの矩形座標または撮像タイミング等を調整部22に出力していない車両、すなわち広角画像中に優先順位が2番目以降に設定されている車両は無いと判断した場合(ステップS12において「YES」)、検出部21が、広角カメラ1により新たに撮像された広角画像のデータがRAM13に記録されたか否かを判断する(ステップS13)。   On the other hand, when the detection unit 21 determines that there is no vehicle that does not output the rectangular coordinates of the license plate or the imaging timing or the like to the adjustment unit 22, that is, there is no vehicle whose priority is set to the second or higher in the wide-angle image. ("YES" in step S12), the detection unit 21 determines whether or not wide-angle image data newly captured by the wide-angle camera 1 has been recorded in the RAM 13 (step S13).

また、ステップS3において、検出部21が、広角画像に含まれる車両を検出しない場合(ステップS3において「NO」)も同様に、検出部21が、広角カメラ1により新たに撮像された広角画像のデータがRAM13に記録されたか否かを判断する(ステップS13)。   Similarly, when the detection unit 21 does not detect the vehicle included in the wide-angle image in Step S3 (“NO” in Step S3), the detection unit 21 similarly detects the wide-angle image newly captured by the wide-angle camera 1. It is determined whether data is recorded in the RAM 13 (step S13).

そして、新たに撮像された広角画像のデータがRAM13に記録された場合には(ステップS13において「YES」)、再び検出部21による車両の検出処理(ステップS2)に移行し、上述した処理が繰り返される。なお、上述した本発明の実施の形態1では、検出部21が車両を検出する場合について説明した。しかしながら、検出部21は必ずしも車両だけを検出するものに限られず、例えば、検出部21は、車両に乗車している人または車両の周囲を含む領域などを検出対象に含めても良い。   If the newly captured wide-angle image data is recorded in the RAM 13 (“YES” in step S13), the process proceeds to the vehicle detection process (step S2) by the detection unit 21 again. Repeated. In the first embodiment of the present invention described above, the case where the detection unit 21 detects a vehicle has been described. However, the detection unit 21 is not necessarily limited to detecting only the vehicle. For example, the detection unit 21 may include a person on the vehicle or a region including the periphery of the vehicle as a detection target.

ところで、特許文献1に記載の検出方法によれば、車両のフロントガラスの範囲において車両の運転者または同乗者などの搭乗者が写っている領域は、道路を撮像している画像全体の中の一部に相当する。このため、例えば、当該車両が犯罪車両であって、運転者または同乗者を取り締まるために当該運転者または同乗者の顔を把握しようとしても、運転者または同乗者の顔が写っている部分の解像度が低いことから、当該運転者または同乗者の顔を十分に把握することができないという問題があった。   By the way, according to the detection method described in Patent Document 1, an area in which a vehicle driver or a passenger such as a passenger appears in the range of the windshield of the vehicle is included in the entire image capturing the road. It corresponds to a part. For this reason, for example, even if the vehicle is a criminal vehicle and an attempt is made to grasp the driver or passenger's face in order to control the driver or passenger, Since the resolution is low, there is a problem that the driver's or passenger's face cannot be sufficiently grasped.

一方、道路の広い領域を撮像するために広い視野を確保しつつ、運転者または同乗者の顔など車両に関する詳細な画像を取得するためには、極めて高性能な撮像部を設ける必要があり、画像処理の際の負荷が大きくなるという問題があった。   On the other hand, in order to capture a wide field of view to capture a wide area of the road while acquiring a detailed image related to the vehicle such as the driver's or passenger's face, it is necessary to provide an extremely high-performance imaging unit, There has been a problem that the load during image processing increases.

これに対して、本発明の実施の形態1に係る車両検出装置100aにおいて、検出部21は、広角カメラ1により撮像された画像に含まれる車両領域を検出する。また、調整部22は、検出部21により検出された車両領域の一部または全部が、広角カメラ1よりも小さな画角に調整可能なPTZカメラ2により撮像されるように、PTZカメラ2を調整する。また、メモリ17は、PTZカメラ2により撮像された画像を記録する。   On the other hand, in the vehicle detection device 100a according to Embodiment 1 of the present invention, the detection unit 21 detects a vehicle region included in an image captured by the wide-angle camera 1. The adjustment unit 22 adjusts the PTZ camera 2 so that a part or the whole of the vehicle area detected by the detection unit 21 is imaged by the PTZ camera 2 that can be adjusted to a smaller angle of view than the wide-angle camera 1. To do. The memory 17 records an image captured by the PTZ camera 2.

このような構成により、広角カメラ1が広い領域を撮像し、PTZカメラ2が広角カメラ1により撮像された画像に含まれる車両領域の一部または全部を、広角カメラ1よりも小さな画角で撮像することができるため、高性能な撮像部を設けることなく車両の詳細な画像を取得することができる。   With such a configuration, the wide-angle camera 1 captures a wide area, and the PTZ camera 2 captures part or all of the vehicle area included in the image captured by the wide-angle camera 1 with a smaller angle of view than the wide-angle camera 1. Therefore, a detailed image of the vehicle can be acquired without providing a high-performance imaging unit.

例えば、車両が犯罪車両など特定の車両である場合には、この特定の車両の詳細な画像が撮像されることにより犯罪捜査などにおいて有効な証拠を取得することができる。   For example, when the vehicle is a specific vehicle such as a criminal vehicle, effective evidence can be acquired in a criminal investigation or the like by capturing a detailed image of the specific vehicle.

また、本発明の実施の形態1に係る車両検出装置100aにおいて、検出部21は、車両のナンバープレートを検出対象に含み、調整部22は、検出部21により検出されたナンバープレートが撮像対象としてPTZカメラ2により撮像されるようにPTZカメラ2を調整する。   Moreover, in the vehicle detection device 100a according to Embodiment 1 of the present invention, the detection unit 21 includes a vehicle license plate as a detection target, and the adjustment unit 22 uses the license plate detected by the detection unit 21 as an imaging target. The PTZ camera 2 is adjusted so as to be imaged by the PTZ camera 2.

このように、車両のナンバープレートを検出する構成により、PTZカメラ2により撮像された車両を容易に特定することができる。   Thus, the vehicle imaged by the PTZ camera 2 can be easily specified by the configuration for detecting the license plate of the vehicle.

また、本発明の実施の形態1に係る車両検出装置100aにおいて、画像処理部23は、PTZカメラ2より撮像されたナンバープレートの画像に基づいて車両の車両番号を認識し、認識結果をメモリ17に出力する。また、メモリ17は、ナンバープレートの画像とともに認識結果を記録する。   In the vehicle detection device 100a according to the first embodiment of the present invention, the image processing unit 23 recognizes the vehicle number of the vehicle based on the image of the license plate imaged by the PTZ camera 2, and stores the recognition result in the memory 17. Output to. Further, the memory 17 records the recognition result together with the license plate image.

このように、PTZカメラ2により撮像された車両の車両番号が認識されて記録されることにより、この車両番号を用いて対応する車両が、例えば犯罪車両として予め登録されている車両と一致するか否かの判断を精度よく行うことができる。   In this way, whether or not the vehicle number of the vehicle imaged by the PTZ camera 2 is recognized and recorded, so that the corresponding vehicle using the vehicle number matches, for example, a vehicle registered in advance as a criminal vehicle. It is possible to accurately determine whether or not.

また、本発明の実施の形態1に係る車両検出装置100aにおいて、検出部21は、広角カメラ1により撮像された画像全体について、車両の形状のHOG(Histograms of Oriented Gradients)特徴量を算出し、算出したHOG特徴量について、SVM(Support vector machine)を用いてパターン認識を行うことにより、広角カメラ1により撮像された画像において車両領域を検出する。   Moreover, in the vehicle detection device 100a according to Embodiment 1 of the present invention, the detection unit 21 calculates a HOG (Histograms of Oriented Gradients) feature amount of the vehicle shape for the entire image captured by the wide-angle camera 1, The vehicle area is detected in the image picked up by the wide-angle camera 1 by performing pattern recognition on the calculated HOG feature using a support vector machine (SVM).

このような構成により、検出部21は、広角カメラ1により撮像された広角画像の中から車両領域を正確に検出することができる。   With such a configuration, the detection unit 21 can accurately detect the vehicle region from the wide-angle image captured by the wide-angle camera 1.

また、本発明の実施の形態1に係る車両検出装置100aにおいて、検出部21は、広角カメラ1により撮像された画像から複数の車両領域を検出した場合には、予め定められた基準に従って複数の車両領域の優先順位をそれぞれ設定し、調整部22は、優先順位が高い車両領域の一部または全部から順にPTZカメラ2により撮像されるように、PTZカメラ2を調整する。   Further, in the vehicle detection device 100a according to Embodiment 1 of the present invention, when the detection unit 21 detects a plurality of vehicle regions from an image captured by the wide-angle camera 1, a plurality of vehicle regions are detected according to a predetermined criterion. The priority order of the vehicle area is set, and the adjustment unit 22 adjusts the PTZ camera 2 so that the PTZ camera 2 sequentially captures images from a part or the whole of the vehicle area having the higher priority order.

このような構成により、検出部21が複数の車両領域を検出した場合であっても、PTZカメラ2により撮像される必要性の高い車両領域を選択し、選択された車両領域の詳細な画像を優先的に撮像することができる。   With such a configuration, even when the detection unit 21 detects a plurality of vehicle regions, a vehicle region that is highly necessary to be imaged by the PTZ camera 2 is selected, and a detailed image of the selected vehicle region is displayed. Imaging can be performed with priority.

また、本発明の実施の形態1に係る車両検出装置100aにおいて、メモリ17は、PTZカメラ2により撮像された画像とともに、広角カメラ1が設置されている位置を示す位置情報を記録する。   Further, in the vehicle detection device 100a according to Embodiment 1 of the present invention, the memory 17 records position information indicating the position where the wide-angle camera 1 is installed together with an image captured by the PTZ camera 2.

このような構成により、PTZカメラ2により撮像された車両が犯罪車両である場合などにおいて、当該車両の搭乗者を取り締まる際に有効な情報である車両の走行場所を容易に特定することができる。   With such a configuration, when the vehicle imaged by the PTZ camera 2 is a criminal vehicle, it is possible to easily specify the travel location of the vehicle, which is effective information when the passenger of the vehicle is controlled.

また、本発明の実施の形態1に係る車両検出装置100aは、さらに、広角カメラ1により撮像された画像に基づいて交通情報を作成するための交通情報作成部25を備える。   Moreover, the vehicle detection device 100a according to Embodiment 1 of the present invention further includes a traffic information creation unit 25 for creating traffic information based on an image captured by the wide-angle camera 1.

このような構成により、渋滞情報などの交通情報を作成して運転者等に伝えることができるため、交通情報を取得するために他の装置を設置する必要がない。   With such a configuration, traffic information such as traffic jam information can be created and communicated to the driver or the like, so there is no need to install another device to acquire the traffic information.

また、本発明の実施の形態1に係る車両検出装置100aにおいて、調整部22は、PTZカメラ2の画角を調整することにより、PTZカメラ2により撮像される画像における撮像対象の画像領域の大きさを所定の大きさに調整する。   Further, in the vehicle detection device 100a according to Embodiment 1 of the present invention, the adjustment unit 22 adjusts the angle of view of the PTZ camera 2 so that the size of the image area to be captured in the image captured by the PTZ camera 2 is increased. The height is adjusted to a predetermined size.

このように、例えば複数の車両についてナンバープレートが撮像対象として撮像される場合に、複数のナンバープレートの画像領域の大きさが統一されることにより、複数のナンバープレート画像の画像処理を容易に行うことができる。   As described above, for example, when license plates are imaged as imaging targets for a plurality of vehicles, the image areas of the plurality of license plates are unified, thereby easily performing image processing of the plurality of license plate images. be able to.

また、本発明の実施の形態1に係る車両検出装置100aは、さらに、PTZカメラ2により撮像された画像に対して画像処理を行うための画像処理部23を備え、画像処理部23は、PTZカメラ2により撮像された画像に対する撮像対象の画像領域の歪みを補正する。   In addition, the vehicle detection device 100a according to Embodiment 1 of the present invention further includes an image processing unit 23 for performing image processing on an image captured by the PTZ camera 2, and the image processing unit 23 includes the PTZ. The distortion of the image area to be imaged with respect to the image captured by the camera 2 is corrected.

このように、ナンバープレートなど撮像対象の画像領域の歪みが補正されることにより、例えば、ナンバープレートの画像に対応する車両が犯罪車両と一致するか否かの判断処理等を容易に行うことができる。   In this way, by correcting the distortion of the image area to be imaged such as the license plate, for example, it is possible to easily determine whether or not the vehicle corresponding to the license plate image matches the criminal vehicle. it can.

(実施の形態2)
以下、本発明の実施の形態2について図面を用いて説明する。なお、図中同一または相当部分には同一符号を付してその説明は繰り返さない。
(Embodiment 2)
The second embodiment of the present invention will be described below with reference to the drawings. In the drawings, the same or corresponding parts are denoted by the same reference numerals and description thereof will not be repeated.

本発明の実施の形態2に係る車両検出装置100bは、検出部21が、PTZカメラ2の撮像対象として車の運転席、助手席またはオートバイの座席などの座席領域を検出するものである。   In the vehicle detection device 100b according to Embodiment 2 of the present invention, the detection unit 21 detects a seat area such as a driver's seat of a car, a passenger seat, or a motorcycle seat as an imaging target of the PTZ camera 2.

再び図3を参照して、本発明の実施の形態2に係る車両検出装置100bは、実施の形態1に係る車両検出装置100aと同様の構成を備えている。車両検出装置100bの検出部21は、車両検出装置100aの検出部21と同様に、広角カメラ1により撮像された広角画像に含まれる車両を検出する。そして、検出部21は、車両を検出した場合、当該車両が車であるか、またはオートバイであるかを判断する。   Referring to FIG. 3 again, vehicle detection device 100b according to Embodiment 2 of the present invention has the same configuration as vehicle detection device 100a according to Embodiment 1. Similar to the detection unit 21 of the vehicle detection device 100a, the detection unit 21 of the vehicle detection device 100b detects a vehicle included in the wide-angle image captured by the wide-angle camera 1. Then, when detecting the vehicle, the detection unit 21 determines whether the vehicle is a car or a motorcycle.

また、検出部21は、検出した車両が車であると判断した場合、当該車の運転席または助手席を検出する。具体的には、本発明の実施の形態2に係る車両検出装置100bのメモリ26には、例えば、車の車種、各車種の形状、各車種における路面からフロントガラスまでの高さ、各車種における車の左端から運転席または助手席までの距離、および、各車種における車の右端から運転席または助手席までの距離などが予め記録されている。そして、検出部21は、例えば算出したHOG特徴量に基づいて、メモリ26に記録されている車の車種の中から、広角画像から検出した車の車種を特定する。そして、検出部21は、特定した車の車種およびメモリ26に記録されている高さおよび距離等に基づいて、車の運転席または助手席を検出する。   Further, when the detection unit 21 determines that the detected vehicle is a vehicle, the detection unit 21 detects a driver seat or a passenger seat of the vehicle. Specifically, in the memory 26 of the vehicle detection device 100b according to Embodiment 2 of the present invention, for example, the vehicle type, the shape of each vehicle type, the height from the road surface to the windshield in each vehicle type, The distance from the left end of the vehicle to the driver seat or the passenger seat, the distance from the right end of the vehicle to the driver seat or the passenger seat in each vehicle type, and the like are recorded in advance. And the detection part 21 specifies the vehicle type of the vehicle detected from the wide-angle image from the vehicle types recorded in the memory 26, for example, based on the calculated HOG feature value. Then, the detection unit 21 detects the driver's seat or the passenger seat of the vehicle based on the identified vehicle type and the height and distance recorded in the memory 26.

また、検出部21は、検出した車両がオートバイであると判断した場合、当該オートバイの座席を検出する。具体的には、メモリ26には、例えば、オートバイの車種、各車種の形状、各車種における路面から座席までの高さなどが予め記録されている。そして、検出部21は、例えば算出したHOG特徴量に基づいて、メモリ26に記録されているオートバイの車種の中から、広角画像から検出したオートバイの車種を特定する。そして、検出部21は、特定したオートバイの車種およびメモリ26に記録されている高さ等に基づいてオートバイの座席を検出する。   Moreover, the detection part 21 detects the seat of the said motorcycle, when it is judged that the detected vehicle is a motorcycle. Specifically, in the memory 26, for example, a motorcycle model, a shape of each model, a height from a road surface to a seat in each model, and the like are recorded in advance. And the detection part 21 specifies the vehicle model of the motorcycle detected from the wide angle image from the motorcycle model recorded on the memory 26, for example based on the calculated HOG feature-value. Then, the detection unit 21 detects the seat of the motorcycle based on the specified motorcycle model and the height recorded in the memory 26.

そして、検出部21は、広角画像のうち検出した車の運転席、助手席またはオートバイの座席が写っている領域の矩形座標を調整部22に出力する。なお、検出部21は、車の運転席または助手席のいずれか一方だけでなく、運転席と助手席との双方が写っている領域の矩形座標を調整部22に出力してもよい。   Then, the detection unit 21 outputs, to the adjustment unit 22, rectangular coordinates of a region in which the detected driver's seat, front passenger seat, or motorcycle seat in the wide-angle image is shown. Note that the detection unit 21 may output to the adjustment unit 22 rectangular coordinates of an area in which both the driver's seat and the passenger's seat are shown, as well as either the driver's seat or the passenger's seat.

本発明の実施の形態2に係る車両検出装置100bの調整部22は、検出部21から出力された車の運転席、助手席またはオートバイの座席の矩形座標に基づいて、広角画像における車両領域の一部または全部に相当する、当該車の運転席、助手席またはオートバイの座席がPTZカメラ2の撮像対象となるようにPTZカメラ2を調整する。   The adjustment unit 22 of the vehicle detection device 100b according to the second embodiment of the present invention uses the rectangular coordinates of the driver's seat, the passenger seat, or the motorcycle seat output from the detection unit 21 to determine the vehicle area in the wide-angle image. The PTZ camera 2 is adjusted so that the driver's seat, the passenger seat, or the motorcycle seat corresponding to a part or all of the subject is the imaging target of the PTZ camera 2.

ここで、図6(a)は、本発明の実施の形態2に係る車両検出装置100bの広角カメラ1により撮像された広角画像の一例を示す図であり、図6(b)は、本発明の実施の形態2に係る車両検出装置100bのPTZカメラ2により撮像された拡大画像の一例を示す図である。   Here, FIG. 6 (a) is a diagram illustrating an example of a wide-angle image captured by the wide-angle camera 1 of the vehicle detection device 100b according to Embodiment 2 of the present invention, and FIG. 6 (b) is a diagram illustrating the present invention. It is a figure which shows an example of the enlarged image imaged with the PTZ camera 2 of the vehicle detection apparatus 100b which concerns on this Embodiment 2. FIG.

例えば、図6(a)に示すように、例えば広角カメラ1により撮像された広角画像に車Bが含まれている場合には、検出部21がこの車Bを検出し、さらに、車Bの運転席を検出する。そして、検出部21が、運転席の広角画像における矩形座標を調整部22に出力する。そして、調整部22が、出力された矩形座標に基づいてPTZカメラ2を調整することにより、PTZカメラ2が、図6(b)に示すような運転席の拡大画像を撮像する。   For example, as illustrated in FIG. 6A, when the vehicle B is included in a wide-angle image captured by the wide-angle camera 1, for example, the detection unit 21 detects the vehicle B, and Detect the driver's seat. Then, the detection unit 21 outputs rectangular coordinates in the wide-angle image of the driver's seat to the adjustment unit 22. And the adjustment part 22 adjusts the PTZ camera 2 based on the output rectangular coordinate, and the PTZ camera 2 images the enlarged image of a driver's seat as shown in FIG.6 (b).

本発明の実施の形態2に係る車両検出装置100bの画像処理部23(第2の画像処理部)は、PTZカメラ2により車の運転席、助手席またはオートバイの座席が撮像されると、RAM13に記録された車の運転席、助手席またはオートバイの座席の拡大画像を取得する。そして、画像処理部23は、取得した拡大画像に基づいて、車の運転席、助手席またはオートバイの座席に座る車両の運転者または同乗者などの搭乗者の特徴情報を認識する。なお、特徴情報とは、例えば、目、鼻または口の位置、大きさ、または、形状の組み合わせからなる顔の特徴情報である。   The image processing unit 23 (second image processing unit) of the vehicle detection device 100b according to the second embodiment of the present invention, when the PTZ camera 2 captures an image of a driver seat, a passenger seat, or a motorcycle seat, the RAM 13 An enlarged image of the driver's seat, passenger seat or motorcycle seat recorded in Then, the image processing unit 23 recognizes characteristic information of a passenger such as a driver or a passenger of a vehicle sitting in a driver's seat, a passenger seat, or a motorcycle seat on the basis of the acquired enlarged image. Note that the feature information is, for example, face feature information that is a combination of the position, size, or shape of the eyes, nose, or mouth.

また、画像処理部23は、特徴情報の認識においても、実施の形態1に係る車両検出装置100aの画像処理部23と同様に、アフィン変換等を用いることにより、拡大画像における車の運転席、助手席またはオートバイの座席の画像がPTZカメラ2の向きに影響されて歪むことのないように、拡大画像に含まれる運転席、助手席またはオートバイの座席の画像領域の歪みを補正する。   Further, the image processing unit 23 also recognizes the feature information, like the image processing unit 23 of the vehicle detection device 100a according to Embodiment 1, by using affine transformation or the like, The distortion of the image area of the driver seat, the passenger seat, or the motorcycle seat included in the enlarged image is corrected so that the image of the passenger seat or the motorcycle seat is not distorted by being influenced by the orientation of the PTZ camera 2.

そして、画像処理部23は、RAM13に記録されている拡大画像と、当該拡大画像に対応づけられた日時と、広角画像と、広角カメラ1が設置されている位置を示す位置情報とに加えて、車両の運転者または同乗者の特徴情報をメモリ17に出力し、メモリ17はこれらを記録する。   Then, the image processing unit 23 adds to the enlarged image recorded in the RAM 13, the date and time associated with the enlarged image, the wide-angle image, and the position information indicating the position where the wide-angle camera 1 is installed. The characteristic information of the driver or passenger of the vehicle is output to the memory 17, and the memory 17 records them.

その他の構成および動作は実施の形態1に係る車両検出装置100aと同様であるため、ここでは詳細な説明を繰り返さない。   Since other configurations and operations are similar to those of vehicle detection device 100a according to the first embodiment, detailed description thereof will not be repeated here.

このように、本発明の実施の形態2に係る車両検出装置100bにおいて、検出部21は、車両の座席領域を検出対象に含み、調整部22は、検出部21により検出された座席領域が撮像対象としてPTZカメラ2により撮像されるようにPTZカメラ2を調整する。   As described above, in the vehicle detection device 100b according to the second embodiment of the present invention, the detection unit 21 includes the seat area of the vehicle as a detection target, and the adjustment unit 22 captures the seat area detected by the detection unit 21. The PTZ camera 2 is adjusted so as to be imaged by the PTZ camera 2 as an object.

このような構成により、PTZカメラ2により撮像された画像を、例えば車両の搭乗者が指名手配されている人物であるか否かを判定するために用いることができるので、犯罪捜査などにおいて有効な証拠を取得することができる。   With such a configuration, the image captured by the PTZ camera 2 can be used, for example, to determine whether or not the vehicle occupant is a person who has been nominated, which is effective in criminal investigations and the like. Evidence can be obtained.

また、本発明の実施の形態2に係る車両検出装置100bにおいて、画像処理部23は、PTZカメラ2により車両の座席領域の画像に基づいて車両の搭乗者の特徴情報を認識し、認識した特徴情報をメモリ17に出力し、メモリ17は、座席領域の画像とともに特徴情報を記録する。   In the vehicle detection device 100b according to the second embodiment of the present invention, the image processing unit 23 recognizes the feature information of the vehicle occupant based on the image of the seat area of the vehicle by the PTZ camera 2, and the recognized feature. The information is output to the memory 17, and the memory 17 records the feature information together with the image of the seat area.

このように、PTZカメラ2により撮像された車両の搭乗者の特徴情報が認識されて記録されることにより、この特徴情報を用いて対応する車両の搭乗者が、例えば犯罪者として予め登録されている人物と一致するか否かの判断を精度よく行うことができる。   Thus, the feature information of the vehicle occupant imaged by the PTZ camera 2 is recognized and recorded, so that the corresponding vehicle occupant is registered in advance as a criminal, for example, using this feature information. It is possible to accurately determine whether or not the person matches.

(実施の形態3)
以下、本発明の実施の形態3について図面を用いて説明する。なお、図中同一または相当部分には同一符号を付してその説明は繰り返さない。
(Embodiment 3)
The third embodiment of the present invention will be described below with reference to the drawings. In the drawings, the same or corresponding parts are denoted by the same reference numerals and description thereof will not be repeated.

本発明の実施の形態3に係る車両検出装置100cは、検出部21が、PTZカメラ2の撮像対象として車両のナンバープレートと、車の運転席、助手席またはオートバイの座席などの座席領域とを検出するものである。   In the vehicle detection device 100c according to the third embodiment of the present invention, the detection unit 21 includes a vehicle license plate as an imaging target of the PTZ camera 2 and a seat area such as a driver seat of a car, a passenger seat, or a motorcycle seat. It is to detect.

再び図3を参照して、本発明の実施の形態3に係る車両検出装置100cは、実施の形態1に係る車両検出装置100aと同様の構成を備えている。車両検出装置100cの検出部21は、車両検出装置100aの検出部21と同様に、広角カメラ1により撮像された広角画像に含まれる車両を検出する。そして、検出部21は、車両を検出した場合、当該車両が車であるか、またはオートバイであるかを判断する。   Referring to FIG. 3 again, vehicle detection device 100c according to Embodiment 3 of the present invention has the same configuration as vehicle detection device 100a according to Embodiment 1. The detection unit 21 of the vehicle detection device 100c detects a vehicle included in the wide-angle image captured by the wide-angle camera 1, similarly to the detection unit 21 of the vehicle detection device 100a. Then, when detecting the vehicle, the detection unit 21 determines whether the vehicle is a car or a motorcycle.

また、検出部21は、検出した車両が車であると判断した場合、実施の形態1に係る車両検出装置100aの検出部21と同様に、当該車のナンバープレートを検出する。さらに、検出部21は、実施の形態2に係る車両検出装置100bの検出部21と同様に、当該車の運転席または助手席を検出する。そして、検出部21は、広角画像のうち検出した車のナンバープレート、および、車の運転席または助手席が写っている領域の矩形座標を調整部22に出力する。   In addition, when the detection unit 21 determines that the detected vehicle is a vehicle, the detection unit 21 detects the number plate of the vehicle in the same manner as the detection unit 21 of the vehicle detection device 100a according to the first embodiment. Furthermore, the detection unit 21 detects the driver seat or the passenger seat of the vehicle, similarly to the detection unit 21 of the vehicle detection device 100b according to the second embodiment. Then, the detection unit 21 outputs the detected vehicle license plate in the wide-angle image and the rectangular coordinates of the region where the driver's seat or the passenger seat of the vehicle is reflected to the adjustment unit 22.

また、検出部21は、検出した車両がオートバイであると判断した場合、実施の形態2に係る車両検出装置100bの検出部21と同様に、当該オートバイの座席を検出する。さらに、検出部21は、実施の形態1に係る車両検出装置100aの検出部21と同様に、例えば、広角画像においてオートバイが写っている領域の矩形座標の位置の変化に基づいてオートバイの走行速度および走行方向を算出し、算出した走行速度および走行方向に基づいてPTZカメラ2が当該オートバイを後方から撮像可能なタイミングを算出する。   In addition, when the detection unit 21 determines that the detected vehicle is a motorcycle, the detection unit 21 detects the seat of the motorcycle similarly to the detection unit 21 of the vehicle detection device 100b according to the second embodiment. Furthermore, as with the detection unit 21 of the vehicle detection device 100a according to the first embodiment, the detection unit 21 is based on, for example, a change in the position of rectangular coordinates in a region where the motorcycle is shown in the wide-angle image. Then, the traveling direction is calculated, and the timing at which the PTZ camera 2 can image the motorcycle from the rear is calculated based on the calculated traveling speed and traveling direction.

そして、検出部21は、PTZカメラ2がオートバイを前方から撮像する場合におけるオートバイの座席の矩形座標、PTZカメラ2がオートバイを後方から撮像する場合における撮像タイミング、当該タイミングにおけるオートバイの推定走行位置、当該推定走行位置におけるオートバイのナンバープレートの矩形座標を調整部22に出力する。   And the detection part 21 is a rectangular coordinate of the motorcycle seat when the PTZ camera 2 images the motorcycle from the front, an imaging timing when the PTZ camera 2 images the motorcycle from the rear, an estimated traveling position of the motorcycle at the timing, The rectangular coordinates of the motorcycle license plate at the estimated traveling position are output to the adjusting unit 22.

本発明の実施の形態3に係る車両検出装置100cの調整部22は、検出部21から出力されたナンバープレート、車の運転席、助手席またはオートバイの座席の矩形座標に基づいて、広角画像における車両領域の一部または全部に相当する、当該ナンバープレートと、車の運転席、助手席またはオートバイの座席とがPTZカメラ2の撮像対象となるようにPTZカメラ2を調整する。   The adjustment unit 22 of the vehicle detection device 100c according to Embodiment 3 of the present invention is based on the rectangular coordinates of the license plate, the driver's seat of the car, the passenger seat, or the motorcycle seat output from the detection unit 21. The PTZ camera 2 is adjusted so that the number plate corresponding to a part or all of the vehicle area and the driver's seat, front passenger seat, or motorcycle seat of the car are the imaging targets of the PTZ camera 2.

すなわち、PTZカメラ2は、調整部22により調整されることにより、車両のナンバープレートの拡大画像と、車の運転席、助手席またはオートバイの座席の拡大画像とを撮像する。なお、PTZカメラ2は、ナンバープレートの拡大画像、および、車の運転席、助手席またはオートバイの座席の拡大画像のうち、いずれの拡大画像を先に撮像してもよい。   That is, the PTZ camera 2 is adjusted by the adjusting unit 22 to capture an enlarged image of the vehicle license plate and an enlarged image of the driver's seat, passenger seat, or motorcycle seat of the car. Note that the PTZ camera 2 may first pick up any of the enlarged images of the license plate and the enlarged image of the driver's seat, front passenger seat, or motorcycle seat of the car.

ここで、図7(a)は、本発明の実施の形態3に係る車両検出装置100cの広角カメラ1により撮像された広角画像の一例を示す図であり、図7(b)は、本発明の実施の形態3に係る車両検出装置100cのPTZカメラ2により撮像されたオートバイCの座席の拡大画像の一例を示す図であり、図7(c)は、本発明の実施の形態3に係る車両検出装置100cのPTZカメラ2により撮像されたオートバイCのナンバープレートの拡大画像の一例を示す図である。   Here, Fig.7 (a) is a figure which shows an example of the wide angle image imaged with the wide angle camera 1 of the vehicle detection apparatus 100c which concerns on Embodiment 3 of this invention, FIG.7 (b) is this invention. It is a figure which shows an example of the enlarged image of the seat of the motorcycle C imaged with the PTZ camera 2 of the vehicle detection apparatus 100c which concerns on this Embodiment 3, FIG.7 (c) concerns on Embodiment 3 of this invention. It is a figure which shows an example of the enlarged image of the number plate of the motorcycle C imaged with the PTZ camera 2 of the vehicle detection apparatus 100c.

例えば、図7(a)に示すように、例えば広角カメラ1により撮像された広角画像にオートバイCが含まれている場合には、検出部21がこのオートバイCを検出し、さらに、オートバイCの座席を検出する。また、検出部21が、PTZカメラ2によりオートバイCが後方から撮像される場合における撮像タイミング、当該タイミングにおけるオートバイCの推定走行位置、当該推定走行位置におけるオートバイCのナンバープレートの矩形座標を算出する。   For example, as shown in FIG. 7A, when a motorcycle C is included in a wide-angle image captured by the wide-angle camera 1, for example, the detection unit 21 detects the motorcycle C. Detect seats. Further, the detection unit 21 calculates the imaging timing when the motorcycle C is imaged from behind by the PTZ camera 2, the estimated traveling position of the motorcycle C at the timing, and the rectangular coordinates of the number plate of the motorcycle C at the estimated traveling position. .

そして、検出部21が、PTZカメラ2によりオートバイCが前方から撮像される場合におけるオートバイCの座席の矩形座標、PTZカメラ2によりオートバイCが後方から撮像される場合における撮像タイミング、当該タイミングにおけるオートバイの推定走行位置、当該推定走行位置におけるオートバイCのナンバープレートの矩形座標を調整部22に出力する。   And the detection part 21 has the rectangular coordinate of the seat of the motorcycle C when the motorcycle C is imaged from the front by the PTZ camera 2, the imaging timing when the motorcycle C is imaged from the rear by the PTZ camera 2, and the motorcycle at the timing And the rectangular coordinates of the license plate of the motorcycle C at the estimated traveling position are output to the adjusting unit 22.

そして、調整部22がPTZカメラ2を調整することにより、図7(b)に示すように、PTZカメラ2は、オートバイCの座席の拡大画像をオートバイCの前方から撮像する。さらに、調整部22がPTZカメラ2を調整することにより、図7(c)に示すように、PTZカメラ2は、オートバイCのナンバープレートN2の拡大画像をオートバイCの後方から撮像する。   Then, the adjustment unit 22 adjusts the PTZ camera 2 so that the PTZ camera 2 captures an enlarged image of the seat of the motorcycle C from the front of the motorcycle C as shown in FIG. Further, the adjustment unit 22 adjusts the PTZ camera 2 so that the PTZ camera 2 captures an enlarged image of the license plate N2 of the motorcycle C from behind the motorcycle C as shown in FIG.

なお、例えば、車両検出装置100cが複数のPTZカメラ2a,2bを備えている場合には、調整部22が複数のPTZカメラ2a,2bを調整することにより、PTZカメラ2aがオートバイCの座席の拡大画像をオートバイCの前方から撮像し、PTZカメラ2bがオートバイCのナンバープレートN2の拡大画像をPTZカメラ2aとは異なる撮像タイミングでオートバイCの後方から撮像することも可能である。   For example, when the vehicle detection device 100c includes a plurality of PTZ cameras 2a and 2b, the adjustment unit 22 adjusts the plurality of PTZ cameras 2a and 2b, so that the PTZ camera 2a is attached to the seat of the motorcycle C. An enlarged image can be taken from the front of the motorcycle C, and the PTZ camera 2b can take an enlarged image of the license plate N2 of the motorcycle C from behind the motorcycle C at an imaging timing different from that of the PTZ camera 2a.

本発明の実施の形態3に係る車両検出装置100cの画像処理部23(第1の画像処理部または第2の画像処理部)は、PTZカメラ2により撮像された車の運転席、助手席またはオートバイの座席の拡大画像に基づいて、車両の運転者または同乗者などの搭乗者の特徴情報を認識する。また、画像処理部23は、PTZカメラ2により撮像された車両のナンバープレートの拡大画像に基づいて、車両の車両番号を認識する。なお、車両検出装置100cは複数の画像処理部を備え、第1の画像処理部が車両の搭乗者の特徴情報を認識し、第2の画像処理部が車用の車両番号を認識する構成であってもよい。   The image processing unit 23 (first image processing unit or second image processing unit) of the vehicle detection device 100c according to the third embodiment of the present invention is a driver's seat, a passenger seat, or a passenger seat captured by the PTZ camera 2. Based on the enlarged image of the motorcycle seat, the feature information of a passenger such as a vehicle driver or a passenger is recognized. Further, the image processing unit 23 recognizes the vehicle number of the vehicle based on the enlarged image of the vehicle license plate imaged by the PTZ camera 2. The vehicle detection device 100c includes a plurality of image processing units, the first image processing unit recognizes the feature information of the vehicle occupant, and the second image processing unit recognizes the vehicle number for the vehicle. There may be.

そして、画像処理部23は、RAM13に記録されている拡大画像と、当該拡大画像に対応づけられた日時と、広角画像と、広角カメラ1が設置されている位置を示す位置情報とに加えて、車両の運転者または同乗者の特徴情報と、車両の車両番号とをメモリ17に出力し、メモリ17はこれらを記録する。   Then, the image processing unit 23 adds to the enlarged image recorded in the RAM 13, the date and time associated with the enlarged image, the wide-angle image, and the position information indicating the position where the wide-angle camera 1 is installed. The characteristic information of the driver or passenger of the vehicle and the vehicle number of the vehicle are output to the memory 17, and the memory 17 records them.

その他の構成および動作は実施の形態1に係る車両検出装置100aと同様であるため、ここでは詳細な説明を繰り返さない。   Since other configurations and operations are similar to those of vehicle detection device 100a according to the first embodiment, detailed description thereof will not be repeated here.

このように、本発明の実施の形態3に係る車両検出装置100cにおいて、検出部21は、オートバイの座席領域およびナンバープレートを検出対象に含み、調整部22は、オートバイの前方から、検出部21により検出された座席領域が撮像対象としてPTZカメラ2により撮像され、オートバイの後方から、検出部21により検出されたナンバープレートが撮像対象としてPTZカメラ2により撮像されるようにPTZカメラ2を調整する。   Thus, in the vehicle detection device 100c according to the third embodiment of the present invention, the detection unit 21 includes the motorcycle seat area and the license plate as detection targets, and the adjustment unit 22 detects the detection unit 21 from the front of the motorcycle. The PTZ camera 2 is adjusted so that the seat area detected by the PTZ camera 2 is imaged by the PTZ camera 2 as an imaging target, and the license plate detected by the detection unit 21 is imaged by the PTZ camera 2 from the rear of the motorcycle. .

このような構成により、車両がオートバイである場合であっても当該オートバイの座席およびナンバープレートをPTZカメラ2により撮像することができる。   With such a configuration, even if the vehicle is a motorcycle, the motorcycle seat and license plate can be imaged by the PTZ camera 2.

上記実施の形態は、すべての点で例示であって制限的なものではないと考えられるべきである。本発明の範囲は、上記説明ではなく特許請求の範囲によって示され、特許請求の範囲と均等の意味および範囲内でのすべての変更が含まれることが意図される。   The above embodiment should be considered as illustrative in all points and not restrictive. The scope of the present invention is defined by the terms of the claims, rather than the description above, and is intended to include any modifications within the scope and meaning equivalent to the terms of the claims.

1 広角カメラ(第1撮像部)
2,2a,2b PTZカメラ(第2撮像部)
3 外部モニタ
10 画像取得部
11,14 映像入力部
12,15 A/D変換部
13 RAM
16 情報処理部
17 メモリ(記録部)
18 D/A変換部
19 出力部
20 タイマー
21 検出部
22 調整部
23 画像処理部(第1の画像処理部、第2の画像処理部)
24 通信部
25 交通情報作成部
30 交通信号制御装置
31 信号灯器
50 データ蓄積部
60 交通情報管理装置
100a 車両検出装置(実施の形態1)
100b 車両検出装置(実施の形態2)
100c 車両検出装置(実施の形態3)
1 Wide-angle camera (first imaging unit)
2, 2a, 2b PTZ camera (second imaging unit)
3 External monitor 10 Image acquisition unit 11, 14 Video input unit 12, 15 A / D conversion unit 13 RAM
16 Information processing section 17 Memory (recording section)
18 D / A conversion unit 19 Output unit 20 Timer 21 Detection unit 22 Adjustment unit 23 Image processing unit (first image processing unit, second image processing unit)
24 Communication Unit 25 Traffic Information Creation Unit 30 Traffic Signal Control Device 31 Signal Lamp 50 Data Storage Unit 60 Traffic Information Management Device 100a Vehicle Detection Device (Embodiment 1)
100b Vehicle detection apparatus (Embodiment 2)
100c Vehicle detection apparatus (Embodiment 3)

Claims (12)

第1撮像部により撮像された画像に含まれる車両領域を検出するための検出部と、
前記検出部により検出された前記車両領域の一部または全部が、前記第1撮像部よりも小さな画角に調整可能な第2撮像部により撮像されるように、前記第2撮像部を調整するための調整部と、
前記第2撮像部により撮像された画像を記録するための記録部とを備える、車両検出装置。
A detection unit for detecting a vehicle region included in the image captured by the first imaging unit;
The second imaging unit is adjusted so that a part or all of the vehicle area detected by the detection unit is imaged by the second imaging unit that can be adjusted to a smaller angle of view than the first imaging unit. An adjustment section for,
A vehicle detection apparatus comprising: a recording unit configured to record an image captured by the second imaging unit.
前記検出部は、車両のナンバープレートを検出対象に含み、
前記調整部は、前記検出部により検出された前記ナンバープレートが撮像対象として前記第2撮像部により撮像されるように前記第2撮像部を調整する、請求項1に記載の車両検出装置。
The detection unit includes a vehicle license plate as a detection target,
2. The vehicle detection device according to claim 1, wherein the adjustment unit adjusts the second imaging unit such that the license plate detected by the detection unit is imaged by the second imaging unit as an imaging target.
前記車両検出装置は、さらに、
前記第2撮像部により撮像された前記ナンバープレートの画像に基づいて前記車両の車両番号を認識し、認識結果を前記記録部に出力するための第1の画像処理部を備え、
前記記録部は、前記ナンバープレートの画像とともに前記認識結果を記録する、請求項2に記載の車両検出装置。
The vehicle detection device further includes:
A first image processing unit for recognizing a vehicle number of the vehicle based on an image of the license plate imaged by the second imaging unit and outputting a recognition result to the recording unit;
The vehicle detection device according to claim 2, wherein the recording unit records the recognition result together with an image of the license plate.
前記検出部は、車両の座席領域を検出対象に含み、
前記調整部は、前記検出部により検出された前記座席領域が撮像対象として前記第2撮像部により撮像されるように前記第2撮像部を調整する、請求項1から請求項3のいずれか1項に記載の車両検出装置。
The detection unit includes a vehicle seat area as a detection target,
The adjustment unit adjusts the second imaging unit so that the seat area detected by the detection unit is imaged by the second imaging unit as an imaging target. The vehicle detection device according to item.
前記車両検出装置は、さらに、
前記第2撮像部により撮像された前記座席領域の画像に基づいて前記車両の搭乗者の特徴情報を認識し、認識した前記特徴情報を前記記録部に出力するための第2の画像処理部を備え、
前記記録部は、前記座席領域の画像とともに前記特徴情報を記録する、請求項4に記載の車両検出装置。
The vehicle detection device further includes:
A second image processing unit for recognizing feature information of a passenger of the vehicle based on an image of the seat area imaged by the second imaging unit and outputting the recognized feature information to the recording unit; Prepared,
The vehicle detection device according to claim 4, wherein the recording unit records the feature information together with an image of the seat area.
前記検出部は、オートバイの座席領域およびナンバープレートを検出対象に含み、
前記調整部は、前記オートバイの前方から、前記検出部により検出された前記座席領域が撮像対象として前記第2撮像部により撮像され、前記オートバイの後方から、前記検出部により検出された前記ナンバープレートが撮像対象として前記第2撮像部により撮像されるように前記第2撮像部を調整する、請求項1に記載の車両検出装置。
The detection unit includes a motorcycle seat area and a license plate as detection targets,
The adjustment unit is configured such that the seat area detected by the detection unit is imaged by the second imaging unit as an imaging target from the front of the motorcycle, and the license plate detected by the detection unit from the rear of the motorcycle. The vehicle detection device according to claim 1, wherein the second imaging unit is adjusted such that the second imaging unit is imaged as an imaging target.
前記検出部は、前記第1撮像部により撮像された画像全体について、車両の形状のHOG(Histograms of Oriented Gradients)特徴量を算出し、算出したHOG特徴量について、SVM(Support vector machine)を用いてパターン認識を行うことにより、前記第1撮像部により撮像された画像において前記車両領域を検出する、請求項1から請求項6のいずれか1項に記載の車両検出装置。   The detection unit calculates a HOG (Histograms of Oriented Gradients) feature amount of the vehicle shape for the entire image captured by the first imaging unit, and uses an SVM (Support vector machine) for the calculated HOG feature amount. The vehicle detection device according to claim 1, wherein the vehicle region is detected in an image captured by the first imaging unit by performing pattern recognition. 前記検出部は、前記第1撮像部により撮像された画像から複数の車両領域を検出した場合には、予め定められた基準に従って前記複数の車両領域の優先順位をそれぞれ設定し、
前記調整部は、前記優先順位が高い車両領域の一部または全部から順に前記第2撮像部により撮像されるように、前記第2撮像部を調整する、請求項1から請求項7のいずれか1項に記載の車両検出装置。
The detection unit, when detecting a plurality of vehicle areas from the image captured by the first imaging unit, respectively sets the priority order of the plurality of vehicle areas according to a predetermined criterion,
The said adjustment part adjusts the said 2nd imaging part so that an image may be picked up by the said 2nd imaging part in order from a part or all of the vehicle area with the said high priority. The vehicle detection device according to claim 1.
前記記録部は、前記第2撮像部により撮像された画像とともに、前記第1撮像部が設置されている位置を示す位置情報を記録する、請求項1から請求項8のいずれか1項に記載の車両検出装置。   The said recording part records the positional information which shows the position where the said 1st imaging part is installed with the image imaged by the said 2nd imaging part, The any one of Claims 1-8. Vehicle detection device. 前記車両検出装置は、さらに、
前記第1撮像部により撮像された画像に基づいて交通情報を作成するための交通情報作成部を備える、請求項1から請求項9のいずれか1項に記載の車両検出装置。
The vehicle detection device further includes:
The vehicle detection device according to any one of claims 1 to 9, further comprising a traffic information creating unit for creating traffic information based on an image captured by the first imaging unit.
車両検出装置における車両検出方法であって、
第1撮像部により撮像された画像に含まれる車両領域を検出するステップと、
検出した前記車両領域の一部または全部が、前記第1撮像部よりも小さな画角に調整可能な第2撮像部により撮像されるように、前記第2撮像部を調整するステップとを含む、車両検出方法。
A vehicle detection method in a vehicle detection device,
Detecting a vehicle area included in an image captured by the first imaging unit;
Adjusting the second imaging unit so that a part or all of the detected vehicle area is imaged by a second imaging unit that can be adjusted to a smaller angle of view than the first imaging unit. Vehicle detection method.
車両検出装置に用いられる車両検出プログラムであって、
コンピュータに、
第1撮像部により撮像された画像に含まれる車両領域を検出するステップと、
検出した前記車両領域の一部または全部が、前記第1撮像部よりも小さな画角に調整可能な第2撮像部により撮像されるように、前記第2撮像部を調整するステップとを実行させるための、車両検出プログラム。
A vehicle detection program used in a vehicle detection device,
On the computer,
Detecting a vehicle area included in an image captured by the first imaging unit;
Adjusting the second imaging unit so that a part or all of the detected vehicle area is imaged by the second imaging unit that can be adjusted to a smaller angle of view than the first imaging unit. Vehicle detection program for
JP2012047647A 2012-03-05 2012-03-05 Vehicle detection device, vehicle detection method and vehicle detection program Pending JP2013182550A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2012047647A JP2013182550A (en) 2012-03-05 2012-03-05 Vehicle detection device, vehicle detection method and vehicle detection program

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2012047647A JP2013182550A (en) 2012-03-05 2012-03-05 Vehicle detection device, vehicle detection method and vehicle detection program

Publications (1)

Publication Number Publication Date
JP2013182550A true JP2013182550A (en) 2013-09-12

Family

ID=49273133

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2012047647A Pending JP2013182550A (en) 2012-03-05 2012-03-05 Vehicle detection device, vehicle detection method and vehicle detection program

Country Status (1)

Country Link
JP (1) JP2013182550A (en)

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2016170735A (en) * 2015-03-13 2016-09-23 富士通株式会社 Dynamic image data storage device, dynamic image data storage program, dynamic image data storage method, and dynamic image data storage system
JP2017208733A (en) * 2016-05-19 2017-11-24 キヤノン株式会社 Image processing apparatus, image processing method and program
KR101858099B1 (en) * 2017-02-03 2018-06-27 인천대학교 산학협력단 Method and apparatus for detecting vehicle plates
JP2018152685A (en) * 2017-03-10 2018-09-27 株式会社タダノ Person detection system for work vehicle and work vehicle including the same
KR101932631B1 (en) * 2017-08-25 2018-12-27 서울과학기술대학교 산학협력단 The appratus and method for recognizing car number using three chnnel radar and k-nn algorithm
JP2019061506A (en) * 2017-09-27 2019-04-18 沖電気工業株式会社 Moving object recognition device, program and moving object recognition system
US10922864B2 (en) 2016-05-19 2021-02-16 Canon Kabushiki Kaisha Image processing device, image processing method and program, for object detection in an image
WO2021075277A1 (en) * 2019-10-16 2021-04-22 ソニー株式会社 Information processing device, method, and program

Cited By (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2016170735A (en) * 2015-03-13 2016-09-23 富士通株式会社 Dynamic image data storage device, dynamic image data storage program, dynamic image data storage method, and dynamic image data storage system
JP2017208733A (en) * 2016-05-19 2017-11-24 キヤノン株式会社 Image processing apparatus, image processing method and program
US10922864B2 (en) 2016-05-19 2021-02-16 Canon Kabushiki Kaisha Image processing device, image processing method and program, for object detection in an image
KR101858099B1 (en) * 2017-02-03 2018-06-27 인천대학교 산학협력단 Method and apparatus for detecting vehicle plates
JP2018152685A (en) * 2017-03-10 2018-09-27 株式会社タダノ Person detection system for work vehicle and work vehicle including the same
KR101932631B1 (en) * 2017-08-25 2018-12-27 서울과학기술대학교 산학협력단 The appratus and method for recognizing car number using three chnnel radar and k-nn algorithm
JP2019061506A (en) * 2017-09-27 2019-04-18 沖電気工業株式会社 Moving object recognition device, program and moving object recognition system
WO2021075277A1 (en) * 2019-10-16 2021-04-22 ソニー株式会社 Information processing device, method, and program
US11854278B2 (en) 2019-10-16 2023-12-26 Sony Group Corporation Information processing device and method

Similar Documents

Publication Publication Date Title
JP2013182550A (en) Vehicle detection device, vehicle detection method and vehicle detection program
JP7218535B2 (en) Traffic violation vehicle identification system and server
JP7070683B2 (en) Deterioration diagnosis device, deterioration diagnosis system, deterioration diagnosis method, program
JP4494983B2 (en) Portable vehicle number recognition device and vehicle number recognition method using portable vehicle number recognition device
CN110738150B (en) Camera linkage snapshot method and device and computer storage medium
CN103786644B (en) Apparatus and method for following the trail of peripheral vehicle location
KR101492473B1 (en) Context-aware cctv intergrated managment system with user-based
JP2013164803A (en) Violation vehicle detection device, violation vehicle detection method and violation vehicle detection program
WO2010007718A1 (en) Vehicle vicinity monitoring device
JP6820075B2 (en) Crew number detection system, occupant number detection method, and program
JP5809980B2 (en) Vehicle behavior analysis apparatus and vehicle behavior analysis program
JP6903925B2 (en) Imaging display system, passenger equipment
WO2014054752A1 (en) Image processing device and device for monitoring area in front of vehicle
CN101124610A (en) Image processing method, image processing system, image processing device and computer program
JP2008174028A (en) Target detection system and method
JP4706693B2 (en) Vehicle color determination device, vehicle color determination system, and vehicle color determination method
JP2008257574A (en) Image processing method, image processing device, image processing system and computer program
JP2008004989A (en) Vehicle perimeter display apparatus
JP2014130429A (en) Photographing device and three-dimensional object area detection program
JP2010124300A (en) Image processing apparatus and rear view camera system employing the same
JP2013161281A (en) Traffic image acquisition device, traffic image acquisition method, and traffic image acquisition program
JP2008026999A (en) Obstacle detection system and obstacle detection method
CN107704836B (en) Fatigue driving detection method based on object detection
JP5957182B2 (en) Road surface pattern recognition method and vehicle information recording apparatus
JP2019204434A (en) Information processing device, system, control method for information processing device, and program