JP2011258144A - Image photographing device, image correction processing method and image correction processing program - Google Patents

Image photographing device, image correction processing method and image correction processing program Download PDF

Info

Publication number
JP2011258144A
JP2011258144A JP2010134440A JP2010134440A JP2011258144A JP 2011258144 A JP2011258144 A JP 2011258144A JP 2010134440 A JP2010134440 A JP 2010134440A JP 2010134440 A JP2010134440 A JP 2010134440A JP 2011258144 A JP2011258144 A JP 2011258144A
Authority
JP
Japan
Prior art keywords
image
image data
vehicle
luminance
photographing
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Withdrawn
Application number
JP2010134440A
Other languages
Japanese (ja)
Inventor
Toshio Sato
俊雄 佐藤
Yasuhiro Aoki
泰浩 青木
Osamu Yamaguchi
修 山口
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Toshiba Corp
Original Assignee
Toshiba Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Toshiba Corp filed Critical Toshiba Corp
Priority to JP2010134440A priority Critical patent/JP2011258144A/en
Publication of JP2011258144A publication Critical patent/JP2011258144A/en
Withdrawn legal-status Critical Current

Links

Images

Landscapes

  • Image Processing (AREA)
  • Studio Devices (AREA)

Abstract

PROBLEM TO BE SOLVED: To photograph an image to be photographed clearly through a polarization filter.SOLUTION: An image photographing device comprises a polarization filter 11 for passing only predetermined light of a polarization direction, an image input part 12 for photographing a person in a vehicle through the polarization filter 11 and a windshield 3 by setting the windshield part of the vehicle as a visual field range, a luminance measurement part 14 for determining at least an average luminance from a distribution of a luminance value measured from a photographic image photographed, a correction parameter calculation part 15 for calculating an image correction parameter based on the average luminance determined by the luminance measurement part 14 and an image correction processing part 16 for converting the luminance value of the image data photographed at the image input part based on the image correction parameter.

Description

本発明の実施形態は、画像撮影装置に関する。   Embodiments described herein relate generally to an image capturing apparatus.

車両内の運転者を撮影する場合、走行車両の邪魔にならない場所にカメラを設置し、予め定める所定の距離に近づいたとき、走行車両のフロントガラスを通して車両内の運転者を撮影する。   When photographing a driver in a vehicle, a camera is installed in a place that does not interfere with the traveling vehicle, and when the vehicle approaches a predetermined distance, the driver in the vehicle is photographed through the windshield of the traveling vehicle.

この際、車両内の運転者の撮影画像は、フロントガラスを通して撮影することから、フロントガラス表面での太陽などの外乱光の反射の影響を受ける。その結果、車両内の運転者を明瞭に撮影できない場合や撮影対象画像である運転者を正確に認識できない場合がある。   At this time, since the photographed image of the driver in the vehicle is photographed through the windshield, it is affected by the reflection of ambient light such as the sun on the windshield surface. As a result, there are cases where the driver in the vehicle cannot be clearly photographed or the driver that is the image to be photographed cannot be accurately recognized.

そこで、従来から、カメラの前面側に偏光フィルタを配置し、フロントガラスからの太陽光などの反射の影響を低減する画像処理装置が知られている。   Therefore, conventionally, an image processing apparatus is known in which a polarizing filter is disposed on the front side of the camera to reduce the influence of reflection of sunlight or the like from the windshield.

特公昭５７ −０６７９１６号公報Japanese Patent Publication No.57-067916 特開２００７−０８６７２０号公報JP 2007-086720 A

しかしながら、前述するようにカメラ前面側に偏光フィルタを配置したものは、フロントガラスからの反射の影響を低減できるものの、偏光フィルタを追加したことにより、光の透過量が少なくなるために、撮影画像のコントラストが低下し、撮影画像全体が暗くなってしまう。   However, as described above, the polarizing filter disposed on the front side of the camera can reduce the influence of reflection from the windshield, but the addition of the polarizing filter reduces the amount of light transmitted, so the photographed image is taken. The contrast of the image is reduced and the entire captured image becomes dark.

また、偏光フィルタによる偏光方向が最適な状態に設定されていない場合、光の反射成分が残り、全体的に明るく撮影されてしまう場合がある。   In addition, when the polarization direction by the polarizing filter is not set to an optimum state, a light reflection component may remain and the entire image may be taken brightly.

この発明の実施形態は、走行車両の対象画像を偏光フィルタを通して撮影する場合でも、昼夜・天候に左右されずに明瞭に認識できるように撮影する画像撮影装置を提供する。   The embodiment of the present invention provides an image capturing device that captures a target image of a traveling vehicle so that the target image can be clearly recognized without being affected by daytime and weather, even when the target image is captured through a polarizing filter.

上記課題を解決するために、発明の実施形態によれば、車両の少なくともフロントガラス部分を視野範囲とし、所定の偏光方向の光を通過させる偏光フィルタ及び前記フロントガラスを通して前記車両内の人物を撮影する撮影手段と、この撮影手段で撮影された画像データから計測される輝度値の分布から少なくとも平均輝度を求める輝度計測手段と、この輝度計測手段で求めた平均輝度に基づいて、前記偏光フィルタからの透過光量の低下や外乱光の反射成分の影響を抑制する画像補正パラメータを計算する補正パラメータ計算手段と、この補正パラメータ計算手段で得られた画像補正パラメータのもとに、撮影手段で撮影された画像データの輝度値を変換し、この変換された輝度値の画像データを出力する画像補正手段とを備えた画像撮影装置である。   In order to solve the above-described problem, according to an embodiment of the present invention, a person in the vehicle is photographed through a polarizing filter that allows light of a predetermined polarization direction to pass through at least a windshield portion of the vehicle and to pass light in a predetermined polarization direction. Photographing means, luminance measuring means for obtaining at least an average luminance from a distribution of luminance values measured from image data photographed by the photographing means, and the polarization filter based on the average luminance obtained by the luminance measuring means. A correction parameter calculation means for calculating an image correction parameter that suppresses the influence of a decrease in the amount of transmitted light and a reflection component of disturbance light, and an image pickup means based on the image correction parameter obtained by the correction parameter calculation means. Image correction means for converting the brightness value of the image data and outputting the image data of the converted brightness value. It is a device.

実施形態１に係る画像撮影装置画像、補正処理方法を説明する構成図。FIG. 3 is a configuration diagram illustrating an image capturing device image and a correction processing method according to the first embodiment. 走行車両の邪魔にならないように画像入力部を配置して車両内の人物を撮影する一配置例図。The arrangement example figure which arrange | positions an image input part so that it may not interfere with a traveling vehicle, and image | photographs the person in a vehicle. 画像入力部が太陽等の外乱光の存在しない例えば夜間モード等の条件下で捉えている撮影画像の模式図。The schematic diagram of the picked-up image which the image input part has caught on conditions, such as night mode, in which disturbance lights, such as the sun, do not exist. 画像入力部が太陽等の外乱光の強い反射を受けている条件下で捉えている撮影画像の模式図。The schematic diagram of the picked-up image captured on the conditions where the image input part receives strong reflection of disturbance lights, such as the sun. 図３の状態にて画像入力部で撮影される人物の画像の一例を示す模式図。FIG. 4 is a schematic diagram illustrating an example of an image of a person photographed by an image input unit in the state of FIG. 3. 図５で撮影された人物の画像データの輝度値ヒストグラム特性を示す図。The figure which shows the luminance value histogram characteristic of the image data of the person image | photographed in FIG. 図４の状態にて画像入力部で撮影される人物の画像の一例を示す模式図。The schematic diagram which shows an example of the image of the person image | photographed with the image input part in the state of FIG. 図７で撮影された人物の画像データの輝度値ヒストグラム特性を示す図。The figure which shows the luminance value histogram characteristic of the image data of the person image | photographed in FIG. 図６、図８の輝度分布の輝度平均値をずらして所要とする倍率で拡大してコントライトを高くした図The figure which heightened the control light by shifting the luminance average value of the luminance distribution of FIG. 6 and FIG. 実施形態２に係る画像撮影装置を示す構成図。FIG. 5 is a configuration diagram illustrating an image capturing device according to a second embodiment. 制御パラメータ設定部で使用される制御パラメータテーブルのデータ配列例図。The data array example figure of the control parameter table used in a control parameter setting part. 実施形態３に係る画像撮影装置、画像補正処理方法を説明する構成図。FIG. 10 is a configuration diagram illustrating an image capturing device and an image correction processing method according to a third embodiment. 実施形態４に係る画像撮影装置、画像補正処理方法を説明するを示す構成図。FIG. 9 is a configuration diagram illustrating an image capturing device and an image correction processing method according to a fourth embodiment. 一般の契約駐車場に実施形態４に係る画像撮影装置を適用した場合の最終出力としての画面表示の一例を示す図。The figure which shows an example of the screen display as a last output at the time of applying the imaging device concerning Embodiment 4 to a general contract parking lot.

以下、実施形態について、図面を参照して説明する。
（実施形態１）
図１は実施形態１に係る画像撮影装置を示す構成図である。 Hereinafter, embodiments will be described with reference to the drawings.
(Embodiment 1)
FIG. 1 is a configuration diagram illustrating an image capturing apparatus according to the first embodiment.

この画像撮影装置は、例えば高速道路等の有料道路の料金所を通過する車両内の人物の顔画像、または車両内の人物の顔画像及び車両のナンバープレートの画像を同時に撮影する装置であって、偏光フィルタ１１、画像入力部１２、画像メモリ１３、輝度計測部１４、補正パラメータ計算部１５及び画像補正処理部１６を含む構成である。   This image capturing device is a device that simultaneously captures a face image of a person in a vehicle passing through a toll gate on a toll road such as an expressway, or a face image of a person in the vehicle and a license plate image of the vehicle at the same time. , A polarizing filter 11, an image input unit 12, an image memory 13, a luminance measurement unit 14, a correction parameter calculation unit 15, and an image correction processing unit 16.

偏光フィルタ１１は、一定の偏光方向の光を主に透過させることにより、太陽などの外乱光ＳによるフロントガラスＧでの反射成分をカットし、車両内の人物Ｐの画像を透過させる機能を有する。ここで、人物Ｐとは少なくとも車両内の運転者を含む概念である。   The polarizing filter 11 has a function of cutting a reflection component on the windshield G due to disturbance light S such as the sun by mainly transmitting light in a certain polarization direction and transmitting an image of the person P in the vehicle. . Here, the person P is a concept including at least a driver in the vehicle.

画像入力部１２は、車両及び車両内の人物を撮影するディジタルカメラやアナログカメラなどの撮影手段であって、少なくともレンズ、ＣＣＤやＣＭＯＳ等の固体撮像素子からなる感光部が設けられている。   The image input unit 12 is a photographing unit such as a digital camera or an analog camera that photographs a vehicle and a person in the vehicle, and is provided with at least a photosensitive unit including a lens and a solid-state imaging device such as a CCD or a CMOS.

画像入力部１２は、レンズを介して車両に乗車している人物Ｐの画像を取り込み、ＣＣＤ等の固体撮像素子に結像させることによって撮影し、この撮影されたフレーム画像データごとに画像メモリ１３に蓄積される。なお、アナログカメラの場合には撮影された人物Ｐの画像データを必要に応じてディジタル処理して画像メモリ１３に蓄積される。   The image input unit 12 captures an image of a person P riding in the vehicle through a lens and forms an image on a solid-state image pickup device such as a CCD, and an image memory 13 for each captured frame image data. Accumulated in. In the case of an analog camera, the image data of the photographed person P is digitally processed as necessary and stored in the image memory 13.

なお、偏光フィルタ１１及び画像入力部１２は、図２に示すように、例えば高速道路の料金所内の道路１を走行する車両２の妨げとならないような場所，例えば道路１の片側に設置され、走行してくる車両２に対して前方斜め方向から少なくともフロントガラス３（Ｇ）を視野範囲内に収めるように設定する。また、画像入力部１２は、同一の視野範囲内にフロントガラス３（Ｇ）のほかに、車両２の車両ナンバープレート４を含めて同時に撮影するようにしてもよい。   In addition, as shown in FIG. 2, the polarizing filter 11 and the image input unit 12 are installed at a place that does not interfere with the vehicle 2 traveling on the road 1 in the toll gate of the highway, for example, on one side of the road 1, It sets so that at least windshield 3 (G) may be included in a field of view range from the diagonal direction ahead with respect to vehicles 2 which run. Further, the image input unit 12 may simultaneously capture images including the vehicle number plate 4 of the vehicle 2 in addition to the windshield 3 (G) within the same visual field range.

輝度計測部１４は、画像メモリ１３から出力され、または画像メモリ１３から取り込むフレーム画像データ全体から外乱光Ｓの反射成分の強度（光量）を計測し、平均輝度及び輝度の分布範囲を求める機能を有する。   The luminance measurement unit 14 has a function of measuring the intensity (light quantity) of the reflection component of the disturbance light S from the entire frame image data output from the image memory 13 or captured from the image memory 13, and obtaining the average luminance and the luminance distribution range. Have.

補正パラメータ計算部１５は、輝度計測部１４で求めた平均輝度と輝度の分布範囲とに基づいて画像補正パラメータを計算し、画像補正処理部１６へ送出する。   The correction parameter calculation unit 15 calculates image correction parameters based on the average luminance and the luminance distribution range obtained by the luminance measurement unit 14 and sends them to the image correction processing unit 16.

画像補正処理部１６は、画像メモリ１３から取り込んだ画像データの入力輝度値に対し、補正パラメータ計算部１５から受け取った画像補正パラメータのもとに所定の輝度変換演算式に則って輝度中心値をずらしつつコントラストを高めるように輝度範囲を拡大変換し出力する。   The image correction processing unit 16 calculates a luminance center value for the input luminance value of the image data fetched from the image memory 13 according to a predetermined luminance conversion arithmetic expression based on the image correction parameter received from the correction parameter calculation unit 15. The luminance range is enlarged and converted so as to increase the contrast while shifting.

なお、画像補正処理部１６の出力側には、図示されていないが、輝度変換された画像データから例えば撮影対象領域を抽出して対象画像（例えば運転者）を認識する画像認識処理部が接続される。   Although not shown in the figure, an image recognition processing unit is connected to the output side of the image correction processing unit 16 so as to extract, for example, a shooting target region from the luminance-converted image data and recognize a target image (for example, a driver). Is done.

次に、以上のように構成された画像撮影装置の作用について説明する。   Next, the operation of the image capturing apparatus configured as described above will be described.

画像入力部１２は、走行車両２が所要とする距離に近づいたとき、偏光フィルタ１１及び車両２のフロントガラス３（Ｇ）を通して走行車両２内の人物を撮影する。   When the traveling vehicle 2 approaches the required distance, the image input unit 12 photographs a person in the traveling vehicle 2 through the polarizing filter 11 and the windshield 3 (G) of the vehicle 2.

このとき、画像入力部１２では、太陽光の有無に応じて車両２内の人物が異なった状態で捉えている。   At this time, the image input unit 12 captures the person in the vehicle 2 in a different state depending on the presence or absence of sunlight.

図３は、図２のように偏光フィルタ１１及び画像入力部１２を配置した条件下において、夜間のように太陽などの外乱光Ｓが存在しないとき、画像入力部１２が捉えている車両２内の人物Ｐの顔画像の例である。   FIG. 3 shows the inside of the vehicle 2 captured by the image input unit 12 when disturbance light S such as the sun does not exist like at night under the condition where the polarizing filter 11 and the image input unit 12 are arranged as shown in FIG. This is an example of the face image of the person P.

図４は、同じく図２のように偏光フィルタ１１及び画像入力部１２を配置した条件下において、太陽などの外乱光Ｓがフロントガラス３で最も強く反射されているとき、画像入力部１２が捉えている車両２内の人物Ｐの顔画像と外乱光Ｓの関係を表す模式図である。すなわち、図４は、外乱光Ｓがフロントガラス３に映りこんだときの模式図であって、人物Ｐの顔画像がフロントガラス３に映りこんだ外乱光Ｓと重なり合った状態で捉えられている。   FIG. 4 shows that when the disturbance light S such as the sun is most strongly reflected by the windshield 3 under the condition where the polarizing filter 11 and the image input unit 12 are arranged as shown in FIG. 3 is a schematic diagram showing the relationship between a face image of a person P in a vehicle 2 and disturbance light S. FIG. That is, FIG. 4 is a schematic diagram when the disturbance light S is reflected on the windshield 3, and is captured in a state where the face image of the person P overlaps with the disturbance light S reflected on the windshield 3. .

そこで、画像入力部１２は、夜間のごとき太陽などの外乱光Ｓが存在しない場合、図５に示すように人物Ｐの顔画像が撮影される。同図から明らかなように、外乱光Ｓの反射の影響は表われていないが、偏光フィルタ１１自体が一定の偏光方向を持つ光のみを透過させることから、低いコントラストを有する人物Ｐの顔画像データとして撮影される。   Therefore, when no disturbance light S such as the sun exists at night, the image input unit 12 captures a face image of the person P as shown in FIG. As is clear from the figure, although the influence of the reflection of the disturbance light S is not shown, the polarization filter 11 itself transmits only light having a certain polarization direction, so that the face image of the person P having a low contrast Photographed as data.

その結果、画像入力部１２で撮影された画像の輝度値ヒストグラムは、図６示すように低い輝度値の輝度範囲に集中した分布状態となる。同図において、ｍは平均輝度、ｓは輝度の分布範囲を示す。   As a result, the luminance value histogram of the image photographed by the image input unit 12 is in a distribution state concentrated in the luminance range of low luminance values as shown in FIG. In the figure, m is the average luminance, and s is the luminance distribution range.

一方、図４のように太陽などの外乱光Ｓがフロントガラス３で最も強く反射されているとき、画像入力部１２は、人物Ｐの顔画像がフロントガラス３に映っている外乱光Ｓと合わさった状態で撮影されることから、図７に示すように外乱光Ｓの反射の影響を受けて全体的に白く撮影され、その中に人物Ｐの顔画像が低いコントラストで撮影されていることが分る。   On the other hand, when the disturbance light S such as the sun is most strongly reflected by the windshield 3 as shown in FIG. 4, the image input unit 12 matches the disturbance light S in which the face image of the person P is reflected on the windshield 3. 7, the image of the face of the person P is photographed at a low contrast, as shown in FIG. 7. I understand.

その結果、画像入力部１２で撮影された画像の輝度値ヒストグラムは、図８に示すように高い輝度値の輝度範囲に集中した分布状態となっている。   As a result, the luminance value histogram of the image photographed by the image input unit 12 is in a distribution state concentrated in the luminance range of high luminance values as shown in FIG.

従って、画像入力部１２としては、偏光フィルタ１１を通して車両２内の人物Ｐの顔画像を撮影した場合、偏光フィルタ１１による透過光量の低減の影響を受けて狭いコントラストの範囲の画像が捉えられ、かつ、フロントガラス３による外乱光Ｓの反射の影響を受けて全体的に輝度値がシフトしたような変動が生じる。   Therefore, when the face image of the person P in the vehicle 2 is photographed as the image input unit 12 through the polarizing filter 11, an image in a narrow contrast range is captured under the influence of the reduction in the amount of transmitted light by the polarizing filter 11, In addition, the brightness value is shifted as a whole due to the influence of the disturbance light S reflected by the windshield 3.

そこで、輝度計測部１４においては、画像入力部１２で撮影された画像全体から外乱光Ｓの反射成分の強度（反射光量）を計測し、図６，図８に示すような人物画像の輝度値ヒストグラムを作成し、画像全体の輝度シフト量を決定するための平均輝度ｍ及び輝度の分布範囲ｓを求め、補正パラメータ計算部１５に送出する。   Therefore, the luminance measurement unit 14 measures the intensity of the reflected component (the amount of reflected light) of the disturbance light S from the entire image captured by the image input unit 12, and the luminance value of the person image as shown in FIGS. A histogram is created, an average luminance m and a luminance distribution range s for determining the luminance shift amount of the entire image are obtained and sent to the correction parameter calculator 15.

ここで、補正パラメータ計算部１５は、輝度計測部１４から受け取った平均輝度ｍ及び輝度の分布範囲ｓに基づいて、式（１）に基づいて画像補正パラメータｂを計算する。   Here, the correction parameter calculation unit 15 calculates the image correction parameter b based on the equation (1) based on the average luminance m and the luminance distribution range s received from the luminance measurement unit 14.

ｂ＝ｍ−（ｓ／２） …… （１）
この画像補正パラメータｂには、少なくとも偏光フィルタ１１からの透過光量の低下に伴う低輝度分布の人物画像に対してコントラストを高めるために補正するゲインに関するパラメータと、前記フロントガラス３から反射する外乱光Ｓの反射成分によって発生する高輝度分布の人物画像に対して輝度値を抑制する方向に補正するシフトに関するパラメータとを含んだものとして計算される。 b = m− (s / 2) (1)
The image correction parameter b includes a parameter relating to a gain to be corrected in order to increase the contrast of a human image having a low luminance distribution accompanying a decrease in the amount of transmitted light from the polarizing filter 11, and disturbance light reflected from the windshield 3. It is calculated as including a parameter relating to a shift for correcting the luminance value in a direction to suppress the luminance value with respect to the human image having a high luminance distribution generated by the reflection component of S.

なお、上式の平均輝度ｍと輝度の分布範囲ｓは、図６及び図８に示す値が相当するが、本実施形態では、輝度の分布範囲ｓは予め求めておいた固定値を用いる。   The average luminance m and the luminance distribution range s in the above formula correspond to the values shown in FIGS. 6 and 8, but in this embodiment, the luminance distribution range s uses a fixed value obtained in advance.

引き続き、画像補正処理部１６では、補正パラメータ計算部１５で計算された画像補正パラメータｂを用い、次の輝度変換式（２）に従って画像メモリ１３から出力され、又は取り込んだ人物Ｐの画像データの入力輝度値ｘを出力輝度値ｙに変換し、図９に示すような高いコントラストを有する人Ｐの画像データを出力する。   Subsequently, the image correction processing unit 16 uses the image correction parameter b calculated by the correction parameter calculation unit 15 and outputs or captures the image data of the person P output from the image memory 13 according to the following luminance conversion equation (2). The input luminance value x is converted into the output luminance value y, and the image data of the person P having a high contrast as shown in FIG. 9 is output.

ｙ＝｛ｘ−ｂ＋（Ｂ／２）｝・（Ｂ／ｓ） …… （２）
但し、上式において、Ｂは画像入力部１２が取り扱う最大輝度値であって、｛ｘ−ｂ＋（Ｂ／２）｝は輝度分布の中心輝度値を表し、（Ｂ／ｓ）は輝度分布の拡大率（倍率）を表す。また、画像入力部１２がディジタル画像を出力する装置の場合には、周辺画素との平均をとることで、輝度変換後の輝度分布が離散的に存在することを防ぐことができる。 y = {x−b + (B / 2)} · (B / s) (2)
However, in the above formula, B is the maximum luminance value handled by the image input unit 12, {x−b + (B / 2)} represents the central luminance value of the luminance distribution, and (B / s) is the luminance distribution. Represents magnification (magnification). Further, in the case where the image input unit 12 is a device that outputs a digital image, it is possible to prevent the luminance distribution after luminance conversion from being discretely present by taking an average with peripheral pixels.

従って、以上のような実施の形態によれば、例えば夜間や太陽などの外乱光Ｓの反射成分の強度が高いとき、低いコントラストの顔画像又は外乱光Ｓの影響を受けて全体的に白く映って小さなコントラストの顔画像となるが、前記式（１）及び式（２）に従って補正処理を実行することにより、図６や図８に示す輝度ヒストグラム特性を持つ顔画像データは、何れも輝度平均値をずらして（Ｂ／ｓ）倍率に従って拡大することにより、図９に示すように高いコントラストの顔画像に変換することができる。これによって、夜間や太陽などの外乱光Ｓの反射成分の強度が高いときでも、昼夜・天候に左右されずに車両内の運転者などの人物を明瞭に認識することが可能な画像を得ることができる。   Therefore, according to the embodiment as described above, for example, when the intensity of the reflected component of the disturbance light S such as nighttime or the sun is high, the entire image appears white under the influence of the low contrast face image or the disturbance light S. However, the face image data having the brightness histogram characteristics shown in FIG. 6 and FIG. 8 are all subjected to the brightness average by executing the correction processing according to the above formulas (1) and (2). By shifting the value and enlarging according to the magnification (B / s), it can be converted into a high-contrast face image as shown in FIG. As a result, even when the intensity of the reflection component of the disturbance light S such as nighttime or the sun is high, an image capable of clearly recognizing a person such as a driver in a vehicle without being influenced by daytime and weather. Can do.

なお、上記実施形態では、画像撮影装置として説明したが、例えば時系列的な一連の処理手順に従って処理する画像補正処理方法の実施形態であっても、画像撮影装置と同様の効果を期待することができる。   In the above embodiment, the image capturing apparatus has been described. However, for example, an image correction processing method that performs processing according to a series of time-series processing procedures is expected to have the same effect as the image capturing apparatus. Can do.

すなわち、画像補正処理方法の実施形態としては、車両２の少なくともフロントガラス３（Ｇ）を視野範囲とし、所定の偏光方向の光を通過させる偏光フィルタ１１及びフロントガラス３（Ｇ）を通して車両内の人物を撮影する画像入力部１２にて撮影する撮影ステップと、この撮影ステップで撮影された画像データ全体から輝度値を計算し、この計算によって得られた輝度値の分布から平均輝度ｍ及び輝度の分布範囲ｓを求める輝度計算ステップと、この輝度計算ステップで求められた平均輝度を用い、前記式（１）に基づいて画像補正パラメータｂを計算する補正パラメータ計算ステップと、この補正パラメータ計算ステップで得られた画像補正パラメータｂのもとに、前記式（２）の輝度変換式を用いて、画像入力部１２で撮影された画像データの輝度値を変換する画像補正処理ステップとを有する処理方法を実施することにより、画像撮影装置と同様の効果を奏する。   That is, as an embodiment of the image correction processing method, at least the windshield 3 (G) of the vehicle 2 is used as a field of view range, and the inside of the vehicle is passed through the polarization filter 11 and the windshield 3 (G) that allow light of a predetermined polarization direction to pass. A luminance value is calculated from a photographing step of photographing at the image input unit 12 for photographing a person, and the entire image data photographed at the photographing step, and the average luminance m and luminance are calculated from the luminance value distribution obtained by this calculation. A luminance calculation step for obtaining the distribution range s, a correction parameter calculation step for calculating the image correction parameter b based on the equation (1) using the average luminance obtained in the luminance calculation step, and a correction parameter calculation step Based on the obtained image correction parameter b, the image was captured by the image input unit 12 using the brightness conversion formula of the formula (2). By carrying out the processing method and an image correction processing step of converting the luminance value of the image data, the same effects as the image capturing device.

なお、輝度の分布範囲ｓは、前述したように予め求めておいた固定値を用いてもよい。   The luminance distribution range s may be a fixed value obtained in advance as described above.

さらに、ＣＰＵを備えた画像処理用コンピュータを用いる場合、輝度計測部１４、補正パラメータ計算部１５及び画像補正処理部１６の一連の処理手順をプログラムデータとして記録媒体に記憶し、画像処理用コンピュータに読み取らせて実行することにより、画像撮影装置で得られる同様の効果を奏することができる。   Further, when an image processing computer having a CPU is used, a series of processing procedures of the luminance measurement unit 14, the correction parameter calculation unit 15, and the image correction processing unit 16 are stored as program data in a recording medium, and stored in the image processing computer. By reading and executing, it is possible to achieve the same effect obtained by the image photographing apparatus.

（実施形態２）
図１０は実施形態２に係る画像撮影装置を示す構成図である。
実施形態２は、偏光フィルタ１１、画像入力部１２、画像メモリ１３、輝度計測部１４、補正パラメータ計算部１５、画像補正処理部１６及び制御パラメータ設定部１７を含む構成である。 (Embodiment 2)
FIG. 10 is a configuration diagram illustrating an image capturing apparatus according to the second embodiment.
The second embodiment includes a polarization filter 11, an image input unit 12, an image memory 13, a luminance measurement unit 14, a correction parameter calculation unit 15, an image correction processing unit 16, and a control parameter setting unit 17.

実施形態２に係る画像撮影装置は、図１に示す実施形態１の構成に新たに、制御パラメータ設定部１６を追加したものであって、その他の構成は図１とほぼ同じ構成である。重複する部分の説明は省略する。   The image capturing apparatus according to the second embodiment is a configuration in which a control parameter setting unit 16 is newly added to the configuration of the first embodiment shown in FIG. 1, and the other configurations are substantially the same as those in FIG. The description of the overlapping part is omitted.

先ず、画像入力部１２においては、前述したレンズ、感光部（ＣＣＤ，ＣＭＯＳ等の固体撮像素子）の他、撮影時に明るさに応じて必要な露光量を得るために露光時間（シャッタ速度）を調節する露出調節機構（図示せず）や前記各撮像素子の画像出力をゲイン調整する増幅器（図示せず）が設けられている。   First, in the image input unit 12, in addition to the lens and the photosensitive unit (a solid-state imaging device such as a CCD or CMOS) described above, an exposure time (shutter speed) is set in order to obtain a necessary exposure amount according to the brightness at the time of shooting. An exposure adjusting mechanism (not shown) for adjusting and an amplifier (not shown) for adjusting the gain of the image output of each image sensor are provided.

輝度計測部１４は、画像メモリ１３に格納される画像データの画像全体からフロントガラス３（Ｇ）の外乱光Ｓによる反射成分の強度（光量）を計測し、当該画像全体の平均輝度ｍを求めるものである。   The luminance measuring unit 14 measures the intensity (light quantity) of the reflection component due to the disturbance light S of the windshield 3 (G) from the entire image of the image data stored in the image memory 13 and obtains the average luminance m of the entire image. Is.

制御パラメータ設定部１６は、輝度計測部１４によって求められた平均輝度ｍに従って、画像入力部１２を構成する露出調節機構の露光時間及び各撮像素子出力側の増幅器の増幅ゲインを制御する機能を持っている。一具体例としては、制御パラメータ設定部１７内には、図１１に示すような制御パラメータテーブル１７ａが設けられる。この制御パラメータテーブル１７ａは、各平均輝度ｍｉ（ｉ＝例えば１，２，３，…）に露光時間ｔｊ（ｊ＝例えば１，２，３，…）及び増幅ゲインｇｋ（ｋ＝例えば１，２，３，…）を対応付けたもので、輝度計測部１４から受け取る平均輝度ｍｉに従って必要な露光時間ｔｊ及び増幅ゲインｇｋを取り出し、画像入力部１２に反映する構成である。   The control parameter setting unit 16 has a function of controlling the exposure time of the exposure adjustment mechanism constituting the image input unit 12 and the amplification gain of the amplifier on the output side of each image sensor according to the average luminance m obtained by the luminance measurement unit 14. ing. As a specific example, a control parameter table 17 a as shown in FIG. 11 is provided in the control parameter setting unit 17. The control parameter table 17a includes an exposure time tj (j = 1, 2, 3,...) And an amplification gain gk (k = 1, 1, 2, etc.) for each average luminance mi (i = 1, 2, 3,...). , 3,...), And the necessary exposure time tj and amplification gain gk are extracted according to the average luminance mi received from the luminance measuring unit 14 and reflected in the image input unit 12.

補正パラメータ計算部１５及び画像補正処理部１６については、実施形態1で説明した通りである。   The correction parameter calculation unit 15 and the image correction processing unit 16 are as described in the first embodiment.

次に、以上のように構成された実施形態２に係る画像撮影装置の作用について説明する。   Next, the operation of the image capturing apparatus according to the second embodiment configured as described above will be described.

画像入力部１２は、初期設定される露出調節機構の露光時間のもとにフロントガラス３（Ｇ）を通して車両内の人物Ｐの顔画像を撮影し、その撮影された画像データを画像メモリ１３に格納する。   The image input unit 12 captures the face image of the person P in the vehicle through the windshield 3 (G) under the exposure time of the exposure adjustment mechanism that is initially set, and stores the captured image data in the image memory 13. Store.

輝度計測部１４は、画像メモリ１３に格納された１フレーム分の画像データの画像全体からフロントガラス３（Ｇ）の外乱光Ｓによる反射成分の強度を計測し、当該画像全体のシフト量を決定する平均輝度ｍ（ｍｉ）を求めた後、補正パラメータ計算部１５及び制御パラメータ設定部１７に送出する。   The luminance measuring unit 14 measures the intensity of the reflection component due to the disturbance light S of the windshield 3 (G) from the entire image of the image data for one frame stored in the image memory 13, and determines the shift amount of the entire image. After obtaining the average luminance m (mi) to be transmitted, it is sent to the correction parameter calculation unit 15 and the control parameter setting unit 17.

ここで、制御パラメータ設定部１７は、輝度計測部１４から平均輝度ｍｉを受け取ると、制御パラメータテーブル１７ａを参照し、平均輝度ｍｉに対応付けられた露光時間ｔｊ及び増幅ゲインｇｋを取り出し、画像入力部１２を構成する露出調節機構及び増幅器に設定する。   Here, when the control parameter setting unit 17 receives the average luminance mi from the luminance measurement unit 14, the control parameter setting unit 17 refers to the control parameter table 17a, extracts the exposure time tj and the amplification gain gk associated with the average luminance mi, and inputs the image. The exposure adjustment mechanism and the amplifier constituting the unit 12 are set.

すなわち、制御パラメータ設定部１７は、輝度計測部１４から出力される平均輝度ｍｉに従って、制御パラメータテーブル１７ａから画像入力部１２の撮影条件となる露光時間ｔｊ及び増幅ゲインｇｋを取り出し、画像入力部１２に設定する。一般に、平均輝度ｍｉが小さい場合には、露光時間を長く、増幅ゲインを大きくするような制御パラメータを画像入力部１２に設定する。   That is, the control parameter setting unit 17 takes out the exposure time tj and the amplification gain gk that are the photographing conditions of the image input unit 12 from the control parameter table 17a according to the average luminance mi output from the luminance measurement unit 14, and the image input unit 12 Set to. In general, when the average brightness mi is small, control parameters that increase the exposure time and increase the amplification gain are set in the image input unit 12.

画像入力部１２は、制御パラメータ設定部１７から設定された露光時間ｔｊ及び増幅ゲインｇｋのもとにフロントガラス３（Ｇ）を通して車両内の人物Ｐの顔画像を撮影し、その撮影された画像データを再収集する。   The image input unit 12 captures the face image of the person P in the vehicle through the windshield 3 (G) based on the exposure time tj and the amplification gain gk set from the control parameter setting unit 17, and the captured image Re-collect data.

ここで、輝度計測部１４は、画像入力部１２で再収集された画像データの画像全体から再度フロントガラス３（Ｇ）の外乱光Ｓによる反射成分の強度を計測し、図６や図８に示すように当該画像全体のシフト量を決定する平均輝度ｍ及び輝度分布範囲ｓを計算し、補正パラメータ計算部１５に送出する。   Here, the luminance measurement unit 14 measures the intensity of the reflection component due to the disturbance light S of the windshield 3 (G) again from the entire image of the image data re-collected by the image input unit 12, as shown in FIGS. 6 and 8. As shown, the average luminance m and luminance distribution range s that determine the shift amount of the entire image are calculated and sent to the correction parameter calculator 15.

補正パラメータ計算部１５では、輝度計測部１４から受け取った平均輝度ｍと輝度分布範囲ｓとに基づき、前記式（１）に従って画像補正パラメータｂを求めた後、画像補正処理部１６に渡す。   The correction parameter calculation unit 15 obtains the image correction parameter b according to the equation (1) based on the average luminance m and the luminance distribution range s received from the luminance measurement unit 14 and then passes them to the image correction processing unit 16.

画像補正処理部１６は、補正パラメータ計算部１５で受け取った画像補正パラメータｂを用い、前記式（２）の輝度変換式に従って画像メモリ１３から取り込んだ人物Ｐの顔画像の入力輝度値ｘを出力輝度値ｙに変換し、図９に示すような高いコントラストの人物Ｐの顔画像データを出力する。   The image correction processing unit 16 uses the image correction parameter b received by the correction parameter calculation unit 15 and outputs the input luminance value x of the face image of the person P captured from the image memory 13 according to the luminance conversion equation of the above equation (2). The face value data of the person P with high contrast as shown in FIG.

従って、以上のような実施の形態によれば、実施の形態１と同様の効果を奏する他、ディジタル的な画像補正処理だけでフロントガラス越しに撮影した人物画像の品質が良くならない場合であっても、画像入力部１２を構成するカメラ本体側のゲイン等を制御することにより、更に人物画像の品質を高めることができる。   Therefore, according to the embodiment as described above, the same effect as in the first embodiment is obtained, and the quality of the person image taken through the windshield is not improved only by the digital image correction process. In addition, the quality of the person image can be further improved by controlling the gain on the camera body side constituting the image input unit 12.

なお、前記実施の形態では、輝度計測部１４で求めた平均輝度ｍのもとに制御パラメータテーブル１７ａを参照し、平均輝度ｍに対応する露光時間及び増幅ゲインを得るようにしたが、式（１）及び式（２）の演算式に相当する計算を実施し、撮影条件を制御してもよい。因みに、平均輝度ｍのもとにゲインに相当するパラメータである前記式（２）の（Ｂ／ｓ）を計算し、得られたゲインを用いて、増幅ゲインを制御してもよい。   In the above embodiment, the exposure time and the amplification gain corresponding to the average luminance m are obtained by referring to the control parameter table 17a based on the average luminance m obtained by the luminance measuring unit 14, but the equation ( Calculations corresponding to the arithmetic expressions 1) and (2) may be performed to control the imaging conditions. Incidentally, the amplification gain may be controlled using the gain obtained by calculating (B / s) of the equation (2) which is a parameter corresponding to the gain based on the average luminance m.

（実施形態３）
図１２は実施形態３に係る画像撮影装置を示す構成図である。
実施形態３に係る画像撮影装置は、偏光フィルタ１１、画像入力部１２及び画像メモリ１３の他、複数の画像補正処理部２１−１，２１−２、複数の顔画像検出部２２−１，２２−２、検出結果判定部２３及び画像データ選別部２４が設けられている。 (Embodiment 3)
FIG. 12 is a configuration diagram illustrating an image capturing device according to the third embodiment.
The image capturing apparatus according to the third embodiment includes a plurality of image correction processing units 21-1 and 21-2, and a plurality of face image detection units 22-1 and 22, in addition to the polarization filter 11, the image input unit 12, and the image memory 13. -2, a detection result determination unit 23 and an image data selection unit 24 are provided.

画像補正処理部２１−１は、例えば夜間の撮影を想定した夜間モードに対応した画像補正パラメータのもとに輝度変換を実施して出力する。画像補正処理部２１−２は、例えば昼間の撮影を想定した昼間モードに対応した画像補正パラメータのもとに輝度変換を実施して出力する。   For example, the image correction processing unit 21-1 performs luminance conversion on the basis of an image correction parameter corresponding to a night mode assuming night shooting and outputs the result. For example, the image correction processing unit 21-2 performs luminance conversion based on an image correction parameter corresponding to a daytime mode assuming daytime shooting and outputs the result.

顔画像検出部２２−１，２２−２は、対応する画像補正処理部２１−１，２１−２から受け取る画像データに対して、それぞれ顔検出処理を実施し、例えば顔画像の認識有無信号を出力する。   The face image detection units 22-1 and 22-2 perform face detection processing on the image data received from the corresponding image correction processing units 21-1 and 21-2, respectively. Output.

検出結果判定部２３は、各顔画像検出部２２−１，２２−２から得られた認識有無信号に基づき、何れの補正処理画像がコントラストを十分有する顔画像であるかを選別し、選別信号を画像データ選別部２４に送出する。   The detection result determination unit 23 selects which correction processing image is a face image having sufficient contrast based on the recognition presence / absence signals obtained from the face image detection units 22-1 and 22-2. Is sent to the image data selection unit 24.

画像データ選別部２４は、選別信号に従って何れかの画像補正処理部２１−１，２１−２から出力される輝度変換された人物Ｐの顔画像データを選別し出力する。   The image data selection unit 24 selects and outputs the face image data of the person P whose luminance has been converted that is output from any of the image correction processing units 21-1 and 21-2 according to the selection signal.

次に、以上のように構成された実施形態３に係る画像撮影装置の作用について説明する。   Next, the operation of the image capturing apparatus according to the third embodiment configured as described above will be described.

先ず、画像入力部１２は、車両２が所要とする距離に近づいたとき、車両２のフロントガラス３（Ｇ）および偏光フィルタ１１を通して少なくとも車両２内の人物Ｐの顔画像を撮影し、その撮影されたフレーム画像を画像メモリ１３に格納する。   First, when the vehicle 2 approaches the required distance, the image input unit 12 captures at least a face image of the person P in the vehicle 2 through the windshield 3 (G) of the vehicle 2 and the polarization filter 11 and captures the image. The obtained frame image is stored in the image memory 13.

このとき、画像補正処理部２１−１は、前述したように夜間モードに対応した補正処理を実施するもので、例えば図６に示す輝度分布の画像データに対し、予めコントラストを高めるような高い倍率となる画像補正パラメータが設定され、画像メモリ１３から取り込んだ画像データを輝度変換して出力する。   At this time, the image correction processing unit 21-1 performs correction processing corresponding to the night mode as described above. For example, the image correction processing unit 21-1 has a high magnification that increases the contrast in advance for the image data of the luminance distribution shown in FIG. The image correction parameters are set, and the image data fetched from the image memory 13 is converted in luminance and output.

一方、画像補正処理部２１−２は、昼間モード（完全な曇りを含む）に対応した補正処理を実施するもので、例えば図８に示す輝度分布の画像データに対し、予めコントラストを高めるように低い倍率となる画像補正パラメータが設定され、画像メモリ１３から取り込んだ画像データを輝度変換して出力する。   On the other hand, the image correction processing unit 21-2 performs a correction process corresponding to the daytime mode (including complete cloudiness). For example, the image correction processing unit 21-2 increases the contrast in advance for the image data of the luminance distribution shown in FIG. An image correction parameter for setting a low magnification is set, and image data captured from the image memory 13 is converted in luminance and output.

ここで、顔画像検出部２２−１，２２−２は、それぞれ対応する画像補正処理部２１−１，２１−２から受け取る画像データに対して顔検出処理を実施する。各顔画像検出部２２−１，２２−２は、予め平均的な顔濃淡パターン及び一定のしきい値等が記憶され、画像補正処理部２１−１，２１−２から出力された画像データと平均的な顔濃淡パターンとのパターンマッチング処理を行い、一定のしきい値を超える類似度を有するとき、顔検出有りの信号を出力する。夜間モードの場合には画像補正処理部２１−１に対応する顔画像検出部２２−１から顔検出有りの信号が出力される。   Here, the face image detection units 22-1 and 22-2 perform face detection processing on the image data received from the corresponding image correction processing units 21-1 and 21-2, respectively. Each of the face image detection units 22-1 and 22-2 stores an average face shading pattern and a certain threshold value in advance, and the image data output from the image correction processing units 21-1 and 21-2 A pattern matching process with an average face shading pattern is performed, and when the similarity exceeds a certain threshold, a signal with face detection is output. In the night mode, a face detection signal is output from the face image detection unit 22-1 corresponding to the image correction processing unit 21-1.

逆に昼間モードの天気に恵まれている場合には画像補正処理部２１−２に対応する顔画像検出部２２−２から顔検出有りの信号が出力される。なお、顔検出有りの信号に代えて、例えば平均的な顔濃淡パターンに対する類似度値として出力してもよい。   On the contrary, when the daytime mode weather is blessed, a face detection signal is output from the face image detection unit 22-2 corresponding to the image correction processing unit 21-2. Instead of the face detection signal, for example, it may be output as a similarity value with respect to an average face shading pattern.

検出結果判定部２３は、各顔画像検出部２２−１，２２−２から出力される顔検出有無の信号を受けたとき、顔検出有りの信号を受けた側の画像のコントラストが十分であると判定し、選別信号を出力する。つまり、検出結果判定部２３は、例えば夜間モードの場合には画像補正処理部２１−１側、昼間モードの場合には画像補正処理部２１−２側の画像データを選別するような選別信号を出力し、画像データ選別部２４に送出する。   When the detection result determination unit 23 receives the face detection presence / absence signals output from the face image detection units 22-1 and 22-2, the image on the side that has received the face detection signal has sufficient contrast. And a sorting signal is output. That is, for example, the detection result determination unit 23 outputs a selection signal for selecting image data on the image correction processing unit 21-1 side in the night mode and on the image correction processing unit 21-2 side in the daytime mode. The data is output and sent to the image data selection unit 24.

ここで、画像データ選別部２４は、検出結果判定部２３から出力された選別信号に基づき、画像補正処理部２１−１又は画像補正処理部２１−２から出力される画像データを選択し出力する。   Here, the image data selection unit 24 selects and outputs the image data output from the image correction processing unit 21-1 or the image correction processing unit 21-2 based on the selection signal output from the detection result determination unit 23. .

従って、以上のような実施の形態によれば、実施の形態１と同様の効果を奏する他、それぞれ異なる環境モードに応じて最適な画像補正パラメータを用いて輝度変換した画像データを取り出し、パターンマッチングにより顔画像を認識するので、複雑な補正処理を行うことなく、より確実に明瞭な顔画像データを出力することができる。   Therefore, according to the embodiment as described above, in addition to the same effects as those of the first embodiment, image data obtained by luminance conversion using optimum image correction parameters according to different environmental modes is extracted, and pattern matching is performed. Thus, the face image is recognized, so that clear face image data can be more reliably output without performing complicated correction processing.

なお、本実施形態では、夜間モードと昼間モードの二種類に分けて説明したが、これに限られるものではなく、異なる補正処理を行う二種類のモードであればよい。異なる二種類のモードに分けて適切な補正処理を実施すれば、より顔認識のし易い画像を取り出して選択させることで同様の本実施形態の効果が得られるからである。   In the present embodiment, the night mode and the daytime mode have been described separately. However, the present invention is not limited to this, and two types of modes for performing different correction processes may be used. This is because, if appropriate correction processing is performed for two different modes, the same effects of the present embodiment can be obtained by selecting and selecting images that are easier to recognize.

また、上記実施形態３では、画像撮影装置として説明したが、例えば時系列的な一連の処理手順に従って処理する画像補正処理方法の実施形態であっても、実施形態３に係る画像撮影装置と同様の効果を期待することができる。   In the third embodiment, the image shooting apparatus has been described. However, for example, an image correction processing method that performs processing according to a series of time-series processing procedures is the same as the image shooting apparatus according to the third embodiment. Can be expected.

すなわち、画像補正処理方法の実施形態としては、車両の少なくともフロントガラス部分を視野範囲とし、所定の偏光方向の光を通過させる偏光フィルタ１１及びフロントガラス３（Ｇ）を通して画像入力部１２により車両内の人物を撮影する撮影ステップと、予め外乱光の影響を受け難い第１のモード（例えば夜間モード）と当該外乱光の影響を受け易い第２のモード（昼間モード）とに応じてそれぞれ異なる画像補正パラメータが画像補正処理部２１−１，２１−２にそれぞれ設定され、当該画像補正処理部２１−１，２１−２が各画像補正パラメータのもとに前記撮影ステップで撮影された画像データを同時並列的に輝度変換して出力する画像補正処理ステップと、この画像補正処理ステップで出力された輝度変換された複数の画像データに対して、対応する顔画像検出部２２−１，２２−２で顔画像検出処理を実施し、前記車両内に居る人物の顔画像認識の有無信号をそれぞれ出力する顔画像検出ステップと、この顔画像検出ステップから出力される顔画像認識の有無信号に従って、画像データ選別部２４が前記何れか一方の前記画像補正処理ステップで輝度変換された画像データを選別して出力する画像データ選別ステップとを有する処理方法を実施することにより、実施形態３に係る画像撮影装置と同様の効果を奏する。   That is, as an embodiment of the image correction processing method, at least the windshield portion of the vehicle is in the field of view, and the image input unit 12 passes through the polarizing filter 11 and the windshield 3 (G) that allow light in a predetermined polarization direction to pass through the vehicle. Different images according to the shooting step for shooting the person, the first mode that is not easily influenced by disturbance light (for example, the night mode), and the second mode that is easily influenced by the disturbance light (daytime mode). Correction parameters are set in the image correction processing units 21-1 and 21-2, respectively. The image correction processing units 21-1 and 21-2 use the image data captured in the shooting step based on the respective image correction parameters. An image correction processing step for performing brightness conversion in parallel and outputting, and a plurality of brightness-converted image data output in the image correction processing step. A face image detection step of performing face image detection processing by corresponding face image detection units 22-1 and 22-2 on the data, and outputting a face image recognition presence / absence signal of a person in the vehicle, In accordance with the face image recognition presence / absence signal output from the face image detection step, the image data selection unit 24 selects and outputs the image data whose luminance has been converted in any one of the image correction processing steps. By implementing the processing method having the above, the same effects as those of the image capturing apparatus according to the third embodiment can be obtained.

さらに、ＣＰＵを備えた画像処理用コンピュータを用いる場合、画像補正処理部２１−１，２１−２、顔画像検出部２２−１，２２−２、検出結果判定部２３及び画像データ選別部２４の一連の処理手順をプログラムデータとして記録媒体に記憶し、画像処理用コンピュータに読み取らせて実行することにより、実施形態３に係る画像撮影装置で得られる同様の効果を奏することができる。   Further, when an image processing computer having a CPU is used, the image correction processing units 21-1 and 21-2, the face image detection units 22-1 and 22-2, the detection result determination unit 23, and the image data selection unit 24 are used. By storing a series of processing procedures as program data in a recording medium, causing the computer for image processing to read and execute the same, it is possible to achieve the same effect obtained by the image capturing apparatus according to the third embodiment.

（実施形態４）
図１３は実施形態４に係る画像撮影装置を示す構成図である。
この実施形態は、実施形態３の構成に新たに、車両ナンバー認識処理部２５、顔認識処理部２６、顔画像合成処理部２７及び認識データ蓄積部２８を追加してなる構成である。なお、同図において、図１２と同一部分には同一符号を付し、その重複部分の説明は省略する。 (Embodiment 4)
FIG. 13 is a configuration diagram illustrating an image capturing device according to the fourth embodiment.
In this embodiment, a vehicle number recognition processing unit 25, a face recognition processing unit 26, a face image composition processing unit 27, and a recognition data storage unit 28 are added to the configuration of the third embodiment. In the figure, the same parts as those in FIG. 12 are denoted by the same reference numerals, and description of the overlapping parts is omitted.

車両ナンバー認識処理部２５は、画像メモリ１３から取り込むか、あるいは画像メモリ１３から出力される画像データからナンバープレート領域を検出し、その領域内に記載される文字からなる車両ナンバーを認識して出力する。   The vehicle number recognition processing unit 25 detects a license plate area from image data captured from the image memory 13 or output from the image memory 13, and recognizes and outputs a vehicle number composed of characters described in the area. To do.

顔認識処理部２６は、画像データ選別部２４から選択し出力される顔画像データを取り込んで出力する。   The face recognition processing unit 26 takes in and outputs the face image data selected and output from the image data selection unit 24.

顔画像合成処理部２７は、予め定める書式に従って編集処理を実施し、車両の通過日時、車両ナンバー（認識車両番号）に、顔認識処理部２６から受け取った顔画像データを追加し、認識データ蓄積部２８に蓄積する。   The face image composition processing unit 27 performs an editing process according to a predetermined format, adds the face image data received from the face recognition processing unit 26 to the vehicle passage date and time and the vehicle number (recognized vehicle number), and accumulates recognition data. It accumulates in the unit 28.

従って、以上のような実施形態によれば、車両の通過日時・車両ナンバー（認識車両番号）と顔画像データとを合成し、認識データ蓄積部２８に蓄積するので、例えばＥＴＣで料金収受を行うことなく、不正に料金所ゲートを通過しても、車両ナンバーや顔画像データから不正な人物を特定することができる。   Therefore, according to the above embodiment, the passing date / time / vehicle number (recognized vehicle number) of the vehicle and the face image data are combined and stored in the recognition data storage unit 28. Even if the vehicle passes through the toll gate without permission, the unauthorized person can be identified from the vehicle number and the face image data.

なお、上記実施形態４では、画像撮影装置として説明したが、例えば時系列的な一連の処理手順に従って処理する画像補正処理方法の実施形態であっても、画像撮影装置と同様の効果を期待することができる。   In the fourth embodiment, the image capturing apparatus has been described. However, for example, an image correction processing method that performs processing according to a series of time-series processing procedures is expected to have the same effect as the image capturing apparatus. be able to.

すなわち、画像補正処理方法の実施形態としては、車両のフロントガラス部分及び車両のナンバープレートを視野範囲とし、前記偏光フィルタ１１及びフロントガラス３（Ｇ）を通して車両内の人物及び車両ナンバーを撮影する場合、実施形態３の処理手順に新たに、画像入力部１２による撮影ステップで撮影された画像データから車両ナンバー認識処理部２５が車両ナンバーを認識し出力する車両ナンバー認識処理ステップと、画像データ選別部２４による処理である画像データ選別ステップから選別出力される画像データから顔認識処理部２６が車両内の人物の顔画像を認識し出力する顔画像認識処理ステップと、車両の通過日時のもとに車両ナンバーと人物の顔画像とを顔画像合成処理部２７で受け取って合成し出力する顔画像合成処理ステップとをさらに追加することにより、実施形態４に係る画像撮影装置と同様の効果を奏することができる。   That is, as an embodiment of the image correction processing method, when a vehicle windshield portion and a vehicle license plate are used as a field of view, and a person and a vehicle number in the vehicle are photographed through the polarizing filter 11 and the windshield 3 (G). In addition to the processing procedure of the third embodiment, a vehicle number recognition processing step in which the vehicle number recognition processing unit 25 recognizes and outputs the vehicle number from the image data photographed in the photographing step by the image input unit 12, and an image data selection unit. The face recognition processing unit 26 recognizes and outputs the face image of the person in the vehicle from the image data selected and output from the image data selection step, which is the processing by the image data 24, and the passing date and time of the vehicle. A face image composition process in which the vehicle image and the person's face image are received by the face image composition processing unit 27 and synthesized and output. And by further adding a step, it is possible to achieve the same effect as the imaging apparatus according to the fourth embodiment.

さらに、前述する一連の処理手順をプログラムデータとして記録媒体に記憶し、画像処理用コンピュータに読み取らせて実行することにより、実施形態４に係る画像撮影装置で得られる同様の効果を奏することができる。   Furthermore, by storing the above-described series of processing procedures as program data in a recording medium, causing the computer for image processing to read and execute the same, it is possible to achieve the same effect obtained by the image capturing apparatus according to the fourth embodiment. .

なお、上記実施の形態では、高速道路の料金所を想定して説明したが、市街地の有料駐車場において、予め顔認識処理部２６に契約人物ごとに当該人物の登録ＩＤデータが登録されている場合、顔画像合成処理部２７は、予め定める書式に従って編集処理を実施し、図１４に示すように車両の通過日時、車両ナンバー（認識車両番号）及び顔認識処理部２６で取得される登録ＩＤデータに当該顔認識処理部２６から受け取った顔画像データを追加し、認識データ蓄積部２８に蓄積し、或いはプリントアウトしてもよい。   Although the above embodiment has been described on the assumption of a highway toll booth, registration ID data of the person is registered in advance in the face recognition processing unit 26 for each contracted person in a toll parking lot in an urban area. In this case, the face image composition processing unit 27 performs an editing process according to a predetermined format, and as shown in FIG. 14, the vehicle passage date and time, the vehicle number (recognized vehicle number), and the registration ID acquired by the face recognition processing unit 26 The face image data received from the face recognition processing unit 26 may be added to the data, stored in the recognition data storage unit 28, or printed out.

（その他の実施形態）
上記実施形態では、道路１の片側から車両２のフロントガラス３を通して車両内の人物を撮影するようにしたが、偏光フィルタ１１及び画像入力部１２は車両２の走行の邪魔にならなければ、他の設置方法であってもよい。例えば道路１を跨ぐように逆凹状の支持部材または道路１の片側から道路中央方向に延びるように逆Ｌ字状をなす支持部材を立設し、その支持部材の上部又は下部に吊下するように偏光フィルタ１１及び画像入力部１２を配列するように取り付けてもよい。 (Other embodiments)
In the above embodiment, a person in the vehicle is photographed from one side of the road 1 through the windshield 3 of the vehicle 2, but the polarizing filter 11 and the image input unit 12 may be used as long as they do not interfere with the traveling of the vehicle 2. The installation method may be used. For example, a reverse concave support member straddling the road 1 or a support member having an inverted L shape extending from one side of the road 1 toward the center of the road is erected and suspended on the upper or lower portion of the support member. The polarizing filter 11 and the image input unit 12 may be attached to each other.

さらに、上記実施の形態は可能な限り組み合わせて実施することが可能であり、その場合には組み合わせによる効果が得られる。さらに、上記各実施の形態には種々の上位，下位段階の発明が含まれており、開示された複数の構成要素の適宜な組み合わせにより種々の発明が抽出され得るものである。例えば問題点を解決するための手段に記載される全構成要件から幾つかの構成要件が省略されうることで発明が抽出された場合には、その抽出された発明を実施する場合には省略部分が周知慣用技術で適宜補われるものである。   Furthermore, the above embodiments can be implemented in combination as much as possible, and in that case, the effect of the combination can be obtained. Further, each of the above embodiments includes various higher-level and lower-level inventions, and various inventions can be extracted by appropriately combining a plurality of disclosed constituent elements. For example, when an invention is extracted because some constituent elements can be omitted from all the constituent elements described in the means for solving the problem, the omitted part is used when the extracted invention is implemented. Is appropriately supplemented by well-known conventional techniques.

１…道路、２…車両、３，Ｇ…フロントガラス、４…ナンバープレート、Ｐ…撮影対象の人物、Ｓ…太陽などの外乱光、１１…偏光フィルタ、１２…画像入力部、１３…画像メモリ、１４…輝度計測部、１５…補正パラメータ計算部、１６…画像補正処理部、１７…制御パラメータ設定部、１７ａ…制御パラメータテーブル、２１−１，２１−２…画像補正処理部、２２−１，２２−２…顔画像検出部、２３…検出結果判定部、２４…画像データ選別部、２５…車両ナンバー認識処理部、２６…顔認識処理部、２７…顔画像合成処理部、２８…認識データ蓄積部。   DESCRIPTION OF SYMBOLS 1 ... Road, 2 ... Vehicle, 3, G ... Windshield, 4 ... License plate, P ... Person to image | photograph, S ... Disturbance light, such as the sun, 11 ... Polarizing filter, 12 ... Image input part, 13 ... Image memory , 14 ... Luminance measurement unit, 15 ... Correction parameter calculation unit, 16 ... Image correction processing unit, 17 ... Control parameter setting unit, 17a ... Control parameter table, 21-1, 21-2 ... Image correction processing unit, 22-1 , 22-2 ... face image detection unit, 23 ... detection result determination unit, 24 ... image data selection unit, 25 ... vehicle number recognition processing unit, 26 ... face recognition processing unit, 27 ... face image synthesis processing unit, 28 ... recognition Data storage unit.

Claims (13)

車両の少なくともフロントガラス部分を視野範囲とし、所定の偏光方向の光を通過させる偏光フィルタ及び前記フロントガラスを通して前記車両内の人物を撮影する撮影手段と、
この撮影手段で撮影された画像データから計測される輝度値の分布から少なくとも平均輝度を求める輝度計測手段と、
この輝度計測手段で求めた平均輝度に基づいて、画像補正パラメータを計算する補正パラメータ計算手段と、
この補正パラメータ計算手段で得られた画像補正パラメータのもとに、前記撮影手段で撮影された画像データの輝度値を変換する画像補正手段と
を備えたことを特徴とする画像撮影装置。 A photographing filter for photographing a person in the vehicle through the windshield and a polarizing filter that allows light of a predetermined polarization direction to pass through at least a windshield portion of the vehicle;
Luminance measuring means for obtaining at least average luminance from a distribution of luminance values measured from image data photographed by the photographing means;
Correction parameter calculation means for calculating an image correction parameter based on the average brightness obtained by the brightness measurement means;
An image photographing apparatus comprising: an image correcting unit that converts a luminance value of image data photographed by the photographing unit based on an image correction parameter obtained by the correction parameter calculating unit. 請求項１に記載の画像撮影装置において、
前記輝度計測手段で求めた平均輝度に基づいて、前記撮影手段に対して撮影条件を制御する制御パラメータを設定する制御パラメータ設定手段をさらに設け、
この制御パラメータ設定手段で設定された制御パラメータによる撮影条件で撮影された前記撮影手段の再度の画像データのもとに後続の前記輝度計測手段、前記補正パラメータ計算手段及び前記画像補正手段を実行させることを特徴とする画像撮影装置。 The image capturing apparatus according to claim 1,
Based on the average brightness obtained by the brightness measuring means, further provided a control parameter setting means for setting a control parameter for controlling the photographing conditions for the photographing means,
The subsequent brightness measurement means, correction parameter calculation means, and image correction means are executed based on the re-image data of the image pickup means that has been picked up under the shooting conditions based on the control parameters set by the control parameter setting means. An image photographing apparatus characterized by that. 請求項１または請求項２に記載の画像撮影装置において、
前記補正パラメータ計算手段は、前記偏光フィルタからの透過光量の低下に伴う低輝度分布の前記画像データに対してコントラストを高めるために補正するゲインに関するパラメータと、前記フロントガラスから反射する外乱光の反射成分によって発生する高輝度分布の前記画像データに対して輝度値を抑制する方向に補正するシフトに関するパラメータとを含んだ前記画像補正パラメータを計算することを特徴とする画像撮影装置。 In the image photographing device according to claim 1 or 2,
The correction parameter calculation means includes a parameter relating to a gain for correcting the image data having a low luminance distribution accompanying a decrease in the amount of transmitted light from the polarizing filter, and reflection of disturbance light reflected from the windshield. An image photographing apparatus that calculates the image correction parameter including a parameter relating to a shift that corrects the image data of a high luminance distribution generated by a component in a direction to suppress a luminance value. 請求項１または請求項２に記載の画像撮影装置において、
前記画像補正手段は、前記補正パラメータ計算手段で得られた画像補正パラメータのもとに所定の輝度変換式に従って、前記撮影手段で撮影された画像データの輝度分布の輝度中心をずらし、かつ、当該輝度分布を所定の倍率で拡大し、高いコントラストの画像データに変換し出力することを特徴とする画像撮影装置。 In the image photographing device according to claim 1 or 2,
The image correcting unit shifts the luminance center of the luminance distribution of the image data captured by the imaging unit according to a predetermined luminance conversion formula based on the image correction parameter obtained by the correction parameter calculating unit, and An image photographing apparatus, wherein a luminance distribution is enlarged at a predetermined magnification, converted into high-contrast image data, and output. 車両の少なくともフロントガラス部分を視野範囲とし、所定の偏光方向の光を通過させる偏光フィルタ及び前記フロントガラスを通して前記車両内の人物を撮影する撮影ステップと、
この撮影ステップで撮影された画像データ全体から輝度値を計算し、この計算によって得られた輝度値の分布から少なくとも平均輝度を求める輝度計算ステップと、
この輝度計算ステップで求められた平均輝度に基づいて、画像補正パラメータを計算する補正パラメータ計算ステップと、
この補正パラメータ計算ステップで計算された画像補正パラメータのもとに、所定の輝度変換式を用いて、前記撮影ステップで撮影された画像データの輝度値を変換する画像補正処理ステップと
を有することを特徴とする画像補正処理方法。 A photographing step of photographing a person in the vehicle through the windshield and a polarizing filter that allows light of a predetermined polarization direction to pass through at least a windshield portion of the vehicle; and
A luminance calculation step for calculating a luminance value from the entire image data captured in this imaging step, and obtaining at least an average luminance from a distribution of luminance values obtained by the calculation,
A correction parameter calculation step for calculating an image correction parameter based on the average luminance obtained in the luminance calculation step;
An image correction processing step for converting the luminance value of the image data photographed in the photographing step using a predetermined luminance conversion formula based on the image correction parameter calculated in the correction parameter calculating step. A characteristic image correction processing method. 所定の偏光方向の光を通過させる偏光フィルタ及びフロントガラスを通して車両内の人物を撮影された画像データを記憶する画像記憶部を有し、この画像記憶部に記憶された画像データに表れる前記偏光フィルタからの透過光量の低下及び前記フロントガラスで反射する外乱光の反射成分の影響を補正する画像補正処理プログラムであって、
コンピュータに、
前記画像記憶部に記憶された画像データから輝度値を計算し、この計算によって得られた輝度値の分布から少なくとも平均輝度を求める輝度計算機能と、この輝度計算機能で求めた平均輝度に基づいて、画像補正パラメータを計算する補正パラメータ計算機能と、この補正パラメータ計算機能で計算された画像補正パラメータのもとに、所定の輝度変換式を用いて、前記画像記憶部に記憶される画像データの輝度値を変換する画像補正処理機能を実現させるための画像補正処理プログラム。 A polarizing filter that transmits light of a predetermined polarization direction; and an image storage unit that stores image data obtained by photographing a person in a vehicle through a windshield, and the polarizing filter that appears in the image data stored in the image storage unit An image correction processing program that corrects the decrease in the amount of transmitted light from the light source and the influence of the reflection component of ambient light reflected by the windshield,
On the computer,
A luminance value is calculated from the image data stored in the image storage unit, and a luminance calculation function for obtaining at least an average luminance from a distribution of luminance values obtained by the calculation, and an average luminance obtained by the luminance calculation function A correction parameter calculation function for calculating an image correction parameter, and the image data stored in the image storage unit using a predetermined brightness conversion formula based on the image correction parameter calculated by the correction parameter calculation function. An image correction processing program for realizing an image correction processing function for converting a luminance value. 車両の少なくともフロントガラス部分を視野範囲とし、所定の偏光方向の光を通過させる偏光フィルタ及び前記フロントガラスを通して前記車両内の人物を撮影する撮影手段と、
予め外乱光の影響を受け難い第１のモードと当該外乱光の影響を受け易い第２のモードとに応じてそれぞれ異なる画像補正パラメータが設定され、当該画像補正パラメータのもとに前記撮影手段で撮影された画像データをそれぞれ輝度変換して出力する複数の画像補正処理手段と、
前記各画像補正処理手段の出力側に接続され、対応する画像補正処理手段から出力される輝度変換された画像データに対して、前記車両内に居る人物の顔画像認識の有無信号を出力する複数の顔画像検出手段と、
複数の顔画像検出手段から出力される顔画像認識の有無信号に従って、前記何れか一方の前記画像補正処理手段で輝度変換された画像データを選別して出力する画像データ選別手段と
を備えたことを特徴とする画像撮影装置。 A photographing filter for photographing a person in the vehicle through the windshield and a polarizing filter that allows light of a predetermined polarization direction to pass through at least a windshield portion of the vehicle;
Different image correction parameters are set in advance according to the first mode that is not easily affected by ambient light and the second mode that is easily affected by ambient light, and the photographing unit uses the image correction parameters based on the image correction parameters. A plurality of image correction processing means for converting the brightness of each imaged image data and outputting it;
A plurality of signals connected to the output side of each of the image correction processing means and outputting presence / absence signals for recognition of face images of persons in the vehicle with respect to the brightness-converted image data output from the corresponding image correction processing means Face image detection means,
Image data selection means for selecting and outputting image data whose luminance has been converted by any one of the image correction processing means in accordance with face image recognition presence / absence signals output from a plurality of face image detection means An image photographing apparatus characterized by the above. 請求項７に記載の画像撮影装置において、
前記撮影手段が車両の少なくともフロントガラス部分及びナンバープレート部分を同一の視野範囲とし、前記偏光フィルタ及び前記フロントガラスを通して前記車両内の人物及び車両ナンバーを撮影する場合、
前記撮影手段で撮影された画像データから前記車両ナンバーを認識し出力する車両ナンバー認識処理手段と、
前記画像データ選別手段から選別出力される画像データから前記車両内の人物の顔画像を認識し出力する顔画像認識処理手段と、
前記車両の通過日時のもとに前記車両ナンバーと前記人物の顔画像とを合成し出力する顔画像合成処理手段とをさらに設けたことを特徴とする画像撮影装置。 The image photographing device according to claim 7,
When the photographing means takes at least the windshield portion and the license plate portion of the vehicle as the same visual field range, and photographs the person and vehicle number in the vehicle through the polarizing filter and the windshield,
Vehicle number recognition processing means for recognizing and outputting the vehicle number from image data photographed by the photographing means;
Face image recognition processing means for recognizing and outputting a face image of a person in the vehicle from image data selected and output from the image data selection means;
2. An image photographing apparatus according to claim 1, further comprising face image composition processing means for synthesizing and outputting the vehicle number and the person's face image based on the vehicle passage date and time. 請求項７または請求項８に記載の画像撮影装置において、
前記画像補正パラメータは、前記偏光フィルタからの透過光量の低下に伴う低輝度分布の前記画像データまたは前記フロントガラスから反射する外乱光の反射成分によって発生する高輝度分布の前記画像データに対して、コントラストを高めるようなパラメータであることを特徴とする画像撮影装置。 In the image photographing device according to claim 7 or 8,
The image correction parameter, for the image data of the low luminance distribution accompanying the decrease in the amount of transmitted light from the polarizing filter or the image data of the high luminance distribution generated by the reflection component of the disturbance light reflected from the windshield, An image photographing apparatus characterized in that the parameters increase the contrast. 車両の少なくともフロントガラス部分を視野範囲とし、所定の偏光方向の光を通過させる偏光フィルタ及び前記フロントガラスを通して少なくとも前記車両内の人物を撮影する撮影ステップと、
予め外乱光の影響を受け難い第１のモードと当該外乱光の影響を受け易い第２のモードとに応じてそれぞれ異なる画像補正パラメータが設定され、当該各画像補正パラメータのもとに前記撮影ステップで撮影された画像データを同時並列的に輝度変換して出力する画像補正処理ステップと、
この画像補正処理ステップで出力された輝度変換された複数の画像データに対して、前記車両内に居る人物の顔画像認識の有無信号をそれぞれ出力する顔画像検出ステップと、
この顔画像検出ステップから出力される顔画像認識の有無信号に従って、前記何れか一方の前記画像補正処理ステップで輝度変換された画像データを選別して出力する画像データ選別ステップと
を有することを特徴とする画像補正処理方法。 A photographing step for photographing at least a person in the vehicle through the windshield and a polarizing filter that allows light of a predetermined polarization direction to pass through at least a windshield portion of the vehicle; and
Different image correction parameters are set in advance according to the first mode that is not easily affected by ambient light and the second mode that is easily affected by ambient light, and the imaging step is performed based on each image correction parameter. An image correction processing step for converting the brightness of the image data photographed at the same time in parallel and outputting,
A face image detection step for outputting a presence / absence signal for recognition of a face image of a person in the vehicle for a plurality of brightness-converted image data output in the image correction processing step;
An image data selection step of selecting and outputting the image data whose luminance has been converted in any one of the image correction processing steps according to a face image recognition presence / absence signal output from the face image detection step. An image correction processing method. 請求項１０に記載の画像補正処理方法において、
車両のフロントガラス部分及び車両のナンバープレートを視野範囲とし、前記偏光フィルタ及び前記フロントガラスを通して前記車両内の人物及び車両ナンバーを撮影する場合、
前記撮影ステップで撮影された画像データから前記車両ナンバーを認識し出力する車両ナンバー認識処理ステップと、
前記画像データ選別ステップから選別出力される画像データから前記車両内の人物の顔画像を認識し出力する顔画像認識処理ステップと、
前記車両の通過日時のもとに前記車両ナンバーと前記人物の顔画像とを合成し出力する顔画像合成処理ステップとをさらに有することを特徴とする画像補正処理方法。 The image correction processing method according to claim 10,
When the vehicle windshield portion and the vehicle license plate are in the field of view, and the person and the vehicle number in the vehicle are photographed through the polarizing filter and the windshield,
Vehicle number recognition processing step for recognizing and outputting the vehicle number from the image data captured in the imaging step;
A face image recognition processing step of recognizing and outputting a face image of a person in the vehicle from the image data selected and output from the image data selection step;
An image correction processing method further comprising a face image composition processing step of combining and outputting the vehicle number and the person's face image based on the vehicle passage date and time. 所定の偏光方向の光を通過させる偏光フィルタ及びフロントガラスを通して少なくとも車両内の人物を撮影された画像データを記憶する画像データ記憶部と、予め外乱光の影響を受けない第１のモードと当該外乱光の影響を受ける第２のモードとに応じてそれぞれ異なる画像補正パラメータを記憶するパラメータ記憶部とを有し、前記画像記憶部に記憶された画像データに表れる前記偏光フィルタからの透過光量の低下及び前記フロントガラスで反射する外乱光の反射成分の影響を補正し、前記認識できる人物の顔画像を出力する画像補正処理プログラムであって、
コンピュータに、
前記パラメータ記憶部に設定される各画像補正パラメータのもとに、前記画像データ記憶部に記憶される画像データを読み出して同時並列的に輝度変換して出力する画像補正処理機能と、この画像補正処理機能で輝度変換された複数の画像データに対して、前記車両内に居る人物の顔画像認識の有無信号をそれぞれ出力する顔画像検出機能と、この顔画像検出機能から受け取る顔画像認識の有無信号に従って、前記何れか一方の前記画像補正処理機能で輝度変換された画像データを選別して出力する画像データ選別機能とを実現させるための画像補正処理プログラム。 An image data storage unit for storing image data obtained by photographing at least a person in a vehicle through a polarizing filter that passes light of a predetermined polarization direction and a windshield, a first mode that is not affected by disturbance light in advance, and the disturbance A parameter storage unit that stores different image correction parameters according to the second mode affected by light, and a reduction in the amount of transmitted light from the polarizing filter that appears in the image data stored in the image storage unit And an image correction processing program for correcting the influence of the reflection component of disturbance light reflected by the windshield and outputting the recognizable person's face image,
On the computer,
An image correction processing function that reads out image data stored in the image data storage unit based on each image correction parameter set in the parameter storage unit, and converts the luminance in parallel in parallel and outputs the image correction processing function. A face image detection function for outputting a face image recognition presence / absence signal of a person in the vehicle with respect to a plurality of image data luminance-converted by the processing function, and presence / absence of face image recognition received from the face image detection function An image correction processing program for realizing an image data selection function for selecting and outputting image data whose luminance has been converted by one of the image correction processing functions according to a signal. 請求項１２に記載の画像補正処理プログラムにおいて、
前記画像記憶部に前記車両内の人物及び車両ナンバーを含む画像データが記憶されている場合、
前記コンピュータに、
前記画像記憶部に記憶される画像データから前記車両ナンバーを認識し出力する車両ナンバー認識処理機能と、前記画像データ選別機能によって選別出力される画像データから前記車両内の人物の顔画像を認識し出力する顔画像認識処理機能と、前記車両の通過日時のもとに前記車両ナンバーと前記人物の顔画像とを合成し出力する顔画像合成処理機能をさらに実現させるための画像補正処理プログラム。 In the image correction processing program according to claim 12,
When image data including a person and a vehicle number in the vehicle is stored in the image storage unit,
In the computer,
A vehicle number recognition processing function for recognizing and outputting the vehicle number from image data stored in the image storage unit, and a face image of a person in the vehicle from image data selected and output by the image data selection function. An image correction processing program for further realizing a face image recognition processing function to be output and a face image composition processing function to synthesize and output the vehicle number and the face image of the person based on the vehicle passage date and time.
JP2010134440A 2010-06-11 2010-06-11 Image photographing device, image correction processing method and image correction processing program Withdrawn JP2011258144A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2010134440A JP2011258144A (en) 2010-06-11 2010-06-11 Image photographing device, image correction processing method and image correction processing program

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2010134440A JP2011258144A (en) 2010-06-11 2010-06-11 Image photographing device, image correction processing method and image correction processing program

Publications (1)

Publication Number Publication Date
JP2011258144A true JP2011258144A (en) 2011-12-22

Family

ID=45474219

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2010134440A Withdrawn JP2011258144A (en) 2010-06-11 2010-06-11 Image photographing device, image correction processing method and image correction processing program

Country Status (1)

Country Link
JP (1) JP2011258144A (en)

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2015144421A (en) * 2013-12-24 2015-08-06 株式会社リコー Image processing apparatus, image processing system, image processing method, image processing program, and mobile controller
WO2015145917A1 (en) * 2014-03-28 2015-10-01 日本電気株式会社 Image-correcting device, image correction method, and program-recording medium
JP2016085619A (en) * 2014-10-27 2016-05-19 株式会社日立製作所 Image processing device, image processing method, poi information creation system, warning system, and guidance system
JP2016126459A (en) * 2014-12-26 2016-07-11 株式会社リコー Image processing device, imaging system, image processing system, and program
JP2016127312A (en) * 2014-12-26 2016-07-11 株式会社リコー Imaging information processing unit and imaging information processing system
WO2017006778A1 (en) * 2015-07-08 2017-01-12 ソニーセミコンダクタソリューションズ株式会社 Image processing device, image processing method, and program
CN112602318A (en) * 2018-08-31 2021-04-02 三菱电机株式会社 Vehicle-mounted imaging device and vehicle-mounted image recognition device
CN116246054A (en) * 2023-05-09 2023-06-09 钧捷智能（深圳）有限公司 Processing system and method for DMS (digital management system) environment light interference

Cited By (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2015144421A (en) * 2013-12-24 2015-08-06 株式会社リコー Image processing apparatus, image processing system, image processing method, image processing program, and mobile controller
WO2015145917A1 (en) * 2014-03-28 2015-10-01 日本電気株式会社 Image-correcting device, image correction method, and program-recording medium
JPWO2015145917A1 (en) * 2014-03-28 2017-04-13 日本電気株式会社 Image correction apparatus, image correction method, and program
US10055824B2 (en) 2014-03-28 2018-08-21 Nec Corporation Image correction device, image correction method and storage medium
JP2016085619A (en) * 2014-10-27 2016-05-19 株式会社日立製作所 Image processing device, image processing method, poi information creation system, warning system, and guidance system
JP2016126459A (en) * 2014-12-26 2016-07-11 株式会社リコー Image processing device, imaging system, image processing system, and program
JP2016127312A (en) * 2014-12-26 2016-07-11 株式会社リコー Imaging information processing unit and imaging information processing system
WO2017006778A1 (en) * 2015-07-08 2017-01-12 ソニーセミコンダクタソリューションズ株式会社 Image processing device, image processing method, and program
CN112602318A (en) * 2018-08-31 2021-04-02 三菱电机株式会社 Vehicle-mounted imaging device and vehicle-mounted image recognition device
CN116246054A (en) * 2023-05-09 2023-06-09 钧捷智能（深圳）有限公司 Processing system and method for DMS (digital management system) environment light interference
CN116246054B (en) * 2023-05-09 2023-09-29 钧捷智能（深圳）有限公司 Processing system and method for DMS (digital management system) environment light interference

Similar Documents

Publication Publication Date Title
JP2011258144A (en) Image photographing device, image correction processing method and image correction processing program
CN104512411B (en) Vehicle control system and imaging sensor
JP4389999B2 (en) Exposure control device and exposure control program
EP3349433B1 (en) Control system, imaging device, and program
US7444075B2 (en) Imaging device, camera, and imaging method
CN100508558C (en) Image-capturing device, image-processing device, method for controlling image-capturing device, and program for causing computer to execute the method
JP5643563B2 (en) Image processing apparatus and control method thereof
JP5071198B2 (en) Signal recognition device, signal recognition method, and signal recognition program
JP2017011634A (en) Imaging device, control method for the same and program
US7495692B2 (en) Image processing device and electronic camera
JP5199736B2 (en) Imaging device
CN110636216A (en) Image processing method and device, electronic equipment and computer readable storage medium
JP2007243917A (en) Imaging apparatus and image processing program
JP2012222374A (en) On-vehicle camera system
JP5246254B2 (en) Determining the exposure control value for in-vehicle cameras
JP2004289786A (en) Imaging apparatus
JP4668863B2 (en) Imaging device
JP4692273B2 (en) Focus detection device and camera
US8325997B2 (en) Image processing device
JP4523629B2 (en) Imaging device
JP2010206722A5 (en) Image processing apparatus, control method therefor, and imaging apparatus
WO2018035859A1 (en) Imaging apparatus and imaging method
JP5427744B2 (en) Image processing device
JP6525723B2 (en) Imaging device, control method therefor, program, and storage medium
JP5222779B2 (en) License plate recognition device

Legal Events

Date Code Title Description
A300 Application deemed to be withdrawn because no request for examination was validly filed

Free format text: JAPANESE INTERMEDIATE CODE: A300

Effective date: 20130903