JP2015087267A - Object detection device - Google Patents
Object detection device Download PDFInfo
- Publication number
- JP2015087267A JP2015087267A JP2013226170A JP2013226170A JP2015087267A JP 2015087267 A JP2015087267 A JP 2015087267A JP 2013226170 A JP2013226170 A JP 2013226170A JP 2013226170 A JP2013226170 A JP 2013226170A JP 2015087267 A JP2015087267 A JP 2015087267A
- Authority
- JP
- Japan
- Prior art keywords
- luminance
- luminance output
- light
- imaging
- region
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Landscapes
- Measurement Of Optical Distance (AREA)
- Geophysics And Detection Of Objects (AREA)
- Optical Radar Systems And Details Thereof (AREA)
Abstract
Description
本発明は、物体検出装置に関する。 The present invention relates to an object detection device.
特許文献1には、CCD等の撮像素子の撮像範囲内に強度変調された照射光を照射し、その反射光を撮像して得られた撮像画像から照射光の強度変調と同期して輝度変動する同期検波領域を抽出し、同期検波領域に基づいて撮像範囲内の物体を検出する技術が開示されている。 Japanese Patent Application Laid-Open No. 2004-133826 irradiates intensity-modulated irradiation light within an imaging range of an image sensor such as a CCD, and changes luminance in synchronization with intensity modulation of irradiation light from a captured image obtained by imaging the reflected light. A technique for extracting a synchronous detection region to be detected and detecting an object within an imaging range based on the synchronous detection region is disclosed.
しかしながら、上記従来技術にあっては、太陽光等の外乱光が弱い状況から強い状況へと変化した際、撮像画像の出力信号の飽和を抑制するためにレンズ絞り値や露光時間の調整により撮像素子の光入力に対する輝度出力を小さくした場合、照射光に対する感度分解能が低下するため、同期検波領域の抽出が不安定になるという問題があった。
本発明の目的は、外乱光の強度変化にかかわらず、安定して同期検波領域を抽出できる物体検出装置を提供することにある。
However, in the above prior art, when the disturbance light such as sunlight changes from a weak situation to a strong situation, imaging is performed by adjusting the lens aperture value and the exposure time in order to suppress saturation of the output signal of the captured image. When the luminance output with respect to the light input of the element is reduced, the sensitivity resolution with respect to the irradiation light is lowered, so that there is a problem that the extraction of the synchronous detection region becomes unstable.
An object of the present invention is to provide an object detection apparatus that can stably extract a synchronous detection region regardless of changes in the intensity of disturbance light.
本発明では、光入力と輝度出力とを座標軸とする座標上に、撮像手段の光入力に対する輝度出力値が低い領域と高い領域との間の領域における光入力と輝度出力との関係を表す輝度出力特性を設定し、投光手段の照射範囲の各画素の輝度に応じて、輝度出力特性の傾きを維持しつつ光入力軸方向の位置を変更する。 In the present invention, the luminance representing the relationship between the light input and the luminance output in the region between the region where the luminance output value with respect to the light input of the imaging means is low and the region on the coordinates having the light input and the luminance output as the coordinate axes. The output characteristic is set, and the position in the light input axis direction is changed while maintaining the inclination of the luminance output characteristic according to the luminance of each pixel in the irradiation range of the light projecting means.
よって、照射光に対する感度分解能が一定に維持されるため、外乱光の強度変化にかかわらず、安定して同期検波領域を抽出できる。 Therefore, since the sensitivity resolution with respect to the irradiation light is kept constant, the synchronous detection region can be stably extracted regardless of the intensity change of the disturbance light.
〔実施例1〕
図1は、実施例1の物体検出装置の構成を示すブロック図である。実施例1の物体検出装置は、車両に搭載され、車両前方の物体を検出する。
投光部(投光手段)1は、例えば、プロジェクタヘッドライトやリフレクタを備えたヘッドライトであり、水平方向に発光領域を形成する配光特性を有する照射光を車両前方に向けて照射する。投光部1の発光源としては、可視光、赤外光または紫外光を用いることができる。
[Example 1]
FIG. 1 is a block diagram illustrating a configuration of the object detection apparatus according to the first embodiment. The object detection apparatus according to the first embodiment is mounted on a vehicle and detects an object in front of the vehicle.
The light projecting unit (light projecting means) 1 is, for example, a headlight provided with a projector headlight or a reflector, and irradiates irradiation light having a light distribution characteristic that forms a light emitting region in the horizontal direction toward the front of the vehicle. As the light source of the light projecting unit 1, visible light, infrared light, or ultraviolet light can be used.
撮像部(撮像手段)2は、カメラ21と、オフセット回路22と、A-Dコンバータ23とを有する。
カメラ21は、CCDイメージセンサーやCMOSイメージセンサー等の撮像素子を備える。カメラ21は、車両前方を撮像し、これに加えて、投光部1により照射された照射光の反射光を受光する。
オフセット回路(輝度出力特性変更手段)22は、カメラ21から出力されたアナログ信号に対し、後述するオフセット制御信号(輝度出力オフセット値)に応じた直流オフセット量を付与する。
A-Dコンバータ23は、オフセット回路22から出力されたアナログ信号をデジタル信号に変換する。
The imaging unit (imaging means) 2 includes a
The
The offset circuit (luminance output characteristic changing means) 22 gives a DC offset amount corresponding to an offset control signal (luminance output offset value) described later to the analog signal output from the
The
変調制御部(投光制御手段,露光制御手段)3は、カメラ21による撮像タイミングのトリガ信号と露光時間(シャッター時間)の制御信号を出力すると共に、投光部1の照射光をPWM制御する際のパルス点灯および消灯タイミングのトリガ信号を出力する。また、PWM制御で使用した搬送波(キャリア周波数)信号を出力する。
A modulation control unit (light projection control means, exposure control means) 3 outputs a trigger signal for imaging timing by the
同期検波処理部(同期検波処理手段)4は、A-Dコンバータ23により出力されたデジタル信号、すなわち、カメラ21の撮像画像を順次記憶し、記憶した画像中の全画素(または画像中に処理領域を制限した場合は、画像処理領域中の全画素)において、変調制御部3から出力される照射光に含まれる変調信号を同期検波することにより、照射光強度と同期して輝度変化する画素のみを抽出した同期検波領域画像を出力する。
The synchronous detection processing unit (synchronous detection processing means) 4 sequentially stores the digital signal output from the
検波画像エッジ検出部5は、同期検波処理部4により抽出された同期検波領域画像より、照射光の上端エッジ部の位置を検出し、その画像内の縦位置情報を出力する。
物体検出部(物体検出手段)6は、検波画像エッジ検出部5により検出された上端エッジの縦位置情報を用いて、照射光上端エッジの照射方向と、カメラ21の視軸が成す角度およびレイアウトに基づき、三角測量の原理により、照射光が照射されている物体までの距離を算出することにより、撮像範囲内における立体物の判定や、物体の判定を行い、検出結果を出力する。
The detection image
The object detection unit (object detection means) 6 uses the vertical position information of the upper edge detected by the detection image
輝度検出部(輝度検出手段)7は、投光部1の照射光が観測される画像領域(照射領域)内の画素出力から、輝度出力値の平均値と標準偏差σを算出し、照射領域内の輝度出力の平均値-3σの輝度値が撮像部2から出力される最小輝度出力となるように、あらかじめ感度特性記憶部8に記録された変換テーブルを用いてオフセット回路22の直流オフセット量を可変するオフセット制御信号を生成し、オフセット回路22へ出力する。変換テーブルは、輝度出力値の平均値が高いほど直流オフセット量が大きくなるように設定されている。
The luminance detection unit (luminance detection means) 7 calculates the average value of the luminance output value and the standard deviation σ from the pixel output in the image region (irradiation region) where the irradiation light of the light projecting unit 1 is observed, and the irradiation region The DC offset amount of the
実施例1では、カメラ21の撮像素子の光入力を横軸、輝度出力を縦軸とする2次元座標上に、撮像素子の光入力に対する輝度出力値が低い領域と高い領域との間の領域における光入力と輝度出力との関係を表す輝度出力特性を設定し、当該輝度出力特性の傾きが照射光に対して十分な感度分解能が得られる、すなわち、撮像画像から同期検波領域を安定して抽出可能な傾きとなるように、変調制御部3によりレンズ絞り値および露光時間の既定値が設定されている。以下、このときの輝度出力特性を既定輝度出力特性と称す。
In the first embodiment, a region between a region where the luminance output value with respect to the light input of the image sensor is low and a region on the two-dimensional coordinate having the light input of the image sensor of the
[物体検出処理]
図2は、実施例1の物体検出装置による物体検出処理の流れを示すフローチャートである。
ステップS1では、撮像部2において車両前方の画像を撮像、取得する。
ステップS2では、輝度検出部7において、照射領域の画素出力から輝度出力値の平均値と標準偏差σを算出する。
ステップS3では、輝度検出部7において、照射領域内の輝度出力の平均値-3σの輝度値が撮像部2から出力される最小輝度出力であるか否かを判定し、YESの場合はステップS5へ進み、NOの場合はステップS4へ進む。
[Object detection processing]
FIG. 2 is a flowchart illustrating a flow of object detection processing by the object detection apparatus according to the first embodiment.
In step S1, the imaging unit 2 captures and acquires an image ahead of the vehicle.
In step S2, the luminance detection unit 7 calculates the average value of the luminance output values and the standard deviation σ from the pixel output of the irradiation region.
In step S3, the luminance detection unit 7 determines whether or not the luminance value of the average luminance value −3σ of the luminance output in the irradiation region is the minimum luminance output output from the imaging unit 2, and if YES, step S5 If NO, proceed to step S4.
ステップS4では、輝度検出部7において、照射領域内の輝度出力の平均値-3σの輝度値が撮像部2から出力される最小輝度出力となるようなオフセット制御信号を生成し、オフセット回路22において、カメラ21から出力されたアナログ信号に対し、オフセット制御信号に応じた直流オフセット量を付与するオフセット制御を実施する。
ステップS5では、変調制御部3において、照射領域内の輝度出力の平均値+3σの輝度値が撮像部2から出力される最大輝度出力以下であるか否かを判定し、YESの場合はステップS7へ進み、NOの場合はステップS6へ進む。
In step S4, the luminance detection unit 7 generates an offset control signal such that the luminance value of the average luminance value −3σ of the luminance output in the irradiation region becomes the minimum luminance output output from the imaging unit 2, and the
In step S5, the modulation control unit 3 determines whether or not the luminance value of the luminance output within the irradiation region + 3σ is less than or equal to the maximum luminance output output from the imaging unit 2, and if YES, the step Proceed to S7. If NO, proceed to Step S6.
ステップS6では、変調制御部3において、照射領域内の輝度出力の平均値+3σの輝度値が撮像部2から出力される最大輝度出力を超えないようにカメラ21の露光時間を調整する。
ステップS7では、同期検波処理部4において、撮像画像から同期検波領域を抽出する同期検波処理を実施する。
ステップS8では、検波画像エッジ検出部5において、同期検波領域画像から照射光の上端エッジ部の位置を検出し、縦位置情報を出力する。
ステップS9では、物体検出部6において、上端エッジの縦位置情報から物体判定を実施する。
In step S6, the modulation control unit 3 adjusts the exposure time of the
In step S7, the synchronous detection processing unit 4 performs synchronous detection processing for extracting a synchronous detection region from the captured image.
In step S8, the detection image
In step S9, the
次に、作用を説明する。
図3は、光入力を横軸、輝度出力を縦軸とする2次元座標上に、カメラの撮像素子の光入力に対する輝度出力をプロットしたものである。通常、CCDイメージセンサーやCMOSイメージセンサー等の撮像素子において、光入力に対する輝度出力が連続的に変化する領域は、光入力に対する輝度出力値が低い領域(図3の領域1)と高い領域(図3の領域3)、それらの間の領域(図3の領域2)の3つに分けられる。輝度出力値が低い領域と高い領域では、光入力の変化量に対する輝度出力の変化量が小さく、それらの間の領域では、光入力に対する輝度出力の変化量が大きい。ここで、輝度出力値が低い領域と高い領域との間の領域における光入力と輝度出力との関係は輝度出力特性と定義され、その特性は傾きの大きな直線となる。ここで、外乱光が弱い場合には、照射光の強度変調幅に対する輝度出力の変動幅が大きいため、輝度出力特性を図3のように設定することにより、撮像画像から同期検波領域を安定して精度良く抽出できる。ところが、照射光の強度変調幅は外乱光の強さに依らず一定であるから、外乱光が強い場合には、照射光の強度変調幅に対する輝度出力の変動幅が小さくなる。
Next, the operation will be described.
FIG. 3 plots the luminance output with respect to the light input of the image sensor of the camera on two-dimensional coordinates with the light input as the horizontal axis and the luminance output as the vertical axis. Usually, in an image sensor such as a CCD image sensor or a CMOS image sensor, a region where the luminance output continuously changes with respect to light input is a region where the luminance output value with respect to light input is low (region 1 in FIG. 3) and a region where the luminance output value is high (see FIG. 3). 3 area 3) and an area between them (area 2 in FIG. 3). In regions where the luminance output value is low and high, the amount of change in luminance output with respect to the amount of change in light input is small, and in the region between them, the amount of change in luminance output with respect to light input is large. Here, the relationship between the light input and the luminance output in the region between the region where the luminance output value is low and the region where the luminance output value is high is defined as a luminance output characteristic, and the characteristic is a straight line having a large slope. Here, when the disturbance light is weak, the fluctuation range of the luminance output with respect to the intensity modulation width of the irradiation light is large. Therefore, by setting the luminance output characteristic as shown in FIG. 3, the synchronous detection region is stabilized from the captured image. Can be extracted with high accuracy. However, since the intensity modulation width of the irradiation light is constant regardless of the intensity of the disturbance light, when the disturbance light is strong, the fluctuation range of the luminance output with respect to the intensity modulation width of the irradiation light becomes small.
なお、図3のケースでは、外乱光が強い場合、撮像素子の出力信号が輝度出力特性の範囲に収まらず飽和するため、実際には、図4に示すように、レンズの絞り値を大きくしたり露光時間を短くしたりすることにより、撮像素子の最大輝度出力が輝度出力特性の最高値を超えないようにして出力信号の飽和を回避する必要がある。ところが、外乱光が強いときレンズの絞り値や露光時間の調整によって輝度出力特性の傾き(ゲイン)を小さくする手法では、照射光に対する感度分解能の低下を伴うため、同期検波領域の抽出が不安定となる。 In the case of FIG. 3, when the disturbance light is strong, the output signal of the image sensor does not fall within the range of the luminance output characteristics and is saturated, so in practice, the aperture value of the lens is increased as shown in FIG. It is necessary to avoid saturation of the output signal by shortening the exposure time so that the maximum luminance output of the image sensor does not exceed the maximum value of the luminance output characteristics. However, when the disturbance light is strong, the method of reducing the slope (gain) of the luminance output characteristics by adjusting the aperture value and exposure time of the lens is accompanied by a decrease in sensitivity resolution with respect to the irradiated light, so the detection of the synchronous detection region is unstable. It becomes.
これに対し、実施例1では、輝度検出部7において、投光部1の照射領域内の輝度値に応じたオフセット制御信号を生成し、オフセット回路22において、カメラ21から出力されたアナログ信号に対し、オフセット制御信号に応じた直流オフセット量を付与する。輝度検出部7では、照射領域の平均輝度値が高いほど、直流オフセット量が大きくなるようなオフセット制御信号を生成する。これにより、図5に示すように、撮像素子(カメラ21)の輝度出力特性は、外乱光が強いほど光入力軸正方向へオフセットされる。このとき、輝度出力特性の傾きは既定輝度出力特性の傾きが維持されるため、照射光に対する感度分解能の低下を回避できる。すなわち、実施例1では、輝度出力特性の傾きを維持しつつ光入力軸方向の位置をオフセットさせることで、外乱光の強度変化にかかわらず、安定して同期検波領域を抽出できる。
On the other hand, in the first embodiment, the luminance detection unit 7 generates an offset control signal corresponding to the luminance value in the irradiation region of the light projecting unit 1, and the offset
実施例1では、投光部1の照射領域内の輝度出力の平均値-3σの輝度値が撮像部2から出力される最小輝度出力となるように撮像素子の輝度出力特性を光入力軸正方向にオフセットさせる。つまり、投光部1の照射領域内の輝度出力の平均値-3σの最小輝度値が、輝度出力特性の最低値となるような直流オフセット量を設定する。これにより、強度最小時の照射光に対する撮像素子の輝度出力特性が線形となるため、効率の良い輝度感度を設定できる。 In the first embodiment, the luminance output characteristic of the image sensor is adjusted so that the luminance value of the average value −3σ of the luminance output in the irradiation area of the light projecting unit 1 becomes the minimum luminance output output from the imaging unit 2. Offset in direction. That is, the DC offset amount is set so that the minimum luminance value of the average value −3σ of the luminance output in the irradiation area of the light projecting unit 1 becomes the minimum value of the luminance output characteristics. Thereby, since the luminance output characteristic of the image sensor with respect to the irradiation light at the minimum intensity becomes linear, it is possible to set an efficient luminance sensitivity.
実施例1では、オフセット回路22において、カメラ21から出力されたアナログ信号に対し、輝度出力オフセット値に応じた直流オフセット量を付与する。すなわち、A-Dコンバータ23によりデジタル信号に変化される前のアナログ信号の領域でオフセットを行うため、A-Dコンバータ23から出力されるデジタル信号の分解能を低下させることなく、感度範囲を調整できる。
In the first embodiment, the offset
実施例1では、投光部1の照射領域内の輝度出力の平均値+3σの輝度値が撮像部2から出力される最大輝度出力を超えないようにカメラ21の露光時間を調整する。つまり、投光部1の照射領域内の輝度出力の最高輝度値が、輝度出力特性の最高値を超えないように露光時間を設定する。すなわち、輝度出力特性のオフセットのみでは対応できない場合(出力信号が飽和する場合)に限り、輝度出力特性の傾き(ゲイン)を調整する。これにより、出力信号の飽和を防止しつつ、効率良く同期検波領域を抽出できる。
In the first embodiment, the exposure time of the
実施例1にあっては、以下に列挙する効果を奏する。
(1) 画像を撮像する撮像部2と、撮像部2の露光時間に同期して撮像部2の撮像範囲内に強度変調された照射光を照射する投光部1と、投光部1の照射光の発光強度を制御する変調制御部3と、撮像部2の撮像画像から、投光部1の照射光の強度変調と同期して輝度変動する同期検波領域を抽出する同期検波処理部4と、同期検波領域から撮像範囲内の物体検出を行う物体検出部6と、を有する物体検出装置において、撮像部2の撮像画像から投光部1の照射範囲の各画素の輝度値を検出する輝度検出部7と、光入力と輝度出力とを座標軸とする座標上に撮像部2の光入力に対する輝度出力値が低い領域と高い領域との間の領域における光入力と輝度出力との関係を表す輝度出力特性を設定し、照射範囲の各画素の輝度値に応じて、輝度出力特性の傾きを維持しつつ光入力軸方向の位置を変更するオフセット回路22と、を備えた。
よって、外乱光の強度変化にかかわらず、安定して同期検波領域を抽出できる。
In Example 1, the following effects are exhibited.
(1) The imaging unit 2 that captures an image, the light projecting unit 1 that irradiates intensity-modulated irradiation light within the imaging range of the image capturing unit 2 in synchronization with the exposure time of the image capturing unit 2, and the light projecting unit 1 The modulation control unit 3 that controls the emission intensity of the irradiation light, and the synchronous detection processing unit 4 that extracts a synchronous detection region whose luminance varies in synchronization with the intensity modulation of the irradiation light of the light projecting unit 1 from the captured image of the imaging unit 2 And an
Therefore, the synchronous detection region can be extracted stably regardless of the intensity change of the disturbance light.
(2) オフセット回路22は、照射範囲の輝度値が高いほど大きくなるオフセット制御信号に基づき、撮像部2の輝度出力特性を光入力軸正方向へオフセットする。
よって、外乱光の強度変化にかかわらず、安定して同期検波領域を抽出できる。
(2) The offset
Therefore, the synchronous detection region can be extracted stably regardless of the intensity change of the disturbance light.
(3) オフセット回路22は、投光部1の照射光が観測される撮像範囲の平均輝度値と標準偏差σを算出し、平均値-3σの最小輝度値が、輝度出力特性の最低値となるように撮像部2の輝度出力特性を光入力軸正方向へオフセットする。
よって、効率のよい輝度感度を設定できる。
(3) The offset
Therefore, efficient luminance sensitivity can be set.
(4) オフセット回路22は、撮像部2から出力されたアナログ信号に対し、オフセット制御信号に応じた直流オフセット量を付与する。
よって、実際に撮像部2から出力されるデジタル信号の分解能を低下させることなく、感度範囲を調整できる。
(4) The offset
Therefore, the sensitivity range can be adjusted without reducing the resolution of the digital signal actually output from the imaging unit 2.
(5) 撮像部2の露光時間を制御する変調制御部3を備え、変調制御部3は、投光部1の照射光が観測される撮像領域の最大輝度値が、輝度出力特性の最高値を超えないように露光時間を設定する。
よって、撮像素子の出力信号の飽和を防止しつつ、効率良く同期検波領域を抽出できる。
(5) A modulation control unit 3 that controls the exposure time of the imaging unit 2 is provided, and the modulation control unit 3 is configured such that the maximum luminance value of the imaging region where the irradiation light of the light projecting unit 1 is observed is the highest luminance output characteristic. Set the exposure time so as not to exceed.
Therefore, the synchronous detection region can be extracted efficiently while preventing saturation of the output signal of the image sensor.
(他の実施例)
以上、本発明を実施するための形態を、実施例に基づいて説明したが、本発明の具体的な構成は、実施例に限定されるものではなく、発明の要旨を逸脱しない範囲の設計変更等があっても本発明に含まれる。
例えば、実施例では、本発明の物体検出装置として車両に搭載するものを例示したが、これに限らず、例えば、鉄道、船舶、その他の移動体や、産業ロボット、警備ロボット、介護ロボットその他のロボット、産業機器などの動作を制御する装置、静止する物体または移動する物体の位置を測定する機器にも適用することができ、実施例と同様の作用効果を得ることができる。
(Other examples)
As mentioned above, although the form for implementing this invention was demonstrated based on the Example, the concrete structure of this invention is not limited to an Example, The design change of the range which does not deviate from the summary of invention And the like are included in the present invention.
For example, in the embodiment, the object detection device mounted on a vehicle is illustrated as an example of the present invention. However, the present invention is not limited to this, and for example, railways, ships, other mobile objects, industrial robots, security robots, nursing robots, The present invention can also be applied to devices that control the operation of robots, industrial devices, etc., and devices that measure the position of a stationary object or a moving object, and the same effects as in the embodiments can be obtained.
1 投光部(投光手段)
2 撮像部(撮像手段)
3 変調制御部(投光制御手段,露光制御手段)
4 同期検波処理部(同期検波処理手段)
6 物体検出部(物体検出手段)
7 輝度検出部(輝度検出手段)
22 オフセット回路(輝度出力特性変更手段)
1 Emitter (emitter means)
2 Imaging unit (imaging means)
3 Modulation control unit (light projection control means, exposure control means)
4 Synchronous detection processing unit (Synchronous detection processing means)
6 Object detection unit (object detection means)
7 Luminance detection unit (luminance detection means)
22 Offset circuit (luminance output characteristic changing means)
Claims (5)
前記撮像手段の露光時間に同期して前記撮像手段の撮像範囲内に強度変調された照射光を照射する投光手段と、
前記投光手段の照射光の発光強度を制御する投光制御手段と、
前記撮像手段の撮像画像から、前記投光手段の照射光の強度変調と同期して輝度変動する同期検波領域を抽出する同期検波処理手段と、
前記同期検波領域から前記撮像範囲内の物体検出を行う物体検出手段と、
を有する物体検出装置において、
前記撮像手段の撮像画像から前記投光手段の照射範囲の各画素の輝度を検出する輝度検出手段と、
光入力と輝度出力とを座標軸とする座標上に、前記撮像手段の光入力に対する輝度出力値が低い領域と高い領域との間の領域における光入力と輝度出力との関係を表す輝度出力特性を設定し、前記照射範囲の各画素の輝度に応じて、前記輝度出力特性の傾きを維持しつつ光入力軸方向の位置を変更する輝度出力特性変更手段と、
を備えたことを特徴とする物体検出装置。 An imaging means for capturing an image;
A light projecting unit that irradiates intensity-modulated irradiation light within an imaging range of the imaging unit in synchronization with an exposure time of the imaging unit;
Projection control means for controlling the emission intensity of the irradiation light of the projection means;
Synchronous detection processing means for extracting a synchronous detection region whose luminance varies in synchronization with intensity modulation of irradiation light of the light projecting means, from a captured image of the imaging means;
Object detection means for detecting an object within the imaging range from the synchronous detection region;
In an object detection apparatus having
A luminance detecting means for detecting the luminance of each pixel in the irradiation range of the light projecting means from a captured image of the imaging means;
A luminance output characteristic representing the relationship between the light input and the luminance output in a region between a region where the luminance output value with respect to the light input of the imaging means is low and a region on the coordinate having the light input and the luminance output as coordinate axes. A luminance output characteristic changing unit configured to change the position of the light input axis direction while maintaining the inclination of the luminance output characteristic according to the luminance of each pixel in the irradiation range;
An object detection apparatus comprising:
前記輝度出力特性変更手段は、前記照射範囲の輝度が高いほど大きくなる輝度出力オフセットに基づき、前記撮像手段の輝度出力特性を前記光入力軸正方向へオフセットすることを特徴とする物体検出装置。 The object detection apparatus according to claim 1,
The luminance output characteristic changing unit offsets the luminance output characteristic of the imaging unit in the positive direction of the light input axis based on a luminance output offset that increases as the luminance of the irradiation range increases.
前記輝度出力特性変更手段は、前記投光手段の照射光が観測される撮像範囲の平均輝度と標準偏差σを算出し、平均値-3σの最小輝度が、前記輝度出力特性の最低となるように前記撮像手段の輝度出力特性を前記光入力軸正方向へオフセットすることを特徴とする物体検出装置。 The object detection device according to claim 2,
The luminance output characteristic changing unit calculates an average luminance and a standard deviation σ of an imaging range where the irradiation light of the light projecting unit is observed, so that a minimum luminance of an average value −3σ becomes a minimum of the luminance output characteristic. An object detection apparatus that offsets the luminance output characteristic of the imaging means in the positive direction of the light input axis.
前記輝度出力特性変更手段は、前記撮像手段から出力されたアナログ信号に対し、前記輝度出力オフセットに応じた直流オフセット量を付与することを特徴とする物体検出装置。 In the object detection device according to claim 2 or 3,
The luminance output characteristic changing unit adds an amount of direct current offset corresponding to the luminance output offset to the analog signal output from the imaging unit.
前記撮像手段の露光時間を制御する露光制御手段を備え、
前記露光制御手段は、前記投光手段の照射光が観測される撮像領域の最大輝度が、前記輝度出力特性の最高を超えないように露光時間を設定することを特徴とする物体検出装置。 In the object detection device according to any one of claims 1 to 4,
Exposure control means for controlling the exposure time of the imaging means;
The object detection apparatus, wherein the exposure control means sets an exposure time so that a maximum luminance of an imaging region where the irradiation light of the light projecting means is observed does not exceed a maximum of the luminance output characteristics.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2013226170A JP6287069B2 (en) | 2013-10-31 | 2013-10-31 | Object detection device |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2013226170A JP6287069B2 (en) | 2013-10-31 | 2013-10-31 | Object detection device |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2015087267A true JP2015087267A (en) | 2015-05-07 |
JP6287069B2 JP6287069B2 (en) | 2018-03-07 |
Family
ID=53050190
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2013226170A Active JP6287069B2 (en) | 2013-10-31 | 2013-10-31 | Object detection device |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP6287069B2 (en) |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2018040754A (en) * | 2016-09-09 | 2018-03-15 | 日産自動車株式会社 | Vehicle detection method and vehicle detection device |
WO2021005659A1 (en) * | 2019-07-05 | 2021-01-14 | パナソニックセミコンダクターソリューションズ株式会社 | Information processing system, sensor system, information processing method, and program |
Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2008128792A (en) * | 2006-11-20 | 2008-06-05 | Fujifilm Corp | Distance image producing device and method |
WO2013129387A1 (en) * | 2012-03-01 | 2013-09-06 | 日産自動車株式会社 | Range finding device and range finding method |
-
2013
- 2013-10-31 JP JP2013226170A patent/JP6287069B2/en active Active
Patent Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2008128792A (en) * | 2006-11-20 | 2008-06-05 | Fujifilm Corp | Distance image producing device and method |
WO2013129387A1 (en) * | 2012-03-01 | 2013-09-06 | 日産自動車株式会社 | Range finding device and range finding method |
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2018040754A (en) * | 2016-09-09 | 2018-03-15 | 日産自動車株式会社 | Vehicle detection method and vehicle detection device |
WO2021005659A1 (en) * | 2019-07-05 | 2021-01-14 | パナソニックセミコンダクターソリューションズ株式会社 | Information processing system, sensor system, information processing method, and program |
JPWO2021005659A1 (en) * | 2019-07-05 | 2021-01-14 | ||
JP7372970B2 (en) | 2019-07-05 | 2023-11-01 | ヌヴォトンテクノロジージャパン株式会社 | Information processing system, sensor system, information processing method and program |
Also Published As
Publication number | Publication date |
---|---|
JP6287069B2 (en) | 2018-03-07 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US8717414B2 (en) | Method and apparatus for matching color image and depth image | |
US9723281B2 (en) | Projection apparatus for increasing pixel usage of an adjusted projection area, and projection method and program medium for the same | |
US10690484B2 (en) | Depth information extracting device and method | |
US9264616B2 (en) | Image capturing apparatus, method of controlling the same, and storage medium for correcting image blurring of a captured image | |
US20160295186A1 (en) | Wearable projecting device and focusing method, projection method thereof | |
US20190129034A1 (en) | Range image generation apparatus and range image generation method | |
JP5860663B2 (en) | Stereo imaging device | |
JP2017092592A5 (en) | TRACKING CONTROL DEVICE, TRACKING CONTROL METHOD, AND IMAGING DEVICE | |
JP6525543B2 (en) | IMAGE PROCESSING APPARATUS, IMAGE PROCESSING METHOD, AND PROGRAM | |
US10122999B2 (en) | Image generating method and image generating apparatus | |
US10547792B2 (en) | Control device, control method, and program for controlling light intensities | |
US20160266347A1 (en) | Imaging apparatus and method, and program | |
US9804483B2 (en) | Projector and method of controlling projector | |
KR20150080678A (en) | Apparatus and method of correcting image for image projection device with cognitive function on user and environment | |
JP6287069B2 (en) | Object detection device | |
US11514598B2 (en) | Image processing apparatus, image processing method, and mobile device | |
KR20150101343A (en) | Video projection system | |
WO2015145599A1 (en) | Video projection device | |
US10942607B2 (en) | Manipulation detection device and video display system that are capable detecting an object on a video display surface | |
US10531021B2 (en) | Image generating apparatus, image generating method, and recording medium for controlling image sensor having two types of cells | |
JP5845566B2 (en) | Projector and projector control method | |
JP2016142645A (en) | Imaging system | |
US9560326B2 (en) | Technologies for projecting a proportionally corrected image | |
US20240107177A1 (en) | Techniques for Correcting Images in Flash Photography | |
JP2011228856A (en) | On-vehicle camera system, image processing apparatus, image processing method, and program |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20160826 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20170524 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20170530 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20170724 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20171031 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20171220 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20180109 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20180122 |
|
R151 | Written notification of patent or utility model registration |
Ref document number: 6287069 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |