JP2005184523A - On-vehicle monitoring camera apparatus - Google Patents

On-vehicle monitoring camera apparatus Download PDF

Info

Publication number
JP2005184523A
JP2005184523A JP2003423145A JP2003423145A JP2005184523A JP 2005184523 A JP2005184523 A JP 2005184523A JP 2003423145 A JP2003423145 A JP 2003423145A JP 2003423145 A JP2003423145 A JP 2003423145A JP 2005184523 A JP2005184523 A JP 2005184523A
Authority
JP
Japan
Prior art keywords
video signal
vehicle
monitor
moving object
monitoring camera
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2003423145A
Other languages
Japanese (ja)
Inventor
Tatsuto Nagarego
達人 流郷
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Panasonic Holdings Corp
Original Assignee
Matsushita Electric Industrial Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Matsushita Electric Industrial Co Ltd filed Critical Matsushita Electric Industrial Co Ltd
Priority to JP2003423145A priority Critical patent/JP2005184523A/en
Publication of JP2005184523A publication Critical patent/JP2005184523A/en
Pending legal-status Critical Current

Links

Images

Landscapes

  • Closed-Circuit Television Systems (AREA)

Abstract

<P>PROBLEM TO BE SOLVED: To enable a driver to easily confirm on a monitor an obstacle in the direction of travel even at nighttime. <P>SOLUTION: The on-vehicle monitoring camera apparatus is provided with: a monitoring camera 1 and an infrared camera 5 which are loaded in the rear part of a vehicle for imaging the same rear side of the vehicle; a first video signal processing section 2 for outputting a first video signal from a video image captured with the monitoring camera 1; a monitor 4 for displaying an image on the basis of the first video signal outputted from the first video signal processing section 2; a second video signal processing section 6 for detecting a creature or a moving object from a video image captured with the infrared camera 5 and outputting a second video signal; a position detecting section for detecting the positional information of the creature or moving object from the second video signal; and a display control section 3 for displaying a video image to be displayed on the monitor 4 while highlighting a video portion of a position corresponding to the positional information outputted from the position detecting section 7 on the basis of the first video signal. <P>COPYRIGHT: (C)2005,JPO&NCIPI

Description

本発明は、車両に搭載したカメラで撮影した映像を車両内に取り付けたモニタに表示して、車両走行時における安全を確認するための車載監視カメラ装置に関するものである。   The present invention relates to an in-vehicle monitoring camera device for displaying an image captured by a camera mounted on a vehicle on a monitor attached in the vehicle and confirming safety during traveling of the vehicle.

従来、車両の前方または後方に向けてカメラを設置し、カメラが撮像した映像をモニタに表示して運転者の走行を支援する車載監視カメラ装置が知られている。例えば、車両後部に取り付けたカメラにより車両後方を撮像してその映像をモニタ上に映し出すことにより、車両後方の安全を確認しながら車両を後退させるようにした移動体の移動支援装置が知られている(例えば、特許文献1参照)。また、モニタに表示される画像を立体的に見せるために、通常のモニタ画面の前面に透明なディスプレイを設け、このディスプレイに移動体などの画像を表示して後方の背景と2重映しにして模擬立体画像を表示する多層表示装置が知られている(例えば、特許文献2参照)。
特開2002−19523号公報 特許第3335998号公報
2. Description of the Related Art Conventionally, there is known an in-vehicle monitoring camera device that installs a camera toward the front or rear of a vehicle and displays an image captured by the camera on a monitor to assist a driver in traveling. For example, a moving support device for a moving body is known in which a vehicle attached to the rear of a vehicle is used to image the rear of the vehicle and the image is displayed on a monitor so that the vehicle is moved backward while confirming the safety behind the vehicle. (See, for example, Patent Document 1). In addition, in order to display the image displayed on the monitor in three dimensions, a transparent display is provided in front of a normal monitor screen, and an image of a moving object is displayed on this display so that the background behind the image is double projected. A multilayer display device that displays a simulated stereoscopic image is known (see, for example, Patent Document 2).
JP 2002-19523 A Japanese Patent No. 3335998

しかしながら、従来の車載監視カメラ装置では、夜間において車両を走行させる場合に、車両の前方はヘッドライトにより、車両の後方はバックライトにより照明される範囲内でしか運転者は視界を確保することができないため、ヘッドライトまたはバックライトで照明される範囲外に存在する生物や移動物体を確認することができない。このため、運転者が生物や移動物体がいないと判断した場合に、その生物や移動物体が車両が走行する進路に急に進入してくる場合には、咄嗟の判断で車両を制御しなければならないという問題があった。さらに、夜間においては、一般的にいって運転者にとってモニタ表示が見にくいという問題があった。   However, in a conventional in-vehicle monitoring camera device, when a vehicle is driven at night, the driver can ensure visibility only within a range where the front of the vehicle is illuminated by a headlight and the rear of the vehicle is illuminated by a backlight. Because it is not possible, it is impossible to confirm a living thing or a moving object that exists outside the range illuminated by the headlight or the backlight. For this reason, if the driver determines that there are no creatures or moving objects, and the creatures or moving objects suddenly enter the path along which the vehicle travels, the vehicle must be controlled by the judgment of the trap. There was a problem of not becoming. Furthermore, there is a problem that it is difficult for the driver to see the monitor display at night.

本発明は、このような従来の問題を解決するためになされたもので、運転者が夜間でも走行方向の障害物確認を容易に行うことのできる車載監視カメラ装置を提供することを目的とする。   The present invention has been made to solve such a conventional problem, and an object thereof is to provide an in-vehicle monitoring camera device that allows a driver to easily check an obstacle in the traveling direction even at night. .

本発明の車載監視カメラ装置は、車両に搭載されて前方または後方の少なくとも一方の同じ方向を撮像する監視カメラおよび赤外線カメラと、前記監視カメラが撮像した映像から第1の映像信号を出力する第1の映像信号処理部と、前記第1の映像信号処理部から出力された第1の映像信号を基に画像を表示するモニタと、前記赤外線カメラが撮像した映像の中から生物または移動物体を検出して第2の映像信号を出力する第2の映像信号処理部と、前記第2の映像信号から生物または移動物体の位置情報を検出する位置検出部と、前記第1の映像信号に基づいて前記モニタに表示する映像のうち前記位置検出部から出力された位置情報に対応する位置の映像部分を強調して表示する表示制御部とを備えた構成を有している。   An in-vehicle monitoring camera device according to the present invention is mounted on a vehicle and outputs a first video signal from a monitoring camera and an infrared camera that image at least one of the front and rear directions in the same direction, and an image captured by the monitoring camera. A video signal processing unit, a monitor that displays an image based on the first video signal output from the first video signal processing unit, and a living organism or a moving object from the video captured by the infrared camera. Based on the first video signal, a second video signal processing unit that detects and outputs a second video signal, a position detection unit that detects position information of a living organism or a moving object from the second video signal, and And a display control unit for emphasizing and displaying a video portion at a position corresponding to the position information output from the position detection unit in the video displayed on the monitor.

この構成により、夜間の走行において、車両走行方向の前方または後方に生物または移動物体が存在している場合に、通常の監視カメラでは暗くて映像として表示することができない場合でも、また赤外線カメラで撮影した映像では、生物や移動物体を検出できても通常の画面として表示することができない場合でも、通常の監視カメラの画像の中に存在する生物や移動物体の位置情報を赤外線カメラから取得して、その位置情報に対応する位置の監視カメラの映像部分を強調して表示することにより、運転者はモニタ画面上で生物や移動物体の存在を確認することができ、夜間でも走行方向の障害物確認を容易に行うことができる。   With this configuration, when there is a living thing or moving object in front of or behind the vehicle traveling direction at night, even if it is dark and cannot be displayed as an image with a normal surveillance camera, Even if a captured image can detect a living organism or moving object but cannot display it as a normal screen, it acquires the position information of the living organism or moving object present in the normal surveillance camera image from the infrared camera. By emphasizing and displaying the video part of the surveillance camera at the position corresponding to the position information, the driver can confirm the presence of living things and moving objects on the monitor screen, and the obstacle in the driving direction even at night Object confirmation can be performed easily.

また、本発明の車載監視カメラ装置は、前記表示制御部が、前記位置検出部から出力された位置情報に対応する位置の前記第1の映像信号部分の輝度を高めて表示する構成を有している。この構成により、通常の監視カメラでは暗くて見えない部分でも、生物や移動物体が存在する部分は明るく表示されるので、運転者は夜間でも走行方向の障害物確認を容易に行うことができる。   Further, the in-vehicle monitoring camera device of the present invention has a configuration in which the display control unit displays the first video signal portion at a position corresponding to the position information output from the position detection unit with increased brightness. ing. With this configuration, even a portion that is dark and cannot be seen with a normal surveillance camera is displayed brightly in a portion where a living thing or a moving object exists, so that the driver can easily check an obstacle in the traveling direction even at night.

また、本発明の車載監視カメラ装置は、前記表示制御部が、前記位置検出部から出力された位置情報に対応する位置の前記第1の映像信号部分に所定のマークまたは枠を表示するか、または点滅表示する構成を有していいる。この構成により、通常の監視カメラでは暗くて見えない部分でも、生物や移動物体が存在する部分は、○、×等の単純なマークや危険表示マーク、または単なる枠表示や点滅表示を行うことで、運転者は夜間でも走行方向の障害物確認を容易に行うことができる。   Further, in the in-vehicle monitoring camera device of the present invention, the display control unit displays a predetermined mark or frame on the first video signal portion at a position corresponding to the position information output from the position detection unit, Or it has the structure which blinks and displays. With this configuration, even if the part is dark and cannot be seen with a normal surveillance camera, the part where living things or moving objects are present can be displayed by simple marks such as ○ and ×, danger display marks, or simple frame display and blinking display. The driver can easily check obstacles in the running direction even at night.

また、本発明の車載監視カメラ装置は、車両に搭載されて前方または後方の少なくとも一方の同じ方向を撮像する監視カメラおよび赤外線カメラと、後方画面および前方画面を有する2重ディスプレイ構造のモニタと、前記監視カメラが撮像した映像から第1の映像信号を出力する第1の映像信号処理部と、前記赤外線カメラが撮像した映像の中から生物または移動物体を検出して第2の映像信号を出力する第2の映像信号処理部と、前記第1の映像信号処理部から出力された第1の映像信号を基に画像を前記モニタの後方画面に表示する第1の表示制御部と、前記第2の映像信号処理部から出力された第2の映像信号を基に生物または移動物体の画像を前記モニタの前方画面に表示する第2の表示制御部とを備えた構成を有している。   An in-vehicle monitoring camera device of the present invention is mounted on a vehicle and monitors a front camera or an infrared camera that captures the same direction of at least one of the front and rear, a dual display structure monitor having a rear screen and a front screen, A first video signal processing unit that outputs a first video signal from video captured by the surveillance camera, and outputs a second video signal by detecting a living organism or a moving object from the video captured by the infrared camera. A second video signal processing unit, a first display control unit for displaying an image on a rear screen of the monitor based on the first video signal output from the first video signal processing unit, and the first And a second display control unit that displays an image of a living organism or a moving object on the front screen of the monitor based on the second video signal output from the second video signal processing unit.

この構成により、夜間の走行において、車両走行方向の前方または後方に生物または移動物体が存在している場合に、通常の監視カメラでは暗くて映像として表示することができない場合でも、赤外線カメラで撮影した生物や移動物体を2重ディスプレイモニタの前方画面に表示することにより、運転者はモニタ画面上で生物や移動物体の存在を分かりやすく立体的に確認することができ、夜間でも走行方向の障害物確認を容易に行うことができる。   With this configuration, when there is a living thing or moving object in front of or behind the vehicle traveling direction at night, even if it is dark and cannot be displayed as an image with a normal surveillance camera, it is shot with an infrared camera. By displaying the living creatures and moving objects on the front screen of the dual display monitor, the driver can easily check the presence of the living creatures and moving objects in a three-dimensional manner on the monitor screen. Object confirmation can be performed easily.

また、本発明の車載監視カメラ装置は、車両に搭載されて前方または後方の少なくとも一方の前記監視カメラおよび赤外線カメラと同じ方向の障害物を検出する超音波センサと、前記超音波センサにより検出された障害物までの距離を測定して、自車両から前記障害物までの距離が所定値以下で、かつ前記生物または移動物体の位置情報を示す信号が入力された場合に、前記第1の映像信号の中の前記生物または移動物体に対応する部分を強調して表示する構成を有している。   An in-vehicle monitoring camera device of the present invention is mounted on a vehicle and detects an obstacle in the same direction as at least one of the front and rear monitoring cameras and the infrared camera, and is detected by the ultrasonic sensor. When the distance from the host vehicle to the obstacle is less than a predetermined value and a signal indicating the position information of the living thing or moving object is input, the first video is measured. It has the structure which emphasizes and displays the part corresponding to the said living body or moving object in a signal.

この構成により、夜間の走行において、車両の後方に生物または移動物体が存在している場合に、それらが所定の距離まで近づいて場合にみのそれらを表示することができ、運転者に必要な障害物接近情報を必要なタイミングで表示することができる。   With this configuration, when there are living creatures or moving objects behind the vehicle during night driving, they can be displayed only when they are approaching a predetermined distance, which is necessary for the driver. Obstacle approach information can be displayed at a necessary timing.

また、本発明の車載監視カメラ装置は、車両に搭載されて前方または後方の少なくとも一方の前記監視カメラおよび赤外線カメラと同じ方向の障害物を検出する超音波センサと、前記超音波センサにより検出された障害物までの距離を測定して、自車両から前記障害物までの距離が所定値以下の場合に、前記生物または移動物体を前記モニタの前方画面に表示する構成を備えている。   An in-vehicle monitoring camera device of the present invention is mounted on a vehicle and detects an obstacle in the same direction as at least one of the front and rear monitoring cameras and the infrared camera, and is detected by the ultrasonic sensor. When the distance from the host vehicle to the obstacle is less than or equal to a predetermined value, the creature or moving object is displayed on the front screen of the monitor.

この構成により、夜間の走行において、車両の後方に生物または移動物体が存在している場合に、それらが所定の距離まで近づいて場合にみのそれらを表示することができ、運転者に必要な障害物接近情報を必要なタイミングで表示することができる。   With this configuration, when there are living creatures or moving objects behind the vehicle during night driving, they can be displayed only when they are approaching a predetermined distance, which is necessary for the driver. Obstacle approach information can be displayed at a necessary timing.

また、本発明は、上記した車載監視カメラ装置を搭載した車両であり、このような車載監視カメラ装置を車両に搭載することにより、車両の負荷価値を高めることができる。   Moreover, this invention is a vehicle carrying the above-mentioned vehicle-mounted monitoring camera apparatus, By mounting such a vehicle-mounted monitoring camera apparatus in a vehicle, the load value of a vehicle can be raised.

本発明は、夜間の走行において、通常の監視カメラの画像では暗くて見えない生物や移動物体を赤外線カメラで撮像し、その映像信号を基に生物や移動物体が目立つようにモニタに表示するので、運転者は夜間でも走行方向の障害物を容易に確認できるという効果を有する車載監視カメラ装置を提供することができる。   The present invention captures a living thing or moving object that is dark and invisible in a normal surveillance camera image with an infrared camera during night driving, and displays it on a monitor so that the living thing or moving object stands out based on the video signal. The driver can provide an in-vehicle monitoring camera device having an effect that the driver can easily check an obstacle in the traveling direction even at night.

以下、本発明の実施の形態の車載監視カメラ装置について、図面を用いて説明する。   Hereinafter, an in-vehicle monitoring camera device according to an embodiment of the present invention will be described with reference to the drawings.

(実施の形態1)
本発明の第1の実施の形態の車載監視カメラ装置の構成を図1に示す。図1において、撮像カメラ1は、車両の後部に設置され、CCDまたはCMOS等の固体撮像素子で構成され、例えば図2に示すように、車両の後部に撮像方向を後方下方の道路面に向けて設置されている。第1映像信号処理部2は、撮像カメラ1で撮像された映像に対し、前処理、平滑化、A/D変換等を行い、第1映像信号を出力する信号処理プロセッサである。表示制御部3は、第1映像信号を表示に適した画像信号に変換して出力する画像処理プロセッサである。モニタ4は、液晶ディスプレイ、ELディスプレイまたはプラズマディスプレイ等の薄型軽量タイプのディスプレイである。赤外線カメラ5は、ある程度以上の熱量を発生する生物や移動物体を検出することができ、撮像カメラ1に隣接して撮像方向を撮像カメラ1と同じ方向に向けて車両後部に設置されている。第2映像信号処理部6は、赤外線カメラ5で撮像された映像から生物や移動物体を検出し、また、背景差分法等により生物や移動物体の動きを検出して第2映像信号として出力する。位置検出部7は、第2映像信号から生物や移動物体の位置情報を出力する。タイミング発生部8は、撮像カメラ1および赤外線カメラ5の駆動タイミングや、撮像カメラ1および赤外線カメラ5により撮像タイミング(走査タイミング)および表示タイミングを同期させるための信号を出力させるものである。なお、装置全体はCPUによって制御される。
(Embodiment 1)
The configuration of the in-vehicle monitoring camera device according to the first embodiment of the present invention is shown in FIG. In FIG. 1, an imaging camera 1 is installed at the rear of a vehicle and is composed of a solid-state imaging device such as a CCD or a CMOS. For example, as shown in FIG. Installed. The first video signal processing unit 2 is a signal processor that performs preprocessing, smoothing, A / D conversion, and the like on the video captured by the imaging camera 1 and outputs a first video signal. The display control unit 3 is an image processor that converts the first video signal into an image signal suitable for display and outputs the image signal. The monitor 4 is a thin and light type display such as a liquid crystal display, an EL display, or a plasma display. The infrared camera 5 can detect a living organism or a moving object that generates a certain amount of heat, and is installed adjacent to the imaging camera 1 with the imaging direction in the same direction as the imaging camera 1 at the rear of the vehicle. The second video signal processing unit 6 detects a living organism or a moving object from the video imaged by the infrared camera 5, and also detects the movement of the living organism or the moving object by a background subtraction method or the like and outputs it as a second video signal. . The position detection unit 7 outputs position information of a living thing or a moving object from the second video signal. The timing generator 8 outputs signals for synchronizing the driving timing of the imaging camera 1 and the infrared camera 5, and the imaging timing (scanning timing) and the display timing by the imaging camera 1 and the infrared camera 5. The entire apparatus is controlled by the CPU.

以上のように構成された車載監視カメラ装置について、その動作を説明する。撮像カメラ1で撮像された映像は、第1映像信号処理部2で、相関2重サンプリング、自動利得制御等の前処理が施された後、デジタル信号に変換されて第1映像信号として出力される。第1映像信号は表示制御部3により表示に適した画像信号に変換され、モニタ4に表示される。一方、赤外線カメラ5で撮像された映像からは、第2映像信号処理部6により人間や動物などの生物が検出されるとともに、フレームメモリを用いてそれらが移動している物体であるかが検出され、第2映像信号として出力される。第2映像信号に含まれる生物や移動物体は、第2映像信号の中のクロックタイミングにより位置検出部7により位置情報が検出される。このクロックタイミングは、タイミング発生部8からの同期信号により第1映像信号とも同期している。得られた位置情報は、表示制御部3に送出され、表示制御部3は、得られた位置情報に対応する第1の映像信号の部分を強調するように信号変換してモニタ4に表示する。   The operation of the on-vehicle monitoring camera device configured as described above will be described. The video imaged by the imaging camera 1 is subjected to preprocessing such as correlated double sampling and automatic gain control in the first video signal processing unit 2, and then converted into a digital signal and output as a first video signal. The The first video signal is converted into an image signal suitable for display by the display control unit 3 and displayed on the monitor 4. On the other hand, from the video imaged by the infrared camera 5, the second video signal processing unit 6 detects organisms such as humans and animals, and detects whether they are moving objects using a frame memory. And output as a second video signal. Position information of the living thing or the moving object included in the second video signal is detected by the position detection unit 7 at the clock timing in the second video signal. This clock timing is also synchronized with the first video signal by the synchronization signal from the timing generator 8. The obtained position information is sent to the display control unit 3, and the display control unit 3 performs signal conversion so as to emphasize the portion of the first video signal corresponding to the obtained position information, and displays it on the monitor 4. .

この信号変換は、モニタに表示する画像の輝度を部分的に変えるものである。すなわち、位置情報に含まれているタイミング信号を基づき、その位置における輝度を抵抗値を変えることにより通常時の輝度よりも大きくさせる。これにより、第1映像信号では、暗くてモニタ4には表示されない部分の映像が明るく表示され、しかもその部分の映像は赤外線カメラ5が撮像した生物または移動物体であるので、第1映像信号だけでは表示されない生物や移動物体が、モニタ4上に表示されることになる。   This signal conversion partially changes the luminance of the image displayed on the monitor. That is, based on the timing signal included in the position information, the luminance at that position is made larger than the normal luminance by changing the resistance value. Thereby, in the first video signal, the video of the portion that is dark and not displayed on the monitor 4 is displayed brightly, and the video of that portion is a living body or a moving object imaged by the infrared camera 5, so only the first video signal is displayed. In this case, creatures and moving objects that are not displayed are displayed on the monitor 4.

別の信号変換方法として、表示制御部3は、位置検出部7から出力された位置情報に対応する位置に○、×等の単純なマークや危険表示マーク等をキャラクジェネレータから発生させて表示したり、または単なる枠表示や点滅表示を行うことにより、同様に夜間における障害物確認を容易に行うことができる。   As another signal conversion method, the display control unit 3 generates and displays a simple mark such as ◯ and X, a danger display mark, or the like from the character generator at a position corresponding to the position information output from the position detection unit 7. Or by simply displaying a frame or blinking, it is possible to easily check the obstacle at night as well.

このように、本実施の形態1の車載監視カメラ装置では、車両の後部に搭載されて車両の同じ後方を撮像する監視カメラ1および赤外線カメラ5と、監視カメラ1が撮像した映像から第1映像信号を出力する第1映像信号処理部2と、第1映像信号処理部2から出力された第1映像信号を基に画像を表示するモニタ4と、赤外線カメラ5が撮像した映像の中から生物または移動物体を検出して第2映像信号を出力する第2映像信号処理部6と、第2映像信号から生物または移動物体の位置情報を検出する位置検出部7と、第1映像信号に基づいてモニタ4に表示する映像のうち位置検出部7から出力された位置情報に対応する位置の映像部分を強調して表示する表示制御部3とを備えているので、夜間の走行において、車両の後方に生物または移動物体が存在している場合に、通常の監視カメラでは暗くて映像として表示することができない場合でも、また赤外線カメラで撮影した映像では、生物や移動物体を検出できても通常の画面として表示することができない場合でも、監視カメラ1で撮像した画像の中に存在する生物や移動物体の位置情報を赤外線カメラ5から取得して、その位置情報に対応する位置の監視カメラ1の映像部分の強調して表示するので、運転者はモニタ4の画面上で生物や移動物体の存在を確認することができ、夜間でも走行方向の障害物確認を容易に行うことができる。   As described above, in the in-vehicle monitoring camera device according to the first embodiment, the monitoring camera 1 and the infrared camera 5 that are mounted on the rear part of the vehicle and image the same rear side of the vehicle, and the first image from the image captured by the monitoring camera 1 are used. A first video signal processing unit 2 that outputs a signal, a monitor 4 that displays an image based on the first video signal output from the first video signal processing unit 2, and an organism captured from images captured by the infrared camera 5 Alternatively, based on the first video signal, a second video signal processing unit 6 that detects a moving object and outputs a second video signal, a position detection unit 7 that detects position information of a living organism or a moving object from the second video signal, and the like. And the display control unit 3 that emphasizes and displays the video portion of the position corresponding to the position information output from the position detection unit 7 among the images displayed on the monitor 4. Creatures behind When there is a moving object, even if a normal surveillance camera is dark and cannot be displayed as an image, and an image taken with an infrared camera is displayed as a normal screen even if a living organism or moving object can be detected Even if it cannot be performed, the position information of the living thing or moving object existing in the image captured by the monitoring camera 1 is acquired from the infrared camera 5 and the video portion of the monitoring camera 1 at the position corresponding to the position information is acquired. Since the display is highlighted, the driver can confirm the presence of a living thing or a moving object on the screen of the monitor 4, and can easily check an obstacle in the traveling direction even at night.

したがって、本実施の形態における車載監視カメラ装置を車両の後部に搭載すれば、図3に示すように、夜間において車両を後退させて駐車させる場合に、車両の後方のバックライトにより照明される範囲外に存在する人間などの生物や移動物体を確認することができるため、運転者は余裕をもってその生物や移動物体を回避することが可能になる。同様に、本実施の形態における車載監視カメラ装置を車両の前部に搭載すれば、車両の前方のヘッドライトにより照明される範囲外に存在する生物や移動物体を確認することができ、運転者は余裕をもってその生物や移動物体を回避することが可能になる。   Therefore, if the in-vehicle monitoring camera device according to the present embodiment is mounted on the rear part of the vehicle, as shown in FIG. 3, the range illuminated by the backlight behind the vehicle when the vehicle is retracted and parked at night. Since it is possible to check living things such as humans and moving objects that exist outside, the driver can avoid the living things and moving objects with a margin. Similarly, if the in-vehicle monitoring camera device according to the present embodiment is mounted on the front portion of the vehicle, it is possible to check living creatures and moving objects that are outside the range illuminated by the headlight in front of the vehicle, and the driver Can avoid the creatures and moving objects with a margin.

(実施の形態2)
次に、本発明の第2の実施の形態の車載監視カメラ装置の構成を図4に示す。図4において、撮像カメラ11は、車両の後部に設置され、CCDまたはCMOS等の固体撮像素子で構成され、例えば図2に示すように、車両の後部に撮像方向を後方下方の道路面に向けて設置されている。第1映像信号処理部12は、撮像カメラ11で撮像された映像に対し、前処理、平滑化、A/D変換等を行い、第1映像信号を出力する信号処理プロセッサである。第1表示制御部13は、第1映像信号を表示に適した画像信号に変換して出力する画像処理プロセッサである。モニタ14は、図5に示すように、通常のモニタ装置である後方画面14aの前面に、所定の距離だけ離して前方画面14bを平行に配置したものである。前方画面14bは、液晶ディスプレイやプラズマディスプレイ、ELディスプレイなどの透明な表示装置である。赤外線カメラ15は、ある程度以上の熱量を発生する生物や移動物体を検出することができ、撮像カメラ11に隣接して撮像方向を撮像カメラ11と同じ方向に向けて車両後部に設置されている。第2映像信号処理部16は、赤外線カメラ15で撮像された映像から生物や移動物体を検出し、また、背景差分法等により生物や移動物体の動きを検出して第2映像信号として出力する。タイミング発生部18は、撮像カメラ11および赤外線カメラ15の駆動タイミングや、撮像カメラ11および赤外線カメラ15により撮像タイミング(走査タイミング)および表示タイミングを同期させるための信号を出力させるものである。なお、装置全体はCPUによって制御される。
(Embodiment 2)
Next, the configuration of the in-vehicle monitoring camera device according to the second embodiment of the present invention is shown in FIG. In FIG. 4, the imaging camera 11 is installed at the rear part of the vehicle and is composed of a solid-state imaging device such as a CCD or a CMOS. For example, as shown in FIG. Installed. The first video signal processing unit 12 is a signal processor that performs preprocessing, smoothing, A / D conversion, and the like on the video captured by the imaging camera 11 and outputs a first video signal. The first display control unit 13 is an image processor that converts the first video signal into an image signal suitable for display and outputs the image signal. As shown in FIG. 5, the monitor 14 has a front screen 14b arranged in parallel at a predetermined distance from the front of a rear screen 14a, which is a normal monitor device. The front screen 14b is a transparent display device such as a liquid crystal display, a plasma display, or an EL display. The infrared camera 15 can detect a living organism or a moving object that generates a certain amount of heat, and is installed adjacent to the imaging camera 11 in the rear part of the vehicle with the imaging direction in the same direction as the imaging camera 11. The second video signal processing unit 16 detects a living thing or a moving object from the video imaged by the infrared camera 15, and detects the movement of the living thing or the moving object by a background subtraction method or the like and outputs it as a second video signal. . The timing generator 18 outputs a signal for synchronizing the driving timing of the imaging camera 11 and the infrared camera 15 and the imaging timing (scanning timing) and the display timing by the imaging camera 11 and the infrared camera 15. The entire apparatus is controlled by the CPU.

以上のように構成された車載監視カメラ装置について、その動作を説明する。図4において、撮像カメラ11で撮像された映像は、第1映像信号処理部12で、前処理が施された後、デジタル信号に変換されて第1映像信号として出力される。第1映像信号は第1表示制御部13により表示に適した画像信号に変換され、モニタ14の後方画面14aに表示される。一方、赤外線カメラ15で撮像された映像からは、第2映像信号処理部16により人間や動物などの生物が検出されるとともに、フレームメモリを用いてそれらが移動している物体であるかが検出され、第2映像信号として第2表示制御部17に送出される。第2表示制御部17は、第2映像信号の生物または移動物体をモニタ14の前方画面14bに表示する。   The operation of the on-vehicle monitoring camera device configured as described above will be described. In FIG. 4, the video imaged by the imaging camera 11 is pre-processed by the first video signal processing unit 12, converted to a digital signal, and output as a first video signal. The first video signal is converted into an image signal suitable for display by the first display control unit 13 and displayed on the rear screen 14 a of the monitor 14. On the other hand, from the video imaged by the infrared camera 15, the second video signal processing unit 16 detects living things such as humans and animals, and detects whether they are moving objects using a frame memory. Then, it is sent to the second display control unit 17 as a second video signal. The second display control unit 17 displays the living thing or moving object of the second video signal on the front screen 14 b of the monitor 14.

このように、本実施の形態2の車載監視カメラ装置では、車両の後部に搭載されて車両の同じ後方を撮像する監視カメラ11および赤外線カメラ15と、後方画面14aと前方画面14bとを有する2重ディスプレイ構造のモニタ14と、監視カメラ11が撮像した映像から第1映像信号を出力する第1映像信号処理部12と、赤外線カメラ15が撮像した映像の中から生物または移動物体を検出して第2映像信号を出力する第2映像信号処理部16と、第1映像信号処理部12から出力された第1映像信号を基にモニタ14の後方画面14aに画像を表示する第1表示制御部13と、第2映像信号処理部16から出力された第2映像信号を基に生物または移動物体の画像をモニタ14の前方画面14bに表示する第2表示制御部17とを備えているので、夜間の走行において、車両の後方に生物または移動物体が存在している場合に、通常の監視カメラでは暗くて映像として表示することができない場合でも、監視カメラ1で撮像した映像をモニタ14の後方画面14aに表示するとともに、赤外線カメラ15で撮像した生物または移動物体をモニタ14の前方画面14bに表示することにより、運転者はモニタ14の2重画面上で生物や移動物体の存在を分かりやすく立体的に確認することができ、夜間でも走行方向の障害物確認を容易に行うことができる。   As described above, the in-vehicle monitoring camera device of the second embodiment includes the monitoring camera 11 and the infrared camera 15 that are mounted on the rear part of the vehicle and captures the same rear side of the vehicle, and the rear screen 14a and the front screen 14b. A monitor 14 having a multiple display structure, a first video signal processing unit 12 that outputs a first video signal from a video captured by the surveillance camera 11, and a living body or a moving object are detected from the video captured by the infrared camera 15. A second video signal processing unit 16 that outputs a second video signal, and a first display control unit that displays an image on the rear screen 14a of the monitor 14 based on the first video signal output from the first video signal processing unit 12 13 and a second display control unit 17 that displays an image of a living thing or a moving object on the front screen 14b of the monitor 14 based on the second video signal output from the second video signal processing unit 16. Therefore, when a living thing or moving object is present behind the vehicle during night driving, the image captured by the monitoring camera 1 is displayed even if it is dark and cannot be displayed as an image by a normal monitoring camera. By displaying on the rear screen 14a of the monitor 14 and displaying the living thing or moving object imaged by the infrared camera 15 on the front screen 14b of the monitor 14, the driver can view the living thing or moving object on the double screen of the monitor 14. The presence can be easily and three-dimensionally confirmed, and obstacles in the traveling direction can be easily confirmed even at night.

(実施の形態3)
次に、本発明の第3の実施の形態の車載監視カメラ装置の構成を図6に示す。本実施の形態3において、図1に示した実施の形態1と同じ構成要素には同じ符号を付して重複した説明は省略する。本実施の形態3が上記した実施の形態1と異なるのは、超音波センサ21とセンサ信号処理部22と距離判定部23が追加されたことであり、これに伴い表示制御部24の動作も異なっている。
(Embodiment 3)
Next, the configuration of the in-vehicle monitoring camera apparatus according to the third embodiment of the present invention is shown in FIG. In the third embodiment, the same components as those in the first embodiment shown in FIG. The third embodiment is different from the first embodiment described above in that an ultrasonic sensor 21, a sensor signal processing unit 22, and a distance determination unit 23 are added. Accordingly, the operation of the display control unit 24 is also performed. Is different.

超音波センサ21は、超音波を発信させる発信回路および障害物からの反射波を受信する受信回路を備えており、車両の後部に後方に向けて取り付けられる。センサ信号処理部22は、超音波センサ21から発信したパルス状音波の送信時刻と障害物からの反射波の受信時刻との時間差を基に、自車両から障害物までの距離を測定するものである。距離判定部23は、センサ信号処理部22により検出された障害物までの距離が予め定めた所定値以下であるか否かを判断するものである。そして、表示制御部24は、検出された障害物までの距離が予め定めた所定値以下で、かつ位置検出部7から第2映像信号の位置情報が入力された場合に、その位置情報に対応する第1映像信号の部分を強調して表示するものである。   The ultrasonic sensor 21 includes a transmission circuit that transmits ultrasonic waves and a reception circuit that receives reflected waves from an obstacle, and is attached to the rear of the vehicle toward the rear. The sensor signal processing unit 22 measures the distance from the host vehicle to the obstacle based on the time difference between the transmission time of the pulsed sound wave transmitted from the ultrasonic sensor 21 and the reception time of the reflected wave from the obstacle. is there. The distance determination unit 23 determines whether or not the distance to the obstacle detected by the sensor signal processing unit 22 is equal to or less than a predetermined value. The display control unit 24 responds to the position information when the distance to the detected obstacle is equal to or smaller than a predetermined value and the position information of the second video signal is input from the position detection unit 7. The portion of the first video signal to be displayed is highlighted.

以上のように構成された車載監視カメラ装置について、その動作を図7を用いて説明する。撮像カメラ1で撮像された映像は、第1映像信号処理部2で、前処理が施された後、デジタル信号に変換されて第1映像信号として出力される(ステップS1)。第1映像信号は表示制御部24により表示に適した画像信号に変換され、モニタ4に表示される(ステップS2)。一方、赤外線カメラ5で撮像された映像からは、第2映像信号処理部6により人間や動物などの生物が検出されるとともに、フレームメモリを用いてそれらが移動している物体であるかが検出され、第2映像信号として出力される (ステップS3)。第2映像信号に含まれる生物や移動物体の位置情報は、位置検出部7により検出され、表示制御部24に送出される(ステップS4)。また、超音波センサ21およびセンサ信号処理部22により障害物が検出されるとともに、その障害物までの距離Dが検出され(ステップS5)、距離判定部23によりその距離Dが予め定めた所定値以下であるかどうかが判定され(ステップS6)、所定値以下の場合は障害物接近情報が表示制御部24に通知される(ステップS7)。表示制御部24は、位置検出部7からの生物等の位置情報および障害物接近情報が入力されたかどうかを監視し(ステップS8)、入力された場合には、モニタ4に表示されている第1映像信号の中の生物等の位置情報に該当する部分を強調する信号をモニタ4に出力する(ステップS9)。これにより、運転操作に支障のない情報はモニタ4に表示せず、運転操作に必要な障害物情報のみをモニタ4に表示することができる。   The operation of the in-vehicle monitoring camera apparatus configured as described above will be described with reference to FIG. The video imaged by the imaging camera 1 is pre-processed by the first video signal processing unit 2, and then converted into a digital signal and output as a first video signal (step S1). The first video signal is converted into an image signal suitable for display by the display control unit 24 and displayed on the monitor 4 (step S2). On the other hand, from the video imaged by the infrared camera 5, the second video signal processing unit 6 detects organisms such as humans and animals, and detects whether they are moving objects using a frame memory. And output as a second video signal (step S3). The position information of the living thing and the moving object included in the second video signal is detected by the position detection unit 7 and sent to the display control unit 24 (step S4). In addition, the obstacle is detected by the ultrasonic sensor 21 and the sensor signal processing unit 22, and the distance D to the obstacle is detected (step S5). The distance determination unit 23 sets the distance D to a predetermined value. It is determined whether it is below (step S6), and if it is below the predetermined value, the obstacle approach information is notified to the display control unit 24 (step S7). The display control unit 24 monitors whether or not position information such as a living thing and obstacle approach information is input from the position detection unit 7 (step S8). If input, the display control unit 24 displays the second information displayed on the monitor 4. A signal for emphasizing a portion corresponding to position information such as a living thing in one video signal is output to the monitor 4 (step S9). Thus, information that does not hinder driving operation is not displayed on the monitor 4, and only obstacle information necessary for driving operation can be displayed on the monitor 4.

このように、本実施の形態3の車載監視カメラ装置では、車両の後部に搭載されて車両の同じ後方を撮像する監視カメラ1および赤外線カメラ5と、車両の後部に監視カメラ1および赤外線カメラ5と同じ方向に向けて設置された超音波センサ21と、監視カメラ1が撮像した映像から第1映像信号を出力する第1映像信号処理部2と、赤外線カメラ5が撮像した映像の中から生物または移動物体を検出して第2映像信号を出力する第2映像信号処理部6と、第2映像信号から生物または移動物体の位置情報を検出する位置検出部7と、第1映像信号処理部2から出力された第1映像信号を基にモニタ4に画像を表示するとともに、超音波センサ21により検出された障害物までの距離が所定値以下で、かつ生物または移動物体を示す第2映像信号が入力された場合に、その部分を強調して表示する表示制御部24とを備えているので、夜間の走行において、車両の後方に生物または移動物体が存在している場合に、それらが所定の距離まで近づいて場合にみのそれらを表示するので、運転者に必要な障害物接近情報を必要なタイミングで表示することができる。   As described above, in the in-vehicle monitoring camera device according to the third embodiment, the monitoring camera 1 and the infrared camera 5 that are mounted on the rear portion of the vehicle and image the same rear side of the vehicle, and the monitoring camera 1 and the infrared camera 5 at the rear portion of the vehicle. From the image captured by the surveillance camera 1, the first image signal processing unit 2 that outputs the first image signal from the image captured by the surveillance camera 1, and the image captured by the infrared camera 5. Alternatively, a second video signal processing unit 6 that detects a moving object and outputs a second video signal, a position detection unit 7 that detects position information of a living organism or a moving object from the second video signal, and a first video signal processing unit An image is displayed on the monitor 4 based on the first video signal output from the second video signal, and the distance to the obstacle detected by the ultrasonic sensor 21 is equal to or less than a predetermined value, and a second image indicating a living organism or a moving object is displayed. When a signal is input, the display control unit 24 that highlights and displays the portion is provided. Therefore, when a living thing or a moving object is present behind the vehicle during night driving, Since they are displayed when approaching a predetermined distance, obstacle approach information necessary for the driver can be displayed at a necessary timing.

(実施の形態4)
次に、本発明の第4の実施の形態の車載監視カメラ装置の構成を図8に示す。本実施の形態4において、図4に示した実施の形態2と同じ構成要素には同じ符号を付して重複した説明は省略する。本実施の形態4が上記した実施の形態2と異なるのは、超音波センサ31とセンサ信号処理部32と距離判定部33が追加されたことであり、これに伴い表示制御部34の動作も異なっている。超音波センサ31とセンサ信号処理部32と距離判定部33については、実施の形態3の超音波センサ21とセンサ信号処理部22と距離判定部23と同様なものであるので、説明を省略する。
(Embodiment 4)
Next, the configuration of the in-vehicle monitoring camera apparatus according to the fourth embodiment of the present invention is shown in FIG. In the fourth embodiment, the same components as those in the second embodiment shown in FIG. The fourth embodiment is different from the second embodiment described above in that an ultrasonic sensor 31, a sensor signal processing unit 32, and a distance determination unit 33 are added, and accordingly, the operation of the display control unit 34 is also performed. Is different. The ultrasonic sensor 31, the sensor signal processing unit 32, and the distance determination unit 33 are the same as the ultrasonic sensor 21, the sensor signal processing unit 22, and the distance determination unit 23 of the third embodiment, and thus description thereof is omitted. .

以上のように構成された車載監視カメラ装置について、その動作を図9を用いて説明する。撮像カメラ11で撮像された映像は、第1映像信号処理部12で、前処理が施された後、デジタル信号に変換されて第1映像信号として出力される(ステップS11)。第1映像信号は第1表示制御部13により表示に適した画像信号に変換され、モニタ14の後方画面14aに表示される(ステップS2)。一方、赤外線カメラ15で撮像された映像からは、第2映像信号処理部16により人間や動物などの生物が検出されるとともに、フレームメモリを用いてそれらが移動している物体であるかが検出され、第2映像信号として第2表示制御部34に送出される(ステップS13)。また、超音波センサ31およびセンサ信号処理部32により障害物が検出されるとともに、その障害物までの距離Dが検出され(ステップS14)、距離判定部33によりその距離Dが予め定めた所定値以下であるかどうかが判定され(ステップS15)、所定値以下の場合は障害物接近情報が第2表示制御部34に通知される(ステップS16)。第2表示制御部34は、距離判定部33から障害物接近情報が入力されたかどうかを監視し(ステップS17)、入力された場合には、モニタ14の前方画面14bに第2映像信号を基に生物または移動物体の画像を表示する (ステップS18)。これにより、運転操作に支障のない間はモニタ14の前方画面14bに生物等の画像を表示せず、運転操作に必要な場合のみモニタ14の前方画面14bに生物等の画像を表示することができる。   The operation of the in-vehicle monitoring camera device configured as described above will be described with reference to FIG. The video imaged by the imaging camera 11 is pre-processed by the first video signal processing unit 12, and then converted into a digital signal and output as a first video signal (step S11). The first video signal is converted into an image signal suitable for display by the first display control unit 13 and displayed on the rear screen 14a of the monitor 14 (step S2). On the other hand, from the video imaged by the infrared camera 15, the second video signal processing unit 16 detects living things such as humans and animals, and detects whether they are moving objects using a frame memory. Then, it is sent to the second display control unit 34 as a second video signal (step S13). In addition, the obstacle is detected by the ultrasonic sensor 31 and the sensor signal processing unit 32, the distance D to the obstacle is detected (step S14), and the distance determination unit 33 sets the distance D to a predetermined value. It is determined whether or not it is below (step S15), and if it is below the predetermined value, obstacle approach information is notified to the second display control unit 34 (step S16). The second display control unit 34 monitors whether or not the obstacle approach information is input from the distance determination unit 33 (step S17). If the obstacle display information is input, the second display control unit 34 uses the second video signal on the front screen 14b of the monitor 14. An image of a living thing or moving object is displayed on (Step S18). As a result, images of organisms and the like can be displayed on the front screen 14b of the monitor 14 only when necessary for driving operations without displaying images of the organisms or the like on the front screen 14b of the monitor 14 while there is no hindrance to the driving operation. it can.

このように、本実施の形態4の車載監視カメラ装置では、車両の後部に搭載されて車両の同じ後方を撮像する監視カメラ11および赤外線カメラ15と、車両の後部に監視カメラ11および赤外線カメラ15と同じ方向に向けて設置された超音波センサ31と、後方画面14aと前方画面14bとを有する2重ディスプレイ構造のモニタ14と、監視カメラ11が撮像した映像から第1映像信号を出力する第1映像信号処理部12と、赤外線カメラ15が撮像した映像の中から生物または移動物体を検出して第2映像信号を出力する第2映像信号処理部16と、第1映像信号処理部12から出力された第1映像信号を基にモニタ14の後方画面に画像を表示する第1表示制御部13と、超音波センサ31により検出された障害物までの距離が所定値以下の場合に、生物または移動物体の画像を第2映像信号を基にモニタ14の前方画面14bに表示する第2表示制御部34とを備えているので、夜間の走行において、車両の後方に生物または移動物体が存在している場合に、それらが所定の距離まで近づいて場合にみのそれらを表示するので、運転者に必要な障害物接近情報を必要なタイミングで表示することができる。   Thus, in the in-vehicle monitoring camera device of the fourth embodiment, the monitoring camera 11 and the infrared camera 15 that are mounted on the rear part of the vehicle and image the same rear side of the vehicle, and the monitoring camera 11 and the infrared camera 15 on the rear part of the vehicle. Output a first video signal from the image captured by the surveillance camera 11 and the ultrasonic sensor 31 installed in the same direction as the monitor 14, the monitor 14 having a dual display structure having a rear screen 14a and a front screen 14b. From the first video signal processing unit 12, the second video signal processing unit 16 that detects a living organism or a moving object from the video captured by the infrared camera 15 and outputs the second video signal, and the first video signal processing unit 12 The distance from the first display control unit 13 that displays an image on the rear screen of the monitor 14 based on the output first video signal and the obstacle detected by the ultrasonic sensor 31 is And a second display control unit 34 for displaying an image of a living thing or moving object on the front screen 14b of the monitor 14 based on the second video signal when the vehicle is below a predetermined value. If there are living creatures or moving objects in the vehicle, they are displayed only when they are close to a predetermined distance, so that the obstacle approach information necessary for the driver can be displayed at a necessary timing. .

なお、上記した実施の形態2ないし4における車載監視カメラ装置を車両の後部に搭載すれば、夜間において車両を後退させて駐車させる場合に、車両の後方のバックライトにより照明される範囲外に存在する人間などの生物や移動物体を確認することができるため、運転者は余裕をもってその生物や移動物体を回避することが可能になる。同様に、上記実施の形態2ないし4における車載監視カメラ装置を車両の前部に搭載すれば、車両の前方のヘッドライトにより照明される範囲外に存在する生物や移動物体を確認することができ、運転者は余裕をもってその生物や移動物体を回避することが可能になる。   In addition, if the vehicle-mounted monitoring camera device according to the second to fourth embodiments described above is mounted on the rear part of the vehicle, it exists outside the range illuminated by the backlight behind the vehicle when the vehicle is retracted and parked at night. Therefore, the driver can avoid the living thing and the moving object with a margin. Similarly, if the in-vehicle monitoring camera device according to the second to fourth embodiments is mounted on the front part of the vehicle, it is possible to check living things and moving objects that are outside the range illuminated by the headlight in front of the vehicle. The driver can avoid the living thing and the moving object with a margin.

以上のように、本発明に係る車載監視カメラ装置は、夜間の走行において、通常の監視カメラの画像では暗くて見えない生物や移動物体を赤外線カメラで撮像し、その映像信号を基に生物や移動物体が目立つようにモニタに表示するので、運転者は夜間でも走行方向の障害物を容易に確認できるという効果を有し、カメラで撮影した映像を車両内に取り付けたモニタに表示して、車両走行時における安全を確認するための車載監視カメラ装置等として有用である。   As described above, the vehicle-mounted surveillance camera device according to the present invention captures a living thing or moving object that is dark and cannot be seen in a normal surveillance camera image with an infrared camera during night driving, and based on the video signal, Since the moving object is displayed on the monitor so that it stands out, it has the effect that the driver can easily check obstacles in the running direction even at night, and the image taken with the camera is displayed on the monitor attached in the vehicle, This is useful as an in-vehicle monitoring camera device for confirming safety during vehicle travel.

本発明の第1の実施の形態に係る車載監視カメラ装置の構成を示すブロック図The block diagram which shows the structure of the vehicle-mounted monitoring camera apparatus which concerns on the 1st Embodiment of this invention 本発明の実施の形態において車両に設置される撮像カメラおよび赤外線カメラの概略配置図Schematic layout diagram of an imaging camera and an infrared camera installed in a vehicle in an embodiment of the present invention 本発明の第1の実施の形態におけるモニタ表示例を示す画面図The screen figure which shows the example of a monitor display in the 1st Embodiment of this invention 本発明の第2の実施の形態に係る車載監視カメラ装置の構成を示すブロック図The block diagram which shows the structure of the vehicle-mounted monitoring camera apparatus which concerns on the 2nd Embodiment of this invention. 本発明の第2の実施の形態におけるモニタの構造を示す概略構成図The schematic block diagram which shows the structure of the monitor in the 2nd Embodiment of this invention 本発明の第3の実施の形態に係る車載監視カメラ装置の構成を示すブロック図The block diagram which shows the structure of the vehicle-mounted monitoring camera apparatus which concerns on the 3rd Embodiment of this invention. 本発明の第3の実施の形態における表示動作を示すフロー図The flowchart which shows the display operation in the 3rd Embodiment of this invention. 本発明の第4の実施の形態に係る車載監視カメラ装置の構成を示すブロック図The block diagram which shows the structure of the vehicle-mounted monitoring camera apparatus which concerns on the 4th Embodiment of this invention. 本発明の第4の実施の形態における表示動作を示すフロー図The flowchart which shows the display operation in the 4th Embodiment of this invention

符号の説明Explanation of symbols

1 撮像カメラ
2 第1映像信号処理部
3 表示制御部
4 モニタ
5 赤外線カメラ
6 第2映像信号処理部
7 位置検出部
8 タイミング発生部
11 撮像カメラ
12 第1映像信号処理部
13 第1表示制御部
14 モニタ
14a 後方画面
14b 前方画面
15 赤外線カメラ
16 第2映像信号処理部
17 第2表示制御部
18 タイミング発生部
21、31 超音波センサ
22、32 センサ信号処理部
23、33 距離判定部
24 表示制御部
34 第2表示制御部
DESCRIPTION OF SYMBOLS 1 Imaging camera 2 1st video signal processing part 3 Display control part 4 Monitor 5 Infrared camera 6 2nd video signal processing part 7 Position detection part 8 Timing generation part 11 Imaging camera 12 1st video signal processing part 13 1st display control part DESCRIPTION OF SYMBOLS 14 Monitor 14a Back screen 14b Front screen 15 Infrared camera 16 2nd image signal processing part 17 2nd display control part 18 Timing generation part 21, 31 Ultrasonic sensor 22, 32 Sensor signal processing part 23, 33 Distance determination part 24 Display control Unit 34 Second display control unit

Claims (7)

車両に搭載されて前方または後方の少なくとも一方の同じ方向を撮像する監視カメラおよび赤外線カメラと、前記監視カメラが撮像した映像から第1の映像信号を出力する第1の映像信号処理部と、前記第1の映像信号処理部から出力された第1の映像信号を基に画像を表示するモニタと、前記赤外線カメラが撮像した映像の中から生物または移動物体を検出して第2の映像信号を出力する第2の映像信号処理部と、前記第2の映像信号から生物または移動物体の位置情報を検出する位置検出部と、前記第1の映像信号に基づいて前記モニタに表示する映像のうち前記位置検出部から出力された位置情報に対応する位置の映像部分を強調して表示する表示制御部とを備えた車載監視カメラ装置。   A surveillance camera and an infrared camera that are mounted on a vehicle and captures the same direction of at least one of front and rear, a first video signal processing unit that outputs a first video signal from an image captured by the surveillance camera, and A monitor that displays an image based on the first video signal output from the first video signal processing unit, and a second video signal obtained by detecting a living thing or a moving object from the video captured by the infrared camera. A second video signal processing unit that outputs, a position detection unit that detects position information of a living organism or a moving object from the second video signal, and a video displayed on the monitor based on the first video signal A vehicle-mounted monitoring camera device comprising: a display control unit that highlights and displays a video portion at a position corresponding to the position information output from the position detection unit. 前記表示制御部は、前記位置検出部から出力された位置情報に対応する位置の前記第1の映像信号部分の輝度を高めて表示することを特徴とする請求項1記載の車載監視カメラ装置。   The in-vehicle monitoring camera device according to claim 1, wherein the display control unit displays the first video signal portion at a position corresponding to the position information output from the position detection unit with increased brightness. 前記表示制御部は、前記位置検出部から出力された位置情報に対応する位置の前記第1の映像信号部分に所定のマークまたは枠を表示するか、または点滅表示することを特徴とする請求項1記載の車載監視カメラ装置。   The display control unit displays a predetermined mark or frame on the first video signal portion at a position corresponding to the position information output from the position detection unit, or blinks the display. The vehicle-mounted surveillance camera device according to 1. 車両に搭載されて前方または後方の少なくとも一方の同じ方向を撮像する監視カメラおよび赤外線カメラと、後方画面および前方画面を有する2重ディスプレイ構造のモニタと、前記監視カメラが撮像した映像から第1の映像信号を出力する第1の映像信号処理部と、前記赤外線カメラが撮像した映像の中から生物または移動物体を検出して第2の映像信号を出力する第2の映像信号処理部と、前記第1の映像信号処理部から出力された第1の映像信号を基に画像を前記モニタの後方画面に表示する第1の表示制御部と、前記第2の映像信号処理部から出力された第2の映像信号を基に生物または移動物体の画像を前記モニタの前方画面に表示する第2の表示制御部とを備えた車載監視カメラ装置。   A surveillance camera and an infrared camera that are mounted on a vehicle and captures the same direction of at least one of the front and rear, a monitor with a dual display structure having a rear screen and a front screen, and a first image based on an image captured by the surveillance camera. A first video signal processing unit that outputs a video signal; a second video signal processing unit that detects a living organism or a moving object from video captured by the infrared camera and outputs a second video signal; and A first display control unit that displays an image on the rear screen of the monitor based on the first video signal output from the first video signal processing unit, and a second display that is output from the second video signal processing unit. A vehicle-mounted monitoring camera device comprising: a second display control unit configured to display an image of a living organism or a moving object on a front screen of the monitor based on the video signal of 2. 車両に搭載されて前方または後方の少なくとも一方の前記監視カメラおよび赤外線カメラと同じ方向の障害物を検出する超音波センサと、前記超音波センサにより検出された障害物までの距離を測定して、自車両から前記障害物までの距離が所定値以下で、かつ前記生物または移動物体の位置情報を示す信号が入力された場合に、前記第1の映像信号の中の前記生物または移動物体に対応する部分を強調して表示することを特徴とする請求項1ないし請求項3のいずれかに記載の車載監視カメラ装置。   An ultrasonic sensor that is mounted on a vehicle and detects an obstacle in the same direction as at least one of the monitoring camera and the infrared camera in front or rear, and measures the distance to the obstacle detected by the ultrasonic sensor; Corresponds to the living thing or moving object in the first video signal when the distance from the own vehicle to the obstacle is not more than a predetermined value and a signal indicating the position information of the living thing or moving object is input. The in-vehicle monitoring camera device according to claim 1, wherein a portion to be displayed is emphasized and displayed. 車両に搭載されて前方または後方の少なくとも一方の前記監視カメラおよび赤外線カメラと同じ方向の障害物を検出する超音波センサと、前記超音波センサにより検出された障害物までの距離を測定して、自車両から前記障害物までの距離が所定値以下の場合に、前記生物または移動物体を前記モニタの前方画面に表示することを特徴とする請求項4記載の車載監視カメラ装置。   An ultrasonic sensor that is mounted on a vehicle and detects an obstacle in the same direction as at least one of the monitoring camera and the infrared camera in front or rear, and measures the distance to the obstacle detected by the ultrasonic sensor; The in-vehicle monitoring camera device according to claim 4, wherein when the distance from the own vehicle to the obstacle is equal to or less than a predetermined value, the living thing or the moving object is displayed on a front screen of the monitor. 請求項1ないし請求項5のいずれかに記載の車載監視カメラ装置を搭載した車両。   A vehicle equipped with the in-vehicle monitoring camera device according to any one of claims 1 to 5.
JP2003423145A 2003-12-19 2003-12-19 On-vehicle monitoring camera apparatus Pending JP2005184523A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2003423145A JP2005184523A (en) 2003-12-19 2003-12-19 On-vehicle monitoring camera apparatus

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2003423145A JP2005184523A (en) 2003-12-19 2003-12-19 On-vehicle monitoring camera apparatus

Publications (1)

Publication Number Publication Date
JP2005184523A true JP2005184523A (en) 2005-07-07

Family

ID=34783772

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2003423145A Pending JP2005184523A (en) 2003-12-19 2003-12-19 On-vehicle monitoring camera apparatus

Country Status (1)

Country Link
JP (1) JP2005184523A (en)

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2008183933A (en) * 2007-01-26 2008-08-14 Toyota Motor Corp Noctovision equipment
JP2009206939A (en) * 2008-02-28 2009-09-10 Nissan Motor Co Ltd Image display system for vehicle, image display device, and image enhancement method
JP2010041241A (en) * 2008-08-01 2010-02-18 Denso Corp Display device for vehicle
JP2010041240A (en) * 2008-08-01 2010-02-18 Denso Corp Display device for vehicle
WO2011030698A1 (en) * 2009-09-11 2011-03-17 アイシン精機株式会社 Device for monitoring surroundings of vehicle
WO2014155954A1 (en) * 2013-03-28 2014-10-02 株式会社デンソー Vehicle display control device

Citations (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS61162777A (en) * 1985-01-12 1986-07-23 Yamaha Motor Co Ltd Recognition for running environment of vehicle
JPH11243538A (en) * 1998-02-25 1999-09-07 Nissan Motor Co Ltd Visually recognizing device for vehicle
JPH11308609A (en) * 1998-04-24 1999-11-05 Nissan Motor Co Ltd Display processing unit
JP2000019259A (en) * 1998-06-30 2000-01-21 Mazda Motor Corp Environmental recognition device
JP2001063500A (en) * 1999-08-26 2001-03-13 Matsushita Electric Works Ltd Monitoring device for obstacle around vehicle
JP2002504764A (en) * 1998-02-20 2002-02-12 ディープ ヴィデオ イメージング リミテッド Multilayer display device and method of displaying an image on the display device
JP2002237969A (en) * 2001-02-09 2002-08-23 Hitachi Ltd On-vehicle camera and image processing system
JP2003072426A (en) * 2001-08-31 2003-03-12 Tokai Rika Co Ltd Onboard infrared image display
JP2003303334A (en) * 2002-04-09 2003-10-24 Mitsubishi Electric Corp Image processing unit
JP2003302470A (en) * 2002-04-05 2003-10-24 Sogo Jidosha Anzen Kogai Gijutsu Kenkyu Kumiai Pedestrian detection device and pedestrian detection method
JP2004235987A (en) * 2003-01-30 2004-08-19 Matsushita Electric Ind Co Ltd Drive supporting system

Patent Citations (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS61162777A (en) * 1985-01-12 1986-07-23 Yamaha Motor Co Ltd Recognition for running environment of vehicle
JP2002504764A (en) * 1998-02-20 2002-02-12 ディープ ヴィデオ イメージング リミテッド Multilayer display device and method of displaying an image on the display device
JPH11243538A (en) * 1998-02-25 1999-09-07 Nissan Motor Co Ltd Visually recognizing device for vehicle
JPH11308609A (en) * 1998-04-24 1999-11-05 Nissan Motor Co Ltd Display processing unit
JP2000019259A (en) * 1998-06-30 2000-01-21 Mazda Motor Corp Environmental recognition device
JP2001063500A (en) * 1999-08-26 2001-03-13 Matsushita Electric Works Ltd Monitoring device for obstacle around vehicle
JP2002237969A (en) * 2001-02-09 2002-08-23 Hitachi Ltd On-vehicle camera and image processing system
JP2003072426A (en) * 2001-08-31 2003-03-12 Tokai Rika Co Ltd Onboard infrared image display
JP2003302470A (en) * 2002-04-05 2003-10-24 Sogo Jidosha Anzen Kogai Gijutsu Kenkyu Kumiai Pedestrian detection device and pedestrian detection method
JP2003303334A (en) * 2002-04-09 2003-10-24 Mitsubishi Electric Corp Image processing unit
JP2004235987A (en) * 2003-01-30 2004-08-19 Matsushita Electric Ind Co Ltd Drive supporting system

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2008183933A (en) * 2007-01-26 2008-08-14 Toyota Motor Corp Noctovision equipment
JP2009206939A (en) * 2008-02-28 2009-09-10 Nissan Motor Co Ltd Image display system for vehicle, image display device, and image enhancement method
JP2010041241A (en) * 2008-08-01 2010-02-18 Denso Corp Display device for vehicle
JP2010041240A (en) * 2008-08-01 2010-02-18 Denso Corp Display device for vehicle
WO2011030698A1 (en) * 2009-09-11 2011-03-17 アイシン精機株式会社 Device for monitoring surroundings of vehicle
CN102481875A (en) * 2009-09-11 2012-05-30 爱信精机株式会社 Device for monitoring surroundings of vehicle
WO2014155954A1 (en) * 2013-03-28 2014-10-02 株式会社デンソー Vehicle display control device
JP2014191668A (en) * 2013-03-28 2014-10-06 Denso Corp Vehicle display control device

Similar Documents

Publication Publication Date Title
US8330816B2 (en) Image processing device
JP5629521B2 (en) Obstacle detection system and method, obstacle detection device
JP2010130646A (en) Vehicle periphery checking system
JP2008227646A (en) Obstacle detector
JP4715718B2 (en) Vehicle display device
JP2007221200A (en) Vehicle periphery monitoring system
JP2007235529A (en) Vehicle surroundings monitoring system and image display method
JP2009296038A (en) Periphery recognition assisting system
EP2341369A1 (en) Image based vehicle object detection sensor with range finder
JP2009078597A (en) Rear side confirmation system
TWI557003B (en) Image based intelligent security system for vehicle combined with sensor
JP2009166624A (en) Rear monitoring device and rear monitoring method for vehicle
JP2005236540A (en) On-vehicle camera device
JP2007128460A (en) Collision determination system, collision determination method, computer program, and determination device
JP2010264945A (en) Parking support device, parking support method and parking support program
JP2006054662A (en) Drive support device
JP2006254318A (en) Vehicle-mounted camera, vehicle-mounted monitor and forward road area imaging method
JPWO2018042976A1 (en) IMAGE GENERATION DEVICE, IMAGE GENERATION METHOD, RECORDING MEDIUM, AND IMAGE DISPLAY SYSTEM
JP2009073250A (en) Vehicle backsight display device
JP2019188855A (en) Visual confirmation device for vehicle
JP2005184523A (en) On-vehicle monitoring camera apparatus
JP2011211432A (en) In-vehicle imaging apparatus
JP2007043318A (en) Vehicle surrounding supervisory apparatus and vehicle surrounding supervisory method
JP2006160193A (en) Vehicular drive supporting device
JP2010250503A (en) Vehicle controller and in-vehicle imaging apparatus

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20060915

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20090903

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20090908

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20091030

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20091124