JP2008168714A - Vehicle condition monitoring device and image processing device - Google Patents

Vehicle condition monitoring device and image processing device Download PDF

Info

Publication number
JP2008168714A
JP2008168714A JP2007002321A JP2007002321A JP2008168714A JP 2008168714 A JP2008168714 A JP 2008168714A JP 2007002321 A JP2007002321 A JP 2007002321A JP 2007002321 A JP2007002321 A JP 2007002321A JP 2008168714 A JP2008168714 A JP 2008168714A
Authority
JP
Japan
Prior art keywords
vehicle
image
outside
composite image
exterior
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2007002321A
Other languages
Japanese (ja)
Other versions
JP5105880B2 (en
Inventor
Mitsuhiro Hasegawa
光洋 長谷川
Masakata Minami
正名 南
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Alpine Electronics Inc
Original Assignee
Alpine Electronics Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Alpine Electronics Inc filed Critical Alpine Electronics Inc
Priority to JP2007002321A priority Critical patent/JP5105880B2/en
Publication of JP2008168714A publication Critical patent/JP2008168714A/en
Application granted granted Critical
Publication of JP5105880B2 publication Critical patent/JP5105880B2/en
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Fittings On The Vehicle Exterior For Carrying Loads, And Devices For Holding Or Mounting Articles (AREA)
  • Image Processing (AREA)
  • Closed-Circuit Television Systems (AREA)
  • Image Analysis (AREA)

Abstract

<P>PROBLEM TO BE SOLVED: To provide a vehicle condition monitoring device and an imaging processing device capable of simultaneously confirming the condition of the inside and the outside of the vehicle. <P>SOLUTION: The vehicle condition monitoring device is equipped with an in-vehicle camera group 40 for capturing the in-vehicle image, a vehicle-outside camera group 30 for capturing the vehicle-outside image around the vehicle, a control part 10 for generating the vehicle inside and outside composite image by combining the in-vehicle image and the vehicle-outside image captured by the in-vehicle camera and the vehicle-outside camera, and a display part 50 for displaying the vehicle inside and outside composite image. The control part 10 combines the vehicle-inside image and the vehicle-outside image so as to be seen from the same direction to generate the vehicle-inside and outside composite image. <P>COPYRIGHT: (C)2008,JPO&INPIT

Description

本発明は、車両状況監視装置及び画像処理装置に関する。   The present invention relates to a vehicle condition monitoring device and an image processing device.

従来から、車内又は車外撮影用の監視カメラを設けて、監視カメラの画像をサイクリックに記録する技術が開示されている（例えば、特許文献１等参照）。
特開平１１−２９８８５３号公報 2. Description of the Related Art Conventionally, there has been disclosed a technique for providing a monitoring camera for photographing inside or outside a vehicle and cyclically recording an image of the monitoring camera (see, for example, Patent Document 1).
Japanese Patent Application Laid-Open No. 11-298753

しかし、上記技術では、車内と車外の画像を、共通の表示手段に同時に表示することはできない。従って、車内の状況と車外の状況とを同時に確認することはできなかった。   However, with the above technique, images inside and outside the vehicle cannot be displayed simultaneously on a common display means. Therefore, the situation inside the vehicle and the situation outside the vehicle cannot be confirmed at the same time.

本発明は、上記の事情に鑑みて成されたものであり、その目的とするところは、車内及び車外の状況を同時に確認することはできる車両状況監視装置及び画像処理装置を提供することにある。   The present invention has been made in view of the above circumstances, and an object of the present invention is to provide a vehicle situation monitoring apparatus and an image processing apparatus that can simultaneously confirm the situation inside and outside the vehicle. .

上記目的は、車内画像を撮影する車内用カメラと、車両周辺の車外画像を撮影する車外用カメラと、前記車内用及び車外用カメラにより撮影された前記車内画像及び車外画像を合成して車内外合成画像を生成する画像制御手段と、前記車内外合成画像を表示する表示手段と、を備え、前記画像制御手段は、前記車内画像及び車外画像を同一方向から見えるように合成して前記車内外合成画像を生成する、ことを特徴とする車両状況監視装置によって達成できる。
この構成により、車内画像及び車外画像を合成して車内外合成画像を生成し、表示手段に車内外合成画像が表示されるので、搭乗者は車内の状況と車外の状況とを同時に把握することができる。また、車内画像及び車外画像を同一方向から見えるように合成して車内外合成画像を生成するので、車内の状況と車外の状況とが違和感のない様子で表示される。 The above-mentioned purpose is to synthesize an in-vehicle camera that captures an in-vehicle image, an in-vehicle camera that captures an out-of-vehicle image around the vehicle, and the in-vehicle and out-of-vehicle images taken by the in-vehicle and in-vehicle cameras. Image control means for generating a composite image; and display means for displaying the vehicle interior / exterior composite image, wherein the image control means synthesizes the vehicle interior image and the vehicle exterior image so as to be seen from the same direction, and This can be achieved by a vehicle condition monitoring device characterized by generating a composite image.
With this configuration, the vehicle interior and exterior images are combined to generate a vehicle interior and exterior composite image, and the interior and exterior composite image is displayed on the display means, so that the passenger can simultaneously grasp the situation inside the vehicle and the situation outside the vehicle. Can do. In addition, since the in-vehicle image and the out-of-vehicle image are combined so that the in-vehicle image and the out-of-vehicle image can be seen from the same direction, a combined image inside and outside the vehicle is generated.

上記構成において、前記画像制御手段は、車内と車外の位置関係が一致するように前記車内画像及び車外画像を合成して前記車内外合成画像を生成する、構成を採用できる。
この構成によっても、車内の状況と車外の状況とが違和感のない様子で表示される。 In the above-described configuration, the image control unit may generate the composite image inside and outside the vehicle by synthesizing the inside image and the outside image so that the positional relationship between the inside and the outside of the vehicle matches.
Even with this configuration, the situation inside the vehicle and the situation outside the vehicle are displayed in a state without any sense of incongruity.

上記構成において、前記画像制御手段は、前記車両の状態に応じて前記車内外合成画像を前記表示手段に表示させる、構成を採用できる。
例えば、車両の速度が所定値よりも速い場合には、表示手段に車内外合成画像を表示させ、遅い場合には、表示手段に車内画像を表示させることができる。この構成により、車両の状態に適した表示を行うことができる。 The said structure WHEREIN: The said image control means can employ | adopt the structure which displays the said vehicle interior / exterior synthetic image on the said display means according to the state of the said vehicle.
For example, when the vehicle speed is faster than a predetermined value, the vehicle interior / exterior composite image can be displayed on the display means, and when it is slow, the vehicle interior image can be displayed on the display means. With this configuration, it is possible to perform display suitable for the state of the vehicle.

上記構成において、前記画像制御手段は、前記車両の状態に応じて前記車内外合成画像を記憶手段に記憶させる、構成を採用できる。
この構成により、例えば車両に事故が発生した場合には、車内外合成画像を記憶することにより、事故原因の解析などに使用することができる。 The said structure WHEREIN: The said image control means can employ | adopt the structure which memorize | stores the said vehicle interior / exterior composite image in a memory | storage means according to the state of the said vehicle.
With this configuration, for example, when an accident occurs in a vehicle, the composite image inside and outside the vehicle can be stored and used for analysis of the cause of the accident.

上記構成において、前記画像制御手段は、前記車両の状態に応じて前記車内外合成画像を送信手段により外部装置に送信させる、構成を採用できる。
この構成により、例えば駐車中に車両への不正行為がなされた場合には、ユーザの携帯電話などに車内外合成画像を送信することにより、車両の現状を把握することができる。 The said structure can employ | adopt the structure which the said image control means transmits the said vehicle interior / exterior synthetic | combination image to an external device by a transmission means according to the state of the said vehicle.
With this configuration, for example, when an illegal act is performed on a vehicle during parking, the current state of the vehicle can be grasped by transmitting the vehicle interior / exterior composite image to the user's mobile phone or the like.

上記構成において、前記画像制御手段は、前記車両の状態に応じて前記車内外合成画像に表示された車内領域を中心に前記車内外合成画像を拡大表示して前記表示手段に表示させる、構成を採用できる。
この構成により、例えば車両の速度が所定値よりも遅い場合には、車内領域を中心に車内外合成画像を拡大表示することにより、より車両の状態に適した表示を行うことができる。 In the above configuration, the image control means enlarges and displays the vehicle interior / exterior composite image centered on the vehicle interior area displayed in the vehicle interior / exterior composite image according to the state of the vehicle and displays the image on the display means. Can be adopted.
With this configuration, for example, when the speed of the vehicle is slower than a predetermined value, it is possible to perform a display more suitable for the state of the vehicle by enlarging and displaying the vehicle interior / exterior composite image centering on the vehicle interior region.

上記構成において、前記画像制御手段は、前記同一方向から見える前記車両の外観画像を前記車内外合成画像にオーバレイ表示して前記表示手段に表示させる、構成を採用できる。
この構成により、見やすい車内外合成画像を表示することができる。 In the above configuration, the image control unit may employ a configuration in which an appearance image of the vehicle seen from the same direction is displayed as an overlay on the vehicle interior / exterior composite image and displayed on the display unit.
With this configuration, it is possible to display an easily viewable composite image inside and outside the vehicle.

上記構成において、前記車外用カメラは、前記車両の横側周辺を撮影すると共に前記車両の横側の窓よりも高い位置に設置されている車外用カメラを含む、構成を採用できる。
この構成により、搭乗者が窓から手を出した場合であっても、車外用カメラの撮影範囲を妨げることなく、車両の横側周辺を撮影することができる。 The said structure can employ | adopt the structure which includes the camera for vehicles outside installed in the position higher than the window on the side of the said vehicle while image | photographing the side periphery of the said vehicle.
With this configuration, even when the passenger puts his hand out of the window, it is possible to take a picture of the periphery of the side of the vehicle without interfering with the shooting range of the external camera.

上記構成において、前記車外用カメラは、前記車両の横側周辺を撮影すると共に前記車両の横側の窓の位置を車両の前後方向から挟むように配置された複数の車外用カメラを含む、構成を採用できる。
この構成によっても、搭乗者が窓から手を出した場合であっても、車外用カメラの撮影範囲を妨げることなく、車両の横側周辺を撮影することができる。 In the above-described configuration, the vehicle exterior camera includes a plurality of vehicle exterior cameras that are arranged so as to photograph the lateral periphery of the vehicle and sandwich the position of the lateral window of the vehicle from the front-rear direction of the vehicle. Can be adopted.
Even with this configuration, even when the occupant puts his hand out of the window, it is possible to take a picture of the lateral side of the vehicle without disturbing the shooting range of the vehicle camera.

上記構成において、前記車内用カメラは、前部座席側を撮影する前部座席側用カメラと後部座席側を撮影する後部座席側用カメラとを含む、構成を採用できる。
この構成により、車内の状況を詳細に表示することができ、特に運転者は後部座席の様子を詳細に把握することができる。 In the above configuration, the in-vehicle camera may include a front seat side camera that captures the front seat side and a rear seat side camera that captures the rear seat side.
With this configuration, the situation inside the vehicle can be displayed in detail, and in particular, the driver can grasp the state of the rear seat in detail.

また、上記目的は、複数のカメラにより撮影された車内画像及び車外画像を合成した車内外合成画像を生成する画像制御手段とを備え、前記画像制御手段は、前記車内画像及び車外画像を同一方向から見えるように合成して前記車内外合成画像を生成する、ことを特徴とする画像処理装置によっても達成できる。
この構成により、車内画像及び車外画像を合成して車内外合成画像を生成し、表示手段に車内外合成画像が表示されるので、搭乗者は車内の状況と車外の状況とを同時に把握することができる。また、前記車内画像及び車外画像を同一方向から見えるように合成して車内外合成画像を生成するので、車内の状況と車外の状況とが違和感のない様子で表示される。 Further, the object is provided with image control means for generating a vehicle interior / exterior composite image obtained by synthesizing the vehicle interior image and the vehicle exterior image taken by a plurality of cameras, and the image control means displays the vehicle interior image and the vehicle exterior image in the same direction. It can also be achieved by an image processing apparatus characterized in that the image is synthesized so as to be visible from the vehicle and the above-mentioned inside / outside synthesized image is generated.
With this configuration, the vehicle interior and exterior images are combined to generate a vehicle interior and exterior composite image, and the interior and exterior composite image is displayed on the display means, so that the passenger can simultaneously grasp the situation inside the vehicle and the situation outside the vehicle. Can do. In addition, since the in-vehicle image and the out-of-vehicle image are combined so that they can be seen from the same direction to generate a combined in-and-out image, the in-vehicle condition and the out-of-vehicle condition are displayed in a state that does not cause a sense of incongruity.

本発明によれば、車内及び車外の状況を同時に確認することはできる車両状況監視装置及び画像処理装置を提供できる。   ADVANTAGE OF THE INVENTION According to this invention, the vehicle condition monitoring apparatus and image processing apparatus which can confirm the condition inside and outside a vehicle simultaneously can be provided.

以下に、本発明に係る複数の実施例について説明する。   Hereinafter, a plurality of embodiments according to the present invention will be described.

以下、本発明の最良の実施形態について、添付図面を参照しつつ説明する。
図１は、本発明の一実施形態に係る車両状況監視装置の構成図である。
本発明に係る車両状況監視装置は、制御部１０、車外カメラ群３０、車内カメラ群４０、表示部５０、操作部５１、記憶部５２、送信部５３、車速センサ５４、加速度センサ５５、盗難防止装置６０などから構成される。 DESCRIPTION OF EXEMPLARY EMBODIMENTS Hereinafter, exemplary embodiments of the invention will be described with reference to the accompanying drawings.
FIG. 1 is a configuration diagram of a vehicle condition monitoring apparatus according to an embodiment of the present invention.
The vehicle status monitoring device according to the present invention includes a control unit 10, an outside camera group 30, an in-vehicle camera group 40, a display unit 50, an operation unit 51, a storage unit 52, a transmission unit 53, a vehicle speed sensor 54, an acceleration sensor 55, and an antitheft. The device 60 is configured.

制御部１０は、ＣＰＵ（Central Processing Unit）、ＲＯＭ（Read Only Memory）、ＲＡＭ（Random Access Memory）などから構成され、車外カメラ群３０及び車内カメラ群４０などからの画像に基づき、後述する車内外合成画像を生成する。また、制御部１０は、車両状況監視装置全体を制御するものである。   The control unit 10 includes a CPU (Central Processing Unit), a ROM (Read Only Memory), a RAM (Random Access Memory), and the like, and is based on images from the outside camera group 30 and the inside camera group 40 and the like, which will be described later. Generate a composite image. Moreover, the control part 10 controls the whole vehicle condition monitoring apparatus.

車外カメラ群３０は、車両周辺の車外画像を撮影する。車内カメラ群４０は、車内画像が撮影する。
図２は、車両に設けられた車外カメラ群３０及び車内カメラ群４０の配置位置を示した模式図である。
車外カメラ群３０は、前方監視カメラ３１、左側監視カメラ３２、右側監視カメラ３３、後方監視カメラ３４から構成され、前方監視カメラ３１は、車両のボンネットの先端付近に、左側監視カメラ３２及び右側監視カメラ３３は、ドアミラー付近に、後方監視カメラ３４は、後方ピラー付近に配置されている。 The outside camera group 30 captures outside images around the vehicle. The in-vehicle camera group 40 takes an in-vehicle image.
FIG. 2 is a schematic diagram showing the arrangement positions of the in-vehicle camera group 30 and the in-vehicle camera group 40 provided in the vehicle.
The outside camera group 30 includes a front monitoring camera 31, a left monitoring camera 32, a right monitoring camera 33, and a rear monitoring camera 34. The front monitoring camera 31 is located near the front end of the hood of the vehicle, and the left monitoring camera 32 and the right monitoring camera. The camera 33 is disposed near the door mirror, and the rear monitoring camera 34 is disposed near the rear pillar.

車内カメラ群４０は、前部座席監視カメラ４１、後部座席監視カメラ４２から構成され、それぞれ車内に配置されている。前部座席監視カメラ４１は、前部座席の天井に、後部座席監視カメラ４２は後部座席の天井に配置されている。この構成により、車内の状況を詳細に表示することができ、特に運転者は後部座席の様子を詳細に把握することができる。   The in-vehicle camera group 40 includes a front seat monitoring camera 41 and a rear seat monitoring camera 42, and each is disposed in the vehicle. The front seat surveillance camera 41 is disposed on the ceiling of the front seat, and the rear seat surveillance camera 42 is disposed on the ceiling of the rear seat. With this configuration, the situation inside the vehicle can be displayed in detail, and in particular, the driver can grasp the state of the rear seat in detail.

表示部５０は、液晶ディスプレイなどから構成され、制御部１０によって生成された車内外合成画像を表示する。また、表示部５０は、車両内のダッシュボード付近に配置されているものであり、ナビゲーション装置と兼用されるものであってもよい。   The display unit 50 is composed of a liquid crystal display or the like, and displays the vehicle interior / exterior composite image generated by the control unit 10. Moreover, the display part 50 is arrange | positioned near the dashboard in a vehicle, and may be combined with a navigation apparatus.

操作部５１は、リモコンなどから構成され、ユーザは車両状況監視装置に対して車内外合成画像の保存や表示部５０の表示切替などの指示を出すことができる。   The operation unit 51 is composed of a remote controller or the like, and the user can give an instruction to the vehicle state monitoring device to save the in-vehicle / outside composite image and to switch the display of the display unit 50.

記憶部５２は、ハードディスク等から構成され、車内外合成画像を記録・保存する。   The storage unit 52 is composed of a hard disk or the like, and records / stores the vehicle interior / exterior composite image.

送信部５３は、所定の場合には、車内外合成画像を、所定の携帯端末、例えばユーザの携帯電話などに送信する。   In a predetermined case, the transmission unit 53 transmits the vehicle interior / exterior composite image to a predetermined mobile terminal, for example, a user's mobile phone.

車速センサ５４は、車両の速度を検出する。
加速度センサ５５は、車両の加速度を検出する。 The vehicle speed sensor 54 detects the speed of the vehicle.
The acceleration sensor 55 detects the acceleration of the vehicle.

盗難防止装置６０は、振動センサ６１及び音センサ６２などから構成され、イグニッションキーのオフ後所定期間経過後に自動で始動する。所定期間経過後に自動で始動するので、搭乗者が車から降りた後自動で始動する。   The anti-theft device 60 includes a vibration sensor 61, a sound sensor 62, and the like, and automatically starts after a predetermined period of time has elapsed after the ignition key is turned off. Since it starts automatically after a predetermined period of time, it starts automatically after the passenger gets out of the car.

次に、車内外合成画像の生成処理について説明する。図３は、制御部が実行する車内外合成画像の生成処理の一例を示したフローチャート図である。
制御部１０は、車外カメラ群３０により撮影された各車外画像を抽出し（ステップＳ１０）、各車外画像を所定の補正処理を行い、所定の方向から見た車両周辺を映し出した、車外合成画像を生成する（ステップＳ１１）。尚、車外合成画像の生成方法については、特許第３３００３３４号公報に詳細に開示されている方法を用いる。 Next, the generation process of the interior / exterior composite image will be described. FIG. 3 is a flowchart illustrating an example of a vehicle interior / exterior composite image generation process executed by the control unit.
The control unit 10 extracts each of the outside images taken by the outside camera group 30 (step S10), performs a predetermined correction process on each of the outside images, and displays the vehicle surroundings viewed from a predetermined direction. Is generated (step S11). The method disclosed in detail in Japanese Patent No. 3300334 is used as a method for generating a vehicle exterior composite image.

図４は、車外合成画像の例示図である。図４は、自車両の上方から見えるものとして生成された車内外合成画像である。図４に示した、車両前方のエリア１Ａは、前方監視カメラ３１により撮影された画像であり、車両左側のエリア２Ａは、左側監視カメラ３２により、車両右側のエリア３Ａは、右側監視カメラ３３により、車両後方のエリア４Ａは、後方監視カメラ３４により撮影された画像である。尚、図４に示したエリア１Ａ〜４Ａは、各車外カメラにより撮影される、おおよその範囲を示したものである。   FIG. 4 is a view showing an example of a composite image outside the vehicle. FIG. 4 is a composite image inside and outside the vehicle generated as seen from above the host vehicle. The area 1A in front of the vehicle shown in FIG. 4 is an image taken by the front monitoring camera 31, the area 2A on the left side of the vehicle is by the left monitoring camera 32, and the area 3A on the right side of the vehicle is by the right monitoring camera 33. The area 4A behind the vehicle is an image taken by the rear monitoring camera 34. Note that the areas 1A to 4A shown in FIG. 4 show the approximate range of images taken by the cameras outside the vehicle.

次に制御部１０は、車内カメラ群４０により撮影された各車内画像を抽出し（ステップＳ１２）、各車内画像を所定の補正処理を行い、前記車外合成画像を生成する際に設定された上記方向と同一方向から見えるように、車内合成画像を生成する（ステップＳ１３）。図５は、車内合成画像の例示図である。車両内の前部座席側の画像は前部座席監視カメラ４１により、後部座席側の画像は後部座席監視カメラ４２により撮影されたものである。   Next, the control unit 10 extracts each in-vehicle image captured by the in-vehicle camera group 40 (step S12), performs a predetermined correction process on each in-vehicle image, and is set when the above-mentioned composite image outside the vehicle is generated. An in-vehicle composite image is generated so that it can be seen from the same direction as the direction (step S13). FIG. 5 is an illustration of an in-vehicle composite image. The image on the front seat side in the vehicle is taken by the front seat monitoring camera 41, and the image on the rear seat side is taken by the rear seat monitoring camera 42.

次に制御部１０は、上記の車外合成画像と車内合成画像とを合成して、車外合成画像と車内合成画像とが同一方向から見えるように、車内外合成画像を生成する（ステップＳ１４）。図６は、車内外合成画像の例示図である。   Next, the control unit 10 synthesizes the vehicle exterior composite image and the vehicle interior composite image, and generates a vehicle interior / exterior composite image so that the vehicle exterior composite image and the vehicle interior composite image can be seen from the same direction (step S14). FIG. 6 is an exemplary diagram of a composite image inside and outside the vehicle.

次に制御部１０は、車内外合成画像に、上記方向と同一方向から見える自車両の外観のイラストを、車内外合成画像にオーバレイ表示して表示部５０に表示させる（ステップＳ１５）。図７は、自車両画像の例示図である。   Next, the control unit 10 causes the display unit 50 to display an illustration of the appearance of the host vehicle seen from the same direction as the above-mentioned direction in the vehicle interior / exterior composite image and overlay the vehicle interior / exterior composite image (step S15). FIG. 7 is a view showing an example of the own vehicle image.

図８は、自車両画像がオーバレイ表示された車内外合成画像の例示図である。尚、自車両のイラストＧは、予め撮影され記憶部５２に記憶されているビットマップの画像である。   FIG. 8 is a view showing an example of a composite image inside and outside the vehicle in which the host vehicle image is displayed as an overlay. The illustration G of the host vehicle is a bitmap image that has been previously captured and stored in the storage unit 52.

図９は、車外合成画像の例示図である。尚、この場合も、車外合成画像には自車両のイラストｇがオーバレイ表示されている。   FIG. 9 is a view showing an example of a composite image outside the vehicle. In this case as well, an illustration g of the own vehicle is displayed in an overlay on the outside composite image.

ユーザは、操作部５１により、車内外合成画像又は車外合成画像を選択的に切り替えて表示部５０に表示させることができる。例えば、運転手であるユーザは、自分以外に車両内に搭乗者がいない場合には、図９に示した車外合成画像を表示部５０に表示させることができる。また、後部座席に搭乗者がいる場合などには、車内外合成画像を表示することにより、車両内と車外との状況を同時に把握することができる。   The user can selectively switch the vehicle interior / exterior composite image or the vehicle exterior composite image on the display unit 50 using the operation unit 51. For example, a user who is a driver can cause the display unit 50 to display the composite image outside the vehicle shown in FIG. Further, when there is a passenger in the rear seat, the situation inside and outside the vehicle can be grasped simultaneously by displaying the inside and outside composite image.

また、図８に示したように、制御部１０は、車外カメラ群３０によって撮影された車外合成画像と、車内カメラ群４０によって撮影された車内合成画像とを、同一方向から見えるように合成して車内外合成画像を生成する。これにより、車内の状況と車外の状況とが違和感のない様子で表示部５０に表示される。   Further, as shown in FIG. 8, the control unit 10 synthesizes the vehicle exterior composite image captured by the vehicle exterior camera group 30 and the vehicle interior composite image captured by the vehicle interior camera group 40 so that they can be seen from the same direction. To generate a composite image inside and outside the vehicle. As a result, the situation inside the vehicle and the situation outside the vehicle are displayed on the display unit 50 in a state where there is no sense of incongruity.

また、図８に示したように、制御部１０は、車内及び車外の位置関係が一致するように車内画像及び車外画像を合成して車内外合成画像を生成するので、車内の状況と車外の状況とが違和感のない様子で表示される。   Further, as shown in FIG. 8, the control unit 10 generates a composite image inside and outside the vehicle by synthesizing the in-vehicle image and the outside image so that the positional relationship between the inside and the outside of the vehicle coincides with each other. The situation is displayed with no sense of incongruity.

また、制御部１０は、前記同一方向から見える車両の外観画像を車内外合成画像にオーバレイ表示して表示部５０に表示させる。これにより、見やすい車内外合成画像を表示することができる。   In addition, the control unit 10 displays the vehicle appearance image seen from the same direction on the display unit 50 as an overlay display on the vehicle interior / exterior composite image. This makes it possible to display an easy-to-see composite image inside and outside the vehicle.

尚、図４乃至図９に示したように、車外合成画像、車内合成画像、車内外合成画像及び自車画像は、それぞれ、自車両の無限遠上部での視点から見えるように生成された画像である。   As shown in FIGS. 4 to 9, the vehicle exterior composite image, the vehicle interior composite image, the vehicle interior / exterior composite image, and the host vehicle image are images generated so as to be seen from the viewpoint at the upper part of the host vehicle at infinity. It is.

ユーザは、車速度によって表示部５０に表示される画像が切り替えられるモードを選択することもできる。上記モードを選択されたときの切り替え処理について説明する。図１０は、制御部が実行する切り替え処理の一例を示したフローチャート図である。尚、この処理は所定の周期で繰り返し実行される。   The user can also select a mode in which an image displayed on the display unit 50 is switched depending on the vehicle speed. The switching process when the above mode is selected will be described. FIG. 10 is a flowchart illustrating an example of the switching process executed by the control unit. This process is repeatedly executed at a predetermined cycle.

制御部１０は、車速センサ５４から車速度を検出し（ステップＳ２０）、は車速度が制御部１０ｍ／ｓ以上であるかどうかを判定する。制御部１０ｍ／ｓ以上の場合には、制御部１０は表示部５０に指令を出して、図５に例示したような車外合成画像を表示させる（ステップＳ２１）。   The control unit 10 detects the vehicle speed from the vehicle speed sensor 54 (step S20), and determines whether the vehicle speed is equal to or higher than the control unit 10 m / s. When the control unit is 10 m / s or more, the control unit 10 issues a command to the display unit 50 to display a composite image outside the vehicle as illustrated in FIG. 5 (step S21).

制御部１０ｍ／ｓ未満の場合には、制御部１０は、表示部５０に指令を出して、図８に例示したような車内外合成画像の、車内画像が表示された車内領域を中心として拡大表示された車内外合成画像を、表示部５０に表示させる（ステップＳ２２）。従って、停車時や発進時、又は徐行運転時には、表示部５０に車内外合成画像が拡大表示される。   When the control unit is less than 10 m / s, the control unit 10 issues a command to the display unit 50 and enlarges the in-vehicle composite image as illustrated in FIG. 8 around the in-vehicle region where the in-vehicle image is displayed. The displayed vehicle interior / exterior composite image is displayed on the display unit 50 (step S22). Therefore, the vehicle interior / exterior composite image is enlarged and displayed on the display unit 50 at the time of stopping, starting, or slow driving.

このように、制御部１０は、車両の速度に応じて車内外合成画像を表示部５０に表示させる。これにより、状況に適した表示を行うことができる。例えば、車速が速い場合には、前方車両及び後方車両との車間距離などを把握できると共に、後部座席の搭乗者の様子を把握することができ、車速が遅い場合又は停車中の場合には、車内の様子を十分に把握することができる。例えば停車中に搭乗者が後部座席からの乗り降りを確認することができる。   In this manner, the control unit 10 causes the display unit 50 to display the vehicle interior / exterior composite image according to the speed of the vehicle. Thereby, the display suitable for the situation can be performed. For example, when the vehicle speed is fast, the distance between the front vehicle and the rear vehicle can be grasped, and the state of the passenger in the rear seat can be grasped. You can fully understand the situation inside the car. For example, the passenger can confirm getting on and off from the rear seat while the vehicle is stopped.

次に、車両の状態に応じて制御部１０により生成された車内外合成画像を記憶する処理について説明する。
図１１は、制御部が実行する車内外合成画像を記憶する記憶処理の一例を示したフローチャートである。
制御部１０は、イグニッションがオン状態であるか否かを判定する（ステップＳ３０）。
イグニッションがオンの状態では、制御部１０によって生成された車内外合成画像を記憶部５２にオーバーライト記録を行う（ステップＳ３１）。オーバーライト記録とは、記憶部５２に車内外合成画像を記録し、所定の容量まで記録されると、古い画像から順に消去し、新しい画像を記録するものである。 Next, a process for storing the vehicle interior / exterior composite image generated by the control unit 10 according to the state of the vehicle will be described.
FIG. 11 is a flowchart illustrating an example of a storage process for storing a vehicle interior / exterior composite image executed by the control unit.
The controller 10 determines whether or not the ignition is on (step S30).
When the ignition is on, the vehicle interior / exterior composite image generated by the control unit 10 is overwritten in the storage unit 52 (step S31). Overwrite recording is to record a composite image inside and outside the vehicle in the storage unit 52, and when it has been recorded up to a predetermined capacity, the old image is erased in order and a new image is recorded.

次に、制御部１０は加速度センサ５５からの検出値が所定値（例えば３Ｇ）を超えたか否かを判定する（ステップＳ３２）。超えていない場合には、再度ステップＳ３０の処理を実行する。   Next, the control unit 10 determines whether or not the detection value from the acceleration sensor 55 exceeds a predetermined value (for example, 3G) (step S32). If not, the process of step S30 is executed again.

超えている場合には、超えた時点をトリガーとし、制御部１０は、そのトリガー前後の所定期間の車内外合成画像のデータを記憶部５２に記憶・保存させる（ステップＳ３３）。例えば、トリガー前の３秒間及びトリガー後の制御部１０秒間を記憶・保存する。これにより、例えば、車両が急停車又は他車両に追突されて事故が発生した場合には、車両の加速度が急激に変化するため、その際の前後の車内外合成画像のデータを記憶・保存することにより、事故原因の解析などに用いることができる。また、そのその際の車内の状況を把握することができるので、車内での安全性を検証することもできる。   If it has exceeded, the time when it has exceeded is set as a trigger, and the control unit 10 stores / saves the data of the in-vehicle / outside composite images for a predetermined period before and after the trigger in the storage unit 52 (step S33). For example, 3 seconds before the trigger and 10 seconds after the trigger are stored and stored. Thus, for example, when an accident occurs due to a sudden stop of a vehicle or a collision with another vehicle, the acceleration of the vehicle changes abruptly. Can be used to analyze the cause of an accident. Further, since the situation inside the vehicle at that time can be grasped, the safety inside the vehicle can also be verified.

ステップＳ３０において、イグニッションがオフの場合、即ち車両が駐車中のような場合には、イグニッションがオフにされてから所定期間経過したか否かを判定する（ステップＳ３４）。所定期間経過後は、制御部１０は盗難防止装置６０を起動させる（ステップＳ３５）。制御部１０は、振動センサ６１又は音センサ６２から振動又は音を検出したか否かを判定する（ステップＳ３６）。検出していない場合には再度ステップＳ３０の処理を実行する。検出した場合には、制御部１０は、車外カメラ群３０及び車内カメラ群４０により撮影を開始し（ステップＳ３７）、車内外合成画像のデータを記憶部５２に記憶・保存させる（ステップＳ３８）。また制御部１０は、この車内外合成画像のデータを送信部５３に指令を出して外部へ送信する（ステップＳ３９）。   In step S30, when the ignition is off, that is, when the vehicle is parked, it is determined whether or not a predetermined period has elapsed since the ignition was turned off (step S34). After the predetermined period has elapsed, the control unit 10 activates the anti-theft device 60 (step S35). The control unit 10 determines whether vibration or sound is detected from the vibration sensor 61 or the sound sensor 62 (step S36). If not detected, the process of step S30 is executed again. If detected, the control unit 10 starts photographing with the vehicle exterior camera group 30 and the vehicle interior camera group 40 (step S37), and stores / saves the data of the vehicle interior / exterior composite image in the storage unit 52 (step S38). In addition, the control unit 10 issues a command to the transmission unit 53 and transmits the data of the vehicle interior / exterior composite image to the outside (step S39).

これにより、例えば、車両の窓ガラスが割られた場合には、振動センサ６１及び音センサ６２からの検出信号に基づいて、制御部１０は車外カメラ群３０及び車内カメラ群４０に撮影を開始して、車内外合成画像を記憶・保存する。このように車両の状況に応じて車内外合成画像を記憶・保存することができ、不正行為者の特定などを図ることができる。また制御部１０は、この車内外合成画像のデータを送信部５３に指令を出して外部へ送信するので、例えば車両の持ち主の携帯電話にこの画像データを送信することにより、ユーザは現在の車両の状態を把握することができる。或いは、この画像データを警察や警備会社に通報することもできる。   Thereby, for example, when the window glass of the vehicle is broken, the control unit 10 starts photographing the exterior camera group 30 and the interior camera group 40 based on the detection signals from the vibration sensor 61 and the sound sensor 62. To store and save the composite image inside and outside the car. In this way, the inside / outside composite image can be stored / saved according to the situation of the vehicle, and the fraudulent person can be identified. Further, since the control unit 10 issues a command to the transmission unit 53 and transmits the data of the composite image inside and outside the vehicle to the outside, for example, by transmitting this image data to the mobile phone of the vehicle owner, the user can You can grasp the state of. Alternatively, the image data can be reported to the police or security company.

次に、実施例２に係る車両状況監視装置について説明する。尚、実施例１に係る車両状況監視装置と異なる部分についてのみ説明し、同一の部分についてはその説明を省略する。   Next, a vehicle status monitoring apparatus according to the second embodiment will be described. In addition, only a different part from the vehicle condition monitoring apparatus which concerns on Example 1 is demonstrated, and the description is abbreviate | omitted about the same part.

まず、実施例２に係る車両状況監視装置について説明する前に、従来の車両状況監視装置についても問題点を説明する。図１２は、従来の車両状況監視装置についても問題点の説明図である。
図１２（ａ）に示すように、従来、車両の横側を撮影する右側監視カメラ３３がドアミラー付近に設置されている場合、後部座席の搭乗者が窓から手を出した場合には、その手よりも後方側は、手の影によって画像が見えにくかった。また、図１２（ｂ）に示すように、車両の横側を撮影する右側監視カメラ３３を後部座席の窓よりも後方に配置した場合であっても、後部座席の搭乗者が手を出した場合には、その手よりも前方は見えにくかった。これは、後部座席の搭乗者のみならず、前部座席の搭乗者が窓から手を出した場合であっても起こり得る。 First, before describing the vehicle condition monitoring apparatus according to the second embodiment, problems with the conventional vehicle condition monitoring apparatus will be described. FIG. 12 is an explanatory diagram of a problem also in the conventional vehicle condition monitoring apparatus.
As shown in FIG. 12 (a), when the right surveillance camera 33 for photographing the side of the vehicle is conventionally installed in the vicinity of the door mirror, when the passenger in the rear seat takes his hand out of the window, The image behind the hand was hard to see due to the shadow of the hand. In addition, as shown in FIG. 12 (b), even when the right surveillance camera 33 for photographing the side of the vehicle is arranged behind the rear seat window, the passenger in the rear seat put out his hand. In some cases, it was harder to see ahead than that hand. This may occur even when the passenger in the front seat moves out of the window as well as the passenger in the rear seat.

そこで、実施例２に係る車両状況監視装置の、車両の右側周辺を撮影する右側監視カメラ３３は、図１３に示すように、車両の右側の窓よりも高い位置に設置されている。この位置に設置されていることにより、搭乗者の手を見下ろすような位置から撮影することができるので、搭乗者が窓から手を出した場合であっても、右側監視カメラ３３の撮影範囲を妨げることなく、車両の右側周辺を撮影することができる。尚、右側監視カメラ３３は、前部座席側の横の窓と、後部座席側の横の窓との間の位置に配置するのが望ましい。尚、左側監視カメラ３２についても、図示はしないが、車両の左側の窓よりも高い位置に設定されている。   Therefore, the right side monitoring camera 33 for photographing the right side periphery of the vehicle of the vehicle state monitoring apparatus according to the second embodiment is installed at a position higher than the right side window of the vehicle as shown in FIG. By being installed at this position, it is possible to shoot from a position looking down at the passenger's hand, so even if the passenger takes his hand out of the window, the shooting range of the right surveillance camera 33 can be increased. The area around the right side of the vehicle can be photographed without interruption. The right monitoring camera 33 is preferably arranged at a position between the side window on the front seat side and the side window on the rear seat side. The left monitoring camera 32 is also set at a position higher than the left window of the vehicle, although not shown.

次に、実施例２の車両状況監視装置の変形例について説明する。図１４は、実施例２の車両状況監視装置の変形例の説明図である。図１４に示すように、車外カメラは、ドアミラー付近に設置された左側監視カメラ３２、右側監視カメラ３３と、車両の後方の横側に設置された左側補助カメラ３２ａ、右側補助カメラ３３ａとが設置されている。左側監視カメラ３２とその左側補助カメラ３２ａ、及び右側監視カメラ３３と右側補助カメラ３３ａは、共に車両の横側の窓の位置を車両の前後方向から挟むように配置されている。これにより、搭乗者が窓から手を出した場合であっても、車外用カメラの撮影範囲を妨げることなく、車両の横側周辺を撮影することができる。   Next, a modified example of the vehicle condition monitoring apparatus of the second embodiment will be described. FIG. 14 is an explanatory diagram of a modified example of the vehicle state monitoring apparatus according to the second embodiment. As shown in FIG. 14, the camera outside the vehicle includes a left monitoring camera 32 and a right monitoring camera 33 installed in the vicinity of the door mirror, and a left auxiliary camera 32a and a right auxiliary camera 33a installed on the lateral side behind the vehicle. Has been. The left monitoring camera 32 and its left auxiliary camera 32a, and the right monitoring camera 33 and the right auxiliary camera 33a are both arranged so as to sandwich the position of the side window of the vehicle from the front-rear direction of the vehicle. As a result, even when the occupant puts his hand out of the window, it is possible to photograph the periphery of the side of the vehicle without obstructing the photographing range of the external camera.

以上本発明の好ましい一実施形態について詳述したが、本発明は係る特定の実施形態に限定されるものではなく、特許請求の範囲に記載された本発明の要旨の範囲内において、種々の変形・変更が可能である。   The preferred embodiment of the present invention has been described in detail above, but the present invention is not limited to the specific embodiment, and various modifications can be made within the scope of the gist of the present invention described in the claims.・ Change is possible.

例えば、車両に舵角センサを設けて、舵角が所定以内の場合には車内外合成画像を表示させ、舵角が所定以上の場合に車外合成画像を表示させるように構成してもよい。これにより、車両が交差点などを曲がる際に、車両周辺の車外の状況を把握することができると共に、直線運転時には車内の状況を把握することができる。   For example, a steering angle sensor may be provided in the vehicle so that a vehicle interior / exterior composite image is displayed when the steering angle is within a predetermined range, and a vehicle exterior composite image is displayed when the steering angle is greater than or equal to a predetermined value. As a result, when the vehicle turns at an intersection or the like, it is possible to grasp the situation outside the vehicle around the vehicle, and to grasp the situation inside the vehicle during straight driving.

また、車内カメラを運転者の顔を映し出すことができる位置に設定し、運転者の居眠りなどを検出するように構成してもよい。   Further, the in-vehicle camera may be set at a position where the driver's face can be displayed, and the driver's sleep may be detected.

盗難防止装置として、音センサ及び振動防止センサにより、車両への不正行為を検出するように構成したが、盗難防止装置はこのような構成に限定されず、車両への第３者による不正行為を検出できるものであればよい。   The anti-theft device is configured to detect fraudulent acts on the vehicle by means of a sound sensor and vibration prevention sensor. However, the anti-theft device is not limited to such a configuration. Anything that can be detected is acceptable.

本発明の一実施形態に係る車両状況監視装置の構成図である。It is a block diagram of the vehicle condition monitoring apparatus which concerns on one Embodiment of this invention. 車両に設けられた車外カメラ群３０及び車内カメラ群４０の位置を示した模式図である。It is the schematic diagram which showed the position of the in-vehicle camera group 30 and the in-vehicle camera group 40 provided in the vehicle. 制御部が実行する車内外合成画像の生成処理の一例を示したフローチャート図である。It is the flowchart figure which showed an example of the production | generation process of the vehicle interior / exterior composite image which a control part performs. 車外合成画像の例示図である。It is an illustration figure of a composite image outside a vehicle. 車内合成画像の例示図である。It is an illustration figure of an in-vehicle composite image. 車外合成画像の例示図である。It is an illustration figure of a composite image outside a vehicle. 自車両画像の例示図である。It is an illustration figure of the own vehicle image. 自車両画像がオーバレイ表示された車内外合成画像の例示図である。It is an illustration figure of the vehicle inside / outside synthetic | combination image by which the own vehicle image was displayed by overlay. 車外合成画像の例示図である。It is an illustration figure of a composite image outside a vehicle. 制御部が実行する切り替え処理の一例を示したフローチャート図である。It is the flowchart figure which showed an example of the switching process which a control part performs. 制御部が実行する車内外合成画像を記憶する記憶処理の一例を示したフローチャートである。It is the flowchart which showed an example of the memory | storage process which memorize | stores the vehicle interior / exterior composite image which a control part performs. 従来の車両状況監視装置についても問題点の説明図である。It is explanatory drawing of a problem also about the conventional vehicle condition monitoring apparatus. 実施例２に係る車両状況監視装置の、右側監視カメラの位置を示した模式図である。It is the schematic diagram which showed the position of the right side monitoring camera of the vehicle condition monitoring apparatus which concerns on Example 2. FIG. 実施例２に係る車両状況監視装置の変形例の説明図である。It is explanatory drawing of the modification of the vehicle condition monitoring apparatus which concerns on Example 2. FIG.

符号の説明Explanation of symbols

１０ 制御部
３０ 車外カメラ群
３１ 前方監視カメラ
３２ 左側監視カメラ
３２ａ 左側補助カメラ
３３ 右側監視カメラ
３３ａ 右側補助カメラ
３４ 後方監視カメラ
４０ 車内カメラ群
４１ 前部座席監視カメラ
４２ 後部座席監視カメラ
５０ 表示部
５１ 操作部
５２ 記憶部
５３ 送信部
５４ 車速センサ
５５ 加速度センサ
６０ 盗難防止装置
６１ 振動センサ
６２ 音センサ

DESCRIPTION OF SYMBOLS 10 Control part 30 Car exterior camera group 31 Front surveillance camera 32 Left side surveillance camera 32a Left side auxiliary camera 33 Right side surveillance camera 33a Right side auxiliary camera 34 Rear surveillance camera 40 In-vehicle camera group 41 Front seat surveillance camera 42 Rear seat surveillance camera 50 Display part 51 Operation unit 52 Storage unit 53 Transmission unit 54 Vehicle speed sensor 55 Acceleration sensor 60 Anti-theft device 61 Vibration sensor 62 Sound sensor

Claims (6)

車内画像を撮影する車内用カメラと、
車両周辺の車外画像を撮影する車外用カメラと、
前記車内用及び車外用カメラにより撮影された前記車内画像及び車外画像を合成して車内外合成画像を生成する画像制御手段と、
前記車内外合成画像を表示する表示手段と、を備え、
前記画像制御手段は、前記車内画像及び車外画像を同一方向から見えるように合成して前記車内外合成画像を生成する、ことを特徴とする車両状況監視装置。 An in-vehicle camera that captures in-vehicle images,
An external camera that captures images outside the vehicle,
Image control means for synthesizing the in-vehicle image and the in-vehicle image captured by the in-vehicle and in-vehicle cameras, and generating an in-vehicle composite image;
Display means for displaying the vehicle interior / exterior composite image,
The vehicle condition monitoring device, wherein the image control means combines the vehicle interior image and the vehicle exterior image so as to be seen from the same direction and generates the vehicle interior / exterior composite image. 前記画像制御手段は、車内と車外との位置関係が一致するように前記車内画像及び車外画像を合成して前記車内外合成画像を生成する、ことを特徴とする請求項１に記載の車両状況監視装置。   2. The vehicle situation according to claim 1, wherein the image control unit generates the composite image inside and outside the vehicle by synthesizing the inside image and the outside image so that a positional relationship between the inside and the outside of the vehicle coincides. Monitoring device. 前記画像制御手段は、前記車両の状態に応じて前記車内外合成画像を前記表示手段に表示させる、ことを特徴とする請求項１又は２に記載の車両状況監視装置。   The vehicle status monitoring apparatus according to claim 1, wherein the image control unit causes the display unit to display the vehicle interior / exterior composite image according to a state of the vehicle. 前記画像制御手段は、前記車両の状態に応じて前記車内外合成画像を記憶手段に記憶させる、ことを特徴とする請求項１乃至３の何れかに記載の車両状況監視装置。   The vehicle condition monitoring apparatus according to claim 1, wherein the image control unit stores the vehicle interior / exterior composite image in a storage unit according to a state of the vehicle. 前記画像制御手段は、前記車両の状態に応じて前記車内外合成画像を送信手段により外部装置に送信させる、ことを特徴とする請求項１乃至４の何れかに記載の車両状況監視装置。   5. The vehicle condition monitoring apparatus according to claim 1, wherein the image control unit causes the transmission unit to transmit the vehicle interior / exterior composite image in accordance with a state of the vehicle. 複数のカメラにより撮影された車内画像及び車外画像を合成した車内外合成画像を生成する画像制御手段を備え、
前記画像制御手段は、前記車内画像及び車外画像を同一方向から見えるように合成して前記車内外合成画像を生成する、ことを特徴とする画像処理装置。

An image control means for generating a vehicle interior / exterior composite image obtained by combining the vehicle interior image and the vehicle exterior image captured by a plurality of cameras;
The image processing device, wherein the image control unit generates the composite image inside and outside the vehicle by combining the vehicle image and the image outside the vehicle so as to be seen from the same direction.

JP2007002321A 2007-01-10 2007-01-10 Vehicle status monitoring device and image processing device Expired - Fee Related JP5105880B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2007002321A JP5105880B2 (en) 2007-01-10 2007-01-10 Vehicle status monitoring device and image processing device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2007002321A JP5105880B2 (en) 2007-01-10 2007-01-10 Vehicle status monitoring device and image processing device

Publications (2)

Publication Number Publication Date
JP2008168714A true JP2008168714A (en) 2008-07-24
JP5105880B2 JP5105880B2 (en) 2012-12-26

Family

ID=39697225

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2007002321A Expired - Fee Related JP5105880B2 (en) 2007-01-10 2007-01-10 Vehicle status monitoring device and image processing device

Country Status (1)

Country Link
JP (1) JP5105880B2 (en)

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2012121384A (en) * 2010-12-06 2012-06-28 Fujitsu Ten Ltd Image display system
EP2922293A1 (en) * 2014-03-20 2015-09-23 MAN Truck & Bus AG Method for monitoring the vehicle interior and the vehicle exterior
WO2016158984A1 (en) * 2015-04-02 2016-10-06 アイシン精機株式会社 Periphery monitoring device
JP2020095406A (en) * 2018-12-11 2020-06-18 トヨタ自動車株式会社 On-vehicle device, program, and vehicle
CN114040091A (en) * 2021-09-28 2022-02-11 北京瞰瞰智能科技有限公司 Image processing method, imaging system, and vehicle
US11392131B2 (en) * 2018-02-27 2022-07-19 Nauto, Inc. Method for determining driving policy
CN115115666A (en) * 2022-01-14 2022-09-27 长城汽车股份有限公司 Image processing method, device, terminal equipment and computer readable storage medium

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20220164958A1 (en) * 2020-11-24 2022-05-26 Panasonic Automotive Systems Company Of America, Division Of Panasonic Corporation Of North America Method Of Using Camera For Both Internal And External Monitoring Of A Vehicle

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH02151545A (en) * 1988-12-01 1990-06-11 Matsushita Electric Ind Co Ltd Supervisory camera device
JP2000128030A (en) * 1998-10-19 2000-05-09 Niles Parts Co Ltd Vehicle information data storage device
JP2001339715A (en) * 2000-05-25 2001-12-07 Matsushita Electric Ind Co Ltd Operation supporting apparatus
JP3300334B2 (en) * 1999-04-16 2002-07-08 松下電器産業株式会社 Image processing device and monitoring system
JP2002293271A (en) * 2001-04-02 2002-10-09 Niles Parts Co Ltd Accident information storing system for vehicle
JP2005269010A (en) * 2004-03-17 2005-09-29 Olympus Corp Image creating device, program and method
JP2006111085A (en) * 2004-10-13 2006-04-27 Shi Xiong Li Vehicular anti-theft device with notification effect of image

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH02151545A (en) * 1988-12-01 1990-06-11 Matsushita Electric Ind Co Ltd Supervisory camera device
JP2000128030A (en) * 1998-10-19 2000-05-09 Niles Parts Co Ltd Vehicle information data storage device
JP3300334B2 (en) * 1999-04-16 2002-07-08 松下電器産業株式会社 Image processing device and monitoring system
JP2001339715A (en) * 2000-05-25 2001-12-07 Matsushita Electric Ind Co Ltd Operation supporting apparatus
JP2002293271A (en) * 2001-04-02 2002-10-09 Niles Parts Co Ltd Accident information storing system for vehicle
JP2005269010A (en) * 2004-03-17 2005-09-29 Olympus Corp Image creating device, program and method
JP2006111085A (en) * 2004-10-13 2006-04-27 Shi Xiong Li Vehicular anti-theft device with notification effect of image

Cited By (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2012121384A (en) * 2010-12-06 2012-06-28 Fujitsu Ten Ltd Image display system
US9199607B2 (en) 2010-12-06 2015-12-01 Fujitsu Ten Limited In-vehicle apparatus
EP2922293A1 (en) * 2014-03-20 2015-09-23 MAN Truck & Bus AG Method for monitoring the vehicle interior and the vehicle exterior
WO2016158984A1 (en) * 2015-04-02 2016-10-06 アイシン精機株式会社 Periphery monitoring device
US11392131B2 (en) * 2018-02-27 2022-07-19 Nauto, Inc. Method for determining driving policy
JP2020095406A (en) * 2018-12-11 2020-06-18 トヨタ自動車株式会社 On-vehicle device, program, and vehicle
CN111301284A (en) * 2018-12-11 2020-06-19 丰田自动车株式会社 In-vehicle device, program, and vehicle
US11057575B2 (en) 2018-12-11 2021-07-06 Toyota Jidosha Kabushiki Kaisha In-vehicle device, program, and vehicle for creating composite images
JP7200645B2 (en) 2018-12-11 2023-01-10 トヨタ自動車株式会社 In-vehicle device, program, and vehicle
CN114040091A (en) * 2021-09-28 2022-02-11 北京瞰瞰智能科技有限公司 Image processing method, imaging system, and vehicle
CN115115666A (en) * 2022-01-14 2022-09-27 长城汽车股份有限公司 Image processing method, device, terminal equipment and computer readable storage medium

Also Published As

Publication number Publication date
JP5105880B2 (en) 2012-12-26

Similar Documents

Publication Publication Date Title
JP5105880B2 (en) Vehicle status monitoring device and image processing device
US9902355B2 (en) Camera activation response to vehicle safety event
JP4302764B2 (en) Vehicle display device and vehicle
JP5370334B2 (en) In-vehicle camera system
US10218753B2 (en) Video activation button
US20170347002A1 (en) Video transmission control
JP2006321357A (en) Monitoring device for vehicle
JP2008087651A (en) In-vehicle camera system
JP2010257249A (en) On-vehicle security device
JP2005280526A (en) Vehicle camera device, vehicle alarm system using vehicle camera device and vehicle alarm method
WO2019235127A1 (en) Record/play device, record/play method, and program
KR100722496B1 (en) Vehicle with an auto camera
JP2004194071A (en) Drive support image generator
KR200442841Y1 (en) Vehicular device for displaying front blind spots
KR101580567B1 (en) Apparatus of recording event based image data
JP4211562B2 (en) Vehicle periphery monitoring device
JP2006182234A (en) On-vehicle camera system, shooting method, and door mirror
JP3200960U (en) Automotive room mirror type device with multi-view image display and anti-theft GPS alarm function
KR101533814B1 (en) Apparatus and Method of recording event based image data
JP5114101B2 (en) In-vehicle camera system
JP5311510B2 (en) In-vehicle monitoring system and monitoring method used therefor
JP2009300572A (en) On-board information-displaying device
JP4679260B2 (en) Vehicle driving support device
JP2008182591A (en) Image providing device, vehicle, and image providing method
JP2005088759A (en) Camera for lateral shifting of vehicle

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20090929

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20101126

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20110805

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20110823

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20111013

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20120214

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20120330

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20121002

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20121002

R150 Certificate of patent or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20151012

Year of fee payment: 3

LAPS Cancellation because of no payment of annual fees