JP2009059007A - Security system for vehicle - Google Patents

Security system for vehicle Download PDF

Info

Publication number
JP2009059007A
JP2009059007A JP2007223393A JP2007223393A JP2009059007A JP 2009059007 A JP2009059007 A JP 2009059007A JP 2007223393 A JP2007223393 A JP 2007223393A JP 2007223393 A JP2007223393 A JP 2007223393A JP 2009059007 A JP2009059007 A JP 2009059007A
Authority
JP
Japan
Prior art keywords
image
vehicle
security system
imaging
reflector
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2007223393A
Other languages
Japanese (ja)
Other versions
JP4193001B1 (en
Inventor
Takatoshi Hatanaka
孝寿 畑中
Yoko Hatanaka
容子 畑中
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Individual
Original Assignee
Individual
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Individual filed Critical Individual
Priority to JP2007223393A priority Critical patent/JP4193001B1/en
Application granted granted Critical
Publication of JP4193001B1 publication Critical patent/JP4193001B1/en
Publication of JP2009059007A publication Critical patent/JP2009059007A/en
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Landscapes

  • Closed-Circuit Television Systems (AREA)
  • Burglar Alarm Systems (AREA)
  • Alarm Systems (AREA)

Abstract

<P>PROBLEM TO BE SOLVED: To provide a security system allowing imaging in a plurality of directions by one imaging means, used for prevention of intrusion in a vehicle or theft by a suspicious person, at low cost. <P>SOLUTION: This security system for the vehicle has: the imaging means 11; and a digital processing means 21 performing digital processing of an image obtained from the imaging means 11. A reflector 13 having a reflection face 13a inclined to the imaging means 11 is provided opposite to the imaging means 11, the reflection face 13a is disposed in the periphery of the central axis of the imaging means 11, and the imaging means 11 images information reflected by the reflector 13. <P>COPYRIGHT: (C)2009,JPO&INPIT

Description

本発明は、撮像手段及び該撮像手段から得られた画像のデジタル処理を行うデジタル処理手段を有する車両荒らしや盗難防止などに用いられるセキュリティーシステムに関するものである。   The present invention relates to an imaging unit and a security system used for vehicle vandalism and theft prevention having a digital processing unit that performs digital processing of an image obtained from the imaging unit.

ユーザーの生態的特徴を用い、本人であることの認証手段を有するシステムが提案されている。   A system has been proposed that uses a user's ecological features and has a means of authenticating the identity.

このシステムは、例えば被認証者の顔全体や瞳の虹彩等をカメラで撮像し、認証手段で、画像処理を施し被認証者を識別するための情報を抽出し予め登録してある情報と比較する。そして、両者の類似度を、登録されたユーザーであることを認証する設定値により判定することで、被認証者が本来のユーザーであるかどうかを認証するシステムである。   In this system, for example, the whole face of the person to be authenticated, the iris of the pupil, etc. are imaged with a camera, and the authentication means performs image processing to extract information for identifying the person to be authenticated and compare it with previously registered information. To do. And it is a system which authenticates whether a to-be-authenticated person is an original user by determining similarity of both by the setting value which authenticates that it is a registered user.

そして、このシステムを車両の盗難を防止する車両盗難システムに用いる場合においては、上記した認証手段がユーザーでないと判断した場合は、車両を起動させないことにより車両盗難を防ぐというシステムが知られている(例えば、特許文献1、特許文献2参照。)。   When this system is used in a vehicle theft system that prevents the vehicle from being stolen, there is a known system that prevents the vehicle from being stolen by not starting the vehicle when it is determined that the authentication means is not a user. (For example, refer to Patent Document 1 and Patent Document 2.)

また、ユーザーの使用する時間帯において人物認識設定値を変化させ判別率を高める方法も知られている(例えば、特許文献3参照。)。
特開2000−168502号公報 特開2005−67353号公報 特開2006−306191号公報
Also known is a method of changing the person recognition setting value in the time zone used by the user to increase the discrimination rate (see, for example, Patent Document 3).
JP 2000-168502 A JP 2005-67353 A JP 2006-306191 A

上記したような従来のシステムは、カメラを用い人物が座席に着座した際に人物を認証し、不審者がいる場合において、車両を起動させない事により車両盗難を防ぐというシステムであるが、これらは車両に乗ってカメラ視野内に人物が写る場合において有効な手段であり、不審者がユーザーの車両付近にいて、車両内部を物色している場合や、車上荒らしなどの場合、レッカー車などで外部から持ち出しする場合、カメラそのものを破壊し車両を盗難する場合などにおいて、所有する車両での出来事は車両に戻った際あるいは車両の駐車場所に戻った際に気がつくものであり、車両周辺での状況判断および、即時対応性に課題があった。   The conventional system as described above is a system that authenticates a person when a person is seated in a seat using a camera and prevents vehicle theft by not starting the vehicle when there is a suspicious person. This is an effective method when a person appears in the camera's field of view when riding in a vehicle. If the suspicious person is near the user's vehicle and is looking inside the vehicle, or if the vehicle is being tampered with, it can be externally removed by a tow truck. In the case of taking out from a car, destroying the camera itself, or stealing the vehicle, events in the vehicle that you own will be noticed when returning to the vehicle or returning to the parking place of the vehicle. There were problems with judgment and immediate response.

本発明は、1つの撮像手段で複数方向の撮像を可能とし、不審者を車両荒らしや盗難防止などに用いられるセキュリティーシステムを安価に提供することを目的とする。   SUMMARY OF THE INVENTION An object of the present invention is to provide a low-cost security system that enables imaging in a plurality of directions with a single imaging means, and is used to tamper with a vehicle or prevent theft.

本発明の目的は、撮像手段と、撮像手段から得られた画像のデジタル処理を行うデジタル処理手段を有し、撮像手段に対して傾斜した反射面を持つ反射体を撮像手段と対向して設けると共に、反射面を撮像手段の中心軸の外周に配置し、撮像手段が反射体に反射した情報を撮像するようにしたセキュリティーシステムとすることにより達成される。   An object of the present invention is to have an imaging means and a digital processing means for digitally processing an image obtained from the imaging means, and a reflector having a reflective surface inclined with respect to the imaging means is provided opposite to the imaging means. In addition, this is achieved by providing a security system in which the reflecting surface is arranged on the outer periphery of the central axis of the image pickup means, and the image pickup means picks up information reflected by the reflector.

本発明によれば、撮像手段に対して傾斜した反射面を持つ反射体を撮像手段と対向して設けると共に、反射面を撮像手段の中心軸の外周に配置し、撮像手段が反射体に反射した情報を撮像するようにしたことにより、1つの撮像手段で複数方向の撮像を可能とし、車両荒らしや盗難防止などに用いられるセキュリティーシステムを安価に提供することが可能となる。   According to the present invention, the reflector having the reflecting surface inclined with respect to the image pickup means is provided opposite to the image pickup means, the reflection surface is disposed on the outer periphery of the central axis of the image pickup means, and the image pickup means reflects on the reflector By imaging such information, it is possible to image in a plurality of directions with one imaging means, and it is possible to provide a security system that is used for vehicle vandalism and theft prevention at low cost.

また、反射面を、撮像手段の中心軸方向視で少なくとも中心軸を境に対向するよう配設することにより、撮像手段が撮像する画像が中心を境に複数方向の画像となり、画像領域が同等となるため、デジタル処理を容易に行うことができるようになる。   In addition, by disposing the reflecting surface so as to face at least the central axis as viewed in the central axis direction of the imaging unit, the image captured by the imaging unit becomes an image in a plurality of directions with the center as the boundary, and the image area is equivalent. Therefore, digital processing can be easily performed.

更に、反射面を、反射体の中心軸に対して略同等の角度で傾斜させることにより、複数方向の画像のデジタル処理を同一条件下で容易に行うことができるようになる。   Furthermore, by tilting the reflecting surface at substantially the same angle with respect to the central axis of the reflector, digital processing of images in a plurality of directions can be easily performed under the same conditions.

更に、反射面を外周方向に連続して形成することにより、360度全周を撮像することができるようになる。   Further, by forming the reflecting surface continuously in the outer peripheral direction, it becomes possible to image the entire 360 degrees.

また、反射体を、少なくとも3つの反射面を有し、2つの反射面が対向して配置され、他の1つの反射面は前記2つの反射面の間に配置された形状とすることにより、少なくとも分割された3方向の画像を撮像することができるようになる。   Further, the reflector has at least three reflecting surfaces, the two reflecting surfaces are arranged to face each other, and the other reflecting surface is arranged between the two reflecting surfaces. At least three divided images can be taken.

また、撮像手段の撮像情報を記憶する記憶手段を有する構成とすることにより、この記憶情報により車両付近の情報、不審者の情報などを閲覧することができるようになる。   In addition, by adopting a configuration having a storage unit that stores the imaging information of the imaging unit, information stored in the vicinity of the vehicle, information on the suspicious person, and the like can be browsed using the stored information.

また、デジタル処理手段の処理結果に基づいて警告を発する警告手段を有する構成とすることにより、事前に車両荒らしや盗難などを防止することが可能となる。   In addition, by providing a warning unit that issues a warning based on the processing result of the digital processing unit, it is possible to prevent the vehicle from being damaged or stolen in advance.

また、前述の撮像手段及び反射体を車両内部に採用することにより、車両外部の複数方向の情報を撮像し、車両荒らしや盗難などを防止することができる。   Further, by adopting the above-described imaging means and reflector inside the vehicle, information in a plurality of directions outside the vehicle can be imaged to prevent the vehicle from being damaged or stolen.

また、撮像手段が、反射体を介して少なくともフロントガラス側、両サイドガラス側の車両外側の情報を撮像する構成とすることにより、適切に車両荒らしや盗難などを防止することができる。   In addition, when the imaging unit is configured to image information on at least the windshield side and both side glass sides of the vehicle via the reflector, it is possible to appropriately prevent the vehicle from being damaged or stolen.

また、車両使用者の人物画像を記憶することができる人物画像記憶手段を有し、デジタル処理手段が、撮像手段より得られた画像の中の人物画像を認識し、その人物画像と人物画像記憶手段に記憶された情報とを比較し、両者が一致しないとの比較結果に基づいて警告を行う警告手段を有する構成とすることにより、車両使用者と不審者との判断を行い、不審者の存在を確認した際に警告を行うため、適切に車両荒らしや盗難などを防止することができるようになる。   Further, the image processing apparatus has person image storage means capable of storing a person image of the vehicle user, and the digital processing means recognizes the person image in the image obtained from the image pickup means, and stores the person image and the person image storage. By comparing with the information stored in the means and having a warning means for warning based on the comparison result that the two do not match, the vehicle user and the suspicious person are judged, and the suspicious person's Since the warning is given when the existence is confirmed, it becomes possible to appropriately prevent the vehicle from being damaged or stolen.

なお、警告手段が、車両使用者などの記憶された情報端末装置に通信を行う通信手段であることにより、即時に車両荒らしや盗難などに対応することが可能となる。   Note that the warning means is a communication means for communicating with a stored information terminal device such as a vehicle user, so that it is possible to immediately deal with vehicle breaking or theft.

また、デジタル処理手段が、車両のガラスによる撮像画像の屈曲を考慮し、撮像画像を修正する修正ステップを有する構成とすることにより、記憶手段中の撮像情報の確認が容易になる、車両使用者と撮像手段中の人物との比較結果の精度が向上するなどセキュリティー性能を向上させることができる。   In addition, since the digital processing means includes a correction step for correcting the captured image in consideration of bending of the captured image due to the glass of the vehicle, the vehicle user can easily confirm the captured information in the storage means. The security performance can be improved, for example, by improving the accuracy of the comparison result between the user and the person in the imaging means.

また、撮像手段の撮像領域に投光する投光装置を設けた構成とすることにより、撮像精度を向上させ、記憶手段中の撮像情報の確認が容易になる、車両使用者と撮像手段中の人物との比較結果の精度が向上するなどセキュリティー性能を向上させることができる。   Further, by providing a light projecting device that projects light to the imaging area of the imaging means, the imaging accuracy is improved, and confirmation of imaging information in the storage means is facilitated. Security performance can be improved by improving the accuracy of comparison results with people.

本発明セキュリティーシステムを、車両用セキュリティーシステムを例に図1〜図4を用いて説明する。   The security system of the present invention will be described with reference to FIGS.

図1に示すように、セキュリティーシステムは、撮像手段である撮像装置11と、撮像装置11から得られた画像のデジタル処理を行うデジタル処理手段である処理装置21と、撮像装置11と対向して設けられた反射体13とを有し、撮像装置11が反射体13に反射した情報を撮像するようにした構成をしている。   As shown in FIG. 1, the security system is opposed to the imaging device 11 that is imaging means, a processing device 21 that is digital processing means that performs digital processing of an image obtained from the imaging device 11, and the imaging device 11. The image pickup apparatus 11 is configured to image information reflected by the reflector 13.

撮像装置11は先端にカメラレンズ12を有するCCDカメラが用いられ、撮影された画像は処理装置21へDMA転送され画像処理が施される。   The imaging device 11 uses a CCD camera having a camera lens 12 at the tip, and the captured image is DMA-transferred to the processing device 21 for image processing.

カメラレンズ12下方に位置する反射体13は、カメラレンズ12及び撮像装置11の中心軸11aに対して傾斜した反射面13aを有し、反射面13aに反射した情報がカメラレンズ12、撮像装置11を介して処理装置21に出力される。   The reflector 13 located below the camera lens 12 has a reflection surface 13a inclined with respect to the central axis 11a of the camera lens 12 and the imaging device 11, and information reflected on the reflection surface 13a is reflected by the camera lens 12 and the imaging device 11. Is output to the processing device 21 via

反射面13aは撮像装置11の中心軸11aの外周に配置されているため、1つの撮像装置11で複数方向の撮像が可能となっている。   Since the reflecting surface 13 a is disposed on the outer periphery of the central axis 11 a of the imaging device 11, the imaging device 11 can capture images in a plurality of directions.

図1に示す実施形態では、反射体13は円錐形状に設けられた反射面13aを有する形状をし、反射体13の中心軸と撮像装置11の中心軸11aとが一致する構成をしており、このような構成とすることによって、図1に示す撮像可能範囲15、すなわち反射体13の外周方向を撮像可能となっている。   In the embodiment shown in FIG. 1, the reflector 13 has a shape having a reflective surface 13 a provided in a conical shape, and the central axis of the reflector 13 and the central axis 11 a of the imaging device 11 coincide with each other. With such a configuration, it is possible to image the imageable range 15 shown in FIG. 1, that is, the outer peripheral direction of the reflector 13.

反射体13は反カメラレンズ12側に反射面13aと同様に円錐形状をした投光用反射面13bを有しており、その下方には、反射面13bに対して光を照射する投光装置14が設けられ、反射面13bによって反射された光が反射面13aを介して撮像される撮像範囲と同様の箇所に投光され、投光装置14を駆動させながら撮像することにより、より鮮明な撮像が可能となっている。なお、反射面13bは図1に示すように、反射面13bによって反射される光が撮像可能範囲15に対応するよう反射面13aの角度よりも鋭角な角度に形成されている。また、投光装置14は処理装置21と電気的に接続され、処理装置21により投光のオン、オフが制御されている。   The reflector 13 has, on the side opposite to the camera lens 12, a conical reflecting reflection surface 13 b similar to the reflecting surface 13 a, and a light projecting device that irradiates light to the reflecting surface 13 b below the reflecting surface 13 b. 14 is provided, and the light reflected by the reflecting surface 13b is projected to the same location as the imaging range that is imaged through the reflecting surface 13a. Imaging is possible. As shown in FIG. 1, the reflection surface 13 b is formed at an angle that is sharper than the angle of the reflection surface 13 a so that the light reflected by the reflection surface 13 b corresponds to the imageable range 15. In addition, the light projecting device 14 is electrically connected to the processing device 21, and on / off of the light projection is controlled by the processing device 21.

上述した撮像装置11、カメラレンズ12、反射体13、投光装置14、処理装置21は、車両内に設けられ、撮像装置11及び反射体13は車両の中央付近に設けられることが望ましい。このような構成とすることにより、反射体13を介して1つの撮像装置11で少なくともフロントガラス、両サイドガラス側の車両外側の情報を撮像し、画像処理装置21に画像情報を出力することができる。   The imaging device 11, the camera lens 12, the reflector 13, the light projector 14, and the processing device 21 described above are preferably provided in the vehicle, and the imaging device 11 and the reflector 13 are preferably provided near the center of the vehicle. With such a configuration, at least information on the outside of the vehicle on the windshield and both side glasses can be imaged by one imaging device 11 via the reflector 13, and image information can be output to the image processing device 21. .

画像処理装置21は、窓ガラスの形状、ピラーの形状、窓ガラスの厚み、ガラス透過率の違いなどに関わり無く、画像処理が可能なよう、各条件に応じて画像の編集を行うことが望ましい。単に、撮像画像を切り取り、キャリブレーション処理を行ない、画像処理するだけでなく、画像を各々の窓枠ごとに切り取る際に、ガラスの厚みによる歪み、撮像装置11が反射体13を通じて撮影することにより発生する歪みを軽減できるようキャリブレーションを行なうことが望ましい。また、ガラスの透過率違いによる光量の差を低減できるように光量補正値を設定することが望ましい。   It is desirable that the image processing device 21 edits the image according to each condition so that the image processing can be performed regardless of the difference in the shape of the window glass, the shape of the pillar, the thickness of the window glass, and the glass transmittance. . Not only is the captured image cut out, the calibration process is performed, and the image processing is performed, but also when the image is cut out for each window frame, distortion due to the thickness of the glass, and the imaging device 11 taking a picture through the reflector 13 It is desirable to perform calibration so that the generated distortion can be reduced. In addition, it is desirable to set the light amount correction value so that the difference in light amount due to the difference in transmittance of the glass can be reduced.

撮像装置11の撮像可能範囲は、窓枠ごとの画像を良好に取り込める位置に設置することが望ましく、車種ごとの窓枠の大きさ、車内広さに変化が生じる場合においても撮像可能範囲内に入ること、撮像装置11の被写界深度について、窓枠ごとの画像を良好に取り込める位置に設置する必要があり、車種ごとの窓枠の大きさ、車内広さに変化が生じる場合においても撮像可能範囲内に入ることを要することから、乗車室内天板に設置し、車両天板に対し撮像装置11を下向きに配置し、反射体13を、撮像装置11に対向するよう配置することが望ましい。   The image pickup range of the image pickup device 11 is preferably installed at a position where images for each window frame can be satisfactorily captured. The depth of field of the image pickup device 11 needs to be installed at a position where images for each window frame can be satisfactorily captured, and even when the size of the window frame and the size of the interior of the vehicle change. Since it is necessary to enter the possible range, it is desirable to install it on the top board in the passenger compartment, arrange the imaging device 11 downward with respect to the vehicle top board, and arrange the reflector 13 so as to face the imaging device 11. .

また、撮像装置11によって撮像される画像情報を基にフロントガラス、両サイドガラス及びリアガラス近傍を通過する者と、覗き込む顔との判別、及び使用者(登録者)を図3のフローチャートに示すように判断することが望ましい。また、本発明では、撮像装置11については、人間の顔成分を特徴良く取り込めるようにさせるという観点より、RGB成分を取り出せるカラーCCDカメラを用いた。但し、人間の顔を認知できる手段であればこのカメラに限ることではない。   Further, the flowchart of FIG. 3 shows the discrimination between the person who passes through the windshield, both side glasses, and the vicinity of the rear glass based on the image information captured by the imaging device 11 and the face to be looked into, and the user (registrant). It is desirable to judge. In the present invention, a color CCD camera capable of extracting RGB components is used as the imaging device 11 from the viewpoint of capturing human face components with good characteristics. However, the camera is not limited to this camera as long as it can recognize a human face.

投光装置14の投光光量については、撮像装置11の取り込む画像が、昼夜、天候を問わず周囲の光量と投光装置14からの光量によりハレーションを起こさず、同時に光量不足にならないよう、取り込める光量になるために、本発明においては、撮像装置11が撮影する画像全方向において一定の光量が得られるようにするという観点より、投光装置14に投光用反射体13bを対向して配置することにより、光量不足の際、不足分の光量を投光装置より補えるようにしている。   As for the amount of light projected by the light projecting device 14, the image captured by the image pickup device 11 can be captured so that the ambient light amount and the light amount from the light projecting device 14 do not cause halation, and at the same time, the light amount from the light projecting device 14 is not affected by day and night. In order to obtain the light amount, in the present invention, the light projecting reflector 13b is disposed facing the light projecting device 14 from the viewpoint of obtaining a constant light amount in all directions of the image captured by the imaging device 11. By doing so, when the light quantity is insufficient, the light quantity for the shortage can be compensated by the projector.

また、投光装置14は光量不足の状態においては、光源波長が周囲の照度に影響を受けず、且つ少ない光量においても撮影を可能にさせるという観点より、光源周波数が700nm以上の周波数領域であることが望ましい。   In addition, the light projecting device 14 is in a frequency region where the light source frequency is 700 nm or more from the viewpoint that the light source wavelength is not affected by the surrounding illuminance and enables photographing even with a small amount of light when the light amount is insufficient. It is desirable.

本実施形態において、処理装置21は、撮像装置11により撮影された画像を平滑化、照度調整、歪み補正、枠ごとの画像切り出し等の画像加工を施す。その際に画像における周囲の光量を数値化し予め設定している光量値に対応した電圧値を投光装置へ出力する。投光装置14はその電圧を受け光量出力を変化させ出力する事により、撮像装置11の画像光量を安定化させるようにしている。   In the present embodiment, the processing device 21 performs image processing such as smoothing, illuminance adjustment, distortion correction, and image cutting for each frame on the image captured by the imaging device 11. At that time, the amount of ambient light in the image is digitized and a voltage value corresponding to a preset light amount value is output to the projector. The light projecting device 14 receives the voltage and changes and outputs the light amount output, thereby stabilizing the image light amount of the imaging device 11.

取り込んだ画像は、人物像を切り出す必要があるため、切り取った画像を予め登録している顔情報の大きさに合わせるための拡大縮小加工を行なう。その後、画像の光量値を一定にさせるように光量変換を行ない画像の光量を一定化させている。その後、取り込み画像における反射体によって発生する歪み補正を行ない、画像の歪みを補正する。   Since it is necessary to cut out a human image from the captured image, enlargement / reduction processing is performed in order to match the size of the cut-out image with face information registered in advance. Thereafter, the light quantity conversion is performed so as to make the light quantity value of the image constant, thereby making the light quantity of the image constant. Thereafter, distortion generated by the reflector in the captured image is corrected to correct the distortion of the image.

歪み補正後の画像において、RGB要素を取り出し人間の肌色要素である成分比率を用い、顔及び頭皮部分を画像内部より切り出す。その際、画像内において、黒色成分が多いときなどは、人間の髪成分もしくは人間以外の他の部位であると判断し、車内を覗かれている可能性は低いと判断し、画像の切り出し及び顔のパターンマッチング処理は行なわないようにしている。   In the image after distortion correction, the RGB elements are extracted, and the face ratio and scalp part are cut out from the inside of the image using the component ratio which is a human skin color element. At that time, when there are many black components in the image, it is determined that it is a human hair component or other part other than human, and it is determined that there is a low possibility of being looked into the car, The face pattern matching process is not performed.

顔及び頭皮部分を画像内部より切り出した際には、車両使用許可者とそれ以外との人物認証を行なうためにはパターンマッチング処理を用い、予め登録している顔情報を元に一致率を算出しその数値を元に判定をさせている。   When the face and scalp part is cut out from the inside of the image, pattern matching processing is used to perform person authentication between the vehicle authorized person and others, and the matching rate is calculated based on pre-registered face information However, the judgment is made based on the numerical value.

登録してある全ての人物に関して顔の輪郭及び目、鼻、口の位置情報、色情報における一致率の計算を行ない、前記一致率の最大値を元に車両利用許可者であるか判断を行う。一致率を向上させたい場合には、予め登録する画像において1人の人物を複数の角度より撮影した画像を登録しておいた場合の方が人物認証の的中率は向上する。   For all registered persons, the matching rate is calculated for the face contour, eye, nose, mouth position information and color information, and based on the maximum value of the matching rate, it is determined whether the person is a vehicle use authorized person. . When it is desired to improve the matching rate, the hit rate of person authentication is improved when an image obtained by photographing one person from a plurality of angles is registered in an image registered in advance.

利用許可者で無いと判断した場合には、不審者として判断し、画像保存装置22に画像の保存、日時情報の保存を行なう。同時に図4に示すように通信装置24を用い、情報端末装置25に情報を送信し、情報端末装置25に付随の表示装置26に、前記不審者の発見あるいは異常状態を表示させるようにしている。なお、この際に、情報端末装置25に送信する画像情報は、撮像装置11が撮像する全ての画像情報ではなく、不審者と判断した顔付近の画像あるいは異常状態を判断した付近の画像となっており、表示装置26に表示される画像情報を基に不審者の判断、もしくは異常状態の判断が容易に行うことができるようにすることが望ましい。   If it is determined that the user is not authorized to use, it is determined that the user is a suspicious person, and the image is stored in the image storage device 22 and the date / time information is stored. At the same time, as shown in FIG. 4, the communication device 24 is used to transmit information to the information terminal device 25, and the information terminal device 25 is made to display the discovery or abnormal state of the suspicious person on the accompanying display device 26. . At this time, the image information transmitted to the information terminal device 25 is not all image information captured by the imaging device 11, but is an image near the face determined to be a suspicious person or an image near the surface determined to be abnormal. It is desirable that the suspicious person or the abnormal state can be easily determined based on the image information displayed on the display device 26.

また、画像保存装置22に保存した画像は、後に処理装置21を操作する事により何時でも閲覧が可能なようにしている。   The image stored in the image storage device 22 can be viewed at any time by operating the processing device 21 later.

また、処理装置21における、画像処理負荷の軽減及び、消費電力を抑えるという観点より、撮像した画像を常時パターンマッチング等の処理するのではなく、取り込んだ画像において、12箇所を切り出し、その画像において差分値を計算させている。近くに人物などが現れた際には、差分値計算のループより抜け出し、パターンマッチング処理を開始するようにさせる事により、処理装置の負荷を分散させている。   Further, from the viewpoint of reducing the image processing load in the processing device 21 and suppressing power consumption, the captured image is not always subjected to processing such as pattern matching, but 12 points are extracted from the captured image and The difference value is calculated. When a person or the like appears in the vicinity, the load on the processing device is distributed by getting out of the difference value calculation loop and starting the pattern matching process.

上記したように、撮像手段に対して傾斜した反射面13aを持つ反射体13を撮像装置11と対向して設けると共に、反射面13aを撮像装置11の中心軸の外周に配置し、撮像装置11が反射体13に反射した情報を撮像するようにしたことにより、1つの撮像装置11で複数方向の撮像を可能とし、車両荒らしや盗難防止などを精度良く検出する安価なセキュリティーシステムを提供することが可能となる。   As described above, the reflector 13 having the reflecting surface 13a inclined with respect to the imaging unit is provided to face the imaging device 11, and the reflecting surface 13a is disposed on the outer periphery of the central axis of the imaging device 11, so that the imaging device 11 is provided. By imaging the information reflected by the reflector 13, it is possible to capture images in a plurality of directions with a single imaging device 11, and to provide an inexpensive security system that can accurately detect vehicle vandalism and theft prevention. Is possible.

なお、上記した処理装置21は取り込んだ画像を過不足無く処理するために、高速に処理が可能な装置を用いることが望ましく、また、不審者と判断した際には、車両所有者に異常情報を伝え、もしくは車両所有者よりの車両情報の問い合わせに対応できる機能を有する処理装置21が通信手段である通信装置24を有すること、更には、不審者の画像を保存し何時でも閲覧できるようにするために、画像保存装置22を有することが望ましく、このような構成とすることにより、更にセキュリティー性を向上させることができる。   The above-described processing device 21 preferably uses a device capable of high-speed processing in order to process the captured image without excess or deficiency, and if it is determined to be a suspicious person, the vehicle owner is notified of abnormality information. Or the processing device 21 having a function capable of responding to vehicle information inquiries from the vehicle owner has the communication device 24 as a communication means, and further, the image of the suspicious person can be stored and viewed at any time. Therefore, it is desirable to have the image storage device 22, and such a configuration can further improve security.

本発明においては、処理装置21はカラーCCDカメラ11より画像取り込みが可能な画像処理ボード、画像処理言語が搭載でき、画像処理を行なえるコンピューターを用いた。但し、画像処理が出来るものであればよく、これに限定されるものではない。   In the present invention, the processing device 21 uses an image processing board capable of capturing an image from the color CCD camera 11 and a computer that can be equipped with an image processing language and can perform image processing. However, any image processing can be used, and the present invention is not limited to this.

通信手段24は本発明警告手段を構成し、処理装置21の処理結果に基づいて警告を発することにより、事前に車両荒らしや盗難などを防止することが可能となるようにしている。処理装置21が異常状態を検出した際には、予め接続させている通信手段24により車両所有者へ車両の異常状況を知らせることにより、更にセキュリティー性を向上させることが可能となる。   The communication means 24 constitutes a warning means of the present invention, and issues a warning based on the processing result of the processing device 21, thereby making it possible to prevent the vehicle from being damaged or stolen in advance. When the processing device 21 detects an abnormal state, it is possible to further improve the security by notifying the vehicle owner of the abnormal state of the vehicle by the communication means 24 connected in advance.

異常状態の1つの判断として、処理装置21は、車両使用者の人物画像を記憶することができる人物画像記憶手段を有し、処理装置21が、人物画像記憶手段に記憶された情報と、撮像手段より得られた画像の情報とを比較し、比較結果に基づいて警告を行う。これにより、車両使用者と不審者との判断を行い、不審者の存在を確認した際に警告を行うため、適切に車両荒らしや盗難などを防止することができるようになる。なお、警告手段は通信手段24でなくともライト、ブザーなどの警報を発するものであっても良い。   As one determination of the abnormal state, the processing device 21 has person image storage means capable of storing a person image of the vehicle user, and the processing device 21 captures information stored in the person image storage means and imaging. The information of the image obtained from the means is compared, and a warning is given based on the comparison result. As a result, the vehicle user and the suspicious person are judged, and a warning is given when the presence of the suspicious person is confirmed, so that it is possible to appropriately prevent the vehicle from being damaged or stolen. Note that the warning means may not be the communication means 24 but may emit a warning such as a light or a buzzer.

また、処理装置21と情報端末装置25との間による無線LANを用いた通信により、異常情報、車両情報の通信を行うようにしても良い。しかしながら、車両所有者への車両情報の通信が出来ればよいので、携帯電話などの小型化された情報端末を用いた手段などを用いてもよく、これに限定するものではない。   Moreover, you may make it perform communication of abnormality information and vehicle information by communication using the wireless LAN between the processing apparatus 21 and the information terminal device 25. FIG. However, as long as vehicle information can be communicated to the vehicle owner, means using a miniaturized information terminal such as a mobile phone may be used, and the present invention is not limited to this.

また、車両所有者が所有する情報端末装置25とセキュリティーシステムとを図4に示すように双方向通信可能な構成とし、セキュリティーシステムが異常状態を判断していない時であっても、情報端末装置25からの指令によりセキュリティーシステムが車両周囲の画像を情報端末装置25に送信する構成とすることにより、車両所有者が必要性を感じた際に車両近傍の情報を情報端末装置25を介して確認することができるため、車両所有者が安心感を得ることができるようになる。   Further, the information terminal device 25 owned by the vehicle owner and the security system are configured to be capable of bidirectional communication as shown in FIG. 4, and the information terminal device can be used even when the security system has not judged an abnormal state. By configuring the security system to transmit an image around the vehicle to the information terminal device 25 according to a command from 25, when the vehicle owner feels necessity, the information in the vicinity of the vehicle is confirmed via the information terminal device 25. This makes it possible for the vehicle owner to feel secure.

更に、セキュリティーシステムに情報端末装置25からの指令によって駆動可能な警告手段(ブザーや、光など)を備えさせることが望ましい。これによって、情報端末装置25を介して車両近傍に異常な状態を感じた際に、車両近傍に存在する不審者などに警告を発することができ、よりセキュリティーを向上することができるようになる。   Further, it is desirable to provide the security system with warning means (buzzer, light, etc.) that can be driven by a command from the information terminal device 25. As a result, when an abnormal state is felt in the vicinity of the vehicle via the information terminal device 25, a warning can be issued to a suspicious person or the like existing in the vicinity of the vehicle, and security can be further improved.

また、上述した処理装置21、撮像装置11、投光装置14は単独の電源によって駆動するものであっても良いが、車両の電源からインバータ回路を介して駆動するものであってよい。但し、これらのシステムが常に駆動した状態にあると電源の消費が著しいので、システムは車両停止時に動作するようにすることが望ましい。   Further, the processing device 21, the imaging device 11, and the light projecting device 14 described above may be driven by a single power source, but may be driven from the power source of the vehicle via an inverter circuit. However, if these systems are always driven, power consumption is significant, so it is desirable that the systems operate when the vehicle is stopped.

また、少ない電力で起動するために、アプリケーションを含むシステム全体をコンパクトフラッシュ(登録商標)メモリ等を用い、ROM化することが望ましい。ROM化することによりディスクレス化が可能となり、ディスクレス化による省電力効果及び、振動に対する耐久性向上が望まれる。   In addition, in order to start up with less power, it is desirable to make the entire system including the application into a ROM using a compact flash (registered trademark) memory or the like. By making it ROM, it becomes possible to make the disk less, and it is desired that the power saving effect and the durability against vibration are improved by making the disk less.

システムの起動方法については、車両許可者が車両から十分に離れ、車両許可者によってシステムが異常状態にあると誤検出することがないよう、例えば車両のアクセサリー電源が切れたときより所定時間経過後(例えば60sec後)に起動するように設定するのが望ましい。また、起動させる設定時間については任意に設定が可能なようにしても良い。また、車両許可者が携帯する情報端末装置25よりシステムを起動させる方法を用いてもよい。   As for the method of starting the system, for example, after a predetermined time has elapsed since the vehicle's accessory power is turned off, so that the vehicle permitter is not far from the vehicle and the vehicle permitter does not erroneously detect that the system is in an abnormal state. It is desirable to set to start up (for example, after 60 seconds). The set time for activation may be arbitrarily set. Moreover, you may use the method of starting a system from the information terminal device 25 which a vehicle permission person carries.

また、システムの作動方法について、画像のスキャン頻度を周囲の状況によって変わるように設定し、取り込んだ画像と、前回取り込んだ画像との差分を比較し一定値以上差が無い場合には変化なし、つまりは異常なしとして判断するようにしても良い。   In addition, about the operation method of the system, set the image scanning frequency to change according to the surrounding situation, compare the difference between the captured image and the previously captured image, if there is no difference more than a certain value, no change, In other words, it may be determined that there is no abnormality.

また、画像のスキャン間隔を第1の間隔(例えば3sec)、第2の間隔(例えば1.5sec)など複数種の間隔を用意し、一定値以上差がないと判断した場合には所定期間だけ第2の間隔とし、更に所定期間画像に変化がないと判断した場合には、第1の間隔に戻すよう制御することにより、電力消費を抑えながら精度の良いセキュリティー性を保つことができる。また、スキャン間隔の時間を設定可能としても良い。   In addition, a plurality of types of intervals such as a first interval (for example, 3 sec) and a second interval (for example, 1.5 sec) are prepared as image scan intervals, and when it is determined that there is no difference between a predetermined value and a predetermined period, When it is determined that there is no change in the image for a predetermined period after the second interval, it is possible to maintain accurate security while suppressing power consumption by controlling to return to the first interval. Further, the scan interval time may be settable.

また、圧力センサ及び振動センサ等を用いて車両に加わる外力を基にシステムが起動する構成とする、あるいは外力を基にスキャン間隔を小さくするような構成としても良い。   Further, the system may be configured to start based on an external force applied to the vehicle using a pressure sensor, a vibration sensor, or the like, or may be configured to reduce the scan interval based on the external force.

更に、撮像手段から画像の変化で異常を判断しなかった場合であっても、車両に加わる外力が所定値を越え、もしくは所定時間を越えた場合には、車両所有者の情報端末に異常状態を送信する機能を併せ持たすことが望ましい。   Furthermore, even if an abnormality is not judged by the image change from the imaging means, if the external force applied to the vehicle exceeds a predetermined value or exceeds a predetermined time, an abnormal state is detected in the information terminal of the vehicle owner. It is desirable to have a function of transmitting

次に、本発明車両用セキュリティーシステムの他の実施形態を図5に示す。   Next, another embodiment of the vehicle security system of the present invention is shown in FIG.

図5は車両用セキュリティーシステムを車両50に取り付けた状態を示すイメージ図であり、撮像装置11、カメラレンズ12、反射体13がユニット化された例で、撮像装置11に取り付けられた撮像装置用透明ケース17aによって反射体13が取り付けられる構成をしている。   FIG. 5 is an image diagram showing a state in which the vehicle security system is attached to the vehicle 50, in which the imaging device 11, the camera lens 12, and the reflector 13 are unitized, and the imaging device transparent attached to the imaging device 11. The reflector 13 is attached by a case 17a.

このような構成とすることにより、反射体13と撮像装置11との位置関係に撮像上問題となるようなずれが発生することなく、容易にセキュリティーシステムの取り付けを行うことができる。なお、ケース17aを透明とすることにより、ケース17aの存在が撮像に影響をきたすことを抑制している。   With such a configuration, the security system can be easily attached without causing a positional shift between the reflector 13 and the imaging device 11 that causes a problem in imaging. In addition, by making the case 17a transparent, the presence of the case 17a is suppressed from affecting the imaging.

また、本実施形態では、反射体13には投光装置14の投光を反射させる反射体13bが一体に設けられ、且つケース17aと一体に形成されたケース17bによって投光装置14が保持される構成をしている。このような構成とすることによって、投光装置14によって撮像精度を向上させながら、容易にセキュリティーシステムの取り付けを行うことができるようになる。   Further, in the present embodiment, the reflector 13 is integrally provided with a reflector 13b that reflects the light projected from the light projecting device 14, and the light projecting device 14 is held by a case 17b that is formed integrally with the case 17a. The configuration is By adopting such a configuration, it is possible to easily attach the security system while improving the imaging accuracy by the light projecting device 14.

なお、52は車両のサイドガラスを示すが、セキュリティーシステムを構成する撮像装置11、反射体13は図に示すように、車両の天板53の中央位置に設置されるのが望ましい。   In addition, although 52 shows the side glass of a vehicle, as for the imaging device 11 and the reflector 13 which comprise a security system, it is desirable to install in the center position of the top plate 53 of a vehicle as shown in the figure.

次に、本発明セキュリティーシステムを構成する反射体13の他の実施形態を図6〜図15に示す。   Next, other embodiment of the reflector 13 which comprises the security system of this invention is shown in FIGS.

図6及び図7は反射面13aが外周方向に連続した円錐台形状をしており、図6と図7とでは反射面13aの曲面が異なっている。図6に示すように反射面13aが凸曲面をした構成は、図7に示すように反射面13aが凹曲面をした構成よりも、図2に示すような反射面13aを介して撮像装置11が撮像する範囲38が広い性質を持ち、図7に示す構成は図6に示す構成よりも、画像が細かい性質を持っており、目的、車両などに応じて選択されることが望ましい。   6 and 7 have a truncated cone shape in which the reflecting surface 13a is continuous in the outer peripheral direction, and the curved surface of the reflecting surface 13a is different between FIG. 6 and FIG. The configuration in which the reflective surface 13a has a convex curved surface as shown in FIG. 6 has a configuration in which the imaging device 11 is connected via the reflective surface 13a as shown in FIG. 2 rather than the configuration in which the reflective surface 13a has a concave curved surface as shown in FIG. 7 has a wide property, and the configuration shown in FIG. 7 has a finer image property than the configuration shown in FIG. 6, and is preferably selected according to the purpose, vehicle, and the like.

図8〜図12はいずれも4つの反射面13aを持つ形状をした実施形態であり、反射面13aの角度又は曲面が異なるものである。このような形状とすることにより、1つの反射面13aを介して撮像される画像がそれぞれ車両のフロントガラス側、サイドガラス側、リアガラス側の情報となり、処理装置21によって処理する画像処理が容易にすることができる。   8 to 12 show an embodiment having a shape having four reflecting surfaces 13a, and the angle or curved surface of the reflecting surface 13a is different. By adopting such a shape, images captured through one reflecting surface 13a become information on the windshield side, side glass side, and rear glass side of the vehicle, respectively, and image processing processed by the processing device 21 is facilitated. be able to.

また、車両の大きさに応じて図9、図10に示すように撮像範囲を大きくすることや、サイドガラスの角度を考慮して図10に示すように反射面13aを凹曲面に形成すること、設置位置あるいはサイドガラスの角度を考慮して、反射面13aの角度が異なる形状のものを選択することが望ましい。なお、図11及び図12は投光装置14の投光を反射させる反射面13bを一体に備えた反射体13を示す実施形態である。図12に示す構成は、反射面13aと反射面13bとの間に撮像装置11及び反射体13との軸方向に対して平行な面を有する台座部分を有するものである。   Further, depending on the size of the vehicle, the imaging range is enlarged as shown in FIGS. 9 and 10, and the reflecting surface 13a is formed in a concave curved surface as shown in FIG. 10 in consideration of the angle of the side glass. In consideration of the installation position or the angle of the side glass, it is desirable to select a shape having a different angle of the reflecting surface 13a. 11 and 12 show an embodiment of the reflector 13 that is integrally provided with a reflecting surface 13b that reflects the light projected from the light projecting device 14. FIG. The configuration shown in FIG. 12 has a pedestal portion having a plane parallel to the axial direction of the imaging device 11 and the reflector 13 between the reflecting surface 13a and the reflecting surface 13b.

なお、図8〜図12はいずれも4つの反射面13aを持つ形状をしたものであるが、3つの反射面13aを持つ形状であっても、6つやより多面な形状をしたものであっても良い。   8 to 12 each have a shape having four reflecting surfaces 13a, but even a shape having three reflecting surfaces 13a has six or more shapes. Also good.

また、図13〜図15は、反射面13aの角度を表すイメージ図であるが、図に示すように、サイドガラスの角度、設置位置あるいはサイドガラスの角度を考慮して、種々の反射面13aの形状が考えられる。   13 to 15 are image diagrams showing the angle of the reflecting surface 13a. As shown in the figure, the shapes of various reflecting surfaces 13a are considered in consideration of the angle of the side glass, the installation position, or the angle of the side glass. Conceivable.

本発明セキュリティーシステムの一実施形態を示すブロック図である。It is a block diagram which shows one Embodiment of this invention security system. 図1の撮像イメージ図である。It is an imaging image figure of FIG. 本発明セキュリティーシステムの画像認証フローチャートである。It is an image authentication flowchart of the security system of the present invention. 本発明セキュリティーシステムと情報端末装置との関係を表すイメージ図である。It is an image figure showing the relationship between this invention security system and an information terminal device. 本発明セキュリティーシステムの他の実施形態を示すイメージ図である。It is an image figure which shows other embodiment of the security system of this invention. 本発明セキュリティーシステムを構成する反射体の他の実施形態を示すイメージ図である。It is an image figure which shows other embodiment of the reflector which comprises this invention security system. 本発明セキュリティーシステムを構成する反射体の他の実施形態を示すイメージ図である。It is an image figure which shows other embodiment of the reflector which comprises this invention security system. 本発明セキュリティーシステムを構成する反射体の他の実施形態を示すイメージ図である。It is an image figure which shows other embodiment of the reflector which comprises this invention security system. 本発明セキュリティーシステムを構成する反射体の他の実施形態を示すイメージ図である。It is an image figure which shows other embodiment of the reflector which comprises this invention security system. 本発明セキュリティーシステムを構成する反射体の他の実施形態を示すイメージ図である。It is an image figure which shows other embodiment of the reflector which comprises this invention security system. 本発明セキュリティーシステムを構成する反射体の他の実施形態を示すイメージ図である。It is an image figure which shows other embodiment of the reflector which comprises this invention security system. 本発明セキュリティーシステムを構成する反射体の他の実施形態を示すイメージ図である。It is an image figure which shows other embodiment of the reflector which comprises this invention security system. 本発明セキュリティーシステムを構成する反射体の他の実施形態を示すイメージ図である。It is an image figure which shows other embodiment of the reflector which comprises this invention security system. 本発明セキュリティーシステムを構成する反射体の他の実施形態を示すイメージ図である。It is an image figure which shows other embodiment of the reflector which comprises this invention security system. 本発明セキュリティーシステムを構成する反射体の他の実施形態を示すイメージ図である。It is an image figure which shows other embodiment of the reflector which comprises this invention security system.

符号の説明Explanation of symbols

11 撮像装置
11a 中心軸
12 カメラレンズ
13 反射体
13a 反射面
13b 反射面
14 投光装置
15 撮像可能範囲
16 投光装置よりの光
17a 撮像装置用透明ケース
17b 投光装置用透明ケース
21 処理装置
22 画像保存装置
23 表示装置
24 通信装置
25 情報端末装置
26 表示装置
38 撮像手段の視野範囲
50 車両
51 車両のフロントガラス
52 車両のサイドガラス
53 車両の天板
DESCRIPTION OF SYMBOLS 11 Image pick-up device 11a Center axis 12 Camera lens 13 Reflector 13a Reflecting surface 13b Reflecting surface 14 Light projector 15 Imageable range 16 Light from light projector 17a Transparent case for image pick-up device 17b Transparent case for light projector 21 Processing device 22 Image storage device 23 Display device 24 Communication device 25 Information terminal device 26 Display device 38 Field of view of imaging means 50 Vehicle 51 Vehicle windshield 52 Vehicle side glass 53 Vehicle top plate

本発明は、撮像手段及び該撮像手段から得られた画像のデジタル処理を行うデジタル処理手段を有する車両荒らしや盗難防止などに用いられる車両用セキュリティーシステムに関するものである。 The present invention relates to an imaging means and a vehicle security system used for vehicle vandalism and theft prevention having a digital processing means for digitally processing an image obtained from the imaging means.

ユーザーの生態的特徴を用い、本人であることの認証手段を有するシステムが提案されている。   A system has been proposed that uses a user's ecological features and has a means of authenticating the identity.

このシステムは、例えば被認証者の顔全体や瞳の虹彩等をカメラで撮像し、認証手段で、画像処理を施し被認証者を識別するための情報を抽出し予め登録してある情報と比較する。そして、両者の類似度を、登録されたユーザーであることを認証する設定値により判定することで、被認証者が本来のユーザーであるかどうかを認証するシステムである。   In this system, for example, the whole face of the person to be authenticated, the iris of the pupil, etc. are imaged with a camera, and the authentication means performs image processing to extract information for identifying the person to be authenticated and compare it with previously registered information. To do. And it is a system which authenticates whether a to-be-authenticated person is an original user by determining similarity of both by the setting value which authenticates that it is a registered user.

そして、このシステムを車両の盗難を防止する車両盗難システムに用いる場合においては、上記した認証手段がユーザーでないと判断した場合は、車両を起動させないことにより車両盗難を防ぐというシステムが知られている(例えば、特許文献1、特許文献2参照。)。   When this system is used in a vehicle theft system that prevents the vehicle from being stolen, there is a known system that prevents the vehicle from being stolen by not starting the vehicle when it is determined that the authentication means is not a user. (For example, refer to Patent Document 1 and Patent Document 2.)

また、ユーザーの使用する時間帯において人物認識設定値を変化させ判別率を高める方法も知られている(例えば、特許文献3参照。)。
特開2000−168502号公報 特開2005−67353号公報 特開2006−306191号公報
Also known is a method of changing the person recognition setting value in the time zone used by the user to increase the discrimination rate (see, for example, Patent Document 3).
JP 2000-168502 A JP 2005-67353 A JP 2006-306191 A

上記したような従来のシステムは、カメラを用い人物が座席に着座した際に人物を認証し、不審者がいる場合において、車両を起動させない事により車両盗難を防ぐというシステムであるが、これらは車両に乗ってカメラ視野内に人物が写る場合において有効な手段であり、不審者がユーザーの車両付近にいて、車両内部を物色している場合や、車上荒らしなどの場合、レッカー車などで外部から持ち出しする場合、カメラそのものを破壊し車両を盗難する場合などにおいて、所有する車両での出来事は車両に戻った際あるいは車両の駐車場所に戻った際に気がつくものであり、車両周辺での状況判断および、即時対応性に課題があった。   The conventional system as described above is a system that authenticates a person when a person is seated in a seat using a camera and prevents vehicle theft by not starting the vehicle when there is a suspicious person. This is an effective method when a person appears in the camera's field of view when riding in a vehicle. If the suspicious person is near the user's vehicle and is looking inside the vehicle, or if the vehicle is being tampered with, it can be externally removed by a tow truck. In the case of taking out from a car, destroying the camera itself, or stealing the vehicle, events in the vehicle that you own will be noticed when returning to the vehicle or returning to the parking place of the vehicle. There were problems with judgment and immediate response.

本発明は、単一の撮像手段で複数方向の撮像を可能とし、不審者を車両荒らしや盗難防止などに用いられる車両用セキュリティーシステムを安価に提供することを目的とする。 SUMMARY OF THE INVENTION An object of the present invention is to provide a low-cost security system for a vehicle that enables imaging in a plurality of directions with a single imaging means, and is used to prevent a suspicious person from being damaged or stolen.

本発明の目的は、車両内部に設けられる撮像手段と、該撮像手段から得られた画像のデジタル処理を行うデジタル処理手段と、前記撮像手段の撮像情報を記憶する記憶手段と、警告を発する警告手段とを有し、該撮像手段に対して傾斜した少なくとも3つの反射面を持ち中心軸が前記撮像手段の中心軸と一致した反射体を前記撮像手段と対向して設けると共に、前記少なくとも3つの反射面を前記撮像手段の中心軸の外周にフロントガラス側、両サイドガラス側に夫々配置し、前記撮像手段が前記反射体に反射した情報を撮像するようにし、更に前記デジタル処理手段は、前記記憶手段に記憶された情報と前記撮像手段から得られた画像を基にしたデータとを比較し、比較結果に基づいて前記警告手段に警告を発せさせることにより達成される。 An object of the present invention is to provide an imaging unit provided in a vehicle, a digital processing unit that performs digital processing of an image obtained from the imaging unit, a storage unit that stores imaging information of the imaging unit, and a warning that issues a warning. A reflector having at least three reflecting surfaces inclined with respect to the image pickup means and having a central axis coincident with the center axis of the image pickup means is provided opposite to the image pickup means, and the at least three Reflecting surfaces are arranged on the outer periphery of the central axis of the imaging means on the windshield side and both side glass sides, respectively, so that the imaging means images the information reflected by the reflector, and the digital processing means further stores the memory the image obtained from the imaging means and the information stored in the means comparing the data based on, is achieved by giving alerted to the alarm means on the basis of the comparison result .

本発明によれば、単一の撮像手段でフロントガラス側、両サイドガラス側車両外側の情報の撮像を可能とし、車両荒らしや盗難防止などに用いられる車両用セキュリティーシステムを安価に提供することが可能となると共に、更にフロントガラス側、両サイドガラス側車両外側の情報を夫々の反射面を介して撮像するため、デジタル処理手段によって処理する画像処理を容易にすることができる。 According to the present invention, it is possible to capture information on the outside of the windshield side and both side glass sides of the vehicle with a single imaging means, and it is possible to provide a vehicular security system used for vehicle vandalism and theft prevention at low cost. In addition, since the information on the windshield side and both side glass side vehicles outside is imaged through the respective reflecting surfaces, the image processing processed by the digital processing means can be facilitated.

本発明セキュリティーシステムを、車両用セキュリティーシステムを例に図1〜図4を用いて説明する。   The security system of the present invention will be described with reference to FIGS.

図1に示すように、セキュリティーシステムは、撮像手段である撮像装置11と、撮像装置11から得られた画像のデジタル処理を行うデジタル処理手段である処理装置21と、撮像装置11と対向して設けられた反射体13とを有し、撮像装置11が反射体13に反射した情報を撮像するようにした構成をしている。   As shown in FIG. 1, the security system is opposed to the imaging device 11 that is imaging means, a processing device 21 that is digital processing means that performs digital processing of an image obtained from the imaging device 11, and the imaging device 11. The image pickup apparatus 11 is configured to image information reflected by the reflector 13.

撮像装置11は先端にカメラレンズ12を有するCCDカメラが用いられ、撮影された画像は処理装置21へDMA転送され画像処理が施される。   The imaging device 11 uses a CCD camera having a camera lens 12 at the tip, and the captured image is DMA-transferred to the processing device 21 for image processing.

カメラレンズ12下方に位置する反射体13は、カメラレンズ12及び撮像装置11の中心軸11aに対して傾斜した反射面13aを有し、反射面13aに反射した情報がカメラレンズ12、撮像装置11を介して処理装置21に出力される。   The reflector 13 located below the camera lens 12 has a reflection surface 13a inclined with respect to the central axis 11a of the camera lens 12 and the imaging device 11, and information reflected on the reflection surface 13a is reflected by the camera lens 12 and the imaging device 11. Is output to the processing device 21 via

反射面13aは撮像装置11の中心軸11aの外周に配置されているため、1つの撮像装置11で複数方向の撮像が可能となっている。   Since the reflecting surface 13 a is disposed on the outer periphery of the central axis 11 a of the imaging device 11, the imaging device 11 can capture images in a plurality of directions.

図1に示す実施形態では、反射体13は円錐形状に設けられた反射面13aを有する形状をし、反射体13の中心軸と撮像装置11の中心軸11aとが一致する構成をしており、このような構成とすることによって、図1に示す撮像可能範囲15、すなわち反射体13の外周方向を撮像可能となっている。   In the embodiment shown in FIG. 1, the reflector 13 has a shape having a reflective surface 13 a provided in a conical shape, and the central axis of the reflector 13 and the central axis 11 a of the imaging device 11 coincide with each other. With such a configuration, it is possible to image the imageable range 15 shown in FIG. 1, that is, the outer peripheral direction of the reflector 13.

反射体13は反カメラレンズ12側に反射面13aと同様に円錐形状をした投光用反射面13bを有しており、その下方には、反射面13bに対して光を照射する投光装置14が設けられ、反射面13bによって反射された光が反射面13aを介して撮像される撮像範囲と同様の箇所に投光され、投光装置14を駆動させながら撮像することにより、より鮮明な撮像が可能となっている。なお、反射面13bは図1に示すように、反射面13bによって反射される光が撮像可能範囲15に対応するよう反射面13aの角度よりも鋭角な角度に形成されている。また、投光装置14は処理装置21と電気的に接続され、処理装置21により投光のオン、オフが制御されている。   The reflector 13 has, on the side opposite to the camera lens 12, a conical reflecting reflection surface 13 b similar to the reflecting surface 13 a, and a light projecting device that irradiates light to the reflecting surface 13 b below the reflecting surface 13 b. 14 is provided, and the light reflected by the reflecting surface 13b is projected to the same location as the imaging range that is imaged through the reflecting surface 13a. Imaging is possible. As shown in FIG. 1, the reflection surface 13 b is formed at an angle that is sharper than the angle of the reflection surface 13 a so that the light reflected by the reflection surface 13 b corresponds to the imageable range 15. In addition, the light projecting device 14 is electrically connected to the processing device 21, and on / off of the light projection is controlled by the processing device 21.

上述した撮像装置11、カメラレンズ12、反射体13、投光装置14、処理装置21は、車両内に設けられ、撮像装置11及び反射体13は車両の中央付近に設けられることが望ましい。このような構成とすることにより、反射体13を介して1つの撮像装置11で少なくともフロントガラス、両サイドガラス側の車両外側の情報を撮像し、画像処理装置21に画像情報を出力することができる。   The imaging device 11, the camera lens 12, the reflector 13, the light projector 14, and the processing device 21 described above are preferably provided in the vehicle, and the imaging device 11 and the reflector 13 are preferably provided near the center of the vehicle. With such a configuration, at least information on the outside of the vehicle on the windshield and both side glasses can be imaged by one imaging device 11 via the reflector 13, and image information can be output to the image processing device 21. .

画像処理装置21は、窓ガラスの形状、ピラーの形状、窓ガラスの厚み、ガラス透過率の違いなどに関わり無く、画像処理が可能なよう、各条件に応じて画像の編集を行うことが望ましい。単に、撮像画像を切り取り、キャリブレーション処理を行ない、画像処理するだけでなく、画像を各々の窓枠ごとに切り取る際に、ガラスの厚みによる歪み、撮像装置11が反射体13を通じて撮影することにより発生する歪みを軽減できるようキャリブレーションを行なうことが望ましい。また、ガラスの透過率違いによる光量の差を低減できるように光量補正値を設定することが望ましい。   It is desirable that the image processing device 21 edits the image according to each condition so that the image processing can be performed regardless of the difference in the shape of the window glass, the shape of the pillar, the thickness of the window glass, and the glass transmittance. . Not only is the captured image cut out, the calibration process is performed, and the image processing is performed, but also when the image is cut out for each window frame, distortion due to the thickness of the glass, and the imaging device 11 taking a picture through the reflector 13 It is desirable to perform calibration so that the generated distortion can be reduced. In addition, it is desirable to set the light amount correction value so that the difference in light amount due to the difference in transmittance of the glass can be reduced.

撮像装置11の撮像可能範囲は、窓枠ごとの画像を良好に取り込める位置に設置することが望ましく、車種ごとの窓枠の大きさ、車内広さに変化が生じる場合においても撮像可能範囲内に入ること、撮像装置11の被写界深度について、窓枠ごとの画像を良好に取り込める位置に設置する必要があり、車種ごとの窓枠の大きさ、車内広さに変化が生じる場合においても撮像可能範囲内に入ることを要することから、乗車室内天板に設置し、車両天板に対し撮像装置11を下向きに配置し、反射体13を、撮像装置11に対向するよう配置することが望ましい。   The image pickup range of the image pickup device 11 is preferably installed at a position where images for each window frame can be satisfactorily captured. The depth of field of the image pickup device 11 needs to be installed at a position where images for each window frame can be satisfactorily captured, and even when the size of the window frame and the size of the interior of the vehicle change. Since it is necessary to enter the possible range, it is desirable to install it on the top board in the passenger compartment, arrange the imaging device 11 downward with respect to the vehicle top board, and arrange the reflector 13 so as to face the imaging device 11. .

また、撮像装置11によって撮像される画像情報を基にフロントガラス、両サイドガラス及びリアガラス近傍を通過する者と、覗き込む顔との判別、及び使用者(登録者)を図3のフローチャートに示すように判断することが望ましい。また、本発明では、撮像装置11については、人間の顔成分を特徴良く取り込めるようにさせるという観点より、RGB成分を取り出せるカラーCCDカメラを用いた。但し、人間の顔を認知できる手段であればこのカメラに限ることではない。   Further, the flowchart of FIG. 3 shows the discrimination between the person who passes through the windshield, both side glasses, and the vicinity of the rear glass based on the image information captured by the imaging device 11 and the face to be looked into, and the user (registrant). It is desirable to judge. In the present invention, a color CCD camera capable of extracting RGB components is used as the imaging device 11 from the viewpoint of capturing human face components with good characteristics. However, the camera is not limited to this camera as long as it can recognize a human face.

投光装置14の投光光量については、撮像装置11の取り込む画像が、昼夜、天候を問わず周囲の光量と投光装置14からの光量によりハレーションを起こさず、同時に光量不足にならないよう、取り込める光量になるために、本発明においては、撮像装置11が撮影する画像全方向において一定の光量が得られるようにするという観点より、投光装置14に投光用反射体13bを対向して配置することにより、光量不足の際、不足分の光量を投光装置より補えるようにしている。   As for the amount of light projected by the light projecting device 14, the image captured by the image pickup device 11 can be captured so that the ambient light amount and the light amount from the light projecting device 14 do not cause halation, and at the same time, the light amount from the light projecting device 14 is not affected by day and night. In order to obtain the light amount, in the present invention, the light projecting reflector 13b is disposed facing the light projecting device 14 from the viewpoint of obtaining a constant light amount in all directions of the image captured by the imaging device 11. By doing so, when the light quantity is insufficient, the light quantity for the shortage can be compensated by the projector.

また、投光装置14は光量不足の状態においては、光源波長が周囲の照度に影響を受けず、且つ少ない光量においても撮影を可能にさせるという観点より、光源周波数が700nm以上の周波数領域であることが望ましい。   In addition, the light projecting device 14 is in a frequency region where the light source frequency is 700 nm or more from the viewpoint that the light source wavelength is not affected by the surrounding illuminance and enables photographing even with a small amount of light when the light amount is insufficient. It is desirable.

本実施形態において、処理装置21は、撮像装置11により撮影された画像を平滑化、照度調整、歪み補正、枠ごとの画像切り出し等の画像加工を施す。その際に画像における周囲の光量を数値化し予め設定している光量値に対応した電圧値を投光装置へ出力する。投光装置14はその電圧を受け光量出力を変化させ出力する事により、撮像装置11の画像光量を安定化させるようにしている。   In the present embodiment, the processing device 21 performs image processing such as smoothing, illuminance adjustment, distortion correction, and image cutting for each frame on the image captured by the imaging device 11. At that time, the amount of ambient light in the image is digitized and a voltage value corresponding to a preset light amount value is output to the projector. The light projecting device 14 receives the voltage and changes and outputs the light amount output, thereby stabilizing the image light amount of the imaging device 11.

取り込んだ画像は、人物像を切り出す必要があるため、切り取った画像を予め登録している顔情報の大きさに合わせるための拡大縮小加工を行なう。その後、画像の光量値を一定にさせるように光量変換を行ない画像の光量を一定化させている。その後、取り込み画像における反射体によって発生する歪み補正を行ない、画像の歪みを補正する。   Since it is necessary to cut out a human image from the captured image, enlargement / reduction processing is performed in order to match the size of the cut-out image with face information registered in advance. Thereafter, the light quantity conversion is performed so as to make the light quantity value of the image constant, thereby making the light quantity of the image constant. Thereafter, distortion generated by the reflector in the captured image is corrected to correct the distortion of the image.

歪み補正後の画像において、RGB要素を取り出し人間の肌色要素である成分比率を用い、顔及び頭皮部分を画像内部より切り出す。その際、画像内において、黒色成分が多いときなどは、人間の髪成分もしくは人間以外の他の部位であると判断し、車内を覗かれている可能性は低いと判断し、画像の切り出し及び顔のパターンマッチング処理は行なわないようにしている。   In the image after distortion correction, the RGB elements are extracted, and the face ratio and scalp part are cut out from the inside of the image using the component ratio which is a human skin color element. At that time, when there are many black components in the image, it is determined that it is a human hair component or other part other than human, and it is determined that there is a low possibility of being looked into the car, The face pattern matching process is not performed.

顔及び頭皮部分を画像内部より切り出した際には、車両使用許可者とそれ以外との人物認証を行なうためにはパターンマッチング処理を用い、予め登録している顔情報を元に一致率を算出しその数値を元に判定をさせている。   When the face and scalp part is cut out from the inside of the image, pattern matching processing is used to perform person authentication between the vehicle authorized person and others, and the matching rate is calculated based on pre-registered face information However, the judgment is made based on the numerical value.

登録してある全ての人物に関して顔の輪郭及び目、鼻、口の位置情報、色情報における一致率の計算を行ない、前記一致率の最大値を元に車両利用許可者であるか判断を行う。一致率を向上させたい場合には、予め登録する画像において1人の人物を複数の角度より撮影した画像を登録しておいた場合の方が人物認証の的中率は向上する。   For all registered persons, the matching rate is calculated for the face contour, eye, nose, mouth position information and color information, and based on the maximum value of the matching rate, it is determined whether the person is a vehicle use authorized person. . When it is desired to improve the matching rate, the hit rate of person authentication is improved when an image obtained by photographing one person from a plurality of angles is registered in an image registered in advance.

利用許可者で無いと判断した場合には、不審者として判断し、画像保存装置22に画像の保存、日時情報の保存を行なう。同時に図4に示すように通信装置24を用い、情報端末装置25に情報を送信し、情報端末装置25に付随の表示装置26に、前記不審者の発見あるいは異常状態を表示させるようにしている。なお、この際に、情報端末装置25に送信する画像情報は、撮像装置11が撮像する全ての画像情報ではなく、不審者と判断した顔付近の画像あるいは異常状態を判断した付近の画像となっており、表示装置26に表示される画像情報を基に不審者の判断、もしくは異常状態の判断が容易に行うことができるようにすることが望ましい。   If it is determined that the user is not authorized to use, it is determined that the user is a suspicious person, and the image is stored in the image storage device 22 and the date / time information is stored. At the same time, as shown in FIG. 4, the communication device 24 is used to transmit information to the information terminal device 25, and the information terminal device 25 is made to display the discovery or abnormal state of the suspicious person on the accompanying display device 26. . At this time, the image information transmitted to the information terminal device 25 is not all image information captured by the imaging device 11, but is an image near the face determined to be a suspicious person or an image near the surface determined to be abnormal. It is desirable that the suspicious person or the abnormal state can be easily determined based on the image information displayed on the display device 26.

また、画像保存装置22に保存した画像は、後に処理装置21を操作する事により何時でも閲覧が可能なようにしている。   The image stored in the image storage device 22 can be viewed at any time by operating the processing device 21 later.

また、処理装置21における、画像処理負荷の軽減及び、消費電力を抑えるという観点より、撮像した画像を常時パターンマッチング等の処理するのではなく、取り込んだ画像において、12箇所を切り出し、その画像において差分値を計算させている。近くに人物などが現れた際には、差分値計算のループより抜け出し、パターンマッチング処理を開始するようにさせる事により、処理装置の負荷を分散させている。   Further, from the viewpoint of reducing the image processing load in the processing device 21 and suppressing power consumption, the captured image is not always subjected to processing such as pattern matching, but 12 points are extracted from the captured image and The difference value is calculated. When a person or the like appears in the vicinity, the load on the processing device is distributed by getting out of the difference value calculation loop and starting the pattern matching process.

上記したように、撮像手段に対して傾斜した反射面13aを持つ反射体13を撮像装置11と対向して設けると共に、反射面13aを撮像装置11の中心軸の外周に配置し、撮像装置11が反射体13に反射した情報を撮像するようにしたことにより、1つの撮像装置11で複数方向の撮像を可能とし、車両荒らしや盗難防止などを精度良く検出する安価なセキュリティーシステムを提供することが可能となる。   As described above, the reflector 13 having the reflecting surface 13a inclined with respect to the imaging unit is provided to face the imaging device 11, and the reflecting surface 13a is disposed on the outer periphery of the central axis of the imaging device 11, so that the imaging device 11 is provided. By imaging the information reflected by the reflector 13, it is possible to capture images in a plurality of directions with a single imaging device 11, and to provide an inexpensive security system that can accurately detect vehicle vandalism and theft prevention. Is possible.

なお、上記した処理装置21は取り込んだ画像を過不足無く処理するために、高速に処理が可能な装置を用いることが望ましく、また、不審者と判断した際には、車両所有者に異常情報を伝え、もしくは車両所有者よりの車両情報の問い合わせに対応できる機能を有する処理装置21が通信手段である通信装置24を有すること、更には、不審者の画像を保存し何時でも閲覧できるようにするために、画像保存装置22を有することが望ましく、このような構成とすることにより、更にセキュリティー性を向上させることができる。   The above-described processing device 21 preferably uses a device capable of high-speed processing in order to process the captured image without excess or deficiency, and if it is determined to be a suspicious person, the vehicle owner is notified of abnormality information. Or the processing device 21 having a function capable of responding to vehicle information inquiries from the vehicle owner has the communication device 24 as a communication means, and further, the image of the suspicious person can be stored and viewed at any time. Therefore, it is desirable to have the image storage device 22, and such a configuration can further improve security.

本発明においては、処理装置21はカラーCCDカメラ11より画像取り込みが可能な画像処理ボード、画像処理言語が搭載でき、画像処理を行なえるコンピューターを用いた。但し、画像処理が出来るものであればよく、これに限定されるものではない。   In the present invention, the processing device 21 uses an image processing board capable of capturing an image from the color CCD camera 11 and a computer that can be equipped with an image processing language and can perform image processing. However, any image processing can be used, and the present invention is not limited to this.

通信手段24は本発明警告手段を構成し、処理装置21の処理結果に基づいて警告を発することにより、事前に車両荒らしや盗難などを防止することが可能となるようにしている。処理装置21が異常状態を検出した際には、予め接続させている通信手段24により車両所有者へ車両の異常状況を知らせることにより、更にセキュリティー性を向上させることが可能となる。   The communication means 24 constitutes a warning means of the present invention, and issues a warning based on the processing result of the processing device 21, thereby making it possible to prevent the vehicle from being damaged or stolen in advance. When the processing device 21 detects an abnormal state, it is possible to further improve the security by notifying the vehicle owner of the abnormal state of the vehicle by the communication means 24 connected in advance.

異常状態の1つの判断として、処理装置21は、車両使用者の人物画像を記憶することができる人物画像記憶手段を有し、処理装置21が、人物画像記憶手段に記憶された情報と、撮像手段より得られた画像の情報とを比較し、比較結果に基づいて警告を行う。これにより、車両使用者と不審者との判断を行い、不審者の存在を確認した際に警告を行うため、適切に車両荒らしや盗難などを防止することができるようになる。なお、警告手段は通信手段24でなくともライト、ブザーなどの警報を発するものであっても良い。   As one determination of the abnormal state, the processing device 21 has person image storage means capable of storing a person image of the vehicle user, and the processing device 21 captures information stored in the person image storage means and imaging. The information of the image obtained from the means is compared, and a warning is given based on the comparison result. As a result, the vehicle user and the suspicious person are judged, and a warning is given when the presence of the suspicious person is confirmed, so that it is possible to appropriately prevent the vehicle from being damaged or stolen. Note that the warning means may not be the communication means 24 but may emit a warning such as a light or a buzzer.

また、処理装置21と情報端末装置25との間による無線LANを用いた通信により、異常情報、車両情報の通信を行うようにしても良い。しかしながら、車両所有者への車両情報の通信が出来ればよいので、携帯電話などの小型化された情報端末を用いた手段などを用いてもよく、これに限定するものではない。   Moreover, you may make it perform communication of abnormality information and vehicle information by communication using the wireless LAN between the processing apparatus 21 and the information terminal device 25. FIG. However, as long as vehicle information can be communicated to the vehicle owner, means using a miniaturized information terminal such as a cellular phone may be used, and the present invention is not limited to this.

また、車両所有者が所有する情報端末装置25とセキュリティーシステムとを図4に示すように双方向通信可能な構成とし、セキュリティーシステムが異常状態を判断していない時であっても、情報端末装置25からの指令によりセキュリティーシステムが車両周囲の画像を情報端末装置25に送信する構成とすることにより、車両所有者が必要性を感じた際に車両近傍の情報を情報端末装置25を介して確認することができるため、車両所有者が安心感を得ることができるようになる。   Further, the information terminal device 25 owned by the vehicle owner and the security system are configured to be capable of bidirectional communication as shown in FIG. 4, and the information terminal device can be used even when the security system has not judged an abnormal state. By configuring the security system to transmit an image around the vehicle to the information terminal device 25 according to a command from 25, when the vehicle owner feels necessity, the information in the vicinity of the vehicle is confirmed via the information terminal device 25. This makes it possible for the vehicle owner to feel secure.

更に、セキュリティーシステムに情報端末装置25からの指令によって駆動可能な警告手段(ブザーや、光など)を備えさせることが望ましい。これによって、情報端末装置25を介して車両近傍に異常な状態を感じた際に、車両近傍に存在する不審者などに警告を発することができ、よりセキュリティーを向上することができるようになる。   Further, it is desirable to provide the security system with warning means (buzzer, light, etc.) that can be driven by a command from the information terminal device 25. As a result, when an abnormal state is felt in the vicinity of the vehicle via the information terminal device 25, a warning can be issued to a suspicious person or the like existing in the vicinity of the vehicle, and security can be further improved.

また、上述した処理装置21、撮像装置11、投光装置14は単独の電源によって駆動するものであっても良いが、車両の電源からインバータ回路を介して駆動するものであってよい。但し、これらのシステムが常に駆動した状態にあると電源の消費が著しいので、システムは車両停止時に動作するようにすることが望ましい。   Further, the processing device 21, the imaging device 11, and the light projecting device 14 described above may be driven by a single power source, but may be driven from the power source of the vehicle via an inverter circuit. However, if these systems are always driven, power consumption is significant, so it is desirable that the systems operate when the vehicle is stopped.

また、少ない電力で起動するために、アプリケーションを含むシステム全体をコンパクトフラッシュ(登録商標)メモリ等を用い、ROM化することが望ましい。ROM化することによりディスクレス化が可能となり、ディスクレス化による省電力効果及び、振動に対する耐久性向上が望まれる。   In addition, in order to start up with less power, it is desirable to make the entire system including the application into a ROM using a compact flash (registered trademark) memory or the like. By making it ROM, it becomes possible to make the disk less, and it is desired that the power saving effect and the durability against vibration are improved by making the disk less.

システムの起動方法については、車両許可者が車両から十分に離れ、車両許可者によってシステムが異常状態にあると誤検出することがないよう、例えば車両のアクセサリー電源が切れたときより所定時間経過後(例えば60sec後)に起動するように設定するのが望ましい。また、起動させる設定時間については任意に設定が可能なようにしても良い。また、車両許可者が携帯する情報端末装置25よりシステムを起動させる方法を用いてもよい。   As for the method of starting the system, for example, after a predetermined time has elapsed since the vehicle's accessory power is turned off, so that the vehicle permitter is not far from the vehicle and the vehicle permitter does not erroneously detect that the system is in an abnormal state. It is desirable to set to start up (for example, after 60 seconds). The set time for activation may be arbitrarily set. Moreover, you may use the method of starting a system from the information terminal device 25 which a vehicle permission person carries.

また、システムの作動方法について、画像のスキャン頻度を周囲の状況によって変わるように設定し、取り込んだ画像と、前回取り込んだ画像との差分を比較し一定値以上差が無い場合には変化なし、つまりは異常なしとして判断するようにしても良い。   Also, regarding the system operation method, set the image scan frequency to change according to the surrounding situation, compare the difference between the captured image and the previously captured image, if there is no difference more than a certain value, no change, In other words, it may be determined that there is no abnormality.

また、画像のスキャン間隔を第1の間隔(例えば3sec)、第2の間隔(例えば1.5sec)など複数種の間隔を用意し、一定値以上差がないと判断した場合には所定期間だけ第2の間隔とし、更に所定期間画像に変化がないと判断した場合には、第1の間隔に戻すよう制御することにより、電力消費を抑えながら精度の良いセキュリティー性を保つことができる。また、スキャン間隔の時間を設定可能としても良い。   In addition, a plurality of types of intervals such as a first interval (for example, 3 sec) and a second interval (for example, 1.5 sec) are prepared as image scan intervals, and when it is determined that there is no difference between a predetermined value and a predetermined period, When it is determined that there is no change in the image for a predetermined period after the second interval, it is possible to maintain accurate security while suppressing power consumption by controlling to return to the first interval. The scan interval time may be settable.

また、圧力センサ及び振動センサ等を用いて車両に加わる外力を基にシステムが起動する構成とする、あるいは外力を基にスキャン間隔を小さくするような構成としても良い。   Further, the system may be configured to start based on an external force applied to the vehicle using a pressure sensor, a vibration sensor, or the like, or may be configured to reduce the scan interval based on the external force.

更に、撮像手段から画像の変化で異常を判断しなかった場合であっても、車両に加わる外力が所定値を越え、もしくは所定時間を越えた場合には、車両所有者の情報端末に異常状態を送信する機能を併せ持たすことが望ましい。   Furthermore, even if an abnormality is not judged by the image change from the imaging means, if the external force applied to the vehicle exceeds a predetermined value or exceeds a predetermined time, an abnormal state is detected in the information terminal of the vehicle owner. It is desirable to have a function of transmitting

次に、本発明車両用セキュリティーシステムの他の実施形態を図5に示す。   Next, another embodiment of the vehicle security system of the present invention is shown in FIG.

図5は車両用セキュリティーシステムを車両50に取り付けた状態を示すイメージ図であり、撮像装置11、カメラレンズ12、反射体13がユニット化された例で、撮像装置11に取り付けられた撮像装置用透明ケース17aによって反射体13が取り付けられる構成をしている。   FIG. 5 is an image diagram showing a state in which the vehicle security system is attached to the vehicle 50, in which the imaging device 11, the camera lens 12, and the reflector 13 are unitized, and the imaging device transparent attached to the imaging device 11. The reflector 13 is attached by a case 17a.

このような構成とすることにより、反射体13と撮像装置11との位置関係に撮像上問題となるようなずれが発生することなく、容易にセキュリティーシステムの取り付けを行うことができる。なお、ケース17aを透明とすることにより、ケース17aの存在が撮像に影響をきたすことを抑制している。   With such a configuration, the security system can be easily attached without causing a positional shift between the reflector 13 and the imaging device 11 that causes a problem in imaging. In addition, by making the case 17a transparent, the presence of the case 17a is suppressed from affecting the imaging.

また、本実施形態では、反射体13には投光装置14の投光を反射させる反射体13bが一体に設けられ、且つケース17aと一体に形成されたケース17bによって投光装置14が保持される構成をしている。このような構成とすることによって、投光装置14によって撮像精度を向上させながら、容易にセキュリティーシステムの取り付けを行うことができるようになる。   Further, in the present embodiment, the reflector 13 is integrally provided with a reflector 13b that reflects the light projected from the light projecting device 14, and the light projecting device 14 is held by a case 17b that is formed integrally with the case 17a. The configuration is By adopting such a configuration, it is possible to easily attach the security system while improving the imaging accuracy by the light projecting device 14.

なお、52は車両のサイドガラスを示すが、セキュリティーシステムを構成する撮像装置11、反射体13は図に示すように、車両の天板53の中央位置に設置されるのが望ましい。   In addition, although 52 shows the side glass of a vehicle, as for the imaging device 11 and the reflector 13 which comprise a security system, it is desirable to install in the center position of the top plate 53 of a vehicle as shown in the figure.

次に、本発明セキュリティーシステムを構成する反射体13の他の実施形態を図6〜図15に示す。   Next, other embodiment of the reflector 13 which comprises the security system of this invention is shown in FIGS.

図6及び図7は反射面13aが外周方向に連続した円錐台形状をしており、図6と図7とでは反射面13aの曲面が異なっている。図6に示すように反射面13aが凸曲面をした構成は、図7に示すように反射面13aが凹曲面をした構成よりも、図2に示すような反射面13aを介して撮像装置11が撮像する範囲38が広い性質を持ち、図7に示す構成は図6に示す構成よりも、画像が細かい性質を持っており、目的、車両などに応じて選択されることが望ましい。   6 and 7 have a truncated cone shape in which the reflecting surface 13a is continuous in the outer peripheral direction, and the curved surface of the reflecting surface 13a is different between FIG. 6 and FIG. The configuration in which the reflective surface 13a has a convex curved surface as shown in FIG. 6 has a configuration in which the imaging device 11 is connected via the reflective surface 13a as shown in FIG. 2 rather than the configuration in which the reflective surface 13a has a concave curved surface as shown in FIG. 7 has a wide property, and the configuration shown in FIG. 7 has a finer image property than the configuration shown in FIG. 6, and is preferably selected according to the purpose, vehicle, and the like.

図8〜図12はいずれも4つの反射面13aを持つ形状をした実施形態であり、反射面13aの角度又は曲面が異なるものである。このような形状とすることにより、1つの反射面13aを介して撮像される画像がそれぞれ車両のフロントガラス側、サイドガラス側、リアガラス側の情報となり、処理装置21によって処理する画像処理が容易にすることができる。   8 to 12 show an embodiment having a shape having four reflecting surfaces 13a, and the angle or curved surface of the reflecting surface 13a is different. By adopting such a shape, images captured through one reflecting surface 13a become information on the windshield side, side glass side, and rear glass side of the vehicle, respectively, and image processing processed by the processing device 21 is facilitated. be able to.

また、車両の大きさに応じて図9、図10に示すように撮像範囲を大きくすることや、サイドガラスの角度を考慮して図10に示すように反射面13aを凹曲面に形成すること、設置位置あるいはサイドガラスの角度を考慮して、反射面13aの角度が異なる形状のものを選択することが望ましい。なお、図11及び図12は投光装置14の投光を反射させる反射面13bを一体に備えた反射体13を示す実施形態である。図12に示す構成は、反射面13aと反射面13bとの間に撮像装置11及び反射体13との軸方向に対して平行な面を有する台座部分を有するものである。   Further, depending on the size of the vehicle, the imaging range is enlarged as shown in FIGS. 9 and 10, and the reflecting surface 13a is formed in a concave curved surface as shown in FIG. 10 in consideration of the angle of the side glass. In consideration of the installation position or the angle of the side glass, it is desirable to select a shape having a different angle of the reflecting surface 13a. 11 and 12 show an embodiment of the reflector 13 that is integrally provided with a reflecting surface 13b that reflects the light projected from the light projecting device 14. FIG. The configuration shown in FIG. 12 has a pedestal portion having a plane parallel to the axial direction of the imaging device 11 and the reflector 13 between the reflecting surface 13a and the reflecting surface 13b.

なお、図8〜図12はいずれも4つの反射面13aを持つ形状をしたものであるが、3つの反射面13aを持つ形状であっても、6つやより多面な形状をしたものであっても良い。   8 to 12 each have a shape having four reflecting surfaces 13a, but even a shape having three reflecting surfaces 13a has six or more shapes. Also good.

また、図13〜図15は、反射面13aの角度を表すイメージ図であるが、図に示すように、サイドガラスの角度、設置位置あるいはサイドガラスの角度を考慮して、種々の反射面13aの形状が考えられる。   13 to 15 are image diagrams showing the angle of the reflecting surface 13a. As shown in the figure, the shapes of various reflecting surfaces 13a are considered in consideration of the angle of the side glass, the installation position, or the angle of the side glass. Conceivable.

本発明セキュリティーシステムの一実施形態を示すブロック図である。It is a block diagram which shows one Embodiment of this invention security system. 図1の撮像イメージ図である。It is an imaging image figure of FIG. 本発明セキュリティーシステムの画像認証フローチャートである。It is an image authentication flowchart of the security system of the present invention. 本発明セキュリティーシステムと情報端末装置との関係を表すイメージ図である。It is an image figure showing the relationship between this invention security system and an information terminal device. 本発明セキュリティーシステムの他の実施形態を示すイメージ図である。It is an image figure which shows other embodiment of the security system of this invention. 本発明セキュリティーシステムを構成する反射体の他の実施形態を示すイメージ図である。It is an image figure which shows other embodiment of the reflector which comprises this invention security system. 本発明セキュリティーシステムを構成する反射体の他の実施形態を示すイメージ図である。It is an image figure which shows other embodiment of the reflector which comprises this invention security system. 本発明セキュリティーシステムを構成する反射体の他の実施形態を示すイメージ図である。It is an image figure which shows other embodiment of the reflector which comprises this invention security system. 本発明セキュリティーシステムを構成する反射体の他の実施形態を示すイメージ図である。It is an image figure which shows other embodiment of the reflector which comprises this invention security system. 本発明セキュリティーシステムを構成する反射体の他の実施形態を示すイメージ図である。It is an image figure which shows other embodiment of the reflector which comprises this invention security system. 本発明セキュリティーシステムを構成する反射体の他の実施形態を示すイメージ図である。It is an image figure which shows other embodiment of the reflector which comprises this invention security system. 本発明セキュリティーシステムを構成する反射体の他の実施形態を示すイメージ図である。It is an image figure which shows other embodiment of the reflector which comprises this invention security system. 本発明セキュリティーシステムを構成する反射体の他の実施形態を示すイメージ図である。It is an image figure which shows other embodiment of the reflector which comprises this invention security system. 本発明セキュリティーシステムを構成する反射体の他の実施形態を示すイメージ図である。It is an image figure which shows other embodiment of the reflector which comprises this invention security system. 本発明セキュリティーシステムを構成する反射体の他の実施形態を示すイメージ図である。It is an image figure which shows other embodiment of the reflector which comprises this invention security system.

符号の説明Explanation of symbols

11 撮像装置
11a 中心軸
12 カメラレンズ
13 反射体
13a 反射面
13b 反射面
14 投光装置
15 撮像可能範囲
16 投光装置よりの光
17a 撮像装置用透明ケース
17b 投光装置用透明ケース
21 処理装置
22 画像保存装置
23 表示装置
24 通信装置
25 情報端末装置
26 表示装置
38 撮像手段の視野範囲
50 車両
51 車両のフロントガラス
52 車両のサイドガラス
53 車両の天板
DESCRIPTION OF SYMBOLS 11 Image pick-up device 11a Center axis 12 Camera lens 13 Reflector 13a Reflecting surface 13b Reflecting surface 14 Light projection device 15 Imaging range 16 Light 17a from light projection device Transparent case 17b for image pickup device Transparent case 21 for light projection device Processing device 22 Image storage device 23 Display device 24 Communication device 25 Information terminal device 26 Display device 38 Field of view range of imaging means 50 Vehicle 51 Vehicle windshield 52 Vehicle side glass 53 Vehicle top plate

本発明の目的は、車両内部に設けられる単一の撮像手段と、該撮像手段から得られた画像のデジタル処理を行うデジタル処理手段と、前記撮像手段の撮像情報を記憶する記憶手段と、警告を発する警告手段と、前記撮像手段の撮像領域に投光する投光装置とを有し、該撮像手段に対して傾斜した少なくとも3つの反射面を持ち中心軸が前記撮像手段の中心軸と一致した反射体を前記撮像手段と対向して設けると共に、前記少なくとも3つの反射面を前記撮像手段の中心軸の外周にフロントガラス側、両サイドガラス側に夫々配置し、前記撮像手段が前記反射体に反射した情報を撮像するようにし、かつ前記反射体が、前記少なくとも3つの反射面に加え、前記投光装置が照射する光を反射させ撮像範囲に投光するための少なくとも3つの投光用反射面を反撮像手段側に一体に備えており、前記デジタル処理手段は、前記記憶手段に記憶された情報と前記撮像手段から得られた画像を基にしたデータとを比較し、比較結果に基づいて前記警告手段に警告をさせることにより達成される。 An object of the present invention is to provide a single imaging unit provided inside a vehicle, a digital processing unit that performs digital processing of an image obtained from the imaging unit, a storage unit that stores imaging information of the imaging unit, and a warning. A warning means that emits light and a light projecting device that projects light onto the imaging area of the imaging means, and has at least three reflecting surfaces inclined with respect to the imaging means, and the central axis coincides with the central axis of the imaging means And the at least three reflecting surfaces are arranged on the outer periphery of the central axis of the imaging means on the windshield side and both side glass sides, respectively, and the imaging means is provided on the reflector. so as to image the reflected information, and the reflector is at least three in addition to the reflecting surface, the light projection device at least three light projecting for projecting the imaging range by reflecting light irradiated The reflective surface is provided integrally on the anti-imaging means side, said digital processing means, an image obtained from the imaging means and the information stored in the storage means and comparing the data based on, the comparison result This is achieved by causing the warning means to warn based on the above.

本発明によれば、単一の撮像手段でフロントガラス側、両サイドガラス側車両外側の情報の撮像を可能とし、車両荒らしや盗難防止などに用いられる車両用セキュリティーシステムを安価に提供することが可能となると共に、更にフロントガラス側、両サイドガラス側車両外側の情報を夫々の反射面を介して撮像するため、デジタル処理手段によって処理する画像処理を容易にすることができる。更に、投光装置を有すると共に、反射体が、前記少なくとも3つの反射面に加え、投光装置が照射する光を反射させ撮像範囲に投光するための少なくとも3つの投光用反射面を反撮像手段側に一体に備えているため、撮像精度を向上させながら、容易にセキュリティーシステムの取り付けを行うことができる。 According to the present invention, it is possible to capture information on the outside of the windshield side and both side glass sides of the vehicle with a single imaging means, and it is possible to provide a vehicular security system used for vehicle vandalism and theft prevention at low cost. In addition, since the information on the windshield side and both side glass side vehicles outside is imaged through the respective reflecting surfaces, the image processing processed by the digital processing means can be facilitated. In addition to the at least three reflecting surfaces, the reflector reflects at least three reflecting surfaces for projecting light to reflect the light emitted by the projecting device and project it to the imaging range. Since it is integrally provided on the imaging means side, the security system can be easily attached while improving the imaging accuracy.

Claims (13)

撮像手段と、該撮像手段から得られた画像のデジタル処理を行うデジタル処理手段を有し、該撮像手段に対して傾斜した反射面を持つ反射体を前記撮像手段と対向して設けると共に、前記反射面を前記撮像手段の中心軸の外周に配置し、前記撮像手段が前記反射体に反射した情報を撮像するようにしたことを特徴とするセキュリティーシステム。   An image pickup means and a digital processing means for digitally processing an image obtained from the image pickup means; a reflector having a reflecting surface inclined with respect to the image pickup means is provided opposite to the image pickup means; and A security system, wherein a reflecting surface is arranged on an outer periphery of a central axis of the image pickup means, and the image pickup means picks up information reflected by the reflector. 前記反射面は、前記撮像手段の中心軸方向視で少なくとも該中心軸を境に対向して配設されていることを特徴とする請求項1記載のセキュリティーシステム。   The security system according to claim 1, wherein the reflecting surface is disposed so as to face at least the central axis as viewed from the central axis direction of the imaging unit. 前記反射面は、前記撮像手段の中心軸に対して略同等の角度で傾斜していることを特徴とする請求項2記載のセキュリティーシステム。   The security system according to claim 2, wherein the reflecting surface is inclined at substantially the same angle with respect to a central axis of the imaging unit. 前記反射面は外周方向に連続して形成されていることを特徴とする請求項1〜請求項3のいずれか1項記載のセキュリティーシステム。   The security system according to any one of claims 1 to 3, wherein the reflecting surface is formed continuously in an outer peripheral direction. 前記反射体は、少なくとも3つの反射面を有し、2つの反射面は対向して配置され、他の1つの反射面は前記2つの反射面の間に配置されていることを特徴とする請求項2あるいは請求項3記載のセキュリティーシステム。   The reflector has at least three reflecting surfaces, two reflecting surfaces are arranged to face each other, and the other reflecting surface is arranged between the two reflecting surfaces. Item 4. The security system according to item 2 or item 3. 前記撮像手段の撮像情報を記憶する記憶手段を有することを特徴とする請求項1〜請求項5記載のいずれか1項記載のセキュリティーシステム。   6. The security system according to claim 1, further comprising storage means for storing imaging information of the imaging means. 前記デジタル処理手段の処理結果に基づいて警告を発する警告手段を有することを特徴とする請求項1〜請求項6のいずれか1項記載のセキュリティーシステム。   The security system according to claim 1, further comprising a warning unit that issues a warning based on a processing result of the digital processing unit. 請求項1〜請求項7記載のいずれか1項に記載の前記撮像手段及び前記反射体を車両内部に採用したことを特徴とする車両用セキュリティーシステム。   8. A vehicular security system, wherein the imaging unit and the reflector according to claim 1 are employed inside a vehicle. 前記撮像手段は前記反射体を介して少なくともフロントガラス側、両サイドガラス側の車両外側の情報を撮像することを特徴とする請求項8記載の車両用セキュリティーシステム。   9. The vehicular security system according to claim 8, wherein the imaging means images at least information on the outside of the vehicle on the windshield side and both side glass sides via the reflector. 車両使用者の人物画像を記憶することができる人物画像記憶手段を有し、前記デジタル処理手段は、前記撮像手段より得られた画像の中の人物画像を認識し、その人物画像と前記人物画像記憶手段に記憶された情報とを比較し、両者が一致しないとの比較結果に基づいて警告を行う警告手段を有することを特徴とする請求項9記載の車両用セキュリティーシステム。   Human image storage means capable of storing a person image of a vehicle user, wherein the digital processing means recognizes a person image in an image obtained from the imaging means, and the person image and the person image 10. The vehicular security system according to claim 9, further comprising warning means for comparing the information stored in the storage means and giving a warning based on a comparison result that they do not match. 前記警告手段は、車両使用者などの記憶された情報端末装置に通信を行う通信手段を有することを特徴とする請求項10記載の車両用セキュリティーシステム。   11. The vehicular security system according to claim 10, wherein the warning unit includes a communication unit that communicates with a stored information terminal device such as a vehicle user. 前記デジタル処理手段は、車両のガラスによる撮像画像の屈曲を考慮し、撮像画像を修正する修正ステップを有することを特徴とする請求項9〜請求項11のいずれか1項記載の車両用セキュリティーシステム。   The vehicle security system according to any one of claims 9 to 11, wherein the digital processing means includes a correction step of correcting the captured image in consideration of bending of the captured image due to glass of the vehicle. . 前記撮像手段の撮像領域に投光する投光装置を有することを特徴とする請求項1〜請求項12のいずれか1項記載のセキュリティーシステム。   The security system according to any one of claims 1 to 12, further comprising a light projecting device that projects light onto an image capturing area of the image capturing unit.
JP2007223393A 2007-08-30 2007-08-30 Vehicle security system Expired - Fee Related JP4193001B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2007223393A JP4193001B1 (en) 2007-08-30 2007-08-30 Vehicle security system

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2007223393A JP4193001B1 (en) 2007-08-30 2007-08-30 Vehicle security system

Publications (2)

Publication Number Publication Date
JP4193001B1 JP4193001B1 (en) 2008-12-10
JP2009059007A true JP2009059007A (en) 2009-03-19

Family

ID=40174703

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2007223393A Expired - Fee Related JP4193001B1 (en) 2007-08-30 2007-08-30 Vehicle security system

Country Status (1)

Country Link
JP (1) JP4193001B1 (en)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20140112960A (en) * 2013-03-15 2014-09-24 심상교 Image photograping apparatus and park management system using the same
WO2018043100A1 (en) * 2016-08-29 2018-03-08 京セラ株式会社 Determination apparatus, imaging apparatus, driver confirmation system, movable body, and determination method

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106240523A (en) * 2016-08-29 2016-12-21 安徽云图信息技术有限公司 Anti-theft control system

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20140112960A (en) * 2013-03-15 2014-09-24 심상교 Image photograping apparatus and park management system using the same
KR101633777B1 (en) 2013-03-15 2016-06-27 심상교 Image photograping apparatus and park management system using the same
WO2018043100A1 (en) * 2016-08-29 2018-03-08 京セラ株式会社 Determination apparatus, imaging apparatus, driver confirmation system, movable body, and determination method
JPWO2018043100A1 (en) * 2016-08-29 2019-07-25 京セラ株式会社 Determination device, imaging device, driver confirmation system, moving object and determination method
US10893828B2 (en) 2016-08-29 2021-01-19 Kyocera Corporation Determination apparatus, imaging apparatus, driver confirmation system, moveable body, and determination method

Also Published As

Publication number Publication date
JP4193001B1 (en) 2008-12-10

Similar Documents

Publication Publication Date Title
US11012668B2 (en) Vehicular security system that limits vehicle access responsive to signal jamming detection
JP5082834B2 (en) Aside look detection device and method, and program
KR102414041B1 (en) Rearview mirror assembly with occupant detection
US10929698B2 (en) Advanced features for vehicle authentication system
EP1700761A1 (en) Apparatus for authenticating vehicle driver
JP2010257249A (en) On-vehicle security device
JP2007168570A (en) Controller of vehicle-mounted camera
JP4193001B1 (en) Vehicle security system
KR101922376B1 (en) Method for sharing and start controlling of vehicle driving information in user terminal using face recognition function
WO2009038304A1 (en) System for monitoring a breakdown of vehicle and method thereof
JP2005247014A (en) Car-mounted camera system
JP4628666B2 (en) In-vehicle camera system
KR20200072897A (en) Apparatus of managing vehicle invasion, system having the same and method thereof
JP3775272B2 (en) Car interior monitor system
KR20210148497A (en) Camera Apparatus Installing at a Car for Detecting Drowsy Driving and Careless Driving and Method thereof
KR20130131719A (en) Face authentication apparatus and method for vehicle
JP2020150295A (en) Vehicle crime prevention device
JP7441417B2 (en) Driver state estimation device
JP4578447B2 (en) Multiple vehicle monitoring method and monitoring system in dark place
KR101395803B1 (en) Apparatus for vehicle regulation with vehicle black box
KR20120028058A (en) Apparatus for photographing face image of driver in vehicle
JP2021046121A (en) Control device, on-vehicle device and control method
CN108216124A (en) Automotive anti-theft alarming system and its monitoring device
JP7197416B2 (en) CONTROL DEVICE AND OPERATION METHOD OF CONTROLLER
KR102672095B1 (en) In-Cabin Security Sensor Installed at a Car and Platform Service Method therefor

Legal Events

Date Code Title Description
TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20080902

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20080908

R150 Certificate of patent (=grant) or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (prs date is renewal date of database)

Free format text: PAYMENT UNTIL: 20111003

Year of fee payment: 3

FPAY Renewal fee payment (prs date is renewal date of database)

Free format text: PAYMENT UNTIL: 20121003

Year of fee payment: 4

FPAY Renewal fee payment (prs date is renewal date of database)

Free format text: PAYMENT UNTIL: 20131003

Year of fee payment: 5

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

LAPS Cancellation because of no payment of annual fees