JP2012169718A - Imaging apparatus - Google Patents

Abstract

PROBLEM TO BE SOLVED: To provide an imaging apparatus related to a video monitoring system that can suppress non-detection and generation of error detection without expanding a system scale.SOLUTION: An imaging system is used for a video monitoring system for monitoring surrounding circumstances. At least two lenses having different sizes are provided for receiving external light. The imaging apparatus detects light received in these two lenses and generates image data from the light. When receiving a lens switching signal from the outside and abnormality detection is performed in an external device, low quality image data generated by the light of a smaller lens is used. After abnormality is detected, from high quality image data generated by the light of a larger lens, information on conditions in which abnormality is detected is obtained.

Description

本発明は、監視カメラを制御し、道路、河川等を撮像し、侵入者等の監視を行う映像監視システムに用いられる撮像装置に関する。   The present invention relates to an imaging apparatus used in a video surveillance system that controls a surveillance camera, images roads, rivers, and the like and monitors intruders and the like.

例えば、特許文献１に記載されているような従来の映像監視システムは、監視対象エリアをカメラで撮影する機能に付随して、以下の２つの機能が備わっているものが多い。２つの機能とは、異常検知機能と異常状態の認識機能である。   For example, a conventional video surveillance system as described in Patent Document 1 often has the following two functions in addition to the function of photographing a monitoring target area with a camera. The two functions are an abnormality detection function and an abnormal state recognition function.

異常検知機能は、映像データを画像処理アルゴリズムによって解析し、監視対象エリアの異常状態を検出する機能である。具体例としては、建物への不法侵入者の検知や、河川の水位や交通渋滞の検知などが挙げられる。   The abnormality detection function is a function of analyzing video data using an image processing algorithm and detecting an abnormal state in the monitoring target area. Specific examples include detection of illegal intruders in buildings, detection of river water levels and traffic congestion.

異常状態の認識機能は、監視対象エリアの異常状況を詳細に把握するための情報を得るために、画像処理によって映像データを解析する機能である。具体例としては、建物への不法侵入者を検知した場合における、侵入者の顔や性別、身長、持ち物などが挙げられる。   The abnormal state recognition function is a function of analyzing video data by image processing in order to obtain information for grasping in detail the abnormal state of the monitoring target area. Specific examples include the intruder's face, gender, height, and belongings when an illegal intruder is detected.

特開２００６−２４５７４６号公報JP 2006-245746 A

前述の異常検知機能については、検出精度の面で問題になることがある。それは、検出精度が、「映像画質」と「検出アルゴリズム」と「監視対象エリアの状況」の複合的な作用で変動し、非検出や誤り検出が発生してしまうことである。   The above-described abnormality detection function may cause a problem in terms of detection accuracy. That is, the detection accuracy fluctuates due to a combined action of “video image quality”, “detection algorithm”, and “status of monitoring target area”, and non-detection and error detection occur.

そのため、単純に画質向上の目的でカメラの解像度を上げたりするだけでは上記問題を解決させることはできないが、監視対象エリアを複数のカメラで監視することで、前述した非検出や誤り検出の発生を抑制することは可能である。   Therefore, the above problem cannot be solved simply by increasing the resolution of the camera for the purpose of improving the image quality, but the above-mentioned non-detection and error detection occur by monitoring the monitored area with multiple cameras. It is possible to suppress this.

しかしながら、複数のカメラを設置した場合には、コスト面で非常に高額なシステムとなってしまうことや、装置台数を増大させることでオペレーションが煩雑になり、メンテナンスの負荷が増大するなど、新たな課題が発生することが考えられる。さらに実際の運用を考えた場合、電源やネットワークの敷設工事や建物の構造上の理由により、監視カメラの設置場所には少なからず制約が存在するため、カメラの増設には解決すべき問題が多い。   However, when multiple cameras are installed, the system becomes very expensive in terms of cost, and the operation becomes complicated by increasing the number of devices, increasing the burden of maintenance, etc. A problem may occur. Furthermore, when considering actual operation, there are not a few restrictions on the installation location of surveillance cameras due to the construction of the power supply and network and the structure of the building. .

そこで本発明は、システム規模を拡大させることなく、非検出や誤り検出の発生を抑制させることができる映像監視システムに係る撮像装置を提供することを目的としている。   Accordingly, an object of the present invention is to provide an imaging apparatus according to a video surveillance system that can suppress the occurrence of non-detection and error detection without increasing the system scale.

上記課題を解決するために、本発明は、周囲の状況を監視するための映像監視システムに用いられる撮像装置であって、外部からの光を受光するための特性の異なる少なくとも２つのレンズを有する第１のレンズ部と、外部からの光を受光して、前記第１のレンズ部によって撮像される画像よりも高画質の画像を撮像するための第２のレンズ部と、前記第１のレンズ及び前記第２のレンズの少なくとも一方によって撮像された映像データを出力する出力部と、を有し、前記第１のレンズ部及び前記第２のレンズ部によって撮像された前記映像データは、外部の装置において選択して利用されることを特徴とする撮像装置を提案する。   In order to solve the above-described problems, the present invention is an imaging device used in a video monitoring system for monitoring the surrounding situation, and has at least two lenses having different characteristics for receiving light from the outside. A first lens unit; a second lens unit that receives light from outside and captures a higher quality image than an image captured by the first lens unit; and the first lens And an output unit that outputs video data captured by at least one of the second lenses, and the video data captured by the first lens unit and the second lens unit is externally An imaging apparatus is proposed that is selected and used in the apparatus.

この構成によれば、複眼レンズが備えられた１台のカメラによって、例えば、画角の異なる複数の画像が取得されることで、異常検知時の非検出や誤り検出の発生を抑制し、かつ、異常検知後は異常検知を行ったカメラと同一のカメラにおいて、より高画質な画像によって詳細な異常状態の認識を可能とする。さらに、１台のカメラで監視状況によって撮影特性を変更することが可能であるため、設備投資の低減と、映像監視システムとしての異常検知性能の向上の両方の効果を期待できる。   According to this configuration, for example, a plurality of images having different angles of view are acquired by a single camera equipped with a compound eye lens, thereby suppressing non-detection and error detection during abnormality detection, and After the abnormality is detected, it is possible to recognize a detailed abnormal state with a higher quality image in the same camera that has detected the abnormality. Furthermore, since it is possible to change the shooting characteristics depending on the monitoring status with a single camera, it is possible to expect both the reduction in equipment investment and the improvement in anomaly detection performance as a video monitoring system.

本発明により、複眼レンズが備えられた１台のカメラによって画角等の特性が異なる複数の画像が取得されることで、異常検知時の非検出や誤り検出の発生を抑制し、かつ、異常検知後は異常検知を行ったカメラと同一のカメラにおいて、より高画質な画像によって詳細な異常状態の認識を可能とする。   According to the present invention, a plurality of images having different characteristics such as angle of view are acquired by a single camera equipped with a compound eye lens, thereby suppressing non-detection and error detection during abnormality detection, and After the detection, in the same camera as the camera that detected the abnormality, it is possible to recognize the detailed abnormality state with a higher quality image.

さらに、本発明は、１台のカメラで監視状況によって撮影特性を変更することが可能であるため、設備投資の低減と、映像監視システムとしての異常検知性能の向上の両方の効果を期待できる。   Furthermore, since it is possible to change the photographing characteristics according to the monitoring status with one camera, the present invention can be expected to have both effects of reducing the capital investment and improving the abnormality detection performance as the video monitoring system.

第１のカメラ構成例について説明する図である。It is a figure explaining the 1st camera structural example. 第２のカメラ構成例について説明する図である。It is a figure explaining the 2nd camera structural example. 映像監視システムの構成例について説明する図である。It is a figure explaining the structural example of a video surveillance system. 映像監視システムの構成例について説明する図である。It is a figure explaining the structural example of a video surveillance system. 監視対象エリア周辺における装置の物理的な配置例を示す図である。It is a figure which shows the example of a physical arrangement | positioning of the apparatus in the monitoring object area periphery. 単眼レンズ１０１で撮影した場合の撮像画像の例を示す図である。It is a figure which shows the example of the captured image at the time of image | photographing with the monocular lens. 複眼レンズ１０２で撮影した場合の撮像画像の例を示す図である。It is a figure which shows the example of the captured image at the time of image | photographing with the compound eye lens. 映像監視システムにおける処理の流れを示すシーケンス図である。It is a sequence diagram which shows the flow of a process in a video surveillance system. 映像監視システムにおける処理の流れを示すシーケンス図である。It is a sequence diagram which shows the flow of a process in a video surveillance system. 画像処理サーバ３１１及び映像監視システム管理装置３１２の構成例について説明する図である。It is a figure explaining the structural example of the image processing server 311 and the video monitoring system management apparatus 312. FIG. 従来のカメラの構成について説明する図である。It is a figure explaining the structure of the conventional camera.

以下、本発明の実施形態について、図面を参照して説明する。なお、以下の説明において参照する各図では、他の図と同等部分は同一符号によって示される。   Hereinafter, embodiments of the present invention will be described with reference to the drawings. In the drawings referred to in the following description, the same parts as those in the other drawings are denoted by the same reference numerals.

本発明はカメラに大きな特徴があるため、最初にカメラについて説明し、次に、本発明に係るカメラを用いて構成されるシステム構成を説明し、最後に各装置間の連携動作について説明する。   Since the present invention has major features, the camera will be described first, then the system configuration configured using the camera according to the present invention will be described, and finally the cooperative operation between the devices will be described.

従来のカメラと本実施形態に係るカメラとの違いを容易に把握できるよう、まず、従来のカメラの構成について、図１１を用いて説明する。なお、ここでの説明に使用する図１１では、本発明の特徴を簡潔に説明するために、構成要素を最小限に抑えて記載している。   First, the configuration of the conventional camera will be described with reference to FIG. 11 so that the difference between the conventional camera and the camera according to the present embodiment can be easily grasped. Note that, in FIG. 11 used in the description here, in order to briefly explain the features of the present invention, the components are described with being minimized.

図１１に示されるように、従来の単眼レンズ式ネットワークカメラ９００は、単眼レンズ９０１と、受像部９０２と、映像データ生成部９０３と、ネットワークインタフェース９０４とから構成され、ネットワークインタフェース９０４においてネットワークケーブル９０５に接続される。   As shown in FIG. 11, a conventional monocular lens type network camera 900 includes a monocular lens 901, an image receiving unit 902, a video data generation unit 903, and a network interface 904, and a network cable 905 is included in the network interface 904. Connected to.

単眼レンズ式ネットワークカメラ９００の撮影対象物から反射される光は単眼レンズ９０１で集められ、その集められた光は受像部９０２でセンシングされる。そして、センシングされた光は、映像データ生成部９０３で映像データとして連続的に生成される。そして、ネットワークインタフェース９０４では、この映像データがネットワークケーブル９０５に出力される。   The light reflected from the object to be photographed by the monocular lens type network camera 900 is collected by the monocular lens 901, and the collected light is sensed by the image receiving unit 902. The sensed light is continuously generated as video data by the video data generation unit 903. In the network interface 904, this video data is output to the network cable 905.

（カメラの構成）
以下、本実施形態に係るカメラの構成について説明する。また、以下では、２つの構成を例示する。 (Camera configuration)
Hereinafter, the configuration of the camera according to the present embodiment will be described. In the following, two configurations are exemplified.

まず、第１のカメラ構成例について、図１を用いて説明する。   First, a first camera configuration example will be described with reference to FIG.

本実施形態に係る第１のカメラ１００（レンズ切替式ネットワークカメラ１００）は、図１に示されるように、単眼レンズ１０１と、複眼レンズ１０２と、レンズ切替部１０７と、受像部１０８と、映像データ生成部１０９と、ネットワークインタフェース１１０とを有する。また、ネットワークインタフェース１１０において、ネットワークケーブル１１１に接続される。   As shown in FIG. 1, the first camera 100 (lens switching network camera 100) according to the present embodiment includes a monocular lens 101, a compound eye lens 102, a lens switching unit 107, an image receiving unit 108, and an image. A data generation unit 109 and a network interface 110 are included. Further, the network interface 110 is connected to the network cable 111.

また、複眼レンズ１０２は、レンズＡ１０３、レンズＢ１０４、レンズＣ１０５、レンズＤ１０６の４つのレンズで構成される。   The compound eye lens 102 includes four lenses: a lens A103, a lens B104, a lens C105, and a lens D106.

ここで、複眼レンズ１０２内のレンズ数について、図１では、理解を容易なものとするために複眼レンズ１０２内のレンズ数を４つとしているが、これに限られるものではない。２つ以上であれば上限なく、適用可能である。   Here, in FIG. 1, the number of lenses in the compound eye lens 102 is four in order to facilitate understanding in FIG. 1, but the number of lenses in the compound eye lens 102 is not limited thereto. If it is two or more, there is no upper limit and it is applicable.

図１と図１１から分かるように、本実施形態に係るカメラ１００と従来のカメラ９００との大きな違いは、単眼レンズ１０１以外に複眼レンズ１０２が同じ筐体内に装備されていることと、それらのレンズを切り替えるレンズ切替部１０７が装備されていることである。なお、これら以外の構成については図１１に示される従来のカメラ９００の構成と同様である。   As can be seen from FIG. 1 and FIG. 11, the major difference between the camera 100 according to the present embodiment and the conventional camera 900 is that the compound eye lens 102 is installed in the same housing in addition to the monocular lens 101, and That is, a lens switching unit 107 for switching lenses is provided. Other configurations are the same as those of the conventional camera 900 shown in FIG.

すなわち、レンズＡ１０３〜レンズＤ１０６のいずれのレンズにおいても、レンズで集めた光を映像データとして出力するまでの処理の流れは、従来のカメラ９００と同様である。よって、ここでは、単眼レンズ１０１と複眼レンズ１０２とを切り替える仕組みについて説明する。   That is, in any of the lenses A103 to D106, the flow of processing until the light collected by the lens is output as video data is the same as that of the conventional camera 900. Therefore, here, a mechanism for switching between the monocular lens 101 and the compound eye lens 102 will be described.

レンズ切替式ネットワークカメラ１００は、ネットワークケーブル１１１での接続によってネットワーク（図示しない）経由でレンズ切替えを制御できるようになっている。具体的には、ネットワークを介してカメラ１００に通知される信号であって、撮影するレンズを単眼レンズ１０１及び複眼レンズ１０２のいずれかに切り替えるためのレンズ切替信号をネットワークインタフェース１１０が判別（認識）する。そして、レンズ切替部１０７へ、このレンズ切替信号を通知する。このレンズ切替信号に従い、レンズ切替部１０７はレンズを切替える。   The lens switching network camera 100 can control lens switching via a network (not shown) by connection with a network cable 111. Specifically, the network interface 110 discriminates (recognizes) a lens switching signal that is notified to the camera 100 via the network and switches the lens to be photographed to either the monocular lens 101 or the compound eye lens 102. To do. Then, the lens switching unit 107 is notified of this lens switching signal. According to this lens switching signal, the lens switching unit 107 switches the lens.

次に、第２のカメラ構成例について、図２を用いて説明する。   Next, a second camera configuration example will be described with reference to FIG.

本実施形態に係る第２のカメラ２００（不均一複眼レンズ式ネットワークカメラ２００）は、図２に示されるように、不均一複眼レンズ２０１と、受像部２０６と、映像データ生成部２０７と、ネットワークインタフェース２０８とを有する。また、ネットワークインタフェース２０８において、ネットワークケーブル２０９に接続される。   As shown in FIG. 2, the second camera 200 (non-uniform compound eye lens type network camera 200) according to the present embodiment includes a non-uniform compound eye lens 201, an image receiving unit 206, a video data generating unit 207, and a network. Interface 208. Further, the network interface 208 is connected to the network cable 209.

また、不均一複眼レンズ２０１は、レンズＡ２０２、レンズＢ２０３、レンズＣ２０４、レンズＤ２０５の４つのレンズで構成される。これら４つのレンズは、それぞれ特性の異なるレンズとなっている。ここで、「特性の異なる（レンズ）」とは、具体的には、例えば、レンズの大きさ（すなわち、レンズの径。以下同様。）が異なることによって解像度が異なる場合や、画角が異なる場合等が該当する。また、図２では、レンズＡ２０２が大きく、レンズＢ２０３〜レンズＤ２０５が同一サイズの小さな形状で示されているが、これに限定されるものではない。各レンズの大きさや形状は、他の大きさや形状であってもよい。   The non-uniform compound eye lens 201 includes four lenses, a lens A202, a lens B203, a lens C204, and a lens D205. These four lenses have different characteristics. Here, “difference in characteristics (lens)” specifically refers to, for example, a case where the resolution is different due to the size of the lens (that is, the diameter of the lens; the same applies hereinafter) or the angle of view is different. This is the case. In FIG. 2, the lens A202 is large and the lenses B203 to D205 are shown as small shapes having the same size. However, the present invention is not limited to this. The size and shape of each lens may be other sizes and shapes.

また、図２の構成では、図１の構成における単眼レンズ１０１が無くなり、不均一複眼レンズ２０１のみとなっている。すなわち、レンズが１つであるために、レンズ切替部１０７も不要となったことが図１の構成との違いである。詳細は後述するが、単眼レンズ１０１と複眼レンズ１０２の性質を併せ持ったレンズである不均一複眼レンズ２０１を採用した点が、レンズ２００の特徴である。機械的に動作する部分は故障しやすいため、このような構成により、故障率の低減とメンテナンス負荷の軽減が実現可能なカメラとなっている。   In the configuration of FIG. 2, the monocular lens 101 in the configuration of FIG. 1 is eliminated, and only the non-uniform compound eye lens 201 is provided. That is, the difference from the configuration of FIG. 1 is that the lens switching unit 107 is not required because there is one lens. Although details will be described later, the feature of the lens 200 is that a non-uniform compound eye lens 201 which is a lens having the properties of the monocular lens 101 and the compound lens 102 is adopted. Since the mechanically operating part is prone to failure, this configuration makes it possible to reduce the failure rate and the maintenance load.

（映像監視システム）
次に、本実施形態に係る映像監視システムの構成例について、図３を用いて説明する。本実施形態に係る映像監視システムは、機能的に撮影セクション３００と画像処理セクション３１０の２つのセクションに分けることができる。以下、それぞれのセクションについて説明する。 (Video surveillance system)
Next, a configuration example of the video monitoring system according to the present embodiment will be described with reference to FIG. The video surveillance system according to the present embodiment can be functionally divided into two sections, a shooting section 300 and an image processing section 310. Each section will be described below.

撮影セクション３００は、監視対象エリアの撮影と映像データの出力が主な機能である。   The shooting section 300 has a main function of shooting a monitoring target area and outputting video data.

撮影セクション３００を構成する装置は、図１に示されるレンズ切替式ネットワークカメラ１００−１〜レンズ切替式ネットワークカメラ１００−Ｎ（Ｎは２以上の整数）である。また、図３に示されるように、撮影セクション３００には、複数のカメラが含まれていてよい。   The devices constituting the photographing section 300 are the lens switching network camera 100-1 to the lens switching network camera 100-N (N is an integer of 2 or more) shown in FIG. In addition, as shown in FIG. 3, the shooting section 300 may include a plurality of cameras.

画像処理セクション３１０は、画像処理と映像監視システムの管理が主な機能である。   The image processing section 310 is mainly responsible for image processing and video surveillance system management.

画像処理セクション３１０を構成する装置は、画像処理サーバ３１１と、映像監視システム管理装置３１２である。   The devices constituting the image processing section 310 are an image processing server 311 and a video surveillance system management device 312.

画像処理サーバ３１１は、撮影セクション３００のレンズ切替式ネットワークカメラ１００−１〜１００−Ｎから出力される映像データについて画像処理を行い、前述の「異常検知」と「異常状態の把握」を行う装置である。   The image processing server 311 performs image processing on video data output from the lens-switchable network cameras 100-1 to 100-N of the photographing section 300, and performs the above-described “abnormality detection” and “abnormal state grasp”. It is.

映像監視システム管理装置３１２は、映像監視システム全体の管理を行う装置である。具体的には、各監視エリアの異常有無の判断、各カメラ１００−１〜１００−Ｎの映像データの表示、異常状態の把握において抽出された情報の管理などを行う装置である。   The video monitoring system management device 312 is a device that manages the entire video monitoring system. Specifically, it is a device that performs judgment of the presence or absence of abnormality in each monitoring area, display of video data of each camera 100-1 to 100-N, management of information extracted in grasping the abnormal state, and the like.

また、図３に示される映像監視システムでは、撮影セクション３００と画像処理セクション３１０とはＬＡＮ（Ｌｏｃａｌ Ａｒｅａ Ｎｅｔｗｏｒｋ）で接続されている。また、図４では、公衆網３３０によって２つのセクションが接続される例を示している。このように、撮影セクション３００から画像処理セクション３１０へ映像データが伝送でき、かつ、画像処理セクション３１０から撮影セクション３００へレンズ切替信号の伝送が可能であれば、２つのセクションの接続手段については、様々な方法が採用可能である。   In the video surveillance system shown in FIG. 3, the imaging section 300 and the image processing section 310 are connected via a LAN (Local Area Network). FIG. 4 shows an example in which two sections are connected by the public network 330. As described above, if the video data can be transmitted from the imaging section 300 to the image processing section 310 and the lens switching signal can be transmitted from the image processing section 310 to the imaging section 300, the connection means of the two sections is as follows. Various methods can be employed.

なお、図３及び図４に示される映像監視システムにおいてはレンズ切替式ネットワークカメラ１００−１〜１００−Ｎを用いられているが、これらに代えて、図２に示される不均一複眼レンズ式ネットワークカメラ２００が用いられる場合も同様の構成となる。   3 and 4, the lens switching type network cameras 100-1 to 100-N are used. Instead, the non-uniform compound eye lens type network shown in FIG. 2 is used. The same configuration is used when the camera 200 is used.

（映像監視方法の具体例）
ここからは、侵入者検知の具体例を用いて、映像監視システムにおける各装置間の連携動作について説明する。 (Specific examples of video surveillance methods)
From here, the cooperation operation | movement between each apparatus in a video surveillance system is demonstrated using the specific example of an intruder detection.

最初に、監視対象エリア周辺における装置の物理的な配置について、図５を用いて説明する。   First, the physical arrangement of devices around the monitoring target area will be described with reference to FIG.

まず、映像監視システムの撮影セクション３００については、レンズ切替式ネットワークカメラ１００−ｉ（ｉ＝１〜Ｎ）がカメラ取付具５１０によって、建物の壁５２０に据え付けられている。ネットワークケーブル１１１は建物の壁５２０の穴から建物内の図示しないネットワーク（ＬＡＮ３２０又は公衆網３３０）に接続されていることを表している。   First, in the imaging section 300 of the video surveillance system, a lens-switchable network camera 100-i (i = 1 to N) is installed on a building wall 520 by a camera fixture 510. The network cable 111 is connected to a network (LAN 320 or public network 330) (not shown) in the building through a hole in the wall 520 of the building.

なお、画像処理セクション３１０は建物内のネットワークに接続されている設定であるが、物理的配置の制約や特性に影響がないため、説明の簡略化のため、図５においては図示しない。   Note that the image processing section 310 is set to be connected to a network in a building, but does not affect the restrictions and characteristics of physical arrangement, and is not shown in FIG. 5 for the sake of simplicity.

次に、カメラの撮影方向５３０の先にあるカメラで撮影する監視対象エリアについて説明する。   Next, a monitoring target area that is captured by a camera ahead of the camera capturing direction 530 will be described.

本例においては、カメラ１００−ｉが据え付けられている建物の外周に塀５４１、塀５４２があることを想定する。そして、建物の敷地内へ人や車両が出入りするための門５５１、門５５２があり、侵入者５７０が門５５１及び門５５１の近傍に立っているとする。また、カメラの撮影範囲内には木５６０が存在し、撮像画像には木５６０が写りこむことを前提とする。   In this example, it is assumed that there are ridges 541 and 542 on the outer periphery of the building where the camera 100-i is installed. Further, it is assumed that there are gates 551 and 552 for people and vehicles to enter and exit the building site, and an intruder 570 is standing in the vicinity of the gates 551 and 551. Further, it is assumed that a tree 560 exists within the shooting range of the camera and that the tree 560 is reflected in the captured image.

次に、図５のような状況下で撮影されたときの撮像画像のイメージについて、単眼レンズ１０１の場合と複眼レンズ１０２の場合に分けて説明する。   Next, an image of a captured image taken under the situation shown in FIG. 5 will be described separately for the monocular lens 101 and the compound eye lens 102.

まず、単眼レンズ１０１で撮影した場合の映像イメージについて、図６を用いて説明する。なお、以下の説明においては、理解を容易なものとするために、単眼レンズ１０１はカメラ１００の中央に備えられており、レンズＡ１０３〜レンズＤ１０６の各レンズは単眼レンズ１０１の周辺に備えられているものと仮定する。   First, a video image in the case of shooting with the monocular lens 101 will be described with reference to FIG. In the following description, in order to facilitate understanding, the monocular lens 101 is provided in the center of the camera 100, and the lenses A103 to D106 are provided around the monocular lens 101. Assume that

図６に示されるように、単眼レンズ１０１で撮像される撮像画像６１０では、門５５１と門５５２の間の中央に立っている侵入者５７０の頭が、門５５１及び門５５２と同じ高さに見えている。また、木５６０の幹が侵入者５７０と門５５２の隙間から見えている。   As shown in FIG. 6, in the captured image 610 captured by the monocular lens 101, the head of the intruder 570 standing at the center between the gates 551 and 552 is at the same height as the gates 551 and 552. I can see it. In addition, the trunk of the tree 560 is visible from the gap between the intruder 570 and the gate 552.

次に、複眼レンズ１０２で撮影した場合の映像イメージについて、図７を用いて説明する。単眼レンズ１０１において図６のような画像が撮像される場合、複眼レンズ１０２（レンズＡ１０３〜レンズＤ１０６）で撮像される画像は、図７のような画像となる。   Next, a video image in the case of taking a picture with the compound eye lens 102 will be described with reference to FIG. When an image as illustrated in FIG. 6 is captured by the monocular lens 101, an image captured by the compound eye lens 102 (lens A103 to lens D106) is an image as illustrated in FIG.

まず、レンズＡ１０３〜レンズＤ１０６のそれぞれにおいて撮像される撮像画像７１０〜７４０について、横方向の比較を行う。レンズＡ１０３とレンズＣ１０５はカメラ１００の中心に対して左側に配置されているので、レンズＡ１０３とレンズＣ１０５の撮像画像７１０、７３０では、侵入者５７０は、右側の門５５２に近づいて見える。一方、レンズＢ１０４とレンズＤ１０６はカメラ１００の中心に対して右側に配置されているので、侵入者５７０は、左側の門５５１に近づいて見える。   First, the horizontal comparison is performed on the captured images 710 to 740 captured by the lenses A103 to D106. Since the lens A 103 and the lens C 105 are arranged on the left side with respect to the center of the camera 100, the intruder 570 appears to approach the right gate 552 in the captured images 710 and 730 of the lens A 103 and the lens C 105. On the other hand, since the lens B104 and the lens D106 are disposed on the right side with respect to the center of the camera 100, the intruder 570 appears to approach the left gate 551.

また、縦方向の比較をすると、レンズＡ１０３とレンズＢ１０４はカメラ１００の中心に対して上側に配置されているので、レンズＡ１０３とレンズＢ１０４の撮像画像７１０、７２０では、侵入者５７０の頭部が門５５１及び門５５２よりも低く、また、侵入者５７０の脚部が門５５１及び門５５２よりも下に伸びて見える。レンズＣ１０５とレンズＤ１０６はカメラ１００の中心に対して下側に配置されているので、侵入者５７０の頭部が門５５１及び門５５２よりも高く見え、また、侵入者５７０の脚部が門５５１及び門５５２に近づいて見える。   Further, when comparing in the vertical direction, since the lens A103 and the lens B104 are disposed on the upper side with respect to the center of the camera 100, in the captured images 710 and 720 of the lens A103 and the lens B104, the head of the intruder 570 is It is lower than the gates 551 and 552, and the leg of the intruder 570 appears to extend below the gates 551 and 552. Since the lens C105 and the lens D106 are disposed below the center of the camera 100, the head of the intruder 570 looks higher than the gates 551 and 552, and the leg of the intruder 570 is the gate 551. And approaching the gate 552.

図７については、縦横２列に配置されている複眼レンズ１０２について説明したが、カメラ１００の中心とレンズとの相対位置関係と、見え方との関係は、レンズの数によらず同様である。   Although the compound eye lenses 102 arranged in two rows in the vertical and horizontal directions have been described with reference to FIG. 7, the relationship between the relative position between the center of the camera 100 and the lens and the appearance is the same regardless of the number of lenses. .

また、単眼レンズ１０１の撮像画像６１０と、複眼レンズ１０２の撮像画像７１０〜７４０の画質について、これらの撮像画像の画質は、１つのレンズに割り当てることができる受像素子の量で決まる。受像素子とは、カメラ１００の受像部１０８内に備えられている光をセンシングするためのセンサー部であり、この受像素子の数で画質の良し悪しが決まる。このような理由から、複眼レンズ１０２のレンズ数は、監視対象エリアの諸条件を考慮し、画像検出が可能な画質を確保できることを確認して決定する必要がある。   Further, regarding the image quality of the captured image 610 of the monocular lens 101 and the captured images 710 to 740 of the compound eye lens 102, the image quality of these captured images is determined by the amount of image receiving elements that can be assigned to one lens. The image receiving element is a sensor unit for sensing light provided in the image receiving unit 108 of the camera 100, and the quality of the image is determined by the number of the image receiving elements. For this reason, it is necessary to determine the number of lenses of the compound eye lens 102 by confirming that image quality capable of image detection can be ensured in consideration of various conditions of the monitoring target area.

なお、本例においては、図１に示されるレンズ切替式ネットワークカメラ１００の場合について説明したが、図２に示される不均一複眼レンズ式ネットワークカメラ２００の場合も同様である。   In the present example, the case of the lens switching type network camera 100 shown in FIG. 1 has been described, but the same applies to the case of the non-uniform compound eye lens type network camera 200 shown in FIG.

以上では、図７のような画角の異なる複数の映像データを撮像する方法について説明した。次に、複数の映像データに基づいて侵入者検知を行う方法について説明する。   The method for capturing a plurality of video data with different angles of view as shown in FIG. 7 has been described above. Next, a method for performing intruder detection based on a plurality of video data will be described.

（侵入者検知の方法）
複眼レンズ１０２の各レンズで撮像された複数の映像データを画像処理セクション３１０で処理する方法は、その手法によって大きく２つに分けることができる。一つはそれぞれの映像データを従来の画像認識処理で処理する方法であり、もう一つの方法は、複数の映像データを合成してから画像処理を実施する方法である。 (Intruder detection method)
The method of processing a plurality of video data captured by each lens of the compound eye lens 102 by the image processing section 310 can be roughly divided into two according to the method. One is a method of processing each video data by a conventional image recognition process, and the other is a method of performing image processing after combining a plurality of video data.

前者の方法では、それぞれの映像データで侵入者の検出処理を行い、少なくとも１つの映像データから侵入者が認識されたときに侵入者を検知したものとする。なお、いくつ以上の映像データから侵入者を認識できたときに侵入者を検知したものと判定するかは、検出率や誤り検出率などに影響する。しかし、その映像データの数は、検出アルゴリズムのパラメータの一つとして設定されるものであり、映像監視システムを構成する各装置のスペックや、監視対象の要求仕様から設定されるべきものであるため、本明細書では個々のパラメータの組み合わせについての説明は割愛する。   In the former method, it is assumed that intruder detection processing is performed on each video data, and the intruder is detected when the intruder is recognized from at least one video data. It should be noted that the number of pieces of video data that can be recognized as an intruder being detected when the intruder can be recognized affects the detection rate and the error detection rate. However, the number of video data is set as one of the parameters of the detection algorithm, and should be set from the specifications of each device constituting the video monitoring system and the required specifications of the monitoring target. In the present specification, description of combinations of individual parameters is omitted.

後者の方法は、近年、テレビやパーソナルコンピュータのモニタなどで急激に製品化が進んでいる３Ｄ技術（立体視技術）を応用し、撮影されている物体の輪郭の把握や、侵入者の位置の計測などにおける信頼度を向上させる方法である。この方法は計算機による画像処理であるため、一般的に製品化されている３Ｄ製品のように左右に２つ並んだレンズに限定することなく、３つ以上のレンズで撮影された映像データによって、上記の信頼性を向上させることも可能である。   The latter method applies 3D technology (stereoscopic technology) that has been rapidly commercialized in recent years on TVs and personal computer monitors, etc., to grasp the contour of the object being photographed and to determine the position of the intruder. This is a method for improving reliability in measurement and the like. Since this method is image processing by a computer, it is not limited to two lenses arranged side by side like a 3D product that is generally commercialized, but by video data taken with three or more lenses, It is also possible to improve the reliability.

また、映像データをモニタで確認するときには、左右に並んだレンズ（例えば、レンズＡ１０３とレンズＢ１０４、又はレンズＣ１０５とレンズＤ１０６）であって、両レンズが視差分だけ離れて配置されている場合には、この視差のある２つの撮像映像から３Ｄ映像を生成することができる。そして、その３Ｄ映像を専用モニタで表示することにより、監視員が立体的に侵入者を認識することも可能である。   Further, when checking the video data on the monitor, when the lenses are arranged side by side (for example, the lens A103 and the lens B104, or the lens C105 and the lens D106), the two lenses are arranged apart from each other by the amount of parallax. Can generate a 3D image from two captured images with parallax. Then, by displaying the 3D video on a dedicated monitor, it is possible for the monitor to recognize the intruder in a three-dimensional manner.

（映像監視システムの処理シーケンス）
以下、映像監視システムにおける各装置間の連携動作について、図８及び図９を用いて説明する。図８及び図９においては、異常検知として、建物等への侵入者を検知する場合を例として説明する。 (Processing sequence of video surveillance system)
Hereinafter, the cooperative operation between the devices in the video surveillance system will be described with reference to FIGS. 8 and 9, a case where an intruder into a building or the like is detected as an abnormality detection will be described as an example.

図８及び図９に示されるシーケンス図は、カメラ１００、画像処理サーバ３１１、及び映像監視システム管理装置３１２の３つの装置間における処理シーケンスを示すものである。   The sequence diagrams shown in FIG. 8 and FIG. 9 show processing sequences among the three devices of the camera 100, the image processing server 311, and the video surveillance system management device 312.

図８は、レンズ切替式ネットワークカメラ１００が用いられる映像監視システムに係るシーケンス図である。   FIG. 8 is a sequence diagram relating to a video monitoring system in which the lens switching network camera 100 is used.

最初に、映像監視システム管理装置３１２からカメラ１００へ、複眼レンズ選択信号（レンズ切替信号）が通知される（ステップＳ１０１）。カメラ１００では、複眼レンズ選択信号が通知されたことをトリガーとして、撮影するためのレンズとして複眼レンズ１０２が選択され、監視対象エリアの撮影が開始される（ステップＳ１０２）。   First, a compound eye lens selection signal (lens switching signal) is notified from the video monitoring system management device 312 to the camera 100 (step S101). In the camera 100, using the notification of the compound eye lens selection signal as a trigger, the compound eye lens 102 is selected as a lens for photographing, and photographing of the monitoring target area is started (step S102).

撮影開始後は、カメラ１００から画像処理サーバ３１１へ映像データが随時伝送される（ステップＳ１０３）。また、画像処理サーバ３１１においては、複眼レンズ１０２で撮影された映像データに基づく侵入者検知処理（異常検知処理）が開始される（ステップＳ１０４）。   After the start of shooting, video data is transmitted from the camera 100 to the image processing server 311 as needed (step S103). In addition, in the image processing server 311, intruder detection processing (abnormality detection processing) based on video data captured by the compound eye lens 102 is started (step S <b> 104).

そして、画像処理サーバ３１１において、カメラ１００からの映像データに基づいて監視対象エリアにおける異常が検知されると（ステップＳ１０５）、映像監視システム管理装置３１２へ侵入者検知信号（異常検知信号）が通知される（ステップＳ１０６）。   When the image processing server 311 detects an abnormality in the monitoring target area based on the video data from the camera 100 (step S105), an intruder detection signal (abnormality detection signal) is notified to the video monitoring system management device 312. (Step S106).

映像監視システム管理装置３１２において、ステップＳ１０６にて通知された侵入者検知信号により異常検知が認識されると、カメラ１００へ単眼レンズ選択信号（レンズ切替信号）が通知される（ステップＳ１０７）。カメラ１００では、この単眼レンズ選択信号が受信されると、撮影するレンズを単眼レンズに切り替える処理が実行された後、撮影が開始される（ステップＳ１０８）。撮影された映像データは、随時、画像処理サーバ３１１へ伝送される（ステップＳ１０９）。   When the video surveillance system management apparatus 312 recognizes the abnormality detection by the intruder detection signal notified in step S106, the camera 100 is notified of a monocular lens selection signal (lens switching signal) (step S107). In the camera 100, when this monocular lens selection signal is received, processing for switching the lens to be photographed to a monocular lens is executed, and then photographing is started (step S108). The captured video data is transmitted to the image processing server 311 as needed (step S109).

画像処理サーバ３１１では、単眼レンズ１０１で撮影された映像データに基づく侵入者情報取得処理（前述した異常状態の認識機能による処理）が開始される（ステップＳ１１０）。また、ステップＳ１１０で取得される侵入者の顔や服装などの侵入者情報は、映像監視システム管理装置３１２へ通知される（ステップＳ１１１）。   The image processing server 311 starts intruder information acquisition processing (processing by the abnormal state recognition function described above) based on video data captured by the monocular lens 101 (step S110). The intruder information such as the intruder's face and clothes acquired in step S110 is notified to the video surveillance system management apparatus 312 (step S111).

なお、画像処理サーバ３１１において侵入者検知処理（ステップＳ１０４）と侵入者情報取得処理（ステップＳ１１０）とを切り替える方法としては、以下のような方法が考えられる。例えば、カメラ１００から出力される映像データには単眼レンズ１０１及び複眼レンズ１０２のいずれによって撮影されたものであるかを識別するための識別子が付されており、画像処理サーバ３１１ではこの識別子を識別し、受信した映像データが単眼レンズ１０１で撮影されたものである場合には、侵入者情報取得処理を行う。また、受信した映像データが複眼レンズ１０２で撮影されたものである場合には、侵入者検知処理を行う。   As a method of switching between the intruder detection process (step S104) and the intruder information acquisition process (step S110) in the image processing server 311, the following methods are conceivable. For example, the video data output from the camera 100 has an identifier for identifying which one of the monocular lens 101 and the compound eye lens 102 is taken, and the image processing server 311 identifies this identifier. If the received video data is captured by the monocular lens 101, intruder information acquisition processing is performed. If the received video data is taken with the compound eye lens 102, intruder detection processing is performed.

以上説明したように、図８に示される各装置間の連携動作により、侵入者を検知した場合等の異常検知時は画角の異なる複眼レンズ１０２で撮影された映像データが画像処理技術で解析され、異常検知後は単眼レンズ１０１で撮影されたより高画質の映像データが画像処理技術で解析されることで、異常検知の性能を向上させることが可能である。   As described above, the video data captured by the compound eye lens 102 having a different angle of view is analyzed by the image processing technique when an abnormality is detected such as when an intruder is detected by the cooperative operation between the devices shown in FIG. After the abnormality is detected, higher-quality video data captured by the monocular lens 101 is analyzed by an image processing technique, so that the abnormality detection performance can be improved.

次に、図９のシーケンス図について説明する。図９は、不均一複眼レンズ式ネットワークカメラ２００が用いられる映像監視システムに係るシーケンス図である。   Next, the sequence diagram of FIG. 9 will be described. FIG. 9 is a sequence diagram relating to a video surveillance system in which the non-uniform compound lens network camera 200 is used.

不均一複眼レンズ式ネットワークカメラ２００が用いられる映像監視システムと、レンズ切替式ネットワークカメラ１００が用いられる映像監視システムとの主な違いは、レンズの切り替えが不要なところである。よって、以下では、特にその部分に注目して説明する。なお、図９において図８と同様の処理を行う処理ステップについては、同一符号が付されている。   The main difference between the video surveillance system using the non-uniform compound-lens network camera 200 and the video surveillance system using the lens switching network camera 100 is that no lens switching is required. Therefore, the following description will be given with particular attention to that part. In FIG. 9, processing steps for performing the same processing as in FIG. 8 are given the same reference numerals.

まず、映像監視システム管理装置３１２から画像処理サーバ３１１へ、カメラ２００から伝送される映像データのうち、レンズＢ２０３〜レンズＤ２０５で撮像された映像データを処理する旨の複眼レンズ選択信号が通知される（ステップＳ２０１）。また、カメラ２００から画像処理サーバ３１１に対して、不均一複眼レンズ２０１のレンズＡ２０２〜レンズＤ２０５で撮像された映像データが送信されると（ステップＳ１０３・Ｓ１０９）、画像処理サーバ３１１では、その映像データのうち、レンズＢ２０３〜レンズＤ２０５で撮像された映像データについて侵入者検知処理が開始される（ステップＳ１０４）。   First, a compound eye lens selection signal for processing video data captured by the lens B 203 to lens D 205 among video data transmitted from the camera 200 is notified from the video monitoring system management device 312 to the image processing server 311. (Step S201). When the video data captured by the lens A202 to the lens D205 of the non-uniform compound eye lens 201 is transmitted from the camera 200 to the image processing server 311 (steps S103 and S109), the image processing server 311 displays the video. Among the data, the intruder detection process is started for the video data captured by the lens B203 to the lens D205 (step S104).

そして、画像処理サーバ３１１において、カメラ１００からの映像データに基づいて監視対象エリアにおける異常が検知されると（ステップＳ１０５）、映像監視システム管理装置３１２へ侵入者検知信号（異常検知信号）が通知される（ステップＳ１０６）。   When the image processing server 311 detects an abnormality in the monitoring target area based on the video data from the camera 100 (step S105), an intruder detection signal (abnormality detection signal) is notified to the video monitoring system management device 312. (Step S106).

ここで、映像監視システム管理装置３１２において、ステップＳ１０６で通知された侵入者検知信号により異常検知が認識されると、画像処理サーバ３１１へ、カメラ２００から伝送される映像データのうち、レンズＡ２０２で撮像された映像データを処理する旨の単眼レンズ選択信号が通知される（ステップＳ２０２）。   Here, when the video monitoring system management apparatus 312 recognizes the abnormality detection by the intruder detection signal notified in step S106, the lens A202 out of the video data transmitted from the camera 200 to the image processing server 311. A monocular lens selection signal for processing the captured video data is notified (step S202).

画像処理サーバ３１１では、この単眼レンズ選択信号が受信されると、カメラ２００から送信された映像データのうち、レンズＡ２０２で撮像された映像データについて侵入者情報取得処理が実行される（ステップＳ１１０）。そして、ステップＳ１１０で取得された侵入者の顔や服装などの侵入者情報は、映像監視システム管理装置３１２へ通知される（ステップＳ１１１）。   When the monocular lens selection signal is received, the image processing server 311 performs intruder information acquisition processing on the video data captured by the lens A202 among the video data transmitted from the camera 200 (step S110). . Then, the intruder information such as the intruder's face and clothes acquired in step S110 is notified to the video surveillance system management device 312 (step S111).

すなわち、レンズ切替式ネットワークカメラ１００の場合（図８）には、単眼レンズ１０１で撮像された映像データと複眼レンズ１０２で撮像された映像データの２種類の映像データが個別に存在していたため、画像処理サーバは「侵入者検知処理」（ステップＳ１０４）と「侵入者情報取得処理」（ステップＳ１１０）のいずれを実行すべきかについて、カメラ１００から伝送されてくる映像データから判断することができた。しかしながら、不均一複眼レンズ式ネットワークカメラ２００の場合（図９）には、常に、複眼レンズ１０２で撮影された映像データのみが伝送されてくる。そのため、レンズＡ、及びレンズＢ２０３〜レンズＤ２０５で撮像された撮像データのいずれについて画像処理をすべきかについては、映像監視システム管理装置３１２によって複眼レンズ選択信号（ステップＳ２０１）及び単眼レンズ選択信号（ステップＳ２０２）によって制御されることになる。   That is, in the case of the lens-switchable network camera 100 (FIG. 8), two types of video data, that is, video data captured by the monocular lens 101 and video data captured by the compound eye lens 102 existed individually. The image processing server was able to determine from the video data transmitted from the camera 100 whether to execute “intruder detection processing” (step S104) or “intruder information acquisition processing” (step S110). . However, in the case of the non-uniform compound-lens network camera 200 (FIG. 9), only video data captured by the compound-eye lens 102 is always transmitted. Therefore, the image monitoring system management device 312 determines whether the image processing should be performed for the lens A and the image data captured by the lens B 203 to the lens D 205 by the video surveillance system management device 312 and the monocular lens selection signal (step S201). S202).

なお、図９では説明を簡略化するために、侵入者検知処理（ステップＳ１０４）が完了した後に、侵入者情報取得処理（ステップＳ１１０）が実行されることとなっているが、侵入者情報取得処理は侵入者検知処理と並列に実行されるようになっていてもよい。すなわち、侵入者検知処理において侵入者が検知された場合には、ただちにレンズＡ２０２の映像データを用いて侵入者情報取得処理が実行され、その後、侵入者情報が映像監視システム管理装置３１２に送信されるようになっていてもよい。   In FIG. 9, in order to simplify the description, the intruder information acquisition process (step S110) is executed after the intruder detection process (step S104) is completed. The process may be executed in parallel with the intruder detection process. That is, when an intruder is detected in the intruder detection process, the intruder information acquisition process is immediately executed using the video data of the lens A 202, and then the intruder information is transmitted to the video surveillance system management device 312. It may come to be.

（画像処理サーバ及び映像監視システム管理装置の構成）
最後に、画像処理サーバ３１１及び映像監視システム管理装置３１２の構成例を図１０に示す。 (Configuration of image processing server and video monitoring system management device)
Finally, FIG. 10 shows a configuration example of the image processing server 311 and the video monitoring system management apparatus 312.

（画像処理サーバ３１１）
画像処理サーバ３１１は、映像データ受信部３２１と、異常検知部３２２と、情報取得部３２３と、を有する。 (Image processing server 311)
The image processing server 311 includes a video data receiving unit 321, an abnormality detection unit 322, and an information acquisition unit 323.

映像データ受信部３２１は、カメラ１００又はカメラ２００から出力される映像データを受信する。   The video data receiving unit 321 receives video data output from the camera 100 or the camera 200.

異常検知部３２２は、カメラ１００及びカメラ２００が有する大きさの異なる少なくとも２つのレンズ（図１のレンズＡ１０３〜レンズＤ１０６，又は、図２のレンズＢ２０３〜レンズＤ２０５）のうち、より小さなレンズ（図１のレンズＡ１０３〜レンズＤ１０６、又は、図２のレンズＢ２０３〜レンズＤ２０５）において受光された光から生成された映像データを用いて、周囲の状況の異常（侵入者検知等）を検知する。   The anomaly detection unit 322 has a smaller lens (see FIG. 1) among at least two lenses (the lens A103 to the lens D106 in FIG. 1 or the lens B203 to the lens D205 in FIG. 2) that the camera 100 and the camera 200 have different sizes. The image data generated from the light received by the first lens A103 to lens D106 or the lens B203 to lens D205 in FIG. 2 is used to detect abnormal conditions in the surroundings (such as intruder detection).

情報取得部３２３は、異常検知部３２２において周囲の状況の異常が検知された場合には、カメラ１００及びカメラ２００が有する大きさの異なる少なくとも２つのレンズのうち、より大きなレンズ（図１の単眼レンズ１０１、又は、図２のレンズＡ２０２）において受光された光から生成された映像データに含まれる情報であって、異常が検知された状況に関する情報（侵入者の顔や性別、身長、持ち物等）を取得する。   When the abnormality detection unit 322 detects an abnormality in the surrounding situation, the information acquisition unit 323 has a larger lens (a monocular in FIG. 1) among at least two lenses having different sizes of the camera 100 and the camera 200. Information included in the video data generated from the light received by the lens 101 or the lens A 202 in FIG. 2, and information related to the situation in which an abnormality is detected (intruder's face, gender, height, belongings, etc. ) To get.

（映像監視システム管理装置３１２）
映像監視システム管理装置３１２は、第１レンズ切替信号出力部３３１と、第２レンズ切替信号出力部３３２と、を有する。 (Video surveillance system management device 312)
The video monitoring system management device 312 includes a first lens switching signal output unit 331 and a second lens switching signal output unit 332.

第１レンズ切替信号出力部３３１は、カメラ１００又はカメラ２００が有する大きさの異なる少なくとも２つのレンズのうち、より小さなレンズを選択するためのレンズ切替信号をカメラ１００又はカメラ２００に出力する。より具体的には、第１レンズ切替信号出力部３３１は、図８のステップＳ１０１、又は、図９のステップＳ２０１の処理を実行する。   The first lens switching signal output unit 331 outputs a lens switching signal for selecting a smaller lens among at least two lenses having different sizes of the camera 100 or the camera 200 to the camera 100 or the camera 200. More specifically, the first lens switching signal output unit 331 executes the process of step S101 in FIG. 8 or step S201 in FIG.

第２レンズ切替信号出力部３３２は、異常検知部３２２において周囲の状況の異常が検知された場合には、カメラ１００及びカメラ２００が有する大きさの異なる少なくとも２つのレンズのうち、大きさの異なる少なくとも２つのレンズのうち、より大きなレンズを選択するためのレンズ切替信号をカメラ１００又はカメラ２００に出力する。より具体的には、第２レンズ切替信号出力部３３２は、例えば、図８のステップＳ１０７、又は、図９のステップＳ２０２の処理を実行する。   The second lens switching signal output unit 332 is different in size among at least two lenses having different sizes of the camera 100 and the camera 200 when the abnormality detection unit 322 detects an abnormality in the surroundings. A lens switching signal for selecting a larger lens among at least two lenses is output to the camera 100 or the camera 200. More specifically, the second lens switching signal output unit 332 executes, for example, the process of step S107 in FIG. 8 or step S202 in FIG.

上述した画像処理サーバ３１１及び映像監視システム管理装置３１２は、図示しないＣＰＵ（Central Processing Unit）、ＲＡＭ（Random Access Memory）等のメモリ、ハードディスク等の記憶装置、ネットワークインタフェース等の一般的なコンピュータの構成と同様の構成により実現される。また、画像処理サーバ３１１と映像監視システム管理装置３１２の各構成の機能は、例えば、ＣＰＵがハードディスク等に記憶されているプログラムを読み出して実行することにより、もしくは、例えば、ＦＰＧＡ（Field Programmable Gate Array）においてシーケンサロジックをカスタム設計することに実現される機能である。また、カメラ１００及びカメラ２００の各機能も同様である。   The image processing server 311 and the video monitoring system management device 312 described above are configured as a general computer such as a memory (not shown) such as a CPU (Central Processing Unit) and a RAM (Random Access Memory), a storage device such as a hard disk, and a network interface. This is realized by the same configuration as in FIG. The functions of the components of the image processing server 311 and the video surveillance system management apparatus 312 are, for example, when the CPU reads and executes a program stored in a hard disk or the like, or, for example, an FPGA (Field Programmable Gate Array) This function is realized by custom design of the sequencer logic. The functions of the camera 100 and the camera 200 are the same.

なお、図１に示される構成においては、レンズ切替部１０７によって単眼レンズ１０１と複眼レンズ１０２とが切り換えられることにより、いずれかのレンズで撮像された映像データが出力されることとなっているが、両映像データを切り換えて出力する方法としては、別の方法が用いられてもよい。例えば、単眼レンズ１０１と複眼レンズ１０２とで集められた光をそれぞれ検知するための２つの受像部があり、それらの受像部を切り替えるための切替部があってもよい。また、両レンズからの光によってそれぞれ映像データを生成するための２つの映像データ生成部がさらに存在し、それらの映像データ生成部を切り替えるための切替部があってもよい。   In the configuration shown in FIG. 1, the lens switching unit 107 switches between the monocular lens 101 and the compound eye lens 102, so that video data captured by one of the lenses is output. As a method of switching and outputting both video data, another method may be used. For example, there may be two image receiving units for detecting light collected by the monocular lens 101 and the compound lens 102, and there may be a switching unit for switching between the image receiving units. Further, there may be two video data generation units for generating video data by the light from both lenses, and there may be a switching unit for switching between the video data generation units.

また、上述した実施形態においては、画像処理サーバ３１１と映像監視システム管理装置３１２が別々の装置となっていたが、これらは一つの装置となっていてもよい。   In the above-described embodiment, the image processing server 311 and the video surveillance system management device 312 are separate devices, but they may be a single device.

また、画像処理による異常検知と異常状態の認識は、上記実施形態では画像処理サーバ３１１において行われるが、カメラ１００、２００内に画像処理部を設けて行われるようになっていてもよい。   In addition, the abnormality detection and the recognition of the abnormal state by image processing are performed in the image processing server 311 in the above embodiment, but may be performed by providing an image processing unit in the cameras 100 and 200.

また、画像処理サーバ３１１や映像監視システム管理装置３１２、画像記録装置（図示せず）に画像を記録する際には、どのレンズの画像であるか等を示すレンズの位置情報を画像に対応付けて記録し、管理することが好ましい。このとき、カメラ１００、２００側から画像にレンズ位置情報が対応付けられて送信される。   Further, when recording an image in the image processing server 311, the video surveillance system management device 312, or an image recording device (not shown), lens position information indicating which lens image is associated with the image. Are preferably recorded and managed. At this time, lens position information is transmitted from the cameras 100 and 200 in association with the image.

また、画像をモニタに表示する際、それぞれの画像にレンズの位置情報を重畳表示させたり、見やすいようにレンズＡ１０３の画像を左上、レンズＢ１０４の画像を右上、レンズＣ１０５の画像を左下、レンズＤ１０６の画像を右下、といったように人間の視点に対応させて表示させたり、いずれか一つの画像を選択して切り出し、電子ズームして表示させたりしてもよい。また、これらの処理は、映像受信側で行われても、カメラ側で行われてもよい。   Further, when displaying images on the monitor, the position information of the lens is superimposed on each image, or the image of the lens A103 is displayed on the upper left, the image of the lens B104 is displayed on the upper right, the image of the lens C105 is displayed on the lower left, and the lens D106. These images may be displayed corresponding to the human viewpoint, such as in the lower right, or any one of the images may be selected and cut out and displayed with electronic zoom. Also, these processes may be performed on the video reception side or on the camera side.

（付記）
以上に、本発明に係る実施形態について詳細に説明したことからも明らかなように、前述の実施形態の一部または全部は、以下の各付記のようにも記載することができる。しかしながら、以下の各付記は、あくまでも、本発明の単なる例示に過ぎず、本発明は、かかる場合のみに限るものではない。 (Appendix)
As is apparent from the detailed description of the embodiments according to the present invention, a part or all of the above-described embodiments can be described as the following supplementary notes. However, the following supplementary notes are merely examples of the present invention, and the present invention is not limited only to such cases.

（付記１）
周囲の状況を監視するための映像監視システムに用いられる撮像装置（例えば、図１のカメラ１００、又は、図２のカメラ２００）であって、
外部からの光を受光するための特性の異なる少なくとも２つのレンズを有する第１のレンズ部（例えば、図１の複眼レンズ１０２、又は、図２のレンズＢ２０３〜レンズＤ２０５）と、
外部からの光を受光して、前記第１のレンズ部によって撮像される画像よりも高画質の画像を撮像するための第２のレンズ部（例えば、図１の単眼レンズ１０１、又は、図２のレンズＡ２０２）と、
前記第１のレンズ及び前記第２のレンズの少なくとも一方によって撮像された映像データを出力する出力部（例えば、図１のネットワークインタフェース１１０、又は、図２のネットワークインタフェース２０８）と、
を有し、
前記第１のレンズ部及び前記第２のレンズ部によって撮像された前記映像データは、外部の装置において選択して利用されることを特徴とする撮像装置。 (Appendix 1)
An imaging apparatus (for example, the camera 100 in FIG. 1 or the camera 200 in FIG. 2) used in a video monitoring system for monitoring the surrounding situation,
A first lens unit (for example, the compound eye lens 102 in FIG. 1 or the lens B203 to the lens D205 in FIG. 2) having at least two lenses having different characteristics for receiving light from the outside;
A second lens unit (for example, the monocular lens 101 in FIG. 1 or FIG. 2) that receives light from the outside and captures an image with higher image quality than the image captured by the first lens unit. Lens A202),
An output unit (for example, the network interface 110 in FIG. 1 or the network interface 208 in FIG. 2) that outputs video data captured by at least one of the first lens and the second lens;
Have
The imaging apparatus, wherein the video data captured by the first lens unit and the second lens unit is selected and used in an external device.

この構成によれば、複眼レンズが備えられた１台のカメラによって例えば画角の異なる複数の画像が取得されることで、異常検知時の非検出や誤り検出の発生を抑制し、かつ、異常検知後は異常検知を行ったカメラと同一のカメラにおいて、より高画質な画像によって詳細な異常状態の認識を可能とする。さらに、１台のカメラで監視状況によって撮影特性を変更することが可能であるため、設備投資の低減と、映像監視システムとしての異常検知性能の向上の両方の効果を期待できる。   According to this configuration, for example, a plurality of images having different angles of view are acquired by a single camera equipped with a compound eye lens, so that occurrence of non-detection and error detection at the time of abnormality detection is suppressed, and abnormality is detected. After the detection, in the same camera as the camera that detected the abnormality, it is possible to recognize the detailed abnormality state with a higher quality image. Furthermore, since it is possible to change the shooting characteristics depending on the monitoring status with a single camera, it is possible to expect both the reduction in equipment investment and the improvement in anomaly detection performance as a video monitoring system.

（付記２）
前記第１のレンズ部は複眼レンズ（例えば、図１の複眼レンズ１０２）であり、前記第２のレンズ部は単眼レンズ（例えば、図１の単眼レンズ１０１）であり、
外部からレンズ切替信号を受信した場合には前記単眼レンズと前記複眼レンズとを切り替えるレンズ切替部（例えば、図１のレンズ切替部１０７）をさらに有し、
前記出力部は、前記レンズ切替部で切り換えられた前記単眼レンズ又は前記複眼レンズによって撮像された前記映像データを出力することを特徴とする付記１に記載の撮像装置。 (Appendix 2)
The first lens unit is a compound eye lens (for example, the compound lens 102 in FIG. 1), and the second lens unit is a monocular lens (for example, the monocular lens 101 in FIG. 1).
A lens switching unit (for example, the lens switching unit 107 in FIG. 1) that switches between the monocular lens and the compound eye lens when a lens switching signal is received from the outside;
The imaging apparatus according to appendix 1, wherein the output unit outputs the video data captured by the monocular lens or the compound eye lens switched by the lens switching unit.

この構成によれば、複眼レンズが備えられた１台のカメラによって例えば画角の異なる複数の画像が取得されることで、異常検知時の非検出や誤り検出の発生を抑制し、かつ、異常検知後は異常検知を行ったカメラと同一のカメラにおいて、より高画質な画像によって詳細な異常状態の認識を可能とする。さらに、１台のカメラで監視状況によって撮影特性を変更することが可能であるため、設備投資の低減と、映像監視システムとしての異常検知性能の向上の両方の効果を期待できる。   According to this configuration, for example, a plurality of images having different angles of view are acquired by a single camera equipped with a compound eye lens, so that occurrence of non-detection and error detection at the time of abnormality detection is suppressed, and abnormality is detected. After the detection, in the same camera as the camera that detected the abnormality, it is possible to recognize the detailed abnormality state with a higher quality image. Furthermore, since it is possible to change the shooting characteristics depending on the monitoring status with a single camera, it is possible to expect both the reduction in equipment investment and the improvement in anomaly detection performance as a video monitoring system.

（付記３）
前記第１のレンズ部（例えば、図２のレンズＢ２０３〜レンズＤ２０５）と前記第２のレンズ部（例えば、図２のレンズＡ２０２）は、一体となって構成されている（例えば、図２の不均一複眼レンズ２０１）ことを特徴とする付記１に記載の撮像装置。 (Appendix 3)
The first lens portion (for example, the lens B203 to the lens D205 in FIG. 2) and the second lens portion (for example, the lens A202 in FIG. 2) are integrally formed (for example, in FIG. 2). The imaging apparatus according to appendix 1, which is a non-uniform compound eye lens 201).

機械的に動作する部分は故障しやすいため、少なくとも２つのレンズを一体として構成することにより、故障率の低減とメンテナンス負荷の軽減が実現可能である。   Since the mechanically operating part is prone to failure, it is possible to reduce the failure rate and the maintenance load by configuring at least two lenses as one body.

（付記４）
前記特性とは、前記少なくとも２つのレンズの画角であることを特徴とする付記１から３のいずれか一項に記載の撮像装置。 (Appendix 4)
The imaging device according to any one of appendices 1 to 3, wherein the characteristic is an angle of view of the at least two lenses.

この構成によれば、画角の異なる少なくとも２つのレンズによって画角の異なる複数の画像が取得されることで、異常検知時の非検出や誤り検出の発生を抑制することが可能である
（付記５）
撮像装置（例えば、図１のカメラ１００、又は、図２のカメラ２００）と、前記撮像装置から映像データを受信するサーバ装置（例えば、図１０の画像処理サーバ３１１及び映像監視システム管理装置３１２）と、を有し、周囲の状況を監視するための映像監視システムであって、
前記撮像装置は、
外部からの光を受光するための特性の異なる少なくとも２つのレンズを有する第１のレンズ部（例えば、図１の複眼レンズ１０２、又は、図２のレンズＢ２０３〜レンズＤ２０５）と、
外部からの光を受光して、前記第１のレンズ部によって撮像される画像よりも高画質の画像を撮像するための第２のレンズ部（例えば、図１の単眼レンズ１０１、又は、図２のレンズＡ２０２）と、
前記第１のレンズ及び前記第２のレンズの少なくとも一方によって撮像された映像データを出力する出力部（例えば、図１のネットワークインタフェース１１０、又は、図２のネットワークインタフェース２０８）と、
を有し、
前記サーバ装置は、
前記映像データを受信する映像データ受信部（例えば、図１０の映像データ受信部３２１）と、
前記第１のレンズにおいて受光された前記光から生成された映像データを用いて、前記周囲の状況の異常を検知する異常検知部（例えば、図１０の異常検知部３２２）と、
前記異常検知部において前記周囲の状況の異常が検知された場合には、前記第２のレンズにおいて受光された前記光から生成された映像データに含まれる情報であって、前記異常が検知された状況に関する情報を取得するための情報取得部（例えば、図１０の情報取得部３２３）と、
を有することを特徴とする映像監視システム。 According to this configuration, it is possible to suppress occurrence of non-detection and error detection at the time of abnormality detection by acquiring a plurality of images having different angles of view by at least two lenses having different angles of view. 5)
An imaging apparatus (for example, the camera 100 in FIG. 1 or the camera 200 in FIG. 2) and a server apparatus that receives video data from the imaging apparatus (for example, the image processing server 311 and the video monitoring system management apparatus 312 in FIG. 10). And a video surveillance system for monitoring the surrounding situation,
The imaging device
A first lens unit (for example, the compound eye lens 102 in FIG. 1 or the lens B203 to the lens D205 in FIG. 2) having at least two lenses having different characteristics for receiving light from the outside;
A second lens unit (for example, the monocular lens 101 in FIG. 1 or FIG. 2) that receives light from the outside and captures an image with higher image quality than the image captured by the first lens unit. Lens A202),
An output unit (for example, the network interface 110 in FIG. 1 or the network interface 208 in FIG. 2) that outputs video data captured by at least one of the first lens and the second lens;
Have
The server device
A video data receiving unit (for example, the video data receiving unit 321 in FIG. 10) that receives the video data;
Using an image data generated from the light received by the first lens, an abnormality detection unit (for example, the abnormality detection unit 322 in FIG. 10) that detects an abnormality in the surrounding situation;
In the case where an abnormality in the surrounding situation is detected in the abnormality detection unit, the abnormality is detected and is information included in video data generated from the light received by the second lens. An information acquisition unit (for example, the information acquisition unit 323 in FIG. 10) for acquiring information about the situation;
A video surveillance system comprising:

この構成によれば、複眼レンズが備えられた１台のカメラによって例えば画角の異なる複数の画像が取得されることで、異常検知時の非検出や誤り検出の発生を抑制し、かつ、異常検知後は異常検知を行ったカメラと同一のカメラにおいて、より高画質な画像によって詳細な異常状態の認識を可能とする。さらに、１台のカメラで監視状況によって撮影特性を変更することが可能であるため、設備投資の低減と、映像監視システムとしての異常検知性能の向上の両方の効果を期待できる。   According to this configuration, for example, a plurality of images having different angles of view are acquired by a single camera equipped with a compound eye lens, so that occurrence of non-detection and error detection at the time of abnormality detection is suppressed, and abnormality is detected. After the detection, in the same camera as the camera that detected the abnormality, it is possible to recognize the detailed abnormality state with a higher quality image. Furthermore, since it is possible to change the shooting characteristics depending on the monitoring status with a single camera, it is possible to expect both the reduction in equipment investment and the improvement in anomaly detection performance as a video monitoring system.

（付記６）
前記第１のレンズを選択するためのレンズ切替信号を前記撮像装置に出力する第１レンズ切替信号出力部（例えば、図１０の第１レンズ切替信号出力部３３１）と、
前記異常検知部において前記異常が検知された場合には、前記第２のレンズを選択するためのレンズ切替信号を前記撮像装置に出力する第２レンズ切替信号出力部（例えば、図１０の第２レンズ切替信号出力部３３２）と、
を有する付記５に記載の映像監視システム。 (Appendix 6)
A first lens switching signal output unit (for example, the first lens switching signal output unit 331 in FIG. 10) that outputs a lens switching signal for selecting the first lens to the imaging device;
When the abnormality is detected in the abnormality detection unit, a second lens switching signal output unit (for example, the second lens switching signal output unit in FIG. 10) outputs a lens switching signal for selecting the second lens to the imaging device. Lens switching signal output unit 332),
The video surveillance system according to claim 5, further comprising:

この構成によれば、複眼レンズが備えられた１台のカメラによって例えば画角の異なる複数の画像が取得されることで、異常検知時の非検出や誤り検出の発生を抑制し、かつ、異常検知後は異常検知を行ったカメラと同一のカメラにおいて、より高画質な画像によって詳細な異常状態の認識を可能とする。さらに、１台のカメラで監視状況によって撮影特性を変更することが可能であるため、設備投資の低減と、映像監視システムとしての異常検知性能の向上の両方の効果を期待できる。   According to this configuration, for example, a plurality of images having different angles of view are acquired by a single camera equipped with a compound eye lens, so that occurrence of non-detection and error detection at the time of abnormality detection is suppressed, and abnormality is detected. After the detection, in the same camera as the camera that detected the abnormality, it is possible to recognize the detailed abnormality state with a higher quality image. Furthermore, since it is possible to change the shooting characteristics depending on the monitoring status with a single camera, it is possible to expect both the reduction in equipment investment and the improvement in anomaly detection performance as a video monitoring system.

１００ レンズ切替式ネットワークカメラ
１０１ 単眼レンズ
１０２ 複眼レンズ
１０３ レンズＡ
１０４ レンズＢ
１０５ レンズＣ
１０６ レンズＤ
１０７ レンズ切替部
１０８ 受像部
１０９ 映像データ生成部
１１０ ネットワークインタフェース
１１１ ネットワークケーブル
２００ 不均一複眼レンズ式ネットワークカメラ
２０１ 不均一複眼レンズ
２０２ レンズＡ
２０３ レンズＢ
２０４ レンズＣ
２０５ レンズＤ
２０６ 受像部
２０７ 映像データ生成部
２０８ ネットワークインタフェース
２０９ ネットワークケーブル
３１１ 画像処理サーバ
３１２ 映像監視システム管理装置
３２０ ＬＡＮ
３２１ 映像データ受信部
３２２ 異常検知部
３２３ 情報取得部
３３０ 公衆網
３３１ 第１レンズ切替信号出力部
３３２ 第２レンズ切替信号出力部
５１０ カメラ取付具
５２０ 壁
５４１、５４２ 塀
５５１、５５２ 門
５６０ 木
５７０ 侵入者 DESCRIPTION OF SYMBOLS 100 Lens switching type network camera 101 Monocular lens 102 Compound eye lens 103 Lens A
104 Lens B
105 Lens C
106 Lens D
107 Lens switching unit 108 Image receiving unit 109 Video data generating unit 110 Network interface 111 Network cable 200 Nonuniform compound eye lens type network camera 201 Nonuniform compound eye lens 202 Lens A
203 Lens B
204 Lens C
205 Lens D
206 Image Receiver 207 Video Data Generator 208 Network Interface 209 Network Cable 311 Image Processing Server 312 Video Monitoring System Management Device 320 LAN
321 Video data reception unit 322 Anomaly detection unit 323 Information acquisition unit 330 Public network 331 First lens switching signal output unit 332 Second lens switching signal output unit 510 Camera fixture 520 Wall 541, 542 551, 552 Gate 560 Tree 570 Intrusion Person

Claims (1)

周囲の状況を監視するための映像監視システムに用いられる撮像装置であって、
外部からの光を受光するための特性の異なる少なくとも２つのレンズを有する第１のレンズ部と、
外部からの光を受光して、前記第１のレンズ部によって撮像される画像よりも高画質の画像を撮像するための第２のレンズ部と、
前記第１のレンズ及び前記第２のレンズの少なくとも一方によって撮像された映像データを出力する出力部と、
を有し、
前記第１のレンズ部及び前記第２のレンズ部によって撮像された前記映像データは、外部の装置において選択して利用されることを特徴とする撮像装置。 An imaging device used in a video monitoring system for monitoring surrounding conditions,
A first lens unit having at least two lenses having different characteristics for receiving light from the outside;
A second lens unit for receiving light from the outside and capturing an image having a higher image quality than an image captured by the first lens unit;
An output unit for outputting video data captured by at least one of the first lens and the second lens;
Have
The imaging apparatus, wherein the video data captured by the first lens unit and the second lens unit is selected and used in an external device.

Images