JP2009111677A - 映像撮像制御システム - Google Patents

Abstract

【課題】通常稼働するシステムに加えて無駄な予備機を準備するなどのコストをかけずに、映像撮像装置が故障して映像が表示・記録できないような状況になった場合でも、この障害が生じた映像撮像装置によって撮像されるべき撮像対象（撮影場所）に関する情報を取得できるようにする。
【解決手段】ネットワークに接続されている監視カメラ１１〜１３が正常に撮像を行っているか否かをネットワークを通じて監視し、例えば監視カメラ１２が撮像不可能な状態となった旨が検出された場合には、近隣の監視カメラ（例えば、監視カメラ１１）の集音機能を用いて、撮像不可能な状態となった監視カメラ１２の撮影領域の音声情報を取得することで、撮像不可能な状態となった監視カメラ１２の撮影領域における情報を補完して取得することが可能となる。
【選択図】図１

Description

本発明は、ネットワークを通じて伝送される映像の受信や記録、表示を行う映像記録技術に関し、特に、ネットワークを通じて伝送される映像の受信や記録、表示などの動作制御を行う映像撮像制御システムに関する。

従来、保守・保安を目的として監視カメラによる映像の記録を行う映像記録装置を利用した映像撮像制御システムが存在している。この映像撮像制御システムに利用される映像撮像装置及び映像記録装置は、常時稼働して映像の記録を行うことが要求されている。したがって、故障などの原因によって、映像撮像装置が映像を撮像することができなくなった場合や映像記録装置が映像を記録することができなくなった場合の対応策を準備しておくことが重要である。

一方、このような故障などの不具合発生に対する対応策として、下記の特許文献１〜３に開示されている技術が存在する。例えば、特許文献１には、平常時には監視領域を２台のカメラで分担して撮像し、一方のカメラが故障した場合には別のカメラによって監視領域全体の撮像を継続して行う技術が開示されている。また、下記の特許文献２には、複数のカメラ（撮像装置）が設置されているシステムにおいて、あるカメラが故障した場合には、別のカメラの撮像方向やその他の撮像機能を変更制御することで、故障したカメラの撮像領域の撮像を継続して行う技術が開示されている。

さらに、ここ数年、より臨場感を再現するために、撮像情報だけでなく音声情報も同時に集音して記録するようなシステムも増えてきている。また、複数の映像及び音声を同時に表示、再生するような監視システムの場合には、監視係員が同時に複数の表示画面を閲覧しながら複数の異なる監視領域における音声を聴取することになるため、音声の聞き取りが困難になってしまうという問題があった。こうした問題に対処するため、例えば、下記の特許文献３には、音声を表示画面上にビジュアル化して表示するとともに、異常音声を検出して優先的に異常音声の出力を行う技術が開示されている。
特開２００７−０５０８６２号公報 特開２００７−２３５６５５号公報 特開２００２−３００５６９号公報

しかしながら、特許文献１や特許文献２に開示されている技術によれば、設置されているカメラが故障した場合に、本来は別の撮像領域を撮像しているカメラによって故障カメラの撮像領域を補完して撮像するため、設置カメラの台数が少ないと、映像がどうしても小さくなったり見にくくなったりしてしまう場合がある。

例えば、特許文献１に開示されている技術では、例えば、カメラの焦点距離を調整するため、撮像画像全体が小さくなってしまうという問題がある。また、特許文献２に開示されている技術では、カメラのパン・チルト・ズーム（ＰＴＺ）制御を行うため、例えば、ズームを行うことで撮像画像が小さくならないようにすることが可能であるが、しかしながら、高性能・高倍率のＰＴＺカメラを設置することで、コストが高くなってしまう可能性がある。

また、特許文献３に開示されている技術では、リアルタイムで監視する場合でなく後から事象の確認をしたい場合には再生する音声の選択ができないため、事象の確認を行いにくいという問題がある。

上記の課題を解決するため、本発明は、映像撮像装置が映像を撮像したり、映像を記録したりすることが不可能な状況になった場合（すなわち、映像撮像装置に故障が発生した場合や映像撮像装置で撮像された映像の伝送又は記録機能に障害が生じて、映像の記録が不可能となった場合など）でも、この障害が生じた映像撮像装置によって撮像されるべき撮像対象（撮影場所）に関する情報を取得することが可能な、低コストでかつ効率的な映像撮像制御システムを提供することを目的とする。

上記の目的を達成するため、本発明によれば、複数の映像撮像装置と、複数の映像記録装置と、制御装置とが、ネットワークにより接続された映像撮像制御システムであって、
前記複数の映像撮像装置のそれぞれが、
所定の場所を撮像する映像撮像手段と、
前記映像撮像手段によって撮像された映像を、前記複数の映像記録装置のうちの所定の映像記録装置に送信する映像送信手段と、
前記所定の場所の音声を収集する集音手段と、
前記集音手段によって収集された音声を、前記複数の映像記録装置のうちの所定の映像記録装置に送信する音声送信手段と、
前記制御装置から受信した制御信号に基づいて、前記集音手段における集音方向、前記集音手段による集音の指向性、前記集音手段の集音感度のいずれかの変更制御を行う集音制御手段とを有し、
前記複数の映像記録装置のそれぞれが、
前記複数の映像撮像装置のうちの所定の映像撮像装置によって送信された前記映像を受信する映像受信手段と、
前記映像受信手段によって受信した前記映像を記録媒体に記録する映像記録手段と、
前記複数の映像撮像装置のうちの前記所定の映像撮像装置によって送信された前記音声を受信する音声受信手段と、
前記音声受信手段によって受信した前記音声を記録媒体に記録する音声記録手段と、
前記複数の映像撮像装置のうちの前記所定の映像撮像装置からの映像受信状態及び音声受信状態を監視する映像撮像装置監視手段と、
前記映像撮像装置監視手段によって前記複数の映像撮像装置のうちの前記所定の映像撮像装置から前記映像又は前記音声の受信ができなくなった状態が検出された場合には、前記所定の映像撮像装置から前記映像又は前記音声の受信ができなくなった状態を通知する通知情報を前記制御装置に送信する稼動管理手段とを有し、
前記制御装置が、
前記複数の映像撮像装置のそれぞれと、前記複数の映像撮像装置のそれぞれによって撮像された前記映像の記録先に設定されている前記複数の映像記録装置のそれぞれとの対応関係情報を含む映像管理情報を格納する映像管理情報格納手段と、
前記複数の映像撮像装置のうちのいずれかの映像撮像装置に障害が発生した場合に、前記障害が発生した映像撮像装置の撮像領域の音声を他の映像撮像装置によって集音するために、前記他の映像撮像装置の前記集音手段における集音方向、前記他の映像撮像装置の前記集音手段による集音の指向性、前記他の映像撮像装置の前記集音手段の集音感度のいずれかの変更制御に関する障害対応設定情報を格納する障害対応設定情報格納手段と、
前記映像記録装置の前記稼動管理手段から受信した前記通知情報によって特定された、前記障害の発生した前記映像撮像装置に関する前記障害対応設定情報を参照して、前記他の映像撮像装置の前記集音手段における集音方向、前記他の映像撮像装置の前記集音手段による集音の指向性、前記他の映像撮像装置の前記集音手段の集音感度のいずれかの変更制御を行うための前記制御信号を前記他の映像撮像装置に送信する映像撮像装置制御手段と、
前記映像記録装置の前記稼動管理手段から受信した前記通知情報によって特定された前記障害の発生した前記映像撮像装置に関する前記障害対応設定情報に基づいて、前記映像管理情報の更新を行う情報管理手段とを、
有する映像撮像制御システムが提供される。

さらに、本発明によれば、上記の構成に加えて、前記制御装置の機能が、前記複数の映像記録装置のいずれか１つに組み込まれている映像撮像制御システムが提供される。

さらに、本発明によれば、上記の構成に加えて、前記複数の映像記録装置のそれぞれが、
前記映像受信手段で受信した前記映像を表示する映像表示手段と、
前記音声受信手段によって受信した前記音声を外部に報知する音声出力手段と、
前記音声受信手段で受信した前記音声に関し、前記音声の音量又はその変化、前記音声の周波数又はその変化のいずれかに基づいて前記音声の特徴を検出する音声特徴検出手段と、
前記音声特徴検出手段で検出された前記音声の特徴が、前記所定の場所において平常とは異なる事象の発生を示すものであると判断し、前記音声出力手段に対して前記特徴を有する音声の外部への報知を指示するか、あるいは、前記映像表示手段において前記特徴を有する音声に対応する映像を強調表示するように制御する出力制御手段とを、
有する映像撮像制御システムが提供される。

また、上記の目的を達成するため、本発明によれば、複数の映像撮像装置と、複数の映像表示装置とが、ネットワークにより接続された映像撮像制御システムであって、
前記複数の映像撮像装置のそれぞれが、
所定の場所を撮像する映像撮像手段と、
前記映像撮像手段によって撮像された映像を、前記複数の映像記録装置のうちの所定の映像記録装置に送信する映像送信手段と、
前記所定の場所の音声を収集する集音手段と、
前記集音手段によって収集された音声を、前記複数の映像記録装置のうちの所定の映像記録装置に送信する音声送信手段とを有し、
前記複数の映像表示装置のそれぞれが、
前記複数の映像撮像装置のうちの所定の映像撮像装置によって送信された前記映像を受信する映像受信手段と、
前記映像受信手段で受信した前記映像を表示する映像表示手段と、
前記複数の映像撮像装置のうちの所定の映像撮像装置によって送信された前記音声を受信する音声受信手段と、
前記音声受信手段によって受信した前記音声を外部に報知する音声出力手段と、
前記音声受信手段で受信した前記音声に関し、前記音声の音量又はその変化、前記音声の周波数又はその変化のいずれかに基づいて前記音声の特徴を検出する音声特徴検出手段と、
前記音声特徴検出手段で検出された前記音声の特徴が、前記所定の場所において平常とは異なる事象の発生を示すものであると判断し、前記音声出力手段に対して前記特徴を有する音声の外部への報知を指示するか、あるいは、前記映像表示手段において前記特徴を有する音声に対応する映像を強調表示するように制御する出力制御手段とを、
有する映像撮像制御システムが提供される。

本発明に係る映像撮像制御システムは、上記の構成を有しており、通常稼働するシステムに加えて無駄な予備機を準備するなどのコストをかけずに、映像撮像装置が故障して映像が表示・記録できないような状況になった場合でも、この障害が生じた映像撮像装置によって撮像されるべき撮像対象（撮影場所）に関する情報を取得することが可能となるという効果を有している。

以下、図面を参照しながら、本発明の第１〜第４の実施の形態について説明する。

＜第１の実施の形態＞
まず、本発明の第１の実施の形態について説明する。図１は、本発明の第１の実施の形態における映像撮像制御システムの構成の一例を示す図である。図１には、３階建てのビルの中に設けられている映像撮像制御システムが図示されている。この映像撮像制御システムでは、ビルの１階に８台の監視カメラ（映像撮像装置）１０〜１７（ただし、図１では、監視カメラ１０、１１、１７の３台のみ図示）、ビルの２階に５台の監視カメラ２０〜２４（ただし、図１では、監視カメラ２０、２１、２４の３台のみ図示）、ビルの３階に３台の監視カメラ３０〜３２が、それぞれ各階の所定の場所の撮像を行うように設置されている。なお、以下では、すべての監視カメラを表す際には、監視カメラ１０〜３２と表記する。

また、１階〜３階のすべての階を接続するためのＬＡＮ（Local Area Network）６０が設けられており、各監視カメラ１０〜３２は、ＬＡＮ６０に接続されている。また、ビルの各階には、映像記録装置４１〜４３が１台ずつ設置されており、これらの映像記録装置４１〜４３もＬＡＮ６０に接続されている。各階に設置されている映像記録装置４１〜４３は、監視カメラ１０〜３２によって撮像された映像を受信して記録する機能を有している。ここでは、通常の状態では、１階に設置されている映像記録装置４１は、８台の監視カメラ１０〜１７から映像を受信して記録し、２階に設置されている映像記録装置４２は、５台の監視カメラ２０〜２４から映像を受信して記録し、３階に設置されている映像記録装置４３は、３台の監視カメラ３０〜３２から映像を受信して記録するものとする。なお、ＬＡＮ６０は、有線ＬＡＮであってもよく、無線ＬＡＮであってもよい。

なお、以下の説明では、各監視カメラ１０〜３２によって撮像される映像フォーマットをＪＰＥＧ（Joint Photographic Experts Group）方式とし、各監視カメラ１０〜３２は、画像圧縮時の圧縮率を調整することで、３段階（高、中、低）の品質のＪＰＥＧ画像を生成することができるものとするが、上記の前提は一例に過ぎず、映像フォーマットは必ずしもＪＰＥＧ方式である必要はなく、また、必ずしも画像の品質を変えることが可能な映像フォーマットを利用する必要もない。

また、以下の説明では、各監視カメラ１０〜３２が映像と同時に音声を収集（集音）して記録又は送信する機能を有しているものとする。なお、上記のような監視カメラ１０〜３２は、撮像装置及び集音装置の両方の機能を有しているが、撮像装置及び集音装置はそれぞれ別々の装置によって実現されていてもよい。すなわち、本発明は、映像の撮像が不可能となった撮像場所における詳細な情報を音声によって収集するものであり、この目的を実現するためには、撮像装置及び集音装置の両方の機能が同一の装置に実装されていてもよく、別々の装置として実現されていてもよい。また、以下の説明では、各監視カメラ１０〜３２によって収録される音声の符号化方式をＧ．７１１ μ−Ｌａｗ（ビットレート：６４ｋｂｐｓ）とするが、その他の音声符号化方式が用いられてもよい。また、音質を変える場合に、同一の音声符号化方式においてパラメータが変更されてもよく、また、複数の異なる音声符号化方式を選択的に使い分けるようにしてもよい。

また、１階に設けられている表示装置７１〜７３は、各映像記録装置４１〜４３で記録されている映像の表示を行うように構成されている。すなわち、ここでは、表示装置７１によって１階に設置されている８台の監視カメラ１０〜１７によって撮像された映像が表示され、表示装置７２によって２階に設置されている５台の監視カメラ２０〜２４によって撮像された映像が表示され、表示装置７３によって３階に設置されている３台の監視カメラ３０〜３２によって撮像された映像が表示される。さらに、１階に設けられている制御装置５０は、監視カメラ１０〜３２、映像記録装置４１〜４３、及び表示装置７１〜７３を統合制御するコントローラの機能を有しており、この制御装置５０もＬＡＮ６０に接続されている。

なお、図１では、制御装置５０及び表示装置７１〜７３は１階に設置されているが、どの階に設置されてもよく、さらには、ビル外に設置されてもよい。また、制御装置５０は、例えば、インターネットなどのグローバルネットワークを介して、ＬＡＮ６０に接続されている監視カメラ１０〜３２、映像記録装置４１〜４３、及び表示装置７１〜７３の統合制御を行ってもよい。また同様に、表示装置７１〜７３もインターネットなどのグローバルネットワークを介して映像を受信・表示してもよい。また、ここでは１階から３階までの各階の映像を表示装置７１〜７３のそれぞれで表示するように構成されているが、表示装置の台数やどの監視カメラによる撮像映像をどのように表示するか（例えば、画面を分割して各監視カメラからの映像を分割画面内に表示したり、一定時間ごとに各監視カメラからの映像を切り換えて表示したりするなど）に関しては、システム設計によって任意に定めることが可能である。

また、図２は、本発明の第１の実施の形態における監視カメラの配置例を模式的に示す図である。図２には、１階に設置されている３台の監視カメラ１１〜１３が図示されている。図２に示すように、各監視カメラ１１〜１３は１００１号室〜１００３号室の各部屋のドアの前に設置されており、各部屋のドア付近を撮像するように撮像方向が設定されている。なお、不図示だが、監視カメラ１０、１４〜１７、２０〜２４、３０〜３２も同様に、それぞれ定められた撮像場所を撮像するように撮像方向が設定されている。すなわち、例えば、監視カメラ１４〜１７は、１００４号室〜１００７号室の各部屋のドアの前に設置されており、監視カメラ２１〜２４は、２階の２００１号室〜２００４号室の各部屋のドアの前に設置されており、監視カメラ３１、３２は、３階の３００１号室、３００２号室の各部屋のドアの前に設置されており、監視カメラ１０、２０、３０はそれぞれの階の非常口のドアを撮像するように設置されている。

次に、図１に図示されている映像撮像制御システムの構成要素である制御装置５０、監視カメラ１０〜３２、映像記録装置４１〜４３のそれぞれの機能について説明する。

まず、制御装置５０の機能について説明する。図３は、本発明の第１の実施の形態における映像撮像制御システムの制御装置５０の構成の一例を示す機能ブロック図である。図３に図示されている制御装置５０は、システム制御部５００、カメラ情報管理部５０１、稼働管理部５０２、通信処理部５０３、映像管理情報格納部５０４、及び障害対応設定情報格納部５０５を有している。

システム制御部５００は、制御装置５０において行われる主な処理や制御などを行う機能を有している。また、カメラ情報管理部５０１は、映像管理情報格納部５０４に格納されている映像管理情報を参照して、監視カメラ１０〜３２と映像記録装置４１〜４３との対応関係（すなわち、監視カメラ１０〜３２がどの映像記録装置４１〜４３に映像を送信しているか）や、監視カメラ１０〜３２の状態を把握したり、上記の対応関係や監視カメラ１０〜３２の状態に変化があった場合には、映像管理情報の更新を行ったりする機能を有している。

例えば、システム制御部５００は、カメラ情報管理部５０１を介して映像管理情報格納部５０４に格納されている映像管理情報を把握し、監視カメラ１０〜３２に対して所定の映像記録装置４１〜４３への映像や音声の送信を指示したり、映像記録装置４１〜４３に対して所定の監視カメラ１０〜３２による撮像映像の記録や音声の記録を指示したり、さらには、表示装置７１〜７３に対して所定の映像記録装置４１〜４３で受信又は記録されている映像の表示や音声の出力（再生）を指示したりする機能を有している。また、システム制御部５００は、特定の監視カメラ１０〜３２に障害が発生した場合に、障害対応設定情報格納部５０５に格納されている障害対応設定情報を参照して、障害が発生した監視カメラ１０〜３２の撮像場所を他の監視カメラ１０〜３２で補うために、他の監視カメラ１０〜３２のパン・チルト・ズーム制御などを行う機能も有している。さらに、システム制御部５００は、特定の監視カメラ１０〜３２に障害が発生した場合に、障害対応設定情報格納部５０５に格納されている障害対応設定情報を参照して、障害が発生した監視カメラ１０〜３２の撮像場所の情報を音声によって収集するために、マイクロホン（例えば、監視カメラ１０〜３２に備わっている）の集音方向、感度、指向性、収録される音声の音質（例えば、ビットレートやチャンネル数）の制御などを行う機能も有している。

また、稼働管理部５０２は、各映像記録装置４１〜４３から送信される各監視カメラ１０〜３２の稼働状態を示す情報（稼働状態通知情報）の受信に基づいて、各監視カメラ１０〜３２が映像を撮像することが不可能な状況にあるか否か（あるいは、各監視カメラ１０〜３２の映像を伝送する伝送路に障害が発生しているか否か）を把握し、映像管理情報格納部５０４に格納されている映像管理情報の更新を行う機能を有している。なお、稼働状態通知情報は、監視カメラ１０〜３２の稼働状態を示す情報であり、各映像記録装置４１〜４３の監視カメラ稼働管理部４１４（後述の図６を参照）から制御装置５０に向けて送信される情報である。また、稼働管理部５０２は、各映像記録装置４１〜４３の稼働状態を示す情報を表示装置７１〜７３から受けることも可能である。また、稼働管理部５０２は、監視カメラ１０〜３２からの応答がなかった場合に、異常と判断することも可能である。

また、通信処理部５０３は、ＬＡＮ６０に接続する通信インタフェースを有しており、監視カメラ１０〜３２や映像記録装置４１〜４３との間で情報のやり取りを可能とする機能を有している。

また、映像管理情報格納部５０４には、各監視カメラ１０〜３２に関する様々な情報を有する映像管理情報が格納されている。ここで、図４を参照しながら、映像管理情報に含まれる様々な情報の一例について説明する。

図４は、本発明の第１の実施の形態における映像撮像制御システムの制御装置５０によって保持されている映像管理情報の一例を模式的に示す図である。映像管理情報は、各監視カメラ１０〜３２に関する様々な情報を有している。図４に図示されている映像管理情報は、各監視カメラ１０〜３２の品質（撮像される映像の品質）、映像記録装置４１〜４３における記録枚数（単位時間（例えば１秒）当たりに映像記録装置４１〜４３が記録する枚数）、表示枚数（単位時間（例えば１秒）当たりに表示装置７１〜７３が表示する枚数）、各監視カメラ１０〜３２からの映像を記録する映像記録装置４１〜４３の識別情報、各監視カメラ１０〜３２による撮像映像の表示を行う表示装置７１〜７３の識別情報、表示の態様（図４ではフレームと記載）の映像に関連する各項目に加えて、各監視カメラ１０〜３２が集音した音声の音声符号化方式、各監視カメラ１０〜３２からの音声を記録する映像記録装置４１〜４３の識別情報、各監視カメラ１０〜３２によって集音された音声の出力を行う表示装置７１〜７３の識別情報を有している。

なお、制御装置５０は、映像管理情報内の記録枚数に記載されている値に基づいて、映像記録装置４１〜４３に対して単位時間当たりの記録枚数の指示を行うとともに、監視カメラ１０〜３２に対して単位時間当たりの送信枚数の指示を行う。また、制御装置５０は、映像管理情報内の音声を記録する映像記録装置４１〜４３の情報に基づいて、映像記録装置４１〜４３に対して音声記録の指示を行うとともに、監視カメラ１０〜３２に対して単位時間当たりの送信枚数の指示を行う。また、制御装置５０は、映像管理情報内の音声を再生する表示装置７１〜７３の情報に基づいて、表示装置７１〜７３に対して音声の受信・出力の指示を行う。また、図４のフレームの項目のｎ／ｍは、表示画面をｍ分割し、そのうちのフレームｎに映像の表示を行うことを意味している。また、図４に示す映像管理情報では、例えば、監視カメラ１４により撮像された映像は、映像記録装置に記録しないように設定されており、監視カメラ１５により撮像された映像は、表示装置において表示されないように設定されている。

制御装置５０は、図４に図示されている映像管理情報を参照して、例えば監視カメラ１０の行を参照して、監視カメラ１０に対しては、高品質の映像を１秒当たり３０枚で映像記録装置４１に送信するように指示する。また、映像記録装置４１に対しては、監視カメラ１０から映像を受信して１秒当たり３０枚記録するとともに、その映像を表示装置７１に１秒当たり３０枚転送するように指示する。さらに、表示装置７１に対しては、監視カメラ１０による撮像映像を映像記録装置４１から受信し、受信した映像を８分割画面中のフレーム１に表示するように指示する。さらに、映像記録装置４１に対して、監視カメラ１０から音声（Ｇ．７１１ μ−Ｌａｗフォーマット）を受信して記録するとともに、その音声を表示装置７１にＧ．７１１ μ−Ｌａｗフォーマットを用いて転送するように指示する。なお、制御装置５０は、すべての行（監視カメラ１０〜３２の行）を参照して、同様に監視カメラ１０〜３２、映像記録装置４１〜４３、表示装置７１〜７３への指示を行う。また、図４に図示されている例では、平常時においても音声の伝送・記録が行われているが、ある監視カメラ１０〜３２に故障が発生した場合においてのみ、音声の収録が開始されるようにしてもよい。

また、制御装置５０の障害対応設定情報格納部５０５には、監視カメラ１０〜３２に何らかの障害が発生した場合（例えば、監視カメラ１０〜３２に故障が発生して撮像不可能な状態となった場合や、伝送路に障害が発生して監視カメラ１０〜３２で撮像された映像が正しく伝送されなくなった場合など）に、障害の発生に対応するための監視カメラ１０〜３２の設定変更情報を含む障害対応設定情報が格納されている。なお、障害対応設定情報は、各監視カメラ１０〜３２に障害が発生した場合を想定してあらかじめ設定される。具体的には、障害対応設定情報には、後述のように（例えば、図９に図示されているように）、故障が発生した監視カメラ１０〜３２の近隣に存在する１つ又は複数の監視カメラ１０〜３２のパン・チルト・ズーム制御などの設定情報や、故障が発生した監視カメラ１０〜３２の近隣に存在する１つ又は複数の監視カメラ１０〜３２のマイクロホンにおける集音制御などの設定情報が含まれており、システム制御部５００は、この障害対応設定情報を参照して、監視カメラ１０〜３２の設定変更を行うことが可能である。

次に、監視カメラ１０〜３２の機能について説明する。なお、すべての監視カメラ１０〜３２は、同一の機能を備えていればよく、特に、特定の監視カメラに特別な機能を設ける必要はない。ここでは、監視カメラ１０〜３２を代表して、監視カメラ１０の内部構成について説明を行う。

図５は、本発明の第１の実施の形態における映像撮像制御システムの監視カメラ１０の構成の一例を示す機能ブロック図である。図５に図示されている監視カメラ１０は、映像撮像部１００、エンコーダ１０１、映像送信部１０２、撮像制御部１０３、音声収集部１０４、音声エンコーダ１０５、音声送信部１０６、集音制御部１０７を有している。

映像撮像部１００は、映像を撮像する機能を有しており、所定の場所を撮像するためのカメラや、カメラによって取り込まれた光信号を電気信号に変換するコンバータなどを有している。また、エンコーダ１０１は、映像撮像部１００によって撮像された映像を所定の映像フォーマット（例えば、ＪＰＥＧ方式）に符号化する機能を有している。

また、映像送信部１０２は、エンコーダ１０１によって符号化された映像を、ＬＡＮ６０を通じて伝送可能なフォーマットに変換する機能（例えば、パケット化機能）や、パケット化された映像を、ＬＡＮ６０を介して所定の送信先に送信する機能を有している。なお、映像の送信先や送信する映像の品質、映像の単位時間当たりの送信枚数には、例えば、制御装置５０によって指示された情報が設定される。

また、撮像制御部１０３は、監視カメラ１０の撮像方向を変更するための制御を行うパン・チルト制御（方向コントロール制御）や、監視カメラ１０の画角を変更するズーム制御（画角制御）などを行うための機能を有している。また、監視カメラ１０はいわゆるネットワークカメラの機能を有しており、撮像制御部１０３は、ＬＡＮ６０を介して受信した制御信号に従って、パン・チルト・ズーム制御を行うことが可能である。なお、監視カメラ１０は、パン・チルト・ズーム制御のすべてを備えている必要はない。また、監視カメラ１０は、ネットワーク機能を有したＣＣＴＶ（Closed Circuit Television）カメラであってもよい。

また、音声収集部１０４は、外部環境の音声を収集（集音）するマイクロホンの機能を有している。また、音声エンコーダ１０５は、音声収集部１０４によって収集された音声を所定の音声フォーマット（例えば、Ｇ．７１１ μ−Ｌａｗ方式）に符号化する機能を有している。なお、音声エンコーダ１０５は、Ｇ．７１１ μ−Ｌａｗ方式に限らず任意の音声符号化方式を用いることが可能であり、ビットレートやチャンネル数などによる音質の調整を行うことも可能である。

また、音声送信部１０６は、 音声エンコーダ１０５によって符号化された音声を、ＬＡＮ６０を通じて伝送可能なフォーマットに変換する機能（例えば、パケット化機能）や、パケット化された音声を、ＬＡＮ６０を介して所定の送信先に送信する機能を有している。なお、例えば、音声の送信先には、例えば、制御装置５０によって指示された情報が設定される。

また、集音制御部１０７は、マイクロホンの集音方向を変更する制御、マイクロホンの感度を変更する制御、マイクロホンの指向性を変更する制御など、音声収集部１０４（マイクロホン）による集音制御を行うための機能を有している。また、監視カメラ１０はいわゆるネットワークカメラの機能を有しており、集音制御部１０７は、ＬＡＮ６０を介して受信した制御信号に従って、パン・チルト・ズーム制御を行うことが可能である。なお、上述の各制御はマイクロホンの集音条件を変更するための制御の一例に過ぎず、監視カメラ１０は、上述の各制御をすべて備えている必要はない。

なお、ここでは、映像撮像部１００、エンコーダ１０１、映像送信部１０２、撮像制御部１０３は映像の撮像及び伝送に係る機能（撮像装置としての機能）を有する一方、音声収集部１０４、音声エンコーダ１０５、音声送信部１０６、集音制御部１０７は音声の収集及び伝送に係る機能（集音装置としての機能）を有している。本明細書では、１つの監視カメラが撮像装置及び集音装置の両方の機能を有しているが、監視カメラはあくまでも撮像装置としての機能のみを実現し、監視カメラとは別の集音機能を有する装置を設置してもよい。また、例えば、エンコーダ１０１及び音声エンコーダ１０５、映像送信部１０２及び音声送信部１０６、撮像制御部１０３及び集音制御部１０７は、同一又は類似の機能を有しており、共通のハードウェア又はソフトウェアによって実現されてもよい。

次に、映像記録装置４１〜４３の機能について説明する。なお、監視カメラ１０〜３２と同様に、映像記録装置４１〜４３は同一の機能を備えていればよく、特に、特定の映像記録装置に特別な機能を設ける必要はない。ここでは、映像記録装置４１〜４３を代表して、映像記録装置４１の内部構成について説明を行う。

図６は、本発明の第１の実施の形態における映像撮像制御システムの映像記録装置４１の構成の一例を示す機能ブロック図である。図６に図示されている映像記録装置４１は、映像受信部４１１、映像記録部４１２、映像送信部４１３、監視カメラ稼働管理部４１４、監視カメラ情報格納部４１５、音声受信部４１６、音声記録部４１７、音声送信部４１８を有している。

映像受信部４１１は、監視カメラ１０〜３２から送信された映像を受信する機能を有している。映像受信部４１１で受信された映像は、映像記録部４１２に渡される。また、映像記録部４１２は、映像受信部４１１で受信した監視カメラ１０〜３２の映像を所定の記録媒体（例えば、磁気記録テープや光記録媒体、ハードディスクなど）に記録する機能を有している。また、映像送信部４１３は、所定の表示装置７１〜７３に対して所定の送信枚数で映像の送信を行う機能を有している。

また、監視カメラ稼働管理部４１４は、監視カメラ１０〜３２が正常に動作しているか否かを監視する機能を有するとともに、監視カメラ１０〜３２の稼働状態を示す情報（稼働状態通知情報）を制御装置５０に送信する機能を有している。なお、稼働状態通知情報は、動作が異常となった監視カメラ１０〜３２の識別情報が含まれる。また、監視カメラ稼働管理部４１４は、制御装置５０に対して、監視カメラ１０〜３２が正常に動作しているか否かを常に通知してもよく、あるいは監視カメラ１０〜３２の動作が異常となった場合にのみ、その旨を通知してもよい。

また、音声受信部４１６は、監視カメラ１０〜３２から送信された音声（監視カメラ１０〜３２の集音機能によって収録された音声）を受信する機能を有している。音声受信部４１６で受信された音声は、音声記録部４１７に渡される。また、音声記録部４１７は、音声受信部４１６で受信した監視カメラ１０〜３２の周辺の音声を所定の記録媒体（例えば、磁気記録テープや光記録媒体、ハードディスクなど）に記録する機能を有している。また、音声送信部４１８は、監視カメラ情報において音声の伝送が指定されている場合に、所定の表示装置７１〜７３に対して音声の送信を行う機能を有している。

また、監視カメラ情報格納部４１５には、各監視カメラ１０〜３２に関する様々な情報を有する監視カメラ情報が格納されている。ここで、図７を参照しながら、監視カメラ情報に含まれる様々な情報の一例について説明する。

図７は、本発明の第１の実施の形態における映像撮像制御システムの映像記録装置４１〜４３によって保持されている監視カメラ情報の一例を模式的に示す図である。監視カメラ情報は、各監視カメラ１０〜３２に関する様々な情報を有している。図７に図示されている監視カメラ情報は、各監視カメラ１０〜３２の識別情報と、各監視カメラ１０〜３２の稼働状態、各監視カメラ１０〜３２からの映像の記録枚数（単位時間（例えば１秒）当たりに映像記録装置４１〜４３が記録する枚数）、各監視カメラ１０〜３２による撮像映像の表示を行う表示装置７１〜７３の識別情報、各表示装置への映像の送信枚数（表示枚数）、各監視カメラ１０〜３２によって収録された音声の出力（再生）を行う表示装置７１〜７３の識別情報の各項目を有している。なお、記録枚数、表示装置（映像）、表示枚数、表示装置（音声）の各項目は、上述のように、制御装置５０が映像管理情報に基づいて映像記録装置４１〜４３に対して行った指示が格納される。

図７に示す稼働状態の欄には、各監視カメラ１０〜３２が正常に動作を行っているか否かを示す情報が格納される。例えば、稼働管理部４１４は、監視カメラ情報の稼働状態の欄の値を１秒ごとに１つインクリメントするとともに、映像受信部４１１における各監視カメラ１０〜３２からの映像、及び音声受信部４１６における各監視カメラ１０〜３２からの音声の受信を監視し、各監視カメラ１０〜３２から正しく映像及び音声を受信できた場合には、監視カメラ情報の稼働状態の欄を０にクリアする。これによって、ある監視カメラ１０〜３２から正しく映像又は音声を受信できなくなった場合には、その監視カメラ１０〜３２に対応する稼働状態の欄の値が、正しく映像を受信できない秒数だけ大きな値となり（例えば、図７では、監視カメラ１２の稼働状態の値が『３』となり、監視カメラ１２からの映像又は音声が正しく受信されていないことが分かる）、この稼働状態の値が所定の値（所定の時間）を超えると、監視カメラ１０〜３２（あるいは、この監視カメラ１０〜３２との間の伝送路）に障害が発生したと判断し、その旨を稼働状態通知情報として制御装置５０に通知する。制御装置５０は、映像記録装置４１〜４３から、監視カメラ１０〜３２の動作に異常が発生したことを示す稼働状態通知情報を受けることによって、どの監視カメラ１０〜３２が撮像不可能（あるいは伝送路の障害による記録不可能）となったのかを把握することが可能となる。

次に、表示装置７１〜７３の機能について説明する。なお、監視カメラ１０〜３２及び映像記録装置４１〜４３と同様に、表示装置７１〜７３は同一の機能を備えていればよく、特に、特定の表示装置に特別な機能を設ける必要はない。ここでは、表示装置７１〜７３を代表して、表示装置７１の内部構成について説明を行う。

図８は、本発明の第１の実施の形態における映像撮像制御システムの表示装置７１の構成の一例を示す機能ブロック図である。図８に図示されている表示装置７１は、映像受信部７１１、映像表示部７１２、音声受信部７１５、音声出力部７１６を少なくとも有しており、さらに、映像記録装置稼働管理部７１３、映像記録装置情報格納部７１４を有してもよい。

映像受信部７１１は、映像記録装置４１〜４３から送信された映像を受信する機能を有している。映像受信部７１１で受信された映像は、映像表示部７１２に供給される。映像表示部７１２は、映像受信部７１１で受信した監視カメラ１０〜３２の映像を表示するモニタである。

また、音声受信部７１５は、映像記録装置４１〜４３から送信された音声を受信する機能を有している。音声受信部７１５で受信された音声は、音声出力部７１６に供給される。音声出力部７１６は、映像受信部７１１で受信した監視カメラ１０〜３２の周囲の音声を外部出力（再生）するデコーダ、アンプ、スピーカなどの機能を表すものである。

また、映像記録装置稼働管理部７１３は、映像記録装置４１〜４３が正常に動作しているか否かを監視する機能を有するとともに、映像記録装置４１〜４３の稼働状態を示す情報を制御装置５０に送信する機能を有している。さらに、映像記録装置情報格納部７１４には、受信・表示すべき映像の送信元となる映像記録装置４１〜４３に関する様々な情報が格納されている。

映像記録装置稼働管理部７１３及び映像記録装置情報格納部７１４において、映像記録装置４１〜４３が正常に動作しているか否かを監視する動作は、上述の映像記録装置４１の監視カメラ稼働管理部４１４及び監視カメラ情報格納部４１５における監視カメラ１０〜３２の動作の監視とほぼ同一である。すなわち、映像記録装置稼働管理部７１３は、例えば、映像記録装置情報格納部７１４に格納される映像記録装置情報の稼働状態を示す情報によって映像記録装置４１〜４３の動作を監視し、映像記録装置４１〜４３からの映像又は音声を所定の時間以上受信できなくなった場合には、この映像記録装置４１〜４３に何らかの障害が発生したことを制御装置５０に通知する。制御装置５０は、表示装置７１〜７３から、映像記録装置４１〜４３の動作に異常が発生したことを示す情報の通知を受けることによって、映像記録装置４１〜４３の動作異常を把握することが可能となる。

次に、上述の各構成を前提として、本発明の第１の実施の形態における動作について説明する。例えば、図２に図示されている１００２号室の部屋のドア付近を撮像している監視カメラ１２に何らかの障害が発生し、監視カメラ１２の撮像映像が正常に記録・表示できなくなったとする。

映像記録装置４１の監視カメラ稼働管理部４１４は、例えば監視カメラ情報の稼働状態の欄の値によって監視カメラ１２の稼働状態を常に監視しているが、監視カメラ１２から映像を受信できなくなり、監視カメラ１２の稼働状態の値が増加する。そして、監視カメラ稼働管理部４１４は、監視カメラ１２の稼働状態が所定の値（例えば『５』）を超えた時点で異常と判定し、監視カメラ１２が異常であることを示す稼働状態通知情報を制御装置５０に通知する。

制御装置５０の稼働管理部５０２は、通信処理部５０３を介して映像記録装置４１から監視カメラ１２の異常を示す稼働状態通知情報を受信すると、カメラ情報管理部５０１にリカバリ可能な監視カメラ（すなわち、障害が発生した監視カメラ１２の撮像場所の撮像を補完できる監視カメラ）に関する情報の問い合わせを行う。カメラ情報管理部５０１は、障害対応設定情報を参照して、監視カメラ１２のリカバリをすることが可能な監視カメラの識別情報（カメラ番号）と、監視カメラ１２のリカバリを行うためのパン位置、チルト位置、ズーム倍率などの映像のリカバリを行うための各種映像設定情報に加えて、マイクロホンの指向性の変更値やマイクロホンの感度の変更値などの集音による情報収集を行うための各種音声設定情報を返答する。

例えば図２に示す設置例で監視カメラ１２が故障した場合における障害対応設定情報として、監視カメラ１１が画角を広くする（画像を引く）とともに監視カメラ１３が首振り（一定周期でパンを行う動作）を行って、監視カメラ１２の撮像場所の撮像を行う旨があらかじめ定められているとする。この場合、稼働管理部５０２は、監視カメラ１１の識別情報及び監視カメラ１１のズーム倍率（広い画角を確保するための値）と、監視カメラ１３の識別情報及び首振りの指示をカメラ情報管理部５０１から受ける。なお、ここでは、監視カメラ１１のズーム倍率の変更及び監視カメラ１３の首振りによって、障害が発生した監視カメラ１２の撮像場所（１００２号室の部屋のドア付近）の撮像をリカバリするように設定されているが、パン、チルト、ズームなどを任意に組み合わせてリカバリを行うことが可能である。また、ここでは、２台の監視カメラ１１、１３によってリカバリを行っているが、１台のみ又は３台以上の監視カメラでリカバリを行うことも可能である。

また、例えば図２に示す設置例で監視カメラ１２が故障した場合における障害対応設定情報として、監視カメラ１１の音声収集部１０４による集音に関して、自身（監視カメラ１１）の撮像場所（１００１号室の部屋のドア付近）の集音を行う時間帯と、故障が発生した監視カメラ１２の撮像場所（１００２号室の部屋のドア付近）の集音を行う時間帯とを一定周期（例えば１０秒）で交互に繰り返す旨があらかじめ定められているとする。具体的には、例えば監視カメラ１１は、自身（監視カメラ１１）の撮像場所（１００１号室の部屋のドア付近）を撮像する時間帯においては、『マイクロホンの指向性：無指向、感度：普通』の設定で集音を行い、故障が発生した監視カメラ１２の撮像場所（１００２号室の部屋のドア付近）を撮像する時間帯においては、『マイクロホンの指向性：単一指向、感度：高』の設定で集音を行う。さらに、監視カメラ１１が集音方向を調節できるマイクロホンを有している場合には、マイクロホンの方向を監視カメラ１２の撮像場所（１００２号室の部屋のドア付近）に合わせるように変更する。このようにして、故障した監視カメラ１２の撮像画像が欠落してしまう分を補うために、故障した監視カメラ１２の撮像場所付近の音声を収集することで、情報収集のリカバリを行うことが可能である。なお、ここでは、１台の監視カメラ１１によって音声の収集によるリカバリを行っているが、２台以上の監視カメラで音声の収集によるリカバリを行うことも可能である。

そして、稼働管理部５０２は、カメラ情報管理部５０１から受けた監視カメラ１１、１３の識別情報とそれぞれの設定変更情報をシステム制御部５００に通知し、システム制御部５００は、通信処理部５０３を介して監視カメラ１１、１３に対して、それぞれの設定変更情報に対応した設定変更を指示する。これにより、図９に図示されているように、監視カメラ１１の画角が広くなり、監視カメラ１１で１００１号室及び１００２号室の両方の部屋のドア付近の撮像が可能になるとともに、監視カメラ１３が首振りを行って定期的にパンを繰り返すことで、１００２号室及び１００３号室の部屋のドア付近を交互に撮像することが可能となる。また、上述のように、監視カメラ１１のマイクロホンによって、１００２号室の部屋のドア付近の集音が一定時間間隔で行われるようになる。なお、制御装置５０は、撮像場所の重要度や監視カメラ１３の配置場所などに基づいて、監視カメラ１３による撮像場所に優先度を設定して監視カメラ１３の撮像方向の制御を行ってもよい。すなわち、監視カメラ１３に単に首振りをさせるだけではなく、例えば、１００２号室の部屋のドア付近を１０秒撮像させるとともに、１００３号室の部屋のドア付近を２０秒撮像させる動作を繰り返し行わせることも可能である。また、監視カメラ１３が定期的にパン動作を行うという制御だけではなく、制御装置５０は、監視カメラ１３に対して不定期にパン動作の制御を行うことも可能である。なお、監視カメラ１１のマイクロホンによる集音に関しても、１００２号室の部屋のドア付近の集音を行う周期やその集音時間などは、任意に設定可能である。

また、制御装置５０のシステム制御部５００は、映像記録装置４１に対して、監視カメラ１１からの映像及び音声を監視カメラ１１、１２の両方の映像および音声として記録するように指示するとともに、監視カメラ１３からの映像を監視カメラ１２、１３の両方の映像として記録するように指示する。これにおいて、映像記録装置４１は、記録した映像の付加情報として元々の監視カメラの番号を記録する。これにより、再生時においては、この番号により同じ監視カメラからの記録映像でも撮像場所を認識することが可能となる。なお、監視カメラからの映像データのヘッダ部分に記録場所情報を付加するようにしてもよい。

また、制御装置５０が映像記録装置４１に対して指示を行う際に、監視カメラ１１、１３のいずれか一方の映像を監視カメラ１２の映像として記録するように指示してもよい。また、監視カメラ１１、１３のいずれか一方の映像を監視カメラ１２の映像として記録した場合には、監視カメラ１１、１３のいずれか一方の映像が記録されるとともに、監視カメラ１２の映像として監視カメラ１１、１３のいずれか一方の映像と同一の映像が記録されることになるので、監視カメラ１２の記録を中止して、後で監視カメラ１２の映像を参照する際に、監視カメラ１１、１３のいずれか一方の映像を参照してもよい。なお、２台以上の監視カメラによって音声の収集によるリカバリが行われた場合も同様である。

さらに、制御装置５０のシステム制御部５００は、映像記録装置４１に対して、監視カメラ１１、１３のいずれか一方の映像を監視カメラ１２の映像として表示装置７１に送信するように指示する。なお、この場合も監視カメラ１１、１３のいずれか一方の映像と、監視カメラ１２の映像とは同一であるため、どちらか一方の映像のみを表示装置７１に送信するようにしてもよい。また、制御装置５０のシステム制御部５００は、映像記録装置４１に対して、監視カメラ１１で集音された音声を監視カメラ１２の音声として表示装置７１に送信するように指示する。また、さらに、制御装置５０は、監視カメラ１２の障害発生によって変更された設定を映像管理情報に反映させるように、映像管理情報格納部５０４に格納されている映像管理情報の更新を行う。

以上の動作によって、障害が発生した監視カメラ１２の撮像場所が、監視カメラ１１、１３の両方による撮像によって補完されて記録されるようになる。また、表示装置７１において、障害が発生した監視カメラ１２による撮像映像が本来表示されるフレームに監視カメラ１１、１３のいずれか一方の映像と同一の映像が表示されるものの、監視カメラ１２による撮像場所が表示されるようになる。また、障害が発生した監視カメラ１２の撮像場所付近の音声が、監視カメラ１１の集音機能によって記録されるようになる。また、表示装置７１において、障害が発生した監視カメラ１２の撮像場所の音声として、監視カメラ１１のマイクロホンによって集音された監視カメラ１２の撮像場所の音声が出力されるようになる。

以上、説明したように、本発明の第１の実施の形態によれば、複数の監視カメラのうちの１つに障害が発生した場合でも、障害が発生した監視カメラの撮像場所を他の監視カメラによる撮像でリカバリするとともに、障害が発生した監視カメラの撮像場所の音声を収録することにより、大切な撮像場所の撮像映像が欠けることによって失われてしまう可能性がある情報を補完することが可能となる。

なお、上述の本発明の第１の実施の形態では、監視カメラ１０〜３２によって撮像・収集された映像・音声が映像記録装置４１〜４３に送信された後に、さらに映像記録装置４１〜４３から表示装置７１〜７３に送信されるように構成されているが、監視カメラ１０〜３２によって撮像・収集された映像・音声が表示装置７１〜７３に送信された後に、さらに表示装置７１〜７３から映像記録装置４１〜４３に送信されるように構成されてもよい。この場合には、監視カメラ１０〜３２から映像を直接受信する表示装置７１〜７３が監視カメラ稼働管理部を有し、監視カメラ１０〜３２が正常に動作しているか否かの監視を行う。

＜第２の実施の形態＞
次に、本発明の第２の実施の形態について説明する。上述の本発明の第１の実施の形態では、監視カメラ１０〜３２が映像の送信先を変更することが可能な場合について説明したが、映像を要求された相手にのみ映像を送信するタイプの監視カメラ１０〜３２も存在している。以下、このタイプの監視カメラを利用した場合について説明する。

本発明の第２の実施の形態における監視カメラ１０〜３２の映像送信部１０２は、映像記録装置４１〜４３からの映像の要求に基づき、映像の要求を行った映像記録装置４１〜４３を送信先として映像の送信を行うように構成されている。また、本発明の第２の実施の形態における監視カメラ１０〜３２の音声送信部１０６は、映像記録装置４１〜４３からの音声の要求に基づき、音声の要求を行った映像記録装置４１〜４３を送信先として音声の送信を行うように構成されている。また、本発明の第２の実施の形態における映像記録装置４１〜４３の映像受信部４１１は、受信や記録を行うための映像を取得するため、監視カメラ１０〜３２に対して、映像の要求を行うように構成されている。また、本発明の第２の実施の形態における映像記録装置４１〜４３の音声受信部４１６は、受信や記録を行うための音声を取得するため、監視カメラ１０〜３２に対して、音声の要求を行うように構成されている。また、監視カメラ１０〜３２は映像や音声を要求された相手（映像記録装置４１〜４３）に対して映像や音声を送信するように構成されているため、本発明の第２の実施の形態における制御装置５０のシステム制御部５００は、監視カメラ１０〜３２に対して所定の映像記録装置４１〜４３への映像送信や音声送信の指示を行う必要はない。なお、監視カメラ１０〜３２、映像記録装置４１〜４３、制御装置５０、表示装置７１〜７３におけるその他の構成要素は、上述の本発明の第１の実施の形態と同様である。

本発明の第２の実施の形態では、制御装置５０から監視カメラ１０〜３２に対して指示が行われることはなく、制御装置５０は、監視カメラ１０〜３２による撮像映像の受信指示や収集音声の受信指示を映像記録装置４１〜４３に送信する。そして、各映像記録装置４１〜４３は、制御装置５０からの指示に基づいて、自映像記録装置４１〜４３が受信、記録、表示すべき監視カメラ１０〜３２を把握し、その監視カメラ１０〜３２に対して映像や音声の要求を行う。なお、映像記録装置４１〜４３から監視カメラ１０〜３２に対して、映像の要求と共に、映像の品質や映像の送信枚数の設定の指示も行われ、これにより、制御装置５０で統合的な観点に基づいて確立された映像記録スケジュールが実現される。

なお、上述のように、制御装置５０が映像記録装置４１〜４３に対して指示を行い、映像記録装置４１〜４３から監視カメラ１０〜３２に対して、さらに指示が行われるという点を除いて、本発明の第２の実施の形態における基本的な動作は、上述の本発明の第１の実施の形態で説明した動作と同一であり、ここでは、説明を省略する。

以上、説明したように、本発明の第２の実施の形態によれば、映像を要求された相手にのみ映像や音声を送信するタイプの監視カメラが複数台設置されており、複数の監視カメラのうちの１つに障害が発生した場合でも、障害が発生した監視カメラの撮像場所を他の監視カメラによる撮像でリカバリするとともに、障害が発生した監視カメラの撮像場所の音声を収録することにより、大切な撮像場所の撮像映像が欠けることによって失われてしまう可能性がある情報を補完するを防ぐことが可能となる。

なお、上述の本発明の第１の実施の形態で説明した、映像・音声の送信先を変更することが可能な監視カメラと、本発明の第２の実施の形態で説明した、映像・音声を要求された相手にのみ映像・音声を送信するタイプの監視カメラが混在して設置されている場合でも、本発明の第１及び第２の実施の形態を組み合わせることによって、本発明の目的を実現することが可能である。

＜第３の実施の形態＞
次に、本発明の第３の実施の形態について説明する。本発明の第３の実施の形態では、音声の検出状況（音声の特徴）に応じて、表示装置における出力音声を変更したり、表示画面（表示パターン）を変更したりする方法について説明する。なお、以下では、基本的に上述の本発明の第１の実施の形態における構成および動作を拡張した実施例について説明するが、本発明の第３の実施の形態に係る技術思想を上述の本発明の第２の実施の形態における構成及び動作に適用することも可能である。

本発明の第３の実施の形態では、上述の本発明の第１の実施の形態における映像記録装置４１〜４３が、図１０に図示されている映像記録装置９１に置き換わる。図１０は、本発明の第３の実施の形態における映像撮像制御システムの映像記録装置９１の構成の一例を示す機能ブロック図である。図１０に図示されている映像記録装置９１は、映像受信部４１１、映像記録部４１２、映像送信部４１３、監視カメラ稼働管理部４１４、監視カメラ情報格納部４１５、音声受信部４１６、音声記録部４１７、音声送信部４１８、音声特徴判定部９０１を有している。なお、図１０に図示されている映像記録装置９１は、図６に図示されている映像記録装置４１に、音声特徴判定部９０１によって実現される機能が更に付加された構成を有している。

音声特徴判定部９０１は、任意の監視カメラ１０〜３２から受信した音声の特徴を検出する機能を有している。音声特徴判定部９０１は、音声に関する様々な特徴を検出することが可能である。例えば、音量や音の密度（音圧）又はその変動、音声の周波数又はその変動、無音状態から有音状態への変化（音声の発生）、突発的な物音（音声の立ち上がりの検出）を検出することが可能である。また、音声特徴判定部９０１により知的な機能を設け、例えば、物音の種類や会話音声の内容解析などが行えるようにしてもよい。

また、音声特徴判定部９０１は、複数の監視カメラ１０〜３２から受信した各音声の特徴に基づいて、特に顕著な特徴（所定レベルを超える特徴）が見られる音声に関して、表示装置において出力される音声を切り換えたり、複数の監視カメラ１０〜３２による撮像映像を表示装置の１画面上に同時に表示するための分割画面の表示パターン（例えば、後述の図１２〜１４に図示されている表示パターン）を決定したりする機能を有している。

次に、上述の構成を前提として、本発明の第３の実施の形態における動作について説明する。なお、ここでは、例えば図１１に図示されているように、５台の監視カメラ２０〜２４で収集される音声の時間的な変動に応じた出力切り換え例について説明する。図１１は、本発明の第３の実施の形態における映像撮像制御システムの５台の監視カメラで検出された音声の時間的な変動の様子を示す図である。なお、図１１には、各監視カメラ２０〜２４が集音した音声の検出結果（振幅）が、図面の左から右に時系列に表されている。

映像記録装置４２（図１０に図示されている映像記録装置９１の構成を有する）は、監視カメラ２０〜２４の映像及び音声を受信して、表示装置７２においてこれらの映像及び音声を表示、再生する。平常時は、図４に図示されている映像管理情報に記載されているように、監視カメラ２０〜２３のそれぞれで撮像された映像を、等分割された４分割画面で表示する一方（図１２を参照）、音声に関しては監視カメラ２０で集音された音声を再生している。

ここで、映像記録装置４２の動作が、音声の特徴に応じた切り換えを行う音声自動切り換えモードに変更されると、映像記録装置４２は、監視カメラ２０〜２４からの音声の特徴に応じて、表示装置７２に送信する音声を切り換える。これにより、例えば、音が発生した音声（無音から有音）や騒がしい音を含む音声（音密度の高い音声）などのような特徴的な音声が表示装置７２において出力されるように、映像記録装置４２から表示装置７２に送信される音声を切り換えることが可能となる。

例えば、図１１において、ある時刻Ａの時点のように、監視カメラ２１の音声が最も大きな音量になると、音声特徴判定部９０１は監視カメラ２１の音声のほうが重要（何らかの異常が発生している可能性があり、音声出力されるべき）と判断し、図４に示す映像管理情報の監視カメラ２０の音声出力の表示装置欄（『７２』と記載されている）を空白にし、監視カメラ２１の音声出力の表示装置欄を『７２』に更新する。そして、映像記録装置４２の音声特徴判定部９０１は、表示装置７２に送信する音声を監視カメラ２０の音声から監視カメラ２１の音声に切り換えるよう音声送信部４１８に指示し、音声送信部４１８は表示装置７２に送信する音声を、指示された監視カメラ２１の音声に切り換える。

次に、時刻Ｂでは、それまで無音だった監視カメラ２４に音声が発生したので、音声特徴判定部９０１は監視カメラ２４の監視領域に異常が発生している可能性があると判断し、音声送信部４１８が送信する音声を監視カメラ２４に切り換えるように指示する。音声送信部４１８は、表示装置７２に送信する音声を、指示された監視カメラ２４の音声に切り換える。また、監視カメラ２４の音声が再び無音になると、音声特徴判定部９０１は再びその時点で最も大きな音量の監視カメラ２１の音声に切り換えるよう音声送信部４１８に指示し、音声送信部４１８は、指示された監視カメラ２１の音声に切り換える。

また、時刻Ｄでは監視カメラ２１の音声が無音になったので、音声特徴判定部９０１は、最も大きな音量である監視カメラ２３の音声を重要と判断し、表示装置７２に送信する音声を監視カメラ２１の音声から監視カメラ２３の音声に切り換えるよう音声送信部４１８に指示する。音声送信部４１８は送信する音声を、指示された監視カメラ２３の音声に切り換える。

また、時刻Ｅでは監視カメラ２２の音声がそれまでの無音から有音になったため、音声特徴判定部９０１は、監視カメラ２２の音声の音量は監視カメラ２３のものより小さいものの、監視カメラ２２の音声の発生が重要であると判断し、表示装置７２に送信する音声を監視カメラ２３の音声から監視カメラ２２の音声に切り換えるよう音声送信部４１８に指示する。音声送信部４１８は送信する音声を、指示された監視カメラ２２の音声に切り換える。

また、上記の例では画像が４ｃｈ（監視カメラ２０〜２３の４台分）しかないので、表示装置７２を閲覧しているユーザは、その表示画面を見ていればどの監視領域で何が起きているかを判断することができる、１６ｃｈや３２ｃｈなどのように画像が増加する（フレーム数が増加する）に従って、どのｃｈで何が起きているかを瞬時に把握することが難しくなってくる。そこで、本発明の第３の実施の形態において、音声特徴判定部９０１における音声の特徴の検出結果に基づいて、表示装置における表示パターンの切り換えを行うことも可能である。

例えば、表示装置７２においては、平常時には、図４に図示されている映像管理情報に記載されているように、監視カメラ２０〜２３のそれぞれで撮像された映像が等分割された４分割画面で表示されている（図１２を参照）。このとき、時刻Ｂにおいて、特徴判定部９０１が監視カメラ２４の音声が無音から有音に変化したことから、監視カメラ２４の音声が重要である（監視カメラ２４の監視領域の監視強化が重要である）と判断し、それまで表示していなかった監視カメラ２４の映像を大きく表示し、残りの３つの画面には時刻Ｂにおいて有音である監視カメラ２０、２１、２３の映像を割り当てる表示パターン（図１３を参照）を選択し、その情報を表示装置７２に通知する。

表示装置７２は映像記録装置４２から通知された情報に基づいて図１２に図示されている表示パターンを構成して表示する。また、例えば、監視カメラ２４のウインドウを赤枠で縁取ることで、監視カメラ２４のウインドウ枠を目立たせてもよい。また、監視カメラ２４からの音声が無音になると、映像記録装置４２は表示装置７２に送信する音声をすぐに監視カメラ２１の音声に切り換えるが、表示パターンに関してはしばらく図１３に図示されている表示パターン（監視カメラ２４の映像を強調表示）を維持し、監視カメラ２４からの音声が無音になってから一定時間経過した時刻Ｃの時点で、図１２に図示されている表示パターンに戻してもよい。このように、検出される音声の特徴に応じて表示装置７２における表示パターンを切り換えることで、表示装置を閲覧しているユーザは、大事な撮像映像（異常の発生が映っている可能性のある撮像映像）を見逃さずに監視できるようになる。なお、本明細書における強調表示とは、映像のフレーム枠を大きくすることで表示画面上に占める映像表示の範囲を他の映像より大きくしたり、色や光の点滅などの視覚的効果を用いて映像を目立たせたりすることを表す。

また、上述の例では、時刻Ｂにおいて、図１２に図示されている表示パターンから図１３に図示されている表示パターンへの切り換えが行われたが、この場合、４分割画面を用いると映像記録装置４２が管理している５台の監視カメラのうちの１台（例えば、監視カメラ２２）の映像が表示画面上に表示されなくなるので、例えば図１４に図示されている表示パターンのように、６分割画面で監視カメラ２４の映像を強調して表示してもよい。また、監視カメラの数が増えてくると全部の監視カメラからの映像を表示画面上に同時に表示しようとした場合、重要な監視領域以外の映像表示が小さくなってしまうので、分割数を増やすことなく同一の分割画面のまま、表示する映像を切り換えてもよい。

また、音声特徴判定部９０１が音声の特徴検出によって重要な監視領域であると判定した場合に、その監視領域を撮像、集音している監視カメラの撮像制御、集音制御が行われ、その監視領域に関して更に精度の高い詳細な映像や音声が得られるようにしてもよい。

以上、説明したように、本発明の第３の実施の形態によれば、複数の監視カメラにおいて集音される音声の特徴を検出し、その音声の特徴に基づいて、表示装置において出力される音声を切り換えたり、複数の監視カメラによる撮像映像を表示装置の１画面上に同時に表示するための分割画面の表示パターンを決定したり、特定の監視カメラによる撮像映像を強調して表示したりすることが可能となる。

＜第４の実施の形態＞
次に、本発明の第４の実施の形態について説明する。本発明の第４の実施の形態では、映像記録装置４１〜４３に記録された映像、音声を表示、再生する場合について説明する。なお、ここでは、映像記録装置４１〜４３は、記録した映像、音声を再生する映像記録再生装置としての機能を有しているとする。

映像記録装置４２は制御装置５０からの指示により、映像記録部４１２で記録された映像を読み出すとともに、映像に対応した音声（音声記録部４１７で記録された音声）を読み出し、映像送信部４１３及び音声送信部４１８を介して表示装置７２に送信する。このとき、音声特徴判定部９０１は、再生される音声に関する特徴を検出して、その音声の重要性を判断する。そして、この重要性の判断結果に応じて、上述の本発明の第３の実施の形態と同様に、重要性の高い映像を大きく強調して表示するなどの指示を行うことで、いったん記録された映像、音声の再生時においても、映像と同時に再生される音声の特徴に基づいて、表示装置において出力される音声を切り換えたり、複数の監視カメラによる撮像映像を表示装置の１画面上に同時に表示するための分割画面の表示パターンを決定したり、特定の監視カメラによる撮像映像を強調して表示したりすることが可能となる。

なお、上述の本発明の第１〜第４の実施の形態では、映像記録装置４１〜４３、制御装置５０、表示装置７１〜７３がそれぞれ独立して設けられているが、ある装置が他の装置の機能を兼備していてもよい。例えば、映像記録装置４１〜４３のうちの１つが、制御装置５０の機能を実装していてもよい。また、例えば、表示装置７１〜７３のうちの１つが制御装置５０の機能を実装していてもよい。

また、上述の本発明の第１〜第４の実施の形態における制御装置は、ＰＣ（Personal Computer）などの汎用のコンピュータによって実現可能であり、制御装置における処理は、ＣＰＵ（Central Processing Unit：中央演算処理装置）などに本発明に係る動作を記述するプログラムを実行させることによって実現可能である。また、上述の本発明の第１〜第４の実施の形態における監視カメラは、汎用のネットワークカメラによって実現可能である。また、上述の本発明の第１〜第４の実施の形態における映像記録装置は、汎用のネットワークビデオレコーダ（ネットワークに接続されたＤＶＤ（Digital Versatile Disc）レコーダやＨＤＤ（Hard Disk Drive)レコーダ）や、ＰＣなどの汎用のコンピュータによって実現可能である。

また、上述の本発明の第１〜第４の実施の形態では、映像フォーマットがＪＰＥＧ方式であることを前提として説明したが、映像フォーマットは特に限定されるものではなく、例えば、ＭＰＥＧ（Moving Picture Experts Group）方式やＨ．２６４方式などを利用することも可能である。また、特に、ＭＰＥＧ方式やＨ．２６４方式の場合には、１秒間の送信枚数ではなく、送信レート（１秒間の送信ビット数）に基づいて、上述の映像記録装置の割り当て動作を行うことが望ましい。

また、本明細書では、上述のように本発明の第１〜第４の実施の形態をそれぞれ独立して説明しているが、これらの本発明の第１〜第４の実施の形態に係る技術を組み合わせることも可能である。

本発明は、映像撮像装置が映像を撮像したり、映像を記録したりすることが不可能な状況になった場合でも、この障害が生じた映像撮像装置によって撮像されるべき撮像対象（撮影場所）に関する情報を取得することが可能な映像撮像制御システムを、低コストでかつ効率的に構築することができるという効果を有しており、ネットワークにより伝送される映像の受信や記録、表示などの動作制御を行う映像記録技術及びネットワーク制御技術に適用可能である。

本発明の第１の実施の形態における映像撮像制御システムの構成の一例を示す図である。 本発明の第１の実施の形態における監視カメラ１１〜１３の配置例を模式的に示す図である。 本発明の第１の実施の形態における映像撮像制御システムの制御装置５０の構成の一例を示す機能ブロック図である。 本発明の第１の実施の形態における映像撮像制御システムの制御装置５０によって保持されている映像管理情報の一例を模式的に示す図である。 本発明の第１の実施の形態における映像撮像制御システムの監視カメラ１０の構成の一例を示す機能ブロック図である。 本発明の第１の実施の形態における映像撮像制御システムの映像記録装置４１の構成の一例を示す機能ブロック図である。 本発明の第１の実施の形態における映像撮像制御システムの映像記録装置４１〜４３によって保持されている監視カメラ情報の一例を模式的に示す図である。 本発明の第１の実施の形態における映像撮像制御システムの表示装置７１の構成の一例を示す機能ブロック図である。 本発明の第１の実施の形態において、特定の監視カメラ１２に障害が発生した場合のリカバリ方法の一例を模式的に示す図である。 本発明の第３の実施の形態における映像撮像制御システムの映像記録装置９１の構成の一例を示す機能ブロック図である。 本発明の第３の実施の形態における映像撮像制御システムの監視カメラ２０〜２４で検出された音声の時間的な変動の様子を示す図である。 本発明の第３の実施の形態における映像撮像制御システムの表示装置の表示パターンの第１の例を示す図である。 本発明の第３の実施の形態における映像撮像制御システムの表示装置の表示パターンの第２の例を示す図である。 本発明の第３の実施の形態における映像撮像制御システムの表示装置の表示パターンの第３の例を示す図である。

符号の説明

１０〜１７、２０〜２４、３０〜３２ 監視カメラ（映像撮像装置）
４１〜４３、９１ 映像記録装置
５０ 制御装置
６０ ＬＡＮ
７１〜７３ 表示装置
１００ 映像撮像部
１０１ エンコーダ
１０２、４１３ 映像送信部
１０３ 撮像制御部
１０４ 音声収集部
１０５ 音声エンコーダ
１０６、４１８ 音声送信部
１０７ 集音制御部
４１１、７１１ 映像受信部
４１２ 映像記録部
４１４ 監視カメラ稼働管理部
４１５ 監視カメラ情報格納部
４１６、７１５ 音声受信部
４１７ 音声記録部
５００ システム制御部
５０１ カメラ情報管理部
５０２ 稼働管理部
５０３ 通信処理部
５０４ 映像管理情報格納部
５０５ 障害対応設定情報格納部
７１２ 映像表示部
７１３ 映像記録装置稼働管理部
７１４ 映像記録装置情報格納部
７１６ 音声出力部
９０１ 音声特徴判定部

Claims (4)

1. 複数の映像撮像装置と、複数の映像記録装置と、制御装置とが、ネットワークにより接続された映像撮像制御システムであって、
   前記複数の映像撮像装置のそれぞれが、
   所定の場所を撮像する映像撮像手段と、
   前記映像撮像手段によって撮像された映像を、前記複数の映像記録装置のうちの所定の映像記録装置に送信する映像送信手段と、
   前記所定の場所の音声を収集する集音手段と、
   前記集音手段によって収集された音声を、前記複数の映像記録装置のうちの所定の映像記録装置に送信する音声送信手段と、
   前記制御装置から受信した制御信号に基づいて、前記集音手段における集音方向、前記集音手段による集音の指向性、前記集音手段の集音感度のいずれかの変更制御を行う集音制御手段とを有し、
   前記複数の映像記録装置のそれぞれが、
   前記複数の映像撮像装置のうちの所定の映像撮像装置によって送信された前記映像を受信する映像受信手段と、
   前記映像受信手段によって受信した前記映像を記録媒体に記録する映像記録手段と、
   前記複数の映像撮像装置のうちの前記所定の映像撮像装置によって送信された前記音声を受信する音声受信手段と、
   前記音声受信手段によって受信した前記音声を記録媒体に記録する音声記録手段と、
   前記複数の映像撮像装置のうちの前記所定の映像撮像装置からの映像受信状態及び音声受信状態を監視する映像撮像装置監視手段と、
   前記映像撮像装置監視手段によって前記複数の映像撮像装置のうちの前記所定の映像撮像装置から前記映像又は前記音声の受信ができなくなった状態が検出された場合には、前記所定の映像撮像装置から前記映像又は前記音声の受信ができなくなった状態を通知する通知情報を前記制御装置に送信する稼動管理手段とを有し、
   前記制御装置が、
   前記複数の映像撮像装置のそれぞれと、前記複数の映像撮像装置のそれぞれによって撮像された前記映像の記録先に設定されている前記複数の映像記録装置のそれぞれとの対応関係情報を含む映像管理情報を格納する映像管理情報格納手段と、
   前記複数の映像撮像装置のうちのいずれかの映像撮像装置に障害が発生した場合に、前記障害が発生した映像撮像装置の撮像領域の音声を他の映像撮像装置によって集音するために、前記他の映像撮像装置の前記集音手段における集音方向、前記他の映像撮像装置の前記集音手段による集音の指向性、前記他の映像撮像装置の前記集音手段の集音感度のいずれかの変更制御に関する障害対応設定情報を格納する障害対応設定情報格納手段と、
   前記映像記録装置の前記稼動管理手段から受信した前記通知情報によって特定された、前記障害の発生した前記映像撮像装置に関する前記障害対応設定情報を参照して、前記他の映像撮像装置の前記集音手段における集音方向、前記他の映像撮像装置の前記集音手段による集音の指向性、前記他の映像撮像装置の前記集音手段の集音感度のいずれかの変更制御を行うための前記制御信号を前記他の映像撮像装置に送信する映像撮像装置制御手段と、
   前記映像記録装置の前記稼動管理手段から受信した前記通知情報によって特定された前記障害の発生した前記映像撮像装置に関する前記障害対応設定情報に基づいて、前記映像管理情報の更新を行う情報管理手段とを、
   有する映像撮像制御システム。
2. 前記制御装置の機能が、前記複数の映像記録装置のいずれか１つに組み込まれている請求項１に記載の映像撮像制御システム。
3. 前記複数の映像記録装置のそれぞれが、
   前記映像受信手段で受信した前記映像を表示する映像表示手段と、
   前記音声受信手段によって受信した前記音声を外部に報知する音声出力手段と、
   前記音声受信手段で受信した前記音声に関し、前記音声の音量又はその変化、前記音声の周波数又はその変化のいずれかに基づいて前記音声の特徴を検出する音声特徴検出手段と、
   前記音声特徴検出手段で検出された前記音声の特徴が、前記所定の場所において平常とは異なる事象の発生を示すものであると判断し、前記音声出力手段に対して前記特徴を有する音声の外部への報知を指示するか、あるいは、前記映像表示手段において前記特徴を有する音声に対応する映像を強調表示するように制御する出力制御手段とを、
   有する請求項１又は２に記載の映像撮像制御システム。
4. 複数の映像撮像装置と、複数の映像表示装置とが、ネットワークにより接続された映像撮像制御システムであって、
   前記複数の映像撮像装置のそれぞれが、
   所定の場所を撮像する映像撮像手段と、
   前記映像撮像手段によって撮像された映像を、前記複数の映像記録装置のうちの所定の映像記録装置に送信する映像送信手段と、
   前記所定の場所の音声を収集する集音手段と、
   前記集音手段によって収集された音声を、前記複数の映像記録装置のうちの所定の映像記録装置に送信する音声送信手段とを有し、
   前記複数の映像表示装置のそれぞれが、
   前記複数の映像撮像装置のうちの所定の映像撮像装置によって送信された前記映像を受信する映像受信手段と、
   前記映像受信手段で受信した前記映像を表示する映像表示手段と、
   前記複数の映像撮像装置のうちの所定の映像撮像装置によって送信された前記音声を受信する音声受信手段と、
   前記音声受信手段によって受信した前記音声を外部に報知する音声出力手段と、
   前記音声受信手段で受信した前記音声に関し、前記音声の音量又はその変化、前記音声の周波数又はその変化のいずれかに基づいて前記音声の特徴を検出する音声特徴検出手段と、
   前記音声特徴検出手段で検出された前記音声の特徴が、前記所定の場所において平常とは異なる事象の発生を示すものであると判断し、前記音声出力手段に対して前記特徴を有する音声の外部への報知を指示するか、あるいは、前記映像表示手段において前記特徴を有する音声に対応する映像を強調表示するように制御する出力制御手段とを、
   有する映像撮像制御システム。

Images