JP3686333B2 - 動画像処理カメラ及びこれを用いた画像処理システム - Google Patents
動画像処理カメラ及びこれを用いた画像処理システム Download PDFInfo
- Publication number
- JP3686333B2 JP3686333B2 JP2000391339A JP2000391339A JP3686333B2 JP 3686333 B2 JP3686333 B2 JP 3686333B2 JP 2000391339 A JP2000391339 A JP 2000391339A JP 2000391339 A JP2000391339 A JP 2000391339A JP 3686333 B2 JP3686333 B2 JP 3686333B2
- Authority
- JP
- Japan
- Prior art keywords
- image processing
- moving
- moving body
- moving image
- data
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Images
Landscapes
- Closed-Circuit Television Systems (AREA)
- Studio Devices (AREA)
- Length Measuring Devices By Optical Means (AREA)
- Devices For Checking Fares Or Tickets At Control Points (AREA)
Description
【０００１】
【発明の属する技術分野】
本発明は、動画像を処理する動画像処理カメラ及びこれを用いた画像処理システムに関する。
【０００２】
【従来の技術】
従来、定点に設置されたカメラを用いて移動体を監視する監視システムが知られている。この監視システムは、例えば図１１に示すように、複数の撮像サブシステムと中央処理装置（以下、「ＣＰＵ」という）５６とから構成されている。各撮像サブシステムは、カメラ５０、送信機５１、送信アンテナ５２、受信アンテナ５３、受信機５４及び画像処理装置５５から構成されている。
【０００３】
カメラ５０は、通常のビデオカメラと同様に、光学系から入力された光学像を、固体撮像デバイスで光電変換することにより映像信号を生成する。このカメラ５０で生成された映像信号は、送信機５１に送られる。
【０００４】
送信機５１は、カメラ５０からの映像信号を変調して送信アンテナ５２に送る。送信アンテナ５２は、変調された映像信号を電磁波として空中に放射する。受信アンテナ５３は、空中に放射された電磁波を受信して受信機５４に送る。受信機５４は、受信アンテナ５４からの信号を復調して映像信号を再生し、画像処理装置５５に送る。
【０００５】
画像処理装置５５は、Ａ／Ｄ変換器６０、移動体検知部６１及び識別部６２から構成されている。Ａ／Ｄ変換器６０は、受信機５４で復調されたアナログの映像信号をデジタル信号に変換し、デジタル映像データとして移動体検知部６１に送る。移動体検知部６１は、受け取ったデジタル映像データから移動体領域を求め、この求められた移動体領域のデジタル映像データ移動体候補を検知する。この移動体検知部６１での検知結果は識別部６２に送られる。
【０００６】
識別部６２は、移動体検知部６１で検知された移動体候補が車であるか、人であるか或いは誤検知であるか等を識別する。この識別部６２による識別結果は、画像処理装置５５の出力としてＣＰＵ５６に送られる。ＣＰＵ５６は、この画像処理装置５５からの識別結果に基づいて、種々の処理を行う。
【０００７】
【発明が解決しようとする課題】
ところで、上述した従来の監視システムでは、各撮像サブシステムはカメラ及び画像処理装置を含むので、カメラの台数を増やすに連れて画像処理装置の台数も増やす必要がある。その結果、カメラの台数の増加に対する、監視システムのコストの増加率が大きいという問題がある。
【０００８】
また、高速で移動する移動体（以下、「高速移動体」という）を撮像するために、フレームレートの高い高速カメラを用いると、この高速カメラから得られた動画像データを伝送するための伝送ラインを高速伝送に対応できるものにする必要があり、コストが大きくなるという問題がある。
【０００９】
本発明は上述した問題を解消するためになされたものであり、その目的は、安価な画像処理システムの構築に好適な動画像処理カメラを提供することにある。
【００１０】
【課題を解決するための手段】
本発明の第１の態様に係る動画像処理カメラは、上記目的を達成するために、撮像により得られた画像データから映像データを生成する映像生成部と、前記画像データから移動体を検知する移動体検知部と、前記映像生成部で生成された映像データ及び前記移動体検知部で検知された移動体の画像データを送出する通信インタフェース、とを備えている。
【００１１】
この動画像処理カメラによれば、撮像により得られた画像データを処理することによって移動体が検知される。そして、その検知された移動体の画像データが通信インタフェースを介して外部に送出される。従って、この動画像処理カメラが適用された画像処理システムの画像処理装置は、移動体検知を行う必要がなく、移動体を識別するための移動体識別処理だけを行えばよい。この移動体識別処理は、各動画像処理カメラで共通化できる。従って、複数の動画像処理カメラに対して１つの画像処理装置を用意すればよいので、動画像処理カメラの台数の増加に対する画像処理システムのコストの増加率を抑えることができる。
【００１２】
また、この動画像処理カメラが適用された画像処理システムでは、移動体を識別するために、撮像により得られた画像データの全てを画像処理装置に送る必要はなく、移動体の画像データだけを送ればよい。従って、高速移動体を撮像するためにフレームレートの高い高速カメラを用いた場合であっても、伝送すべき画像データの量は少ないので、高速カメラから画像処理装置に画像データを伝送するための伝送ラインを高速伝送に対応できるものにする必要はない。その結果、画像処理システムのコスト上昇を回避できる。
【００１３】
また、この第１の態様に係る動画像処理カメラにおいて、前記通信インタフェースは、前記映像生成部で生成された映像データ及び前記移動体検知部で検知された移動体の画像データをデジタル信号で送出するように構成できる。この構成によれば、この動画像処理カメラが適用された画像処理システムの画像処理装置は、動画像処理カメラから受け取った映像データ及び移動体の画像データをデジタル化する必要はないので、画像処理システムを簡単且つ安価に構成できる。
【００１４】
また、この第１の態様に係る動画像処理カメラにおいて、前記通信インタフェースは、前記映像生成部で生成された映像データ及び前記移動体検知部で検知された移動体の画像データをアナログ信号で送出するように構成できる。この構成によれば、動画像処理カメラから画像処理装置への伝送ラインとしてアナログ伝送ラインを用いることができるので、伝送ラインを安価に構成できる。
【００１５】
この場合、前記移動体検知部で検知された移動体の画像データに基づいて該移動体の状態を表す移動体情報を算出する算出部と、該算出部で算出された前記移動体情報を前記映像生成部で生成された映像データに重畳する重畳部、とを更に備え、前記通信インタフェースは、該重畳部からの前記移動体情報が重畳された映像データを送出するように構成できる。この構成によれば、この動画像処理カメラが適用された画像処理システムの画像処理装置は、移動体情報の算出処理を行う必要がないので、画像処理装置の構成が簡単になりコストを低減させることができる。
【００１６】
また、前記算出部は、前記移動体検知部で検知された移動体の座標を算出する座標算出部と、前記移動体検知部で検知された移動体の移動速度を検出する速度検出部、とを含み、前記重畳部は、前記移動体検知部での移動体の検知の有無、前記座標検出部で検出された移動体の座標及び前記速度検出部で検出された移動体の移動速度の少なくとも１つを前記移動体情報として前記映像生成部で生成された映像データに重畳するように構成できる。この構成によれば、この動画像処理カメラが適用された画像処理システムの画像処理装置は、移動体の座標の算出処理及び移動体の移動速度の検出処理を行う必要がないので、画像処理装置の構成が簡単になりコストを低減させることができる。
【００１７】
また、前記重畳部は、前記移動体情報を、画像データ及びデジタルデータの少なくとも１つで表したラベリング情報として前記映像生成部で生成された映像データに重畳するように構成できる。この構成によれば、この動画像処理カメラが適用された画像処理システムの画像処理装置は、移動体に関する情報を文字で表示させることができ、またデジタルデータとして取り込むこともできる。
【００１８】
また、この第１の態様に係る動画像処理カメラは、前記通信インタフェースから出力されるデータを無線で送信する無線送信手段、を更に備えて構成できる。この構成によれば、この動画像処理カメラが適用された画像処理システムにおいて、動画像処理カメラの配置の自由度が増すので、画像処理システムの構築が容易になる。
【００１９】
また、この第１の態様に係る動画像処理カメラにおいて、前記移動体検知部は、外部からの指示に応答して処理内容を変更するように構成できる。この構成によれば、この動画像処理カメラを多目的、例えば車両の検知、人の監視、プラントの異常監視、車両や人の追跡等の目的に使用できる。
【００２０】
また、この第１の態様に係る動画像処理カメラは、ズーム機構と、該ズーム機構にズーム撮影の指示を与える指示手段、とを更に備えて構成できる。この構成によれば、目的とする被写体を詳細に撮像することができる。
【００２１】
また、この第１の態様に係る動画像処理カメラは、パン機構と、該パン機構にパン撮影の指示を与える第１指示手段と、チルト機構と、該チルト機構にチルト撮影の指示を与える第２指示手段、とを更に備えて構成できる。この構成によれば、例えば移動体を追跡するような応用が可能になる。
【００２２】
また、本発明の第２の態様に係る画像処理システムは、上記目的を達成するために、上述した動画像処理カメラと、該動画像処理カメラの前記通信インタフェースから送出された前記移動体の画像データに基づいて移動体を識別する識別部、とを備えて構成されている。この画像処理システムによれば、上述した安価に構成できる動画像処理カメラを使用しているので、画像処理システムを安価に構成できる。
【００２３】
この画像処理システムの前記識別部は、識別結果に基づいて課金処理を実行する車両検知センタにより構成されている。この画像処理システムによれば、車両検知センタでは、動画像処理検知カメラからの移動体の画像データに基づいて課金処理を実行できるので、該車両検知センタでの負荷が軽減される。その結果、画像処理システム全体のパフォーマンスを向上させることができる。
【００２４】
【発明の実施の形態】
以下、本発明の実施の形態を、図面を参照しながら詳細に説明する。
【００２５】
（実施の形態１）
本発明の実施の形態１に係る動画像処理カメラは、イメージセンサから得られた動画像データを処理することにより移動体を検知し、その検知された移動体の画像データを外部に出力する。
【００２６】
図１は、この実施の形態１に係る動画像処理カメラ１が適用された監視システムの構成を示すブロック図である。この監視システムは、本発明の画像処理システムに対応する。この監視システムは、動画像処理カメラ１、Ａ／Ｄ変換器２、画像処理装置３、ＣＰＵ４及びモニタテレビジョン（モニタＴＶ）５から構成されている。動画像処理カメラ１は、アナログ伝送ライン３０及びデジタル伝送ライン３１を介して画像処理装置３に接続されている。
【００２７】
なお、画像処理装置３には、動画像処理カメラ１、Ａ／Ｄ変換器２及びモニタテレビジョン５から成る撮像サブシステムが複数接続される。各撮像サブシステムは同一であるので、以下では、１つの撮像サブシステムが画像処理装置３に接続される場合について説明する。
【００２８】
動画像処理カメラ１は、光学系１０、イメージセンサ１１、駆動回路１２、Ａ／Ｄ変換器１３、データ処理部１４、アナログ通信インタフェースとしてのＤ／Ａ変換器１５及びデジタル通信インタフェース（Ｉ／Ｆ）１６から構成されている。
【００２９】
光学系１０は、レンズ、プリズム、光学フィルタといった周知の光学素子から構成されており、光学像をイメージセンサ１１上に結像させる。
【００３０】
イメージセンサ１１は、駆動回路１２からの駆動信号に応答して、光学系１０からの光学像を光電変換してアナログ動画像信号を生成する。このイメージセンサ１１で生成されたアナログ動画像信号は、Ａ／Ｄ変換器１３に送られる。イメージセンサ１１としては、ＣＣＤ形デバイス、ＭＯＳ形デバイス、その他の固体撮像デバイスを用いることができる。
【００３１】
駆動回路１２は、データ処理部１４からの制御信号に基づいて上述した駆動信号を生成する。この駆動信号は、イメージセンサ１１から単位時間に出力されるフレーム数、即ちフレームレートを規定するための信号、例えばドットクロック信号、水平同期信号（ＨＤ）、垂直同期信号（ＶＨ）等を含む。
【００３２】
なお、本明細書では、３０枚／秒のフレームレートを標準フレームレート、３０枚／秒より大きいフレームレートを高速フレームレート、３０枚／秒より小さいフレームレートを低速フレームレートという。この動画像処理カメラでは、フレームレートは、１０〜１２０枚／秒の範囲で可変である。
【００３３】
Ａ／Ｄ変換器１３は、イメージセンサ１１からのアナログ動画像信号をデジタル動画像信号に変換する。このＡ／Ｄ変換器１３から出力されるデジタル動画像信号は、動画像データとしてデータ処理部１４に供給される。
【００３４】
データ処理部１４は、ＦＰＧＡ（Field Programmable Gate Array）、ＡＳＩＣ（Application Specific IC）等によって構成できる。このデータ処理部１４は、映像生成部２０及び移動体検知部２１から構成されている。映像生成部２０は、Ａ／Ｄ変換器１３から送られてくる動画像データからデジタル映像データを生成し、Ｄ／Ａ変換器１５に送る。また、移動体検知部２１は、Ａ／Ｄ変換器１３から送られてくる動画像データから移動体を検出し、移動体の画像データをデジタル通信インタフェース１６に送る。この移動体の検出処理の詳細は、後述する。なお、データ処理部１４は、上記以外に、フレームレートを制御するための制御信号を生成して駆動回路１２に供給する処理も行う。
【００３５】
Ｄ／Ａ変換器１５は、データ処理部１４の映像生成部２０からのデジタル動画像信号をアナログ動画像信号に変換し、例えばＮＴＳＣ方式でアナログ伝送ライン３０に送出する。
【００３６】
デジタル通信インタフェース１６は、データ処理部１４の移動体検知部２１からのデジタル動画像信号及びその他のデジタル信号をデジタル伝送ライン３１を介して画像処理装置３に送出すると共に、デジタル伝送ライン３１からの信号をデータ処理部１４へ供給する。このデジタル通信インタフェース１６としては、ローカルエリアネットワーク（ＬＡＮ）インタフェース、ＩＥＥＥ１３９４インタフェース、シリアルインタフェース、パラレルインタフェース、ＵＳＢインタフェース等を用いることができる。
【００３７】
この動画像処理カメラ１は、このデジタル通信インタフェース１６を介して外部の画像処理装置に接続できるようになっている。従って、この動画像処理カメラ１は、例えばＬＡＮによって他の複数の装置に接続できるので画像処理システムを構築するのに好適である。
【００３８】
画像処理システムを構成するＡ／Ｄ変換器２は、動画像処理カメラ１からアナログ伝送ライン３０を介して送られてくるアナログ映像信号をデジタル映像信号に変換して画像処理装置３に供給する。
【００３９】
画像処理装置３は、例えばＦＰＧＡ、ＡＳＩＣ等によって専用カードとして構成されている。この画像処理装置３は、動画像処理カメラ１から送られてきた移動体の画像データに基づいて、その移動体が車であるか、人であるか或いは誤検知であるか等を識別する移動体識別処理を実行する。
【００４０】
ＣＰＵ４は、画像処理装置３の起動及び停止、画像処理装置３へのパラメータの設定等を行う。このＣＰＵ４と画像処理装置３とは、例えばＣＰＣＩバスによって接続される。なお、画像処理装置３で実行される移動体識別処理が軽負荷である場合は、移動体識別処理の全てをＣＰＵ４で実行するように構成できる。この構成によれば、画像処理装置３が不要になるので画像処理システムを小規模且つ安価に構成できる。
【００４１】
モニタテレビジョン５はオプションであり、アナログ伝送ライン３０に接続される。ユーザは、このモニタテレビジョン５を見ることによって、動画像処理カメラが捉えている被写体を確認できる。
【００４２】
次に、以上のように構成される画像処理システムの動作を、動画像処理カメラ１の動作を中心に説明する。
【００４３】
通常の状態では、駆動回路１２は、イメージセンサ１１を標準フレームレートで動作させるための駆動信号を生成し、イメージセンサ１１に供給する。これにより、イメージセンサ１１は、１／３０秒毎に１フレーム分のアナログ動画像信号を出力する。このアナログ動画像信号はＡ／Ｄ変換器１３でデジタル動画像信号に変換され、動画像データとしてデータ処理部１４の映像生成部２０及び移動体検知部２１に供給される。
【００４４】
映像生成部２０は、入力された動画像データを順次デジタル映像信号に変換し、Ｄ／Ａ変換器１５に供給する。Ｄ／Ａ変換器１５は、受け取ったデジタル映像信号をアナログ映像信号に変換してアナログ伝送ライン３０に送出する。Ａ／Ｄ変換器２は、このアナログ伝送ライン３０から伝送されてくるアナログ映像信号をデジタル映像信号に変換して画像処理装置３に送る。画像処理装置３は、このＡ／Ｄ変換器２からのデジタル映像信号に基づいて、後述する移動体識別処理以外の種々の処理を行う。
【００４５】
モニタテレビジョン５がアナログ伝送ライン３０に接続されている場合は、モニタテレビジョン５は、アナログ伝送ライン３０に流れているアナログ映像信号に基づいて画像を表示する。
【００４６】
移動体検知部２１は、入力された動画像データを入力画像として順次メモリ（図示省略）の入力画像エリアに格納する。
【００４７】
次いで、移動体検知部２１は、Ａ／Ｄ変換器１３から動画像データを受け取る毎に移動体検知処理及び速度マップ導出処理を実行する。
【００４８】
移動体検知の原理を図２に示す。この移動体検知処理では、背景画像と入力画像との差が計算される。この計算結果がゼロの場合は、入力画像は背景画像と同じであるので移動体が検知されなかった旨が判断される。一方、計算結果がゼロでない場合は、移動体が検知された旨が判断される。
【００４９】
速度マップ導出の原理を図３に示す。この速度マップ導出処理では、時刻ｔの入力画像と時刻ｔ＋１の入力画像とを比較することにより移動ベクトルの画面上の分布、即ちオプティカルフローが生成される。そして、このオプティカルフローを利用して移動体の実際の移動速度及び方向を表す速度マップが導出される。
【００５０】
以上の原理に基づく移動体検知部２１の動作を図４を参照しながら説明する。移動体検知部２１は、先ず、メモリに格納された入力画像のぶれ修正、つまり動画像処理カメラのぶれに起因する入力画像の乱れの補正を行う。このぶれ修正がなされた入力画像は、時刻ｔの入力画像Ｉ（ｔ）としてメモリに記憶される。
【００５１】
次いで、図２を参照して説明したように、メモリの背景画像エリアに格納されている背景画像とメモリの入力画像エリアに格納されている入力画像Ｉ（ｔ）との差を計算することにより背景差分が求められる。そして、この背景差分が所定値より大きい場合は、移動体が検知された旨が判断され、移動体領域と背景領域とが求められる。この求められた移動体領域の画像は、メモリの移動体領域画像エリアに格納される。一方、上記背景差分が上記所定値以下の場合は、移動体が検知されなかった旨が判断され、メモリの移動体領域画像エリアにはゼロが格納される。
【００５２】
また、メモリの背景画像エリアに格納されている背景画像を更新するかどうかは、上記背景差分を所定のしきい値と比較することにより判断される。例えば、今、入力画像をＩ（ｔ）、背景画像をＢ（ｔ）とすると、背景画像は、「Ｂ（ｔ＋１）＝αＩ（ｔ）＋（１−α）Ｂ（ｔ）」の条件で更新される。ここで、αは０≦α≦１であり、移動体領域及び背景領域に応じて決められる値である。なお、背景画像を更新するかどうかは、時刻ｔとｔ−１の入力画像の差分である時間差分に基づいて決定することもできる。以上の処理により移動体検知処理が完了する。
【００５３】
次に、動画像データが入力されると、その動画像データが時刻ｔの入力画像Ｉ（ｔ）になり、それまでの入力画像Ｉ（ｔ）が時刻ｔ−１の入力画像Ｉ（ｔ−１）になる。この状態で、図３を参照して説明したように、時刻ｔの入力画像Ｉ（ｔ）と時刻ｔ−１の入力画像Ｉ（ｔ−１）とが比較されてオプティカルフローが生成される。そして、このオプティカルフローを利用して移動体の実際の移動速度及び方向を表す速度マップが導出される。この導出された速度マップはメモリの速度マップ領域に格納される。以上により、速度マップ導出処理が完了する。
【００５４】
なお、移動体の移動速度は、前回の移動体検知処理で抽出された移動体の画像と今回の移動体検知処理で抽出された移動体の画像との間の動画像上における距離と、その時点におけるフレームレートとに基づいて求めることもできる。
【００５５】
この移動体検知処理により得られた移動体の動画像データは、デジタル通信インタフェース１６を介してデジタル伝送ライン３１に送出される。画像処理装置３は、このデジタル伝送ライン３１から送られてくる移動体の画像データを取り込み移動体の識別処理を行う。この識別処理では、移動体の画像データが車であるか、人であるか或いは誤検知であるか等を識別する。
【００５６】
この移動体検知部２１による速度マップ導出処理が終了すると、データ処理部１４は、フレームレートの変更処理を行う。このフレームレート変更処理では、上述した速度マップ導出処理で導出された移動速度が所定値以下であれば、データ処理部１４は、標準フレームレートに対応する制御信号を生成して駆動回路１２に供給する。これにより、動画像処理カメラは、標準フレームレートで動作する。一方、上記移動速度が所定値より大きければ、データ処理部１４は、高速フレームレートに対応する制御信号を生成して駆動回路１２に供給する。これにより、フレームレート変更処理が完了し、以後、動画像処理カメラは高速フレームレートで動作する。この構成によれば、動画像処理カメラは、通常は標準フレームレートで動作し、高速移動体が検知されると高速フレームレートで動作するので、高速移動体を精度よく検出できる。
【００５７】
また、データ処理部１４は、動画像データをＤ／Ａ変換器１５を介して外部に送出する場合、その時点で高速フレームレートに設定されていれば、フレームを間引いて送出する。即ち、データ処理部１４は、通常は標準フレームレートで撮像された動画像を１／３０秒毎に高解像度で出力するが、高速フレームレートに変更された場合は、ＮＴＳＣ方式に従ったビデオレートになるようにフレームを間引いて送出する。この構成により、Ｄ／Ａ変換器１５に既存のモニタテレビジョン５をそのまま接続できる。
【００５８】
以上説明したように、この実施の形態１に係る動画像処理カメラによれば、イメージセンサ１１から得られた動画像データを、この動画像処理カメラに内蔵されるデータ処理部１４の移動体検知部２１で処理することによって、その動画像に含まれる移動体が検知される。そして、その検知された移動体の画像データがデジタル通信インタフェース１６を介して外部に送出される。従って、この動画像処理カメラが適用された画像処理システムの画像処理装置は、移動体検知を行う必要がなく、移動体を識別するための移動体識別処理だけを行えばよい。この移動体識別処理は、各動画像処理カメラで共通化できる。従って、複数の動画像処理カメラに対して１つの画像処理装置を用意すればよいので、動画像処理カメラの台数の増加に対する画像処理システムのコストの増加率を抑えることができる。
【００５９】
（実施の形態２）
本発明の実施の形態２に係る動画像処理カメラは、検知された移動体の画像データのみならず映像データをもデジタル信号で外部に送出するようにしたものである。
【００６０】
図５は、この実施の形態２に係る動画像処理カメラが適用された監視システムの構成を示すブロック図である。この監視システムで使用される動画像処理カメラは、実施の形態１に係る動画像処理カメラ（図１参照）からＤ／Ａ変換器１５及びデジタル通信インタフェース１６が除去され、代わりにデジタル通信インタフェース１７が追加されている。以下、実施の形態１に係る動画像処理カメラと異なる部分を中心に説明する。
【００６１】
デジタル通信インタフェース１７は、デジタル伝送ライン３２を介して画像処理装置３に接続されている。このデジタル通信インタフェース１７は、映像生成部２０からの動画像データ及び移動体検知部２１からの移動体の画像データを入力し、デジタル信号でデジタル伝送ライン３２に送出する。この際、上記動画像データ及び移動体の画像データの各々にはデータの種類を識別するための識別フラグが付されて送出される。
【００６２】
画像処理装置３は、デジタル伝送ライン３２からデータを受け取った際に、この識別フラグを参照することにより、受け取ったデータが動画像データであるか又は移動体の画像データであるかかを判断する。
【００６３】
以上のように構成される動画像処理カメラが適用された監視システムの動作は、動画像データがデジタル信号で画像処理装置３に送られることを除けば、上述した実施の形態１に係る監視システムの動作と同じである。
【００６４】
この実施の形態２に係る動画像処理カメラによれば、監視システムの画像処理装置は、動画像処理カメラから受け取った映像データ及び移動体の画像データをデジタル化する必要はないので、画像処理システムを安価に構成できる。
【００６５】
（実施の形態３）
本発明の実施の形態３に係る動画像処理カメラは、検知された移動体の状態を表す移動体情報を、その動画像に重畳して外部に送出する。
【００６６】
図６は、この実施の形態３に係る動画像処理カメラが適用された監視システムの構成を示すブロック図である。この監視システムで使用される動画像処理カメラは、実施の形態１に係る動画像処理カメラ（図１参照）からＤ／Ａ変換器１５及びデジタル通信インタフェース１６が除去され、代わりにＡ／Ｄ変換器１８が追加されている。以下、実施の形態１の動画像処理カメラと異なる部分を中心に説明する。
【００６７】
Ａ／Ｄ変換器１８は、アナログ伝送ライン３３を介して画像処理装置３に接続されている。このＡ／Ｄ変換器１８は、映像生成部２０からの動画像データ及び移動体検知部２１からの移動体の画像データを入力し、アナログ信号でアナログ伝送ライン３３に送出する。この際、上記動画像データ及び移動体の画像データの各々にはデータの種類を識別するための識別フラグが付されて送出される。
【００６８】
画像処理装置３は、アナログ伝送ライン３３からデータを受け取った際に、この識別フラグを参照することにより、受け取ったデータが動画像データであるか又は移動体の画像データであるかを判断する。
【００６９】
以上のように構成される実施の形態３に係る動画像処理カメラは、実施の形態１に係る動画像処理カメラの動作に加えて、以下の動作が追加されている。
【００７０】
即ち、実施の形態１で説明した移動体検知処理が完了すると、データ処理部１４は、ラベリング情報の生成処理を実行する。即ち、メモリの移動体領域画像エリアを参照することによって移動体が検知された旨が判断されると、その移動体の画像に番号が付与されると共に、その移動体の画面上での座標（Ｘ、Ｙ）、重心、面積、移動方向、移動速度等がラベリング情報として算出される。これらの算出は、メモリの移動体領域画像エリアに格納された移動体の画像及びメモリの速度マップ領域に格納された速度マップに基づいて行われる。
【００７１】
次いで、データ処理部１４の映像生成部２０は、ラベリング情報の重畳処理を実行する。即ち、データ処理部１４は、図７（Ａ）に一例を示すように、上記ラベリング情報を画像データに変換し、メモリから読み出された入力画像上に書き込む。なお、図７（Ａ）は、ラベリング情報の一例として、移動体の有無、座標（Ｘ、Ｙ）及び移動速度だけが重畳される場合の例を示している。
【００７２】
次いで、データ処理部１４は、ラベリング情報が重畳された動画像データを、Ｄ／Ａ変換器１８に供給する。Ｄ／Ａ変換器１８は、この動画像データをアナログ動画像信号に変換し、アナログ伝送ライン３３に送出する。その後、データ処理部１４は、実施の形態１で説明したと同様の速度マップ導出処理及びフレームレート変更処理を実行する。なお、このアナログ伝送ライン３３にモニタテレビジョン５が接続されていると、ユーザは、現在動画像処理カメラで撮影されている画像を見ることができると共に、検知された移動体の状態（速度及び位置）を知ることができる。
【００７３】
一方、データ処理部１４の移動体検知部２１は、実施の形態１で説明した手順で移動体を検知し、検知された移動体の画像データをＤ／Ａ変換器１８に送る。Ｄ／Ａ変換器１８は、この移動体の画像データをアナログ画像信号に変換し、アナログ伝送ライン３３に送出する。
【００７４】
画像処理装置３は、このアナログ伝送ライン３３から送られてくるラベリング情報が重畳された動画像データ及び移動体の画像データを取り込み移動体の識別処理を行う。この識別処理では、ラベリング情報を考慮して、移動体の画像データが車であるか、人であるか或いは誤検知であるか等を識別する。
【００７５】
なお、ラベリング情報は、画像データとしてではなく、デジタルデータとして動画像データと一緒に送出するように構成できる。この場合、例えば図７（Ｂ）に示すように、動画像の端部にラベリング情報表示領域を設け、この領域にデジタルデータでラベリング情報を書き込む。この構成によれば、この動画像処理カメラに接続された画像処理装置は、デジタルデータとして受け取ったラベリング情報をそのまま種々の処理に利用できる。
【００７６】
以上説明したように、この実施の形態３に係る動画像処理カメラによれば、イメージセンサ１１から得られた動画像に含まれる移動体が検知される。そして、その検知された移動体に関する情報が算出され、動画像に重畳されて外部に送出される。従って、この動画像を受け取った外部の画像処理装置３では移動体検知処理や移動体情報の算出処理を行う必要がないので、画像処理装置の構成が簡単になりコストを低減させることができる。
【００７７】
（実施の形態４）
本発明の実施の形態４に係る動画像処理カメラは、撮像により得られた映像データ及び検知された移動体の画像データを無線で画像処理装置に送信する。
【００７８】
図８は、この実施の形態４に係る動画像処理カメラが適用された監視システムの構成を示すブロック図である。この監視システムでは、動画像処理カメラ１と画像処理装置３との間の通信路が無線で構成されている。
【００７９】
この通信路は、送信機６、送信アンテナ７、受信アンテナ８及び受信機９で構成されている。送信機６は、動画像処理カメラ１のＤ／Ａ変換器１５からの映像データ及びデジタル通信インタフェース１７からの移動体の画像データを変調し、送信アンテナ７を介して電磁波として空中に放射する。受信アンテナ５３は、空中に放射された電磁波を受信して受信機９に送る。受信機９は、受信アンテナ８からの信号を復調して映像データ及び移動体の画像データを再生し、Ａ／Ｄ変換器２及び画像処理装置３にそれぞれ送る。上記以外の構成及び動作は、実施の形態１のそれらと同じである。
【００８０】
以上説明したように、この実施の形態４に係る動画像処理カメラが適用された監視システムによれば、動画像処理カメラの配置の自由度が増すので、監視システムの構築が容易になる。
【００８１】
（実施の形態５）
本発明の実施の形態５に係る動画像処理カメラは、データ処理部で実行される処理内容を変更できるようにしたものである。
【００８２】
この実施の形態５に係る動画像処理カメラでは、データ処理部１４は、図９に示すように、ＲＯＭとＦＰＧＡとによって構成されている。ＲＯＭは４つの領域に区切られており、各領域には、ＦＰＧＡの構成を決定するためのコンフィグレーションデータＤ１〜Ｄ４が記憶されている。コンフィグレーションデータＤ１、Ｄ２、Ｄ３及びＤ４は、ＦＰＧＡを車両の検知用、人の検知用、プラントの異常監視用及び追跡用にそれぞれ構築するためのデータである。
【００８３】
このＲＯＭに形成された４つの領域の何れか１つは、図示しないモード設定用スイッチから供給される選択信号によって選択される。そして、選択された領域に記憶されているコンフィグレーションデータがアクティブにされ、ＦＰＧＡはそのコンフィグレーションデータに従った回路になるように構築される。
【００８４】
今、図示しないモード設定用スイッチによってＲＯＭ内のコンフィグレーションデータＤ１が選択されたと仮定すると、ＦＰＧＡには車両（移動体）の検知を実行する回路が構築される。これにより、ＦＰＧＡは、上述した各実施の形態で説明したような、移動体検知処理、速度マップ導出処理、ラベリング情報の生成処理、ラベリング情報の重畳処理、フレームレートの変更処理等を実行できる状態に設定される。
【００８５】
以上説明したように、この実施の形態５に係る動画像処理カメラによれば、簡単な操作により、動画像処理カメラを多目的、例えば車両の検知、人の監視、プラントの異常監視、車両や人の追跡等の目的に使用できる。
【００８６】
なお、この実施の形態５では、複数のコンフィグレーションデータをＲＯＭに記憶しておき、モード設定用スイッチで選択された１つのコンフィグレーションに従ってＦＰＧＡの回路を構築するようにしたが、外部の画像処理装置からデジタル通信インタフェース１６を介してＦＰＧＡにコンフィグレーションデータを供給するように構成してもよい。この構成によれば、ＲＯＭやモード設定用スイッチが不要になるので、動画像処理カメラの構成が簡単になると共に、動画像処理カメラのリモートコントロールが可能になる。
【００８７】
（実施の形態６）
本発明の実施の形態６に係る動画像処理カメラは、ズーム機構を備えたものである。ズーム機構の構造は周知であるので図示は省略する。この実施の形態６に係る動画像処理カメラは、このズーム機構を作動させるタイミングに特徴がある。
【００８８】
このズーム機構が搭載された動画像処理カメラの電気的な構成は、データ処理部１４からズーム機構に対してズーム制御信号が供給される点を除けば、図１に示した構成と同じである。
【００８９】
ズーム機構は、データ処理部１４からのズーム制御信号に応答して作動する。即ち、データ処理部１４は、実施の形態１で説明したように、イメージセンサ１１からの動画像中に移動体を検知すると、ズーム制御信号をズーム機構に供給する。これにより、ズーム機構が作動して拡大された移動体の光学像がイメージセンサ１１上に結像される。この際、ズームアップ及びズームダウンの制御は、実施の形態１で説明した移動体検知処理によって抽出された移動体の大きさに基づいて行うことができる。
【００９０】
この実施の形態６に係る動画像処理カメラによれば、移動体が検知された場合にズーム機構を作動させることにより、直ちにその移動体の詳細を撮像することができる。従って、例えば移動体を撮像することを目的とする画像処理システムでは、その移動体が、動画像処理カメラの設置点の近傍の好適な撮像ポイントに到達するまで待つことなく（従って、移動速度の計算は不要）、移動体を検知した時点で直ちに高速フレームレートで撮像を開始すれば、高速移動体であっても移動体の全体像を正確に撮像することができる。
【００９１】
（実施の形態７）
本発明の実施の形態７に係る動画像処理カメラは、パン機構及びチルト機構を備えたものである。パン機構及びチルト機構の構造は周知であるので図示は省略する。この実施の形態７に係る動画像処理カメラは、これらのパン機構及びチルト機構を作動させるタイミングに特徴がある。
【００９２】
このパン機構及びチルト機構が搭載された動画像処理カメラの電気的な構成は、データ処理部１４からパン機構及びチルト機構に対してそれぞれパン制御信号及びチルト制御信号が供給される点を除けば、図１に示した構成と同じである。
【００９３】
パン機構及びチルト機構は、データ処理部１４からのパン制御信号及びチルト制御信号に応答してそれぞれ作動する。即ち、データ処理部１４は、実施の形態１で説明したように、移動体検知処理によりイメージセンサ１１からの動画像中に移動体を検知すると、速度マップ導出処理を実行して移動体の移動速度及び移動方向を取得する。
【００９４】
次いで、得られた移動体の移動速度及び移動方向から、動画像処理カメラを動かすべき方向を計算する。そして、この計算結果に基づいてパン制御信号及びチルト制御信号を生成し、パン機構及びチルト機構に供給する。これにより、パン機構及びチルト機構が作動し、移動体が画面の中央に位置するように動画像処理カメラが移動される。以上の処理が、イメージセンサ１１から動画像が得られる毎に繰り返し実行される。
【００９５】
この実施の形態７に係る動画像処理カメラによれば、動画像処理カメラの視野内に移動体が検知されると、その後、動画像処理カメラは、その稼働範囲内で常に移動体を捉えた状態に置かれる。従って、この実施の形態７に係る動画像処理カメラは移動体を追跡する応用に最適である。
【００９６】
（実施の形態８）
本発明の実施の形態８は、動画像処理カメラが適用された画像処理システムである。以下では、この画像処理システムの一例として、ＥＴＣ、ＥＲＰといったＩＴＳにおける料金収受システムについて説明する。
【００９７】
この料金収受システムは、図１０に示すように、車両検知カメラ、違反車撮像カメラ、課金アンテナ及び車両検知センタから構成されている。両検知カメラ及び違反車撮像カメラとしては、上述した実施の形態１〜７で説明した動画像処理カメラが使用されている。車両検知センタは、車両検知カメラ、違反車撮像カメラ及び課金アンテナを制御することにより課金処理を実行する。
【００９８】
この課金処理では、以下の処理が実行される。即ち、車両検知カメラは、検知ゾーン内に入ってきた車両を検知すると、その速度マップから該車両の移動速度を導出する。この導出された移動速度はラベリング情報として、車両検知カメラで撮像された動画像に重畳して車両検知センタに送信される。車両検知センタでは、受信したラベリング情報から該車両が所定位置に到達する時間を計算する。そして、この計算により得られた時間が経過した時、つまり該車両が上記所定位置に到達した時に、課金アンテナからＩＤの送信タイミングを該車両に知らせる。
【００９９】
車両は、課金アンテナから送信タイミングが送られてくると、これに応答してで自己のＩＤを課金アンテナに送信する。この課金アンテナで受信されたＩＤは、車両検知センタに送信される。車両検知センタでは、データベースを参照することにより、受信されたＩＤが登録されているかどうかを判断する。そして、登録されていることが判断されると、その車両を通過させる。
【０１００】
一方、登録されていないことが判断されると、車両検知センタは、該車両が不正車両であることを判断し、図示しない遮断機を作動させて該車両の進路を遮断する。この際、アラーム・警報を発するように構成してもよい。また、車両検知センタは、ラベリング情報として受信した移動速度から不正車両のナンバプレートを読み取ることのできるタイミングを計算し、計算により得られたタイミングで違反者撮像カメラを起動する。これにより、違反者撮像カメラで撮像が行われるので、不正車両の特定が容易になる。
【０１０１】
以上説明したように、この実施の形態８に係る画像処理システムによれば、車両検知センタでは、車両検知カメラからの動画像に基づいて移動速度を算出する必要がないので、該車両検知センタでの負荷が軽減される。その結果、画像処理システム全体のパフォーマンスを向上させることができる。
【０１０２】
以上説明した実施の形態８では、動画像処理カメラを料金収受システムに適用した場合を説明したが、料金収受システムに限らず、動画像処理カメラから得られる移動体の画像データから車やバイクを識別して台数を計数する交通流計測システム、動画像処理カメラから得られる移動体の画像データから車やバイクを識別し、更に、ナンバープレート部の画像データから車番号を認識する車番号認識システム等に応用できる。
【０１０３】
【発明の効果】
以上詳述したように、本発明によれば、安価な画像処理システムの構築に好適な動画像処理カメラを提供できる。また、本発明によれば、多数の動画像処理カメラを利用しやすくなるため、多地点で同時に複数の対象を検知することができる。
【０１０４】
より詳しくは、本発明の第１の態様に係る動画像処理カメラによれば、撮像により得られた画像データを処理することによって検知された移動体の画像データが通信インタフェースを介して外部に送出される。従って、この動画像処理カメラが適用された画像処理システムの画像処理装置は、移動体検知を行うことなく移動体識別処理だけを行えばよい。この移動体識別処理は、各動画像処理カメラで共通化できるので、複数の動画像処理カメラに対して１つの画像処理装置を用意すればよい。従って、動画像処理カメラの台数の増加に対する画像処理システムのコストの増加率を抑えることができる。
【０１０５】
また、この動画像処理カメラが適用された画像処理システムでは、移動体を識別するために必要な移動体の画像データだけを画像処理装置に送ればよいので、高速カメラを用いた場合であっても、伝送すべき画像データの量は少なくて済む。従って、高速カメラから画像処理装置に画像データを伝送するための伝送ラインを高速伝送に対応できるものにする必要はないので、画像処理システムのコスト上昇を回避できる。
【０１０６】
また、本発明の第１の態様に係る動画像処理カメラによれば、映像データ及び移動体の画像データを通信インタフェースからデジタル信号で送出できるので、この動画像処理カメラが適用された画像処理システムの画像処理装置は、動画像処理カメラから受け取った映像データ及び移動体の画像データをデジタル化する必要はないので、画像処理システムを簡単且つ安価に構成できる。
【０１０７】
また、本発明の第１の態様に係る動画像処理カメラによれば、映像データ及び移動体の画像データを通信インタフェースからアナログ信号で送出できるので、動画像処理カメラから画像処理装置への伝送ラインとしてアナログ伝送ラインを用いることができ、伝送ラインを安価に構成できる。
【０１０８】
この場合、移動体情報を算出する算出部と、該算出された移動体情報を映像データに重畳する重畳部とを更に備え、通信インタフェースは、重畳部からの移動体情報が重畳された映像データを送出するように構成すれば、この動画像処理カメラが適用された画像処理システムの画像処理装置は、移動体情報の算出処理を行う必要がないので、画像処理装置の構成が簡単になりコストを低減させることができる。
【０１０９】
また、算出部を移動体の座標を算出する座標算出部と移動体の移動速度を検出する速度検出部とから構成し、重畳部は、移動体の検知の有無、座標検出部で検出された移動体の座標及び速度検出部で検出された移動体の移動速度の少なくとも１つを移動体情報として映像データに重畳するように構成すれば、この動画像処理カメラが適用された画像処理システムの画像処理装置は、移動体の座標の算出処理及び移動体の移動速度の検出処理を行う必要がないので、画像処理装置の構成が簡単になりコストを低減させることができる。
【０１１０】
また、重畳部は、移動体情報を、画像データ及びデジタルデータの少なくとも１つで表したラベリング情報として前記映像生成部で生成された映像データに重畳するように構成すれば、この動画像処理カメラが適用された画像処理システムの画像処理装置は、移動体に関する情報を文字で表示させることができ、またデジタルデータとして取り込むこともできる。
【０１１１】
また、この第１の態様に係る動画像処理カメラは、通信インタフェースから出力されるデータを無線で送信するように構成すれば、この動画像処理カメラが適用された画像処理システムにおいて、動画像処理カメラの配置の自由度が増すので、画像処理システムの構築が容易になる。
【０１１２】
また、この第１の態様に係る動画像処理カメラにおいて、移動体検知部を、外部からの指示に応答して処理内容を変更するように構成すれば、この動画像処理カメラを多目的、例えば車両の検知、人の監視、プラントの異常監視、車両や人の追跡等の目的に使用できる。
【０１１３】
また、この第１の態様に係る動画像処理カメラは、ズーム機構と、該ズーム機構にズーム撮影の指示を与える指示手段、とを更に備えて構成すれば、目的とする被写体を詳細に撮像することができる。また、パン機構と、該パン機構にパン撮影の指示を与える第１指示手段と、チルト機構と、該チルト機構にチルト撮影の指示を与える第２指示手段、とを更に備えて構成すれば、例えば移動体を追跡するような応用が可能になる。
【０１１４】
更に、本発明の第２の態様に係る画像処理システムは、上述した安価に構成できる動画像処理カメラと該動画像処理カメラの通信インタフェースから送出された移動体の画像データに基づいて移動体を識別する識別部とから構成されているので、画像処理システムを安価に構成できる。
【０１１５】
この画像処理システムの識別部を、識別結果に基づいて課金処理を実行する車両検知センタで構成すれば、車両検知センタでは、動画像処理検知カメラからの移動体の画像データに基づいて課金処理を実行できるので、該車両検知センタでの負荷が軽減される。その結果、画像処理システム全体のパフォーマンスを向上させることができる。
【図面の簡単な説明】
【図１】本発明の実施の形態１に係る動画像処理カメラの電気的な構成を示すブロック図である。
【図２】本発明の実施の形態１に係る動画像処理カメラで実行される移動体検知処理の原理を説明するための図である。
【図３】本発明の実施の形態１に係る動画像処理カメラで実行される速度マップ導出処理の原理を説明するための図である。
【図４】本発明の実施の形態１に係る動画像処理カメラにおける移動体検知処理及び速度マップ導出処理の動作を説明するための図である。
【図５】本発明の実施の形態２に係る動画像処理カメラの電気的な構成を示すブロック図である。
【図６】本発明の実施の形態３に係る動画像処理カメラの電気的な構成を示すブロック図である。
【図７】本発明の実施の形態３に係る動画像処理カメラのラベリング情報の重畳処理を説明するための図である。
【図８】本発明の実施の形態４に係る動画像処理カメラの電気的な構成を示すブロック図である。
【図９】本発明の実施の形態５に係る動画像処理カメラのデータ処理部の構成を示す図である。
【図１０】本発明の実施の形態８に係る画像処理システムの構成を示す図である。
【図１１】従来の画像処理システムを説明するための図である。
【符号の説明】
１ 動画像処理カメラ
２、１３ Ａ／Ｄ変換器
３ 画像処理装置
４ ＣＰＵ
５ モニタテレビジョン
６ 送信機
７ 送信アンテナ
８ 受信アンテナ
９ 受信機
１０ 光学系
１１ イメージセンサ
１２ 駆動回路
１４ データ処理部
１５、１８ Ｄ／Ａ変換器
１６、１７ デジタル通信インタフェース
２０ 映像生成部
２１ 移動体検知部
３０、３３ アナログ伝送ライン
３１、３２ デジタル伝送ライン
【発明の属する技術分野】
本発明は、動画像を処理する動画像処理カメラ及びこれを用いた画像処理システムに関する。
【０００２】
【従来の技術】
従来、定点に設置されたカメラを用いて移動体を監視する監視システムが知られている。この監視システムは、例えば図１１に示すように、複数の撮像サブシステムと中央処理装置（以下、「ＣＰＵ」という）５６とから構成されている。各撮像サブシステムは、カメラ５０、送信機５１、送信アンテナ５２、受信アンテナ５３、受信機５４及び画像処理装置５５から構成されている。
【０００３】
カメラ５０は、通常のビデオカメラと同様に、光学系から入力された光学像を、固体撮像デバイスで光電変換することにより映像信号を生成する。このカメラ５０で生成された映像信号は、送信機５１に送られる。
【０００４】
送信機５１は、カメラ５０からの映像信号を変調して送信アンテナ５２に送る。送信アンテナ５２は、変調された映像信号を電磁波として空中に放射する。受信アンテナ５３は、空中に放射された電磁波を受信して受信機５４に送る。受信機５４は、受信アンテナ５４からの信号を復調して映像信号を再生し、画像処理装置５５に送る。
【０００５】
画像処理装置５５は、Ａ／Ｄ変換器６０、移動体検知部６１及び識別部６２から構成されている。Ａ／Ｄ変換器６０は、受信機５４で復調されたアナログの映像信号をデジタル信号に変換し、デジタル映像データとして移動体検知部６１に送る。移動体検知部６１は、受け取ったデジタル映像データから移動体領域を求め、この求められた移動体領域のデジタル映像データ移動体候補を検知する。この移動体検知部６１での検知結果は識別部６２に送られる。
【０００６】
識別部６２は、移動体検知部６１で検知された移動体候補が車であるか、人であるか或いは誤検知であるか等を識別する。この識別部６２による識別結果は、画像処理装置５５の出力としてＣＰＵ５６に送られる。ＣＰＵ５６は、この画像処理装置５５からの識別結果に基づいて、種々の処理を行う。
【０００７】
【発明が解決しようとする課題】
ところで、上述した従来の監視システムでは、各撮像サブシステムはカメラ及び画像処理装置を含むので、カメラの台数を増やすに連れて画像処理装置の台数も増やす必要がある。その結果、カメラの台数の増加に対する、監視システムのコストの増加率が大きいという問題がある。
【０００８】
また、高速で移動する移動体（以下、「高速移動体」という）を撮像するために、フレームレートの高い高速カメラを用いると、この高速カメラから得られた動画像データを伝送するための伝送ラインを高速伝送に対応できるものにする必要があり、コストが大きくなるという問題がある。
【０００９】
本発明は上述した問題を解消するためになされたものであり、その目的は、安価な画像処理システムの構築に好適な動画像処理カメラを提供することにある。
【００１０】
【課題を解決するための手段】
本発明の第１の態様に係る動画像処理カメラは、上記目的を達成するために、撮像により得られた画像データから映像データを生成する映像生成部と、前記画像データから移動体を検知する移動体検知部と、前記映像生成部で生成された映像データ及び前記移動体検知部で検知された移動体の画像データを送出する通信インタフェース、とを備えている。
【００１１】
この動画像処理カメラによれば、撮像により得られた画像データを処理することによって移動体が検知される。そして、その検知された移動体の画像データが通信インタフェースを介して外部に送出される。従って、この動画像処理カメラが適用された画像処理システムの画像処理装置は、移動体検知を行う必要がなく、移動体を識別するための移動体識別処理だけを行えばよい。この移動体識別処理は、各動画像処理カメラで共通化できる。従って、複数の動画像処理カメラに対して１つの画像処理装置を用意すればよいので、動画像処理カメラの台数の増加に対する画像処理システムのコストの増加率を抑えることができる。
【００１２】
また、この動画像処理カメラが適用された画像処理システムでは、移動体を識別するために、撮像により得られた画像データの全てを画像処理装置に送る必要はなく、移動体の画像データだけを送ればよい。従って、高速移動体を撮像するためにフレームレートの高い高速カメラを用いた場合であっても、伝送すべき画像データの量は少ないので、高速カメラから画像処理装置に画像データを伝送するための伝送ラインを高速伝送に対応できるものにする必要はない。その結果、画像処理システムのコスト上昇を回避できる。
【００１３】
また、この第１の態様に係る動画像処理カメラにおいて、前記通信インタフェースは、前記映像生成部で生成された映像データ及び前記移動体検知部で検知された移動体の画像データをデジタル信号で送出するように構成できる。この構成によれば、この動画像処理カメラが適用された画像処理システムの画像処理装置は、動画像処理カメラから受け取った映像データ及び移動体の画像データをデジタル化する必要はないので、画像処理システムを簡単且つ安価に構成できる。
【００１４】
また、この第１の態様に係る動画像処理カメラにおいて、前記通信インタフェースは、前記映像生成部で生成された映像データ及び前記移動体検知部で検知された移動体の画像データをアナログ信号で送出するように構成できる。この構成によれば、動画像処理カメラから画像処理装置への伝送ラインとしてアナログ伝送ラインを用いることができるので、伝送ラインを安価に構成できる。
【００１５】
この場合、前記移動体検知部で検知された移動体の画像データに基づいて該移動体の状態を表す移動体情報を算出する算出部と、該算出部で算出された前記移動体情報を前記映像生成部で生成された映像データに重畳する重畳部、とを更に備え、前記通信インタフェースは、該重畳部からの前記移動体情報が重畳された映像データを送出するように構成できる。この構成によれば、この動画像処理カメラが適用された画像処理システムの画像処理装置は、移動体情報の算出処理を行う必要がないので、画像処理装置の構成が簡単になりコストを低減させることができる。
【００１６】
また、前記算出部は、前記移動体検知部で検知された移動体の座標を算出する座標算出部と、前記移動体検知部で検知された移動体の移動速度を検出する速度検出部、とを含み、前記重畳部は、前記移動体検知部での移動体の検知の有無、前記座標検出部で検出された移動体の座標及び前記速度検出部で検出された移動体の移動速度の少なくとも１つを前記移動体情報として前記映像生成部で生成された映像データに重畳するように構成できる。この構成によれば、この動画像処理カメラが適用された画像処理システムの画像処理装置は、移動体の座標の算出処理及び移動体の移動速度の検出処理を行う必要がないので、画像処理装置の構成が簡単になりコストを低減させることができる。
【００１７】
また、前記重畳部は、前記移動体情報を、画像データ及びデジタルデータの少なくとも１つで表したラベリング情報として前記映像生成部で生成された映像データに重畳するように構成できる。この構成によれば、この動画像処理カメラが適用された画像処理システムの画像処理装置は、移動体に関する情報を文字で表示させることができ、またデジタルデータとして取り込むこともできる。
【００１８】
また、この第１の態様に係る動画像処理カメラは、前記通信インタフェースから出力されるデータを無線で送信する無線送信手段、を更に備えて構成できる。この構成によれば、この動画像処理カメラが適用された画像処理システムにおいて、動画像処理カメラの配置の自由度が増すので、画像処理システムの構築が容易になる。
【００１９】
また、この第１の態様に係る動画像処理カメラにおいて、前記移動体検知部は、外部からの指示に応答して処理内容を変更するように構成できる。この構成によれば、この動画像処理カメラを多目的、例えば車両の検知、人の監視、プラントの異常監視、車両や人の追跡等の目的に使用できる。
【００２０】
また、この第１の態様に係る動画像処理カメラは、ズーム機構と、該ズーム機構にズーム撮影の指示を与える指示手段、とを更に備えて構成できる。この構成によれば、目的とする被写体を詳細に撮像することができる。
【００２１】
また、この第１の態様に係る動画像処理カメラは、パン機構と、該パン機構にパン撮影の指示を与える第１指示手段と、チルト機構と、該チルト機構にチルト撮影の指示を与える第２指示手段、とを更に備えて構成できる。この構成によれば、例えば移動体を追跡するような応用が可能になる。
【００２２】
また、本発明の第２の態様に係る画像処理システムは、上記目的を達成するために、上述した動画像処理カメラと、該動画像処理カメラの前記通信インタフェースから送出された前記移動体の画像データに基づいて移動体を識別する識別部、とを備えて構成されている。この画像処理システムによれば、上述した安価に構成できる動画像処理カメラを使用しているので、画像処理システムを安価に構成できる。
【００２３】
この画像処理システムの前記識別部は、識別結果に基づいて課金処理を実行する車両検知センタにより構成されている。この画像処理システムによれば、車両検知センタでは、動画像処理検知カメラからの移動体の画像データに基づいて課金処理を実行できるので、該車両検知センタでの負荷が軽減される。その結果、画像処理システム全体のパフォーマンスを向上させることができる。
【００２４】
【発明の実施の形態】
以下、本発明の実施の形態を、図面を参照しながら詳細に説明する。
【００２５】
（実施の形態１）
本発明の実施の形態１に係る動画像処理カメラは、イメージセンサから得られた動画像データを処理することにより移動体を検知し、その検知された移動体の画像データを外部に出力する。
【００２６】
図１は、この実施の形態１に係る動画像処理カメラ１が適用された監視システムの構成を示すブロック図である。この監視システムは、本発明の画像処理システムに対応する。この監視システムは、動画像処理カメラ１、Ａ／Ｄ変換器２、画像処理装置３、ＣＰＵ４及びモニタテレビジョン（モニタＴＶ）５から構成されている。動画像処理カメラ１は、アナログ伝送ライン３０及びデジタル伝送ライン３１を介して画像処理装置３に接続されている。
【００２７】
なお、画像処理装置３には、動画像処理カメラ１、Ａ／Ｄ変換器２及びモニタテレビジョン５から成る撮像サブシステムが複数接続される。各撮像サブシステムは同一であるので、以下では、１つの撮像サブシステムが画像処理装置３に接続される場合について説明する。
【００２８】
動画像処理カメラ１は、光学系１０、イメージセンサ１１、駆動回路１２、Ａ／Ｄ変換器１３、データ処理部１４、アナログ通信インタフェースとしてのＤ／Ａ変換器１５及びデジタル通信インタフェース（Ｉ／Ｆ）１６から構成されている。
【００２９】
光学系１０は、レンズ、プリズム、光学フィルタといった周知の光学素子から構成されており、光学像をイメージセンサ１１上に結像させる。
【００３０】
イメージセンサ１１は、駆動回路１２からの駆動信号に応答して、光学系１０からの光学像を光電変換してアナログ動画像信号を生成する。このイメージセンサ１１で生成されたアナログ動画像信号は、Ａ／Ｄ変換器１３に送られる。イメージセンサ１１としては、ＣＣＤ形デバイス、ＭＯＳ形デバイス、その他の固体撮像デバイスを用いることができる。
【００３１】
駆動回路１２は、データ処理部１４からの制御信号に基づいて上述した駆動信号を生成する。この駆動信号は、イメージセンサ１１から単位時間に出力されるフレーム数、即ちフレームレートを規定するための信号、例えばドットクロック信号、水平同期信号（ＨＤ）、垂直同期信号（ＶＨ）等を含む。
【００３２】
なお、本明細書では、３０枚／秒のフレームレートを標準フレームレート、３０枚／秒より大きいフレームレートを高速フレームレート、３０枚／秒より小さいフレームレートを低速フレームレートという。この動画像処理カメラでは、フレームレートは、１０〜１２０枚／秒の範囲で可変である。
【００３３】
Ａ／Ｄ変換器１３は、イメージセンサ１１からのアナログ動画像信号をデジタル動画像信号に変換する。このＡ／Ｄ変換器１３から出力されるデジタル動画像信号は、動画像データとしてデータ処理部１４に供給される。
【００３４】
データ処理部１４は、ＦＰＧＡ（Field Programmable Gate Array）、ＡＳＩＣ（Application Specific IC）等によって構成できる。このデータ処理部１４は、映像生成部２０及び移動体検知部２１から構成されている。映像生成部２０は、Ａ／Ｄ変換器１３から送られてくる動画像データからデジタル映像データを生成し、Ｄ／Ａ変換器１５に送る。また、移動体検知部２１は、Ａ／Ｄ変換器１３から送られてくる動画像データから移動体を検出し、移動体の画像データをデジタル通信インタフェース１６に送る。この移動体の検出処理の詳細は、後述する。なお、データ処理部１４は、上記以外に、フレームレートを制御するための制御信号を生成して駆動回路１２に供給する処理も行う。
【００３５】
Ｄ／Ａ変換器１５は、データ処理部１４の映像生成部２０からのデジタル動画像信号をアナログ動画像信号に変換し、例えばＮＴＳＣ方式でアナログ伝送ライン３０に送出する。
【００３６】
デジタル通信インタフェース１６は、データ処理部１４の移動体検知部２１からのデジタル動画像信号及びその他のデジタル信号をデジタル伝送ライン３１を介して画像処理装置３に送出すると共に、デジタル伝送ライン３１からの信号をデータ処理部１４へ供給する。このデジタル通信インタフェース１６としては、ローカルエリアネットワーク（ＬＡＮ）インタフェース、ＩＥＥＥ１３９４インタフェース、シリアルインタフェース、パラレルインタフェース、ＵＳＢインタフェース等を用いることができる。
【００３７】
この動画像処理カメラ１は、このデジタル通信インタフェース１６を介して外部の画像処理装置に接続できるようになっている。従って、この動画像処理カメラ１は、例えばＬＡＮによって他の複数の装置に接続できるので画像処理システムを構築するのに好適である。
【００３８】
画像処理システムを構成するＡ／Ｄ変換器２は、動画像処理カメラ１からアナログ伝送ライン３０を介して送られてくるアナログ映像信号をデジタル映像信号に変換して画像処理装置３に供給する。
【００３９】
画像処理装置３は、例えばＦＰＧＡ、ＡＳＩＣ等によって専用カードとして構成されている。この画像処理装置３は、動画像処理カメラ１から送られてきた移動体の画像データに基づいて、その移動体が車であるか、人であるか或いは誤検知であるか等を識別する移動体識別処理を実行する。
【００４０】
ＣＰＵ４は、画像処理装置３の起動及び停止、画像処理装置３へのパラメータの設定等を行う。このＣＰＵ４と画像処理装置３とは、例えばＣＰＣＩバスによって接続される。なお、画像処理装置３で実行される移動体識別処理が軽負荷である場合は、移動体識別処理の全てをＣＰＵ４で実行するように構成できる。この構成によれば、画像処理装置３が不要になるので画像処理システムを小規模且つ安価に構成できる。
【００４１】
モニタテレビジョン５はオプションであり、アナログ伝送ライン３０に接続される。ユーザは、このモニタテレビジョン５を見ることによって、動画像処理カメラが捉えている被写体を確認できる。
【００４２】
次に、以上のように構成される画像処理システムの動作を、動画像処理カメラ１の動作を中心に説明する。
【００４３】
通常の状態では、駆動回路１２は、イメージセンサ１１を標準フレームレートで動作させるための駆動信号を生成し、イメージセンサ１１に供給する。これにより、イメージセンサ１１は、１／３０秒毎に１フレーム分のアナログ動画像信号を出力する。このアナログ動画像信号はＡ／Ｄ変換器１３でデジタル動画像信号に変換され、動画像データとしてデータ処理部１４の映像生成部２０及び移動体検知部２１に供給される。
【００４４】
映像生成部２０は、入力された動画像データを順次デジタル映像信号に変換し、Ｄ／Ａ変換器１５に供給する。Ｄ／Ａ変換器１５は、受け取ったデジタル映像信号をアナログ映像信号に変換してアナログ伝送ライン３０に送出する。Ａ／Ｄ変換器２は、このアナログ伝送ライン３０から伝送されてくるアナログ映像信号をデジタル映像信号に変換して画像処理装置３に送る。画像処理装置３は、このＡ／Ｄ変換器２からのデジタル映像信号に基づいて、後述する移動体識別処理以外の種々の処理を行う。
【００４５】
モニタテレビジョン５がアナログ伝送ライン３０に接続されている場合は、モニタテレビジョン５は、アナログ伝送ライン３０に流れているアナログ映像信号に基づいて画像を表示する。
【００４６】
移動体検知部２１は、入力された動画像データを入力画像として順次メモリ（図示省略）の入力画像エリアに格納する。
【００４７】
次いで、移動体検知部２１は、Ａ／Ｄ変換器１３から動画像データを受け取る毎に移動体検知処理及び速度マップ導出処理を実行する。
【００４８】
移動体検知の原理を図２に示す。この移動体検知処理では、背景画像と入力画像との差が計算される。この計算結果がゼロの場合は、入力画像は背景画像と同じであるので移動体が検知されなかった旨が判断される。一方、計算結果がゼロでない場合は、移動体が検知された旨が判断される。
【００４９】
速度マップ導出の原理を図３に示す。この速度マップ導出処理では、時刻ｔの入力画像と時刻ｔ＋１の入力画像とを比較することにより移動ベクトルの画面上の分布、即ちオプティカルフローが生成される。そして、このオプティカルフローを利用して移動体の実際の移動速度及び方向を表す速度マップが導出される。
【００５０】
以上の原理に基づく移動体検知部２１の動作を図４を参照しながら説明する。移動体検知部２１は、先ず、メモリに格納された入力画像のぶれ修正、つまり動画像処理カメラのぶれに起因する入力画像の乱れの補正を行う。このぶれ修正がなされた入力画像は、時刻ｔの入力画像Ｉ（ｔ）としてメモリに記憶される。
【００５１】
次いで、図２を参照して説明したように、メモリの背景画像エリアに格納されている背景画像とメモリの入力画像エリアに格納されている入力画像Ｉ（ｔ）との差を計算することにより背景差分が求められる。そして、この背景差分が所定値より大きい場合は、移動体が検知された旨が判断され、移動体領域と背景領域とが求められる。この求められた移動体領域の画像は、メモリの移動体領域画像エリアに格納される。一方、上記背景差分が上記所定値以下の場合は、移動体が検知されなかった旨が判断され、メモリの移動体領域画像エリアにはゼロが格納される。
【００５２】
また、メモリの背景画像エリアに格納されている背景画像を更新するかどうかは、上記背景差分を所定のしきい値と比較することにより判断される。例えば、今、入力画像をＩ（ｔ）、背景画像をＢ（ｔ）とすると、背景画像は、「Ｂ（ｔ＋１）＝αＩ（ｔ）＋（１−α）Ｂ（ｔ）」の条件で更新される。ここで、αは０≦α≦１であり、移動体領域及び背景領域に応じて決められる値である。なお、背景画像を更新するかどうかは、時刻ｔとｔ−１の入力画像の差分である時間差分に基づいて決定することもできる。以上の処理により移動体検知処理が完了する。
【００５３】
次に、動画像データが入力されると、その動画像データが時刻ｔの入力画像Ｉ（ｔ）になり、それまでの入力画像Ｉ（ｔ）が時刻ｔ−１の入力画像Ｉ（ｔ−１）になる。この状態で、図３を参照して説明したように、時刻ｔの入力画像Ｉ（ｔ）と時刻ｔ−１の入力画像Ｉ（ｔ−１）とが比較されてオプティカルフローが生成される。そして、このオプティカルフローを利用して移動体の実際の移動速度及び方向を表す速度マップが導出される。この導出された速度マップはメモリの速度マップ領域に格納される。以上により、速度マップ導出処理が完了する。
【００５４】
なお、移動体の移動速度は、前回の移動体検知処理で抽出された移動体の画像と今回の移動体検知処理で抽出された移動体の画像との間の動画像上における距離と、その時点におけるフレームレートとに基づいて求めることもできる。
【００５５】
この移動体検知処理により得られた移動体の動画像データは、デジタル通信インタフェース１６を介してデジタル伝送ライン３１に送出される。画像処理装置３は、このデジタル伝送ライン３１から送られてくる移動体の画像データを取り込み移動体の識別処理を行う。この識別処理では、移動体の画像データが車であるか、人であるか或いは誤検知であるか等を識別する。
【００５６】
この移動体検知部２１による速度マップ導出処理が終了すると、データ処理部１４は、フレームレートの変更処理を行う。このフレームレート変更処理では、上述した速度マップ導出処理で導出された移動速度が所定値以下であれば、データ処理部１４は、標準フレームレートに対応する制御信号を生成して駆動回路１２に供給する。これにより、動画像処理カメラは、標準フレームレートで動作する。一方、上記移動速度が所定値より大きければ、データ処理部１４は、高速フレームレートに対応する制御信号を生成して駆動回路１２に供給する。これにより、フレームレート変更処理が完了し、以後、動画像処理カメラは高速フレームレートで動作する。この構成によれば、動画像処理カメラは、通常は標準フレームレートで動作し、高速移動体が検知されると高速フレームレートで動作するので、高速移動体を精度よく検出できる。
【００５７】
また、データ処理部１４は、動画像データをＤ／Ａ変換器１５を介して外部に送出する場合、その時点で高速フレームレートに設定されていれば、フレームを間引いて送出する。即ち、データ処理部１４は、通常は標準フレームレートで撮像された動画像を１／３０秒毎に高解像度で出力するが、高速フレームレートに変更された場合は、ＮＴＳＣ方式に従ったビデオレートになるようにフレームを間引いて送出する。この構成により、Ｄ／Ａ変換器１５に既存のモニタテレビジョン５をそのまま接続できる。
【００５８】
以上説明したように、この実施の形態１に係る動画像処理カメラによれば、イメージセンサ１１から得られた動画像データを、この動画像処理カメラに内蔵されるデータ処理部１４の移動体検知部２１で処理することによって、その動画像に含まれる移動体が検知される。そして、その検知された移動体の画像データがデジタル通信インタフェース１６を介して外部に送出される。従って、この動画像処理カメラが適用された画像処理システムの画像処理装置は、移動体検知を行う必要がなく、移動体を識別するための移動体識別処理だけを行えばよい。この移動体識別処理は、各動画像処理カメラで共通化できる。従って、複数の動画像処理カメラに対して１つの画像処理装置を用意すればよいので、動画像処理カメラの台数の増加に対する画像処理システムのコストの増加率を抑えることができる。
【００５９】
（実施の形態２）
本発明の実施の形態２に係る動画像処理カメラは、検知された移動体の画像データのみならず映像データをもデジタル信号で外部に送出するようにしたものである。
【００６０】
図５は、この実施の形態２に係る動画像処理カメラが適用された監視システムの構成を示すブロック図である。この監視システムで使用される動画像処理カメラは、実施の形態１に係る動画像処理カメラ（図１参照）からＤ／Ａ変換器１５及びデジタル通信インタフェース１６が除去され、代わりにデジタル通信インタフェース１７が追加されている。以下、実施の形態１に係る動画像処理カメラと異なる部分を中心に説明する。
【００６１】
デジタル通信インタフェース１７は、デジタル伝送ライン３２を介して画像処理装置３に接続されている。このデジタル通信インタフェース１７は、映像生成部２０からの動画像データ及び移動体検知部２１からの移動体の画像データを入力し、デジタル信号でデジタル伝送ライン３２に送出する。この際、上記動画像データ及び移動体の画像データの各々にはデータの種類を識別するための識別フラグが付されて送出される。
【００６２】
画像処理装置３は、デジタル伝送ライン３２からデータを受け取った際に、この識別フラグを参照することにより、受け取ったデータが動画像データであるか又は移動体の画像データであるかかを判断する。
【００６３】
以上のように構成される動画像処理カメラが適用された監視システムの動作は、動画像データがデジタル信号で画像処理装置３に送られることを除けば、上述した実施の形態１に係る監視システムの動作と同じである。
【００６４】
この実施の形態２に係る動画像処理カメラによれば、監視システムの画像処理装置は、動画像処理カメラから受け取った映像データ及び移動体の画像データをデジタル化する必要はないので、画像処理システムを安価に構成できる。
【００６５】
（実施の形態３）
本発明の実施の形態３に係る動画像処理カメラは、検知された移動体の状態を表す移動体情報を、その動画像に重畳して外部に送出する。
【００６６】
図６は、この実施の形態３に係る動画像処理カメラが適用された監視システムの構成を示すブロック図である。この監視システムで使用される動画像処理カメラは、実施の形態１に係る動画像処理カメラ（図１参照）からＤ／Ａ変換器１５及びデジタル通信インタフェース１６が除去され、代わりにＡ／Ｄ変換器１８が追加されている。以下、実施の形態１の動画像処理カメラと異なる部分を中心に説明する。
【００６７】
Ａ／Ｄ変換器１８は、アナログ伝送ライン３３を介して画像処理装置３に接続されている。このＡ／Ｄ変換器１８は、映像生成部２０からの動画像データ及び移動体検知部２１からの移動体の画像データを入力し、アナログ信号でアナログ伝送ライン３３に送出する。この際、上記動画像データ及び移動体の画像データの各々にはデータの種類を識別するための識別フラグが付されて送出される。
【００６８】
画像処理装置３は、アナログ伝送ライン３３からデータを受け取った際に、この識別フラグを参照することにより、受け取ったデータが動画像データであるか又は移動体の画像データであるかを判断する。
【００６９】
以上のように構成される実施の形態３に係る動画像処理カメラは、実施の形態１に係る動画像処理カメラの動作に加えて、以下の動作が追加されている。
【００７０】
即ち、実施の形態１で説明した移動体検知処理が完了すると、データ処理部１４は、ラベリング情報の生成処理を実行する。即ち、メモリの移動体領域画像エリアを参照することによって移動体が検知された旨が判断されると、その移動体の画像に番号が付与されると共に、その移動体の画面上での座標（Ｘ、Ｙ）、重心、面積、移動方向、移動速度等がラベリング情報として算出される。これらの算出は、メモリの移動体領域画像エリアに格納された移動体の画像及びメモリの速度マップ領域に格納された速度マップに基づいて行われる。
【００７１】
次いで、データ処理部１４の映像生成部２０は、ラベリング情報の重畳処理を実行する。即ち、データ処理部１４は、図７（Ａ）に一例を示すように、上記ラベリング情報を画像データに変換し、メモリから読み出された入力画像上に書き込む。なお、図７（Ａ）は、ラベリング情報の一例として、移動体の有無、座標（Ｘ、Ｙ）及び移動速度だけが重畳される場合の例を示している。
【００７２】
次いで、データ処理部１４は、ラベリング情報が重畳された動画像データを、Ｄ／Ａ変換器１８に供給する。Ｄ／Ａ変換器１８は、この動画像データをアナログ動画像信号に変換し、アナログ伝送ライン３３に送出する。その後、データ処理部１４は、実施の形態１で説明したと同様の速度マップ導出処理及びフレームレート変更処理を実行する。なお、このアナログ伝送ライン３３にモニタテレビジョン５が接続されていると、ユーザは、現在動画像処理カメラで撮影されている画像を見ることができると共に、検知された移動体の状態（速度及び位置）を知ることができる。
【００７３】
一方、データ処理部１４の移動体検知部２１は、実施の形態１で説明した手順で移動体を検知し、検知された移動体の画像データをＤ／Ａ変換器１８に送る。Ｄ／Ａ変換器１８は、この移動体の画像データをアナログ画像信号に変換し、アナログ伝送ライン３３に送出する。
【００７４】
画像処理装置３は、このアナログ伝送ライン３３から送られてくるラベリング情報が重畳された動画像データ及び移動体の画像データを取り込み移動体の識別処理を行う。この識別処理では、ラベリング情報を考慮して、移動体の画像データが車であるか、人であるか或いは誤検知であるか等を識別する。
【００７５】
なお、ラベリング情報は、画像データとしてではなく、デジタルデータとして動画像データと一緒に送出するように構成できる。この場合、例えば図７（Ｂ）に示すように、動画像の端部にラベリング情報表示領域を設け、この領域にデジタルデータでラベリング情報を書き込む。この構成によれば、この動画像処理カメラに接続された画像処理装置は、デジタルデータとして受け取ったラベリング情報をそのまま種々の処理に利用できる。
【００７６】
以上説明したように、この実施の形態３に係る動画像処理カメラによれば、イメージセンサ１１から得られた動画像に含まれる移動体が検知される。そして、その検知された移動体に関する情報が算出され、動画像に重畳されて外部に送出される。従って、この動画像を受け取った外部の画像処理装置３では移動体検知処理や移動体情報の算出処理を行う必要がないので、画像処理装置の構成が簡単になりコストを低減させることができる。
【００７７】
（実施の形態４）
本発明の実施の形態４に係る動画像処理カメラは、撮像により得られた映像データ及び検知された移動体の画像データを無線で画像処理装置に送信する。
【００７８】
図８は、この実施の形態４に係る動画像処理カメラが適用された監視システムの構成を示すブロック図である。この監視システムでは、動画像処理カメラ１と画像処理装置３との間の通信路が無線で構成されている。
【００７９】
この通信路は、送信機６、送信アンテナ７、受信アンテナ８及び受信機９で構成されている。送信機６は、動画像処理カメラ１のＤ／Ａ変換器１５からの映像データ及びデジタル通信インタフェース１７からの移動体の画像データを変調し、送信アンテナ７を介して電磁波として空中に放射する。受信アンテナ５３は、空中に放射された電磁波を受信して受信機９に送る。受信機９は、受信アンテナ８からの信号を復調して映像データ及び移動体の画像データを再生し、Ａ／Ｄ変換器２及び画像処理装置３にそれぞれ送る。上記以外の構成及び動作は、実施の形態１のそれらと同じである。
【００８０】
以上説明したように、この実施の形態４に係る動画像処理カメラが適用された監視システムによれば、動画像処理カメラの配置の自由度が増すので、監視システムの構築が容易になる。
【００８１】
（実施の形態５）
本発明の実施の形態５に係る動画像処理カメラは、データ処理部で実行される処理内容を変更できるようにしたものである。
【００８２】
この実施の形態５に係る動画像処理カメラでは、データ処理部１４は、図９に示すように、ＲＯＭとＦＰＧＡとによって構成されている。ＲＯＭは４つの領域に区切られており、各領域には、ＦＰＧＡの構成を決定するためのコンフィグレーションデータＤ１〜Ｄ４が記憶されている。コンフィグレーションデータＤ１、Ｄ２、Ｄ３及びＤ４は、ＦＰＧＡを車両の検知用、人の検知用、プラントの異常監視用及び追跡用にそれぞれ構築するためのデータである。
【００８３】
このＲＯＭに形成された４つの領域の何れか１つは、図示しないモード設定用スイッチから供給される選択信号によって選択される。そして、選択された領域に記憶されているコンフィグレーションデータがアクティブにされ、ＦＰＧＡはそのコンフィグレーションデータに従った回路になるように構築される。
【００８４】
今、図示しないモード設定用スイッチによってＲＯＭ内のコンフィグレーションデータＤ１が選択されたと仮定すると、ＦＰＧＡには車両（移動体）の検知を実行する回路が構築される。これにより、ＦＰＧＡは、上述した各実施の形態で説明したような、移動体検知処理、速度マップ導出処理、ラベリング情報の生成処理、ラベリング情報の重畳処理、フレームレートの変更処理等を実行できる状態に設定される。
【００８５】
以上説明したように、この実施の形態５に係る動画像処理カメラによれば、簡単な操作により、動画像処理カメラを多目的、例えば車両の検知、人の監視、プラントの異常監視、車両や人の追跡等の目的に使用できる。
【００８６】
なお、この実施の形態５では、複数のコンフィグレーションデータをＲＯＭに記憶しておき、モード設定用スイッチで選択された１つのコンフィグレーションに従ってＦＰＧＡの回路を構築するようにしたが、外部の画像処理装置からデジタル通信インタフェース１６を介してＦＰＧＡにコンフィグレーションデータを供給するように構成してもよい。この構成によれば、ＲＯＭやモード設定用スイッチが不要になるので、動画像処理カメラの構成が簡単になると共に、動画像処理カメラのリモートコントロールが可能になる。
【００８７】
（実施の形態６）
本発明の実施の形態６に係る動画像処理カメラは、ズーム機構を備えたものである。ズーム機構の構造は周知であるので図示は省略する。この実施の形態６に係る動画像処理カメラは、このズーム機構を作動させるタイミングに特徴がある。
【００８８】
このズーム機構が搭載された動画像処理カメラの電気的な構成は、データ処理部１４からズーム機構に対してズーム制御信号が供給される点を除けば、図１に示した構成と同じである。
【００８９】
ズーム機構は、データ処理部１４からのズーム制御信号に応答して作動する。即ち、データ処理部１４は、実施の形態１で説明したように、イメージセンサ１１からの動画像中に移動体を検知すると、ズーム制御信号をズーム機構に供給する。これにより、ズーム機構が作動して拡大された移動体の光学像がイメージセンサ１１上に結像される。この際、ズームアップ及びズームダウンの制御は、実施の形態１で説明した移動体検知処理によって抽出された移動体の大きさに基づいて行うことができる。
【００９０】
この実施の形態６に係る動画像処理カメラによれば、移動体が検知された場合にズーム機構を作動させることにより、直ちにその移動体の詳細を撮像することができる。従って、例えば移動体を撮像することを目的とする画像処理システムでは、その移動体が、動画像処理カメラの設置点の近傍の好適な撮像ポイントに到達するまで待つことなく（従って、移動速度の計算は不要）、移動体を検知した時点で直ちに高速フレームレートで撮像を開始すれば、高速移動体であっても移動体の全体像を正確に撮像することができる。
【００９１】
（実施の形態７）
本発明の実施の形態７に係る動画像処理カメラは、パン機構及びチルト機構を備えたものである。パン機構及びチルト機構の構造は周知であるので図示は省略する。この実施の形態７に係る動画像処理カメラは、これらのパン機構及びチルト機構を作動させるタイミングに特徴がある。
【００９２】
このパン機構及びチルト機構が搭載された動画像処理カメラの電気的な構成は、データ処理部１４からパン機構及びチルト機構に対してそれぞれパン制御信号及びチルト制御信号が供給される点を除けば、図１に示した構成と同じである。
【００９３】
パン機構及びチルト機構は、データ処理部１４からのパン制御信号及びチルト制御信号に応答してそれぞれ作動する。即ち、データ処理部１４は、実施の形態１で説明したように、移動体検知処理によりイメージセンサ１１からの動画像中に移動体を検知すると、速度マップ導出処理を実行して移動体の移動速度及び移動方向を取得する。
【００９４】
次いで、得られた移動体の移動速度及び移動方向から、動画像処理カメラを動かすべき方向を計算する。そして、この計算結果に基づいてパン制御信号及びチルト制御信号を生成し、パン機構及びチルト機構に供給する。これにより、パン機構及びチルト機構が作動し、移動体が画面の中央に位置するように動画像処理カメラが移動される。以上の処理が、イメージセンサ１１から動画像が得られる毎に繰り返し実行される。
【００９５】
この実施の形態７に係る動画像処理カメラによれば、動画像処理カメラの視野内に移動体が検知されると、その後、動画像処理カメラは、その稼働範囲内で常に移動体を捉えた状態に置かれる。従って、この実施の形態７に係る動画像処理カメラは移動体を追跡する応用に最適である。
【００９６】
（実施の形態８）
本発明の実施の形態８は、動画像処理カメラが適用された画像処理システムである。以下では、この画像処理システムの一例として、ＥＴＣ、ＥＲＰといったＩＴＳにおける料金収受システムについて説明する。
【００９７】
この料金収受システムは、図１０に示すように、車両検知カメラ、違反車撮像カメラ、課金アンテナ及び車両検知センタから構成されている。両検知カメラ及び違反車撮像カメラとしては、上述した実施の形態１〜７で説明した動画像処理カメラが使用されている。車両検知センタは、車両検知カメラ、違反車撮像カメラ及び課金アンテナを制御することにより課金処理を実行する。
【００９８】
この課金処理では、以下の処理が実行される。即ち、車両検知カメラは、検知ゾーン内に入ってきた車両を検知すると、その速度マップから該車両の移動速度を導出する。この導出された移動速度はラベリング情報として、車両検知カメラで撮像された動画像に重畳して車両検知センタに送信される。車両検知センタでは、受信したラベリング情報から該車両が所定位置に到達する時間を計算する。そして、この計算により得られた時間が経過した時、つまり該車両が上記所定位置に到達した時に、課金アンテナからＩＤの送信タイミングを該車両に知らせる。
【００９９】
車両は、課金アンテナから送信タイミングが送られてくると、これに応答してで自己のＩＤを課金アンテナに送信する。この課金アンテナで受信されたＩＤは、車両検知センタに送信される。車両検知センタでは、データベースを参照することにより、受信されたＩＤが登録されているかどうかを判断する。そして、登録されていることが判断されると、その車両を通過させる。
【０１００】
一方、登録されていないことが判断されると、車両検知センタは、該車両が不正車両であることを判断し、図示しない遮断機を作動させて該車両の進路を遮断する。この際、アラーム・警報を発するように構成してもよい。また、車両検知センタは、ラベリング情報として受信した移動速度から不正車両のナンバプレートを読み取ることのできるタイミングを計算し、計算により得られたタイミングで違反者撮像カメラを起動する。これにより、違反者撮像カメラで撮像が行われるので、不正車両の特定が容易になる。
【０１０１】
以上説明したように、この実施の形態８に係る画像処理システムによれば、車両検知センタでは、車両検知カメラからの動画像に基づいて移動速度を算出する必要がないので、該車両検知センタでの負荷が軽減される。その結果、画像処理システム全体のパフォーマンスを向上させることができる。
【０１０２】
以上説明した実施の形態８では、動画像処理カメラを料金収受システムに適用した場合を説明したが、料金収受システムに限らず、動画像処理カメラから得られる移動体の画像データから車やバイクを識別して台数を計数する交通流計測システム、動画像処理カメラから得られる移動体の画像データから車やバイクを識別し、更に、ナンバープレート部の画像データから車番号を認識する車番号認識システム等に応用できる。
【０１０３】
【発明の効果】
以上詳述したように、本発明によれば、安価な画像処理システムの構築に好適な動画像処理カメラを提供できる。また、本発明によれば、多数の動画像処理カメラを利用しやすくなるため、多地点で同時に複数の対象を検知することができる。
【０１０４】
より詳しくは、本発明の第１の態様に係る動画像処理カメラによれば、撮像により得られた画像データを処理することによって検知された移動体の画像データが通信インタフェースを介して外部に送出される。従って、この動画像処理カメラが適用された画像処理システムの画像処理装置は、移動体検知を行うことなく移動体識別処理だけを行えばよい。この移動体識別処理は、各動画像処理カメラで共通化できるので、複数の動画像処理カメラに対して１つの画像処理装置を用意すればよい。従って、動画像処理カメラの台数の増加に対する画像処理システムのコストの増加率を抑えることができる。
【０１０５】
また、この動画像処理カメラが適用された画像処理システムでは、移動体を識別するために必要な移動体の画像データだけを画像処理装置に送ればよいので、高速カメラを用いた場合であっても、伝送すべき画像データの量は少なくて済む。従って、高速カメラから画像処理装置に画像データを伝送するための伝送ラインを高速伝送に対応できるものにする必要はないので、画像処理システムのコスト上昇を回避できる。
【０１０６】
また、本発明の第１の態様に係る動画像処理カメラによれば、映像データ及び移動体の画像データを通信インタフェースからデジタル信号で送出できるので、この動画像処理カメラが適用された画像処理システムの画像処理装置は、動画像処理カメラから受け取った映像データ及び移動体の画像データをデジタル化する必要はないので、画像処理システムを簡単且つ安価に構成できる。
【０１０７】
また、本発明の第１の態様に係る動画像処理カメラによれば、映像データ及び移動体の画像データを通信インタフェースからアナログ信号で送出できるので、動画像処理カメラから画像処理装置への伝送ラインとしてアナログ伝送ラインを用いることができ、伝送ラインを安価に構成できる。
【０１０８】
この場合、移動体情報を算出する算出部と、該算出された移動体情報を映像データに重畳する重畳部とを更に備え、通信インタフェースは、重畳部からの移動体情報が重畳された映像データを送出するように構成すれば、この動画像処理カメラが適用された画像処理システムの画像処理装置は、移動体情報の算出処理を行う必要がないので、画像処理装置の構成が簡単になりコストを低減させることができる。
【０１０９】
また、算出部を移動体の座標を算出する座標算出部と移動体の移動速度を検出する速度検出部とから構成し、重畳部は、移動体の検知の有無、座標検出部で検出された移動体の座標及び速度検出部で検出された移動体の移動速度の少なくとも１つを移動体情報として映像データに重畳するように構成すれば、この動画像処理カメラが適用された画像処理システムの画像処理装置は、移動体の座標の算出処理及び移動体の移動速度の検出処理を行う必要がないので、画像処理装置の構成が簡単になりコストを低減させることができる。
【０１１０】
また、重畳部は、移動体情報を、画像データ及びデジタルデータの少なくとも１つで表したラベリング情報として前記映像生成部で生成された映像データに重畳するように構成すれば、この動画像処理カメラが適用された画像処理システムの画像処理装置は、移動体に関する情報を文字で表示させることができ、またデジタルデータとして取り込むこともできる。
【０１１１】
また、この第１の態様に係る動画像処理カメラは、通信インタフェースから出力されるデータを無線で送信するように構成すれば、この動画像処理カメラが適用された画像処理システムにおいて、動画像処理カメラの配置の自由度が増すので、画像処理システムの構築が容易になる。
【０１１２】
また、この第１の態様に係る動画像処理カメラにおいて、移動体検知部を、外部からの指示に応答して処理内容を変更するように構成すれば、この動画像処理カメラを多目的、例えば車両の検知、人の監視、プラントの異常監視、車両や人の追跡等の目的に使用できる。
【０１１３】
また、この第１の態様に係る動画像処理カメラは、ズーム機構と、該ズーム機構にズーム撮影の指示を与える指示手段、とを更に備えて構成すれば、目的とする被写体を詳細に撮像することができる。また、パン機構と、該パン機構にパン撮影の指示を与える第１指示手段と、チルト機構と、該チルト機構にチルト撮影の指示を与える第２指示手段、とを更に備えて構成すれば、例えば移動体を追跡するような応用が可能になる。
【０１１４】
更に、本発明の第２の態様に係る画像処理システムは、上述した安価に構成できる動画像処理カメラと該動画像処理カメラの通信インタフェースから送出された移動体の画像データに基づいて移動体を識別する識別部とから構成されているので、画像処理システムを安価に構成できる。
【０１１５】
この画像処理システムの識別部を、識別結果に基づいて課金処理を実行する車両検知センタで構成すれば、車両検知センタでは、動画像処理検知カメラからの移動体の画像データに基づいて課金処理を実行できるので、該車両検知センタでの負荷が軽減される。その結果、画像処理システム全体のパフォーマンスを向上させることができる。
【図面の簡単な説明】
【図１】本発明の実施の形態１に係る動画像処理カメラの電気的な構成を示すブロック図である。
【図２】本発明の実施の形態１に係る動画像処理カメラで実行される移動体検知処理の原理を説明するための図である。
【図３】本発明の実施の形態１に係る動画像処理カメラで実行される速度マップ導出処理の原理を説明するための図である。
【図４】本発明の実施の形態１に係る動画像処理カメラにおける移動体検知処理及び速度マップ導出処理の動作を説明するための図である。
【図５】本発明の実施の形態２に係る動画像処理カメラの電気的な構成を示すブロック図である。
【図６】本発明の実施の形態３に係る動画像処理カメラの電気的な構成を示すブロック図である。
【図７】本発明の実施の形態３に係る動画像処理カメラのラベリング情報の重畳処理を説明するための図である。
【図８】本発明の実施の形態４に係る動画像処理カメラの電気的な構成を示すブロック図である。
【図９】本発明の実施の形態５に係る動画像処理カメラのデータ処理部の構成を示す図である。
【図１０】本発明の実施の形態８に係る画像処理システムの構成を示す図である。
【図１１】従来の画像処理システムを説明するための図である。
【符号の説明】
１ 動画像処理カメラ
２、１３ Ａ／Ｄ変換器
３ 画像処理装置
４ ＣＰＵ
５ モニタテレビジョン
６ 送信機
７ 送信アンテナ
８ 受信アンテナ
９ 受信機
１０ 光学系
１１ イメージセンサ
１２ 駆動回路
１４ データ処理部
１５、１８ Ｄ／Ａ変換器
１６、１７ デジタル通信インタフェース
２０ 映像生成部
２１ 移動体検知部
３０、３３ アナログ伝送ライン
３１、３２ デジタル伝送ライン
Claims (10)
- 画像処理装置と、
前記画像処理装置に接続する複数の動画像処理カメラから選択される任意の１つの動画像処理カメラとを具え、
前記任意の１つの動画像処理カメラは、
撮像により得られた画像データから映像データを生成する映像生成部と、
前記画像データから移動体を検知する移動体検知部と、
前記映像生成部で生成された映像データと前記移動体検知部で検知された移動体の画像データを前記画像処理装置に対して送出する通信インタフェースとを備え、
前記移動体検知部は前記移動体検知部が属する前記動画処理カメラの撮像により得られる画像データに対応して前記移動体の存否を検知し、前記画像処理装置は前記複数の動画像処理カメラからそれぞれに受け取る前記画像データに対応して共通に前記移動体の識別を実行する
動画像処理システム。 - 前記通信インタフェースは、前記映像データと前記画像データをデジタル信号で送出する
請求項１に記載の動画像処理システム。 - 前記通信インタフェースは、前記映像データと前記画像データをアナログ信号で送出する
請求項１に記載の動画像処理システム。 - 前記移動体検知部は、
前記画像データに基づいて前記移動体情報を算出する算出部と、
前記移動体情報を前記映像データに重畳する重畳部とを備え、
前記通信インタフェースは、前記重畳部からの前記移動体情報が重畳された映像データを前記画像処理装置に対して送出する
請求項３に記載の動画像処理システム。 - 前記算出部は、
前記移動体検知部で検知された移動体の座標を算出する座標算出部と、
前記移動体検知部で検知された移動体の移動速度を検出する速度検出部とを具え、
前記重畳部は、
前記移動体検知部での移動体の検知の有無、前記座標検出部で検出された移動体の座標及び前記速度検出部で検出された移動体の移動速度の少なくとも１つを前記移動体情報として前記映像生成部で生成された映像データに重畳する
請求項４に記載の動画像システム。 - 前記重畳部は、前記移動体情報を画像データ及びデジタルデータの少なくとも１つで表したラベリング情報として前記映像生成部で生成された映像データに重畳する
請求項５に記載の動画像処理システム。 - 前記通信インタフェースから出力されるデータを無線で送信する無線送信手段
を更に具える請求項〜６から選択される１請求項の動画像処システム。 - 前記移動体検知部は、外部からの指示に応答して処理内容を変更する
請求項１に記載の動画像処理システム。 - ズーム機構と、
前記ズーム機構にズーム撮影の指示を与える指示手段
とを更に具える請求項１〜８から選択される１請求項の動画像処理システム。 - パン機構と、
前記パン機構にパン撮影の指示を与える第１指示手段と、
チルト機構と、
前記チルト機構にチルト撮影の指示を与える第２指示手段
とを更に具える請求項１〜９から選択される１請求項の動画像処理システム。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2000391339A JP3686333B2 (ja) | 2000-12-22 | 2000-12-22 | 動画像処理カメラ及びこれを用いた画像処理システム |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2000391339A JP3686333B2 (ja) | 2000-12-22 | 2000-12-22 | 動画像処理カメラ及びこれを用いた画像処理システム |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2002199382A JP2002199382A (ja) | 2002-07-12 |
| JP3686333B2 true JP3686333B2 (ja) | 2005-08-24 |
Family
ID=18857499
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2000391339A Expired - Fee Related JP3686333B2 (ja) | 2000-12-22 | 2000-12-22 | 動画像処理カメラ及びこれを用いた画像処理システム |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP3686333B2 (ja) |
Families Citing this family (10)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2004328622A (ja) * | 2003-04-28 | 2004-11-18 | Matsushita Electric Ind Co Ltd | 行動パターン識別装置 |
| JP2005338352A (ja) * | 2004-05-26 | 2005-12-08 | Fujinon Corp | オートフォーカスシステム |
| JP2006209428A (ja) * | 2005-01-27 | 2006-08-10 | Toshiba Corp | 料金収受システム |
| JP2006279568A (ja) * | 2005-03-29 | 2006-10-12 | Fujitsu Ltd | 撮影装置 |
| JP2008141642A (ja) * | 2006-12-05 | 2008-06-19 | Sony Corp | 画像処理装置、撮像装置、画像記録再生装置、および起動制御方法 |
| JP2010233178A (ja) * | 2009-03-30 | 2010-10-14 | Saxa Inc | 画像処理システム |
| EP2608529B1 (en) | 2011-12-22 | 2015-06-03 | Axis AB | Camera and method for optimizing the exposure of an image frame in a sequence of image frames capturing a scene based on level of motion in the scene |
| JP5909147B2 (ja) | 2012-05-08 | 2016-04-26 | キヤノン株式会社 | 撮像装置、撮像装置の制御方法、およびプログラム |
| JP6098191B2 (ja) * | 2013-01-31 | 2017-03-22 | サクサ株式会社 | 撮影装置 |
| JP6572535B2 (ja) * | 2014-12-10 | 2019-09-11 | 株式会社リコー | 画像認識システム、サーバ装置及び画像認識方法 |
-
2000
- 2000-12-22 JP JP2000391339A patent/JP3686333B2/ja not_active Expired - Fee Related
Also Published As
| Publication number | Publication date |
|---|---|
| JP2002199382A (ja) | 2002-07-12 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| KR101343975B1 (ko) | 돌발검지 시스템 | |
| JP5615441B2 (ja) | 画像処理装置及び画像処理方法 | |
| CN104155006B (zh) | 一种手持红外热像仪及其对小目标快速锁定测距的方法 | |
| JP4892965B2 (ja) | 移動体判定システム、移動体判定方法、及びコンピュータプログラム | |
| KR100862398B1 (ko) | 다중 카메라를 이용한 방범용 씨씨티브이 기능을 갖는 불법주정차 무인 자동 단속방법 및 그 시스템 | |
| US8687077B2 (en) | Method and system for controlling camera through wireless sensor network | |
| US20090015674A1 (en) | Optical imaging system for unmanned aerial vehicle | |
| JP4643860B2 (ja) | 車両用視覚支援装置及び支援方法 | |
| EP2549752A1 (en) | Surveillance camera terminal | |
| US20110090341A1 (en) | Intruding object detection system and controlling method thereof | |
| JP3686333B2 (ja) | 動画像処理カメラ及びこれを用いた画像処理システム | |
| RU2011137821A (ru) | Интеллектуальная камера слежения и система слежения за изображением с интеллектуальной камерой | |
| US20160109617A1 (en) | Information transmission apparatus, weather condition acquisition system, server apparatus, information transmission method and program | |
| JP2001216519A (ja) | 交通監視装置 | |
| WO2012137367A1 (ja) | 画像蓄積システム | |
| US7184574B1 (en) | Delayed video tracking | |
| JP4048292B2 (ja) | 交通情報表示システム及び撮像画像送信装置並びに車載用の情報表示装置と記憶媒体 | |
| KR101977635B1 (ko) | 다중 카메라 기반 시설물 주변 항공뷰 형태의 전방위 비디오 합성 및 이동체 검출 방법 및 장치 | |
| KR101452342B1 (ko) | 감시카메라 유닛 및 그 구동방법 | |
| KR101432512B1 (ko) | 도로 상황 관제를 위한 가상영상 표시장치 | |
| KR102484691B1 (ko) | 스테레오 카메라 및 레이더를 이용한 차량 감지 시스템 및 차량 감지 방법 | |
| JPWO2020039897A1 (ja) | 駅監視システム及び駅監視方法 | |
| JP2004212658A (ja) | 画像表示システム、画像表示方法及び画像処理装置 | |
| CN112640444A (zh) | 车站监控装置、车站监控方法及程序 | |
| JPH08191487A (ja) | 遠隔操作システム |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20040927 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20041001 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20041115 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20050509 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20050602 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20090610 Year of fee payment: 4 |
|
| LAPS | Cancellation because of no payment of annual fees |