JP2014086113A - 情報処理装置、情報処理方法、情報処理用プログラム及び情報記録媒体 - Google Patents

Abstract

【課題】複数のビデオカメラからの画像データを一画像ストリーム化する場合において、一画像ストリーム化された画像データに対する補正処理の内容に応じて適切に当該補正処理を行うことが可能な情報処理装置を提供する。
【解決手段】複数のカメラ１Ａ乃至カメラ４Ａから画像データをそれぞれ取得すると共に各取得した画像データを切り換えて切換画像データＳswを生成する切換部５と、生成された切換画像データＳswに対して既定の補正処理を施す補正部７と、生成された補正画像データＳmを構成するフレーム画像のうち、補正処理に対応して特定されるフレーム画像を選択する間引き部８と、を備える。
【選択図】図１

Description

本発明は、情報処理装置、情報処理方法、情報処理用プログラム及び情報記録媒体の技術分野に属する。より詳細には、取得された情報に対して所定の処理を行う情報処理装置及び情報処理方法、並びに当該情報処理装置用のプログラム及び当該プログラムが記録された情報記録媒体の技術分野に属する。

一般に施設等における防犯に用いられる防犯システムでは、複数のビデオカメラにより撮像された画像を用いて所望の監視等を行うと共に、撮像された画像に相当する画像データを一定時間分記録しておくことが行われる。

ここで、複数のビデオカメラから得られる画像データを全て記録する場合には、例えばビデオカメラごとにレコーダ（それぞれ別個の記録媒体を含む）を接続しなければならず、結果的に防犯システム全体として高価となってしまうと共に、操作／保守も複雑になるという問題点がある。

そこでこの問題点を解決するために、複数のビデオカメラから得られる画像データを順次切り換え、一つの画像ストリームとした上でそれを記録媒体に記録する構成が検討されている。この構成の場合、複数のビデオカメラからの各画像データの全てを記録することは不可能となるが、例えば切り換えの間隔を短くする等の工夫により、防犯システムの使用目的として問題のない範囲で一画像ストリーム化を実現することができると考えられる。

一方、防犯システムとしての効果を向上させるためには、各ビデオカメラから得られる画像データをなるべく高画質で記録したり表示したりすることが求められる。そしてこのためには、当該各画像データに対して所定の方法により高画質化のための補正処理を施すことが考えられる。このような補正処理としてより具体的には、例えば各画像データのコントラストを補正して高画質化した上で記録する補正処理が挙げられる。

そしてこのような補正処理を施す場合でも、複数のビデオカメラからの画像データを切り換えて例えばバッファメモリに一時的に記憶させた上でそのバッファメモリからの読み出しタイミングをその補正処理に合わせて調整することで、一画像ストリーム化した場合でも必要な補正処理を施すことが可能となる。このようなバッファメモリとしては、例えばいわゆるＦＩＦＯ（First in First out）型のメモリ等が挙げられる。このようにバッファメモリを構成に加えることで、簡易／安価な構成で且つ高画質の防犯システムを実現することができる。ここで、このようなバッファメモリを備える画像処理システムとしては、例えば下記特許文献１及び特許文献２に開示されている技術がある。

特開２００３−２７４１５６号公報 特開平４−７２９７２号公報

しかしながら上述した各特許文献に記載された構成によると、例えば、上記のような高画質化のための補正処理として、直前に取得した画像データの解析結果を用いてそれに後続する画像データを補正するといった補正処理の場合には、十分な高画質化が図れない場合があるという問題点があった。この問題点については、一画像ストリーム化により、補正に用いられる画像データを出力したビデオカメラが、補正対象となっている画像データを出力したビデオカメラと異なっている場合、結果的に内容が全く異なる画像データの内容を用いて他の画像データを補正することになることが原因の一つと考えられる。

そこで、本発明は上記の問題点に鑑みて為されたもので、その課題は、複数のビデオカメラからの画像データを一画像ストリーム化する場合において、当該一画像ストリーム化された画像データに対する補正処理の内容に応じて適切に当該補正処理を行うことが可能な情報処理装置及び情報処理方法、並びに当該情報処理装置用のプログラム及び当該プログラムが記録された情報記録媒体を提供することにある。

上記の課題を解決するために、請求項１に記載の発明は、複数の取得元から情報をそれぞれ取得する切換部等の取得手段と、各前記取得した情報を用いて、当該各取得した情報の部分を時系列に沿ってそれぞれ含む複合情報を生成する切換部等の生成手段と、前記生成された複合情報に対して、予め設定された処理を施して処理情報を生成する補正部等の処理手段と、前記生成された処理情報を構成する処理情報単位のうち、前記処理に対応して特定される特定情報単位を選択する間引き部等の選択手段と、を備える。

上記の課題を解決するために、請求項６に記載の発明は、複数の取得元から情報をそれぞれ取得する取得工程と、各前記取得した情報を用いて、当該各取得した情報の部分を時系列に沿ってそれぞれ含む複合情報を生成する生成工程と、前記生成された複合情報に対して、予め設定された処理を施して処理情報を生成する処理工程と、前記生成された処理情報を構成する処理情報単位のうち、前記処理に対応して特定される特定情報単位を選択する選択工程と、を含む。

上記の課題を解決するために、請求項７に記載の発明は、複数の取得元から情報をそれぞれ取得する切換部等の取得手段を備える情報処理装置に含まれるコンピュータを、各前記取得した情報を用いて、当該各取得した情報の部分を時系列に沿ってそれぞれ含む複合情報を生成する生成手段、前記生成された複合情報に対して、予め設定された処理を施して処理情報を生成する処理手段、及び、前記生成された処理情報を構成する処理情報単位のうち、前記処理に対応して特定される特定情報単位を選択する選択手段、として機能させる。

上記の課題を解決するために、請求項８に記載の発明は、請求項７に記載の情報処理用プログラムが請求項７に記載の前記コンピュータにより読取可能に記録されている。

請求項１又は請求項６乃至請求項８のいずれか一項に記載の発明によれば、複数の情報の部分からなる複合情報に対する既定の処理により生成された処理情報を構成する処理情報単位のうち、当該処理に対応した特定情報単位を選択する。よって、複合情報に対して施される処理に対応した特定情報単位を選ぶことで、当該処理に応じて所望される処理情報単位を選択することができる。

上記の課題を解決するために、請求項２に記載の発明は、請求項１に記載の情報処理装置において、前記取得元はカメラ等の撮像手段であり、前記取得された情報は複数のフレーム画像からなる画像データであり、前記生成手段は、各前記取得した画像データの前記フレーム画像を順次切り換えて出力する切換部等の切換手段であり、前記処理は、前記複合情報を構成する各前記フレーム画像をそれぞれ補正して前記処理情報を生成する補正処理であって、当該補正処理の対象となる前記フレーム画像に対して前記複合情報において一つ前以前の前記フレーム画像である前フレーム画像に基づいて、当該対象となる前記フレーム画像を補正する補正処理であり、前記選択手段は、前記前フレーム画像の前記取得元たる前記撮像手段と、前記対象となる前記フレーム画像の前記取得元たる前記撮像手段と、が同一である場合の当該対象となる前記フレーム画像に相当する前記処理情報単位を前記特定情報単位として選択するように構成される。

請求項２に記載の発明によれば、請求項１に記載の発明の作用に加えて、取得元が撮像手段であり、取得された情報が複数のフレーム画像からなる画像データであり、生成手段が各取得した画像データのフレーム画像を順次切り換えて出力する切換手段とされている。またフレーム画像に施される処理が、処理の対象となるフレーム画像を前フレーム画像に基づいて補正する補正処理とされる。このとき、前フレーム画像の取得元と、補正処理の対象となるフレーム画像の取得元と、が同一である場合の当該対象となるフレーム画像に相当する処理情報単位が特定情報単位として選択される。よって、上記の補正処理を処理情報に対して行う場合でも、取得元が同じフレーム画像に対する補正処理の結果を用いて良好に補正されたフレーム画像を選択することができる。

上記の課題を解決するために、請求項３に記載の発明は、請求項２に記載の情報処理装置において、前記生成手段は、前記切換手段と、前記出力されたフレーム画像を当該出力順に記憶すると共に、記憶時の速度の二倍の読出速度で且つ一つの前記フレーム画像が連続するように当該一つのフレーム画像を二回繰り返しながら読み出し、前記複合情報として出力するフレームバッファ等のバッファ手段と、により構成されており、前記選択手段は、前記バッファ手段から出力されて前記補正処理が施された前記処理情報に含まれる前記処理情報単位のうち、二回繰り返して出力された二つの前記フレーム画像における後者の当該フレーム画像に相当する前記処理情報単位を、前記既定単位として選択するように構成される。

請求項３に記載の発明によれば、請求項２に記載の発明の作用に加えて、生成手段が切換手段とバッファ手段とにより構成されている。そして、バッファ手段から二回繰り返して出力された二つのフレーム画像における後者のフレーム画像に相当する処理情報単位を特定情報単位として選択するので、良好に補正されたフレーム画像を簡易な構成で選択することができる。

上記の課題を解決するために、請求項４に記載の発明は、請求項２又は請求項３に記載の情報処理装置において、前記補正処理は、各前記フレーム画像のコントラストをそれぞれ補正して前記処理情報を生成する補正処理であって、前記前フレーム画像に基づいて前記対象となる前記フレーム画像のコントラストを補正する補正処理であるように構成される。

請求項４に記載の発明によれば、請求項２又は請求項３に記載の発明の作用に加えて、補正処理が各フレーム画像のコントラストを補正する補正処理であるので、取得元が同じフレーム画像を用いることによりコントラストが良好に補正されたフレーム画像を選択することができる。

上記の課題を解決するために、請求項５に記載の発明は、請求項１から請求項４のいずれか一項に記載の情報処理装置において、各前記選択された特定情報単位を一つの記録媒体に記録する記録部等の記録手段を更に備える。

請求項５に記載の発明によれば、請求項１から請求項４のいずれか一項に記載の発明の作用に加えて、それぞれ選択された特定情報単位を一つの記録媒体に記録するので、複合情報に対して施される処理に応じて所望される処理情報単位を一つの記録媒体に記録することができる。

本発明によれば、複数の情報の部分からなる複合情報に対する既定の処理により生成された処理情報を構成する処理情報単位のうち、当該処理に対応した特定情報単位を選択する。

従って、複合情報に対して施される処理に対応した特定情報単位を選ぶことで、当該処理に応じて所望される処理情報単位を選択することができ、当該処理の内容に応じて適切に当該処理を行うことができる。

第１実施形態に係る防犯カメラシステムの概要構成を示すブロック図等であり、（ａ）は当該ブロック図であり、（ｂ）は当該防犯カメラシステムにおける記録処理を示すフローチャートである。 第１実施形態に係る防犯カメラシステムの記録処理を例示する概念図である。 第２実施形態に係る防犯カメラシステムの概要構成を示すブロック図等であり、（ａ）は当該ブロック図であり、（ｂ）は当該防犯カメラシステムにおける記録処理を示すフローチャートである。 第２実施形態に係る防犯カメラシステムの記録処理を例示する概念図である。

次に、本発明を実施するための形態について、図面に基づいて説明する。なお以下に説明する各実施形態は、四台のカメラによりそれぞれ撮像された画像データを順次取得して記録する防犯カメラシステムに対して本発明を適用した場合の実施の形態である。

（Ｉ）第１実施形態
始めに、本発明に係る第１実施形態について図１及び図２を用いて説明する。なお図１は第１実施形態に係る防犯カメラシステムの概要構成を示すブロック図等であり、図２は当該防犯カメラシステムにおける間引き処理を含む第１実施形態に係る記録処理を例示する概念図である。

図１（ａ）に示すように第１実施形態に係る防犯カメラシステムＳ１は、それぞれの撮像範囲を撮像してアナログ信号である画像データＳp1乃至画像データＳp4を出力するカメラ１Ａ乃至カメラ４Ａと、Ａ／Ｄ（Analog/Digital）コンバータ１Ｂ乃至Ａ／Ｄコンバータ４Ｂと、切換部５と、例えばＦＩＦＯメモリ等の一時記憶メモリからなるフレームバッファ６と、第１実施形態に係る補正処理を実行する補正部７と、第１実施形態に係る間引き処理を実行する間引き部８と、書込／読出制御部９と、記録部１０と、制御部１１と、同期部１２と、例えばハードディスク又はカード型固体メモリ等からなる不揮発性の記録媒体Ｄと、により構成されている。このとき、カメラ１Ａ及びＡ／Ｄコンバータ１Ｂにより第１チャンネルＣＨ１を構成し、カメラ２Ａ及びＡ／Ｄコンバータ２Ｂにより第２チャンネルＣＨ２を構成している。またカメラ３Ａ及びＡ／Ｄコンバータ３Ｂにより第３チャンネルＣＨ３を構成し、カメラ４Ａ及びＡ／Ｄコンバータ４Ｂにより第４チャンネルＣＨ４を構成している。

なお上記の構成うち、カメラ１Ａ乃至カメラ４Ａが本発明に係る「撮像手段」の一例にそれぞれ相当し、切換部５が本発明に係る「切換手段」の一例、「生成手段」の一例及び「取得手段」の一例にそれぞれ相当する。またフレームバッファ６が本発明に係る「バッファ手段」の一例に相当し、補正部７が本発明に係る「処理手段」の一例に相当する。更に間引き部８が本発明に係る「選択手段」の一例に相当し、記録部１０が本発明に係る「記録手段」の一例にそれぞれ相当する。

この構成において例えばカメラ１Ａ及びカメラ４Ａは、防犯対象たる建物の屋外に設置されており、例えばその入口や通用口等をそれぞれの撮像範囲としている。一方カメラ２Ａ及びカメラ３Ａは、例えば当該建物の屋内のいずれかの部屋がその撮像範囲となるように設置されている。

ここで、各カメラ１Ａ乃至カメラ４Ａから出力される画像データＳp1乃至画像データＳp4は、複数のフレーム画像によりそれぞれ構成されている。そして各カメラ１Ａ乃至カメラ４Ａからの各フレーム画像の出力タイミングは、同期部１２から出力される同期信号Ｓsyにより各カメラ１Ａ乃至カメラ４Ａについて同期が取られている。次にＡ／Ｄコンバータ１Ｂ乃至Ａ／Ｄコンバータ４Ｂは、これら画像データＳp1乃至画像データＳp4をフレーム画像ごとにそれぞれデジタル化し、デジタル画像データＳp1d乃至デジタル画像データＳp4dを生成して切換部５にそれぞれ出力する。このときデジタル画像データＳp1d乃至デジタル画像データＳp4dの出力タイミングも、上記同期信号Ｓsyにより各デジタル画像データについて同期が取られていることになる。なおこの同期信号Ｓsyは制御部１１にも出力されている。

そして切換部５は、同期信号Ｓsyに基づいて制御部１１により生成された切換制御信号Ｓcに基づき、第１チャンネルＣＨ１乃至第４チャンネルＣＨ４からのデジタル画像データＳp1d乃至デジタル画像データＳp4dのいずれか一つを順次選択してそれに切り換え、切換画像データＳswとしてフレームバッファ６に出力する。このとき切換部５における選択／切り換えの順序は、例えば、第１チャンネルＣＨ１→第２チャンネルＣＨ２→第３チャンネルＣＨ３→第４チャンネルＣＨ４→第１チャンネルＣＨ１→第２チャンネルＣＨ２→…の順とされる。なお以下に示す各実施形態の説明において、デジタル画像データＳp1d乃至デジタル画像データＳp4dに共通した事項を説明する場合、これらを纏めて適宜「デジタル画像データＳpd」と称する。またカメラ１Ａ乃至カメラ４Ａに共通した事項を説明する場合、これらを纏めて適宜「カメラ１」と称する。

これらによりフレームバッファ６は、切換部５から出力されてきた切換画像データＳsw（換言すれば、順次切り換えられて出力された、デジタル画像データＳp1d乃至デジタル画像データＳp4dのいずれか）を、書込／読出制御部９からの制御信号Ｓcに基づいてその出力順に一時的に記憶する。その後フレームバッファ６は、同様に制御信号Ｓcに基づいて、記憶した切換画像データＳswを、記憶時の速度に対して二倍速で、読出画像データＳbfとして読み出して補正部７に出力する。このときフレームバッファ６は、後ほど詳述するように、一フレーム分のデジタル画像データＳpdを二回連続して繰り返しながら、上記した二倍速で読出画像データＳbfとして読み出す。

次に補正部７は、出力されてきた読出画像データＳbf内の各フレーム画像に対して、例えばコントラスト補正等の予め設定されている補正処理を施し、当該フレーム画像ごとの補正画像データＳmとして間引き部８に出力する。このとき補正部７は当該補正処理として、読出画像データＳbfに含まれているフレーム画像の順に、ｎ番目（ｎは自然数。以下、同様）のフレーム画像の解析結果を用いてｎ＋１番目のフレーム画像に対する補正処理を施す。ここで、読出画像データＳbfには元々デジタル画像データＳp1d乃至デジタル画像データＳp4dのいずれかであったフレーム画像が含まれているため、ｎ番目のフレーム画像とｎ＋１番目のフレーム画像とで、出力元であるチャンネルＣＨが異なる場合があることになる。

これらにより間引き部８は、制御部１１からの制御信号Ｓcdに基づいて、補正画像データＳmを構成するフレーム画像の中から、上記補正部７における補正処理に対応して予め設定されている所定のフレーム画像を間引き、当該間引き後のフレーム画像を間引き後画像データＳtとして記録部１０に出力する。換言すれば間引き部８は、上記補正処理に対応して予め設定されている上記所定のフレーム画像以外のフレーム画像を選択し、当該選択されたフレーム画像を含む間引き後画像データＳtを生成して記録部１０に出力する。このとき第１実施形態に係る間引き部８は、補正画像データＳmを構成するフレーム画像の中から、異なるチャンネルＣＨから出力された画像データ内のフレーム画像の解析結果を用いて補正されたフレーム画像を間引く。即ち第１実施形態に係る間引き部８は、同一のチャンネルＣＨから出力された画像データ内のフレーム画像の解析結果を用いて補正された（当該同一のチャンネルＣＨから出力された）フレーム画像を含む上記間引き後画像データＳtを生成して記録部１０に出力する。そして記録部１０は、出力されてきた間引き後画像データＳtに対して所定のフォーマット化処理等を施し、記録データＳrを生成して記録媒体Ｄに記録する。

一方書込／読出制御部９は、制御部１１からの制御信号Ｓccに基づき、上記制御信号Ｓcを生成してフレームバッファ６に出力する。これによりフレームバッファ６における切換画像データＳswの記憶タイミング、及び上記した二倍速による読出画像データＳbfの読出タイミングが制御されることになる。

更に制御部１１は、同期信号Ｓsyに基づき、デジタル画像データＳp1d乃至デジタル画像データＳp4dの切換タイミングを制御するための上記切換制御信号Ｓchを生成して切換部５に出力する。これに加えて制御部１１は、上記同期信号Ｓsyに基づいて、書込／読出制御部９を制御して上記制御信号Ｓcを出力させるための制御信号Ｓccを生成して上記書込／読出制御部９に出力すると共に、上記制御信号Ｓcdを生成して間引き部８に出力する。なお、制御部１１により統括制御される第１実施形態に係る間引き処理等については、後ほど図１（ｂ）及び図２を用いて詳説する。

以上の一連の処理により、四台のカメラ１Ａ乃至カメラ４Ａからの画像データが、切換部５により時系列的に順次切り換えられ、一つの画像ストリームとして記録媒体Ｄに記録される。

次に、上述した構成を備える防犯カメラシステムＳ１における第１実施形態に係る間引き処理を含む記録処理について、より具体的に図１（ｂ）及び図２を用いて説明する。なお以下に示す各実施形態の説明において、第１チャンネルＣＨ１乃至第４チャンネルＣＨ４に共通した事項を説明する場合、これらを纏めて適宜「チャンネルＣＨ」と称する。また複数のフレーム画像について共通した説明を行う場合、符号を用いずに単に「フレーム画像」と称する。更に図２において、横軸は時間の経過を示している。

図１（ｂ）に示すように、第１実施形態に係る記録処理では、初めに切換部５において、各チャンネルＣＨからのデジタル画像データＳp1d乃至デジタル画像データＳp4dが入力（取得）される（図１（ｂ）ステップＳ１）。このステップＳ１の処理としては、例えば図２に例示するように、デジタル画像データＳp1dを構成するフレーム画像１−１、フレーム画像１−２、…、フレーム画像１−８、…と、デジタル画像データＳp2dを構成するフレーム画像２−１、フレーム画像２−２、…、フレーム画像２−８、…と、デジタル画像データＳp3dを構成するフレーム画像３−１、フレーム画像３−２、…、フレーム画像３−８、…と、デジタル画像データＳp4dを構成するフレーム画像４−１、フレーム画像４−２、…、フレーム画像４−８、…と、が相互に同期した状態で切換部５に入力されてくることになる。

次に切換部５において、制御部１１からの制御信号Ｓchに基づき、入力されているデジタル画像データＳp1d乃至デジタル画像データＳp4dが、それぞれ一フレーム画像ずつ切り換えられて選択され、各フレーム画像を含む切換画像データＳswが生成されてフレームバッファ６に出力される（図１（ｂ）ステップＳ２）。このステップＳ２の処理としては図２に例示するように、デジタル画像データＳp1dの最初のフレーム画像１−１から順に、一フレーム画像ずつ、デジタル画像データＳp2dのフレーム画像２−２、デジタル画像データＳp3dのフレーム画像３−３、及びデジタル画像データＳp4dのフレーム画像４−４がそれぞれ選択されることにより、デジタル画像データＳp1d乃至デジタル画像データＳp4dが一フレーム画像ずつ一巡して選択され、当該選択されたフレーム画像により切換画像データＳswが生成される。また次の一巡として、デジタル画像データＳp1dに戻ってフレーム画像１−５から順に、一フレーム画像ずつ、デジタル画像データＳp2dのフレーム画像２−６、デジタル画像データＳp3dのフレーム画像３−７、及びデジタル画像データＳp4dのフレーム画像４−８がそれぞれ選択されることにより、デジタル画像データＳp1d乃至デジタル画像データＳp4dが更に一フレーム画像ずつ選択され、当該選択されたフレーム画像により、後続する切換画像データＳswが生成される。このように各フレーム画像が切り換えられて切換画像データＳswが生成される様子を、図２では太い実線矢印で示している。

次にフレームバッファ６に出力された切換画像データＳswを構成する各フレーム画像は、書込／読出制御部９からの制御信号Ｓcに基づく記憶タイミングで順次にフレームバッファ内に記憶される（図１（ｂ）ステップＳ３）。その後当該記憶されたフレーム画像は、書込／読出制御部９からの制御信号Ｓcに基づく読出タイミングで、一フレーム画像を二回連続して繰り返しながら、読出画像データＳbfとして読み出されて補正部７に出力される（図１（ｂ）ステップＳ４）。即ち図２において、切換画像データ「Ｓsw」及び読出画像データ「Ｓbf」としてそれぞれ例示するように、先ず切換画像データＳswを構成するフレーム画像１−１について、二倍速で二つの同じフレーム画像１−１を連続して読み出して読出画像データＳbfとして出力する。また続けて同様にフレーム画像２−２について、二倍速で二つの同じフレーム画像２−２を連続して読み出して読出画像データＳbfとして出力する。以下同様にして続けて、二倍速で、二つのフレーム画像３−３、二つのフレーム画像４−４、二つのフレーム画像１−５、二つのフレーム画像２−６、二つのフレーム画像３−７及び二つのフレーム画像４−８をそれぞれ連続して読み出して、読出画像データＳbfとして出力する。

次に補正部７は、上述したように予め設定されている補正処理として、読出画像データＳbfに含まれているフレーム画像の順に、ｎ番目のフレーム画像の解析結果を用いてｎ＋１番目のフレーム画像に対する補正処理を施し、当該フレーム画像ごとの補正画像データＳmとして間引き部８に出力する（図１（ｂ）ステップＳ５）。即ち補正部７では、図２において白抜き矢印及びハッチング矢印それぞれの根元部分にあるフレーム画像の解析結果を用いて、当該白抜き矢印及びハッチング矢印それぞれの先端部分にあるフレーム画像の例えばコントラストを補正する補正処理を行う。より具体的には、図２に例示するように、例えば読出画像データＳbfに含まれている一番目のフレーム画像１−１の解析結果を用いて二番目のフレーム画像１−１を補正して補正画像データＳmを構成させる。また例えば、読出画像データＳbfに含まれている二番目のフレーム画像１−１の解析結果を用いて一番目のフレーム画像２−２を補正して補正画像データＳmを構成させる。更に読出画像データＳbfに含まれている一番目のフレーム画像２−２の解析結果を用いて二番目のフレーム画像２−２を補正して補正画像データＳmを構成させる。以下同様にして上記白抜き矢印及びハッチング矢印で示される関係で、補正部７における補正処理が順次実行されて補正画像データＳmが生成される。

ここで図２においては、ハッチング矢印で示される補正処理により補正されたフレーム画像はハッチングにより示されているが、これらのフレーム画像については、補正処理に用いられる解析結果の元となったフレーム画像の取得元たるカメラ１と、その解析結果を用いて補正されるフレーム画像の取得元たるカメラ１とが異なっている。そしてこの場合、解析結果の基礎たるフレーム画像の取得元とその解析結果を用いた補正処理の対象となるフレーム画像の取得元とが異なる（即ち相互に関連がないか、又は関連が極めて小さい）ことに起因して、当該補正処理の対象たるフレーム画像における当該補正処理が、例えば不十分であったり反対に過度であったりする場合がある。これに対して、白抜き矢印で示される補正処理により補正されたフレーム画像は同様に白抜きにより示されているが、これらのフレーム画像については、補正処理に用いられる解析結果の元となったフレーム画像の取得元と、その解析結果を用いて補正されるフレーム画像の取得元とが同一である。そしてこの場合、解析結果の基礎たるフレーム画像の取得元とその解析結果を用いた補正処理の対象となるフレーム画像の取得元とが同一なので、当該補正処理の対象たるフレーム画像における当該補正処理が適切であることになる。

そこで、上記補正画像データＳmが入力される間引き部８では、制御部１１からの制御信号Ｓcdに基づき、補正処理が適切に行われていると予測されるフレーム画像、即ち図２に示す補正画像データＳmにおいて白抜きで示されているフレーム画像１−１、フレーム画像２−２、フレーム画像３−３、フレーム画像４−４、フレーム画像１−５、フレーム画像２−６、フレーム画像３−７及びフレーム画像４−８を選択し、間引き後画像データＳtとして記録部１０に出力して記録媒体Ｄへの記録処理に供させる。換言すれば間引き部８は、（残りの）ハッチングで示されているフレーム画像１−１、フレーム画像２−２、フレーム画像３−３、フレーム画像４−４、フレーム画像１−５、フレーム画像２−６、フレーム画像３−７及びフレーム画像４−８を補正画像データＳmから間引いて間引き後画像データＳtを生成する。

その後、補正処理が適切に行われていると予測されるフレーム画像のみからなる間引き後画像データＳtが入力されている記録部１０は、当該間引き後画像データＳtに対して上記所定のフォーマット化処理等を施し、記録データＳrとして記録媒体Ｄに記録する（図１（ｂ）ステップＳ７）。

その後制御部１１は、防犯カメラシステムＳ１全体の電源スイッチがオフとされたか否かを判定する（図１（ｂ）ステップＳ８）。ステップＳ８の判定において当該電源スイッチがオフとされた場合、制御部１１は第１実施形態に係る記録処理を終了させる。一方ステップＳ８の判定において上記電源スイッチがオフとされていない場合（図１（ｂ）ステップＳ８；ＮＯ）、引き続き各チャンネルＣＨからの次のフレーム画像のデジタル画像データＳpdが切換部５を介して取得され（図１（ｂ）ステップＳ１）、その取得されたデジタル画像データＳpdに対して上述してきた切り換え処理、一時記憶／読出処理、補正処理、間引き処理及び記録処理が実行される。

以上説明したように、第１実施形態に係る防犯カメラシステムＳ１における間引き処理を含む記録処理によれば、複数のカメラ１Ａ乃至カメラ４Ａから取得されたフレーム画像からなる切換画像データＳswに対する補正処理により生成された補正画像データＳmを構成するフレーム画像のうち、当該補正処理が適切に行われていると予測されるフレーム画像を選択するので、切換画像データＳswに対して施される補正処理に対応したフレーム画像を選ぶことで、当該補正処理に応じて所望されるフレーム画像を選択することができる。

また、切換画像データＳswに含まれるフレーム画像に施される補正処理が、補正処理の対象となるフレーム画像を直前のフレーム画像に基づいて補正する補正処理とされる場合に、間引き部８は、当該直前のフレーム画像の取得元と、補正処理の対象となるフレーム画像の取得元と、が同一である場合の当該対象となるフレーム画像を選択する。よって、上記の補正処理を補正画像データＳmに対して行う場合でも、取得元が同じフレーム画像に対する補正処理の結果を用いて良好に補正されたフレーム画像を選択することができる。

更に、フレームバッファ６から二回繰り返して出力された同一の二つのフレーム画像における後者のフレーム画像に対して補正処理を施したものを選択するので、良好に補正されたフレーム画像を簡易な構成で選択することができる。

更にまた、補正処理が各フレーム画像のコントラストを補正する補正処理である場合に、取得元が同じフレーム画像を用いることによりコントラストが良好に補正されたフレーム画像を選択することができる。

また、それぞれ選択された（間引き後の）間引き後画像データＳtを一つの記録媒体Ｄに記録するので、切換画像データＳswに対して施される補正処理に応じて所望される補正処理後のフレーム画像を一つの記録媒体Ｄに記録することができる。

なお上述した第１実施形態では、補正部７における補正処理としてコントラスト補正を用いた場合について説明したが、これ以外に、直前のフレーム画像に基づいて対象のフレーム画像についての処理が行われるのであれば、他の補正処理、或いは補正処理以外の他の処理をフレーム画像について施す場合に本発明を適用することも可能である。

（II）第２実施形態
次に、本発明に係る他の実施形態である第２実施形態について図３及び図４を用いて説明する。なお図３は第２実施形態に係る防犯カメラシステムの概要構成を示すブロック図等であり、図４は当該防犯カメラシステムにおける間引き処理を含む第２実施形態に係る記録処理を例示する概念図である。また図３（ａ）において、図１（ａ）を用いて説明した第１実施形態に係る防犯カメラシステムＳ１と同一の構成部材については、同一の部材番号を付して細部の説明は省略する。更に図３（ｂ）において、図１（ｂ）を用いて説明した第１実施形態に係る防犯カメラシステムＳ１における記録処理と同一の処理についても、同一のステップ番号を付して細部の説明は省略する。

以下に説明する第２実施形態に係る防犯カメラシステムと上述してきた第１実施形態に係る防犯カメラシステムＳ１とを比較した場合、第２実施形態に係る防犯カメラシステムでは、第１実施形態に係る防犯カメラシステムＳ１におけるフレームバッファ６を用いずに、第２実施形態に係る間引き処理を含む記録処理を実行する。

図３（ａ）に示すように、第２実施形態に係る防犯カメラシステムＳ２は、第１実施形態に係る防犯カメラシステムＳ１と同様の第１チャンネルＣＨ１乃至第４チャンネルＣＨ４、切換部５、補正部７、記録部１０、制御部１１、同期部１２及び記録媒体Ｄの他に、第１実施形態に係る防犯カメラシステムＳ１における間引き部８に代えて間引き部２０を備えている。更に防犯カメラシステムＳ２としては、第１実施形態に係る防犯カメラシステムＳ１に備えられていたフレームバッファ６及び書込／読出制御部９は、備えていない。また、切換部５から出力された切換画像データＳswは補正部７に直接出力されている。

この構成において補正部７は、第１実施形態に係る防犯カメラシステムＳ１の補正部７と同様に、出力されてきた切換画像データＳsw内の各フレーム画像に対して、例えばコントラスト補正等の予め設定されている補正処理を施し、当該フレーム画像ごとの補正画像データＳmとして間引き部２０に出力する。このとき補正部７は当該補正処理として、切換画像データＳswに含まれているフレーム画像の順に、ｎ番目のフレーム画像の解析結果を用いてｎ＋１番目のフレーム画像に対する補正処理を施す。この補正処理では第１実施形態の場合と同様に、ｎ番目のフレーム画像とｎ＋１番目のフレーム画像とで、出力元であるチャンネルＣＨが異なる場合があることになる。

これらにより間引き部２０は、第１実施形態に係る防犯カメラシステムＳ１と同様に、制御部１１からの制御信号Ｓcdに基づいて、補正画像データＳmを構成するフレーム画像の中から予め設定されている所定のフレーム画像を間引き、間引き後画像データＳtとして記録部１０に出力する。このとき第２実施形態に係る間引き部２０は、第１実施形態に係る間引き部８と同様に、補正画像データＳmを構成するフレーム画像の中から、異なるチャンネルＣＨから出力された画像データ内のフレーム画像の解析結果を用いて補正されたフレーム画像を間引く。そして記録部１０は、出力されてきた間引き後画像データＳtに対して所定のフォーマット化処理等を施し、記録データＳrを生成して記録媒体Ｄに記録する。

一方制御部１１は、同期信号Ｓsyに基づき、第１実施形態に係る防犯カメラシステムＳ１の制御部１１と同様に切換制御信号Ｓchを生成して切換部５に出力すると共に、上記制御信号Ｓcdを生成して間引き部２０に出力する。なお、制御部１１により統括制御される第２実施形態に係る間引き処理等については、後ほど図３（ｂ）及び図４を用いて詳説する。

以上の一連の処理により、四台のカメラ１Ａ乃至カメラ４Ａからの画像データが、切換部５により時系列的に順次切り換えられ、一つの画像ストリームとして記録媒体Ｄに記録される。

次に、上述した構成を備える防犯カメラシステムＳ２における第２実施形態に係る記録処理について、より具体的に図３（ｂ）及び図４を用いて説明する。

図３（ｂ）及び図４に示すように、第２実施形態に係る記録処理では、初めに、第１実施形態に係る記録処理と同様のステップＳ１の処理が実行されてデジタル画像データＳp1d乃至デジタル画像データＳp4dが入力（取得）される（図３（ｂ）ステップＳ１）。

次に切換部５において、制御部１１からの制御信号Ｓchに基づき、入力されているデジタル画像データＳp1d乃至デジタル画像データＳp4dが、それぞれ連続する二つのフレーム画像ずつ切り換えられて選択され、各フレーム画像を含む切換画像データＳswが生成されて補正部７に出力される（図３（ｂ）ステップＳ１０）。このステップＳ２の処理としては図２に例示するように、デジタル画像データＳp1dの最初の二つのフレーム画像１−１及びフレーム画像１−２から順に、各デジタル画像データＳpdについて二フレーム画像ずつ、即ちデジタル画像データＳp2dのフレーム画像２−３及びフレーム画像２−４、デジタル画像データＳp3dのフレーム画像３−５及びフレーム画像３−６、並びにデジタル画像データＳp4dのフレーム画像４−７及びフレーム画像４−８がそれぞれ選択されることにより、デジタル画像データＳp1d乃至デジタル画像データＳp4dが二フレーム画像ずつ一巡して選択され、当該選択されたフレーム画像により切換画像データＳswが生成される。これ以降は、同様の二フレーム画像ずつの選択と当該選択されたフレーム画像を含む切換画像データＳswの生成が繰り返される。このように二フレーム画像ずつ切り換えられて切換画像データＳswが生成される様子を、図４では太い実線矢印で示している。

次に補正部７は、上述した補正処理として、切換画像データＳswに含まれているフレーム画像の順に、ｎ番目のフレーム画像の解析結果を用いてｎ＋１番目のフレーム画像に対する補正処理を施し、当該フレーム画像ごとの補正画像データＳmとして間引き部２０に出力する（図３（ｂ）ステップＳ５）。即ち補正部７では第１実施形態の場合と同様に、図４において白抜き矢印及びハッチング矢印それぞれの根元部分にあるフレーム画像の解析結果を用いて、当該白抜き矢印及びハッチング矢印それぞれの先端部分にあるフレーム画像の例えばコントラストを補正する補正処理を行う。より具体的には、図４に例示するように、例えば切換画像データＳswに含まれているフレーム画像１−１の解析結果を用いてフレーム画像１−２を補正して補正画像データＳmを構成させる。また例えば、切換画像データＳswに含まれているフレーム画像１−２の解析結果を用いてフレーム画像２−３を補正して補正画像データＳmを構成させる。更に切換画像データＳswに含まれているフレーム画像２−３の解析結果を用いてフレーム画像２−４を補正して補正画像データＳmを構成させる。以下同様にして上記白抜き矢印及びハッチング矢印で示される関係で、補正部７における補正処理が順次実行されて補正画像データＳmが生成される。

ここで図４においては、補正画像データＳmとしてハッチングで示されているフレーム画像については、補正処理に用いられる解析結果の元となったフレーム画像の取得元たるカメラ１と、その解析結果を用いて補正されるフレーム画像の取得元たるカメラ１とが異なっている。そしてこの場合に第１実施形態に係る場合と同様に、解析結果の基礎たるフレーム画像の取得元とその解析結果を用いた補正処理の対象となるフレーム画像の取得元とが異なることに起因して、当該補正処理の対象たるフレーム画像における当該補正処理が不十分である等の場合が生じる。これに対して、補正画像データＳmとして白抜きで示されているフレーム画像については、補正処理に用いられる解析結果の元となったフレーム画像の取得元と、その解析結果を用いて補正されるフレーム画像の取得元とが同一である。そしてこの場合に第１実施形態に係る場合と同様に、解析結果の基礎たるフレーム画像の取得元とその解析結果を用いた補正処理の対象となるフレーム画像の取得元とは同一なので、当該補正処理の対象たるフレーム画像における当該補正処理が適切であることになる。

そこで、上記補正画像データＳmが入力される間引き部２０では第１実施形態に係る間引き部８と同様に、制御部１１からの制御信号Ｓcdに基づき、補正処理が適切に行われていると予測されるフレーム画像、即ち図４に示す補正画像データＳmにおいて白抜きで示されているフレーム画像１−２、フレーム画像２−４、フレーム画像３−６及びフレーム画像４−８を選択し、間引き後画像データＳtとして記録部１０に出力して記録媒体Ｄへの記録処理に供させる。換言すれば間引き部２０は、（残りの）ハッチングで示されているフレーム画像１−１、フレーム画像２−３、フレーム画像３−５及びフレーム画像４−７を補正画像データＳmから間引いて間引き後画像データＳtを生成する処理を実行する。

その後記録部１０は、第１実施形態の場合と同様に、当該間引き後画像データＳtに対して上記所定のフォーマット化処理等を施し、記録データＳrとして記録媒体８に記録する（図３（ｂ）ステップＳ７）。次に制御部１１は、第１実施形態に係る記録処理と同様のステップＳ８の処理に移行し、その後新たに取得されたデジタル画像データＳpdに対して上述してきた切り換え処理、補正処理、間引き処理及び記録処理を実行する。

以上説明したように、第２実施形態に係る防犯カメラシステムＳ２における間引き処理を含む記録処理によれば、第１実施形態に係る記録処理と同様の作用効果を奏する。これに加えて第２実施形態に係る防犯カメラシステムＳ２は、フレームバッファ６及び書込／読出制御部９が不要となるため、防犯カメラシステムＳ２としての構成を簡略化できると共に安価な防犯カメラシステムを実現することができるという作用効果を奏する。

なお上述してきた各実施形態においては、防犯用のカメラシステムに対して本発明を適用した場合について説明したが、これ以外に、複数のカメラを備え、各カメラからの画像データを記録媒体に記録する場合に本発明を適用することも可能である。

また、上述してきた各実施形態においては、各カメラからの画像データを記録媒体に記録する場合について説明したが、当該記録以外にも、例えば他の装置への伝送や更に他の処理に供させるといった目的のために各実施形態に係る記録データＳrを生成する場合に本発明を適用することも可能である。

更に上述してきた各実施形態においては、直前のフレーム画像の解析結果を用いてそれに続くフレーム画像の補正を行う補正処理に対して本発明を適用したが、これ以外に、二フレーム画像以上前のフレーム画像の解析結果を用いて後のフレーム画像の補正を行う補正処理に対して本発明を適用することもできる。この場合には、取得元たるカメラが同一であるフレーム画像の解析結果を用いて補正されたフレーム画像を選択して（換言すれば、取得元たるカメラが異なるフレーム画像の解析結果を用いて補正されたフレーム画像を間引いて）記録データＳrを生成することとなる。

また、上述してきた各実施形態以外に、複数のマイクにより集音した音声等を切り換えてストリーム化して記録媒体に記録する場合に本発明を適用することも可能である。この場合には、当該音声等に対して施される高音質化のための処理等に応じて、当該処理等が適切に施されたと予測される音声単位を選択して記録することとなる。

更に、図１（ｂ）又は図３（ｂ）に記載されたフローチャートに対応するプログラムを光ディスク等の記録媒体に記録しておき、又はインターネット等のネットワークを介して取得した当該プログラムを記録しておき、これらをマイクロコンピュータ等の汎用のコンピュータで読み出して実行することにより、当該コンピュータを各実施形態に係る切換制御部１１等として用いることも可能である。

以上夫々説明したように、本発明はカメラシステムの分野に利用することが可能であり、特に複数のカメラにより撮像された画像データを記録媒体に記録するカメラシステムの分野に適用すれば特に顕著な効果が得られる。

１Ａ、２Ａ、３Ａ、４Ａ カメラ
１Ｂ、２Ｂ、３Ｂ、４Ｂ Ａ／Ｄコンバータ
５ 切換部
６ フレームバッファ
７ 補正部
８、２０ 間引き部
９ 書込／読出制御部
１０ 記録部
１１ 制御部
１２ 同期部
１−１、１−２、１−３、１−４、１−５、１−６、１−７、１−８、２−１、２−２、２−３、２−４、２−５、２−６、２−７、２−８、３−１、３−２、３−３、３−４、３−５、３−６、３−７、３−８、４−１、４−２、４−３、４−４、４−５、４−６、４−７、４−８ フレーム画像
Ｄ 記録媒体
Ｓ１、Ｓ２ 防犯カメラシステム
ＣＨ１ 第１チャンネル
ＣＨ２ 第２チャンネル
ＣＨ３ 第３チャンネル
ＣＨ４ 第４チャンネル

Claims (8)

1. 複数の取得元から情報をそれぞれ取得する取得手段と、
   各前記取得した情報を用いて、当該各取得した情報の部分を時系列に沿ってそれぞれ含む複合情報を生成する生成手段と、
   前記生成された複合情報に対して、予め設定された処理を施して処理情報を生成する処理手段と、
   前記生成された処理情報を構成する処理情報単位のうち、前記処理に対応して特定される特定情報単位を選択する選択手段と、
   を備えることを特徴とする情報処理装置。
2. 請求項１に記載の情報処理装置において、
   前記取得元は撮像手段であり、
   前記取得された情報は複数のフレーム画像からなる画像データであり、
   前記生成手段は、各前記取得した画像データの前記フレーム画像を順次切り換えて出力する切換手段であり、
   前記処理は、前記複合情報を構成する各前記フレーム画像をそれぞれ補正して前記処理情報を生成する補正処理であって、当該補正処理の対象となる前記フレーム画像に対して前記複合情報において一つ前以前の前記フレーム画像である前フレーム画像に基づいて、当該対象となる前記フレーム画像を補正する補正処理であり、
   前記選択手段は、前記前フレーム画像の前記取得元たる前記撮像手段と、前記対象となる前記フレーム画像の前記取得元たる前記撮像手段と、が同一である場合の当該対象となる前記フレーム画像に相当する前記処理情報単位を前記特定情報単位として選択することを特徴とする情報処理装置。
3. 請求項２に記載の情報処理装置において、
   前記生成手段は、
   前記切換手段と、
   前記出力されたフレーム画像を当該出力順に記憶すると共に、記憶時の速度の二倍の読出速度で且つ一つの前記フレーム画像が連続するように当該一つのフレーム画像を二回繰り返しながら読み出し、前記複合情報として出力するバッファ手段と、
   により構成されており、
   前記選択手段は、前記バッファ手段から出力されて前記補正処理が施された前記処理情報に含まれる前記処理情報単位のうち、二回繰り返して出力された二つの前記フレーム画像における後者の当該フレーム画像に相当する前記処理情報単位を、前記既定単位として選択することを特徴とする情報処理装置。
4. 請求項２又は請求項３に記載の情報処理装置において、
   前記補正処理は、各前記フレーム画像のコントラストをそれぞれ補正して前記処理情報を生成する補正処理であって、前記前フレーム画像に基づいて前記対象となる前記フレーム画像のコントラストを補正する補正処理であることを特徴とする情報処理装置。
5. 請求項１から請求項４のいずれか一項に記載の情報処理装置において、
   各前記選択された特定情報単位を一つの記録媒体に記録する記録手段を更に備えることを特徴とする情報処理装置。
6. 複数の取得元から情報をそれぞれ取得する取得工程と、
   各前記取得した情報を用いて、当該各取得した情報の部分を時系列に沿ってそれぞれ含む複合情報を生成する生成工程と、
   前記生成された複合情報に対して、予め設定された処理を施して処理情報を生成する処理工程と、
   前記生成された処理情報を構成する処理情報単位のうち、前記処理に対応して特定される特定情報単位を選択する選択工程と、
   を含むことを特徴とする情報処理方法。
7. 複数の取得元から情報をそれぞれ取得する取得手段を備える情報処理装置に含まれるコンピュータを、
   各前記取得した情報を用いて、当該各取得した情報の部分を時系列に沿ってそれぞれ含む複合情報を生成する生成手段、
   前記生成された複合情報に対して、予め設定された処理を施して処理情報を生成する処理手段、及び、
   前記生成された処理情報を構成する処理情報単位のうち、前記処理に対応して特定される特定情報単位を選択する選択手段、
   として機能させることを特徴とする情報処理用プログラム。
8. 請求項７に記載の情報処理用プログラムが請求項７に記載の前記コンピュータにより読取可能に記録されていることを特徴とする情報記録媒体。

Images