JP6443144B2 - 情報出力装置、情報出力プログラム及び情報出力方法、並びに情報出力システム - Google Patents

Description

本発明は、情報出力装置、情報出力プログラム及び情報出力方法、並びに情報出力システムに関する。

従来、車両のナンバープレートにカバーが取り付けられているか否かを判定する技術が知られている（例えば、特許文献１等参照）。例えば、特許文献１には、車両を含む画像からナンバープレートの画像領域を抽出し、プレート画像領域のナンバー部分の平均輝度と背景部分の平均輝度との輝度差を算出し、算出された輝度差と標準輝度差（閾値）に基づき、カバーが取り付けられているか否かを判定する技術が開示されている。

特開２０１３−１９６３９２号公報

しかしながら、ナンバープレートの画像領域の輝度は、画像を撮像した時間帯や天候条件等によっても変化するため、カバーが装着されているか否かを判定する閾値として適切な値を設定するのが難しい。特に、カバーが無色透明の場合には、カバー装着有無による輝度の変化が少ないため閾値の設定が難しい。

１つの側面では、本発明は、ナンバープレートにカバーが装着されていることを精度よく判定し、出力することが可能な情報出力装置、情報出力プログラム及び情報出力方法、並びに情報出力システムを提供することを目的とする。

一つの態様では、情報出力装置は、路面及び車両が撮像された画像から、所定領域の路面の輝度値及び前記車両のナンバープレート領域の輝度値を取得し、前記ナンバープレート領域から前記車両のナンバー情報を取得する取得部と、前記画像の情報として、それぞれの前記輝度値と前記ナンバー情報を前記画像が撮像された日時情報とともに記憶する記憶部と、前記取得部が第１の画像から路面の輝度値とナンバープレート領域の輝度値を取得した場合に、前記第１の画像が撮像された時刻に基づく所定時間帯に路面及び車両が撮像された画像のうち、前記記憶部に記憶されている路面の輝度値が、前記第１の画像の路面の輝度値に基づく所定範囲内の輝度値である第２の画像を複数選択し、複数の前記第２の画像のナンバープレート領域の輝度値と前記第１の画像のナンバープレート領域の輝度値の比較結果に基づいて、前記第１の画像に写し出されたナンバープレートにカバーが装着されているか否かを判定する判定部と、前記判定部によりナンバープレートにカバーが装着されていると判定された場合に、前記取得部が前記第１の画像から取得したナンバー情報と、カバーが装着されていることを示す情報と、を出力する出力部と、を備えている。

１つの側面として、ナンバープレートにカバーが装着されていることを精度よく判定し、出力することができる。

一実施形態に係る監視システムの構成を概略的に示す図である。 図２（ａ）は、認識装置のハードウェア構成を示す図であり、図２（ｂ）は、サーバのハードウェア構成を示す図である。 認識装置及びサーバの機能ブロック図である。 認識結果ＤＢのデータ構造を示す図である。 認識装置の処理を示すフローチャートである。 車両が撮像された静止画像を示す図である。 図７（ａ）は、路面領域を示す図であり、図７（ｂ）は、輝度値を取得する路面領域を示す図である。 カバー有無判定処理を示すフローチャートである。 図８のステップＳ５８を説明するための図である。 路面領域抽出処理を示すフローチャートである。 図１０のステップＳ７６を説明するための図である。

以下、情報出力システムの一実施形態としての監視システムついて、図１〜図１１に基づいて詳細に説明する。

図１には、一実施形態にかかる監視システム１００の構成が概略的に示されている。図１に示すように、監視システム１００は、撮像装置としての複数の監視カメラ１０と、複数の認識装置２０と、情報出力装置としてのサーバ７０と、を備える。監視カメラ１０と認識装置２０は、通信ケーブル等で接続され、認識装置２０とサーバ７０は、インターネットなどのネットワーク８０に接続されている。

監視カメラ１０は、例えば、道路近傍に設置され、道路及び道路を走行する車両等を所定時間間隔で撮像する。監視カメラ１０は、一例として静止画像を撮像し、静止画像のデータ（静止画データ）を認識装置２０に送信する。なお、監視カメラ１０は、動画を撮像し、動画に含まれるフレームを認識装置２０に対して送信してもよい。

認識装置２０は、各監視カメラ１０に対応して、各監視カメラ１０の近傍に設けられており、監視カメラ１０において撮像された静止画データを受信し、静止画データから得られる情報（認識結果）や、静止画データをサーバ７０に送信する。なお、認識結果には、静止画像中のナンバープレートから認識した一連番号（４桁の番号）等、静止画像中のナンバープレートに対応する部分（プレート部）の輝度値、静止画像中の路面に対応する部分（路面領域）の輝度値、監視カメラ１０のアイリス値（Ｆ値）等が含まれる。

図２（ａ）には、認識装置２０のハードウェア構成が示されている。図２（ａ）に示すように、認識装置２０は、ＣＰＵ（Central Processing Unit）９０、ＲＯＭ（Read Only Memory）９２、ＲＡＭ（Random Access Memory）９４、記憶部（ここではＨＤＤ（Hard Disk Drive））９６、ネットワークインタフェース９７、及び可搬型記憶媒体用ドライブ９９等を備えている。これら認識装置２０の構成各部は、バス９８に接続されている。ＣＰＵ９０は、ＲＯＭ９２あるいはＨＤＤ９６に格納されているプログラム、或いは可搬型記憶媒体用ドライブ９９が可搬型記憶媒体９１から読み取ったプログラムを実行することにより、認識装置２０を、図３に示す各部として機能させる。

具体的には、図３に示すように、ＣＰＵ９０がプログラムを実行することにより、認識装置２０は、画像取得部３２、車両有無判定部３４、情報認識部３６、送信部３８として機能する。

画像取得部３２は、監視カメラ１０において撮像される静止画像を所定間隔（例えば、数秒間隔）で取得し、車両有無判定部３４に送信する。車両有無判定部３４は、画像取得部３２から受信した静止画像において車両が撮像されているか否かを判定する。なお、車両有無判定部３４は、例えば、車両のテンプレート画像を用いたテンプレートマッチング等を用いて、車両が撮像されているか否かを判定する。ただし、これに限らず、車両が撮像されているか否かを、他の方法で判定することとしてもよい。

情報認識部３６は、静止画像中のナンバープレートから認識した一連番号、静止画像中のナンバープレート領域の輝度値、静止画像中の路面に対応する部分（路面領域）の輝度値を認識するとともに、静止画像に付帯したＥｘｉｆ（Exchangeable image file format）情報等から、監視カメラ１０のアイリス値を認識する。なお、以下においては、静止画像中のナンバープレート領域を単に「プレート部」と呼ぶものとする。

送信部３８は、情報認識部３６が認識した情報と、画像取得部３２が取得した静止画像のデータと、をサーバ７０に送信する。なお、送信部３８は、車両有無判定部３４が車両が存在しないと判定した場合には、静止画像のデータのみをサーバ７０に対して送信する。

図１に戻り、サーバ７０は、各認識装置２０から送信されてきた静止画像のデータ及び静止画像から認識された情報を受信し、静止画像中の車両がナンバープレートにカバーを装着しているかどうかを判定し、判定結果を出力する装置である。サーバ７０は、図２（ｂ）に示すようなハードウェア構成を有する。具体的には、サーバ７０は、図２（ｂ）に示すように、ＣＰＵ１９０、ＲＯＭ１９２、ＲＡＭ１９４、記憶装置としての記憶部（ＨＤＤ）１９６、ネットワークインタフェース１９７、及び可搬型記憶媒体用ドライブ１９９等を備えている。これらサーバ７０の構成各部は、バス１９８に接続されている。ＣＰＵ１９０は、ＲＯＭ１９２あるいはＨＤＤ１９６に格納されているプログラム（情報出力プログラムを含む）、或いは可搬型記憶媒体用ドライブ１９９が可搬型記憶媒体１９１から読み取ったプログラム（情報出力プログラムを含む）を実行することにより、サーバ７０を、図３に示す各部として機能させる。なお、図３には、サーバ７０のＨＤＤ１９６等に格納されている記憶部としての認識結果ＤＢ（database）５２、画像ＤＢ５４も図示されている。

図３に示すように、ＣＰＵ１９０がプログラムを実行することにより、サーバ７０は、取得部としての受信部４２、判定部としてのカバー有無判定部４４、出力部４６、路面領域抽出部４８、として機能する。

受信部４２は、認識装置２０の送信部３８から送信されてきた静止画像のデータや情報を受信し、認識結果ＤＢ５２に格納する。なお、受信部４２は、送信部３８から静止画像のデータのみが送信されてきた場合（認識された情報が送信されてこなかった場合）には、静止画像のデータを路面領域抽出部４８に送信する。

カバー有無判定部４４は、認識結果ＤＢ５２に格納されているデータや情報に基づいて、静止画像内の車両がナンバープレートにカバーを装着しているか否かを判定する。

出力部４６は、ナンバープレートにカバーを装着している車両があった場合に、車両のナンバー情報と、カバーが装着されていることを示す情報を、ネットワーク８０に接続されている端末（例えば警察署の端末等）に出力する。

路面領域抽出部４８は、受信部４２から受信した静止画像のデータを用いて、各監視カメラ１０で撮像される静止画像の路面領域（車両が走行する部分の領域）を抽出し、認識装置２０の情報認識部３６に対して送信する。

ここで、認識結果ＤＢ５２のデータ構造について、図４に基づいて説明する。認識結果ＤＢ５２は、「日時」、「地点」、「撮像方向」、「一連番号」、「アイリス値」、「プレート部の輝度値」、「路面領域の輝度値」の各フィールドを有する。「日時」のフィールドには、静止画像が撮像された日時の情報が格納され、「地点」のフィールドには、静止画像が撮像された地点（撮像した監視カメラ１０が設置された地点）の情報が格納され、「撮像方向」のフィールドには、撮像した監視カメラ１０が向いている方向の情報が格納される。「一連番号」のフィールドには、静止画像から認識されたナンバープレートの一連番号の情報が格納され、「アイリス値」のフィールドには、静止画像を撮影した時点における監視カメラ１０のアイリス値（Ｆ値）が格納される。また、「プレート部の輝度値」のフィールドには、静止画像のうち、プレート部から得られる輝度値が格納され、「路面領域の輝度値」のフィールドには、静止画像のうち、路面領域から得られる輝度値が格納される。なお、画像ＤＢ５４は、画像を記憶するデータベースであるが、そのデータ構造等についての説明は省略する。なお、ナンバープレートの情報（プレート情報）としては、「一連番号」のほかに、分類番号や運輸支局等、かな文字等が認識結果ＤＢ５２に格納されてもよい。

（認識装置２０の処理）
次に、認識装置２０の処理について、図５のフローチャートに沿って、その他図面を適宜参照しつつ、詳細に説明する。なお、図５の処理の前提として、ある監視カメラ１０の撮像範囲は固定であり、当該撮像範囲のうち、車両が通過する路面領域は、図７（ａ）においてハッチングを付して示すように、特定されているものとする。なお、路面領域の抽出方法については後述する。

図５の処理では、まず、ステップＳ１０において、画像取得部３２が、監視カメラ１０で撮像された静止画像のデータを取得する。具体的には、監視カメラ１０で撮像された画像をデジタル化してメモリに取り込む。次いで、ステップＳ１２では、車両有無判定部３４が、取得した静止画像のデータにおいて、車両が撮像されているか否かを判断する。ここでの判断が肯定された場合には、ステップＳ１４に移行する。なお、ステップＳ１２の判断が否定された場合には、ステップＳ２０に移行する。

ステップＳ１４に移行した場合、すなわち、図６に示すように、静止画像において車両が撮像されていた場合には、情報認証部３６は、取得した静止画像のデータから、プレート情報の認識処理を実施する。具体的には、情報認証部３６は、静止画像から車両部分を抽出し、車両部分から例えば白色の略矩形範囲をプレート部として抽出する。そして、情報認識部３６は、プレート部の文字認識を行うことで、ナンバープレート内に記載されている一連番号（４桁の番号）を認識したり、プレート部の輝度値（ここでは、一例として文字以外の背景部分（白色部分）の輝度値であるものとする）を取得する。なお、プレート部の輝度値は、プレート部内の複数点の輝度値の平均値であってもよい。

次いで、ステップＳ１６では、情報認証部３６は、抽出したプレート部の静止画像内における位置と、図７（ａ）に示す路面領域の位置とから、図７（ｂ）においてハッチングを付して示すような、プレート部よりも前方の路面領域の範囲を特定し、特定した範囲の輝度値を算出する。なお、情報認証部３６は、特定した範囲の輝度値として、特定した範囲内の複数点の輝度値の平均値を求めてもよいし、特定した範囲内の一点の輝度値を求めてもよい。

次いで、ステップＳ１８では、情報認証部３６は、認識結果をテキスト化する。認識結果には、一連番号、ナンバープレート部分の輝度値、路面領域の輝度値のほか、静止画像のデータに付帯しているＥｘｉｆ情報から取得可能な、監視カメラ１０の設置地点や撮像方向、撮像日時、アイリス値も含まれるものとする。その後は、ステップＳ２０に移行する。

ステップＳ１８の後、又はステップＳ１２の判断が否定された後は、ステップＳ２０に移行し、送信部３８は、画像取得部３２が取得した静止画像のデータを圧縮する。

次いで、ステップＳ２２では、送信部３８が送信データを作成し、サーバ７０に対して送信する。ここで、ステップＳ１２の判断が肯定された場合であれば、送信データには、車両が撮像されている静止画像の圧縮データ（Ｓ２０）と、テキスト化された認識結果（Ｓ１８）とが含まれる。一方、ステップＳ１２の判断が否定された場合には、送信データは、車両が撮像されていない静止画像の圧縮データ（Ｓ２０）となる。

なお、ステップＳ１２の判断が否定された場合、毎回ステップＳ２０、Ｓ２２を行わないこととしてもよい。例えば、所定時間（例えば５分間）に１回だけ、ステップＳ１２の判断が否定された場合に、ステップＳ２０、Ｓ２２を行うこととしてもよい。

上述したようにステップＳ２２の処理が終了すると、図５の全処理を終了する。なお、図５の処理は、所定の時間間隔で（例えば、数秒に１回程度の間隔で）繰り返し実行される。

（サーバ７０の処理）
次に、サーバ７０の処理について説明する。サーバ７０は、図８に示すカバー有無判定処理と、図１０に示す路面領域抽出処理を実行する。

（カバー有無判定処理（図８））
以下、図８に基づいて、カバー有無判定処理について説明する。図８の処理では、まず、ステップＳ５０において、受信部４２が、認識装置２０から認識結果を受信するまで待機する。この場合、認識装置２０の送信部３８から認識結果を受信した場合（すなわち、図５のステップＳ１２の判断が肯定された後に、ステップＳ２２の処理が実行された場合）に、受信部４２はステップＳ５２に移行する。

ステップＳ５２に移行すると、受信部４２は、認識結果を認識結果ＤＢ５２に格納するとともに、静止画像のデータを画像ＤＢ５４に格納する。なお、今回認識結果ＤＢ５２に格納した画像が、処理・判断対象の画像である第１の画像に相当する。なお、認識結果ＤＢ５２には、各認識装置２０から過去に受信した認識結果が格納されている。

次いで、ステップＳ５４では、カバー有無判定部４４が、今回受信した認識結果に基づいて、検索条件を作成する。この場合、カバー有無判定部４４は、検索条件として、例えば、日時、撮像方向、路面領域の輝度値、アイリス値の範囲を設定する。例えば、日時の範囲は、今回受信した静止画像の撮像日から１週間前まで、及び今回の静止画像の撮像時刻±１時間などと設定することができる。なお、日時の範囲としては、今回の静止画像の撮像環境と類似する環境である可能性が高い日時の範囲が設定されているといえる。また、例えば、撮像方向の範囲は、今回の静止画像の撮像方向と同一の方向などと設定することができる。また、例えば、路面領域の輝度値の範囲は、今回受信した静止画像の路面領域の輝度値をＩとして、Ｉ−２０〜Ｉ＋２０などと設定することができる。また、アイリス値の範囲は、今回受信した静止画像を撮像した際のアイリス値をＦとして、Ｆ−０．２〜Ｆ＋０．２などと設定することができる。

次いで、ステップＳ５６では、カバー有無判定部４４が、作成した検索条件を満たす認識結果を、認識結果ＤＢ５２から検索する。なお、本検索によりヒットした画像の認識結果が、比較対象の画像（第２の画像）の認識結果に相当する。次いで、ステップＳ５８では、カバー有無判定部４４が、検索された（ヒットした）認識結果のプレート部の輝度値と、今回の認識結果に含まれるプレート部の輝度値とを比較する。次いで、ステップＳ６０では、カバー有無判定部４４が、今回の認識結果が外れ値か否かを判断する。ここで、外れ値か否かの判断方法としては、一例として、以下の(1)や(2)のような方法を採用することができる。

(1) 検索された（ヒットした）認識結果に含まれるプレート部の輝度値の平均を算出し、今回のプレート部の輝度値が当該平均値を１０％以上下回った場合に、外れ値であると判断する。

(2) 検索された（ヒットした）認識結果に含まれるプレート部の輝度値の標準偏差（σ）を算出し、今回のプレート部の輝度値が3σ内に含まれない場合に、外れ値であると判断する。

なお、図９には、ステップＳ６０の判断（上記(2)の判断）が肯定される場合の例が模式的に示されている。図９のように、今回のプレート部の輝度値（黒丸）が、他の輝度値（白丸）が存在する範囲から外れている場合に、ステップＳ６０では今回の認識結果が外れ値であると判断されるようになっている。

なお、上記(1)や(2)の判断方法は、検索された（ヒットした）認識結果が複数である場合を前提としたものであるが、ヒットした認識結果が１つの場合には、例えば、当該認識結果に含まれるプレート部の輝度値との差分が所定値以上になった場合に外れ値であると判断してもよい。あるいは、ヒットした検索結果が１つの場合には、判定不能であると判断し、その旨を出力してもよい。

ステップＳ６０の判断が否定された場合、すなわち、外れ値でなかった場合には、ナンバープレートにカバーが装着されていないので、特別な処理を行うことなく、図８の全処理を終了する。

一方、ステップＳ６０の判断が肯定された場合には、ステップＳ６２に移行し、出力部４６が、認識結果に含まれる一連番号と、カバーを装着している可能性が高いことを示す情報とを外部の機器（たとえば、警察が利用する端末など）に出力する。この場合、外部の機器に対して静止画像のデータも送信するようにしてもよい。

次いで、ステップＳ６４では、出力部４６が、今回の認識結果（ステップＳ５２で認識結果ＤＢ５２に格納した認識結果）を認識結果ＤＢ５２から除外する。すなわち、以降の図８の処理において、今回の認識結果が認識されないようにする。これにより、カバー装着有無の判定を精度よく行うことが可能となる。なお、ステップＳ６４の処理が行われた後は、図８の全処理を終了する。

（路面領域抽出処理（図１０））
次に、図１０に基づいて、サーバ７０の路面領域抽出部４８による路面領域抽出処理について、詳細に説明する。

図１０の処理では、まず、ステップＳ７０において、路面領域抽出部４８が、所定のタイミングが到来するまで待機する。本実施形態において、所定のタイミングとは、例えば、１ヶ月ごとのタイミングであるものとする。

所定のタイミングが到来すると、ステップＳ７２に移行し、路面領域抽出部４８は、ネットワーク８０上に複数存在している認識装置２０のうちの１つを特定する。

次いで、ステップＳ７４では、路面領域抽出部４８が、特定された認識装置２０から受信した静止画像のデータを取得する。なお、路面領域抽出部４８が認識装置２０から受信した静止画像のデータには、前述のように車両が写っていない（例えば、図１１（ａ）、図１１（ｂ）参照）。

次いで、ステップＳ７６では、路面領域抽出部４８が、取得した静止画像のデータから、変化のない領域（路面領域）を抽出する。この処理により、歩道など、変化がある部分を除いた範囲を抽出することができる。なお、ステップＳ７４において取得した静止画像は、走行する車両が写っていない画像であるので、本ステップＳ７４により、変化のない部分として、車両が走行する範囲（路面領域）が抽出されることになる。

次いで、ステップＳ７８では、路面領域抽出部４８が、ステップＳ７２において特定された認識装置２０に対して、路面領域の情報を送信する。この場合、一例として、図７（ａ）に示すような路面領域の範囲が特定された画像データが送信される。なお、路面領域抽出部４８は、路面領域の範囲を座標値で特定した情報を認識装置２０（情報認識部３６）に送信してもよい。

次いで、ステップＳ８０では、路面領域抽出部４８が、全ての認識装置がステップＳ７２において特定されたか否かを判断する。このステップＳ８０の判断が否定された場合には、ステップＳ７２に戻り、路面領域抽出部４８は、次の認識装置を特定し、該認識装置が撮像する静止画像における路面領域の特定、路面領域の情報の送信等の処理を実行する。

以上のように、図１０の処理を実行することで、所定タイミングごと（例えば１ヵ月ごと）に、路面領域の情報を各認識装置２０に対して送信することができる。これにより、工事等により路面状況が変化した場合にも、図８のカバー有無判定処理を精度良く行うことができる。

以上、詳細に説明したように、本実施形態によると、サーバ７０においては、受信部４２が、路面及び車両が撮像された画像から取得される、車両前方の路面領域の輝度値及びプレート部の輝度値と、プレート部から取得される車両のナンバー情報を取得する。また、認識結果ＤＢ５２には、認識結果として、各輝度値とナンバー情報と画像が撮像された日時情報が記憶される。そして、カバー有無判定部４４は、受信部４２がある画像（第１の画像）から路面の輝度値とプレート部の輝度値を取得した場合に、ある画像が撮像された時刻に基づく所定時間帯（環境が類似する日時範囲）に路面及び車両が撮像された画像のうち、認識結果ＤＢ５２に記憶されている路面の輝度値が、ある画像の路面の輝度値Ｉに基づく所定範囲内の輝度値（Ｉ−２０〜Ｉ＋２０）である画像（第２の画像）を複数選択し、選択した複数の画像のプレート部の輝度値とある画像のプレート部の輝度値の比較結果に基づいて、ある画像に写し出されたナンバープレートにカバーが装着されているか否かを判定する。更に、カバー有無判定部４４によりナンバープレートにカバーが装着されていると判定された場合に、出力部４６は、ナンバー情報と、カバーが装着されていることを示す情報と、を出力する。これにより、撮像された環境や条件が類似する画像を用いてナンバープレートの輝度値を比較することで、ナンバープレートにカバーが装着されているか否かを、日照条件の変化等による影響を受けずに精度良く判定し、出力することができる。また、カバー装着有無を判定するための閾値を設定する必要がなく、閾値設定のための労力やコストの低減を図ることができる。

また、本実施形態では、カバー有無判定部４４によりナンバープレートにカバーが装着されていると判定された場合には、当該判定の元になった認識結果を認識結果ＤＢ５２に記憶しないこととしている。これにより、ナンバープレートにカバーが装着されていない画像の情報（認識結果）のみを認識結果ＤＢ４２に格納することができるので、カバー有無判定部４４の判定精度を向上することができる。

また、本実施形態では、カバー有無判定部４４は、ステップＳ５８、Ｓ６０のように、複数のプレート部の輝度値と、認識結果に含まれるプレート部の輝度値とを比較するので、１つのプレート部の輝度値と比較する場合と比べ、精度良くカバー装着有無を判定することができる。

また、本実施形態では、撮像方向やアイリス値が類似する認識結果を検索するので、より精度良くカバー装着有無を判定することができる。

なお、上記実施形態では、監視カメラ１０の撮像条件として、アイリス値を取得し、カバー有無判定処理に用いる場合について説明したが、これに限られるものではない。監視カメラ１０の撮像条件として、その他の値を取得し、カバー有無判定処理に用いることとしてもよい。

なお、上記実施形態では、図８のステップＳ５８において、カバー有無判定部４４は、検索された認識結果に含まれるプレート部の輝度値と、今回の認識結果に含まれるプレート部の輝度値とを比較する場合について説明したが、これに限られるものではない。例えば、認識装置２０においてプレート部のコントラスト値を算出する場合には、カバー有無判定部４４は、検索された認識結果に含まれるプレート部のコントラスト値と、今回の認識結果に含まれるプレート部のコントラスト値を比較することとしてもよい。また、例えば、認識装置２０においてナンバープレートの文字認識率（マッチング率）を算出する場合には、カバー有無判定部４４は、検索された認識結果に含まれるマッチング率と、今回の認識結果に含まれるマッチング率を比較することとしてもよい。これらの場合、ステップＳ５８において輝度値に代えてコントラスト値やマッチング率を用いる以外は、上記実施形態と同様の処理が行われる。

なお、上記実施形態では、図５において、所定時間間隔で静止画像を撮像し、車両が撮像されたことを検出した場合に、検出したタイミングで撮像された画像に対してステップＳ１４〜Ｓ１８の処理を実行する場合について説明したが、これに限られるものではない。例えば、車両が通過することを検出した場合に、静止画像を撮像し、その画像に対してステップＳ１４〜Ｓ１８の処理を実行することとしてもよい。

なお、上記実施形態では、監視システム１００にサーバ７０が含まれる場合について説明したが、これに限らず、サーバ７０を省略してもよい。この場合、図３のサーバ７０の機能を各認識装置２０が備えていてもよい。

なお、上記の処理機能は、コンピュータによって実現することができる。その場合、処理装置が有すべき機能の処理内容を記述したプログラムが提供される。そのプログラムをコンピュータで実行することにより、上記処理機能がコンピュータ上で実現される。処理内容を記述したプログラムは、コンピュータで読み取り可能な記録媒体（ただし、搬送波は除く）に記録しておくことができる。

プログラムを流通させる場合には、例えば、そのプログラムが記録されたＤＶＤ（Digital Versatile Disc）、ＣＤ−ＲＯＭ（Compact Disc Read Only Memory）などの可搬型記録媒体の形態で販売される。また、プログラムをサーバコンピュータの記憶装置に格納しておき、ネットワークを介して、サーバコンピュータから他のコンピュータにそのプログラムを転送することもできる。

プログラムを実行するコンピュータは、例えば、可搬型記録媒体に記録されたプログラムもしくはサーバコンピュータから転送されたプログラムを、自己の記憶装置に格納する。そして、コンピュータは、自己の記憶装置からプログラムを読み取り、プログラムに従った処理を実行する。なお、コンピュータは、可搬型記録媒体から直接プログラムを読み取り、そのプログラムに従った処理を実行することもできる。また、コンピュータは、サーバコンピュータからプログラムが転送されるごとに、逐次、受け取ったプログラムに従った処理を実行することもできる。

上述した実施形態は本発明の好適な実施の例である。但し、これに限定されるものではなく、本発明の要旨を逸脱しない範囲内において種々変形実施可能である。

なお、以上実施形態の説明に関して、更に以下の付記を開示する。
（付記１） 路面及び車両が撮像された画像から、所定領域の路面の輝度値及び前記車両のナンバープレート領域の輝度値を取得し、前記ナンバープレート領域から前記車両のナンバー情報を取得する取得部と、
前記画像の情報として、それぞれの前記輝度値と前記ナンバー情報を前記画像が撮像された日時情報とともに記憶する記憶部と、
前記取得部が第１の画像から路面の輝度値とナンバープレート領域の輝度値を取得した場合に、前記第１の画像が撮像された時刻に基づく所定時間帯に路面及び車両が撮像された画像のうち、前記記憶部に記憶されている路面の輝度値が、前記第１の画像の路面の輝度値に基づく所定範囲内の輝度値である第２の画像を複数選択し、複数の前記第２の画像のナンバープレート領域の輝度値と前記第１の画像のナンバープレート領域の輝度値の比較結果に基づいて、前記第１の画像に写し出されたナンバープレートにカバーが装着されているか否かを判定する判定部と、
前記判定部によりナンバープレートにカバーが装着されていると判定された場合に、前記取得部が前記第１の画像から取得したナンバー情報と、カバーが装着されていることを示す情報と、を出力する出力部と、
を備える情報出力装置。
（付記２） 前記判定部によりナンバープレートにカバーが装着されていると判定された場合には、前記記憶部は、前記第１の画像の情報を記憶しないことを特徴とする付記１に記載の情報出力装置。
（付記３） 前記判定部は、前記第２の画像を、撮像日時が前記第１の画像の撮像日時から所定期間内である画像の中から複数選択する、ことを特徴とする付記１又は２に記載の情報出力装置。
（付記４） 前記記憶部は、前記画像の情報として、画像の撮像方向を記憶し、
前記判定部は、前記第２の画像を、撮像方向が前記第１の画像の撮像方向に基づく所定範囲内にある画像の中から複数選択する、ことを特徴とする付記１〜３のいずれかに記載の情報出力装置。
（付記５） 前記記憶部は、前記画像の情報として、画像を撮像した撮像装置の設定値を記憶し、
前記判定部は、前記第２の画像を、撮像した撮像装置の設定値が前記第１の画像を撮像した撮像装置の設定値に基づく所定範囲内にある画像の中から複数選択する、ことを特徴とする付記１〜４のいずれかに記載の情報出力装置。
（付記６） 路面及び車両が撮像された画像から、所定領域の路面の輝度値及び前記車両のナンバープレート領域の輝度値を取得し、前記ナンバープレート領域から前記車両のナンバー情報を取得し、
前記画像の情報として、それぞれの前記輝度値と前記ナンバー情報を前記画像が撮像された日時情報とともに記憶し、
前記取得する処理において第１の画像から路面の輝度値とナンバープレート領域の輝度値を取得した場合に、前記第１の画像が撮像された時刻に基づく所定時間帯に路面及び車両が撮像された画像のうち、前記記憶する処理で記憶された路面の輝度値が、前記第１の画像の路面の輝度値に基づく所定範囲内の輝度値である第２の画像を複数選択し、複数の前記第２の画像のナンバープレート領域の輝度値と前記第１の画像のナンバープレート領域の輝度値の比較結果に基づいて、前記第１の画像に写し出されたナンバープレートにカバーが装着されているか否かを判定し、
前記判定する処理でナンバープレートにカバーが装着されていると判定された場合に、前記取得する処理で前記第１の画像から取得したナンバー情報と、カバーが装着されていることを示す情報と、を出力する、
処理をコンピュータに実行させることを特徴とする情報出力プログラム。
（付記７） 前記判定する処理で、ナンバープレートにカバーが装着されていると判定された場合には、前記記憶する処理では、前記第１の画像の情報を記憶しないことを特徴とする付記６に記載の情報出力プログラム。
（付記８） 前記判定する処理では、前記第２の画像を、撮像日時が前記第１の画像の撮像日時から所定期間内である画像の中から複数選択する、ことを特徴とする付記６又は７に記載の情報出力プログラム。
（付記９） 前記記憶する処理では、前記画像の情報として、画像の撮像方向を記憶し、
前記判定する処理では、前記第２の画像を、撮像方向が前記第１の画像の撮像方向に基づく所定範囲内にある画像の中から複数選択する、ことを特徴とする付記６〜８のいずれかに記載の情報出力プログラム。
（付記１０） 前記記憶する処理では、前記画像の情報として、画像を撮像した撮像装置の設定値を記憶し、
前記判定する処理では、前記第２の画像を、撮像した撮像装置の設定値が前記第１の画像を撮像した撮像装置の設定値に基づく所定範囲内にある画像の中から複数選択する、ことを特徴とする付記６〜９のいずれかに記載の情報出力プログラム。
（付記１１） 路面及び車両が撮像された画像から、所定領域の路面の輝度値及び前記車両のナンバープレート領域の輝度値を取得し、前記ナンバープレート領域から前記車両のナンバー情報を取得し、
前記画像の情報として、それぞれの前記輝度値と前記ナンバー情報を前記画像が撮像された日時情報とともに記憶し、
前記取得する処理において第１の画像から路面の輝度値とナンバープレート領域の輝度値を取得した場合に、前記第１の画像が撮像された時刻に基づく所定時間帯に路面及び車両が撮像された画像のうち、前記記憶する処理で記憶された路面の輝度値が、前記第１の画像の路面の輝度値に基づく所定範囲内の輝度値である第２の画像を複数選択し、複数の前記第２の画像のナンバープレート領域の輝度値と前記第１の画像のナンバープレート領域の輝度値の比較結果に基づいて、前記第１の画像に写し出されたナンバープレートにカバーが装着されているか否かを判定し、
前記判定する処理でナンバープレートにカバーが装着されていると判定された場合に、前記取得する処理で前記第１の画像から取得したナンバー情報と、カバーが装着されていることを示す情報と、を出力する、
処理をコンピュータが実行することを特徴とする情報出力方法。
（付記１２） 前記判定する処理で、ナンバープレートにカバーが装着されていると判定された場合には、前記記憶する処理では、前記第１の画像の情報を記憶しないことを特徴とする付記１１に記載の情報出力方法。
（付記１３） 前記判定する処理では、前記第２の画像を、撮像日時が前記第１の画像の撮像日時から所定期間内である画像の中から複数選択する、ことを特徴とする付記１１又は１２に記載の情報出力方法。
（付記１４） 前記記憶する処理では、前記画像の情報として、画像の撮像方向を記憶し、
前記判定する処理では、前記第２の画像を、撮像方向が前記第１の画像の撮像方向に基づく所定範囲内にある画像の中から複数選択する、ことを特徴とする付記１１〜１３のいずれかに記載の情報出力方法。
（付記１５） 前記記憶する処理では、前記画像の情報として、画像を撮像した撮像装置の設定値を記憶し、
前記判定する処理では、前記第２の画像を、撮像した撮像装置の設定値が前記第１の画像を撮像した撮像装置の設定値に基づく所定範囲内にある画像の中から複数選択する、ことを特徴とする付記１１〜１４のいずれかに記載の情報出力方法。
（付記１６） 路面及び車両が撮像された画像から、所定領域の路面の輝度値及び前記車両のナンバープレート領域の輝度値を取得するとともに、前記ナンバープレート領域から前記車両のナンバー情報を取得する認識装置と、
前記認識装置から前記所定領域の路面の輝度値、前記車両のナンバープレート領域の輝度値、及び前記車両のナンバー情報を取得する、付記１〜５のいずれかに記載の情報出力装置と、
を備える情報出力システム。
（付記１７） 前記画像を撮像する撮像装置を更に備える付記１６に記載の情報出力システム。

１０ 監視カメラ（撮像装置）
２０ 認識装置
４２ 受信部（取得部）
４４ カバー有無判定部（判定部）
４６ 出力部
５２ 認識結果ＤＢ（記憶部）
７０ サーバ（情報出力装置）
１００ 監視システム（情報出力システム）

Claims (8)

1. 路面及び車両が撮像された画像から、所定領域の路面の輝度値及び前記車両のナンバープレート領域の輝度値を取得し、前記ナンバープレート領域から前記車両のナンバー情報を取得する取得部と、
   前記画像の情報として、それぞれの前記輝度値と前記ナンバー情報を前記画像が撮像された日時情報とともに記憶する記憶部と、
   前記取得部が第１の画像から路面の輝度値とナンバープレート領域の輝度値を取得した場合に、前記第１の画像が撮像された時刻に基づく所定時間帯に路面及び車両が撮像された画像のうち、前記記憶部に記憶されている路面の輝度値が、前記第１の画像の路面の輝度値に基づく所定範囲内の輝度値である第２の画像を複数選択し、複数の前記第２の画像のナンバープレート領域の輝度値と前記第１の画像のナンバープレート領域の輝度値の比較結果に基づいて、前記第１の画像に写し出されたナンバープレートにカバーが装着されているか否かを判定する判定部と、
   前記判定部によりナンバープレートにカバーが装着されていると判定された場合に、前記取得部が前記第１の画像から取得したナンバー情報と、カバーが装着されていることを示す情報と、を出力する出力部と、
   を備える情報出力装置。
2. 前記判定部によりナンバープレートにカバーが装着されていると判定された場合には、前記記憶部は、前記第１の画像の情報を記憶しないことを特徴とする請求項１に記載の情報出力装置。
3. 前記判定部は、前記第２の画像を、撮像日時が前記第１の画像の撮像日時から所定期間内である画像の中から複数選択する、ことを特徴とする請求項１又は２に記載の情報出力装置。
4. 前記記憶部は、前記画像の情報として、画像の撮像方向を記憶し、
   前記判定部は、前記第２の画像を、撮像方向が前記第１の画像の撮像方向に基づく所定範囲内にある画像の中から複数選択する、ことを特徴とする請求項１〜３のいずれか一項に記載の情報出力装置。
5. 前記記憶部は、前記画像の情報として、画像を撮像した撮像装置の設定値を記憶し、
   前記判定部は、前記第２の画像を、撮像した撮像装置の設定値が前記第１の画像を撮像した撮像装置の設定値に基づく所定範囲内にある画像の中から複数選択する、ことを特徴とする請求項１〜４のいずれか一項に記載の情報出力装置。
6. 路面及び車両が撮像された画像から、所定領域の路面の輝度値及び前記車両のナンバープレート領域の輝度値を取得し、前記ナンバープレート領域から前記車両のナンバー情報を取得し、
   前記画像の情報として、それぞれの前記輝度値と前記ナンバー情報を前記画像が撮像された日時情報とともに記憶し、
   前記取得する処理において第１の画像から路面の輝度値とナンバープレート領域の輝度値を取得した場合に、前記第１の画像が撮像された時刻に基づく所定時間帯に路面及び車両が撮像された画像のうち、前記記憶する処理で記憶された路面の輝度値が、前記第１の画像の路面の輝度値に基づく所定範囲内の輝度値である第２の画像を複数選択し、複数の前記第２の画像のナンバープレート領域の輝度値と前記第１の画像のナンバープレート領域の輝度値の比較結果に基づいて、前記第１の画像に写し出されたナンバープレートにカバーが装着されているか否かを判定し、
   前記判定する処理でナンバープレートにカバーが装着されていると判定された場合に、前記取得する処理で前記第１の画像から取得したナンバー情報と、カバーが装着されていることを示す情報と、を出力する、
   処理をコンピュータに実行させることを特徴とする情報出力プログラム。
7. 路面及び車両が撮像された画像から、所定領域の路面の輝度値及び前記車両のナンバープレート領域の輝度値を取得し、前記ナンバープレート領域から前記車両のナンバー情報を取得し、
   前記画像の情報として、それぞれの前記輝度値と前記ナンバー情報を前記画像が撮像された日時情報とともに記憶し、
   前記取得する処理において第１の画像から路面の輝度値とナンバープレート領域の輝度値を取得した場合に、前記第１の画像が撮像された時刻に基づく所定時間帯に路面及び車両が撮像された画像のうち、前記記憶する処理で記憶された路面の輝度値が、前記第１の画像の路面の輝度値に基づく所定範囲内の輝度値である第２の画像を複数選択し、複数の前記第２の画像のナンバープレート領域の輝度値と前記第１の画像のナンバープレート領域の輝度値の比較結果に基づいて、前記第１の画像に写し出されたナンバープレートにカバーが装着されているか否かを判定し、
   前記判定する処理でナンバープレートにカバーが装着されていると判定された場合に、前記取得する処理で前記第１の画像から取得したナンバー情報と、カバーが装着されていることを示す情報と、を出力する、
   処理をコンピュータが実行することを特徴とする情報出力方法。
8. 路面及び車両が撮像された画像から、所定領域の路面の輝度値及び前記車両のナンバープレート領域の輝度値を取得するとともに、前記ナンバープレート領域から前記車両のナンバー情報を取得する認識装置と、
   前記認識装置から前記所定領域の路面の輝度値、前記車両のナンバープレート領域の輝度値、及び前記車両のナンバー情報を取得する、請求項１〜５のいずれか一項に記載の情報出力装置と、
   を備える情報出力システム。

Images