JP7298459B2 - 監視システム及び監視方法 - Google Patents
監視システム及び監視方法 Download PDFInfo
- Publication number
- JP7298459B2 JP7298459B2 JP2019219049A JP2019219049A JP7298459B2 JP 7298459 B2 JP7298459 B2 JP 7298459B2 JP 2019219049 A JP2019219049 A JP 2019219049A JP 2019219049 A JP2019219049 A JP 2019219049A JP 7298459 B2 JP7298459 B2 JP 7298459B2
- Authority
- JP
- Japan
- Prior art keywords
- emission intensity
- face
- unit
- subject
- block
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/16—Human faces, e.g. facial parts, sketches or expressions
- G06V40/161—Detection; Localisation; Normalisation
- G06V40/166—Detection; Localisation; Normalisation using acquisition arrangements
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/10—Image acquisition
- G06V10/12—Details of acquisition arrangements; Constructional details thereof
- G06V10/14—Optical characteristics of the device performing the acquisition or on the illumination arrangements
- G06V10/141—Control of illumination
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/10—Image acquisition
- G06V10/12—Details of acquisition arrangements; Constructional details thereof
- G06V10/14—Optical characteristics of the device performing the acquisition or on the illumination arrangements
- G06V10/145—Illumination specially adapted for pattern recognition, e.g. using gratings
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/40—Extraction of image or video features
- G06V10/60—Extraction of image or video features relating to illumination properties, e.g. using a reflectance or lighting model
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/50—Context or environment of the image
- G06V20/52—Surveillance or monitoring of activities, e.g. for recognising suspicious objects
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/16—Human faces, e.g. facial parts, sketches or expressions
- G06V40/161—Detection; Localisation; Normalisation
- G06V40/165—Detection; Localisation; Normalisation using facial parts and geometric relationships
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/16—Human faces, e.g. facial parts, sketches or expressions
- G06V40/172—Classification, e.g. identification
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Multimedia (AREA)
- Theoretical Computer Science (AREA)
- Oral & Maxillofacial Surgery (AREA)
- Health & Medical Sciences (AREA)
- Human Computer Interaction (AREA)
- General Health & Medical Sciences (AREA)
- Artificial Intelligence (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Geometry (AREA)
- Software Systems (AREA)
- Image Input (AREA)
- Studio Devices (AREA)
Description
本発明は、監視システム及び監視方法に関する。
従来より、生体画像に基づく生体認証技術の一例として、屋外や建屋入口に設置される監視カメラを利用した顔認証技術が知られている。当該顔認証技術では、逆光や斜光等の影響を抑えるために、例えば、監視カメラに照明装置を取り付け、撮影する生体画像の画質の向上を図っている。
しかしながら、照明光の明るさは、距離の２乗に反比例して減少するため、遠くにいる被写体の顔は暗く写る一方で、近くにいる被写体の顔は明るく写る（つまり、適切な明るさで写すことが可能な撮影距離は限られている）。
一つの側面では、被写体の顔を一定の明るさで写すことを目的としている。
一態様によれば、監視システムは、
撮像部の撮影範囲に照射する発光素子の数に応じて、複数のブロックに分割された、該撮像部の撮影画像から、被写体の顔領域を検出する検出部と、
前記複数のブロックのうち、前記顔領域が含まれるブロックに対応する発光素子の発光強度を、前記顔領域の位置または前記顔領域のサイズに応じて制御する制御部とを有する。
撮像部の撮影範囲に照射する発光素子の数に応じて、複数のブロックに分割された、該撮像部の撮影画像から、被写体の顔領域を検出する検出部と、
前記複数のブロックのうち、前記顔領域が含まれるブロックに対応する発光素子の発光強度を、前記顔領域の位置または前記顔領域のサイズに応じて制御する制御部とを有する。
被写体の顔を一定の明るさで写すことが可能となる。
以下、各実施形態について添付の図面を参照しながら説明する。なお、本明細書及び図面において、実質的に同一の機能構成を有する構成要素については、同一の符号を付することにより重複した説明を省略する。
［第１の実施形態］
＜監視システムのシステム構成＞
はじめに、監視システムのシステム構成について説明する。図１は、監視システムのシステム構成の一例を示す図である。図１に示すように、監視システム１００は、監視装置１１０、制御装置１２０、認証装置１３０を有する。
＜監視システムのシステム構成＞
はじめに、監視システムのシステム構成について説明する。図１は、監視システムのシステム構成の一例を示す図である。図１に示すように、監視システム１００は、監視装置１１０、制御装置１２０、認証装置１３０を有する。
監視装置１１０は、いわゆるスポット照明付きの監視カメラである。具体的には、監視装置１１０は、撮像部１１１を有する。また、監視装置１１０は、発光素子の一例であるＬＥＤ（Light Emitting Diode）と回折光学素子との組を複数有する。図１の例は、監視装置１１０が、ＬＥＤと回折光学素子との組を１２組有する場合を示している（組１１２＿１～１１２＿１２参照）。
撮像部１１１は、不図示の被写体を撮影し、撮影画像を制御装置１２０に送信する。ＬＥＤと回折光学素子との組１１２＿１～１１２＿１２は、制御装置１２０からの指示に基づいて、それぞれが独立して動作し、撮像部１１１の撮影範囲にスポット照明を照射する。ＬＥＤと回折光学素子との組１１２＿１～１１２＿１２それぞれの発光強度は、制御装置１２０からの指示に基づいて制御される。
制御装置１２０には、制御プログラムがインストールされており、当該制御プログラムが実行されることで、制御装置１２０は、画像処理部１２１及び照明制御部１２２として機能する。
画像処理部１２１は、撮像部１１１から受信した撮影画像から、被写体の顔領域を検出する。また、画像処理部１２１は、検出結果に基づいて、ＬＥＤと回折光学素子との組１１２＿１～１１２＿１２それぞれの発光強度を決定し、照明制御部１２２に通知する。
また、画像処理部１２１は、決定した発光強度を照明制御部１２２に送信したことに応じて、撮像部１１１から受信した撮影画像を、認証用の撮影画像として、認証装置１３０に送信する。
照明制御部１２２は、撮像部１１１から受信した撮影画像の画質を所定周期で評価し、被写体の顔領域を検出するのに必要な、ＬＥＤと回折光学素子との組１１２＿１～１１２＿１２それぞれの発光強度を算出する。また、照明制御部１２２は、算出したそれぞれの発光強度で、ＬＥＤと回折光学素子との組１１２＿１～１１２＿１２それぞれが発光するよう制御する。
また、照明制御部１２２は、認証用の撮影画像を撮影するために、画像処理部１２１から発光強度が通知された場合に、対応するＬＥＤと回折光学素子との組（組１１２＿１～１１２＿１２のいずれか）が、通知された発光強度で発光するよう制御する。
認証装置１３０は、制御装置１２０から送信された、認証用の撮影画像に基づいて、被写体の顔領域の生体情報を算出し、予め登録された顔領域の生体情報と照合することで、顔認証を行う。
＜監視装置の構成＞
次に、監視装置１１０の構成について説明する。図２は、監視装置の構成を説明するための図である。このうち、図２（ａ）は、監視装置１１０の外観構成を示している。図２（ａ）に示すように、監視装置１１０は、取り付け治具２５０を備え、屋外や建屋入口の高所に取り付けられる。
次に、監視装置１１０の構成について説明する。図２は、監視装置の構成を説明するための図である。このうち、図２（ａ）は、監視装置１１０の外観構成を示している。図２（ａ）に示すように、監視装置１１０は、取り付け治具２５０を備え、屋外や建屋入口の高所に取り付けられる。
図２（ｂ）は、監視装置１１０を正面から見た場合の、撮像部１１１周辺の機器配置を示している。図２（ｂ）に示すように、監視装置１１０の場合、正面から見て撮像部１１１の上側には、
・ＬＥＤ２０１＿１と回折光学素子２０２＿１との組１１２＿１、
・ＬＥＤ２０１＿２と回折光学素子２０２＿２との組１１２＿２、
・ＬＥＤ２０１＿３と回折光学素子２０２＿３との組１１２＿３、
が横方向に左から配置されている。
・ＬＥＤ２０１＿１と回折光学素子２０２＿１との組１１２＿１、
・ＬＥＤ２０１＿２と回折光学素子２０２＿２との組１１２＿２、
・ＬＥＤ２０１＿３と回折光学素子２０２＿３との組１１２＿３、
が横方向に左から配置されている。
また、紙面の都合から、図２（ｂ）においては符号を省略しているが、監視装置１１０の場合、正面から見て撮像部１１１の右側には、
・ＬＥＤ２０１＿４と回折光学素子２０２＿４との組１１２＿４、
・ＬＥＤ２０１＿５と回折光学素子２０２＿５との組１１２＿５、
・ＬＥＤ２０１＿６と回折光学素子２０２＿６との組１１２＿６、
が縦方向に上から配置されている。
・ＬＥＤ２０１＿４と回折光学素子２０２＿４との組１１２＿４、
・ＬＥＤ２０１＿５と回折光学素子２０２＿５との組１１２＿５、
・ＬＥＤ２０１＿６と回折光学素子２０２＿６との組１１２＿６、
が縦方向に上から配置されている。
同様に、監視装置１１０の場合、正面から見て撮像部１１１の下側には、
・ＬＥＤ２０１＿７と回折光学素子２０２＿７との組１１２＿７、
・ＬＥＤ２０１＿８と回折光学素子２０２＿８との組１１２＿８、
・ＬＥＤ２０１＿９と回折光学素子２０２＿９との組１１２＿９、
が横方向に右から配置されている。
・ＬＥＤ２０１＿７と回折光学素子２０２＿７との組１１２＿７、
・ＬＥＤ２０１＿８と回折光学素子２０２＿８との組１１２＿８、
・ＬＥＤ２０１＿９と回折光学素子２０２＿９との組１１２＿９、
が横方向に右から配置されている。
同様に、監視装置１１０の場合、正面から見て撮像部１１１の左側には、
・ＬＥＤ２０１＿１０と回折光学素子２０２＿１０との組１１２＿１０、
・ＬＥＤ２０１＿１１と回折光学素子２０２＿１１との組１１２＿１１、
・ＬＥＤ２０１＿１２と回折光学素子２０２＿１２との組１１２＿１２、
が縦方向に下から配置されている。
・ＬＥＤ２０１＿１０と回折光学素子２０２＿１０との組１１２＿１０、
・ＬＥＤ２０１＿１１と回折光学素子２０２＿１１との組１１２＿１１、
・ＬＥＤ２０１＿１２と回折光学素子２０２＿１２との組１１２＿１２、
が縦方向に下から配置されている。
図２（ｃ）は、ＬＥＤ２０１＿１と回折光学素子２０２＿１との組１１２＿１からＬＥＤ２０１＿３と回折光学素子２０２＿３との組１１２＿３までの各組の配置を、監視装置１１０の上方から見た様子を示している。図２（ｃ）に示すように、回折光学素子２０２＿１～２０２＿３は、回折光学素子配置基板２１０上に配される。また、ＬＥＤ２０１＿１～２０１＿３は、ＬＥＤ実装基板２１１上であって、回折光学素子２０２＿１～２０２＿３が配された位置に対応する位置に配される。
これにより、ＬＥＤ２０１＿１が発光することで出射された光は、回折光学素子２０２＿１を介して、矩形のスポット光に変換され、矩形のスポット照明として、撮像部１１１の撮影範囲に照射される。同様に、ＬＥＤ２０１＿２が発光することで出射された光は、回折光学素子２０２＿２を介して、矩形のスポット光に変換され、矩形のスポット照明として、撮像部１１１の撮影範囲に照射される。同様に、ＬＥＤ２０１＿３が発光することで出射された光は、回折光学素子２０２＿３を介して、矩形のスポット光に変換され、矩形のスポット照明として、撮像部１１１の撮影範囲に照射される。
なお、組１１２＿４から組１１２＿１２までの各組についても図２（ｃ）と同様に配置されており、それぞれのＬＥＤ及び回折光学素子が回折光学素子配置基板２２０、２３０、２４０と、ＬＥＤ実装基板２２１、２３１、２４１とに配されているものとする。
＜回折光学素子の構成例＞
次に、回折光学素子（ここでは、回折光学素子２０２＿１）の構成について説明する。図３は、回折光学素子の構成例を示す図である。図３（ａ）に示すように、回折光学素子２０２＿１は、直線状の回折格子（Ｃｅｌｌ）を同一平面内に２次元に配置することで形成される。図３（ａ）の例は、０．０２ｍｍ×０．０２ｍｍの回折格子（Ｃｅｌｌ）が縦方向に５０個、横方向に５０個（計２５０個）配置された場合を示している。
次に、回折光学素子（ここでは、回折光学素子２０２＿１）の構成について説明する。図３は、回折光学素子の構成例を示す図である。図３（ａ）に示すように、回折光学素子２０２＿１は、直線状の回折格子（Ｃｅｌｌ）を同一平面内に２次元に配置することで形成される。図３（ａ）の例は、０．０２ｍｍ×０．０２ｍｍの回折格子（Ｃｅｌｌ）が縦方向に５０個、横方向に５０個（計２５０個）配置された場合を示している。
それぞれの回折格子は、ＬＥＤ２０１＿１から出射された光が透過する際に、複数のドット光を生成する。なお、それぞれの回折格子は、ピッチ、回転角度が異なっており、生成したドット光は、撮像部１１１の撮影範囲において合成される。これにより、ＬＥＤ２０１＿１と回折光学素子２０２＿１との組１１２＿１は、撮像部１１１の撮影範囲に均一な矩形のスポット照明を照射することができる。
なお、図３（ｂ）は、ＬＥＤと回折光学素子との組それぞれが、矩形のスポット照明を照射する撮像部１１１の撮影範囲と、撮像部１１１の撮影画像との対応関係を示した図である。図３（ｂ）に示すように、撮像部１１１の撮影画像３００は、ＬＥＤと回折光学素子との組の数に応じて、複数のブロックに分割され、それぞれのブロックに対応する撮影範囲に、対応するＬＥＤと回折光学素子との組が矩形のスポット照明を照射する。
上述したように、撮像部１１１の周囲には、ＬＥＤと回折光学素子との組が１２個配置されているため、撮像部１１１の撮影画像３００は、１２個のブロックに分割される。図３（ｂ）では、それぞれのブロックに番号を付しており、引き出し線により、対応するＬＥＤと回折光学素子との組を示している。
例えば、ブロック番号＝"１"のブロックに対応する撮影範囲には、ＬＥＤと回折光学素子との組１１２＿１が矩形のスポット照明を照射する。
＜制御装置のハードウェア構成＞
次に、制御装置１２０のハードウェア構成について説明する。図４は、制御装置のハードウェア構成の一例を示す図である。
次に、制御装置１２０のハードウェア構成について説明する。図４は、制御装置のハードウェア構成の一例を示す図である。
図４に示すように、制御装置１２０は、ＣＰＵ（Central Processing Unit）４０１、ＲＯＭ（Read Only Memory）４０２、ＲＡＭ（Random Access Memory）４０３を有する。ＣＰＵ４０１、ＲＯＭ４０２、ＲＡＭ４０３は、いわゆるコンピュータを形成する。また、制御装置１２０は、Ｉ／Ｆ（Interface）装置４０４、照明用制御装置４０５、通信装置４０６を有する。なお、制御装置１２０の各部は、バス４０７を介して相互に接続されている。
ＣＰＵ４０１は、ＲＯＭ４０２にインストールされている各種プログラム（例えば、制御プログラム等）を実行する演算デバイスである。ＲＯＭ４０２は、不揮発性メモリであり、ＣＰＵ４０１によって実行される各種プログラム及びＣＰＵ４０１が各種プログラムを実行する際に用いる情報を格納する、主記憶デバイスとして機能する。
ＲＡＭ４０３は、ＤＲＡＭ（Dynamic Random Access Memory）やＳＲＡＭ（Static Random Access Memory）等の揮発性メモリである。ＲＡＭ４０３は、ＲＯＭ４０２にインストールされている各種プログラムがＣＰＵ４０１によって実行される際に展開される作業領域を提供する、主記憶デバイスとして機能する。
Ｉ／Ｆ装置４０４は、監視装置１１０の撮像部１１１と接続するための接続デバイスである。照明用制御装置４０５は、監視装置１１０のＬＥＤ実装基板２１１、２２１、２３１、２４１を制御するための制御デバイスである。通信装置４０６は、認証装置１３０と通信するための通信デバイスである。
＜制御装置の機能構成＞
次に、制御装置１２０の機能構成について説明する。図５は、制御装置の機能構成の一例を示す第１の図である。図５に示すように、画像処理部１２１は、画像取得部５０１、顔検出部５０２、顔位置検出部５０３、発光強度制御部５０４を有する。
次に、制御装置１２０の機能構成について説明する。図５は、制御装置の機能構成の一例を示す第１の図である。図５に示すように、画像処理部１２１は、画像取得部５０１、顔検出部５０２、顔位置検出部５０３、発光強度制御部５０４を有する。
画像取得部５０１は、監視装置１１０の撮像部１１１から送信された撮影画像を取得し、顔検出部５０２に通知する。また、画像取得部５０１は、監視装置１１０の撮像部１１１から送信された撮影画像を、認証用の撮影画像として、認証装置１３０に送信する。
顔検出部５０２は検出部の一例であり、画像取得部５０１から通知された撮影画像を処理し、被写体の顔領域を検出する。また、顔検出部５０２は、検出した顔領域を、顔位置検出部５０３に通知する。更に、顔検出部５０２は、検出した顔領域が含まれるブロックを判定し、発光強度出力部５０７に通知する。
顔位置検出部５０３は判定部の一例であり、顔検出部５０２より通知された被写体の顔領域の位置（予め定められた顔領域内の位置。例えば、顔領域の中心位置や、特定の部位（目、鼻）の位置等）を検出し、検出した顔領域の位置が属するブロックを判定する。また、顔位置検出部５０３は、顔領域の位置が属するブロックを発光強度制御部５０４に通知する。
発光強度制御部５０４は制御部の一例であり、顔位置検出部５０３より通知されたブロックに基づいて、該ブロックに対応する撮影範囲にスポット照明を照射するＬＥＤと回折光学素子との組の発光強度を決定する。
なお、図５のテーブル５１０に示すように、被写体の顔領域の位置が属するブロックと、発光強度との対応関係は、予め規定されているものとする。被写体までの撮影距離は、当該被写体の顔領域が撮影画像のいずれのブロックに写っているかによって概ね推定でき、推定した撮影距離に応じて発光強度を規定することができるからである。
図５のテーブル５１０の例は、撮影画像の各ブロックを４つのグループに分け、それぞれのグループに、異なる発光強度が対応付けられていることを示している。
また、図５に示すように、照明制御部１２２は、画質評価部５０５、調整部５０６、発光強度出力部５０７を有する。
画質評価部５０５は、監視装置１１０の撮像部１１１から送信された撮影画像を取得し、取得した撮影画像の品質を評価する。具体的には、画質評価部５０５では、取得した撮影画像を複数のブロックに分割し、それぞれのブロックについて、顔領域を検出できる程度の画質を有しているか否かを評価する。また、画質評価部５０５は、各ブロックについての評価結果を、調整部５０６に通知する。
調整部５０６は、画質評価部５０５から通知された、各ブロックについての評価結果に応じて、各ブロックに対応する撮影範囲にスポット照明を照射するＬＥＤと回折光学素子との組の発光強度を調整する。また、調整部５０６は、調整後の発光強度を発光強度出力部５０７に通知する。これにより、撮像部１１１では、顔領域が検出できる程度の画質の撮影画像を撮影することが可能になる。
なお、画質評価部５０５及び調整部５０６は、所定周期ごとに（例えば、周辺環境が変化するごとに）動作することで、撮像部１１１では、周辺環境が変化した場合でも、顔領域が検出できる程度の画質の撮影画像を撮影することが可能になる。
発光強度出力部５０７は、調整部５０６から、各ブロックに対応する発光強度が通知されると、通知された発光強度を、ＬＥＤ実装基板２１１、２２１、２３１、２４１に送信する。これにより、各ブロックに対応する撮影範囲にスポット照明を照射するＬＥＤと回折光学素子との組それぞれを、通知された発光強度で発光させることができる。
また、発光強度出力部５０７は、発光強度制御部５０４から、発光強度が通知されると、通知された発光強度を、ＬＥＤ実装基板２１１、２２１、２３１、２４１のいずれかに送信する。これにより、顔検出部５０２から通知されたブロックに対応する撮影範囲にスポット照明を照射するＬＥＤと回折光学素子との組を、通知された発光強度で発光させることができる。
この結果、撮像部１１１では、被写体までの撮影距離に応じた発光強度でスポット照明が照射された顔領域が写る撮影画像を撮影することが可能になる。
＜監視システムの動作例＞
次に、監視システム１００の動作例について説明する。図６は、監視システムの動作例を示す第１の図である。このうち、図６（ａ）は、被写体６１０が監視装置１１０の方に向かって近づいてきている様子を示している。
次に、監視システム１００の動作例について説明する。図６は、監視システムの動作例を示す第１の図である。このうち、図６（ａ）は、被写体６１０が監視装置１１０の方に向かって近づいてきている様子を示している。
また、図６（ｂ）は、図６（ａ）に示す被写体６１０のそれぞれの位置（位置６２１、６２２、６２３）において、監視装置１１０が撮影した撮影画像６３１、６３２、６３３を示している。なお、撮影画像６３１、６３２、６３３を撮影するにあたり、調整部５０６による発光強度の調整は完了しており、撮影画像６３１、６３２、６３３は、被写体６１０の顔領域が検出できる程度の画質を有しているものとする。
撮影画像６３１の場合、顔検出部５０２では、被写体６１０の顔領域が含まれるブロックのブロック番号が"２"であると判定する。また、顔位置検出部５０３では、検出された被写体６１０の顔領域の位置が属するブロックのブロック番号が"２"であると判定する。
これにより、発光強度制御部５０４では、発光強度を、"Ｉ４"に決定する。そして、発光強度出力部５０７では、ＬＥＤ２０１＿２と回折光学素子２０２＿２との組１１２＿２が、発光強度"Ｉ４"で発光するよう制御する。
同様に、撮影画像６３２の場合、顔検出部５０２では、被写体６１０の顔領域が含まれるブロックのブロック番号が"５"であると判定する。また、顔位置検出部５０３では、検出された被写体６１０の顔領域の位置が属するブロックのブロック番号が"５"であると判定する。
これにより、発光強度制御部５０４では、発光強度を、"Ｉ３"に決定する。そして、発光強度出力部５０７では、ＬＥＤ２０１＿１２と回折光学素子２０２＿１２との組１１２＿１２が、発光強度"Ｉ３"で発光するよう制御する。
同様に、撮影画像６３３の場合、顔検出部５０２では、被写体６１０の顔領域が含まれるブロックのブロック番号が"８、１１"であると判定する。また、顔位置検出部５０３では、検出された被写体６１０の顔領域の位置が属するブロックのブロック番号が"１１"であると判定する。
これにより、発光強度制御部５０４では、発光強度を、"Ｉ１"に決定する。そして、発光強度出力部５０７では、ＬＥＤ２０１＿６と回折光学素子２０２＿６との組１１２＿６と、ＬＥＤ２０１＿８と回折光学素子２０２＿８との組１１２＿８とが、発光強度"Ｉ１"で発光するよう制御する。
＜制御処理の流れ＞
次に、制御装置１２０による制御処理の流れについて説明する。図７は、制御装置による制御処理の流れを示す第１のフローチャートである。ステップＳ７０１において、画像取得部５０１は、監視装置１１０の撮像部１１１より撮影画像を取得する。
次に、制御装置１２０による制御処理の流れについて説明する。図７は、制御装置による制御処理の流れを示す第１のフローチャートである。ステップＳ７０１において、画像取得部５０１は、監視装置１１０の撮像部１１１より撮影画像を取得する。
ステップＳ７０２において、画質評価部５０５は、取得された撮影画像の各ブロックの画質が、被写体の顔領域を検出できる程度の画質を有しているか否か（所定レベル以上であるか否か）を判定する。
ステップＳ７０２において、撮影画像のいずれかのブロックの画質が所定レベル未満であると判定された場合には（ステップＳ７０２においてＮｏの場合には）、ステップＳ７０３に進む。
ステップＳ７０３において、調整部５０６は、画質が所定レベル未満であると判定されたブロックに対応する、ＬＥＤと回折光学素子との組の発光強度を調整し、ステップＳ７０１に戻る。
一方、ステップＳ７０２において、取得された撮影画像の各ブロックの画質が所定レベル以上であると判定された場合には（ステップＳ７０２においてＹｅｓの場合には）、ステップＳ７０４に進む。なお、ステップＳ７０２及びＳ７０３の処理は、所定周期ごとに実行されるものとする。
ステップＳ７０４において、顔検出部５０２は、取得された撮影画像を処理し、被写体の顔領域を検出する。
ステップＳ７０５において、顔位置検出部５０３は、検出された被写体の顔領域の位置が属するブロックを判定する。
ステップＳ７０６において、発光強度制御部５０４は、被写体の顔領域の位置が属するブロックに基づいて発光強度を決定する。
ステップＳ７０７において、顔検出部５０２は、検出した顔領域が含まれるブロックを判定する。これにより、発光強度制御部５０４では、決定された発光強度で発光するよう制御する、ＬＥＤと回折光学素子との組を選定する。
ステップＳ７０８において、発光強度出力部５０７は、選定したＬＥＤと回折光学素子との組が、決定された発光強度で発光するよう、ＬＥＤ実装基板に、決定された発光強度を送信する。
ステップＳ７０９において、画像取得部５０１は、監視装置１１０の撮像部１１１より撮影画像を取得し、認証用の撮影画像として認証装置１３０に送信する。
以上の説明から明らかなように、第１の実施形態に係る監視システムは、撮像部の撮影範囲に照射するＬＥＤの数に応じて、複数のブロックに分割された、撮像部の撮影画像から、被写体の顔領域を検出する。また、第１の実施形態に係る監視システムは、複数のブロックのうち、被写体の顔領域が含まれるブロックに対応するＬＥＤが、被写体の顔領域の位置が属するブロックに応じて予め定められた発光強度で発光するよう制御する。
このように、被写体の顔領域の位置が属するブロックと被写体までの撮影距離との関係を利用して発光強度を制御することで、第１の実施形態に係る監視システムによれば、被写体までの撮影距離によらず、被写体の顔を一定の明るさで写すことが可能になる。
また、第１の実施形態に係る監視システムは、顔領域が検出できる程度の画質の撮影画像が撮影されるように、所定周期ごとに発光強度を調整する。
これにより、第１の実施形態に係る監視システムによれば、周辺環境が変化した場合でも、顔領域を検出することができ、被写体の顔を一定の明るさで写すことが可能になる。
［第２の実施形態］
上記第１の実施形態では、被写体の顔領域の位置が属するブロックに基づいて発光強度を決定する場合について説明した。しかしながら、発光強度の決定方法はこれに限定されず、被写体の顔領域のサイズに応じて発光強度を決定してもよい。以下、第２の実施形態について、上記第１の実施形態との相違点を中心に説明する。
上記第１の実施形態では、被写体の顔領域の位置が属するブロックに基づいて発光強度を決定する場合について説明した。しかしながら、発光強度の決定方法はこれに限定されず、被写体の顔領域のサイズに応じて発光強度を決定してもよい。以下、第２の実施形態について、上記第１の実施形態との相違点を中心に説明する。
＜制御装置の機能構成＞
はじめに、第２の実施形態に係る制御装置１２０の機能構成について説明する。図８は、制御装置の機能構成の一例を示す第２の図である。図５との相違点は、顔サイズ算出部８０１と発光強度制御部８０２である。
はじめに、第２の実施形態に係る制御装置１２０の機能構成について説明する。図８は、制御装置の機能構成の一例を示す第２の図である。図５との相違点は、顔サイズ算出部８０１と発光強度制御部８０２である。
顔サイズ算出部８０１は算出部の一例であり、顔検出部５０２より通知された被写体の顔領域のサイズを算出する。また、顔サイズ算出部８０１は、算出した顔領域のサイズを発光強度制御部８０２に通知する。
発光強度制御部８０２は制御部の一例であり、顔サイズ算出部８０１より通知された顔領域のサイズに基づいて、発光強度を決定する。なお、図８のテーブル８１０に示すように、被写体の顔領域のサイズと、発光強度との対応関係は、予め規定されているものとする。被写体までの撮影距離は、当該被写体の顔領域のサイズによって概ね推定でき、推定した撮影距離に応じて発光強度を規定することができるからである。
図８のテーブル８１０の例は、顔領域のサイズを５つのグループに分け、それぞれのグループに、異なる発光強度が対応付けられていることを示している。ただし、テーブル８１０に代えて、顔領域のサイズと発光強度との対応関係を、所定の関数により規定してもよい。
＜監視システムの動作例＞
次に、監視システム１００の動作例について説明する。図９は、監視システムの動作例を示す第２の図である。このうち、図９（ａ）は、被写体６１０が監視装置１１０の方に向かって近づいてきている様子を示している。
次に、監視システム１００の動作例について説明する。図９は、監視システムの動作例を示す第２の図である。このうち、図９（ａ）は、被写体６１０が監視装置１１０の方に向かって近づいてきている様子を示している。
また、図９（ｂ）は、図９（ａ）に示す被写体６１０のそれぞれの位置（位置６２１、９０１、６２３）において、監視装置１１０が撮影した撮影画像６３１、９０２、６３３を示している。なお、撮影画像６３１、９０２、６３３を撮影するにあたり、調整部５０６による発光強度の調整は完了しており、撮影画像６３１、９０２、６３３は、被写体６１０の顔領域が検出できる程度の画質を有しているものとする。
撮影画像６３１の場合、顔検出部５０２では、被写体６１０の顔領域が含まれるブロックのブロック番号が"２"であると判定する。また、顔サイズ算出部８０１では、被写体６１０の顔領域のサイズが"ＳＳ"であると判定する。
これにより、発光強度制御部８０２では、発光強度を、"Ｉ５"に決定する。そして、発光強度出力部５０７では、ＬＥＤ２０１＿２と回折光学素子２０２＿２との組１１２＿２が、発光強度"Ｉ５"で発光するよう制御する。
同様に、撮影画像９０２の場合、顔検出部５０２では、被写体６１０の顔領域が含まれるブロックのブロック番号が"２"であると判定する。また、顔サイズ算出部８０１では、被写体６１０の顔領域のサイズが"Ｓ"であると判定する。
これにより、発光強度制御部８０２では、発光強度を、"Ｉ４"に決定する。そして、発光強度出力部５０７では、ＬＥＤ２０１＿２と回折光学素子２０２＿２との組１１２＿２が、発光強度"Ｉ４"で発光するよう制御する。
同様に、撮影画像６３３の場合、顔検出部５０２では、被写体６１０の顔領域が含まれるブロックのブロック番号が"８、１１"であると判定する。顔サイズ算出部８０１では、被写体６１０の顔領域のサイズが"Ｌ"であると判定する。
これにより、発光強度制御部８０２では、発光強度を、"Ｉ２"に決定する。そして、発光強度出力部５０７では、ＬＥＤ２０１＿６と回折光学素子２０２＿６との組１１２＿６と、ＬＥＤ２０１＿８と回折光学素子２０２＿８との組１１２＿８とが、発光強度"Ｉ２"で発光するよう制御する。
＜制御処理の流れ＞
次に、第２の実施形態に係る制御装置１２０による制御処理の流れについて説明する。図１０は、制御装置による制御処理の流れを示す第２のフローチャートである。図７に示す第１のフローチャートとの相違点は、ステップＳ１００１、Ｓ１００２である。
次に、第２の実施形態に係る制御装置１２０による制御処理の流れについて説明する。図１０は、制御装置による制御処理の流れを示す第２のフローチャートである。図７に示す第１のフローチャートとの相違点は、ステップＳ１００１、Ｓ１００２である。
ステップＳ１００１において、顔サイズ算出部８０１は、顔検出部５０２より通知された被写体の顔領域のサイズを算出する。
ステップＳ１００２において、発光強度制御部８０２は、顔サイズ算出部８０１により算出された顔領域のサイズに基づいて、発光強度を決定する。
以上の説明から明らかなように、第２の実施形態に係る監視システムは、撮像部の撮影範囲に照射するＬＥＤの数に応じて、複数のブロックに分割された、撮像部の撮影画像から、被写体の顔領域を検出する。また、第２の実施形態に係る監視システムは、複数のブロックのうち、被写体の顔領域が含まれるブロックに対応するＬＥＤが、被写体の顔領域のサイズに応じて予め定められた発光強度で発光するよう制御する。
このように、被写体の顔領域のサイズと被写体までの撮影距離との関係を利用して発光強度を制御することで、第２の実施形態に係る監視システムによれば、被写体までの撮影距離によらず、被写体の顔を一定の明るさで写すことが可能になる。
［第３の実施形態］
上記第１の実施形態では、被写体の顔領域の位置が属するブロックに基づいて発光強度を決定する場合について説明した。しかしながら、発光強度の決定方法はこれに限定されず、被写体の顔領域が含まれるブロックの画質に応じて、発光強度を決定してもよい。以下、第３の実施形態について、上記第１の実施形態との相違点を中心に説明する。
上記第１の実施形態では、被写体の顔領域の位置が属するブロックに基づいて発光強度を決定する場合について説明した。しかしながら、発光強度の決定方法はこれに限定されず、被写体の顔領域が含まれるブロックの画質に応じて、発光強度を決定してもよい。以下、第３の実施形態について、上記第１の実施形態との相違点を中心に説明する。
＜制御装置の機能構成＞
はじめに、第３の実施形態に係る制御装置１２０の機能構成について説明する。図１１は、制御装置の機能構成の一例を示す第３の図である。図５との相違点は、ブロック画質評価部１１０１と発光強度制御部１１０２である。
はじめに、第３の実施形態に係る制御装置１２０の機能構成について説明する。図１１は、制御装置の機能構成の一例を示す第３の図である。図５との相違点は、ブロック画質評価部１１０１と発光強度制御部１１０２である。
ブロック画質評価部１１０１は評価部の一例であり、顔検出部５０２より通知された被写体の顔領域が含まれるブロックについて、画質を評価する。具体的には、ブロック画質評価部１１０１は、被写体の顔領域が含まれるブロックについて、認証装置１３０が顔認証処理を実行できる程度の画質を有しているか否かを評価する。また、ブロック画質評価部１１０１は、評価結果を、発光強度制御部１１０２に通知する。
発光強度制御部１１０２は制御部の一例であり、ブロック画質評価部１１０１より通知された評価結果に基づいて、発光強度を決定する。具体的には、発光強度制御部１１０２では、認証装置１３０が顔認証処理を実行できる程度の画質が得られるように、対応する撮影範囲にスポット照明を照射するＬＥＤと回折光学素子との組の発光強度を決定する。
＜制御処理の流れ＞
次に、第３の実施形態に係る制御装置１２０による制御処理の流れについて説明する。図１２は、制御装置による制御処理の流れを示す第３のフローチャートである。図７に示す第１のフローチャートとの相違点は、ステップＳ１２０１～Ｓ１２０５である。
次に、第３の実施形態に係る制御装置１２０による制御処理の流れについて説明する。図１２は、制御装置による制御処理の流れを示す第３のフローチャートである。図７に示す第１のフローチャートとの相違点は、ステップＳ１２０１～Ｓ１２０５である。
ステップＳ１２０１において、ブロック画質評価部１１０１は、顔検出部５０２より通知された被写体の顔領域が含まれるブロックの画質を評価する。
ステップＳ１２０２において、ブロック画質評価部１１０１は、顔領域が含まれる各ブロックが、顔認証処理を実行できる程度の画質を有しているか否か（顔認証可能なレベルか否か）を判定する。ステップＳ１２０２において、顔認証可能なレベルにないと判定した場合には（ステップＳ１２０２においてＮｏの場合には）、ステップＳ１２０３に進む。
ステップＳ１２０３において、発光強度制御部１１０２では、評価結果に基づいて発光強度を決定する。
ステップＳ１２０４において、発光強度出力部５０７は、顔領域が含まれる各ブロックに対応する撮影範囲にスポット照明を照射するＬＥＤと回折光学素子との組が、決定された発光強度で発光するよう、ＬＥＤ実装基板に、決定された発光強度を送信する。
ステップＳ１２０５において、画像取得部５０１は、監視装置１１０より撮影画像を取得し、ステップＳ７０４に戻る。
一方、ステップＳ１２０２において、顔認証可能なレベルにあると判定した場合には（ステップＳ１２０２においてＹｅｓの場合には）、ステップＳ７０９に進む。
ステップＳ７０９において、画像取得部５０１は、監視装置１１０の撮像部１１１より撮影画像を取得し、認証用の撮影画像として認証装置１３０に送信する。
以上の説明から明らかなように、第３の実施形態に係る監視システムは、撮像部の撮影範囲に照射するＬＥＤの数に応じて、複数のブロックに分割された、撮像部の撮影画像から、被写体の顔領域を検出する。また、第３の実施形態に係る監視システムは、複数のブロックのうち、被写体の顔領域が含まれるブロックに対応するＬＥＤが、被写体の顔領域が含まれるブロックについての画質の評価結果に応じた発光強度で発光するよう制御する。
このように、被写体の顔領域が写っているブロックの画質の評価結果を利用して発光強度を制御することで、第３の実施形態に係る監視システムによれば、被写体までの撮影距離や周辺環境によらず、被写体の顔を一定の明るさで写すことが可能になる。
［第４の実施形態］
上記第１の実施形態では、撮像部１１１から送信される撮影画像に写る被写体が一人である場合について説明した。しかしながら、撮像部１１１から送信される撮影画像に写る被写体の数は、一人に限定されない。第４の実施形態では、撮像部１１１から送信される撮影画像に写る被写体の数が、複数の場合について説明する。なお、説明は第１の実施形態との相違点を中心に行う。
上記第１の実施形態では、撮像部１１１から送信される撮影画像に写る被写体が一人である場合について説明した。しかしながら、撮像部１１１から送信される撮影画像に写る被写体の数は、一人に限定されない。第４の実施形態では、撮像部１１１から送信される撮影画像に写る被写体の数が、複数の場合について説明する。なお、説明は第１の実施形態との相違点を中心に行う。
＜制御装置の機能構成＞
はじめに、第４の実施形態に係る制御装置１２０の機能構成について説明する。図１３は、制御装置の機能構成の一例を示す第４の図である。図５との相違点は、顔領域数検出部１３０１を有する点である。
はじめに、第４の実施形態に係る制御装置１２０の機能構成について説明する。図１３は、制御装置の機能構成の一例を示す第４の図である。図５との相違点は、顔領域数検出部１３０１を有する点である。
顔領域数検出部１３０１は、顔検出部５０２より通知された被写体の顔領域の数をカウントし、顔領域とともに顔位置検出部５０３に通知する。これにより、顔位置検出部５０３では、通知された数の被写体の顔領域について、顔領域の位置を検出し、検出した顔領域の位置が属するそれぞれのブロックを判定する。また、発光強度制御部５０４では、テーブル５１０を参照し、それぞれのブロックに対応する撮影範囲にスポット照明を照射するＬＥＤと回折光学素子との組の発光強度を決定する。
＜監視システムの動作例＞
次に、第４の実施形態に係る制御装置１２０を有する監視システム１００の動作例について説明する。図１４は、監視システムの動作例を示す第３の図である。このうち、図１４（ａ）は、被写体６１０が監視装置１１０の方に向かって近づいてきている様子を示している。
次に、第４の実施形態に係る制御装置１２０を有する監視システム１００の動作例について説明する。図１４は、監視システムの動作例を示す第３の図である。このうち、図１４（ａ）は、被写体６１０が監視装置１１０の方に向かって近づいてきている様子を示している。
なお、図１４（ａ）では、紙面の都合から被写体６１０以外の被写体を省略しているが、被写体６１０が位置６２１を歩行している時点で、被写体６１０よりも監視装置１１０に近い側を、他の被写体１４１０が歩行しているものとする。また、被写体６１０が位置６２２を歩行している時点で、被写体６１０よりも監視装置１１０に更に近い側を、他の被写体１４１０が歩行しているものとする。更に、被写体６１０が位置６２３を歩行している時点で、被写体６１０よりも監視装置１１０から離れた側を、他の被写体１４２０が歩行しているものとする。
図１４（ｂ）は、図１４（ａ）に示す被写体６１０のそれぞれの位置（位置６２１、６２２、６２３）において、監視装置１１０が撮影した撮影画像１４０１、１４０２、１４０３を示している。なお、撮影画像１４０１、１４０２、１４０３を撮影するにあたり、調整部５０６による発光強度の調整は完了しており、撮影画像１４０１、１４０２、１４０３は、被写体６１０、１４１０、１４２０の顔領域が検出できる程度の画質を有しているものとする。
撮影画像１４０１の場合、顔検出部５０２では、被写体６１０、１４１０の顔領域が含まれるブロックのブロック番号が"２"、"６"であると判定する。また、顔領域数検出部１３０１では、顔領域の数が"２"であると判定する。更に、顔位置検出部５０３では、検出された被写体６１０の顔領域の位置が属するブロックのブロック番号が"２"、検出された被写体１４１０の顔領域の位置が属するブロックのブロック番号が"６"であると判定する。
これにより、発光強度制御部５０４では、発光強度を、"Ｉ４"、"Ｉ３"に決定する。そして、発光強度出力部５０７では、ＬＥＤ２０１＿２と回折光学素子２０２＿２との組１１２＿２が、発光強度"Ｉ４"で発光し、ＬＥＤ２０１＿４と回折光学素子２０２＿４との組１１２＿４が、発光強度"Ｉ３"で発光するよう制御する。
同様に、撮影画像１４０２の場合、顔検出部５０２では、被写体６１０、１４１０の顔領域が含まれるブロックのブロック番号が"５"、"９、１２"であると判定する。また、顔領域数検出部１３０１では、顔領域の数が"２"であると判定する。また、顔位置検出部５０３では、検出された被写体６１０の顔領域の位置が属するブロックのブロック番号が"５"、検出された被写体１４１０の顔領域の位置が属するブロックのブロック番号が"９"であると判定する。
これにより、発光強度制御部５０４では、発光強度を、"Ｉ３"、"Ｉ２"に決定する。そして、発光強度出力部５０７では、ＬＥＤ２０１＿１２と回折光学素子２０２＿１２との組１１２＿１２が、発光強度"Ｉ３"で発光するよう制御する。また、発光強度出力部５０７では、ＬＥＤ２０１＿５と回折光学素子２０２＿５との組１１２＿５、及び、ＬＥＤ２０１＿７と回折光学素子２０２＿７との組１１２＿７が、発光強度"Ｉ２"で発光するよう制御する。
同様に、撮影画像１４０３の場合、顔検出部５０２では、被写体６１０、１４２０の顔領域が含まれるブロックのブロック番号が"８、１１"、"１"であると判定する。また、顔領域数検出部１３０１では、顔領域の数が"２"であると判定する。また、顔位置検出部５０３では、検出された被写体６１０の顔領域の位置が属するブロックのブロック番号が"１１"、検出された被写体１４２０の顔領域の位置が属するブロックのブロック番号が"１"であると判定する。
これにより、発光強度制御部５０４では、発光強度を、"Ｉ１"、"Ｉ４"に決定する。そして、発光強度出力部５０７では、ＬＥＤ２０１＿６と回折光学素子２０２＿６との組１１２＿６、及び、ＬＥＤ２０１＿８と回折光学素子２０２＿８との組１１２＿８が、発光強度"Ｉ１"で発光するよう制御する。また、発光強度出力部５０７では、ＬＥＤ２０１＿１と回折光学素子２０２＿１との組１１２＿１が、発光強度"Ｉ４"で発光するよう制御する。
＜制御処理の流れ＞
次に、第４の実施形態に係る制御装置１２０による制御処理の流れについて説明する。図１５は、制御装置による制御処理の流れを示す第４のフローチャートである。図７に示すフローチャートとの相違点は、ステップＳ１５０１である。
次に、第４の実施形態に係る制御装置１２０による制御処理の流れについて説明する。図１５は、制御装置による制御処理の流れを示す第４のフローチャートである。図７に示すフローチャートとの相違点は、ステップＳ１５０１である。
ステップＳ１５０１において、顔領域数検出部１３０１は、ステップＳ７０４において検出された、被写体の顔領域の数をカウントする。これにより、ステップＳ７０５では、顔位置検出部５０３が、通知された数の被写体の顔領域について、顔領域の位置を検出し、検出した顔領域の位置が属するそれぞれのブロックを判定する。また、ステップＳ７０６では、発光強度制御部５０４が、それぞれのブロックに対応する発光強度を決定する。更に、ステップＳ７０７では、顔検出部５０２が、検出した顔領域それぞれが含まれるブロックを判定し、発光強度制御部５０４が、決定されたそれぞれの発光強度で発光するよう制御する、ＬＥＤと回折光学素子との組を選定する。
以上の説明から明らかなように、第４の実施形態に係る監視システムでは、撮像部１１１から送信される撮影画像に写る被写体の顔領域の数が複数であっても、それぞれの被写体の顔領域について、上記第１の実施形態と同様の処理を行う。
これにより、第４の実施形態に係る監視システムによれば、上記第１の実施形態と同様の効果を得ることができる。
［その他の実施形態］
上記第１及び第２の実施形態では、発光強度制御部５０４、８０２がテーブル５１０、８１０をそれぞれ１つずつ有するものとして説明した。しかしながら、発光強度制御部５０４、８０２は、例えば、天候や時間帯等の周辺環境の変化に対応するために、テーブル５１０、８１０を複数有していてもよい。あるいは、発光強度制御部５０４、８０２は、テーブル５１０、８１０に代えて、例えば、顔領域の位置が属するブロック及び周辺環境と、ＬＥＤと回折光学素子との組の発光強度との対応関係を予め機械学習しておき、そのときの学習結果を利用してもよい。
上記第１及び第２の実施形態では、発光強度制御部５０４、８０２がテーブル５１０、８１０をそれぞれ１つずつ有するものとして説明した。しかしながら、発光強度制御部５０４、８０２は、例えば、天候や時間帯等の周辺環境の変化に対応するために、テーブル５１０、８１０を複数有していてもよい。あるいは、発光強度制御部５０４、８０２は、テーブル５１０、８１０に代えて、例えば、顔領域の位置が属するブロック及び周辺環境と、ＬＥＤと回折光学素子との組の発光強度との対応関係を予め機械学習しておき、そのときの学習結果を利用してもよい。
なお、制御装置１２０では、例えば、画質評価部５０５が撮影画像の品質を評価することで、周辺環境を特定するものとする。また、発光強度制御部５０４では、複数のテーブルの中から、画質評価部５０５が特定した周辺環境に対応するテーブルを参照することで、発光強度を決定するものとする。あるいは、発光強度制御部５０４では、被写体の顔領域の位置が属するブロックと、特定した周辺環境とを、学習結果に入力することで、発光強度を決定してもよい。
また、上記第３の実施形態では、顔領域が含まれるブロックの画質と、ＬＥＤと回折光学素子との組の発光強度との対応関係について言及しなかったが、両者の対応関係は、例えば、テーブルによって規定されていてもよい。あるいは、機械学習に基づいて規定されていてもよい。
また、上記各実施形態では、撮像部１１１と、ＬＥＤと回折光学素子との組１１２＿１～１１２＿１２とが一体の監視装置１１０について説明した。しかしながら、撮像部１１１と、ＬＥＤと回折光学素子との組１１２＿１～１１２＿１２とは別体の装置であってもよい。
また、上記各実施形態では、監視装置１１０と制御装置１２０とを、別体としたが、監視装置１１０と制御装置１２０とは、一体の装置であってもよい。あるいは、制御装置１２０の機能の一部は、監視装置１１０において実現されてもよい。
なお、開示の技術では、以下に記載する付記のような形態が考えられる。
（付記１）
撮像部の撮影範囲に照射する発光素子の数に応じて、複数のブロックに分割された、該撮像部の撮影画像から、被写体の顔領域を検出する検出部と、
前記複数のブロックのうち、前記顔領域が含まれるブロックに対応する発光素子の発光強度を、前記顔領域の位置または前記顔領域のサイズに応じて制御する制御部と
を有する監視システム。
（付記２）
前記顔領域の位置が属するブロックを判定する判定部を更に有し、
前記制御部は、前記顔領域の位置が属するブロックごとに予め発光強度が対応付けられたテーブルを参照することで、前記顔領域が含まれるブロックに対応する発光素子の発光強度を制御する、付記１に記載の監視システム。
（付記３）
前記顔領域のサイズを算出する算出部を更に有し、
前記制御部は、前記顔領域のサイズごとに予め発光強度が対応付けられたテーブルを参照することで、前記顔領域が含まれるブロックに対応する発光素子の発光強度を制御する、付記１に記載の監視システム。
（付記４）
前記顔領域の数をカウントする顔領域数検出部を更に有し、
前記制御部は、カウントした数の前記顔領域が含まれるそれぞれのブロックに対応する発光素子の発光強度を、カウントした数の前記顔領域それぞれの位置またはカウントした数の前記顔領域それぞれのサイズに応じて制御する、付記１に記載の監視システム。
（付記５）
前記撮像部の撮影画像の画質を所定周期ごとに評価し、評価結果に基づいて、前記検出部が被写体の顔領域を検出できるように、前記発光素子の発光強度を調整する、付記１に記載の監視システム。
（付記６）
発光素子と、該発光素子から出射された光を矩形のスポット光に変換する回折光学素子との組を複数有し、該複数の組それぞれのスポット光を、各ブロックに対応する撮影範囲に照射する、付記１乃至付記５のいずれかの付記に記載の監視システム。
（付記７）
前記撮像部と、前記複数の組とが一体化されている、付記６に記載の監視システム。
（付記８）
撮像部の撮影範囲に照射する発光素子の数に応じて、複数のブロックに分割された、該撮像部の撮影画像から、被写体の顔領域を検出する検出部と、
前記複数のブロックのうち、前記顔領域が含まれるブロックに対応する発光素子の発光強度を、前記顔領域が含まれるブロックの画質に応じて制御する制御部と
を有する監視システム。
（付記９）
撮像部の撮影範囲に照射する発光素子の数に応じて、複数のブロックに分割された、該撮像部の撮影画像から、被写体の顔領域を検出し、
前記複数のブロックのうち、前記顔領域が含まれるブロックに対応する発光素子の発光強度を、前記顔領域の位置または前記顔領域のサイズに応じて制御する、
処理をコンピュータが実行する監視方法。
（付記１）
撮像部の撮影範囲に照射する発光素子の数に応じて、複数のブロックに分割された、該撮像部の撮影画像から、被写体の顔領域を検出する検出部と、
前記複数のブロックのうち、前記顔領域が含まれるブロックに対応する発光素子の発光強度を、前記顔領域の位置または前記顔領域のサイズに応じて制御する制御部と
を有する監視システム。
（付記２）
前記顔領域の位置が属するブロックを判定する判定部を更に有し、
前記制御部は、前記顔領域の位置が属するブロックごとに予め発光強度が対応付けられたテーブルを参照することで、前記顔領域が含まれるブロックに対応する発光素子の発光強度を制御する、付記１に記載の監視システム。
（付記３）
前記顔領域のサイズを算出する算出部を更に有し、
前記制御部は、前記顔領域のサイズごとに予め発光強度が対応付けられたテーブルを参照することで、前記顔領域が含まれるブロックに対応する発光素子の発光強度を制御する、付記１に記載の監視システム。
（付記４）
前記顔領域の数をカウントする顔領域数検出部を更に有し、
前記制御部は、カウントした数の前記顔領域が含まれるそれぞれのブロックに対応する発光素子の発光強度を、カウントした数の前記顔領域それぞれの位置またはカウントした数の前記顔領域それぞれのサイズに応じて制御する、付記１に記載の監視システム。
（付記５）
前記撮像部の撮影画像の画質を所定周期ごとに評価し、評価結果に基づいて、前記検出部が被写体の顔領域を検出できるように、前記発光素子の発光強度を調整する、付記１に記載の監視システム。
（付記６）
発光素子と、該発光素子から出射された光を矩形のスポット光に変換する回折光学素子との組を複数有し、該複数の組それぞれのスポット光を、各ブロックに対応する撮影範囲に照射する、付記１乃至付記５のいずれかの付記に記載の監視システム。
（付記７）
前記撮像部と、前記複数の組とが一体化されている、付記６に記載の監視システム。
（付記８）
撮像部の撮影範囲に照射する発光素子の数に応じて、複数のブロックに分割された、該撮像部の撮影画像から、被写体の顔領域を検出する検出部と、
前記複数のブロックのうち、前記顔領域が含まれるブロックに対応する発光素子の発光強度を、前記顔領域が含まれるブロックの画質に応じて制御する制御部と
を有する監視システム。
（付記９）
撮像部の撮影範囲に照射する発光素子の数に応じて、複数のブロックに分割された、該撮像部の撮影画像から、被写体の顔領域を検出し、
前記複数のブロックのうち、前記顔領域が含まれるブロックに対応する発光素子の発光強度を、前記顔領域の位置または前記顔領域のサイズに応じて制御する、
処理をコンピュータが実行する監視方法。
なお、上記実施形態に挙げた構成等に、その他の要素との組み合わせ等、ここで示した構成に本発明が限定されるものではない。これらの点に関しては、本発明の趣旨を逸脱しない範囲で変更することが可能であり、その応用形態に応じて適切に定めることができる。
１００ ：監視システム
１１０ ：監視装置
１１１ ：撮像部
１１２＿１～１１２＿１２ ：ＬＥＤと回折光学素子との組
１２０ ：制御装置
１２１ ：画像処理部
１２２ ：照明制御部
２０１＿１～２０１＿１２ ：ＬＥＤ
２０２＿１～２０２＿１２ ：回折光学素子
２１０、２２０、２３０、２４０ ：回折光学素子配置基板
２１１、２２１、２３１、２４１ ：ＬＥＤ実装基板
５０１ ：画像取得部
５０２ ：顔検出部
５０３ ：顔位置検出部
５０４ ：発光強度制御部
５０５ ：画質評価部
５０６ ：調整部
５０７ ：発光強度出力部
５１０ ：テーブル
６１０ ：被写体
６３１～６３３ ：撮影画像
８０１ ：顔サイズ算出部
８０２ ：発光強度制御部
８１０ ：テーブル
９０２ ：撮影画像
１１０１ ：ブロック画質評価部
１１０２ ：発光強度制御部
１３０１ ：顔領域数検出部
１４０１～１４０３ ：撮影画像
１４１０、１４２０ ：被写体
１１０ ：監視装置
１１１ ：撮像部
１１２＿１～１１２＿１２ ：ＬＥＤと回折光学素子との組
１２０ ：制御装置
１２１ ：画像処理部
１２２ ：照明制御部
２０１＿１～２０１＿１２ ：ＬＥＤ
２０２＿１～２０２＿１２ ：回折光学素子
２１０、２２０、２３０、２４０ ：回折光学素子配置基板
２１１、２２１、２３１、２４１ ：ＬＥＤ実装基板
５０１ ：画像取得部
５０２ ：顔検出部
５０３ ：顔位置検出部
５０４ ：発光強度制御部
５０５ ：画質評価部
５０６ ：調整部
５０７ ：発光強度出力部
５１０ ：テーブル
６１０ ：被写体
６３１～６３３ ：撮影画像
８０１ ：顔サイズ算出部
８０２ ：発光強度制御部
８１０ ：テーブル
９０２ ：撮影画像
１１０１ ：ブロック画質評価部
１１０２ ：発光強度制御部
１３０１ ：顔領域数検出部
１４０１～１４０３ ：撮影画像
１４１０、１４２０ ：被写体
Claims (6)
- 撮像部の撮影範囲に照射する発光素子の数に応じて、複数のブロックに分割された、該撮像部の撮影画像から、被写体の顔領域を検出する検出部と、
前記複数のブロックのうち、前記顔領域が含まれるブロックに対応する発光素子の発光強度を、前記顔領域の位置または前記顔領域のサイズに応じて制御する制御部と
を有する監視システム。 - 前記顔領域の位置が属するブロックを判定する判定部を更に有し、
前記制御部は、前記顔領域の位置が属するブロックごとに予め発光強度が対応付けられたテーブルを参照することで、前記顔領域が含まれるブロックに対応する発光素子の発光強度を制御する、請求項１に記載の監視システム。 - 前記顔領域のサイズを算出する算出部を更に有し、
前記制御部は、前記顔領域のサイズごとに予め発光強度が対応付けられたテーブルを参照することで、前記顔領域が含まれるブロックに対応する発光素子の発光強度を制御する、請求項１に記載の監視システム。 - 前記撮像部の撮影画像の画質を所定周期ごとに評価し、評価結果に基づいて、前記検出部が被写体の顔領域を検出できるように、前記発光素子の発光強度を調整する、請求項１に記載の監視システム。
- 発光素子と、該発光素子から出射された光を矩形のスポット光に変換する回折光学素子との組を複数有し、該複数の組それぞれのスポット光を、各ブロックに対応する撮影範囲に照射する、請求項１乃至４のいずれか１項に記載の監視システム。
- 撮像部の撮影範囲に照射する発光素子の数に応じて、複数のブロックに分割された、該撮像部の撮影画像から、被写体の顔領域を検出し、
前記複数のブロックのうち、前記顔領域が含まれるブロックに対応する発光素子の発光強度を、前記顔領域の位置または前記顔領域のサイズに応じて制御する、
処理をコンピュータが実行する監視方法。
Priority Applications (3)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2019219049A JP7298459B2 (ja) | 2019-12-03 | 2019-12-03 | 監視システム及び監視方法 |
| EP20210015.2A EP3832533A1 (en) | 2019-12-03 | 2020-11-26 | Face illumination control system and method |
| US17/106,398 US11645868B2 (en) | 2019-12-03 | 2020-11-30 | Monitoring system and monitoring method |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2019219049A JP7298459B2 (ja) | 2019-12-03 | 2019-12-03 | 監視システム及び監視方法 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2021090133A JP2021090133A (ja) | 2021-06-10 |
| JP7298459B2 true JP7298459B2 (ja) | 2023-06-27 |
Family
ID=73598736
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2019219049A Active JP7298459B2 (ja) | 2019-12-03 | 2019-12-03 | 監視システム及び監視方法 |
Country Status (3)
| Country | Link |
|---|---|
| US (1) | US11645868B2 (ja) |
| EP (1) | EP3832533A1 (ja) |
| JP (1) | JP7298459B2 (ja) |
Families Citing this family (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| EP3844673A1 (en) * | 2018-08-27 | 2021-07-07 | Signify Holding B.V. | Systems and methods for tuning light sources for use with object detection algorithms |
Citations (7)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2009182445A (ja) | 2008-01-29 | 2009-08-13 | Panasonic Electric Works Co Ltd | 撮像装置 |
| JP2010178112A (ja) | 2009-01-30 | 2010-08-12 | Panasonic Corp | 撮像装置およびテレビドアホン装置 |
| JP2014137482A (ja) | 2013-01-17 | 2014-07-28 | Olympus Corp | 撮影装置および撮影用照明装置 |
| JP2015170320A (ja) | 2014-03-10 | 2015-09-28 | 富士通株式会社 | 照明装置及び生体認証装置 |
| US20160373728A1 (en) | 2015-06-17 | 2016-12-22 | Lg Electronics Inc. | Mobile terminal and method for controlling the same |
| JP2018191293A (ja) | 2016-03-01 | 2018-11-29 | コーニンクレッカ フィリップス エヌ ヴェＫｏｎｉｎｋｌｉｊｋｅ Ｐｈｉｌｉｐｓ Ｎ．Ｖ． | 適応光源 |
| JP2019057797A (ja) | 2017-09-20 | 2019-04-11 | パナソニックＩｐマネジメント株式会社 | 暗視撮像装置 |
Family Cites Families (8)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP4466770B2 (ja) * | 2008-06-26 | 2010-05-26 | カシオ計算機株式会社 | 撮像装置、撮像方法および撮像プログラム |
| JP2012134309A (ja) | 2010-12-21 | 2012-07-12 | Panasonic Corp | 紫外線照射装置 |
| JP2015034850A (ja) * | 2013-08-07 | 2015-02-19 | オリンパス株式会社 | 撮影装置および撮影方法 |
| US10264998B2 (en) | 2014-11-28 | 2019-04-23 | Hitachi, Ltd. | Blood vessel imaging apparatus and personal authentication system |
| WO2018038340A2 (en) | 2016-08-24 | 2018-03-01 | Samsung Electronics Co., Ltd. | Electronic device including light-emitting elements and method of operating electronic device |
| CN108197546B (zh) * | 2017-12-26 | 2020-12-11 | 深圳市友信长丰科技有限公司 | 人脸识别中光照处理方法、装置、计算机设备及存储介质 |
| KR102660091B1 (ko) * | 2018-07-09 | 2024-04-24 | 엘지이노텍 주식회사 | 광 출력 방법 및 장치 |
| CN110443160B (zh) * | 2019-07-18 | 2022-03-29 | 北京中科虹霸科技有限公司 | 虹膜采集方法和装置 |
-
2019
- 2019-12-03 JP JP2019219049A patent/JP7298459B2/ja active Active
-
2020
- 2020-11-26 EP EP20210015.2A patent/EP3832533A1/en not_active Withdrawn
- 2020-11-30 US US17/106,398 patent/US11645868B2/en active Active
Patent Citations (7)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2009182445A (ja) | 2008-01-29 | 2009-08-13 | Panasonic Electric Works Co Ltd | 撮像装置 |
| JP2010178112A (ja) | 2009-01-30 | 2010-08-12 | Panasonic Corp | 撮像装置およびテレビドアホン装置 |
| JP2014137482A (ja) | 2013-01-17 | 2014-07-28 | Olympus Corp | 撮影装置および撮影用照明装置 |
| JP2015170320A (ja) | 2014-03-10 | 2015-09-28 | 富士通株式会社 | 照明装置及び生体認証装置 |
| US20160373728A1 (en) | 2015-06-17 | 2016-12-22 | Lg Electronics Inc. | Mobile terminal and method for controlling the same |
| JP2018191293A (ja) | 2016-03-01 | 2018-11-29 | コーニンクレッカ フィリップス エヌ ヴェＫｏｎｉｎｋｌｉｊｋｅ Ｐｈｉｌｉｐｓ Ｎ．Ｖ． | 適応光源 |
| JP2019057797A (ja) | 2017-09-20 | 2019-04-11 | パナソニックＩｐマネジメント株式会社 | 暗視撮像装置 |
Also Published As
| Publication number | Publication date |
|---|---|
| US20210166000A1 (en) | 2021-06-03 |
| US11645868B2 (en) | 2023-05-09 |
| EP3832533A1 (en) | 2021-06-09 |
| JP2021090133A (ja) | 2021-06-10 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN103250418B (zh) | 图像处理设备、成像设备、图像处理方法、及白平衡调整方法 | |
| JP6566737B2 (ja) | 情報処理装置、情報処理方法、プログラム | |
| JP5438414B2 (ja) | 明るさ検知システムおよびそれを用いた照明システム | |
| US20180324929A1 (en) | Systems and methods for glare-free adaptive lighting | |
| JP7298459B2 (ja) | 監視システム及び監視方法 | |
| JP2014137482A (ja) | 撮影装置および撮影用照明装置 | |
| JP6064354B2 (ja) | 調光システム | |
| JP5261952B2 (ja) | 等価光幕輝度測定装置、トンネル照明システム及び情報表示システム | |
| CN110521286B (zh) | 图像分析技术 | |
| JP6601264B2 (ja) | 照明条件設定装置、照明条件設定方法及び照明条件設定用コンピュータプログラム | |
| CN109076155A (zh) | 用于对人的脸部进行照明的方法和光电子照明装置、相机和移动终端 | |
| CN111398975A (zh) | 主动传感器、物体识别***、车辆、车辆用灯具 | |
| US20160292508A1 (en) | Extraction method and extraction device for crime scene footprint through photographing | |
| JP2008145905A (ja) | 撮像装置および撮像装置用フラッシュ装置 | |
| JP2019109071A (ja) | 画像処理システム、画像処理プログラム、および画像処理方法 | |
| JP2010134363A (ja) | 照明制御装置および方法 | |
| JP2010026858A (ja) | 認証用画像撮像装置 | |
| JP2020003432A (ja) | 撮像装置、画像処理方法、画像処理プログラムおよび記録媒体 | |
| JP6939501B2 (ja) | 画像処理システム、画像処理プログラム、および画像処理方法 | |
| JP2010169431A (ja) | 通過検出装置 | |
| JP2021004762A (ja) | 計測装置、撮像装置、計測システム、制御方法、プログラム及び記録媒体 | |
| EP4087372A1 (en) | A method for detecting light beams, corresponding lighting system and computer program product | |
| JP2019203959A5 (ja) | ||
| KR102525680B1 (ko) | 감시용 카메라의 촬영영상에 대한 역광 보정장치 및 그 보정방법 | |
| CN104101482B (zh) | 发光模块检测装置以及发光模块检测方法 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20220809 |
|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20230501 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20230516 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20230529 |
|
| R150 | Certificate of patent or registration of utility model |
Ref document number: 7298459 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |