JP2003233816A - Access control system - Google Patents
Access control systemInfo
- Publication number
- JP2003233816A JP2003233816A JP2002035379A JP2002035379A JP2003233816A JP 2003233816 A JP2003233816 A JP 2003233816A JP 2002035379 A JP2002035379 A JP 2002035379A JP 2002035379 A JP2002035379 A JP 2002035379A JP 2003233816 A JP2003233816 A JP 2003233816A
- Authority
- JP
- Japan
- Prior art keywords
- face
- user
- access
- facial expression
- authentication
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Landscapes
- Storage Device Security (AREA)
- Collating Specific Patterns (AREA)
- Image Processing (AREA)
- Image Analysis (AREA)
Abstract
Description
【０００１】[0001]
【発明の属する技術分野】本発明は、顔画像の認識に基
づいて本人認証を行い利用者のアクセスを許可するか否
かを制御するアクセスコントロールシステムに関し、特
に、高い精度の本人認証を実現してセキュリティ性の向
上を図るための技術に関する。BACKGROUND OF THE INVENTION 1. Field of the Invention The present invention relates to an access control system for performing personal authentication based on recognition of a face image and controlling whether or not to permit access of a user, and in particular, realizes highly accurate personal authentication. Technology for improving security.
【０００２】[0002]
【従来の技術】一般に、アクセスコントロールは、シス
テム内の資源を利用者が使用しようとするのに対して、
使用権限があるかをチェックし、利用者の有する権限内
での使用がなされるようにする制御である。従来のアク
セスコントロールシステムは、例えば、利用者の所有
物、秘密情報またはバイオメトリックス等を単独若しく
は組み合わせることによって実現されている。具体的に
は、所有物によるアクセスコントロールとしては、物理
的な鍵、カードなどを用いた方法がある。また、秘密情
報によるアクセスコントロールとしては、暗証番号など
による方法がある。さらに、バイオメトリックスによる
アクセスコントロールとしては、指紋、虹彩、顔などを
利用した方法がある。2. Description of the Related Art In general, in access control, users try to use the resources in the system.
It is a control that checks whether or not the user has the right to use, so that the user can use the user within the right that the user has. The conventional access control system is realized by, for example, a user's property, confidential information, biometrics, or the like alone or in combination. Specifically, there is a method using a physical key, a card, or the like as access control by the property. In addition, there is a method such as a personal identification number as an access control using secret information. Further, as access control by biometrics, there is a method using a fingerprint, an iris, a face, and the like.
【０００３】従来のアクセスコントロールシステムにお
いて、セキュリティ性の向上を図る場合には、上述した
ような各種方法を複数組み合わせる必要があるが、それ
に伴って利便性を損なってしまう場合があった。そこ
で、利便性をできるだけ損なわずにセキュリティ性を高
めるため、例えば、特開２０００−６７１８８号公報等
で開示された技術では、ＩＣカード等に記憶された情報
とカメラ等により撮像された顔画像とを組み合わせて利
用者の認証を行う方式が提案されている。In the conventional access control system, in order to improve the security, it is necessary to combine a plurality of various methods as described above, but the convenience may be impaired accordingly. Therefore, in order to improve security without impairing convenience as much as possible, for example, in the technology disclosed in Japanese Patent Laid-Open No. 2000-67188, information stored in an IC card or the like and a face image captured by a camera or the like are used. There has been proposed a method of authenticating a user by combining them.
【０００４】[0004]
【発明が解決しようとする課題】しかし、上記のような
従来のアクセスコントロールシステムでは、ＩＣカード
等の記憶情報と顔画像の組み合わせにより利用者の認証
を行ってアクセスコントロールをしようとする場合、例
えば、顔の特徴のよく似た利用者同士について顔特徴の
単純な認識処理のみで本人であるか否かを認証すること
は難しかった。また例えば、写真や人形等の模造物によ
るなりすましを排除することも困難であった。However, in the conventional access control system as described above, when an access control is performed by authenticating a user by a combination of stored information such as an IC card and a face image, for example, It was difficult to authenticate the users who have similar facial features only by the simple recognition process of the facial features. Further, for example, it has been difficult to eliminate spoofing by imitations such as photographs and dolls.
【０００５】本発明は上記の点に着目してなされたもの
で、アクセスを希望する利用者の顔の時間的な変化を利
用することにより、本人認証を高い精度で行いセキュリ
ティ性の向上を図ったアクセスコントロールシステムを
提供することを目的とする。The present invention has been made in view of the above points. By utilizing the temporal change of the face of the user who desires to access, the personal authentication is performed with high accuracy to improve the security. The purpose is to provide an access control system.
【０００６】[0006]
【課題を解決するための手段】上記の目的を達成するた
め、本発明のアクセスコントロールシステムは、アクセ
スを希望する利用者を撮像して得た顔画像の認識処理に
基づいて本人認証を行い、該本人認証の結果に応じて前
記利用者のアクセスを許可するか否かを制御するアクセ
スコントロールシステムにおいて、利用者の顔の時間的
変化を顔画像の認識処理によって識別し、該識別結果と
予め登録した顔の時間的変化に関する情報とを照合し、
該照合結果に基づいて本人認証を行うようにしたもので
ある。In order to achieve the above object, the access control system of the present invention authenticates a person based on a recognition process of a face image obtained by capturing an image of a user who desires access, In an access control system for controlling whether or not to permit access of the user according to the result of the personal authentication, a temporal change of the user's face is identified by a face image recognition process, and the identification result and the identification result are stored in advance. Compared with the information about the temporal change of the registered face,
Personal authentication is performed based on the collation result.
【０００７】かかるアクセスコントロールシステムで
は、利用者を撮像して得た顔画像の認識処理により識別
した顔の時間的変化を利用して、その時間的変化が予め
登録した変化に対応しているか否かを基に本人認証が行
われるようになる。これにより、従来のシステムに比べ
てより確実な本人認証が可能になるため、セキュリティ
性の向上を図ることが可能になる。In such an access control system, the temporal change of the face identified by the recognition process of the face image obtained by photographing the user is utilized, and whether the temporal change corresponds to the previously registered change or not. Based on this, personal authentication will be performed. As a result, more reliable personal authentication can be performed as compared with the conventional system, so that it is possible to improve security.
【０００８】上記アクセスコントロールシステムの１つ
の態様としては、利用者の顔の特徴に関する登録情報、
利用者の顔の時間的な変化に関する登録情報およびアク
セス権に関する登録情報を少なくとも予め記憶した記憶
手段と、アクセスを希望する利用者を撮像して顔画像を
得る撮像手段と、該撮像手段で得た顔画像の認識処理に
基づいて利用者の顔の時間的変化を識別する顔変化識別
手段と、前記撮像手段で得た顔画像と、前記記憶手段に
記憶された顔の特徴に関する登録情報とを照合し、か
つ、前記顔変化識別手段で識別された利用者の顔の時間
的変化と前記記憶手段に記憶された利用者の顔の時間的
変化に関する登録情報とを照合して当該利用者が本人で
あるか否かを認証し、該認証結果および前記記憶媒体に
記憶されたアクセス権に関する登録情報に応じて、前記
利用者のアクセスを許可するか否かを判定する認証判定
手段と、該認証判定手段での判定結果に従って、前記利
用者のアクセスを制御するアクセスコントロール手段
と、を備えて構成されるようにしてもよい。As one mode of the access control system, registration information relating to facial features of the user,
A storage unit that stores in advance at least registration information regarding a temporal change of a user's face and registration information regarding an access right; an image capturing unit that captures a face image by capturing an image of a user who desires access; Face change identification means for identifying temporal changes of the user's face based on the face image recognition processing, the face image obtained by the image pickup means, and registration information relating to the facial features stored in the storage means. And comparing the temporal change of the face of the user identified by the face change identifying means with the registration information relating to the temporal change of the face of the user stored in the storage means An authentication determination unit that authenticates whether or not the user is the principal, and determines whether or not to permit access by the user according to the authentication result and registration information regarding the access right stored in the storage medium, The authentication judgment According to the judgment result in the step may be constituted provided with an access control means for controlling the access of the user.
【０００９】かかる構成では、アクセスを希望する利用
者の顔が撮像手段によって撮像され、その顔画像が顔変
化識別手段および認証判定手段に送られる。顔変化識別
手段では、撮像手段からの顔画像を基に利用者の顔の時
間的変化が検出され、その検出結果が認証判定手段に送
られる。認証判定手段では、撮像手段からの顔画像およ
び顔変化識別手段からの顔の時間的変化と記憶部に記憶
された各登録情報とがそれぞれ照合されて、利用者が本
人であるか否かの認証処理およびアクセス権の判定処理
が実行される。そして、認証判定手段での処理結果に従
って、アクセスコントロール手段により利用者に対する
アクセスが制御が行われるようになる。In such a configuration, the face of the user who desires access is imaged by the image pickup means, and the face image is sent to the face change identification means and the authentication judgment means. The face change identification means detects a temporal change of the user's face based on the face image from the image pickup means, and sends the detection result to the authentication determination means. The authentication determining means compares the face image from the image capturing means and the temporal change of the face from the face change identifying means with each registration information stored in the storage unit to determine whether or not the user is the person himself / herself. Authentication processing and access right determination processing are executed. Then, access to the user is controlled by the access control means according to the processing result of the authentication judging means.
【００１０】また、上記アクセスコントロールシステム
の認証判定手段については、前記顔変化識別手段で識別
された利用者の顔の時間的変化と前記記憶手段に記憶さ
れた利用者の顔の時間的変化に関する登録情報とを基
に、段階的に設定された複数のアクセス権レベルのうち
の１つを判定するようにしてもよい。かかる構成によれ
ば、利用者の顔の時間的変化に応じて、段階的なアクセ
ス権のレベルが判定されるようになる。これにより、１
人の利用者に対しても段階の異なったアクセス権を与え
ることができる。The authentication determining means of the access control system relates to the temporal change of the face of the user identified by the face change identifying means and the temporal change of the face of the user stored in the storage means. One of a plurality of access right levels set stepwise may be determined based on the registration information. With this configuration, the level of the access right can be determined stepwise according to the temporal change of the user's face. This gives 1
Different levels of access can be given to human users.
【００１１】さらに、前述したアクセスコントロールシ
ステムの具体的な構成として、前記利用者の顔の時間的
変化は、表情の変化または顔の向きの変化であってもよ
い。かかる構成では、利用者の表情の変化または顔の向
きの変化に基づいて、本人認証やアクセス権の判定が行
われるようになる。Further, as a specific configuration of the above-mentioned access control system, the temporal change of the user's face may be a change in facial expression or a change in face orientation. With such a configuration, the personal authentication and the access right determination are performed based on the change in the facial expression or the change in the face direction of the user.
【００１２】[0012]
【発明の実施の形態】以下、本発明の実施形態を図面に
基づいて説明する。図１は、本発明の第１実施形態にか
かるアクセスコントロールシステムの構成を示すブロッ
ク図である。図１において、本アクセスコントロールシ
ステムは、例えば、記憶手段としての記憶部１と、撮像
手段としてのカメラ２および顔検出部３と、顔変化識別
手段としての表情識別部４と、認証判定手段としての本
人認証部５およびアクセス権判定部６と、アクセスコン
トロール手段としてのアクセスコントロール部７とを備
えて構成される。BEST MODE FOR CARRYING OUT THE INVENTION Embodiments of the present invention will be described below with reference to the drawings. FIG. 1 is a block diagram showing the configuration of an access control system according to the first embodiment of the present invention. In FIG. 1, the present access control system includes, for example, a storage unit 1 as a storage unit, a camera 2 and a face detection unit 3 as an imaging unit, a facial expression identification unit 4 as a face change identification unit, and an authentication determination unit. The personal authentication unit 5 and the access right determination unit 6 and the access control unit 7 as an access control unit.
【００１３】記憶部１は、利用者の顔の特徴に関する登
録情報（以下、登録顔データとする）Ｆｒｅｇと、利用
者の表情の変化パタンに関する登録情報（以下、登録表
情変化パタンデータとする）Ｅｒｅｇと、利用者に認め
られたアクセス権に関する登録情報（以下、アクセス権
データとする）Ａｒｅｇとを含んだ個人登録データが予
め記憶された一般的な情報記憶媒体である。この記憶部
１の具体的な構成としては、例えば図２に示すように、
複数の利用者Ａ，Ｂ，Ｃ，…についての上記個人登録デ
ータがまとめて格納された所要の容量を有するメモリ１
０としてもよい。この場合、メモリ１０に格納された各
登録データが本人認証部５およびアクセス権判定部６に
よって読み取られることになる。また、例えば図３に示
すように、各利用者が上記の個人登録データを記憶させ
た非接触ＩＣカード１１等の携行型の記憶媒体をそれぞ
れ所持するようにし、その非接触ＩＣカード１１等をシ
ステム側に設けられたカード読み取り部１２に近づける
ことで個人登録データを読み取らせることも可能であ
る。この場合には、カード読み取り部１２で読み取られ
た個人登録データが本人認証部５およびアクセス権判定
部６に送られることになる。なお、本発明における記憶
手段は上記の具体例に限られるものではなく、個人登録
データを記憶し得る公知の情報記憶媒体を使用すること
が可能である。The storage unit 1 stores registration information regarding facial features of the user (hereinafter referred to as registered face data) Freg and registration information regarding facial expression change patterns of the user (hereinafter referred to as registered facial expression change pattern data). It is a general information storage medium in which personal registration data including Ereg and registration information (hereinafter referred to as access right data) Areg regarding access right granted to a user is stored in advance. As a specific configuration of the storage unit 1, for example, as shown in FIG.
A memory 1 having a required capacity in which the individual registration data for a plurality of users A, B, C, ... Are collectively stored.
It may be 0. In this case, each registration data stored in the memory 10 is read by the person authenticating unit 5 and the access right judging unit 6. Further, as shown in FIG. 3, for example, each user is allowed to carry a portable storage medium such as the non-contact IC card 11 in which the above personal registration data is stored, and the non-contact IC card 11 or the like is stored. It is also possible to read the personal registration data by bringing it closer to the card reading unit 12 provided on the system side. In this case, the personal registration data read by the card reading unit 12 is sent to the person authenticating unit 5 and the access right judging unit 6. The storage means in the present invention is not limited to the above specific example, and a known information storage medium capable of storing personal registration data can be used.
【００１４】登録顔データＦｒｅｇは、例えば、本人認
証用として予め取得した顔画像をそのまま登録データと
して用いてもよい。また例えば、本人認証用の顔画像を
基に顔特徴量を算出して、その算出結果を登録データと
して用いることも可能である。上記の顔特徴量とは、本
人と他人の識別判定が可能な利用者の顔の特徴を数値化
したものであって、例えば、顔の構成要素（目、鼻、
口、眉等）の形状と、互いの配置関係などを数値で表し
たものである。As the registered face data Freg, for example, a face image previously acquired for personal authentication may be used as it is as registered data. Further, for example, it is possible to calculate the facial feature amount based on the face image for personal authentication and use the calculation result as the registration data. The above-mentioned facial feature amount is a numerical representation of the facial features of the user who can distinguish between the person and the other person, and, for example, facial components (eyes, nose,
The shape of the mouth, the eyebrows, etc.) and the positional relationship between them are numerically represented.
【００１５】登録表情変化パタンデータＥｒｅｇは、利
用者の表情を示す表情データの時間的な変化パタンを予
め決めておき、それを本人認証用のデータとして登録し
たものである。上記の表情データとは、本人と他人の識
別判定が可能な利用者の表情の特徴を数値化したもので
ある。具体的には、例えば、顔の構成要素（目、鼻、
口、眉等）のみを顔画像から切り出して互いの位置関係
を数値で表したり、顔の構成要素の形状や互いの位置関
係、傾き等を数値で表したりしたものであって、その数
値によってその時の表情の特徴を示したものである。つ
まり、登録表情変化パタンデータＥｒｅｇは、本人認証
用として予め決めた表情の変化（顔の時間的変化）に従
って複数の表情データの時系列が形成され、その表情デ
ータ列が登録データとして用いられることになる。In the registered facial expression change pattern data Ereg, a temporal change pattern of the facial expression data indicating the facial expression of the user is determined in advance and is registered as personal authentication data. The above-mentioned facial expression data is a numerical expression of the facial expression features of the user who can distinguish between the person and the other person. Specifically, for example, facial components (eyes, nose,
(Mouth, eyebrows, etc.) are cut out from the face image and the positional relationship between them is numerically expressed, or the shapes of the facial components, the positional relationship between each other, and the inclination are numerically expressed. It shows the features of facial expressions at that time. That is, in the registered facial expression change pattern data Ereg, a time series of a plurality of facial expression data is formed according to a predetermined facial expression change (temporal change of face) for personal authentication, and the facial expression data string is used as registered data. become.
【００１６】また、アクセス権データＡｒｅｇは、正当
な所有者に与えられた使用権限に関する情報であって、
システム内の資源に対して使用が許可される範囲などを
示す情報である。具体的には、例えばドア等におけるア
クセスコントロールに用いられる場合には、入室が許可
される部屋についての識別情報などがアクセス権データ
Ａｒｅｇとなる。また、例えば駅の改札口等におけるア
クセスコントロールに用いられる場合には、周知の定期
券データなどがアクセス権データＡｒｅｇに該当する。
なお、本発明におけるアクセス権データは、上記の具体
例に限定されるものではなく、所要のアクセスコントロ
ールに応じて適宜に設定することが可能である。The access right data Areg is information about the usage right given to the rightful owner,
This is information indicating the range in which use of resources in the system is permitted. Specifically, for example, when used for access control at a door or the like, the access right data Areg is identification information about a room permitted to enter. When used for access control at a ticket gate of a station, for example, well-known commuter pass data corresponds to the access right data Areg.
The access right data in the present invention is not limited to the above specific example, and can be set appropriately according to the required access control.
【００１７】カメラ２は、アクセスを希望する利用者の
主に顔を撮像することが可能であり、取得した映像を顔
検出部３に出力する。このカメラ２は、撮像領域内を適
切に撮像するための機能（例えば、オートフォーカス
等）を備えていてもよい。なお、ここでは１台のカメラ
を使用する一例を示したが、複数台のカメラを切り替え
て使用するようにしても構わない。The camera 2 can mainly capture a face of a user who desires access, and outputs the acquired image to the face detection section 3. The camera 2 may have a function (for example, auto focus) for appropriately capturing an image inside the image capturing area. In addition, although an example in which one camera is used is shown here, a plurality of cameras may be switched and used.
【００１８】顔検出部３は、例えば図４に示すように、
カメラ２からの映像を連続した画像として処理し、各画
像から利用者の顔の検出処理を実行する。そして、利用
者の顔を検出した場合には顔画像Ｆｉｎを切り出し、そ
の顔画像Ｆｉｎを表情識別部４および本人認証部５の後
述する顔認証部５０にそれぞれ送る。表情識別部４は、
例えば図５に示すように、表情データ作成回路４０およ
び表情データ変化判定回路４１を有する。表情データ作
成回路４０は、顔検出部３から連続して送られてくる顔
画像Ｆｉｎを基に表情データを作成し、その表情データ
を表情データ変化判定回路４１に出力する。表情データ
変化判定回路４１は、表情データ作成回路４０から連続
して送られてくる表情データについて時間的な変化の有
無を判別し、時間的変化有りを判別した時の表情データ
を逐次取り出して本人認証部５の後述する表情変化パタ
ン認証部５１に出力する。図６には、上記のような表情
データ作成回路４０における表情データの作成処理およ
び表情データ変化判定回路４１における判定処理の流れ
の一例を示しておく。なお、ここでは、表情データ変化
判定回路４１から表情変化パタン認証部５１に送られる
各表情データＥｉｎ1，Ｅｉｎ2，…の時系列を表情デー
タ列｛Ｅｉｎn｝で表記することにする。The face detecting section 3 is, for example, as shown in FIG.
The video from the camera 2 is processed as a continuous image, and the user's face detection process is executed from each image. When the face of the user is detected, the face image Fin is cut out and the face image Fin is sent to the facial expression identification unit 4 and the face authentication unit 50 of the person authentication unit 5 described later. The facial expression identification unit 4
For example, as shown in FIG. 5, it has a facial expression data creation circuit 40 and a facial expression data change determination circuit 41. The facial expression data creation circuit 40 creates facial expression data based on the face images Fin continuously sent from the face detection unit 3, and outputs the facial expression data to the facial expression data change determination circuit 41. The facial expression data change determination circuit 41 determines whether or not there is a temporal change in the facial expression data continuously sent from the facial expression data creation circuit 40, and sequentially extracts the facial expression data when it is determined that there is a temporal change. It is output to the facial expression change pattern authentication unit 51 of the authentication unit 5, which will be described later. FIG. 6 shows an example of the flow of the facial expression data creation processing in the facial expression data creation circuit 40 and the determination processing in the facial expression data change determination circuit 41 as described above. Here, the time series of each facial expression data Ein 1 , Ein 2 , ... That is sent from the facial expression data change determination circuit 41 to the facial expression change pattern authentication unit 51 is represented by a facial expression data string {Ein n }.
【００１９】本人認証部５は、例えば、顔認証部５０お
よび表情変化パタン認証部５１を有する（図１）。顔認
証部５０は、顔検出部３から送られてくる顔画像Ｆｉｎ
と記憶部１に記憶された登録顔データＦｒｅｇとを照合
し、その照合結果の尺度に基づいて、カメラ２で撮像さ
れた利用者の顔が記憶部１に登録された利用者の顔と一
致するか否かの認証を行い、その認証結果をアクセス権
判定部６に出力する。The personal identification section 5 has, for example, a face identification section 50 and a facial expression change pattern identification section 51 (FIG. 1). The face authentication unit 50 uses the face image Fin sent from the face detection unit 3.
And the registered face data Freg stored in the storage unit 1 are collated, and the face of the user imaged by the camera 2 matches the face of the user registered in the storage unit 1 based on the scale of the collation result. Whether or not to perform the authentication is performed, and the authentication result is output to the access right determination unit 6.
【００２０】この顔認証部５０における顔認証処理は、
具体的には、本人認証用として予め取得した顔画像がそ
のまま登録顔データＦｒｅｇとして登録されている場合
には、例えば図７に示すように、まず、顔検出部３から
の顔画像Ｆｉｎについて拡大／縮小処理を施し、登録顔
データＦｒｅｇ（図では複数の顔画像を示したが１つの
顔画像であってもよい）と同等のサイズにする。次に、
顔画像Ｆｉｎと登録顔データＦｒｅｇを照合して互いの
差分を算出することによって、両顔画像の類似度を求め
る。この類似度は差分が少ないほど高くなるものとす
る。そして、求めた類似度が予め設定された閾値を上回
れば、顔画像Ｆｉｎと登録顔データＦｒｅｇの一致を判
断して利用者が本人であると認証する。また、本人認証
用の顔画像を基に算出した顔特徴量が登録顔データＦｒ
ｅｇとして登録されている場合には、例えば図８に示す
ように、まず、顔検出部３からの顔画像Ｆｉｎを基に顔
認証部５０’の顔特徴量算出回路５０Ａで顔特徴量を算
出し、その顔特徴量と登録顔データＦｒｅｇとして示さ
れる顔特徴量とを顔特徴量照合回路５０Ｂで照合して類
似度を求める。そして、求めた類似度が予め設定された
閾値を上回るか否かを顔特徴量認証回路５０Ｃで判定
し、類似度が閾値を上回れば利用者が本人であると認証
する。The face recognition processing in the face recognition section 50 is as follows.
Specifically, when the face image previously acquired for personal authentication is directly registered as the registered face data Freg, the face image Fin from the face detection unit 3 is first enlarged as shown in FIG. 7, for example. / Reduction processing is performed to make the size equivalent to the registered face data Freg (a plurality of face images are shown in the figure, but one face image may be used). next,
By comparing the face image Fin and the registered face data Freg and calculating the difference between them, the degree of similarity between both face images is obtained. It is assumed that this similarity is higher as the difference is smaller. Then, if the calculated similarity exceeds a preset threshold, it is determined that the face image Fin and the registered face data Freg match, and the user is authenticated as the user. In addition, the face feature amount calculated based on the face image for personal authentication is the registered face data Fr.
When registered as eg, as shown in FIG. 8, for example, the face feature amount calculation circuit 50A of the face authentication unit 50 ′ first calculates the face feature amount based on the face image Fin from the face detection unit 3. Then, the face feature amount and the face feature amount shown as the registered face data Freg are collated by the face feature amount collating circuit 50B to obtain the degree of similarity. Then, the facial feature amount authentication circuit 50C determines whether or not the calculated similarity exceeds a preset threshold value, and if the similarity exceeds the threshold value, the user is authenticated as the user.
【００２１】表情変化パタン認証部５１は、表情識別部
４から送られてくる表情データ列｛Ｅｉｎn｝と、記憶
部１に記憶された登録表情変化パタンデータＥｒｅｇと
を照合して表情変化パタンの認証を行い、その認証結果
をアクセス権判定部６に出力する。この表情変化パタン
認証部５１における表情変化パタン認証処理は、具体的
には、例えば図９に示すように、表情識別部４からの表
情データ列｛Ｅｉｎn｝と記憶部１からの登録表情変化
パタンデータＥｒｅｇに示される表情データの変化パタ
ン（以下、登録表情データ列｛Ｅｒｅｇm｝とする）と
が表情変化パタンデータ照合回路５１Ａにそれぞれ入力
されて各々の表情データ列の変化パタンが照合され、そ
の照合結果が表情変化パタンデータ判定回路５１Ｂに出
力される。表情変化パタンデータ判定回路５１Ｂでは、
例えば、次の認証条件（１）〜（４）のいずれかに従っ
て、表情変化パタンの認証処理が行われるものとする。The facial expression change pattern authentication unit 51 collates the facial expression data string {Ein n } sent from the facial expression identification unit 4 with the registered facial expression change pattern data Ereg stored in the storage unit 1 to check the facial expression change pattern. Authentication is performed and the authentication result is output to the access right determination unit 6. Specifically, the facial expression change pattern authentication processing in the facial expression change pattern authentication unit 51 is, for example, as shown in FIG. 9, the facial expression data string {Ein n } from the facial expression identification unit 4 and the registered facial expression change from the storage unit 1. The change pattern of facial expression data shown in the pattern data Ereg (hereinafter referred to as registered facial expression data string {Ereg m }) is input to the facial expression change pattern data matching circuit 51A, and the changed pattern of each facial expression data string is matched. The collation result is output to the facial expression change pattern data determination circuit 51B. In the facial expression change pattern data determination circuit 51B,
For example, it is assumed that the facial expression change pattern is authenticated according to any of the following authentication conditions (1) to (4).
【００２２】認証条件（１）：表情データ列｛Ｅｉ
ｎn｝と登録表情データ列｛Ｅｒｅｇm｝が同等になる、
次の（１）式に示す条件を満たす場合に、表情データ列
｛Ｅｉｎ n｝で示される表情変化パタンを認証する。
｛Ｅｉｎn｝＝｛Ｅｒｅｇm｝ …（１）
認証条件（２）：表情データ列｛Ｅｉｎn｝に登録表情
データ列｛Ｅｒｅｇm｝が含まれる、次の（２）式に示
す条件を満たす場合に、表情データ列｛Ｅｉｎn｝で示
される表情変化パタンを認証する。Authentication condition (1): Expression data string {Ei
nn} And registered facial expression data string {Eregm} Become equivalent,
Expression data string when the condition shown in the following formula (1) is satisfied
{Ein n} Authenticate the facial expression change pattern shown by.
{Einn} = {Eregm} (1)
Authentication condition (2): Expression data string {Einn} Registered facial expression
Data string {Eregm} Is included in the formula (2) below.
If the condition is satisfied, the facial expression data string {Einn} Indicates
Authenticate the facial expression change pattern that is displayed.
【００２３】
｛Ｅｉｎn｝＝Ｅｉｎ1，…，｛Ｅｒｅｇm｝，…，Ｅｉｎn …（２）
認証条件（３）：表情データ列｛Ｅｉｎn｝内に、登録
表情データ列｛Ｅｒｅｇm｝にある各表情データが同順
で存在する、次の（３）式に示す条件を満たす場合に、
表情データ列｛Ｅｉｎn｝で示される表情変化パタンを
認証する。
｛Ｅｉｎn｝＝Ｅｉｎ1，…，Ｅｒｅｇ1，…，Ｅｒｅｇm，…，Ｅｉｎn
…（３）
認証条件（４）：登録表情データ列｛Ｅｒｅｇm｝の集
合が表情データ列｛Ｅｉｎn｝の集合に含まれる、次の
（４）式に示す条件を満たす場合に、表情データ列｛Ｅ
ｉｎn｝で示される表情変化パタンを認証する。{Ein n } = Ein 1 , ..., {Ereg m }, ..., Ein n (2) Authentication condition (3): registered facial expression data string {Ereg m } in facial expression data string {Ein n }. If the facial expression data in 1 exist in the same order, and the condition shown in the following expression (3) is satisfied,
The facial expression change pattern indicated by the facial expression data string {Ein n } is authenticated. {Ein n } = Ein 1 , ..., Ereg 1 , ..., Ereg m , ..., Ein n (3) Authentication condition (4): A set of registered facial expression data strings {Ereg m } is the facial expression data string {Ein n }. Expression data string {E
The facial expression change pattern indicated by in n } is authenticated.
【００２４】集合Ｅｉｎn∋集合Ｅｒｅｇm …（４）
なお、上記の各認証条件は一例であって、本発明におけ
る顔の時間的変化（ここでは表情の変化パタン）を認証
するための条件はこれらに限定されるものではない。ア
クセス権判定部６は、顔認証部５０および表情変化パタ
ン認証部５１における各認証結果と、記憶部１に記憶さ
れたアクセス権データＡｒｅｇとに基づいて、利用者の
アクセスを許可するか否かを判定し、その判定結果をア
クセスコントロール部７に出力する。このアクセス権判
定部６における判定処理は、具体的には、顔認証部５０
での認証結果が是であり、かつ、表情変化パタン認証部
５１での認証結果も是である場合に、記憶部１からのア
クセス権データＡｒｅｇに示される使用権限に応じて、
例えばフルアクセス可、一部アクセス可またはアクセス
不可などを判定し、その判定結果を示す信号をアクセス
コントロール部７に伝える。Set Ein n ∋ Set Ereg m (4) It should be noted that each of the above authentication conditions is an example, and the conditions for authenticating a temporal change of a face (here, a facial expression change pattern) in the present invention are set. It is not limited to these. Whether or not the access right determination unit 6 permits the user's access based on the authentication results in the face authentication unit 50 and the facial expression change pattern authentication unit 51 and the access right data Areg stored in the storage unit 1. Is determined and the determination result is output to the access control unit 7. Specifically, the determination processing in the access right determination unit 6 is performed by the face authentication unit 50.
In the case where the authentication result in step 1 is yes, and the authentication result in the facial expression change pattern authentication part 51 is also yes, according to the usage right indicated in the access right data Areg from the storage part 1,
For example, full access, partial access, or no access is determined, and a signal indicating the determination result is transmitted to the access control unit 7.
【００２５】アクセスコントロール部７は、アクセス権
判定部６における判定結果に応じて、本人であると認証
されると同時に正当なアクセス権を有すると判定された
利用者に対して所要のアクセスを許可し、それ以外の利
用者に対してはアクセスを拒否するアクセスコントロー
ルを実施する。次に、第１実施形態のアクセスコントロ
ールシステムの動作について、図１０〜図１４の各フロ
ーチャートを用いて説明する。The access control unit 7 permits the required access to the user who is determined to have the legitimate access right at the same time as being authenticated as the person according to the result of the judgment by the access right judging unit 6. However, access control is performed to deny access to other users. Next, the operation of the access control system of the first embodiment will be described with reference to the flowcharts of FIGS.
【００２６】本アクセスコントロールシステムによるア
クセスコントロールが開始されると、アクセスを希望す
る利用者がカメラ２によって撮像され、その映像が顔検
出部３に送られる。顔検出部３では、例えば図１０のフ
ローチャートに示すように、ステップ１（図中Ｓ１で示
し、以下同様とする）でカメラ２から連続して送られて
くる画像のなかに利用者の顔に相当する部分が検出され
たか否か判別され、顔の部分が検出されるとステップ２
に進み、顔画像Ｆｉｎが切り出されて顔認証部５０およ
び表情識別部４にそれぞれ出力される。When access control by the present access control system is started, a user who desires access is imaged by the camera 2 and the image is sent to the face detection section 3. In the face detection unit 3, for example, as shown in the flowchart of FIG. 10, in the image continuously sent from the camera 2 in step 1 (indicated by S1 in the figure, the same applies hereinafter), the face of the user is detected. It is determined whether or not a corresponding portion is detected, and if a face portion is detected, step 2
Then, the face image Fin is cut out and output to the face authentication unit 50 and the facial expression identification unit 4, respectively.
【００２７】次に、顔検出部３からの顔画像Ｆｉｎを受
ける顔認証部５０では、例えば図１１のフローチャート
に示すように、まず、ステップ１０で顔画像Ｆｉｎが入
力されたか否かが判別され、顔画像Ｆｉｎの入力がある
とステップ１１に進み、入力された顔画像Ｆｉｎと記憶
部１に記憶された登録顔データＦｒｅｇとが照合され
る。このとき、記憶部１が前述の図２に示したようなメ
モリ１０を使用したものである場合には、メモリ１０に
記憶された複数の利用者Ａ，Ｂ，Ｃ，…の登録顔データ
Ｆｒｅｇが顔認証部５０によって順次読み取られて、顔
画像Ｆｉｎとの照合処理が実行される。また、記憶部１
が前述の図３に示したような非接触ＩＣカード１１およ
びカード情報読み取り部１２からなる場合には、カメラ
１で撮像された利用者の提示した非接触ＩＣカードから
発信されカード情報読み取り部１２で受信された個人登
録データに含まれる登録顔データＦｒｅｇが顔認証部５
０に送られて、顔画像Ｆｉｎとの照合処理が実行され
る。そして、ステップ１２では、照合の結果を示す類似
度が閾値を上回って照合一致となったか否かが判別さ
れ、照合一致が判別されると、ステップ１３に進み、顔
認証部５０における認証結果が是であることを示す信号
がアクセス権判定部６に出力される。Next, in the face authentication unit 50 that receives the face image Fin from the face detection unit 3, first, as shown in the flowchart of FIG. 11, for example, it is determined whether or not the face image Fin is input in step 10. When the face image Fin is input, the process proceeds to step 11, and the input face image Fin and the registered face data Freg stored in the storage unit 1 are collated. At this time, when the storage unit 1 uses the memory 10 as shown in FIG. 2, the registered face data Freg of the plurality of users A, B, C, ... Are sequentially read by the face authentication unit 50, and the matching process with the face image Fin is executed. Also, the storage unit 1
Is composed of the non-contact IC card 11 and the card information reading unit 12 as shown in FIG. 3, the card information reading unit 12 is transmitted from the non-contact IC card presented by the user and captured by the camera 1. The registered face data Freg included in the personal registration data received by the
0, and the matching process with the face image Fin is executed. Then, in step 12, it is determined whether or not the similarity indicating the result of the collation exceeds the threshold value and the collation coincidence is obtained. When the collation coincidence is discriminated, the process proceeds to step 13, and the authentication result in the face authentication part 50 is obtained. A signal indicating yes is output to the access right determination unit 6.
【００２８】また、顔検出部３からの顔画像Ｆｉｎを受
ける表情識別部４では、例えば図１２のフローチャート
に示すように、まず、ステップ２０で顔画像Ｆｉｎが入
力されたか否かが判別され、顔画像Ｆｉｎの入力がある
とステップ２１に進み、入力された顔画像Ｆｉｎについ
ての表情データが表情データ作成回路４０によって作成
される。そして、ステップ２２では、作成された時系列
の表情データについての変化の有無が表情データ変化判
定回路４１で判定され、変化有りが判定されると、ステ
ップ２３に進んで、その時の表情データが表情データ列
｛Ｅｉｎn｝として表情変化パタン認証部５１に出力さ
れる。Further, in the facial expression identifying section 4 that receives the face image Fin from the face detecting section 3, first, as shown in the flowchart of FIG. 12, for example, it is determined whether or not the face image Fin is input in step 20, When the face image Fin is input, the process proceeds to step 21, and the facial expression data of the input facial image Fin is created by the facial expression data creating circuit 40. Then, in step 22, the facial expression data change determination circuit 41 determines whether or not there is a change in the created time-series facial expression data, and when it is determined that there is a change, the process proceeds to step 23, and the facial expression data at that time is expressed. The data string {Ein n } is output to the facial expression change pattern authentication unit 51.
【００２９】表情識別部４からの表情データ列｛Ｅｉｎ
n｝を受ける表情変化パタン認証部５１では、例えば図
１３に示すように、まず、ステップ３０で表情データ列
｛Ｅｉｎn｝が入力されたか否かが判別され、表情デー
タ列｛Ｅｉｎn｝の入力があるとステップ３１に進み、
入力された表情データ列｛Ｅｉｎn｝と記憶部１に記憶
された登録表情データ列｛Ｅｒｅｇm｝とが表情変化パ
タンデータ照合回路５１Ａで照合される。そして、ステ
ップ３２では、表情変化パタンデータ照合回路５１Ａで
の照合結果が表情変化パタンデータ判定回路５１Ｂに伝
えられ、前述した認証条件（１）〜（４）のいずれかに
従って表情変化パタンの認証処理が行われ、認証条件を
満たした場合には、ステップ３３に進み、表情変化パタ
ン認証部５１における認証結果が是であることを示す信
号がアクセス権判定部６に出力される。Expression data string {Ein from the expression identifying unit 4
For example, as shown in FIG. 13, the facial expression change pattern authentication unit 51 that receives n } first determines whether the facial expression data string {Ein n } is input in step 30, and the facial expression data string {Ein n } If there is input, go to step 31,
The inputted facial expression data sequence {Ein n } and the registered facial expression data sequence {Ereg m } stored in the storage unit 1 are collated by the facial expression change pattern data collating circuit 51A. Then, in step 32, the collation result of the facial expression change pattern data collation circuit 51A is transmitted to the facial expression change pattern data determination circuit 51B, and the facial expression change pattern authentication processing is performed according to any one of the authentication conditions (1) to (4) described above. When the authentication condition is satisfied, the process proceeds to step 33, and a signal indicating that the authentication result in the facial expression change pattern authentication unit 51 is YES is output to the access right determination unit 6.
【００３０】なお、上記の処理手順では、顔認証部５０
における処理が実行された後に、表情識別部４および表
情変化パタン認証部５１における各処理が実行されるよ
うにしたが、顔認証部５０での処理と情識別部４および
表情変化パタン認証部５１での各処理とが並行して行わ
れるようにしても構わない。顔認証部５０および表情変
化パタン認証部５１からの出力信号を受けるアクセス権
判定部６では、例えば図１４に示すように、ステップ４
０において顔認証部５０および表情変化パタン認証部５
１からの各出力信号の双方が認証結果が是であることを
示しているか否かが判別される。双方の認証結果が是で
ある場合には、ステップ４１に進み、記憶部１に記憶さ
れたアクセス権データＡｒｅｇに応じて、その利用者に
対するアクセス権が判定され、その判定結果を示す信号
がステップ４２でアクセスコントロール部７に出力され
る。そして、ステップ４３では、アクセスコントロール
部７において利用者に対するアクセスコントロールが実
施される。In the above procedure, the face authentication unit 50
After the processing in (1) is executed, each processing in the facial expression identification unit 4 and the facial expression change pattern authentication unit 51 is executed. However, the processing in the face authentication unit 50 and the information identification unit 4 and the facial expression change pattern authentication unit 51 are performed. It is also possible to carry out each of the processes in the above step in parallel. In the access right determination unit 6 which receives the output signals from the face authentication unit 50 and the facial expression change pattern authentication unit 51, for example, as shown in FIG.
0, the face authentication unit 50 and the facial expression change pattern authentication unit 5
It is determined whether or not both of the output signals from 1 indicate that the authentication result is yes. If both authentication results are YES, the process proceeds to step 41, the access right to the user is determined according to the access right data Areg stored in the storage unit 1, and a signal indicating the determination result is sent to the step. At 42, it is output to the access control unit 7. Then, in step 43, access control for the user is performed in the access control unit 7.
【００３１】上記のように第１実施形態のアクセスコン
トロールシステムによれば、利用者を撮像して得た顔画
像の認識処理により、顔の時間的変化の１つである表情
の変化を識別し、その表情の変化パタンに応じて利用者
が登録された本人であるかの認証を行うようにしたこと
で、従来のシステムでは認証が困難であった顔特徴の似
た利用者同士についての本人認証が可能になり、また、
模造物によるなりすましなども確実に排除することがで
きる。これにより、高い精度の本人認証を行うことがで
きるため、アクセスコントロールシステムのセキュリテ
ィ性を向上させることが可能になる。As described above, according to the access control system of the first embodiment, the change in facial expression, which is one of the temporal changes in the face, is identified by the recognition processing of the face image obtained by photographing the user. By authenticating whether the user is the registered person according to the change pattern of the facial expression, it is difficult for the conventional system to authenticate the users who have similar facial features. Authentication is possible, and
Spoofing by imitation can be surely excluded. As a result, it is possible to perform highly accurate personal authentication, and it is possible to improve the security of the access control system.
【００３２】次に、本発明にかかるアクセスコントロー
ルシステムの第２実施形態について説明する。図１５
は、第２実施形態のアクセスコントロールシステムの構
成を示すブロック図である。なお、第１実施形態の構成
と同様の部分には同一の符号を付して、ここでの説明を
省略するものとする。Next, a second embodiment of the access control system according to the present invention will be described. Figure 15
[Fig. 7] is a block diagram showing a configuration of an access control system of a second embodiment. The same parts as those in the configuration of the first embodiment are designated by the same reference numerals, and the description thereof will be omitted.
【００３３】図１５において、本実施形態のアクセスコ
ントロールシステムの構成が第１実施形態の構成と異な
る部分は、アクセス権判定部６が表情変化パタン認証部
６０および判定部６１からなるようにして、第１実施形
態で本人認証部５の一部として用いられていた表情変化
パタン認証部５１を省略した部分である。上記以外の他
の部分の構成は第１実施形態の場合と同様である。In FIG. 15, the access control system of this embodiment is different from that of the first embodiment in that the access right determination unit 6 is composed of a facial expression change pattern authentication unit 60 and a determination unit 61. This is a portion in which the facial expression change pattern authentication unit 51 used as a part of the person authentication unit 5 in the first embodiment is omitted. The configuration of the parts other than the above is the same as that of the first embodiment.
【００３４】アクセス権判定部６に用いられる表情変化
パタン認証部６０は、第１実施形態の場合と同様に、表
情識別部からの表情データ列｛Ｅｉｎn｝を受けて、記
憶部１に記憶された登録表情データ列｛Ｅｒｅｇm｝と
の照合処理を行う。そして、その照合結果に基づいて段
階的なアクセス権のレベルを判断し、その判断結果を判
定部６１に出力する。上記の段階的なアクセス権のレベ
ルとは、例えば次のようなものである。The facial expression change pattern authentication unit 60 used in the access right determination unit 6 receives the facial expression data string {Ein n } from the facial expression identification unit and stores it in the storage unit 1 as in the first embodiment. The matching process with the registered facial expression data string {Ereg m } is performed. Then, the level of the access right is judged in stages based on the collation result, and the judgment result is output to the judgment unit 61. The above-mentioned stepwise access right levels are, for example, as follows.
【００３５】レベル１：全くアクセス権が無い
レベル２：一部アクセス権が有る
レベル３：レベル２より広いアクセス権が有る
レベル４：レベル３より広いアクセス権が有る
レベル５：フルアクセス権が有る
上記のような段階的なアクセス権に対して、記憶部１に
記憶された登録表情変化パタンデータＥｒｅｇとして
は、例えば図１６に示すような各アクセス権レベルに関
連付けられた表情データ列が登録されているものとす
る。すなわち、アクセス権レベルが高くなるほど複雑な
表情の変化パタンが関連付けられていて、利用者に対し
ては、カメラ２の前で希望するアクセス権レベルに応じ
て表情を変化させることが要求される。これにより、表
情変化パタン認証部６０は、表情識別部４からの表情デ
ータ列｛Ｅｉｎn｝と、登録表情変化パタンデータＥｒ
ｅｇに示される図１６のような登録表情データ列｛Ｅｉ
ｎn｝とを照合して、その利用者に対するアクセス権レ
ベルを判断することになる。Level 1: No access right Level 2: Partial access right Level 3: Wider access right than Level 2 Level 4: Wider access right than Level 3 Level 5: Full access right For the above-described stepwise access rights, as the registered facial expression change pattern data Ereg stored in the storage unit 1, for example, the facial expression data string associated with each access right level as shown in FIG. 16 is registered. It is assumed that That is, the higher the access right level, the more complicated the facial expression change pattern is associated, and the user is required to change the facial expression according to the desired access right level in front of the camera 2. As a result, the facial expression change pattern authentication unit 60 receives the facial expression data string {Ein n } from the facial expression identification unit 4 and the registered facial expression change pattern data Er.
The registered facial expression data sequence {Ei shown in FIG.
by matching the n n}, it will determine the access level for that user.
【００３６】判定部６は、本人認証部５での本人認証結
果を示す信号と、表情変化パタン認証部５１で判断され
たアクセス権レベルを示す信号と、記憶部１からのアク
セス権データＡｒｅｇとが入力され、本人認証部５にお
ける顔認証処理（第１実施形態での顔認証部５０による
処理と同様）により利用者が本人であると認証された場
合に、アクセス権データＡｒｅｇおよび表情変化パタン
認証部５１で判断されたアクセス権レベルに応じた当該
利用者に対するアクセス権を判定し、その判定結果を示
す信号をアクセスコントロール部７に出力する。The determination unit 6 receives the signal indicating the result of the authentication by the authentication unit 5, the signal indicating the access right level determined by the facial expression change pattern authentication unit 51, and the access right data Areg from the storage unit 1. Is input and the user is authenticated by the face authentication process in the person authentication unit 5 (similar to the process by the face authentication unit 50 in the first embodiment), the access right data Areg and the facial expression change pattern. The access right to the user is determined according to the access right level determined by the authentication unit 51, and a signal indicating the determination result is output to the access control unit 7.
【００３７】上記のような第２実施形態のアクセスコン
トロールシステムでは、顔画像から識別された利用者の
表情の変化パタンに応じて、１人の利用者に対してであ
っても段階の異なったアクセス権を与えることができる
ようになる。もちろん、顔画像から識別された表情の変
化パタンが登録されて変化パタンデータのすべてに一致
しない場合には、その利用者に対してアクセス権が与え
られないため、上述した第１実施形態の場合と同様の作
用効果を得ることも可能である。In the access control system according to the second embodiment as described above, the stages are different even for one user according to the change pattern of the facial expression of the user identified from the face image. You will be able to give access. Of course, when the change pattern of the facial expression identified from the face image is registered and does not match all of the change pattern data, the user is not given the access right. Therefore, in the case of the first embodiment described above. It is also possible to obtain the same effect as.
【００３８】なお、上述した第１および第２実施形態で
は、利用者の表情の変化を識別するようにしたが、本発
明において識別される顔の時間的変化は表情の変化に限
定されるものではない。例えば、利用者の顔の向きの変
化を識別したり、特定の言葉を発したときの利用者の口
の動きを識別したりすることなども可能である。特に、
表情や顔の向き、口の動きなどといった顔以外の他の部
位を用いないで行われる顔の時間的変化を認証処理に利
用するようにすれば、例えば荷物等により手がふさがっ
ているような場合でも利用者は容易にアクセスコントロ
ールを受けることができため、利便性のより優れたシス
テムを実現することが可能になる。In the first and second embodiments described above, the change in the facial expression of the user is identified, but the temporal change of the face identified in the present invention is limited to the change in the facial expression. is not. For example, it is possible to identify a change in the orientation of the user's face, or to identify the movement of the user's mouth when a specific word is uttered. In particular,
If the time change of the face, which is performed without using other parts other than the face such as facial expression, face direction, mouth movement, etc., is used for the authentication process, it is possible that the hands are occupied by, for example, luggage. Even in such a case, the user can easily receive access control, so that it becomes possible to realize a system with greater convenience.
【００３９】[0039]
【発明の効果】以上説明したように、本発明のアクセス
コントロールシステムによれば、利用者の顔画像の認識
処理による顔の時間的変化に基づいて本人認証が行われ
るようになるため、従来のシステムでは認証が困難であ
った顔特徴の似た利用者同士の認証や模造物によるなり
すましの排除などを確実に行うことができる。これによ
り、アクセスコントロールシステムのセキュリティ性の
向上を図ることが可能になる。As described above, according to the access control system of the present invention, the personal authentication is performed based on the temporal change of the face due to the recognition processing of the face image of the user. It is possible to reliably perform authentication between users who have similar facial features, which is difficult to authenticate with the system, and to prevent impersonation by imitation. This makes it possible to improve the security of the access control system.
【図１】本発明の第１実施形態にかかるアクセスコント
ロールシステムの構成を示すブロック図である。FIG. 1 is a block diagram showing a configuration of an access control system according to a first embodiment of the present invention.
【図２】上記第１実施形態についての記憶部の具体的な
構成例を示す図である。FIG. 2 is a diagram illustrating a specific configuration example of a storage unit according to the first embodiment.
【図３】上記第１実施形態についての記憶部の他の具体
的な構成例を示す図である。FIG. 3 is a diagram illustrating another specific configuration example of the storage unit according to the first embodiment.
【図４】上記第１実施形態の顔検出部における具体的な
処理を説明するための図である。FIG. 4 is a diagram for explaining specific processing in the face detection unit of the first embodiment.
【図５】上記第１実施形態についての表情識別部の具体
的な構成例を示す図である。FIG. 5 is a diagram illustrating a specific configuration example of a facial expression identification unit according to the first embodiment.
【図６】図６の表情識別部における具体的な処理を説明
するための図である。FIG. 6 is a diagram for explaining a specific process in the facial expression identification section in FIG.
【図７】上記第１実施形態における顔認証部の具体的な
処理を説明するための図である。FIG. 7 is a diagram for explaining specific processing of a face authentication unit in the first embodiment.
【図８】上記第１実施形態における顔認証部の他の具体
的な処理を説明するための図である。FIG. 8 is a diagram for explaining another specific process of the face authentication unit in the first embodiment.
【図９】上記第１実施形態についての表情変化パタン認
証部の具体的な構成例を示す図である。FIG. 9 is a diagram showing a specific configuration example of a facial expression change pattern authentication unit in the first embodiment.
【図１０】上記第１実施形態についての顔検出部の動作
を示すフローチャートである。FIG. 10 is a flowchart showing the operation of the face detection unit in the first embodiment.
【図１１】上記第１実施形態についての顔認証部の動作
を示すフローチャートである。FIG. 11 is a flowchart showing the operation of the face authentication unit in the first embodiment.
【図１２】上記第１実施形態についての表情識別部の動
作を示すフローチャートである。FIG. 12 is a flowchart showing an operation of the facial expression identifying section according to the first embodiment.
【図１３】上記第１実施形態についての表情変化パタン
認証部の動作を示すフローチャートである。FIG. 13 is a flowchart showing the operation of the facial expression change pattern authentication unit in the first embodiment.
【図１４】上記第１実施形態についてのアクセス権判定
部およびアクセスコントロール部の動作を示すフローチ
ャートである。FIG. 14 is a flowchart showing operations of an access right determination unit and an access control unit according to the first embodiment.
【図１５】本発明の第２実施形態にかかるアクセスコン
トロールシステムの構成を示すブロック図である。FIG. 15 is a block diagram showing a configuration of an access control system according to a second embodiment of the present invention.
【図１６】上記第２実施形態について設定されるアクセ
ス権レベルを説明するための図である。FIG. 16 is a diagram for explaining an access right level set in the second embodiment.
１ 記憶部 ２ カメラ ３ 顔検出部 ４ 表情識別部 ５ 本人認証部 ６ アクセス権判定部 ７ アクセスコントロール部 1 memory 2 camera 3 Face detector 4 Facial expression identification part 5 Personal Authentication Department 6 Access right judgment part 7 Access control section
フロントページの続き (72)発明者 柳沢 潔 埼玉県久喜市大字江面字大谷1836番１ 日 本信号株式会社久喜事業所内 Ｆターム(参考） 5B043 AA09 BA04 EA08 EA13 FA03 FA04 GA02 5B057 AA19 DA11 DB02 DC09 DC33 DC36 DC39 5L096 BA02 EA03 EA13 FA69 GA08 GA51 HA02 HA07 JA03 JA11 KA13 Continued front page (72) Inventor Kiyoshi Yanagisawa 1836 Otani, Omiya, Kuki City, Saitama Prefecture This signal Kuki office F-term (reference) 5B043 AA09 BA04 EA08 EA13 FA03 FA04 GA02 5B057 AA19 DA11 DB02 DC09 DC33 DC36 DC39 5L096 BA02 EA03 EA13 FA69 GA08 GA51 HA02 HA07 JA03 JA11 KA13
Claims (5)
顔画像の認識処理に基づいて本人認証を行い、該本人認
証の結果に応じて前記利用者のアクセスを許可するか否
かを制御するアクセスコントロールシステムにおいて、 利用者の顔の時間的変化を顔画像の認識処理によって識
別し、該識別結果と予め登録した顔の時間的変化に関す
る情報とを照合し、該照合結果に基づいて本人認証を行
うことを特徴とするアクセスコントロールシステム。1. A personal authentication is performed based on a recognition process of a face image obtained by capturing an image of a user who desires access, and whether or not to permit access of the user according to the result of the personal authentication. In the control access control system, the temporal change of the user's face is identified by the face image recognition process, the identification result is collated with the information regarding the temporal change of the face registered in advance, and based on the collation result. An access control system characterized by performing personal authentication.
者の顔の時間的な変化に関する登録情報およびアクセス
権に関する登録情報を少なくとも予め記憶した記憶手段
と、 アクセスを希望する利用者を撮像して顔画像を得る撮像
手段と、 該撮像手段で得た顔画像の認識処理に基づいて利用者の
顔の時間的変化を識別する顔変化識別手段と、 前記撮像手段で得た顔画像と、前記記憶手段に記憶され
た顔の特徴に関する登録情報とを照合し、かつ、前記顔
変化識別手段で識別された利用者の顔の時間的変化と前
記記憶手段に記憶された利用者の顔の時間的変化に関す
る登録情報とを照合して当該利用者が本人であるか否か
を認証し、該認証結果および前記記憶媒体に記憶された
アクセス権に関する登録情報に応じて、前記利用者のア
クセスを許可するか否かを判定する認証判定手段と、 該認証判定手段での判定結果に従って、前記利用者のア
クセスを制御するアクセスコントロール手段と、 を備えて構成されたことを特徴とする請求項１に記載の
アクセスコントロールシステム。2. A storage means for pre-storing at least registration information regarding facial features of the user, registration information regarding temporal changes of the user's face, and registration information regarding access rights, and an image of the user who desires access. An image pickup means for obtaining a face image by means of the image pickup means, a face change identification means for identifying a temporal change of the user's face based on the face image recognition processing obtained by the image pickup means, and a face image obtained by the image pickup means , The registration information relating to the facial features stored in the storage means, and the temporal change of the face of the user identified by the face change identification means and the face of the user stored in the storage means. Of the user is verified by collating it with the registration information regarding the temporal change of the user, and the user of the user is authenticated according to the authentication result and the registration information regarding the access right stored in the storage medium. Allow access The authentication determining means for determining whether or not to perform the access, and the access control means for controlling the access of the user according to the determination result by the authentication determining means. Access control system described.
で識別された利用者の顔の時間的変化と前記記憶手段に
記憶された利用者の顔の時間的変化に関する登録情報と
を基に、段階的に設定された複数のアクセス権レベルの
うちの１つを判定することを特徴とする請求項２記載の
アクセスコントロールシステム。3. The authentication judging means is based on the temporal change of the user's face identified by the face change identifying means and the registration information on the temporal change of the user's face stored in the storage means. The access control system according to claim 2, wherein one of a plurality of access right levels set in stages is determined.
化であることを特徴とする請求項１〜３のいずれか１つ
に記載のアクセスコントロールシステム。4. The access control system according to claim 1, wherein the temporal change of the user's face is a change of facial expression.
の変化であることを特徴とする請求項１〜３のいずれか
１つに記載のアクセスコントロールシステム。5. The access control system according to claim 1, wherein the temporal change of the user's face is a change of the face direction.
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2002035379A JP2003233816A (en) | 2002-02-13 | 2002-02-13 | Access control system |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2002035379A JP2003233816A (en) | 2002-02-13 | 2002-02-13 | Access control system |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| JP2003233816A true JP2003233816A (en) | 2003-08-22 |
Family
ID=27777582
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2002035379A Pending JP2003233816A (en) | 2002-02-13 | 2002-02-13 | Access control system |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP2003233816A (en) |
Cited By (15)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2006235718A (en) * | 2005-02-22 | 2006-09-07 | Nec Corp | Facial authentication device, its facial authentication method, electronic equipment integrated with the facial authentication device and recording medium with the facial authentication program stored thereon |
| CN100389600C (en) * | 2004-10-18 | 2008-05-21 | 欧姆龙株式会社 | Image pickup unit |
| WO2009093381A1 (en) * | 2008-01-21 | 2009-07-30 | Nec Corporation | Pattern matching system, pattern matching method, and program for pattern matching |
| WO2010058514A1 (en) * | 2008-11-19 | 2010-05-27 | 日本電気株式会社 | Authentication system, device, authentication method, and storage medium wherein program is stored |
| US7953254B2 (en) | 2006-10-27 | 2011-05-31 | Samsung Electronics Co., Ltd. | Method and apparatus for generating meta data of content |
| CN102693002A (en) * | 2011-02-10 | 2012-09-26 | 索尼公司 | Information processing device, information processing method, and program |
| JP2013142998A (en) * | 2012-01-11 | 2013-07-22 | Shunji Sugaya | Settlement monitoring server, settlement monitoring method and program for settlement monitoring server |
| JP2014535090A (en) * | 2011-09-28 | 2014-12-25 | グーグル インコーポレイテッド | Login to computing devices based on face recognition |
| JP2017522635A (en) * | 2014-05-12 | 2017-08-10 | ホ キム， | User authentication method, apparatus for executing the same, and recording medium storing the same |
| JP2018173891A (en) * | 2017-03-31 | 2018-11-08 | Ｎｅｃプラットフォームズ株式会社 | Authentication device, authentication method, authentication program, and database |
| JP2018538608A (en) * | 2015-10-31 | 2018-12-27 | 華為技術有限公司Ｈｕａｗｅｉ Ｔｅｃｈｎｏｌｏｇｉｅｓ Ｃｏ．，Ｌｔｄ． | Face verification method and electronic device |
| JP2019003659A (en) * | 2014-06-19 | 2019-01-10 | 日本電気株式会社 | Authentication device, authentication system, terminal device, authentication method, and computer program |
| JP2021534497A (en) * | 2018-09-26 | 2021-12-09 | ワン・コネクト・スマート・テクノロジー・カンパニー・リミテッド・（シェンチェン） | Personal identification methods, computer-readable storage media, terminal devices and devices |
| JP2022511847A (en) * | 2018-12-26 | 2022-02-01 | 巽騰（広東）科技有限公司 | Identity identification methods, devices and servers based on dynamic rasterization management |
| KR102671244B1 (en) * | 2018-12-26 | 2024-06-03 | 쉰텅 (광동) 테크놀러지 컴퍼니., 리미티드. | Identity recognition method, device and server based on dynamic rasterization management |
-
2002
- 2002-02-13 JP JP2002035379A patent/JP2003233816A/en active Pending
Cited By (31)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN100389600C (en) * | 2004-10-18 | 2008-05-21 | 欧姆龙株式会社 | Image pickup unit |
| JP2006235718A (en) * | 2005-02-22 | 2006-09-07 | Nec Corp | Facial authentication device, its facial authentication method, electronic equipment integrated with the facial authentication device and recording medium with the facial authentication program stored thereon |
| US7953254B2 (en) | 2006-10-27 | 2011-05-31 | Samsung Electronics Co., Ltd. | Method and apparatus for generating meta data of content |
| US9560411B2 (en) | 2006-10-27 | 2017-01-31 | Samsung Electronics Co., Ltd. | Method and apparatus for generating meta data of content |
| US8605958B2 (en) | 2006-10-27 | 2013-12-10 | Samsung Electronics Co., Ltd. | Method and apparatus for generating meta data of content |
| WO2009093381A1 (en) * | 2008-01-21 | 2009-07-30 | Nec Corporation | Pattern matching system, pattern matching method, and program for pattern matching |
| US8605962B2 (en) | 2008-01-21 | 2013-12-10 | Nec Corporation | Pattern matching system, pattern matching method, and pattern matching program |
| WO2010058514A1 (en) * | 2008-11-19 | 2010-05-27 | 日本電気株式会社 | Authentication system, device, authentication method, and storage medium wherein program is stored |
| US8660321B2 (en) | 2008-11-19 | 2014-02-25 | Nec Corporation | Authentication system, apparatus, authentication method, and storage medium with program stored therein |
| JP5531963B2 (en) * | 2008-11-19 | 2014-06-25 | 日本電気株式会社 | Authentication system, apparatus, authentication method and program |
| CN102693002A (en) * | 2011-02-10 | 2012-09-26 | 索尼公司 | Information processing device, information processing method, and program |
| JP2016197418A (en) * | 2011-09-28 | 2016-11-24 | グーグル インコーポレイテッド | Login to computing device based on facial recognition |
| US9419982B2 (en) | 2011-09-28 | 2016-08-16 | Google Inc. | Login to a computing device based on facial recognition |
| JP2014535090A (en) * | 2011-09-28 | 2014-12-25 | グーグル インコーポレイテッド | Login to computing devices based on face recognition |
| US9202034B2 (en) | 2011-09-28 | 2015-12-01 | Google Inc. | Login to a computing device based on facial recognition |
| JP2013142998A (en) * | 2012-01-11 | 2013-07-22 | Shunji Sugaya | Settlement monitoring server, settlement monitoring method and program for settlement monitoring server |
| JP2017522635A (en) * | 2014-05-12 | 2017-08-10 | ホ キム， | User authentication method, apparatus for executing the same, and recording medium storing the same |
| US11429700B2 (en) | 2014-06-19 | 2022-08-30 | Nec Corporation | Authentication device, authentication system, and authentication method |
| US11797659B2 (en) | 2014-06-19 | 2023-10-24 | Nec Corporation | Authentication device, authentication system, and authentication method |
| US11593465B2 (en) | 2014-06-19 | 2023-02-28 | Nec Corporation | Authentication device, authentication system, and authentication method |
| JP2019003659A (en) * | 2014-06-19 | 2019-01-10 | 日本電気株式会社 | Authentication device, authentication system, terminal device, authentication method, and computer program |
| JP2020140721A (en) * | 2014-06-19 | 2020-09-03 | 日本電気株式会社 | Authentication device, authentication method, and computer program |
| US10552593B2 (en) | 2015-10-31 | 2020-02-04 | Huawei Technologies Co., Ltd. | Face verification method and electronic device |
| JP2018538608A (en) * | 2015-10-31 | 2018-12-27 | 華為技術有限公司Ｈｕａｗｅｉ Ｔｅｃｈｎｏｌｏｇｉｅｓ Ｃｏ．，Ｌｔｄ． | Face verification method and electronic device |
| JP7004379B2 (en) | 2017-03-31 | 2022-01-21 | Ｎｅｃプラットフォームズ株式会社 | Authentication device, authentication method, and authentication program |
| JP2018173891A (en) * | 2017-03-31 | 2018-11-08 | Ｎｅｃプラットフォームズ株式会社 | Authentication device, authentication method, authentication program, and database |
| JP7105988B2 (en) | 2018-09-26 | 2022-07-25 | ワン・コネクト・スマート・テクノロジー・カンパニー・リミテッド・（シェンチェン） | Personal identification method, computer readable storage medium, terminal device and apparatus |
| JP2021534497A (en) * | 2018-09-26 | 2021-12-09 | ワン・コネクト・スマート・テクノロジー・カンパニー・リミテッド・（シェンチェン） | Personal identification methods, computer-readable storage media, terminal devices and devices |
| JP2022511847A (en) * | 2018-12-26 | 2022-02-01 | 巽騰（広東）科技有限公司 | Identity identification methods, devices and servers based on dynamic rasterization management |
| JP7213596B2 (en) | 2018-12-26 | 2023-01-27 | 巽騰（広東）科技有限公司 | Identification method, device and server based on dynamic rasterization management |
| KR102671244B1 (en) * | 2018-12-26 | 2024-06-03 | 쉰텅 (광동) 테크놀러지 컴퍼니., 리미티드. | Identity recognition method, device and server based on dynamic rasterization management |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| KR100456619B1 (en) | A system for registering and authenticating human face using support vector machines and method thereof | |
| JP5043097B2 (en) | Person identification method by eyelash analysis | |
| CN110555359B (en) | Automatic retry of facial recognition | |
| JP4760049B2 (en) | Face authentication device, face authentication method, electronic device incorporating the face authentication device, and recording medium recording the face authentication program | |
| KR100494007B1 (en) | Face image recognition device | |
| JP6151582B2 (en) | Face recognition system | |
| US8493178B2 (en) | Forged face detecting method and apparatus thereof | |
| US8422746B2 (en) | Face authentication system and authentication method thereof | |
| JP2007148968A (en) | Face authentication device, and method and program for changing security strength | |
| JP2003233816A (en) | Access control system | |
| US20220189212A1 (en) | Authentication device, authentication method, and recording medium | |
| JP2007156974A (en) | Personal identification/discrimination system | |
| JP4521086B2 (en) | Face image recognition apparatus and face image recognition method | |
| WO2020065851A1 (en) | Iris recognition device, iris recognition method and storage medium | |
| JP4899552B2 (en) | Authentication device, authentication method, authentication program, and computer-readable recording medium recording the same | |
| JP2002236666A (en) | Personal authentication device | |
| JP2005259049A (en) | Face collation device | |
| JP2003337926A (en) | Access control system | |
| JP2006085289A (en) | Facial authentication system and facial authentication method | |
| JP2003308524A (en) | Access control system | |
| JP2004078686A (en) | Personal identification device and method, passage control device and method | |
| JP2003256813A (en) | Operator monitoring device | |
| JP2000222361A (en) | Authentication method and its device using motion | |
| JP2003099780A (en) | Access control system | |
| JP2005084979A (en) | Face authentication system, method and program |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20040930 |
|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20070404 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20070417 |
|
| A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20070814 |