JP2008004050A - 個人情報認証システム、個人情報認証方法、プログラム、及び記録媒体 - Google Patents
個人情報認証システム、個人情報認証方法、プログラム、及び記録媒体 Download PDFInfo
- Publication number
- JP2008004050A JP2008004050A JP2006175918A JP2006175918A JP2008004050A JP 2008004050 A JP2008004050 A JP 2008004050A JP 2006175918 A JP2006175918 A JP 2006175918A JP 2006175918 A JP2006175918 A JP 2006175918A JP 2008004050 A JP2008004050 A JP 2008004050A
- Authority
- JP
- Japan
- Prior art keywords
- authentication
- personal information
- similarity
- instruction
- face
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Landscapes
- Image Processing (AREA)
- Image Analysis (AREA)
- Collating Specific Patterns (AREA)
Abstract
【課題】発語対象となる語をランダムにすることで、事前に予測不可能とすることができ、成りすましの可能性を低くする個人情報認証システム、個人情報認証方法、この方法を記載している情報記録媒体及びコンピュータプログラムを提供する。
【解決手段】情報処理装置1から送信され且つ認証方法の指示手段2を経由して認証方法の指示を受信する受信手段3と、受信した指示を表示画面に表示する表示手段4と、表示された指示に基づいて身体特徴を読み取る身体特徴読み取り手段5と、この身体特徴読み取り手段5から出力した認証情報を前記情報処理装置1へ送信する送信手段6とを含んでいる個人情報認証システムにおいて、前記指示手段2による前記認証方法の指示はランダムである。
【選択図】図1
【解決手段】情報処理装置1から送信され且つ認証方法の指示手段2を経由して認証方法の指示を受信する受信手段3と、受信した指示を表示画面に表示する表示手段4と、表示された指示に基づいて身体特徴を読み取る身体特徴読み取り手段5と、この身体特徴読み取り手段5から出力した認証情報を前記情報処理装置1へ送信する送信手段6とを含んでいる個人情報認証システムにおいて、前記指示手段2による前記認証方法の指示はランダムである。
【選択図】図1
Description
本発明は、商取引、書類申請、セキュリティ目的等において各個人情報を認証するのに使用する個人情報認証システム、個人情報認証方法、この方法を記載している記録媒体及びプログラムに関するものである。
従来から、商取引、書類申請、セキュリティ目的等において各個人情報を認証するために様々な個人情報認証システムが提案され且つ利用されている(例えば、特許文献1乃至3参照)。
例えば、特許文献1には、「携帯端末装置」において、個人認証の際、その度ごとにユーザが保管している個人認証装置(例えば、携帯用電子機器など)内で個人生体情報をチェックすることによって本人認証を行うことが提案されている。しかし、個人生体情報が漏洩し、成りすましの可能性がある。
一方、認証に対する精神的な抵抗感の少なさから、顔画像を用いた認証システムが使われ始めている。例えば、特許文献2の「顧客管理システム、該システムの機能を実現するプログラム及び記録媒体」には、顔認証システムによって顧客を認識し、認識結果に基づいて顧客情報を提示することが提案されている。
例えば、特許文献1には、「携帯端末装置」において、個人認証の際、その度ごとにユーザが保管している個人認証装置(例えば、携帯用電子機器など)内で個人生体情報をチェックすることによって本人認証を行うことが提案されている。しかし、個人生体情報が漏洩し、成りすましの可能性がある。
一方、認証に対する精神的な抵抗感の少なさから、顔画像を用いた認証システムが使われ始めている。例えば、特許文献2の「顧客管理システム、該システムの機能を実現するプログラム及び記録媒体」には、顔認証システムによって顧客を認識し、認識結果に基づいて顧客情報を提示することが提案されている。
しかし、1枚の静止した顔画像を使った個人認証では、双子の場合等、誤認証が問題となることがある。よって、特許文献3の「個人認証装置及び方法」では、顔画像認証手段、音声認証手段、ID番号認証手段、指紋認証手段等の認証手段のうちいずれかを2つ以上組み合わせて用いることを提案している。
こうした組み合せによる認証は有効ではあるが、異なる種類の動作を伴うため煩雑でもある。よって、顔画像だけで認証精度が向上できればその方が望ましく、その方法としては、1枚の静止画ではなく、動画像を用いる方法が考えられる。時系列の顔画像を用いた認証は、1枚の顔画像による認証よりも高い信頼性が期待できるからである。
特開2004−64650公報
特開2004−326208公報
特開2000−259828公報
こうした組み合せによる認証は有効ではあるが、異なる種類の動作を伴うため煩雑でもある。よって、顔画像だけで認証精度が向上できればその方が望ましく、その方法としては、1枚の静止画ではなく、動画像を用いる方法が考えられる。時系列の顔画像を用いた認証は、1枚の顔画像による認証よりも高い信頼性が期待できるからである。
しかしながら、前記動画像による認証では、例えば、登録された笑顔の動画像を利用して認証を行うといったことが考えられるが、動画像の場合、時系列データである性格上、観測される表情自体の再現性が十分でない場合がある。その場合には、動画像を用いたにも拘わらず、認識精度の向上が見られないことがあるという問題がある。
そこで、本出願人は、表情の動画像の再現性を上げるために、或るキーワード等を発語させ、その時の顔の動画像を用いて認証を行う技術を提案している。
そこで、本出願人は、表情の動画像の再現性を上げるために、或るキーワード等を発語させ、その時の顔の動画像を用いて認証を行う技術を提案している。
しかし、発語対象となるものが特定されている場合、事前に予測可能となるため、認識データを用意しておき易くなり、成りすましの可能性が高くなるという問題もある。
そこで、本発明の目的は、上述した実情を考慮して、発語対象となる語をランダムにすることで、事前に予測不可能とすることができ、成りすましの可能性を低くする個人情報認証システム、個人情報認証方法、この方法を記載している情報記録媒体及びコンピュータプログラムを提供することにある。
そこで、本発明の目的は、上述した実情を考慮して、発語対象となる語をランダムにすることで、事前に予測不可能とすることができ、成りすましの可能性を低くする個人情報認証システム、個人情報認証方法、この方法を記載している情報記録媒体及びコンピュータプログラムを提供することにある。
上記の課題を解決するために、請求項1に記載の発明は、情報処理装置から送信され且つ認証方法の指示手段を経由して認証方法の指示を受信する受信手段と、受信した指示を表示画面に表示する表示手段と、表示された指示に基づいて身体特徴を読み取る身体特徴読み取り手段と、該身体特徴読み取り手段から出力した認証情報を情報処理装置へ送信する送信手段と、を備え、前記指示手段による前記認証方法の指示がランダムである個人情報認証システムを特徴とする。
また請求項2に記載の発明は、前記身体特徴読み取り手段は、発語時の時系列の顔画像を取得する顔画像取得手段と、前記時系列の顔画像に基づいて人物認証を行う人物認証手段と、を有する請求項1記載の個人情報認証システムを特徴とする。
また請求項2に記載の発明は、前記身体特徴読み取り手段は、発語時の時系列の顔画像を取得する顔画像取得手段と、前記時系列の顔画像に基づいて人物認証を行う人物認証手段と、を有する請求項1記載の個人情報認証システムを特徴とする。
また請求項3に記載の発明は、前記発語には破裂音を1つ以上含む請求項2記載の個人情報認証システムを特徴とする。
また請求項4に記載の発明は、前記発語は所定回数繰り返す請求項2記載の個人情報認証システムを特徴とする。
また請求項5に記載の発明は、前記認証方法の指示は顔の向きの指示を含む請求項1記載の個人情報認証システムを特徴とする。
また請求項6に記載の発明は、前記発語のスピードが指示される請求項2記載の個人情報認証システムを特徴とする。
また請求項4に記載の発明は、前記発語は所定回数繰り返す請求項2記載の個人情報認証システムを特徴とする。
また請求項5に記載の発明は、前記認証方法の指示は顔の向きの指示を含む請求項1記載の個人情報認証システムを特徴とする。
また請求項6に記載の発明は、前記発語のスピードが指示される請求項2記載の個人情報認証システムを特徴とする。
また請求項7に記載の発明は、情報処理装置から送信され且つ認証方法の指示手段を経由して認証方法の指示を受信する受信手段と、受信した指示を表示画面に表示する表示手段と、表示された指示に基づいて身体特徴を読み取る身体特徴読み取り手段と、身体特徴読み取り手段から出力した認証情報を情報処理装置へ送信する送信手段とを含んでいる個人情報認証方法において、撮影した動画像から顔を検出する顔検出工程と、該顔検出工程において顔を検出したときに、指定した言葉の発語要求を行いそれに伴って発語された音声を音素に分解して音素フレームを抽出する工程と、前記顔検出工程において検出された顔の特徴点移動量を算出し、その算出結果に基づいて類似度を算出する算出工程と、前記算出工程で算出された類似度が閾値より大きいか否かの判別を行い、類似度が閾値より大きいと判断した場合はユーザを本人と認証し、類似度が閾値より大きくないと判断した場合はユーザを否認する認証工程とを含む個人情報認証方法を特徴とする。
また請求項8に記載の発明は、前記認証工程において、前記類似度が第1の閾値より小さいか否かの判断を行い、第1の閾値より小さい場合は、前記類似度が第2の閾値より大きいか否かの判断を行い、前記類似度が前記第2の閾値より大きい場合はユーザを本人として認証すると共に、前記類似度が前記第1の閾値より大きい場合、又は前記類似度が前記第2の閾値より大きく、且つ、全ての回数の音素フレームについて処理した場合はユーザを否認する請求項7記載の個人情報認証方法を特徴とする。
また請求項9に記載の発明は、請求項7又は8記載の個人情報認証方法を実行可能なプログラムを特徴とする。
また請求項10に記載の発明は、請求項9記載のプログラムが記載されている情報記録媒体を特徴とする。
また請求項9に記載の発明は、請求項7又は8記載の個人情報認証方法を実行可能なプログラムを特徴とする。
また請求項10に記載の発明は、請求項9記載のプログラムが記載されている情報記録媒体を特徴とする。
本発明によれば、認証方法の指示がランダムに情報処理装置より出されることによって、認証方法を事前に予測することを不可能とすることができるため、成りすましを防止することができる。
以下、図面を参照して、本発明の実施形態を詳細に説明する。図1は本発明に係る個人情報認証システムの構成を示すブロック図である。図2は図1の身体特徴読み取り手段の構成の第1の実施形態を示すブロック図である。
図3は顔領域である実線の矩形中に設定したウィンドウを示す概略図である。図4は図2の点線部であるウィンドウ内の画素値に対して、ラプラシアン等のエッジ検出オペレータを施し、所定閾値で二値化してエッジの線画像を得る眉、目、口を検出するためのウィンドウを示す概略図である。
図3は顔領域である実線の矩形中に設定したウィンドウを示す概略図である。図4は図2の点線部であるウィンドウ内の画素値に対して、ラプラシアン等のエッジ検出オペレータを施し、所定閾値で二値化してエッジの線画像を得る眉、目、口を検出するためのウィンドウを示す概略図である。
図1の個人情報認証システムAには、情報処理装置1から送信され且つ認証方法の指示手段2を経由して認証方法の指示を受信する受信手段3と、受信した指示を表示画面に表示する表示手段4と、表示された指示に基づいて身体特徴を読み取る身体特徴読み取り手段5と、この身体特徴読み取り手段5から出力した認証情報を情報処理装置1へ送信する送信手段6とを含んでいる。
図1の身体特徴読み取り手段5には、顔画像を取得する動画撮像手段7、及び人物認証手段を構成する、顔検出手段8、フレーム検出手段9、顔特徴点変位算出手段10、類似度評価手段11を含んでいる。身体特徴読み取り手段5の人物認証手段には、さらに、音声取得手段12と音声分割手段13を含んでおり、音声取得手段12は発語指定手段14を介して音声分割手段13と接続されている。
図1の身体特徴読み取り手段5には、顔画像を取得する動画撮像手段7、及び人物認証手段を構成する、顔検出手段8、フレーム検出手段9、顔特徴点変位算出手段10、類似度評価手段11を含んでいる。身体特徴読み取り手段5の人物認証手段には、さらに、音声取得手段12と音声分割手段13を含んでおり、音声取得手段12は発語指定手段14を介して音声分割手段13と接続されている。
動画撮像手段7は、個人認証システムAを利用するユーザを撮影可能な場所、例えば、入り口の映像を常時撮影しており、その映像は常に顔検出手段8に入力される(20)ようになっている。
顔検出手段8は、1フレームの画像中に、顔があるか否かを判断するものであり、顔が含まれている場合には、その領域(主に、顎から額にかけての領域)を切り出すことができるように構成されている。
顔検出手段8は、例えば、「佐部 浩太郎、日台 健一 ピクセル差分特徴を用いた実時間任意姿勢顔検出器の学習、画像センシングシンポジウム2005論文集」に記載の方法で構成できる。
前記論文集に記載の方法は、教師画像(=多くの顔画像)内の任意の2点の画素差分値をブースティング学習器に入力して閾値を学習させ、学習後の所定閾値と、検出対象の入力画像の任意の2点の画素差分値を比較して、顔画像が含まれるか否かを判別するようにしている。
顔検出手段8は、1フレームの画像中に、顔があるか否かを判断するものであり、顔が含まれている場合には、その領域(主に、顎から額にかけての領域)を切り出すことができるように構成されている。
顔検出手段8は、例えば、「佐部 浩太郎、日台 健一 ピクセル差分特徴を用いた実時間任意姿勢顔検出器の学習、画像センシングシンポジウム2005論文集」に記載の方法で構成できる。
前記論文集に記載の方法は、教師画像(=多くの顔画像)内の任意の2点の画素差分値をブースティング学習器に入力して閾値を学習させ、学習後の所定閾値と、検出対象の入力画像の任意の2点の画素差分値を比較して、顔画像が含まれるか否かを判別するようにしている。
顔検出手段8は、フレーム中に顔を検出した場合には、領域情報を付したフレーム画像をフレーム抽出手段9に入力し、検出しなかった場合には、領域情報を付さないフレーム画像をフレーム抽出手段9に入力する(21)。フレーム抽出手段9は、入力された画像を所定フレーム数だけバッファリングしている。
また、顔検出手段8は、顔を検出すると、この検出を音声取得手段12に通知し(22)、音声取得手段12が動作を開始する。本発明の身体特徴読み取り手段5の第1の実施形態は、発語すべきキーワードがランダムに指定される場合についてである。
音声取得手段12の動作開始後、この音声取得手段12はランダム指定を発語指定手段14に通知し(23)、この発語指定手段14はユーザに対して発語対象となるキーワードを表示し、キーワードの発語を促す(23)。
また、顔検出手段8は、顔を検出すると、この検出を音声取得手段12に通知し(22)、音声取得手段12が動作を開始する。本発明の身体特徴読み取り手段5の第1の実施形態は、発語すべきキーワードがランダムに指定される場合についてである。
音声取得手段12の動作開始後、この音声取得手段12はランダム指定を発語指定手段14に通知し(23)、この発語指定手段14はユーザに対して発語対象となるキーワードを表示し、キーワードの発語を促す(23)。
顔検出後、発語指定手段14が、ユーザに対して「こんにちは、とおっしゃってください」というように、発語すべきキーワードを指定する。ここで、発語すべきキーワードは或る所定数用意されていて、発語指定する際、ランダムに指定される。
例えば、今回指定されるキーワードが「こんにちは」であった場合、次回指定されるキーワードは「おはよう」というように、指定されるキーワードがユーザによって予測できないようにする。
発語キーワードである前記言葉は、発語指定手段14から音声分割手段13に対して入力されるため(24)、この入力を基にテンプレートとして参照するスペクトルが決定され、やはり最もマッチングが高くなる時間軸伸縮が求められる。
例えば、今回指定されるキーワードが「こんにちは」であった場合、次回指定されるキーワードは「おはよう」というように、指定されるキーワードがユーザによって予測できないようにする。
発語キーワードである前記言葉は、発語指定手段14から音声分割手段13に対して入力されるため(24)、この入力を基にテンプレートとして参照するスペクトルが決定され、やはり最もマッチングが高くなる時間軸伸縮が求められる。
音声取得手段12がユーザの発語を取得すると、その音声情報が発語指定手段14を経由して音声分割手段13に入力され(24)、この音声情報は音声分割手段14により、公知のDPマッチング(動的計画法マッチング)等を用いて音素に分解される。
ここで音素とは、母音(a,i,u,e,o)と濁音等と含む子音(k,s,t,n,h,m,y,r,w,g,z,d,b,p,・・・)等からなる24種類程の日本語音声の表現単位である。
ここで音素とは、母音(a,i,u,e,o)と濁音等と含む子音(k,s,t,n,h,m,y,r,w,g,z,d,b,p,・・・)等からなる24種類程の日本語音声の表現単位である。
DPマッチング法とは、予め登録された全ての音素の特徴量(例えば、20ms程度の音素のスペクトル)をテンプレートとして、入力された音声情報の時間軸を伸縮させながら、伸縮後の音声情報のスペクトルを算出して各テンプレートとの一致度を評価し、最も高い一致度をみたテンプレートの音素として、入力音声を認識する方法である。
スペクトルは、周波数帯域毎の振幅を要素とするベクトルであるから、スペクトルの一致度は、ベクトル同士の内積が所定値以上であることによって評価することができる。本実施形態では、規定のキーワードを発語することを前提としているため、テンプレートとして使用するスペクトルは最初から決まっており、最もマッチングが高くなる時間軸伸縮を求めることになる。
スペクトルは、周波数帯域毎の振幅を要素とするベクトルであるから、スペクトルの一致度は、ベクトル同士の内積が所定値以上であることによって評価することができる。本実施形態では、規定のキーワードを発語することを前提としているため、テンプレートとして使用するスペクトルは最初から決まっており、最もマッチングが高くなる時間軸伸縮を求めることになる。
音声分割手段13は、音声入力を音素に分割した後、発語直前の時刻、及び各音素が発音されている区間の中央の時刻をフレーム抽出手段3に入力し(25)、フレーム抽出手段9は、バッファリングしている画像中から、顔領域情報が付された当該時刻のフレームを抽出して、そのフレームを顔特徴点変位算出手段10に入力する(26)。
顔特徴点変位算出手段10は、顔領域(図3の実線の矩形)中に、眉、目、口を検出するためのウィンドウを設定し(図3の点線部)、このウィンドウ内の画素値に対して、ラプラシアン等のエッジ検出オペレータを施し、所定閾値で二値化してエッジの線画像を得る(図4)。
顔特徴点変位算出手段10は、顔領域(図3の実線の矩形)中に、眉、目、口を検出するためのウィンドウを設定し(図3の点線部)、このウィンドウ内の画素値に対して、ラプラシアン等のエッジ検出オペレータを施し、所定閾値で二値化してエッジの線画像を得る(図4)。
本実施形態におけるウィンドウは、顔領域として検出された矩形を基準として、相対的な位置及び大きさを有するものとして定義されており、顔領域の縦横比と各ウィンドウの縦横比は比例関係にある。従って、検出された顔領域のサイズ自体が大きければ、それに比例してウィンドウも大きく設定される。
上記各ウィンドウ内の線画は、必要に応じて孤立点除去処理を施された後、X軸及びY軸に対して正射影され(図4の矢印が射影を、太線が射影結果を示す)、各射影の両端の点(太線の両端の点)として、眉、目及び口の上下左右端点(図4の丸印)が、合計で20点検出される。
即ち、顔特徴点変位算出手段10は、発語直前のフレーム(以下、これを基準フレームと呼ぶ)及び各音素に対応したフレーム(以下、これを音素フレームと呼ぶ)に対して、先ず、上記20の特徴点の座標を検出する。ここで、X軸に対して射影された端点はX座標のみを有し、Y軸に対して射影された端点はY座標のみを有する。
上記各ウィンドウ内の線画は、必要に応じて孤立点除去処理を施された後、X軸及びY軸に対して正射影され(図4の矢印が射影を、太線が射影結果を示す)、各射影の両端の点(太線の両端の点)として、眉、目及び口の上下左右端点(図4の丸印)が、合計で20点検出される。
即ち、顔特徴点変位算出手段10は、発語直前のフレーム(以下、これを基準フレームと呼ぶ)及び各音素に対応したフレーム(以下、これを音素フレームと呼ぶ)に対して、先ず、上記20の特徴点の座標を検出する。ここで、X軸に対して射影された端点はX座標のみを有し、Y軸に対して射影された端点はY座標のみを有する。
各端点につき、基準フレームと音素フレームにおける座標の差、即ち、X軸又はY軸方向の移動距離を算出し、それを顔画像領域の大きさ(X軸方向の移動距離はX軸方向の顔領域の大きさ、Y軸方向の移動距離はY軸方向の顔領域の大きさ)で正規化して、特徴点変位量を算出する。
従って、1つの音素フレームに対して、20の特徴点移動量が算出される。よって、1つの発語は、20次元ベクトルの音素数分の配列として表現され、類似度評価手段5に入力される(27)。
従って、1つの音素フレームに対して、20の特徴点移動量が算出される。よって、1つの発語は、20次元ベクトルの音素数分の配列として表現され、類似度評価手段5に入力される(27)。
類似度評価手段11には、テンプレートとして、ユーザ毎に全ての音素に関する上記20次元ベクトルが予め登録されている。そして、音声分割手段13によって分割された音素毎にフレームが抽出され、基準フレームに対する特徴点変位量が算出される。
そして発語された各音素について、処理によって算出されたベクトルと、テンプレートのベクトル同士の類似度が内積として算出され、この内積のn音素数分の二乗和が算出される。
この「内積の二乗和」が、発語時の表情とテンプレートの類似度指標として評価され、その値が最大となるテンプレートが選択される。そして、その値が所定値以上である場合に、ユーザはテンプレートの登録者として認証される。テンプレートと同一の音素を発している状態の顔画像を抽出するため、認証に用いられる顔画像の再現性が向上し、認証精度を向上させることができる。
なお、上記所定値とは、認証システムが、本人以外の人間を本人として認証してしまう誤認証率の許容値によって決定すべき定数であり、誤認証率と閾値は負の相関関係にある。
そして発語された各音素について、処理によって算出されたベクトルと、テンプレートのベクトル同士の類似度が内積として算出され、この内積のn音素数分の二乗和が算出される。
この「内積の二乗和」が、発語時の表情とテンプレートの類似度指標として評価され、その値が最大となるテンプレートが選択される。そして、その値が所定値以上である場合に、ユーザはテンプレートの登録者として認証される。テンプレートと同一の音素を発している状態の顔画像を抽出するため、認証に用いられる顔画像の再現性が向上し、認証精度を向上させることができる。
なお、上記所定値とは、認証システムが、本人以外の人間を本人として認証してしまう誤認証率の許容値によって決定すべき定数であり、誤認証率と閾値は負の相関関係にある。
図5は本発明の個人情報認証方法の第1の実施形態の動作を示すフローチャートである。図2及び図5を参照して、動画撮像手段7で動画像を撮影し(S1)、顔検出手段8で顔を検出し(S2)、顔検出手段8の検出結果を音声取得手段12で音声取得を開始する(S3)。
次に、言葉を指定した発語要求を発語指定手段14で行う(S4)。発語された音声を音声分割手段13で音素に分解し(S5)、音素フレームをフレーム抽出手段9から抽出する(S6)。
次いで、顔特徴点変位量算出手段10で特徴点移動量を算出し(S7)、類似度を類似度評価手段11で算出し(S8)、次いで、類似度>閾値かどうかを判断し(S9)、類似度>閾値ならばユーザを本人として認証する(S10)。ステップ(S9)で類似度>閾値でないならばユーザを否認する(S11)。
次に、言葉を指定した発語要求を発語指定手段14で行う(S4)。発語された音声を音声分割手段13で音素に分解し(S5)、音素フレームをフレーム抽出手段9から抽出する(S6)。
次いで、顔特徴点変位量算出手段10で特徴点移動量を算出し(S7)、類似度を類似度評価手段11で算出し(S8)、次いで、類似度>閾値かどうかを判断し(S9)、類似度>閾値ならばユーザを本人として認証する(S10)。ステップ(S9)で類似度>閾値でないならばユーザを否認する(S11)。
本発明による個人情報認証方法の第1変形例では、発語対象となるキーワードに破裂音を1つ以上含ませ、破裂音を1つ以上含んでいるキーワードがランダムに指定されるようにしている。
例えば、「こんばんは」等のように破裂音を1つ以上含ませる。このように、破裂音を用いることで、顔の表情を大きく変化させることができるので、顔認識率を高くし、精度よく認証を行うことができる。
また、第1の実施形態では発語するキーワードをランダムに指示させたが、第1の実施形態の第2変形例では顔の向きも含めて指定するようにしている。
例えば、「こんばんは」等のように破裂音を1つ以上含ませる。このように、破裂音を用いることで、顔の表情を大きく変化させることができるので、顔認識率を高くし、精度よく認証を行うことができる。
また、第1の実施形態では発語するキーワードをランダムに指示させたが、第1の実施形態の第2変形例では顔の向きも含めて指定するようにしている。
例えば、「正面向きで「こんにちは」とおっしゃってください」、「上向きで「こんにちは」とおっしゃってください」というような指示をする。図2の類似度評価手段11にはテンプレートとして、ユーザ毎に全ての音素に対して、指定され得る全ての向きの20次元ベクトルが予め登録されている。
通常、正面以外の顔認識は認識率が低くなるため、使用される場合は少ないが、ここでは、正面向きによる顔認識を行い、さらに上向きとなった時の顔認識も行う。このように、いろいろな方向の顔画像を用いることで、成りすましをより防止する効果がある。また、いろいろな顔の向きで認証することにより、セキュリティレベルを高くすることができる。
通常、正面以外の顔認識は認識率が低くなるため、使用される場合は少ないが、ここでは、正面向きによる顔認識を行い、さらに上向きとなった時の顔認識も行う。このように、いろいろな方向の顔画像を用いることで、成りすましをより防止する効果がある。また、いろいろな顔の向きで認証することにより、セキュリティレベルを高くすることができる。
さらに、第1の実施形態の第3変形例では、発語する際のスピードも指示するようにしている。ユーザが発語するスピードが速い場合、顔認識をしにくく、顔認識率が低くなる。
そのため、例えば一文字ずつ表示していくことで発語するスピードを制御する。「こんにちは」というキーワードである場合、「こ」「ん」「に」「ち」「は」と一定のスピードで表示していく。このように発語のスピードを指示することで、精度よく認証を行うことができる。
そのため、例えば一文字ずつ表示していくことで発語するスピードを制御する。「こんにちは」というキーワードである場合、「こ」「ん」「に」「ち」「は」と一定のスピードで表示していく。このように発語のスピードを指示することで、精度よく認証を行うことができる。
図6は本発明に係る個人情報認証システムの身体特徴読み取り手段の構成の第2の実施形態を示すブロック図である。
図2の第1の実施形態の構成における部分と同一部分には同一符号を付してここでの詳細な説明は省略する。
1回目のキーワードにおける、類似度評価手段11により類似度を評価する。もし、曖昧な語があった場合、顔特徴点変位算出手段10により、曖昧であった語の特徴点変位量を算出し、類似度評価手段11により、類似度を評価する(28)。繰り返し発語をさせることで、同じ語を数回認証することができるため、認証精度を高めることができる。
図2の第1の実施形態の構成における部分と同一部分には同一符号を付してここでの詳細な説明は省略する。
1回目のキーワードにおける、類似度評価手段11により類似度を評価する。もし、曖昧な語があった場合、顔特徴点変位算出手段10により、曖昧であった語の特徴点変位量を算出し、類似度評価手段11により、類似度を評価する(28)。繰り返し発語をさせることで、同じ語を数回認証することができるため、認証精度を高めることができる。
また、第1の実施形態では、指定されたキーワードを1回発語させるようにしていたが、第2の実施形態では、発語対象となるキーワードを繰り返し発語させるようにしている。ここで、発語対象を繰り返すとは、「こんにちはこんにちは」「おはようおはよう」というようにキーワードを繰り返し発語させることである。
例えば、「こんにちはこんにちは」と2回繰り返し発語させた場合、1回目の「こんにちは」で本人であるかの認証を行う。もし、そのキーワードの中に曖昧な語があった場合、2回目の「こんにちは」と発語したキーワードの中から、曖昧であった語を用いて、再度認証を行う。
例えば、「こんにちはこんにちは」と2回繰り返し発語させた場合、1回目の「こんにちは」で本人であるかの認証を行う。もし、そのキーワードの中に曖昧な語があった場合、2回目の「こんにちは」と発語したキーワードの中から、曖昧であった語を用いて、再度認証を行う。
図7は本発明の個人情報認証方法の第2の実施形態の動作を示すフローチャートである。図6及び図7を参照して、第1の実施形態の動作の流れと同様に、動画撮像手段7で動画像を撮影し(S21)、顔検出手段8で顔を検出し(S22)、顔検出手段8の検出結果を音声取得手段12で音声取得を開始する(S23)。
次に、言葉を指定した発語要求を発語指定手段14で行う(S24)。発語された音声を音声分割手段13で音素に分解し(S25)、音素フレームをフレーム抽出手段9から抽出する(S26)。
次いで、顔特徴点変位量算出手段10で特徴点移動量を算出し(S27)、類似度を類似度評価手段11で算出し(S28)、次いで、閾値1>類似度かどうかを判断する(S29)。閾値1>類似度ならば、次に、類似度>閾値2かどうかを判断し(S30)、類似度>閾値2であるならば、ユーザを本人として認証する(S31)。
次に、言葉を指定した発語要求を発語指定手段14で行う(S24)。発語された音声を音声分割手段13で音素に分解し(S25)、音素フレームをフレーム抽出手段9から抽出する(S26)。
次いで、顔特徴点変位量算出手段10で特徴点移動量を算出し(S27)、類似度を類似度評価手段11で算出し(S28)、次いで、閾値1>類似度かどうかを判断する(S29)。閾値1>類似度ならば、次に、類似度>閾値2かどうかを判断し(S30)、類似度>閾値2であるならば、ユーザを本人として認証する(S31)。
ステップ(S29)で閾値1>類似度でないならば、ユーザを否認する(S32)。ステップ(S30)で類似度>閾値2でないならば、全ての回数の音素フレームについて処理したかどうかを判断し(S33)、処理したならば、ユーザを否認し(S34)、処理していないならば、繰り返し音素フレームを抽出し(S35)、ステップ(S27)に戻って動作を繰り返す。
なお、以上で示したフローチャートは、個人情報認証方法の実施形態でもあり、また、図示はしてないが、コンピュータが読み取り可能な情報記録媒体及びプログラムの作成も、以上の実施形態を基に容易に実施できることは明らかである。
なお、以上で示したフローチャートは、個人情報認証方法の実施形態でもあり、また、図示はしてないが、コンピュータが読み取り可能な情報記録媒体及びプログラムの作成も、以上の実施形態を基に容易に実施できることは明らかである。
A 個人情報認証システム、1 情報処理装置、2 認証方法の指示手段、3 受信手段、4 表示手段、5 身体特徴読み取り手段、6 送信手段、7 動画撮像手段、8 人物認証手段(顔検出手段)、9 人物認証手段(フレーム検出手段)、10 人物認証手段(顔特徴点変位算出手段)、11 人物認証手段(類似度評価手段)、12 人物認証手段(音声取得手段)、13 人物認証手段(音声分割手段)、14 人物認証手段(発語指定手段)
Claims (10)
- 情報処理装置から送信され且つ認証方法の指示手段を経由して認証方法の指示を受信する受信手段と、受信した指示を表示画面に表示する表示手段と、表示された指示に基づいて身体特徴を読み取る身体特徴読み取り手段と、該身体特徴読み取り手段から出力した認証情報を情報処理装置へ送信する送信手段と、を備え、前記指示手段による前記認証方法の指示がランダムであることを特徴とする個人情報認証システム。
- 前記身体特徴読み取り手段は、発語時の時系列の顔画像を取得する顔画像取得手段と、前記時系列の顔画像に基づいて人物認証を行う人物認証手段と、を有することを特徴とする請求項1記載の個人情報認証システム。
- 前記発語には破裂音を1つ以上含むことを特徴とする請求項2記載の個人情報認証システム。
- 前記発語は所定回数繰り返すことを特徴とする請求項2記載の個人情報認証システム。
- 前記認証方法の指示は顔の向きの指示を含むことを特徴とする請求項1記載の個人情報認証システム。
- 前記発語のスピードが指示されることを特徴とする請求項2記載の個人情報認証システム。
- 情報処理装置から送信され且つ認証方法の指示手段を経由して認証方法の指示を受信する受信手段と、受信した指示を表示画面に表示する表示手段と、表示された指示に基づいて身体特徴を読み取る身体特徴読み取り手段と、身体特徴読み取り手段から出力した認証情報を情報処理装置へ送信する送信手段とを含んでいる個人情報認証方法において、
撮影した動画像から顔を検出する顔検出工程と、該顔検出工程において顔を検出したときに、指定した言葉の発語要求を行いそれに伴って発語された音声を音素に分解して音素フレームを抽出する工程と、前記顔検出工程において検出された顔の特徴点移動量を算出し、その算出結果に基づいて類似度を算出する算出工程と、前記算出工程で算出された類似度が閾値より大きいか否かの判別を行い、類似度が閾値より大きいと判断した場合はユーザを本人と認証し、類似度が閾値より大きくないと判断した場合はユーザを否認する認証工程とを含むことを特徴とする個人情報認証方法。 - 前記認証工程において、前記類似度が第1の閾値より小さいか否かの判断を行い、第1の閾値より小さい場合は、前記類似度が第2の閾値より大きいか否かの判断を行い、前記類似度が前記第2の閾値より大きい場合はユーザを本人として認証すると共に、前記類似度が前記第1の閾値より大きい場合、又は前記類似度が前記第2の閾値より大きく、且つ、全ての回数の音素フレームについて処理した場合は、ユーザを否認することを特徴とする請求項7記載の個人情報認証方法。
- 請求項7又は8記載の個人情報認証方法を実行可能なプログラム。
- 請求項9記載のプログラムが記載されている情報記録媒体。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2006175918A JP2008004050A (ja) | 2006-06-26 | 2006-06-26 | 個人情報認証システム、個人情報認証方法、プログラム、及び記録媒体 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2006175918A JP2008004050A (ja) | 2006-06-26 | 2006-06-26 | 個人情報認証システム、個人情報認証方法、プログラム、及び記録媒体 |
Publications (1)
Publication Number | Publication Date |
---|---|
JP2008004050A true JP2008004050A (ja) | 2008-01-10 |
Family
ID=39008349
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2006175918A Pending JP2008004050A (ja) | 2006-06-26 | 2006-06-26 | 個人情報認証システム、個人情報認証方法、プログラム、及び記録媒体 |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP2008004050A (ja) |
Cited By (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR100815023B1 (ko) * | 2006-03-29 | 2008-03-18 | 금호타이어 주식회사 | 자동차 주행시의 타이어 마찰소음을 측정하기 위한 이동식 타이어 주행소음 측정장치 |
JP5541407B1 (ja) * | 2013-08-09 | 2014-07-09 | 富士ゼロックス株式会社 | 画像処理装置及びプログラム |
WO2015194135A1 (ja) * | 2014-06-19 | 2015-12-23 | 日本電気株式会社 | 認証装置、認証システム、認証方法およびプログラム記憶媒体 |
US10009769B2 (en) | 2016-03-15 | 2018-06-26 | Ricoh Company, Ltd. | Information processing apparatus, information processing system, method for authentication, and medium |
US10079827B2 (en) | 2015-03-16 | 2018-09-18 | Ricoh Company, Ltd. | Information processing apparatus, information processing method, and information processing system |
JP2020154496A (ja) * | 2019-03-19 | 2020-09-24 | グローリー株式会社 | 認証システム及び認証方法 |
WO2022208642A1 (ja) * | 2021-03-30 | 2022-10-06 | 日本電気株式会社 | 認証装置、処理方法、プログラム |
WO2024075550A1 (ja) * | 2022-10-05 | 2024-04-11 | Necソリューションイノベータ株式会社 | 処理装置 |
-
2006
- 2006-06-26 JP JP2006175918A patent/JP2008004050A/ja active Pending
Cited By (15)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR100815023B1 (ko) * | 2006-03-29 | 2008-03-18 | 금호타이어 주식회사 | 자동차 주행시의 타이어 마찰소음을 측정하기 위한 이동식 타이어 주행소음 측정장치 |
JP5541407B1 (ja) * | 2013-08-09 | 2014-07-09 | 富士ゼロックス株式会社 | 画像処理装置及びプログラム |
CN104346603A (zh) * | 2013-08-09 | 2015-02-11 | 富士施乐株式会社 | 图像处理装置与图像处理方法 |
US11429700B2 (en) | 2014-06-19 | 2022-08-30 | Nec Corporation | Authentication device, authentication system, and authentication method |
JPWO2015194135A1 (ja) * | 2014-06-19 | 2017-04-20 | 日本電気株式会社 | 認証装置、認証システム、認証方法およびコンピュータプログラム |
WO2015194135A1 (ja) * | 2014-06-19 | 2015-12-23 | 日本電気株式会社 | 認証装置、認証システム、認証方法およびプログラム記憶媒体 |
US11593465B2 (en) | 2014-06-19 | 2023-02-28 | Nec Corporation | Authentication device, authentication system, and authentication method |
US11797659B2 (en) | 2014-06-19 | 2023-10-24 | Nec Corporation | Authentication device, authentication system, and authentication method |
US10079827B2 (en) | 2015-03-16 | 2018-09-18 | Ricoh Company, Ltd. | Information processing apparatus, information processing method, and information processing system |
US10009769B2 (en) | 2016-03-15 | 2018-06-26 | Ricoh Company, Ltd. | Information processing apparatus, information processing system, method for authentication, and medium |
JP2020154496A (ja) * | 2019-03-19 | 2020-09-24 | グローリー株式会社 | 認証システム及び認証方法 |
WO2020189432A1 (ja) * | 2019-03-19 | 2020-09-24 | グローリー株式会社 | 認証システム及び認証方法 |
JP7229824B2 (ja) | 2019-03-19 | 2023-02-28 | グローリー株式会社 | 認証システム及び認証方法 |
WO2022208642A1 (ja) * | 2021-03-30 | 2022-10-06 | 日本電気株式会社 | 認証装置、処理方法、プログラム |
WO2024075550A1 (ja) * | 2022-10-05 | 2024-04-11 | Necソリューションイノベータ株式会社 | 処理装置 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US11663307B2 (en) | RtCaptcha: a real-time captcha based liveness detection system | |
US10789343B2 (en) | Identity authentication method and apparatus | |
KR102299847B1 (ko) | 얼굴 인증 방법 및 장치 | |
EP3477519A1 (en) | Identity authentication method, terminal device, and computer-readable storage medium | |
CN104361276B (zh) | 一种多模态生物特征身份认证方法及*** | |
US20210327431A1 (en) | 'liveness' detection system | |
JP2008004050A (ja) | 個人情報認証システム、個人情報認証方法、プログラム、及び記録媒体 | |
JP4365189B2 (ja) | 認証装置 | |
US8416998B2 (en) | Information processing device, information processing method, and program | |
WO2019127262A1 (zh) | 基于云端的人脸活体检测方法、电子设备和程序产品 | |
KR102429822B1 (ko) | 운전자의 감정상태 인식 장치 및 방법 | |
KR20010039771A (ko) | 시청각적 발성자 인식 및 발성 검증 방법 및 장치 | |
US8983207B1 (en) | Mitigating replay attacks using multiple-image authentication | |
JP7148737B2 (ja) | 生体(liveness)検出検証方法、生体検出検証システム、記録媒体、及び生体検出検証システムの訓練方法 | |
KR101724971B1 (ko) | 광각 카메라를 이용한 얼굴 인식 시스템 및 그를 이용한 얼굴 인식 방법 | |
JP4730812B2 (ja) | 個人認証装置、個人認証処理方法、そのためのプログラム及び記録媒体 | |
CN112017633B (zh) | 语音识别方法、装置、存储介质及电子设备 | |
US20220189212A1 (en) | Authentication device, authentication method, and recording medium | |
CN112507311A (zh) | 一种基于多模态特征融合的高安全性身份验证方法 | |
JP2015169977A (ja) | 本人認証装置、本人認証方法、本人認証プログラム、および自動取引システム | |
Lucey et al. | Continuous pose-invariant lipreading | |
KR20140114283A (ko) | 정보 처리 장치 | |
CN114242075A (zh) | 基于人脸和声纹的身份认证方法、装置以及设备 | |
KR20210050649A (ko) | 모바일 기기의 페이스 인증 방법 | |
JP7248348B2 (ja) | 顔認証装置、顔認証方法、及びプログラム |