JP6839313B1 - 顔認証方法、プログラム、記録媒体および顔認証システム - Google Patents

顔認証方法、プログラム、記録媒体および顔認証システム Download PDF

Info

Publication number
JP6839313B1
JP6839313B1 JP2020025377A JP2020025377A JP6839313B1 JP 6839313 B1 JP6839313 B1 JP 6839313B1 JP 2020025377 A JP2020025377 A JP 2020025377A JP 2020025377 A JP2020025377 A JP 2020025377A JP 6839313 B1 JP6839313 B1 JP 6839313B1
Authority
JP
Japan
Prior art keywords
user
face image
feature amount
authentication
image data
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2020025377A
Other languages
English (en)
Inventor
聖 中西
聖 中西
由久 新宮
由久 新宮
Original Assignee
Dxyz株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Dxyz株式会社 filed Critical Dxyz株式会社
Priority to JP2020025377A priority Critical patent/JP6839313B1/ja
Priority to JP2020102335A priority patent/JP6985460B2/ja
Priority to JP2021015335A priority patent/JP7230074B2/ja
Priority to JP2021020964A priority patent/JP2021131857A/ja
Application granted granted Critical
Publication of JP6839313B1 publication Critical patent/JP6839313B1/ja
Priority to JP2021098793A priority patent/JP2021152932A/ja
Priority to JP2021190863A priority patent/JP7038887B2/ja
Priority to JP2022035061A priority patent/JP2022075773A/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Collating Specific Patterns (AREA)
  • Measurement Of The Respiration, Hearing Ability, Form, And Blood Characteristics Of Living Organisms (AREA)
  • Image Analysis (AREA)

Abstract

【課題】容易に複数の認証エンジンで顔認証を行うことができる顔認証方法、プログラム、記録媒体および顔認証システムを提供する。【解決手段】顔認証システム10により行われる顔認証方法は、ユーザの顔画像データおよびユーザの識別情報を受け付ける工程と、受け付けたユーザの顔画像データに基づいてこのユーザの顔画像の特徴量を複数の認証エンジン30A、30B、30C毎に抽出する工程と、抽出された複数の認証エンジン30A、30B、30C毎のユーザの顔画像の特徴量に係る情報を、受け付けたユーザの識別情報に関連付けてメモリに記憶させる工程と、を備えている。【選択図】図1

Description

本発明は、顔認証方法、プログラム、記録媒体および顔認証システムに関する。
従来、顔データに基づいて認証を行う顔認証システムとして、入力された入力顔データと、予め登録された登録顔データとを照合して本人認証を行う顔認証システムが知られている(例えば、特許文献1、2参照)。
特許文献1に記載された顔認証システムでは、カメラにより撮像された撮像画像中の顔部分の画像を用いて対象人物を認証する。また、特許文献2に記載された顔認証システムでは、例えば登録される顔画像が4つの場合、2つを精度保証用の顔パターンとし、1つを外乱成分吸収用の顔パターンとし、1つを更新対象用の顔パターンとしている。そして、新たに顔パターンを登録するときには、事前に登録されている4つの顔パターンのうち、新たに登録される顔パターンとの類似度が2番目に低い更新対象用の顔パターンを削除する。すなわち、新たに登録される顔パターンとの類似度が一番低い外乱成分吸収用の顔パターンを残すことにより、環境のばらつきに順応して顔認証を行う。
特開2019−197426号公報 特開2006−72540号公報
顔認証を用いた認証エンジンを設けることは一般的に広まっているが、特許文献1、2の顔認証システムでは、顔データを登録していない認証エンジンでは、顔認証を行うことができない。このため、複数の認証エンジンそれぞれで認証を行うためには、ユーザは、複数の認証エンジンそれぞれで顔データを登録する必要があり手間がかかりストレスとなっていた。
本発明は、このような点を考慮してなされたものであり、容易に複数の認証エンジンで顔認証を行うことができる顔認証方法、プログラム、記録媒体および顔認証システムを提供することを目的とする。
本発明の顔認証方法は、顔認証システムにより行われる顔認証方法であって、ユーザの顔画像データを受け付ける工程と、受け付けたユーザの顔画像データに基づいてこのユーザの顔画像の特徴量を複数の認証エンジン毎に抽出する工程と、抽出された複数の認証エンジン毎のユーザの顔画像の特徴量に係る情報をユーザの識別情報に関連付けてメモリに記憶させる工程と、を備えたことを特徴とする。
本発明のプログラムは、プロセッサにより実行される、顔認証システムにより顔認証方法を行うためのプログラムであって、前記プロセッサが前記プログラムを実行することにより、ユーザの顔画像データを受け付け、受け付けたユーザの顔画像データに基づいてこのユーザの顔画像の特徴量を複数の認証エンジン毎に抽出し、抽出された複数の認証エンジン毎のユーザの顔画像の特徴量に係る情報をユーザの識別情報に関連付けてメモリに記憶させることを特徴とする。
本発明の記録媒体は、プロセッサにより実行される、顔認証システムにより顔認証方法を行うためのプログラムが記録された記録媒体であって、前記プロセッサが前記プログラムを実行することにより、ユーザの顔画像データを受け付け、受け付けたユーザの顔画像データに基づいてこのユーザの顔画像の特徴量を複数の認証エンジン毎に抽出し、抽出された複数の認証エンジン毎のユーザの顔画像の特徴量に係る情報をユーザの識別情報に関連付けてメモリに記憶させることを特徴とする。
本発明の顔認証システムは、プロセッサを備えた顔認証システムであって、前記プロセッサは、プログラムを実行することにより、前記プロセッサが前記プログラムを実行することにより、ユーザの顔画像データを受け付け、受け付けたユーザの顔画像データに基づいてこのユーザの顔画像の特徴量を複数の認証エンジン毎に抽出し、抽出された複数の認証エンジン毎のユーザの顔画像の特徴量に係る情報をユーザの識別情報に関連付けてメモリに記憶させることを特徴とする。
本発明の顔認証方法、プログラム、記録媒体および顔認証システムによれば、容易に複数の認証エンジンで顔認証を行うことができる。
本発明の実施の形態による顔認証システムおよび各サービス機関に配置される認証エンジンの一例を概略的に示す図である。 図1に示す顔認証システムによりユーザの顔画像の登録を行う際に実行される処理内容を示すフローチャートである。 図1に示す認証エンジンおよび顔認証システムによりユーザの認証を行う際に実行される処理内容の一例を示すフローチャートである。 本発明の実施の形態による顔認証システムおよび各サービス機関に配置される認証エンジンの他の例を概略的に示す図である。 図4に示す顔認証システムによりユーザの顔画像の登録を行う際に実行される処理内容を示すフローチャートである。 図4に示す認証エンジンおよび顔認証システムによりユーザの認証を行う際に実行される処理内容の一例を示すフローチャートである。 本発明の実施の形態による顔認証システムおよび各サービス機関に配置される認証エンジンの更に他の例を概略的に示す図である。 図7に示す顔認証システムによりユーザの顔画像の登録を行う際に実行される処理内容を示すフローチャートである。 図7に示す認証エンジンおよび顔認証システムによりユーザの認証を行う際に実行される処理内容の一例を示すフローチャートである。 ユーザ端末に表示される初期画面を示す図である。 ユーザ端末に表示される登録画面を示す図である。 ユーザ端末に表示される登録画面を示す図である。 ユーザ端末に表示されるサービス追加画面を示す図である。 ユーザ端末に表示される認証履歴の画面を示す図である。 ユーザ端末に表示される認証履歴の詳細画面を示す図である。 本発明の実施の形態による顔認証システムおよび各会社に配置される認証エンジンの更に他の例を概略的に示す図である。
以下、図面を参照して本発明の実施の形態について説明する。図1乃至図15は、本実施の形態に係る顔認証システムおよび各サービス機関に配置される認証エンジンを示す図である。
図1に示すように、飲食店、ホテル、交通機関、オフィスビル、集合住宅施設、コンビニエンスストア等の各サービス機関には、ユーザの認証を行う認証エンジン30A、30B、30Cが配置されている。なお、図1では3つの認証エンジン30A、30B、30Cが図示されているが、2つまたは4つ以上の認証エンジンが用いられてもよい。また、各認証エンジン30A、30B、30Cに対して、各サービス機関とは別の会社に設置される顔認証システム10がインターネット回線等のネットワークを介して通信可能に接続されている。また、ユーザが所持するスマートフォン等のユーザ端末20は、顔認証システム10および各認証エンジン30A、30B、30Cにインターネット回線等のネットワークを介して通信可能に接続されている。以下、顔認証システム10および各認証エンジン30A、30B、30Cの詳細について説明する。
顔認証システム10は例えばコンピュータ等から構成されており、当該顔認証システム10は、CPU等のプロセッサ12と、メモリ16と、通信部18とを有している。プロセッサ12は、ユーザ端末20から受け取った顔画像データに基づいて、各認証エンジン30A、30B、30Cに対応するユーザの顔画像の特徴量をハッシュ値として抽出する特徴量抽出手段14と、抽出されたユーザの顔画像の特徴量を登録する登録手段13とを有している。そして、プロセッサ12は、メモリ16に記憶されているプログラムを実行することにより、特徴量抽出手段14において各認証エンジン30A、30B、30Cに対応するユーザの顔画像の特徴量をハッシュ値として抽出するようになっている。具体的には、特徴量抽出手段14は、受け付けたユーザの顔画像データから所定のハッシュ関数により求めたハッシュ値を、ユーザの顔画像の特徴量として抽出する。なお、ユーザの顔画像データが同じであっても、認証エンジン30A、30B、30Cの種類によってユーザの顔画像の特徴量が異なる場合がある。事業会社等のサービス機関が異なると、これらのサービス機関で使用される認証エンジン30A、30B、30Cの仕様も異なるからである。このため、特徴量抽出手段14は、認証エンジン30A、30B、30C毎にユーザの顔画像の特徴量を抽出する。すなわち、1つの顔画像データから、各認証エンジン30A、30B、30Cに対応する複数のユーザの顔画像の特徴量が抽出される。また、プロセッサ12は、メモリ16に記憶されているプログラムを実行することにより、特徴量抽出手段14により抽出された認証エンジン30A、30B、30C毎のユーザの顔画像の特徴量(具体的には、ハッシュ値)を、登録手段13により、ユーザの識別情報および認証エンジン30A、30B、30Cの識別情報に関連付けてメモリ16に記憶させるようになっている。なお、プロセッサ12により実行されるプログラムはメモリ16に記憶されているものに限定されることはない。外部装置から顔認証システム10に送信されたプログラムや、顔認証システム10に着脱自在に装着される記録媒体に記憶されているプログラムをプロセッサ12が実行することにより、特徴量抽出手段14および登録手段13の各々において処理が行われてもよい。
上述したように、メモリ16には、特徴量抽出手段14により抽出されたユーザの顔画像の特徴量(具体的には、ハッシュ値)が、ユーザの識別情報および認証エンジン30A、30B、30Cの識別情報に関連付けられて記憶されるようになっている。上述したように、特徴量抽出手段14により抽出されるユーザの顔画像の特徴量は、認証エンジン30A、30B、30Cの種類によって異なる場合がある。このため、特徴量抽出手段14は、認証エンジン30A、30B、30C毎にユーザの顔画像の特徴量を抽出する。このことにより、特徴量抽出手段14により抽出されるユーザの顔画像の特徴量も、各認証エンジン30A、30B、30Cに関連付けてメモリ16に記憶させる必要がある。また、メモリ16には、ユーザの識別情報と、このユーザにより選択されたサービス機関とが関連付けられて記憶されるようになっている。また、上述したように、メモリ16は、プロセッサ12において様々な処理を行わせるためのプログラムを記憶するようになっている。また、プロセッサ12は、通信部18によりインターネット回線等のネットワークを介して各サービス機関に配置される認証エンジン30A、30B、30Cまたはユーザ端末20と信号の送受信を行うようになっている。
各サービス機関に配置される認証エンジン30A、30B、30Cの各々は例えばコンピュータ等から構成されており、各認証エンジン30A、30B、30Cは、CPU等のプロセッサ32A、32B、32Cと、メモリ36A、36B、36Cと、撮像部38A、38B、38Cと、処理部40A、40B、40Cと、通信部42A、42B、42Cとを有している。プロセッサ32A、32B、32Cは、撮像部38A、38B、38Cにより撮像されたユーザの顔画像データに基づいてユーザの顔画像の特徴量をハッシュ値として抽出する特徴量抽出手段34A、34B、34Cと、認証手段35A、35B、35Cとを有している。そして、プロセッサ32A、32B、32Cは、メモリ36A、36B、36Cに記憶されているプログラムを実行することにより、特徴量抽出手段34A、34B、34Cにおいてユーザの顔画像の特徴量をハッシュ値として抽出するようになっている。具体的には、特徴量抽出手段34A、34B、34Cは、受け付けたユーザの顔画像データから所定のハッシュ関数により求めたハッシュ値を、ユーザの顔画像の特徴量として抽出する。また、プロセッサ32A、32B、32Cは、メモリ36A、36B、36Cに記憶されているプログラムを実行することにより、認証手段35A、35B、35Cにおいてユーザの認証を行うようになっている。このような処理内容の詳細については後述する。なお、プロセッサ32A、32B、32Cにより実行されるプログラムはメモリ36A、36B、36Cに記憶されているものに限定されることはない。外部装置から認証エンジン30A、30B、30Cに送信されたプログラムや、認証エンジン30A、30B、30Cに着脱自在に装着される記録媒体に記憶されているプログラムをプロセッサ32A、32B、32Cが実行することにより、特徴量抽出手段34A、34B、34Cおよび認証手段35A、35B、35Cの各々において様々な処理が行われてもよい。また、各認証エンジン30A、30B、30Cは、それぞれ、1つのサービス機関に対応するものに限定されない。例えば、認証エンジン30Aが複数のサービス機関に対応するものであってもよい。
また、メモリ36A、36B、36Cは、予め登録されたユーザの識別情報と、このユーザの顔画像の特徴量とを関連付けて記憶するようになっている。また、上述したように、メモリ36A、36B、36Cは、プロセッサ32A、32B、32Cにおいて様々な処理を行わせるためのプログラムを記憶するようになっている。また、撮像部38A、38B、38Cは例えばカメラを有しており、ユーザを撮像することにより当該ユーザの顔画像データを取得するようになっている。
また、処理部40A、40B、40Cは、認証が行われたユーザに対して様々な処理を行うようになっている。例えば、認証エンジン30A、30B、30Cがオフィスビルや集合住宅施設等に配置されている場合には、処理部40A、40B、40Cは、ユーザの認証が行われた場合に、これらのオフィスビルや集合住宅施設の出入り口等に配置される扉の施錠を解除するようになる。また、認証エンジン30A、30B、30Cが飲食店、ホテル、交通機関、コンビニエンスストア等に配置されている場合には、これらのサービス機関で料金の支払いを行う際にキャッシュレスによる決済を可能とする。この場合には、認証エンジン30A、30B、30Cから金融機関やクレジットカード会社のサーバに支払い情報が送信されることにより、ユーザの銀行口座から支払い金額が自動的に引き落とされたりクレジットカードの利用明細に追加されたりするようになる。また、プロセッサ32A、32B、32Cは、通信部42A、42B、42Cによりインターネット回線等のネットワークを介して顔認証システム10またはユーザ端末20と信号の送受信を行うようになっている。
また、各認証エンジン30A、30B、30Cにおいて、ユーザの顔画像を撮像部38A、38B、38Cにより撮像することによって、このユーザの顔画像の特徴量を各認証エンジン30A、30B、30Cで登録することができるようになっている。具体的には、ユーザの顔画像の特徴量を各認証エンジン30A、30B、30Cで登録する際に、ユーザの顔画像が撮像部38A、38B、38Cにより撮像されると、プロセッサ32A、32B、32Cは、撮像部38A、38B、38Cにより撮像されたユーザの顔画像データに基づいて、特徴量抽出手段34A、34B、34Cによりユーザの顔画像の特徴量をハッシュ値として抽出する。そして、この抽出されたユーザの顔画像の特徴量(具体的には、ハッシュ値)がメモリ36A、36B、36Cに記憶される。このようにして、ユーザの顔画像の特徴量が各認証エンジン30A、30B、30Cにおいて登録される。
ユーザ端末20ではオンラインストア等により顔認証アプリをインストールすることができるようになっている。このような顔認証アプリをインストールすると、ユーザはユーザ端末20により顔画像データの登録、サービスを利用するサービス機関の登録等を行うことができるようになる。このような顔認証アプリの処理内容については後述する。なお、このような顔認証アプリは顔認証システム10から提供されるようになっていてもよく、あるいは顔認証システム10とは別のシステムから提供されるようになっていてもよい。
本実施の形態では、顔認証システム10および各サービス機関に配置される認証エンジン30A、30B、30CはAPI連携(アプリケーション・プログラミング・インターフェース)が行われている。これにより、各認証エンジン30A、30B、30Cのシステムを、それぞれ独立して構成したものに比べて、各認証エンジン30A、30B、30Cのシステムを容易に構成することができる。
次に、顔認証システム10および各認証エンジン30A、30B、30Cによりユーザの認証を行う際の処理内容について図2、図3および図10乃至図12を用いて説明する。
まず、ユーザがユーザ端末20を用いて顔画像データを顔認証システム10に登録する処理について説明する。最初に、ユーザは顔認証アプリをユーザ端末20にインストールする。このような顔認証アプリの初期画面では図10に示す画面が表示される。ユーザは、ユーザ端末20においてこのような顔認証アプリで最初にユーザ登録を行う。具体的には、図10に示す画面においてアカウントボタンを押すと、図11に示すようなユーザ登録画面となる。このようなユーザ登録画面において氏名、生年月日、電話番号、メールアドレス、パスワード等の登録情報を入力し、利用規約に同意する欄にチェックを入れた後に登録ボタンを押下すると、図12に示すような顔画像の撮像画面となる。このような撮像画面でユーザがユーザ端末20により顔画像を撮像すると、ユーザ登録画面で入力された様々な情報およびユーザの顔画像データがユーザ端末20から顔認証システム10に送信される。このようにして、顔認証システム10のプロセッサ12はユーザ端末20から顔画像データを受け取る(STEP1)。また、ユーザ端末20の識別情報、およびユーザ端末20に入力されたユーザの氏名、生年月日、電話番号、メールアドレス、パスワード等の登録情報も、顔認証システム10のプロセッサ12はユーザ端末20から受け取る。また、プロセッサ12はユーザの識別情報としてユーザIDを発行し、この発行されたユーザIDをメモリ16に記憶させる。
次に、顔認証システム10のプロセッサ12は、ユーザ端末20から受け取った顔画像データに基づいて、各認証エンジン30A、30B、30Cに対応する顔画像の特徴量をハッシュ値として特徴量抽出手段14により抽出する(STEP2)。この際に、特徴量抽出手段14により抽出されるユーザの顔画像の特徴量は、認証エンジン30A、30B、30Cの種類によって異なる場合がある。このため、特徴量抽出手段14は、認証エンジン30A、30B、30C毎にユーザの顔画像の特徴量を抽出する。また、特徴量抽出手段14は、ユーザにより予め選択されたサービス機関の認証エンジン30A、30B、30Cに対応するユーザの顔画像の特徴量のみを抽出する。例えば、認証エンジン30Aが設置されるサービス機関についてはユーザが顔画像データを使うことを認めているが、認証エンジン30Bが設置されるサービス機関についてはユーザが顔画像データを使うことを認めていない場合には、特徴量抽出手段14は、認証エンジン30Aに対応するユーザの顔画像の特徴量のみを抽出する。なお、上述したように、メモリ16には、ユーザの識別情報と、このユーザにより選択されたサービス機関とが関連付けられて記憶されるようになっている。そして、プロセッサ12は、特徴量抽出手段14により抽出された各認証エンジン30A、30B、30Cに対応する顔画像の特徴量を、登録手段13により顔認証システム10のメモリ16にユーザID(ユーザの識別情報)および認証エンジン30A、30B、30Cの識別情報に関連付けて記憶させる(STEP3)。このようにして、ユーザ端末20により撮像されたユーザの顔画像の登録が完了する。また、メモリ16に記憶されたユーザの顔画像の特徴量に係る情報は、顔認証システム10から、ユーザにより選択されたサービス機関の認証エンジン30A、30B、30Cに送信される(STEP4)。この際に、認証エンジン30A、30B、30Cには、この認証エンジン30A、30B、30Cに対応するユーザの顔画像の特徴量が送信される。認証エンジン30A、30B、30Cは、顔認証システム10から送信されたユーザの顔画像の特徴量に係る情報を、ユーザの識別情報に関連付けてメモリ36A、36B、36Cに記憶させる。
次に、各認証エンジン30A、30B、30Cにおいてユーザの認証を行う処理について説明する。各認証エンジン30A、30B、30Cが設置されるサービス機関においてユーザの認証が必要となった場合には、まず、認証エンジン30A、30B、30Cの撮像部38A、38B、38Cによりユーザを撮像することによってユーザの顔画像データを取得する(STEP11)。また、認証エンジン30A、30B、30Cにおいて、プロセッサ32A、32B、32Cは、取得された顔画像データに基づいて特徴量抽出手段34A、34B、34Cによりユーザの顔画像の特徴量をハッシュ値として抽出する(STEP12)。そして、プロセッサ32A、32B、32Cは、特徴量抽出手段34A、34B、34Cにより抽出されたユーザの顔画像の特徴量(具体的には、ハッシュ値)と、メモリ36A、36B、36Cに記憶されているユーザの顔画像の特徴量(具体的には、ハッシュ値)とを比較することによりユーザの認証を行う(STEP13)。より詳細に説明すると、特徴量抽出手段34A、34B、34Cにより抽出されたユーザの顔画像の特徴量と、メモリ36A、36B、36Cに記憶されているユーザの顔画像の特徴量との一致率が所定の閾値(例えば、80%)を超える場合には、認証手段35A、35B、35Cはユーザの認証を行う。なお、上述したように、メモリ36A、36B、36Cには、予め登録されたユーザの識別情報と、このユーザの顔画像の特徴量とが関連付けて記憶されている。
そして、認証手段35A、35B、35Cによりユーザの認証が行われると(STEP14の「YES」)、プロセッサ32A、32B、32Cは各処理部40A、40B、40Cによりこの認証エンジン30A、30B、30Cに対応するサービスを実施可能とする(STEP15)。具体的には、上述したように、認証エンジン30A、30B、30Cがオフィスビルや集合住宅施設等に配置されている場合には、処理部40A、40B、40Cは、ユーザの認証が行われた場合に、これらのオフィスビルや集合住宅施設の出入り口等に配置される扉の施錠を解除する。また、認証エンジン30A、30B、30Cが飲食店、ホテル、交通機関、コンビニエンスストア等に配置されている場合には、これらのサービス機関で料金の支払いを行う際にキャッシュレスによる決済を可能とする。なお、キャッシュレスによる決済が行われる場合には、二段階認証が行われるようにしてもよい。その後、認証エンジン30A、30B、30Cのプロセッサ32A、32B、32Cは、サービスの利用状況に係る情報を顔認証システム10に送信する(STEP17)。このことにより、顔認証システム10において各サービス機関におけるサービスの利用状況に係る情報がユーザ毎にメモリ16に記憶される。
一方、特徴量抽出手段34A、34B、34Cにより抽出されたユーザの顔画像の特徴量が、メモリ36A、36B、36Cに記憶されているユーザの顔画像の特徴量に略一致せず、認証手段35A、35B、35Cによりユーザの認証を行うことができなかった場合には(STEP14の「NO」)、プロセッサ32A、32B、32Cは各処理部40A、40B、40Cによりこの認証エンジン30A、30B、30Cに対応するサービスを実施不可とする(STEP16)。この場合も、認証エンジン30A、30B、30Cのプロセッサ32A、32B、32Cは、サービスの利用状況に係る情報(具体的には、ユーザが認証エンジン30A、30B、30Cで認証を行おうとしたが認証されずにサービスを利用できなかったという情報)を顔認証システム10に送信する(STEP17)。
このような認証方法によれば、ユーザの顔画像の特徴量があるサービス機関の認証エンジン(例えば、認証エンジン30A)で登録されているが、別のサービス機関の認証エンジン(例えば、認証エンジン30B)で登録されていない場合でも、顔認証システム10のメモリ16および各認証エンジン30A、30B、30Cのメモリ36A、36B、36Cにこのユーザの顔画像の特徴量を認証エンジン30A、30B、30Cの識別情報に関連付けて記憶させておくことにより、ユーザの顔画像の特徴量が登録されていないサービス機関でも撮像部によりユーザの顔画像を撮像することによってユーザの認証を行うことができる。この場合には、複数の認証エンジンの全てでユーザは顔画像データの登録を行う必要がなくなるので、ユーザの手間を省くことができるようになる。
なお、本実施の形態による顔認証システム10や顔認証方法は図1乃至図3に示すものに限定されることはない。本実施の形態による顔認証システム10や顔認証方法の他の例について図4乃至図6を用いて説明する。なお、図4に示す顔認証システム10や各認証エンジン30A、30B、30Cについて、図1に示す顔認証システム10や各認証エンジン30A、30B、30Cと同じ構成要素については同じ参照符号を付けてその説明を省略する。
図4に示すように、顔認証システム10のプロセッサ12は、ユーザ端末20から受け取った顔画像データに基づいて、各認証エンジン30A、30B、30Cに対応するユーザの顔画像の特徴量をハッシュ値として抽出する特徴量抽出手段14と、抽出されたユーザの顔画像の特徴量を登録する登録手段13と、各認証エンジン30A、30B、30Cの撮像部38A〜38Cに撮像されたユーザの顔画像の特徴量(具体的には、ハッシュ値)に基づいてユーザの認証を行う認証手段15とを有している。プロセッサ12は、メモリ16に記憶されているプログラムを実行することにより、登録手段13において特徴量抽出手段14により抽出されたユーザの顔画像の特徴量(具体的には、ハッシュ値)を、ユーザの識別情報および認証エンジン30A、30B、30Cの識別情報に関連付けてメモリ16に記憶させるようになっている。また、プロセッサ12は、メモリ16に記憶されているプログラムを実行することにより、認証手段15において、各認証エンジン30A、30B、30Cの撮像部38A〜38Cに撮像されたユーザの顔画像の特徴量(具体的には、ハッシュ値)と、メモリ16に記憶されている各認証エンジン30A、30B、30Cに対応するユーザの顔画像の特徴量(具体的には、ハッシュ値)とを比較することにより、ユーザの認証を行うようになっている。なお、プロセッサ12により実行されるプログラムはメモリ16に記憶されているものに限定されることはない。外部装置から顔認証システム10に送信されたプログラムや、顔認証システム10に着脱自在に装着される記録媒体に記憶されているプログラムをプロセッサ12が実行することにより、特徴量抽出手段14、登録手段13および認証手段15の各々において処理が行われてもよい。
各サービス機関に配置される認証エンジン30A、30B、30Cの各々は例えばコンピュータ等から構成されており、各認証エンジン30A、30B、30Cは、CPU等のプロセッサ32A、32B、32Cと、メモリ36A、36B、36Cと、撮像部38A、38B、38Cと、処理部40A、40B、40Cと、通信部42A、42B、42Cとを有している。プロセッサ32A、32B、32Cは、撮像部38A、38B、38Cにより撮像されたユーザの顔画像データに基づいてユーザの顔画像の特徴量をハッシュ値として抽出する特徴量抽出手段34A、34B、34Cを有している。なお、図4に示す例では、プロセッサ32A、32B、32Cは図1に示すような認証手段35A、35B、35Cを有していない。プロセッサ32A、32B、32Cは、メモリ36A、36B、36Cに記憶されているプログラムを実行することにより、特徴量抽出手段34A、34B、34Cにおいてユーザの顔画像の特徴量をハッシュ値として抽出するようになっている。具体的には、特徴量抽出手段34A、34B、34Cは、受け付けたユーザの顔画像データから所定のハッシュ関数により求めたハッシュ値を、ユーザの顔画像の特徴量として抽出する。なお、プロセッサ32A、32B、32Cにより実行されるプログラムはメモリ36A、36B、36Cに記憶されているものに限定されることはない。外部装置から認証エンジン30A、30B、30Cに送信されたプログラムや、認証エンジン30A、30B、30Cに着脱自在に装着される記録媒体に記憶されているプログラムをプロセッサ32A、32B、32Cが実行することにより、特徴量抽出手段34A、34B、34Cにおいて様々な処理が行われてもよい。また、図4に示す例では、メモリ36A、36B、36Cには、ユーザの顔画像の特徴量が記憶されないようになっている。
図4に示す例でも、顔認証システム10および各サービス機関に配置される認証エンジン30A、30B、30CはAPI連携(アプリケーション・プログラミング・インターフェース)が行われている。これにより、各認証エンジン30A、30B、30Cのシステムを、それぞれ独立して構成したものに比べて、各認証エンジン30A、30B、30Cのシステムを容易に構成することができる。
次に、図4に示すような顔認証システム10および各認証エンジン30A、30B、30Cによりユーザの認証を行う際の処理内容について図5および図6を用いて説明する。
まず、ユーザがユーザ端末20を用いて顔画像データを顔認証システム10に登録する処理について説明する。なお、ユーザがユーザ端末20により顔画像を撮像する具体的な方法については既に説明したためここでは省略する。ユーザがユーザ端末20においてこのような顔認証アプリで最初にユーザ登録を行うと、ユーザ登録画面で入力された様々な情報およびユーザの顔画像データがユーザ端末20から顔認証システム10に送信される。このようにして、顔認証システム10のプロセッサ12はユーザ端末20から顔画像データを受け取る(STEP21)。また、ユーザ端末20の識別情報、およびユーザ端末20に入力されたユーザの氏名、生年月日、電話番号、メールアドレス、パスワード等の登録情報も、顔認証システム10のプロセッサ12はユーザ端末20から受け取る。また、プロセッサ12はユーザの識別情報としてユーザIDを発行し、この発行されたユーザIDをメモリ16に記憶させる。
次に、顔認証システム10のプロセッサ12は、ユーザ端末20から受け取った顔画像データに基づいて、各認証エンジン30A、30B、30Cに対応する顔画像の特徴量をハッシュ値として特徴量抽出手段14により抽出する(STEP22)。この際に、特徴量抽出手段14により抽出されるユーザの顔画像の特徴量は、認証エンジン30A、30B、30Cの種類によって異なる場合があり、特徴量抽出手段14は、認証エンジン30A、30B、30C毎にユーザの顔画像の特徴量を抽出する。また、特徴量抽出手段14は、ユーザにより予め選択されたサービス機関の認証エンジン30A、30B、30Cに対応するユーザの顔画像の特徴量のみを抽出する。そして、プロセッサ12は、特徴量抽出手段14により抽出された各認証エンジン30A、30B、30Cに対応する顔画像の特徴量を、登録手段13により顔認証システム10のメモリ16にユーザID(ユーザの識別情報)および認証エンジン30A、30B、30Cの識別情報に関連付けて記憶させる(STEP23)。このようにして、ユーザ端末20により撮像されたユーザの顔画像の登録が完了する。なお、図4に示す例では、メモリ16に記憶されたユーザの顔画像の特徴量に係る情報は、顔認証システム10から、ユーザにより選択されたサービス機関の認証エンジン30A、30B、30Cに送信されない。
次に、各認証エンジン30A、30B、30Cにおいてユーザの認証を行う処理について説明する。各認証エンジン30A、30B、30Cが設置されるサービス機関においてユーザの認証が必要となった場合には、まず、認証エンジン30A、30B、30Cの撮像部38A、38B、38Cによりユーザを撮像することによってユーザの顔画像データを取得する(STEP31)。また、認証エンジン30A、30B、30Cにおいて、プロセッサ32A、32B、32Cは、取得された顔画像データに基づいて特徴量抽出手段34A、34B、34Cによりユーザの顔画像の特徴量をハッシュ値として抽出する(STEP32)。そして、プロセッサ32A、32B、32Cは、特徴量抽出手段34A、34B、34Cにより抽出されたユーザの顔画像の特徴量(具体的には、ハッシュ値)を通信部42A、42B、42Cにより顔認証システム10のプロセッサ12に送信する(STEP33)。なお、顔認証システム10のプロセッサ12が認証エンジン30A、30B、30Cからユーザの顔画像の特徴量に係る情報を受け付ける際に、メモリ16に記憶されている、ユーザにより選択されたサービス機関の認証エンジン30A、30B、30Cのみから送信されたユーザの顔画像の特徴量に係る情報を受け付ける。そして、顔認証システム10において、プロセッサ12は、認証エンジン30A、30B、30Cから受け付けたユーザの顔画像の特徴量(具体的には、ハッシュ値)と、メモリ16に記憶されているユーザの顔画像の特徴量(具体的には、ハッシュ値)とを認証手段15によって比較することによりユーザの認証を行う(STEP34)。より詳細に説明すると、認証エンジン30A、30B、30Cから受け付けたユーザの顔画像の特徴量と、メモリ16に記憶されているユーザの顔画像の特徴量との一致率が所定の閾値(例えば、80%)を超える場合には、認証手段15はユーザの認証を行う。なお、上述したように、メモリ16には、予め登録されたユーザの識別情報および認証エンジン30A、30B、30Cの識別情報と、ユーザの顔画像の特徴量とが関連付けて記憶されている。
そして、認証手段15によりユーザの認証が行われると(STEP35の「YES」)、認証結果に係る情報が顔認証システム10のプロセッサ12から通信部18により認証エンジン30A、30B、30Cに送信される(STEP36)。そして、認証結果に係る情報を受け取った認証エンジン30A、30B、30Cのプロセッサ32A、32B、32Cは、各処理部40A、40B、40Cによりこの認証エンジン30A、30B、30Cに対応するサービスを実施可能とする(STEP37)。その後、認証エンジン30A、30B、30Cのプロセッサ32A、32B、32Cは、サービスの利用状況に係る情報を顔認証システム10に送信する。このことにより、顔認証システム10において各サービス機関におけるサービスの利用状況に係る情報がユーザ毎にメモリ16に記憶される。
一方、認証エンジン30A、30B、30Cから受け付けたユーザの顔画像の特徴量が、メモリ16に記憶されているユーザの顔画像の特徴量に略一致せず、認証手段15によりユーザの認証を行うことができなかった場合にも(STEP35の「NO」)、認証結果に係る情報が顔認証システム10のプロセッサ12から通信部18により認証エンジン30A、30B、30Cに送信される(STEP38)。そして、認証結果に係る情報を受け取った認証エンジン30A、30B、30Cのプロセッサ32A、32B、32Cは各処理部40A、40B、40Cによりこの認証エンジン30A、30B、30Cに対応するサービスを実施不可とする(STEP39)。この場合も、認証エンジン30A、30B、30Cのプロセッサ32A、32B、32Cは、サービスの利用状況に係る情報(具体的には、ユーザが認証エンジン30A、30B、30Cで認証を行おうとしたが認証されずにサービスを利用できなかったという情報)を顔認証システム10に送信する。
このような認証方法によれば、ユーザの顔画像の特徴量があるサービス機関の認証エンジン(例えば、認証エンジン30A)で登録されているが、別のサービス機関の認証エンジン(例えば、認証エンジン30B)で登録されていない場合でも、顔認証システム10のメモリ16にこのユーザの顔画像の特徴量を認証エンジン30A、30B、30Cの識別情報に関連付けて記憶させておくことにより、ユーザの顔画像の特徴量が登録されていないサービス機関でも撮像部によりユーザの顔画像を撮像することによってユーザの認証を行うことができる。この場合には、複数の認証エンジンの全てでユーザは顔画像データの登録を行う必要がなくなるので、ユーザの手間を省くことができるようになる。
また。本実施の形態による顔認証システム10や顔認証方法の更に他の例について図7乃至図9を用いて説明する。なお、図7に示す顔認証システム10や各認証エンジン30A、30B、30Cについて、図1や図4に示す顔認証システム10や各認証エンジン30A、30B、30Cと同じ構成要素については同じ参照符号を付けてその説明を省略する。
図7に示すように、顔認証システム10のプロセッサ12は、ユーザ端末20から受け取った顔画像データに基づいて、各認証エンジン30A、30B、30Cに対応するユーザの顔画像の特徴量をハッシュ値として抽出する特徴量抽出手段14と、抽出されたユーザの顔画像の特徴量を登録する登録手段13と、各認証エンジン30A、30B、30Cの撮像部38A〜38Cに撮像されたユーザの顔画像の特徴量(具体的には、ハッシュ値)に基づいてユーザの認証を行う認証手段15とを有している。プロセッサ12は、メモリ16に記憶されているプログラムを実行することにより、登録手段13において特徴量抽出手段14により抽出されたユーザの顔画像の特徴量(具体的には、ハッシュ値)を、ユーザの識別情報および認証エンジン30A、30B、30Cの識別情報に関連付けてメモリ16に記憶させるようになっている。また、プロセッサ12は、メモリ16に記憶されているプログラムを実行することにより、認証手段15において、各認証エンジン30A、30B、30Cの撮像部38A〜38Cに撮像されたユーザの顔画像の特徴量(具体的には、ハッシュ値)と、メモリ16に記憶されている各認証エンジン30A、30B、30Cに対応するユーザの顔画像の特徴量(具体的には、ハッシュ値)とを比較することにより、ユーザの認証を行うようになっている。なお、プロセッサ12により実行されるプログラムはメモリ16に記憶されているものに限定されることはない。外部装置から顔認証システム10に送信されたプログラムや、顔認証システム10に着脱自在に装着される記録媒体に記憶されているプログラムをプロセッサ12が実行することにより、特徴量抽出手段14、登録手段13および認証手段15の各々において処理が行われてもよい。
各サービス機関に配置される認証エンジン30A、30B、30Cの各々は例えばコンピュータ等から構成されており、各認証エンジン30A、30B、30Cは、CPU等のプロセッサ32A、32B、32Cと、メモリ36A、36B、36Cと、撮像部38A、38B、38Cと、処理部40A、40B、40Cと、通信部42A、42B、42Cとを有している。プロセッサ32A、32B、32Cは、撮像部38A、38B、38Cにより撮像されたユーザの顔画像データに基づいてユーザの顔画像の特徴量をハッシュ値として抽出する特徴量抽出手段34A、34B、34Cを有している。なお、図7に示す例では、プロセッサ32A、32B、32Cは図1に示すような特徴量抽出手段34A、34B、34Cおよび認証手段35A、35B、35Cを有していない。また、図7に示す例では、メモリ36A、36B、36Cには、ユーザの顔画像の特徴量が記憶されないようになっている。
図7に示す例でも、顔認証システム10および各サービス機関に配置される認証エンジン30A、30B、30CはAPI連携(アプリケーション・プログラミング・インターフェース)が行われている。これにより、各認証エンジン30A、30B、30Cのシステムを、それぞれ独立して構成したものに比べて、各認証エンジン30A、30B、30Cのシステムを容易に構成することができる。
次に、図7に示すような顔認証システム10および各認証エンジン30A、30B、30Cによりユーザの認証を行う際の処理内容について図8および図9を用いて説明する。
まず、ユーザがユーザ端末20を用いて顔画像データを顔認証システム10に登録する処理について説明する。なお、ユーザがユーザ端末20により顔画像を撮像する具体的な方法については既に説明したためここでは省略する。ユーザがユーザ端末20においてこのような顔認証アプリで最初にユーザ登録を行うと、ユーザ登録画面で入力された様々な情報およびユーザの顔画像データがユーザ端末20から顔認証システム10に送信される。このようにして、顔認証システム10のプロセッサ12はユーザ端末20から顔画像データを受け取る(STEP41)。また、ユーザ端末20の識別情報、およびユーザ端末20に入力されたユーザの氏名、生年月日、電話番号、メールアドレス、パスワード等の登録情報も、顔認証システム10のプロセッサ12はユーザ端末20から受け取る。また、プロセッサ12はユーザの識別情報としてユーザIDを発行し、この発行されたユーザIDをメモリ16に記憶させる。
次に、顔認証システム10のプロセッサ12は、ユーザ端末20から受け取った顔画像データに基づいて、各認証エンジン30A、30B、30Cに対応する顔画像の特徴量をハッシュ値として特徴量抽出手段14により抽出する(STEP42)。この際に、特徴量抽出手段14により抽出されるユーザの顔画像の特徴量は、認証エンジン30A、30B、30Cの種類によって異なる場合があり、特徴量抽出手段14は、認証エンジン30A、30B、30C毎にユーザの顔画像の特徴量を抽出する。また、特徴量抽出手段14は、ユーザにより予め選択されたサービス機関の認証エンジン30A、30B、30Cに対応するユーザの顔画像の特徴量のみを抽出する。そして、プロセッサ12は、特徴量抽出手段14により抽出された各認証エンジン30A、30B、30Cに対応する顔画像の特徴量を、登録手段13により顔認証システム10のメモリ16にユーザID(ユーザの識別情報)および認証エンジン30A、30B、30Cの識別情報に関連付けて記憶させる(STEP43)。このようにして、ユーザ端末20により撮像されたユーザの顔画像の登録が完了する。なお、図7に示す例では、メモリ16に記憶されたユーザの顔画像の特徴量に係る情報は、顔認証システム10から、ユーザにより選択されたサービス機関の認証エンジン30A、30B、30Cに送信されない。
次に、各認証エンジン30A、30B、30Cにおいてユーザの認証を行う処理について説明する。各認証エンジン30A、30B、30Cが設置されるサービス機関においてユーザの認証が必要となった場合には、まず、認証エンジン30A、30B、30Cの撮像部38A、38B、38Cによりユーザを撮像することによってユーザの顔画像データを取得する(STEP51)。認証エンジン30A、30B、30Cのプロセッサ32A、32B、32Cは、撮像部38A、38B、38Cにより撮像されたユーザの顔画像データを通信部42A、42B、42Cにより顔認証システム10のプロセッサ12に送信する(STEP52)。なお、顔認証システム10のプロセッサ12が認証エンジン30A、30B、30Cからユーザの顔画像データを受け付ける際に、メモリ16に記憶されている、ユーザにより選択されたサービス機関の認証エンジン30A、30B、30Cのみから送信されたユーザの顔画像データを受け付ける。そして、顔認証システム10において、プロセッサ12は、認証エンジン30A、30B、30Cから受け付けた顔画像データに基づいて特徴量抽出手段14によりユーザの顔画像の特徴量をハッシュ値として抽出する(STEP53)。そして、プロセッサ12は、特徴量抽出手段14により抽出されたユーザの顔画像の特徴量(具体的には、ハッシュ値)と、メモリ16に記憶されているユーザの顔画像の特徴量(具体的には、ハッシュ値)とを認証手段15によって比較することによりユーザの認証を行う(STEP54)。より詳細に説明すると、特徴量抽出手段14により抽出されたユーザの顔画像の特徴量と、メモリ16に記憶されているユーザの顔画像の特徴量との一致率が所定の閾値(例えば、80%)を超える場合には、認証手段15はユーザの認証を行う。なお、上述したように、メモリ16には、予め登録されたユーザの識別情報および認証エンジン30A、30B、30Cの識別情報と、ユーザの顔画像の特徴量とが関連付けて記憶されている。
そして、認証手段15によりユーザの認証が行われると(STEP55の「YES」)、認証結果に係る情報が顔認証システム10のプロセッサ12から通信部18により認証エンジン30A、30B、30Cに送信される(STEP56)。そして、認証結果に係る情報を受け取った認証エンジン30A、30B、30Cのプロセッサ32A、32B、32Cは、各処理部40A、40B、40Cによりこの認証エンジン30A、30B、30Cに対応するサービスを実施可能とする(STEP57)。その後、認証エンジン30A、30B、30Cのプロセッサ32A、32B、32Cは、サービスの利用状況に係る情報を顔認証システム10に送信する。このことにより、顔認証システム10において各サービス機関におけるサービスの利用状況に係る情報がユーザ毎にメモリ16に記憶される。
一方、認証エンジン30A、30B、30Cから受け付けたユーザの顔画像の特徴量が、メモリ16に記憶されているユーザの顔画像の特徴量に略一致せず、認証手段15によりユーザの認証を行うことができなかった場合にも(STEP55の「NO」)、認証結果に係る情報が顔認証システム10のプロセッサ12から通信部18により認証エンジン30A、30B、30Cに送信される(STEP58)。そして、認証結果に係る情報を受け取った認証エンジン30A、30B、30Cのプロセッサ32A、32B、32Cは各処理部40A、40B、40Cによりこの認証エンジン30A、30B、30Cに対応するサービスを実施不可とする(STEP59)。この場合も、認証エンジン30A、30B、30Cのプロセッサ32A、32B、32Cは、サービスの利用状況に係る情報(具体的には、ユーザが認証エンジン30A、30B、30Cで認証を行おうとしたが認証されずにサービスを利用できなかったという情報)を顔認証システム10に送信する。
このような認証方法によれば、ユーザの顔画像の特徴量があるサービス機関の認証エンジン(例えば、認証エンジン30A)で登録されているが、別のサービス機関の認証エンジン(例えば、認証エンジン30B)で登録されていない場合でも、顔認証システム10のメモリ16にこのユーザの顔画像の特徴量を認証エンジン30A、30B、30Cの識別情報に関連付けて記憶させておくことにより、ユーザの顔画像の特徴量が登録されていないサービス機関でも撮像部によりユーザの顔画像を撮像することによってユーザの認証を行うことができる。この場合には、複数の認証エンジンの全てでユーザは顔画像データの登録を行う必要がなくなるので、ユーザの手間を省くことができるようになる。
次に、図1乃至図9に示すような顔認証システム10において、上述した顔認証サービスが適用されるサービス機関をユーザが増やしたい場合の処理について説明する。ユーザが上述したユーザ登録を行った後、図10に示すようなユーザ端末20の初期画面において「サービス追加」のボタンをユーザが指で押すと、図13に示すようなサービス機関の一覧が表示される。なお、このようなサービス機関の一覧は、予め顔認証システム10に登録されたものである。図13に示すような画面において、未登録サービスのアイコンと登録済サービスのアイコンとは別の色で表示されたり、未登録サービスのアイコンが薄く表示されたりする等により、未登録サービスのアイコンと登録済サービスのアイコンとが区別して表示される。そして、ユーザが未登録サービスのアイコンを指で押すと、追加するサービスの規約が表示される。ユーザがサービスの規約に合意する旨の指示を入力すると、未登録サービスが登録済サービスになる。この際に、顔認証システム10において、この登録済サービスに関連するサービス機関がユーザID(ユーザの識別情報)に関連付けられてメモリ16に記憶される。その後、ユーザ端末20には図12に示すような顔画像の撮像画面が表示される。このような撮像画面でユーザがユーザ端末20により顔画像を撮像すると、ユーザの顔画像データがユーザ端末20から顔認証システム10に送信される。このようにして、顔認証システム10のプロセッサ12はユーザ端末20から顔画像データを受け取る。そして、顔認証システム10のプロセッサ12は、ユーザ端末20から受け取った顔画像データに基づいて、新たなサービス機関の認証エンジンに対応する顔画像の特徴量をハッシュ値として特徴量抽出手段14により抽出する。プロセッサ12は、特徴量抽出手段14により抽出された新たな認証エンジンに対応する顔画像の特徴量を、登録手段13により顔認証システム10のメモリ16にユーザID(ユーザの識別情報)および新たなサービス機関の認証エンジンの識別情報に関連付けて記憶させる。このようにして、新たなサービス機関の登録が完了する。なお、後述するようにメモリ16にユーザの顔画像データが記憶されている場合には、新たなサービス機関をユーザがユーザ端末20で登録する際に、ユーザ端末20によりユーザの顔画像を撮像しなくても、メモリ16に記憶されているユーザの顔画像データに基づいて、新たなサービス機関の認証エンジンに対応する顔画像の特徴量をハッシュ値として特徴量抽出手段14により抽出してもよい。また、図13に示すような画面において、ユーザが登録済サービスを削除することができるようになっていてもよい。この場合には、登録済サービスが未登録サービスになる。また、メモリ16に記憶されている、削除された登録済サービスに係るサービス機関の認証エンジンに対応するユーザの顔画像の特徴量に係る情報が削除される。
また、ユーザが上述したユーザ登録を行った後、図10に示すようなユーザ端末20の初期画面において「認証履歴」のボタンをユーザが指で押すと、図14に示すような過去の認証履歴情報の一覧(言い換えると、ユーザによるサービス機関の利用状況に係る情報の一覧)がユーザ端末20に表示されるようになる。より詳細には、顔認証システム10のメモリ16には、ユーザの過去の認証履歴情報がユーザの識別情報に関連付けられて記憶されている。そして、図10に示すようなユーザ端末20の初期画面において「認証履歴」のボタンがユーザにより指で押されると、ユーザ端末20から顔認証システム10のプロセッサ12によりユーザの過去の認証履歴情報を求める信号が送信される。顔認証システム10のプロセッサ12は、ユーザの過去の認証履歴情報を求める信号をユーザ端末20から受け取ると、メモリ16に記憶されているこのユーザの識別情報に対応する過去の認証履歴情報を通信部18によりユーザ端末20に送信する。このことにより、ユーザ端末20には、このユーザの過去の認証履歴情報の一覧が表示されるようになる。また、図14に示すような過去の認証履歴情報の一覧において、ある認証履歴の表示をユーザが指で押すと、図15に示すようにユーザ端末20にはこの認証履歴の詳細が表示されるようになる。
また、本実施の形態では、ユーザがユーザ端末20を用いて顔認証システム10におけるユーザの顔認証の特徴量の登録を行う代わりに、ユーザがある認証エンジン30A、30B、30Cを用いて顔認証システム10におけるユーザの顔認証の特徴量の登録を行うようになっていてもよい。具体的には、ある認証エンジン30A、30B、30Cにおいてユーザが登録情報を入力するとともに撮像部38A、38B、38Cによりユーザの顔画像を撮像すると、入力された登録情報およびユーザの顔画像データが認証エンジン30A、30B、30Cから顔認証システム10に送信される。このようにして、顔認証システム10のプロセッサ12は認証エンジン30A、30B、30Cから顔画像データを受け取る。また、プロセッサ12は認証エンジン30A、30B、30Cから受け取った登録情報に基づいてユーザの識別情報としてユーザIDを発行し、この発行されたユーザIDをメモリ16に記憶させる。
次に、顔認証システム10のプロセッサ12は、認証エンジン30A、30B、30Cから受け取った顔画像データに基づいて、各認証エンジン30A、30B、30Cに対応する顔画像の特徴量をハッシュ値として特徴量抽出手段14により抽出する。この際に、特徴量抽出手段14は、認証エンジン30A、30B、30C毎にユーザの顔画像の特徴量を抽出する。また、特徴量抽出手段14は、ユーザにより予め選択されたサービス機関の認証エンジン30A、30B、30Cに対応するユーザの顔画像の特徴量のみを抽出する。例えば、認証エンジン30Aが設置されるサービス機関についてはユーザが顔画像データを使うことを認めているが、認証エンジン30Bが設置されるサービス機関についてはユーザが顔画像データを使うことを認めていない場合には、特徴量抽出手段14は、認証エンジン30Aに対応するユーザの顔画像の特徴量のみを抽出する。なお、上述したように、メモリ16には、ユーザの識別情報と、このユーザにより選択されたサービス機関とが関連付けられて記憶されるようになっている。そして、プロセッサ12は、特徴量抽出手段14により抽出された各認証エンジン30A、30B、30Cに対応する顔画像の特徴量を、登録手段13により顔認証システム10のメモリ16にユーザID(ユーザの識別情報)および認証エンジン30A、30B、30Cの識別情報に関連付けて記憶させる。このようにして、認証エンジン30A、30B、30Cの撮像部38A、38B、38Cにより撮像されたユーザの顔画像の登録が完了する。このような態様では、ユーザがユーザ端末20を用いなくても顔認証システム10におけるユーザの顔認証の特徴量の登録を行うことができる。
以上のような構成からなる、本実施の形態に係る、顔認証システム10により行われる顔認証方法によれば、ユーザの顔画像データおよびユーザの識別情報を受け付け、受け付けたユーザの顔画像データに基づいてこのユーザの顔画像の特徴量を複数の認証エンジン30A、30B、30C毎に抽出する。そして、抽出された複数の認証エンジン30A、30B、30C毎のユーザの顔画像の特徴量に係る情報を、受け付けたユーザの識別情報に関連付けてメモリ16に記憶させる。このような顔認証方法によれば、容易に複数の認証エンジン30A、30B、30Cで顔認証を行うことができるようになる。
具体的には、従来でも顔認証を用いた認証エンジンを設けることは一般的に広まっているが、従来技術の顔認証システムでは、顔データを登録していない認証エンジンでは、顔認証を行うことができなかった。このため、複数の認証エンジンそれぞれで認証を行うためには、ユーザは、複数の認証エンジンそれぞれで顔データを登録する必要があり手間がかかりストレスとなっていた。これに対し、本実施の形態では、ユーザの顔画像の特徴量があるサービス機関の認証エンジン(例えば、認証エンジン30A)で登録されているが、別のサービス機関の認証エンジン(例えば、認証エンジン30B)で登録されていない場合でも、顔認証システム10のメモリ16にこのユーザの顔画像の特徴量を認証エンジン30A、30B、30C毎に記憶させておくことにより、ユーザの顔画像の特徴量が登録されていないサービス機関の認証エンジン30A、30B、30Cでも撮像部38A、38B、38Cによりユーザの顔画像を撮像することによってユーザの認証を行うことができる。この場合には、複数の認証エンジン30A、30B、30Cの全てでユーザは顔画像データの登録を行う必要がなくなるので、ユーザの手間を省くことができるようになる。これにより、顔画像データの登録が面倒で、顔画像データを登録していない認証エンジンを用いた各種サービスを利用していなかったユーザにも、気軽に各種サービスを利用するように促すことができる。
また、ハッシュ値等のユーザの顔画像の特徴量を抽出してメモリ16に記憶させる場合には、ユーザの顔画像データ自体をメモリ16に記憶させる場合と比較して、メモリ16に記憶されるデータ量を著しく小さくすることができる。これは、ユーザの顔画像データ自体のデータ量と比較して、ユーザの顔画像の特徴量のデータ量が小さいからである。また、この場合にはメモリ16にユーザの顔画像データ自体が保存されないため、ユーザのプライバシー性をより一層確実に保護することができる。また、ユーザの顔画像の特徴量に係る情報を顔認証システム10と各認証エンジン30A、30B、30Cとの間で送る場合には、ユーザの顔画像データを顔認証システム10と各認証エンジン30A、30B、30Cとの間で送る場合と比較してデータ通信量を著しく小さくすることができる。
また、本実施の形態の顔認証方法では、上述したように、受け付けたユーザの顔画像データに基づいてこのユーザの顔画像の特徴量を抽出する際に、ユーザの顔画像の特徴量を複数の認証エンジン30A、30B、30C毎に抽出し、抽出された複数の認証エンジン30A、30B、30C毎のユーザの顔画像の特徴量を、登録手段13によりユーザの識別情報に関連付けてメモリに記憶させる。このときには、特徴量抽出手段14により抽出されるユーザの顔画像の特徴量が、認証エンジン30A、30B、30Cの種類によって異なる場合にも対応することができる。なお、複数の認証エンジン30A、30B、30Cで同じプログラムが用いられ、特徴量抽出手段14により抽出されるユーザの顔画像の特徴量が、認証エンジン30A、30B、30Cで共通する場合には、ユーザの顔画像の特徴量を複数の認証エンジン30A、30B、30C毎に抽出しなくてもよい。
また、本実施の形態の顔認証方法では、上述したように、メモリ16には、ユーザにより選択されたサービス機関に係る情報がユーザの識別情報に関連付けられて記憶されており、受け付けたユーザの顔画像データに基づいて、このユーザの顔画像の特徴量を複数の認証エンジン30A、30B、30C毎に特徴量抽出手段14により抽出する工程において、メモリ16に記憶されているユーザにより選択されたサービス機関の認証エンジンのみに対応するユーザの顔画像の特徴量を特徴量抽出手段14により抽出する。この場合には、ユーザが選択していないサービス機関の認証エンジン30A、30B、30Cに対応するユーザの顔画像の特徴量はメモリ16に記憶されないので、セキュリティ性を向上させることができ、ユーザを安心させることができる。また、顔認証システム10が統括的に管理する認証エンジンのグループに参加する企業等は、ユーザ端末20等で顔画像データを登録するだけで、多数の認証エンジンで認証させることができるという顧客利便性の向上を顧客にアピールすることができるようになる。
また、本実施の形態の顔認証方法では、上述したように、特徴量抽出手段14は、受け付けたユーザの顔画像データから所定のハッシュ関数により求めたハッシュ値を、このユーザの顔画像の特徴量として複数の認証エンジン30A、30B、30C毎に抽出する。この場合には、ユーザの顔画像の特徴量としてハッシュ値をメモリ16に記憶させるので、顔画像データそのものをメモリ16に記憶させる場合と比較して、メモリ16に記憶されるデータ量を低減することができる。また、ハッシュ値から顔画像データを復元または推測することは難しく、顔認証システム10ではハッシュ値のみを保存するので、ユーザのプライバシー性やセキュリティ性を高めることができる。
なお、本実施の形態では、特徴量抽出手段14は、受け付けたユーザの顔画像データに基づいて、ユーザの顔画像の特徴量をハッシュ値として複数の認証エンジン30A、30B、30C毎に抽出することに限定されることはない。特徴量抽出手段14は、受け付けたユーザの顔画像データに基づいて、ユーザの顔画像の特徴量をハッシュ値とは別の種類の値で複数の認証エンジン30A、30B、30C毎に抽出するようになっていてもよい。例えば、ユーザの顔画像の特徴量として、顔の各パーツ(目、鼻、耳等)の相対位置や大きさや形等を特徴として抽出するようにしてもよい。この場合でも、ハッシュ値とは別の種類の値のデータ量が顔画像自体のデータ量よりも少ない場合には、メモリ16に記憶されるデータ量を低減することができる。
また、本実施の形態の顔認証方法では、上述したように、受け付けたユーザの顔画像データに基づいて、このユーザの顔画像の特徴量を複数の認証エンジン30A、30B、30C毎に特徴量抽出手段14により抽出する工程において、ユーザが所持するユーザ端末20から送信されたユーザの顔画像データに基づいて、このユーザの顔画像の特徴量を複数の認証エンジン30A、30B、30C毎に特徴量抽出手段14により抽出する。あるいは、受け付けたユーザの顔画像データに基づいて、このユーザの顔画像の特徴量を複数の認証エンジン30A、30B、30C毎に特徴量抽出手段14により抽出する工程において、複数の認証エンジン30A、30B、30Cのうちある認証エンジンから送信されたユーザの顔画像データに基づいて、このユーザの顔画像の特徴量を複数の認証エンジン30A、30B、30C毎に特徴量抽出手段14により抽出してもよい。
また、本実施の形態では、プロセッサ12により実行される、顔認証システム10により顔認証方法を行うためのプログラムおよびこのプログラムが記録された記録媒体が用いられる。ここで、プロセッサ12がプログラムを実行することにより、ユーザの顔画像データおよびユーザの識別情報を受け付け、受け付けたユーザの顔画像データに基づいてこのユーザの顔画像の特徴量を複数の認証エンジン30A、30B、30C毎に抽出する。そして、抽出された複数の認証エンジン30A、30B、30C毎のユーザの顔画像の特徴量に係る情報を、受け付けたユーザの識別情報に関連付けてメモリ16に記憶させる。このようなプログラムおよび記録媒体によれば、容易に複数の認証エンジン30A、30B、30Cで顔認証を行うことができるようになる。
また、本実施の形態では、プロセッサ12を備えた顔認証システム10が用いられる。このような顔認証システム10では、プロセッサ12は、プログラムを実行することにより、ユーザの顔画像データおよびユーザの識別情報を受け付け、受け付けたユーザの顔画像データに基づいてこのユーザの顔画像の特徴量を複数の認証エンジン30A、30B、30C毎に抽出する。そして、抽出された複数の認証エンジン30A、30B、30C毎のユーザの顔画像の特徴量に係る情報を、受け付けたユーザの識別情報に関連付けてメモリ16に記憶させる。このような顔認証システム10によれば、容易に複数の認証エンジン30A、30B、30Cで顔認証を行うことができるようになる。
なお、本発明による顔認証方法や顔認証システムは、上述したような態様に限定されることはなく、様々な変更を加えることができる。
例えば、顔認証システムとして図16に示すようなものが用いられてもよい。図16に示す顔認証システム50は、プロセッサ52と、第1サーバ56と、第2サーバ58と、第3サーバ60とを有している。ここで、各サーバ56、58、60は各認証エンジン30A、30B、30Cに対応している。具体的には、第1サーバ56は認証エンジン30Aに対応しており、第2サーバ58は認証エンジン30Bに対応しており、第3サーバ60は認証エンジン30Cに対応している。また、図16では3つの認証エンジン30A、30B、30Cが図示されているが、2つまたは4つ以上の認証エンジンが用いられる場合には各認証エンジンに対応してサーバが顔認証システム10に設けられる。また、プロセッサ52は、サーバ管理手段52aと、特徴量抽出手段54と、登録手段53と、認証手段55とを有している。プロセッサ52の特徴量抽出手段54、登録手段53および認証手段55は、図1、図4、図7に示す顔認証システム10のプロセッサ12の特徴量抽出手段14、登録手段13および認証手段15と略同一の機能を有している。サーバ管理手段52aは、各サーバ56、58、60の管理を行うようになっている。
各サーバ56、58、60には、各認証エンジン30A、30B、30Cに対応するユーザの顔画像のデータの特徴量がユーザの識別情報に関連付けられて記憶されている。また、各サーバ56、58、60は、インターネット回線等のネットワークを介して対応する各認証エンジン30A、30B、30Cに通信可能に接続されている。各サーバ56、58、60は、サーバ管理手段52aによりAPI(アプリケーション・プログラミング・インターフェース)で一括管理可能に構成されている。これにより、各サーバ56、58、60のシステム(プログラム)を、それぞれ独立して構成したものに比べて、各サーバ56、58、60のシステムを容易に構成することができる。また、サーバ管理手段52aと、各認証エンジン30A、30B、30Cが設置されたサービス機関とは、API連携されている。例えば、サーバ管理手段52aのプラットフォームを各サービス機関に開放して、各サービス機関においてもサーバ管理手段52aと同じプラットフォームを使用することで、各サービス機関でのサービスを行うためのシステムを容易に構築することができる。
このようなプロセッサ52および各サーバ56、58、60を有する顔認証システム50でも、プロセッサ12を有する顔認証システム10と同様の処理を行うことができる。すなわち、図16に示す顔認証システム50により行われる顔認証方法によれば、プロセッサ52は、受け付けたユーザの顔画像データに基づいてこのユーザの顔画像の特徴量を各認証エンジン30A、30B、30C毎に特徴量抽出手段54により抽出し、抽出されたユーザの顔画像の特徴量を、登録手段53によりユーザの識別情報および認証エンジン30A、30B、30Cに関連付けて各サーバ56、58、60に記憶させる。
また、各サーバ56、58、60に記憶されているユーザの顔画像の特徴量に係る情報は、各サーバ56、58、60から対応する各認証エンジン30A、30B、30Cに送信される。このことにより、各認証エンジン30A、30B、30Cにおいてユーザの認証を行う際に、撮像部38A、38B、38Cによりユーザを撮像することによってユーザの顔画像データを取得し、取得された顔画像データに基づいて特徴量抽出手段34A、34B、34Cによりユーザの顔画像の特徴量を抽出することにより、各認証エンジン30A、30B、30Cでユーザの認証を行うことができるようになる。その後、認証エンジン30A、30B、30Cのプロセッサ32A、32B、32Cは、サービスの利用状況に係る情報を顔認証システム10に送信する。このことにより、顔認証システム50において各サービス機関におけるサービスの利用状況に係る情報がユーザ毎に各サーバ56、58、60に記憶される。
ユーザの認証を行う他の方法として、各認証エンジン30A、30B、30Cにおいてユーザの認証を行う際に、撮像部38A、38B、38Cによりユーザを撮像することによってユーザの顔画像データを取得し、取得された顔画像データに基づいて特徴量抽出手段34A、34B、34Cによりユーザの顔画像の特徴量を抽出する。そして、各認証エンジン30A、30B、30Cから顔認証システム50にユーザの顔画像の特徴量に係る情報が送信される。このことにより、認証手段55によってユーザの認証を行うことができるようになる。その後、ユーザの認証結果が顔認証システム50から元の認証エンジン30A、30B、30Cに送信される。
ユーザの認証を行う更に他の方法として、各認証エンジン30A、30B、30Cにおいてユーザの認証を行う際に、撮像部38A、38B、38Cによりユーザを撮像することによってユーザの顔画像データを取得する。そして、各認証エンジン30A、30B、30Cから顔認証システム50にユーザの顔画像データが送信される。そして、プロセッサ52は、各サーバ56、58、60に送信されたユーザの顔画像データに基づいてこのユーザの顔画像の特徴量を特徴量抽出手段54により抽出し、抽出されたユーザの顔画像の特徴量と、各サーバ56、58、60に記憶されているユーザの顔画像の特徴量とを認証手段55により比較する。このことにより、認証手段55によってユーザの認証を行うことができるようになる。その後、ユーザの認証結果が顔認証システム50から元の認証エンジン30A、30B、30Cに送信される。
これらの顔認証方法によれば、容易に複数の認証エンジン30A、30B、30Cで顔認証を行うことができるようになる。
また、図1、図4、図7等に示すような顔認証システム10において、ユーザ端末20や各認証エンジン30A、30B、30Cから送信されたユーザの顔画像データそのものをプロセッサ12がメモリ16に記憶させてもよい。
また、上記の例では、各サービス機関に設置される認証エンジン30A、30B、30Cとは別に顔認証システム10、50が設置される態様が示されているが、各サービス機関に設置される認証エンジン30A、30B、30Cのうちある認証エンジンが顔認証システム10、50の機能を兼ねるようになっていてもよい。すなわち、各サービス機関に設置される認証エンジン30A、30B、30Cのうちある認証エンジンのプロセッサが、図1、図4、図7等に示す顔認証システム10のプロセッサ12における特徴量抽出手段14、登録手段13および認証手段15と同等の機能を有する特徴量抽出手段、登録手段および認証手段を有していてもよい。
10 顔認証システム
12 プロセッサ
13 登録手段
14 特徴量抽出手段
15 認証手段
16 メモリ
18 通信部
20 ユーザ端末
30A、30B、30C 認証エンジン
32A、32B、32C プロセッサ
34A、34B、34C 特徴量抽出手段
35A、35B、35C 認証手段
36A、36B、36C メモリ
38A、38B、38C 撮像部
40A、40B、40C 処理部
42A、42B、42C 通信部
50 顔認証システム
52 プロセッサ
52a サーバ管理手段
53 登録手段
54 特徴量抽出手段
55 認証手段
56 第1サーバ
58 第2サーバ
60 第3サーバ

Claims (12)

  1. 顔認証システムにより行われる情報処理方法であって、
    ユーザの顔画像データを受け付ける工程と、
    受け付けたユーザの顔画像データに基づいてこのユーザの顔画像の特徴量を複数の認証エンジン毎に抽出する工程と、
    抽出された複数の前記認証エンジン毎のユーザの顔画像の特徴量に係る情報をユーザの識別情報に関連付けてメモリに記憶させる工程と、
    前記メモリに記憶されている、ユーザの顔画像の特徴量に係る情報を各前記認証エンジンに送信する工程と、
    を備え、
    受け付けたユーザの顔画像データに基づいてこのユーザの顔画像の特徴量を複数の前記認証エンジン毎に抽出する工程において、ユーザの顔画像データが同じであっても前記認証エンジンの種類によってユーザの顔画像の特徴量が異なるようユーザの顔画像の特徴量を抽出し、
    各前記認証エンジンには、それぞれ、当該認証エンジンに対応するユーザの顔画像の特徴量に係る情報が送信され、
    前記メモリには、ユーザにより選択されたサービス機関に係る情報がユーザの識別情報に関連付けられて記憶されており、
    受け付けたユーザの顔画像データに基づいてこのユーザの顔画像の特徴量を複数の認証エンジン毎に抽出する際に、前記メモリに記憶されているユーザにより選択されたサービス機関の認証エンジンのみに対応するユーザの顔画像の特徴量を抽出する、情報処理方法。
  2. 顔認証システムにより行われる顔認証方法であって、
    ユーザの顔画像データを受け付ける工程と、
    受け付けたユーザの顔画像データに基づいてこのユーザの顔画像の特徴量を複数の認証エンジン毎に抽出する工程と、
    抽出された複数の前記認証エンジン毎のユーザの顔画像の特徴量に係る情報をユーザの識別情報に関連付けてメモリに記憶させる工程と、
    前記認証エンジンからユーザの顔画像の特徴量に係る情報を受け付ける工程と、
    受け付けたユーザの顔画像の特徴量と、前記メモリに記憶されている前記認証エンジンに対応するユーザの顔画像の特徴量とを比較することによってユーザの認証を行う工程と、
    ユーザの認証結果に係る情報を、ユーザの顔画像の特徴量に係る情報が送られてきた前記認証エンジンに送信する工程と、
    を備え、
    受け付けたユーザの顔画像データに基づいてこのユーザの顔画像の特徴量を複数の前記認証エンジン毎に抽出する工程において、ユーザの顔画像データが同じであっても前記認証エンジンの種類によってユーザの顔画像の特徴量が異なるようユーザの顔画像の特徴量を抽出し、
    前記メモリには、ユーザにより選択されたサービス機関に係る情報がユーザの識別情報に関連付けられて記憶されており、
    前記認証エンジンからユーザの顔画像の特徴量に係る情報を受け付ける際に、前記メモリに記憶されているユーザにより選択されたサービス機関の認証エンジンのみから送信されたユーザの顔画像の特徴量に係る情報を受け付ける、顔認証方法。
  3. 顔認証システムにより行われる顔認証方法であって、
    ユーザの顔画像データを受け付ける工程と、
    受け付けたユーザの顔画像データに基づいてこのユーザの顔画像の特徴量を複数の認証エンジン毎に抽出する工程と、
    抽出された複数の前記認証エンジン毎のユーザの顔画像の特徴量に係る情報をユーザの識別情報に関連付けてメモリに記憶させる工程と、
    前記認証エンジンからユーザの顔画像データを受け付ける工程と、
    受け付けたユーザの顔画像データに基づいて、ユーザの顔画像データが送られてきた前記認証エンジンに対応するユーザの顔画像の特徴量を抽出する工程と、
    抽出されたユーザの顔画像の特徴量と、前記メモリに記憶されている前記認証エンジンに対応するユーザの顔画像の特徴量とを比較することによってユーザの認証を行う工程と、
    ユーザの認証結果に係る情報を、ユーザの顔画像データが送られてきた前記認証エンジンに送信する工程と、
    を備え、
    受け付けたユーザの顔画像データに基づいてこのユーザの顔画像の特徴量を複数の前記認証エンジン毎に抽出する工程において、ユーザの顔画像データが同じであっても前記認証エンジンの種類によってユーザの顔画像の特徴量が異なるようユーザの顔画像の特徴量を抽出し、
    前記メモリには、ユーザにより選択されたサービス機関に係る情報がユーザの識別情報に関連付けられて記憶されており、
    前記認証エンジンからユーザの顔画像データに係る情報を受け付ける際に、前記メモリに記憶されているユーザにより選択されたサービス機関の認証エンジンのみから送信されたユーザの顔画像データを受け付ける、顔認証方法。
  4. プロセッサにより実行される、顔認証システムにより情報処理方法を行うためのプログラムであって、
    前記プロセッサが前記プログラムを実行することにより、
    ユーザの顔画像データを受け付け、
    受け付けたユーザの顔画像データに基づいてこのユーザの顔画像の特徴量を複数の認証エンジン毎に抽出し、
    抽出された複数の認証エンジン毎のユーザの顔画像の特徴量に係る情報をユーザの識別情報に関連付けてメモリに記憶させ、
    前記メモリに記憶されている、ユーザの顔画像の特徴量に係る情報を各前記認証エンジンに送信し、
    受け付けたユーザの顔画像データに基づいてこのユーザの顔画像の特徴量を複数の前記認証エンジン毎に抽出する際に、ユーザの顔画像データが同じであっても前記認証エンジンの種類によってユーザの顔画像の特徴量が異なるようユーザの顔画像の特徴量を抽出し、
    各前記認証エンジンには、それぞれ、当該認証エンジンに対応するユーザの顔画像の特徴量に係る情報が送信され、
    前記メモリには、ユーザにより選択されたサービス機関に係る情報がユーザの識別情報に関連付けられて記憶されており、
    受け付けたユーザの顔画像データに基づいてこのユーザの顔画像の特徴量を複数の認証エンジン毎に抽出する際に、前記メモリに記憶されているユーザにより選択されたサービス機関の認証エンジンのみに対応するユーザの顔画像の特徴量を抽出する、プログラム。
  5. プロセッサにより実行される、顔認証システムにより顔認証方法を行うためのプログラムであって、
    前記プロセッサが前記プログラムを実行することにより、
    ユーザの顔画像データを受け付け、
    受け付けたユーザの顔画像データに基づいてこのユーザの顔画像の特徴量を複数の認証エンジン毎に抽出し、
    抽出された複数の認証エンジン毎のユーザの顔画像の特徴量に係る情報をユーザの識別情報に関連付けてメモリに記憶させ、
    前記認証エンジンからユーザの顔画像の特徴量に係る情報を受け付け、
    受け付けたユーザの顔画像の特徴量と、前記メモリに記憶されている前記認証エンジンに対応するユーザの顔画像の特徴量とを比較することによってユーザの認証を行い、
    ユーザの認証結果に係る情報を、ユーザの顔画像の特徴量に係る情報が送られてきた前記認証エンジンに送信し、
    受け付けたユーザの顔画像データに基づいてこのユーザの顔画像の特徴量を複数の前記認証エンジン毎に抽出する際に、ユーザの顔画像データが同じであっても前記認証エンジンの種類によってユーザの顔画像の特徴量が異なるようユーザの顔画像の特徴量を抽出し、
    前記メモリには、ユーザにより選択されたサービス機関に係る情報がユーザの識別情報に関連付けられて記憶されており、
    前記認証エンジンからユーザの顔画像の特徴量に係る情報を受け付ける際に、前記メモリに記憶されているユーザにより選択されたサービス機関の認証エンジンのみから送信されたユーザの顔画像の特徴量に係る情報を受け付ける、プログラム。
  6. プロセッサにより実行される、顔認証システムにより顔認証方法を行うためのプログラムであって、
    前記プロセッサが前記プログラムを実行することにより、
    ユーザの顔画像データを受け付け、
    受け付けたユーザの顔画像データに基づいてこのユーザの顔画像の特徴量を複数の認証エンジン毎に抽出し、
    抽出された複数の認証エンジン毎のユーザの顔画像の特徴量に係る情報をユーザの識別情報に関連付けてメモリに記憶させ、
    前記認証エンジンからユーザの顔画像データを受け付け、
    受け付けたユーザの顔画像データに基づいて、ユーザの顔画像データが送られてきた前記認証エンジンに対応するユーザの顔画像の特徴量を抽出し、
    抽出されたユーザの顔画像の特徴量と、前記メモリに記憶されている前記認証エンジンに対応するユーザの顔画像の特徴量とを比較することによってユーザの認証を行い、
    ユーザの認証結果に係る情報を、ユーザの顔画像データが送られてきた前記認証エンジンに送信し、
    受け付けたユーザの顔画像データに基づいてこのユーザの顔画像の特徴量を複数の前記認証エンジン毎に抽出する際に、ユーザの顔画像データが同じであっても前記認証エンジンの種類によってユーザの顔画像の特徴量が異なるようユーザの顔画像の特徴量を抽出し、
    前記メモリには、ユーザにより選択されたサービス機関に係る情報がユーザの識別情報に関連付けられて記憶されており、
    前記認証エンジンからユーザの顔画像データに係る情報を受け付ける際に、前記メモリに記憶されているユーザにより選択されたサービス機関の認証エンジンのみから送信されたユーザの顔画像データを受け付ける、プログラム。
  7. プロセッサにより実行される、顔認証システムにより情報処理方法を行うためのプログラムが記録された記録媒体であって、
    前記プロセッサが前記プログラムを実行することにより、
    ユーザの顔画像データを受け付け、
    受け付けたユーザの顔画像データに基づいてこのユーザの顔画像の特徴量を複数の認証エンジン毎に抽出し、
    抽出された複数の認証エンジン毎のユーザの顔画像の特徴量に係る情報をユーザの識別情報に関連付けてメモリに記憶させ、
    前記メモリに記憶されている、ユーザの顔画像の特徴量に係る情報を各前記認証エンジンに送信し、
    受け付けたユーザの顔画像データに基づいてこのユーザの顔画像の特徴量を複数の前記認証エンジン毎に抽出する際に、ユーザの顔画像データが同じであっても前記認証エンジンの種類によってユーザの顔画像の特徴量が異なるようユーザの顔画像の特徴量を抽出し、
    各前記認証エンジンには、それぞれ、当該認証エンジンに対応するユーザの顔画像の特徴量に係る情報が送信され、
    前記メモリには、ユーザにより選択されたサービス機関に係る情報がユーザの識別情報に関連付けられて記憶されており、
    受け付けたユーザの顔画像データに基づいてこのユーザの顔画像の特徴量を複数の認証エンジン毎に抽出する際に、前記メモリに記憶されているユーザにより選択されたサービス機関の認証エンジンのみに対応するユーザの顔画像の特徴量を抽出する、記録媒体。
  8. プロセッサにより実行される、顔認証システムにより顔認証方法を行うためのプログラムが記録された記録媒体であって、
    前記プロセッサが前記プログラムを実行することにより、
    ユーザの顔画像データを受け付け、
    受け付けたユーザの顔画像データに基づいてこのユーザの顔画像の特徴量を複数の認証エンジン毎に抽出し、
    抽出された複数の認証エンジン毎のユーザの顔画像の特徴量に係る情報をユーザの識別情報に関連付けてメモリに記憶させ、
    前記認証エンジンからユーザの顔画像の特徴量に係る情報を受け付け、
    受け付けたユーザの顔画像の特徴量と、前記メモリに記憶されている前記認証エンジンに対応するユーザの顔画像の特徴量とを比較することによってユーザの認証を行い、
    ユーザの認証結果に係る情報を、ユーザの顔画像の特徴量に係る情報が送られてきた前記認証エンジンに送信し、
    受け付けたユーザの顔画像データに基づいてこのユーザの顔画像の特徴量を複数の前記認証エンジン毎に抽出する際に、ユーザの顔画像データが同じであっても前記認証エンジンの種類によってユーザの顔画像の特徴量が異なるようユーザの顔画像の特徴量を抽出し、
    前記メモリには、ユーザにより選択されたサービス機関に係る情報がユーザの識別情報に関連付けられて記憶されており、
    前記認証エンジンからユーザの顔画像の特徴量に係る情報を受け付ける際に、前記メモリに記憶されているユーザにより選択されたサービス機関の認証エンジンのみから送信されたユーザの顔画像の特徴量に係る情報を受け付ける、記録媒体。
  9. プロセッサにより実行される、顔認証システムにより顔認証方法を行うためのプログラムが記録された記録媒体であって、
    前記プロセッサが前記プログラムを実行することにより、
    ユーザの顔画像データを受け付け、
    受け付けたユーザの顔画像データに基づいてこのユーザの顔画像の特徴量を複数の認証エンジン毎に抽出し、
    抽出された複数の認証エンジン毎のユーザの顔画像の特徴量に係る情報をユーザの識別情報に関連付けてメモリに記憶させ、
    前記認証エンジンからユーザの顔画像データを受け付け、
    受け付けたユーザの顔画像データに基づいて、ユーザの顔画像データが送られてきた前記認証エンジンに対応するユーザの顔画像の特徴量を抽出し、
    抽出されたユーザの顔画像の特徴量と、前記メモリに記憶されている前記認証エンジンに対応するユーザの顔画像の特徴量とを比較することによってユーザの認証を行い、
    ユーザの認証結果に係る情報を、ユーザの顔画像データが送られてきた前記認証エンジンに送信し、
    受け付けたユーザの顔画像データに基づいてこのユーザの顔画像の特徴量を複数の前記認証エンジン毎に抽出する際に、ユーザの顔画像データが同じであっても前記認証エンジンの種類によってユーザの顔画像の特徴量が異なるようユーザの顔画像の特徴量を抽出し、
    前記メモリには、ユーザにより選択されたサービス機関に係る情報がユーザの識別情報に関連付けられて記憶されており、
    前記認証エンジンからユーザの顔画像データに係る情報を受け付ける際に、前記メモリに記憶されているユーザにより選択されたサービス機関の認証エンジンのみから送信されたユーザの顔画像データを受け付ける、記録媒体。
  10. プロセッサを備えた情報処理システムであって、
    前記プロセッサは、プログラムを実行することにより、
    ユーザの顔画像データを受け付け、
    受け付けたユーザの顔画像データに基づいてこのユーザの顔画像の特徴量を複数の認証エンジン毎に抽出し、
    抽出された複数の認証エンジン毎のユーザの顔画像の特徴量に係る情報をユーザの識別情報に関連付けてメモリに記憶させ、
    前記メモリに記憶されている、ユーザの顔画像の特徴量に係る情報を各前記認証エンジンに送信し、
    受け付けたユーザの顔画像データに基づいてこのユーザの顔画像の特徴量を複数の前記認証エンジン毎に抽出する際に、ユーザの顔画像データが同じであっても前記認証エンジンの種類によってユーザの顔画像の特徴量が異なるようユーザの顔画像の特徴量を抽出し、
    各前記認証エンジンには、それぞれ、当該認証エンジンに対応するユーザの顔画像の特徴量に係る情報が送信され、
    前記メモリには、ユーザにより選択されたサービス機関に係る情報がユーザの識別情報に関連付けられて記憶されており、
    受け付けたユーザの顔画像データに基づいてこのユーザの顔画像の特徴量を複数の認証エンジン毎に抽出する際に、前記メモリに記憶されているユーザにより選択されたサービス機関の認証エンジンのみに対応するユーザの顔画像の特徴量を抽出する、情報処理システム。
  11. プロセッサを備えた顔認証システムであって、
    前記プロセッサは、プログラムを実行することにより、
    ユーザの顔画像データを受け付け、
    受け付けたユーザの顔画像データに基づいてこのユーザの顔画像の特徴量を複数の認証エンジン毎に抽出し、
    抽出された複数の認証エンジン毎のユーザの顔画像の特徴量に係る情報をユーザの識別情報に関連付けてメモリに記憶させ、
    前記認証エンジンからユーザの顔画像の特徴量に係る情報を受け付け、
    受け付けたユーザの顔画像の特徴量と、前記メモリに記憶されている前記認証エンジンに対応するユーザの顔画像の特徴量とを比較することによってユーザの認証を行い、
    ユーザの認証結果に係る情報を、ユーザの顔画像の特徴量に係る情報が送られてきた前記認証エンジンに送信し、
    受け付けたユーザの顔画像データに基づいてこのユーザの顔画像の特徴量を複数の前記認証エンジン毎に抽出する際に、ユーザの顔画像データが同じであっても前記認証エンジンの種類によってユーザの顔画像の特徴量が異なるようユーザの顔画像の特徴量を抽出し、
    前記メモリには、ユーザにより選択されたサービス機関に係る情報がユーザの識別情報に関連付けられて記憶されており、
    前記認証エンジンからユーザの顔画像の特徴量に係る情報を受け付ける際に、前記メモリに記憶されているユーザにより選択されたサービス機関の認証エンジンのみから送信されたユーザの顔画像の特徴量に係る情報を受け付ける、顔認証システム。
  12. プロセッサを備えた顔認証システムであって、
    前記プロセッサは、プログラムを実行することにより、
    ユーザの顔画像データを受け付け、
    受け付けたユーザの顔画像データに基づいてこのユーザの顔画像の特徴量を複数の認証エンジン毎に抽出し、
    抽出された複数の認証エンジン毎のユーザの顔画像の特徴量に係る情報をユーザの識別情報に関連付けてメモリに記憶させ、
    前記認証エンジンからユーザの顔画像データを受け付け、
    受け付けたユーザの顔画像データに基づいて、ユーザの顔画像データが送られてきた前記認証エンジンに対応するユーザの顔画像の特徴量を抽出し、
    抽出されたユーザの顔画像の特徴量と、前記メモリに記憶されている前記認証エンジンに対応するユーザの顔画像の特徴量とを比較することによってユーザの認証を行い、
    ユーザの認証結果に係る情報を、ユーザの顔画像データが送られてきた前記認証エンジンに送信し、
    受け付けたユーザの顔画像データに基づいてこのユーザの顔画像の特徴量を複数の前記認証エンジン毎に抽出する際に、ユーザの顔画像データが同じであっても前記認証エンジンの種類によってユーザの顔画像の特徴量が異なるようユーザの顔画像の特徴量を抽出し、
    前記メモリには、ユーザにより選択されたサービス機関に係る情報がユーザの識別情報に関連付けられて記憶されており、
    前記認証エンジンからユーザの顔画像データに係る情報を受け付ける際に、前記メモリに記憶されているユーザにより選択されたサービス機関の認証エンジンのみから送信されたユーザの顔画像データを受け付ける、顔認証システム。
JP2020025377A 2020-02-18 2020-02-18 顔認証方法、プログラム、記録媒体および顔認証システム Active JP6839313B1 (ja)

Priority Applications (7)

Application Number Priority Date Filing Date Title
JP2020025377A JP6839313B1 (ja) 2020-02-18 2020-02-18 顔認証方法、プログラム、記録媒体および顔認証システム
JP2020102335A JP6985460B2 (ja) 2020-02-18 2020-06-12 認証システム
JP2021015335A JP7230074B2 (ja) 2020-02-18 2021-02-02 認証システムおよび情報処理方法
JP2021020964A JP2021131857A (ja) 2020-02-18 2021-02-12 顔認証方法、プログラム、記録媒体および顔認証システム
JP2021098793A JP2021152932A (ja) 2020-02-18 2021-06-14 認証システムおよび情報処理方法
JP2021190863A JP7038887B2 (ja) 2020-02-18 2021-11-25 認証システムおよび情報処理方法
JP2022035061A JP2022075773A (ja) 2020-02-18 2022-03-08 認証システムおよび情報処理方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2020025377A JP6839313B1 (ja) 2020-02-18 2020-02-18 顔認証方法、プログラム、記録媒体および顔認証システム

Related Child Applications (1)

Application Number Title Priority Date Filing Date
JP2021020964A Division JP2021131857A (ja) 2020-02-18 2021-02-12 顔認証方法、プログラム、記録媒体および顔認証システム

Publications (1)

Publication Number Publication Date
JP6839313B1 true JP6839313B1 (ja) 2021-03-03

Family

ID=74673568

Family Applications (7)

Application Number Title Priority Date Filing Date
JP2020025377A Active JP6839313B1 (ja) 2020-02-18 2020-02-18 顔認証方法、プログラム、記録媒体および顔認証システム
JP2020102335A Active JP6985460B2 (ja) 2020-02-18 2020-06-12 認証システム
JP2021015335A Active JP7230074B2 (ja) 2020-02-18 2021-02-02 認証システムおよび情報処理方法
JP2021020964A Pending JP2021131857A (ja) 2020-02-18 2021-02-12 顔認証方法、プログラム、記録媒体および顔認証システム
JP2021098793A Pending JP2021152932A (ja) 2020-02-18 2021-06-14 認証システムおよび情報処理方法
JP2021190863A Active JP7038887B2 (ja) 2020-02-18 2021-11-25 認証システムおよび情報処理方法
JP2022035061A Pending JP2022075773A (ja) 2020-02-18 2022-03-08 認証システムおよび情報処理方法

Family Applications After (6)

Application Number Title Priority Date Filing Date
JP2020102335A Active JP6985460B2 (ja) 2020-02-18 2020-06-12 認証システム
JP2021015335A Active JP7230074B2 (ja) 2020-02-18 2021-02-02 認証システムおよび情報処理方法
JP2021020964A Pending JP2021131857A (ja) 2020-02-18 2021-02-12 顔認証方法、プログラム、記録媒体および顔認証システム
JP2021098793A Pending JP2021152932A (ja) 2020-02-18 2021-06-14 認証システムおよび情報処理方法
JP2021190863A Active JP7038887B2 (ja) 2020-02-18 2021-11-25 認証システムおよび情報処理方法
JP2022035061A Pending JP2022075773A (ja) 2020-02-18 2022-03-08 認証システムおよび情報処理方法

Country Status (1)

Country Link
JP (7) JP6839313B1 (ja)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2023159600A (ja) * 2022-04-20 2023-11-01 プロパティエージェント株式会社 情報処理システムおよび情報処理方法

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002027105A (ja) * 2000-07-07 2002-01-25 Masaru Ishii インターネット電話、インターネットfax、インターネットtv電話の通信網の制御装置及び制御方法
JP2003248661A (ja) * 2002-02-25 2003-09-05 Sony Corp 認証処理装置および認証処理方法、情報処理装置および情報処理方法、認証処理システム、記録媒体、並びにプログラム
JP2005339308A (ja) * 2004-05-28 2005-12-08 Hitachi Ltd 生体認証と連携したプライバシー管理システムおよびそのための認証サーバ
JPWO2007122726A1 (ja) * 2006-04-21 2009-08-27 三菱電機株式会社 認証サーバ装置及び端末装置及び認証システム及び認証方法
JP2011134030A (ja) * 2009-12-24 2011-07-07 Hitachi Ltd 生体認証システム
JP2013178801A (ja) * 2013-04-22 2013-09-09 Fujitsu Ltd 生体認証方法及びシステム
JP2016149086A (ja) * 2015-02-13 2016-08-18 エヌ・ティ・ティ・インターネット株式会社 生体認証プラットフォームシステム、生体認証情報管理装置、生体認証情報管理方法、及び生体認証情報管理プログラム

Family Cites Families (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002041470A (ja) * 2000-07-24 2002-02-08 Nec Soft Ltd 商用サービス利用管理方式および方法
JP2003044442A (ja) * 2001-07-30 2003-02-14 Fujitsu Support & Service Kk データ認証方法及びデータ認証装置
JP2006085289A (ja) * 2004-09-14 2006-03-30 Fuji Photo Film Co Ltd 顔認証システムおよび顔認証方法
JP4794242B2 (ja) * 2005-08-30 2011-10-19 富士通株式会社 制御方法、制御プログラム及び制御装置
US8625785B2 (en) * 2008-05-15 2014-01-07 Qualcomm Incorporated Identity based symmetric cryptosystem using secure biometric model
JP2010165323A (ja) 2009-01-19 2010-07-29 Fujitsu Ltd 生体認証方法及びシステム
JP2013161261A (ja) * 2012-02-06 2013-08-19 Hitachi Consumer Electronics Co Ltd 情報処理端末、その認証制御方法、及び認証制御プログラム
JP6065623B2 (ja) 2013-02-05 2017-01-25 カシオ計算機株式会社 情報管理装置、携帯端末装置及びプログラム
JP2017064025A (ja) * 2015-09-30 2017-04-06 株式会社東京精密 収容ボックスシステム
JP6705232B2 (ja) 2016-03-17 2020-06-03 日本電気株式会社 システム、現金預け払い方法及びプログラム
US10284551B2 (en) * 2016-06-01 2019-05-07 Paypal, Inc. Electronic mechanism to self-authenticate and automate actions
JP2018074317A (ja) * 2016-10-27 2018-05-10 株式会社セキュア 人物特定支援装置

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002027105A (ja) * 2000-07-07 2002-01-25 Masaru Ishii インターネット電話、インターネットfax、インターネットtv電話の通信網の制御装置及び制御方法
JP2003248661A (ja) * 2002-02-25 2003-09-05 Sony Corp 認証処理装置および認証処理方法、情報処理装置および情報処理方法、認証処理システム、記録媒体、並びにプログラム
JP2005339308A (ja) * 2004-05-28 2005-12-08 Hitachi Ltd 生体認証と連携したプライバシー管理システムおよびそのための認証サーバ
JPWO2007122726A1 (ja) * 2006-04-21 2009-08-27 三菱電機株式会社 認証サーバ装置及び端末装置及び認証システム及び認証方法
JP2011134030A (ja) * 2009-12-24 2011-07-07 Hitachi Ltd 生体認証システム
JP2013178801A (ja) * 2013-04-22 2013-09-09 Fujitsu Ltd 生体認証方法及びシステム
JP2016149086A (ja) * 2015-02-13 2016-08-18 エヌ・ティ・ティ・インターネット株式会社 生体認証プラットフォームシステム、生体認証情報管理装置、生体認証情報管理方法、及び生体認証情報管理プログラム

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
柏木 希美 NOZOMI KASHIWAGI: "デジタル時代の消費者情報管理", ITソリューションフロンティア, vol. 34, no. 06, JPN6020035911, 20 July 2017 (2017-07-20), pages 28 - 31, ISSN: 0004351250 *

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2023159600A (ja) * 2022-04-20 2023-11-01 プロパティエージェント株式会社 情報処理システムおよび情報処理方法
JP7432806B2 (ja) 2022-04-20 2024-02-19 ミガロホールディングス株式会社 情報処理システムおよび情報処理方法

Also Published As

Publication number Publication date
JP2021131836A (ja) 2021-09-09
JP2021152932A (ja) 2021-09-30
JP7038887B2 (ja) 2022-03-18
JP7230074B2 (ja) 2023-02-28
JP6985460B2 (ja) 2021-12-22
JP2022075773A (ja) 2022-05-18
JP2021131855A (ja) 2021-09-09
JP2022022275A (ja) 2022-02-03
JP2021131857A (ja) 2021-09-09

Similar Documents

Publication Publication Date Title
US11310230B2 (en) System for electronic authentication with live user determination
US10387632B2 (en) System for provisioning and allowing secure access to a virtual credential
US20160259929A1 (en) Authentication-activated augmented reality display device
US11057377B2 (en) Transaction authentication
JP7090008B2 (ja) 本人確認支援装置および本人確認支援方法
JP6839313B1 (ja) 顔認証方法、プログラム、記録媒体および顔認証システム
KR101813950B1 (ko) 금융 자동화 기기 및 그 동작 방법
JP2019016332A (ja) カードが必要ない生体情報を利用した金融決済システム及びそれを利用した金融決済方法
EP2947633A1 (en) Automatic teller system for providing a banking service to a user operating the system, and method therefore
JP7177303B1 (ja) サービス提供システム、サービス提供方法、及びプログラム
JP7221425B2 (ja) 認証システム、認証方法、及びプログラム
JP2010066917A (ja) 個人認証システムおよび個人認証方法
JP2021077336A (ja) 顧客情報管理サーバ及び顧客情報の管理方法
JP2022117025A (ja) 本人確認方法、プログラム、及び情報システム
JP7190081B1 (ja) 認証システム、認証方法、及びプログラム
KR20190084495A (ko) 안면인식 정보와 스마트 단말기를 이용한 금융거래 시스템 및 이를 이용한 스마트 단말기를 통한 금융거래 방법
JP7151015B1 (ja) プログラム、コンピュータおよび情報処理方法
JP2019117480A (ja) 情報処理装置および認証システム
JP7271778B2 (ja) サービス提供システム、サービス提供方法、及びプログラム
JP7230120B2 (ja) サービス提供システム、サービス提供方法、及びプログラム
JP7238617B2 (ja) サービス提供装置、サービス提供システム、プログラム、及びサービス提供方法
KR20160068358A (ko) 이동 통신 단말을 이용한 전자 문서 시스템 및 그 처리 방법
JP2021144657A (ja) 情報収集支援プログラム、情報収集支援方法および情報処理装置
TR2021020535A2 (tr) Blok zi̇nci̇r aği üzeri̇nde vasi̇yet birakma si̇stemi̇
JP2023039447A (ja) プログラム、システムおよび情報処理方法

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20200218

A871 Explanation of circumstances concerning accelerated examination

Free format text: JAPANESE INTERMEDIATE CODE: A871

Effective date: 20200218

A80 Written request to apply exceptions to lack of novelty of invention

Free format text: JAPANESE INTERMEDIATE CODE: A80

Effective date: 20200218

A975 Report on accelerated examination

Free format text: JAPANESE INTERMEDIATE CODE: A971005

Effective date: 20200401

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20200415

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20200612

A711 Notification of change in applicant

Free format text: JAPANESE INTERMEDIATE CODE: A711

Effective date: 20200923

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20200924

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20201113

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20210201

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20210212

R150 Certificate of patent or registration of utility model

Ref document number: 6839313

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

S111 Request for change of ownership or part of ownership

Free format text: JAPANESE INTERMEDIATE CODE: R313114

R371 Transfer withdrawn

Free format text: JAPANESE INTERMEDIATE CODE: R371

S111 Request for change of ownership or part of ownership

Free format text: JAPANESE INTERMEDIATE CODE: R313114

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

S111 Request for change of ownership or part of ownership

Free format text: JAPANESE INTERMEDIATE CODE: R313117

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250