JP7509216B2 - Input control device, input system, input control method and input control program - Google Patents

Input control device, input system, input control method and input control program Download PDF

Info

Publication number
JP7509216B2
JP7509216B2 JP2022550082A JP2022550082A JP7509216B2 JP 7509216 B2 JP7509216 B2 JP 7509216B2 JP 2022550082 A JP2022550082 A JP 2022550082A JP 2022550082 A JP2022550082 A JP 2022550082A JP 7509216 B2 JP7509216 B2 JP 7509216B2
Authority
JP
Japan
Prior art keywords
authentication
user
input
biometric
control device
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2022550082A
Other languages
Japanese (ja)
Other versions
JPWO2022059081A5 (en
JPWO2022059081A1 (en
Inventor
秀典 北方
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
NEC Corp
Original Assignee
NEC Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by NEC Corp filed Critical NEC Corp
Publication of JPWO2022059081A1 publication Critical patent/JPWO2022059081A1/ja
Publication of JPWO2022059081A5 publication Critical patent/JPWO2022059081A5/en
Application granted granted Critical
Publication of JP7509216B2 publication Critical patent/JP7509216B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F21/00Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F21/30Authentication, i.e. establishing the identity or authorisation of security principals
    • G06F21/31User authentication
    • G06F21/32User authentication using biometric data, e.g. fingerprints, iris scans or voiceprints

Landscapes

  • Engineering & Computer Science (AREA)
  • Computer Security & Cryptography (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Hardware Design (AREA)
  • Software Systems (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Collating Specific Patterns (AREA)
  • User Interface Of Digital Computer (AREA)

Description

本開示は、入力制御装置、入力システム、入力制御方法及び非一時的なコンピュータ可読媒体に関する。 The present disclosure relates to an input control device, an input system, an input control method, and a non-transitory computer-readable medium.

近年、様々なシーンにおいて生体認証が活用されている。生体認証には、例えば、顔認証、指紋認証、虹彩認証等、様々な方式がある。
特許文献1には、ユーザによる所定のジェスチャがトリガとなって生体認証が実行され、生体認証が成功すると、ユーザに対してサービスインターフェースが提示されるシステムが開示されている。
また、特許文献2には、家の玄関や軒先に設置して、家に入ろうとする人物(ユーザ)を監視するインターフェース装置が開示されている。このインターフェース装置は、顔認証、指紋認証、虹彩認証などを用いて、ユーザの個人認証を行う。入室資格のあるユーザに対しては、パスワード入力パッドを表す像を玄関の壁などに照射し、照射された像に対するユーザの壁などに対する接触入力を受け付ける。ユーザは、像に対し正しいパスワードを入力することで、家に入ることができる。
上記のような像の照射及びその像に対する入力に関連して、特許文献3には、対話システムのためのジェスチャ認識に基づく仮想ユーザ・インターフェース対話の方法が開示されている。この方法では、まず、複数の画像において二つの手を検出し、それぞれの手のジェスチャを認識する。一方の手がポイント・ジェスチャ、他方の手がオープン・ジェスチャを行っていると認識された場合、オープン・ジェスチャの手の上に仮想ユーザ・インターフェースを投影し、ポイント・ジェスチャの手の人差し指の先端を追跡する。
In recent years, biometric authentication has come to be used in a variety of situations. There are various methods for biometric authentication, such as face authentication, fingerprint authentication, and iris authentication.
Patent Literature 1 discloses a system in which a predetermined gesture by a user is used as a trigger to execute biometric authentication, and if the biometric authentication is successful, a service interface is presented to the user.
Furthermore, Patent Document 2 discloses an interface device that is installed at the entrance or under the eaves of a house to monitor people (users) who are trying to enter the house. This interface device performs personal authentication of users using face authentication, fingerprint authentication, iris authentication, or the like. For users who are qualified to enter the house, an image representing a password input pad is projected onto the wall of the entrance or the like, and a touch input by the user on the projected image or the wall is accepted. The user can enter the house by inputting the correct password into the image.
In relation to the projection of an image and input to the image, Patent Document 3 discloses a method of virtual user interface interaction based on gesture recognition for an interaction system. In this method, first, two hands are detected in a plurality of images, and the gestures of each hand are recognized. If it is recognized that one hand is making a point gesture and the other hand is making an open gesture, a virtual user interface is projected onto the hand making the open gesture, and the tip of the index finger of the hand making the point gesture is tracked.

特表2020-503578号公報JP 2020-503578 A 国際公開第2015/049866号International Publication No. 2015/049866 特開2020-67999号公報JP 2020-67999 A

近年、感染症に対する懸念から、他人が接触した可能性のある物体への接触を避けることが要望されている。そのような要望を満たすためには、顔認証のような、非接触型の認証方式を用いることが望ましい。また、認証が成功した場合においても、その後の処理をユーザが物体に接触せずに完了できることが望ましい。特許文献1から3で開示された技術は、上記の点については考慮されていない。In recent years, due to concerns about infectious diseases, there is a demand to avoid touching objects that may have been touched by other people. In order to meet such demands, it is desirable to use a contactless authentication method such as face recognition. Furthermore, even if authentication is successful, it is desirable for the user to be able to complete subsequent processing without touching the object. The technologies disclosed in Patent Documents 1 to 3 do not take the above points into consideration.

本開示は、このような問題点を解決するためになされたものであり、物体に接触することなく、ユーザが適切に認証及びサービス提供を受けることが可能な入力制御装置、入力システム、入力制御方法及び非一時的なコンピュータ可読媒体を提供することを目的とする。The present disclosure has been made to solve such problems, and aims to provide an input control device, an input system, an input control method, and a non-transitory computer-readable medium that enable a user to be properly authenticated and receive services without contacting an object.

本開示にかかる入力制御装置は、
所定のユーザの生体情報を前記ユーザから非接触で取得する生体情報取得手段と、
前記生体情報を用いた生体認証を制御する認証制御手段と、
前記生体認証に成功した場合、非接触での入力方法を用いて、前記ユーザに提供されるサービスに対する前記ユーザの意思の入力を受け付ける受付手段と、
を備えるものである。
The input control device according to the present disclosure includes:
a biometric information acquiring means for acquiring biometric information of a predetermined user from the user in a non-contact manner;
an authentication control means for controlling biometric authentication using the biometric information;
a receiving means for receiving an input of the user's intention regarding a service to be provided to the user by using a non-contact input method when the biometric authentication is successful;
It is equipped with the following.

本開示にかかる入力システムは、
所定のユーザの生体情報を前記ユーザから非接触で取得する認証端末と、
前記認証端末と接続された入力制御装置と、
を備え、
前記入力制御装置は、
前記認証端末から前記ユーザの生体情報を取得し、
前記生体情報を用いた生体認証を制御し、
前記生体認証に成功した場合、非接触での入力方法を用いて、前記ユーザに提供されるサービスに対する前記ユーザの意思の入力を受け付ける
ものである。
The input system according to the present disclosure comprises:
an authentication terminal that acquires biometric information of a predetermined user from the user in a non-contact manner;
an input control device connected to the authentication terminal;
Equipped with
The input control device includes:
Acquiring biometric information of the user from the authentication terminal;
Controlling biometric authentication using the biometric information;
If the biometric authentication is successful, a non-contact input method is used to accept input of the user's intention regarding the service to be provided to the user.

本開示にかかる入力制御方法は、
コンピュータが、
所定のユーザの生体情報を前記ユーザから非接触で取得し、
前記生体情報を用いた生体認証を制御し、
前記生体認証に成功した場合、非接触での入力方法を用いて、前記ユーザに提供されるサービスに対する前記ユーザの意思の入力を受け付ける
ものである。
The input control method according to the present disclosure includes:
The computer
Acquiring biometric information of a predetermined user from the user in a non-contact manner;
Controlling biometric authentication using the biometric information;
If the biometric authentication is successful, a non-contact input method is used to accept input of the user's intention regarding the service to be provided to the user.

本開示にかかる入力制御プログラムが格納された非一時的なコンピュータ可読媒体は、
所定のユーザの生体情報を前記ユーザから非接触で取得する生体情報取得処理と、
前記生体情報を用いた生体認証を制御する認証制御処理と、
前記生体認証に成功した場合、非接触での入力方法を用いて、前記ユーザに提供されるサービスに対する前記ユーザの意思の入力を受け付ける受付処理と
をコンピュータに実行させるものである。
A non-transitory computer-readable medium storing an input control program according to the present disclosure includes:
A biometric information acquisition process for acquiring biometric information of a predetermined user from the user in a non-contact manner;
an authentication control process for controlling biometric authentication using the biometric information;
If the biometric authentication is successful, the computer is caused to execute a reception process of receiving, using a non-contact input method, an input of the user's intention regarding a service to be provided to the user.

本開示により、物体に接触することなく、ユーザが適切に認証及びサービス提供を受けることが可能な入力制御装置、入力システム、入力制御方法及び非一時的なコンピュータ可読媒体を提供することができる。 The present disclosure provides an input control device, an input system, an input control method, and a non-transitory computer-readable medium that enable a user to be properly authenticated and provided with services without contacting an object.

実施形態1にかかる入力制御装置の構成を示すブロック図である。1 is a block diagram showing a configuration of an input control device according to a first embodiment; 実施形態1にかかる入力制御装置の処理を示すフローチャートである。4 is a flowchart showing a process of the input control device according to the first embodiment. 実施形態2にかかる入力システムの構成を示すブロック図である。FIG. 11 is a block diagram showing a configuration of an input system according to a second embodiment. 実施形態2にかかる認証装置の構成を示すブロック図である。FIG. 11 is a block diagram showing a configuration of an authentication device according to a second embodiment. 実施形態2にかかる認証装置の生体情報登録処理を示すフローチャートである。10 is a flowchart showing a biometric information registration process of the authentication device according to the second embodiment. 実施形態2にかかる認証装置の生体認証処理を示すフローチャートである。10 is a flowchart showing a biometric authentication process of the authentication device according to the second embodiment. 実施形態2にかかる認証端末の構成を示すブロック図である。FIG. 11 is a block diagram showing a configuration of an authentication terminal according to a second embodiment. 実施形態2にかかる入力制御装置の構成を示すブロック図である。FIG. 11 is a block diagram showing a configuration of an input control device according to a second embodiment. 実施形態2にかかる入力システムで用いられる生体認証方式の一例を示す図である。FIG. 11 is a diagram illustrating an example of a biometric authentication method used in the input system according to the second embodiment. 実施形態2にかかる認証端末に表示されるメッセージの一例を示す図である。FIG. 11 is a diagram showing an example of a message displayed on the authentication terminal according to the second embodiment. 実施形態2にかかる認証端末に表示されるメッセージの一例を示す図である。FIG. 11 is a diagram showing an example of a message displayed on the authentication terminal according to the second embodiment. 実施形態2にかかる入力システムで決定される入力方法の一例を示す図である。13 is a diagram showing an example of an input method determined by the input system according to the second embodiment; FIG. 実施形態2にかかる入力システムで決定される入力方法の一例を示す図である。13 is a diagram showing an example of an input method determined by the input system according to the second embodiment; FIG. 実施形態2にかかる入力制御装置の処理を示すフローチャートである。10 is a flowchart showing a process of an input control device according to a second embodiment. 実施形態3にかかる入力制御装置の構成を示すブロック図である。FIG. 11 is a block diagram showing a configuration of an input control device according to a third embodiment. 実施形態4にかかる入力制御装置の構成を示すブロック図である。FIG. 13 is a block diagram showing a configuration of an input control device according to a fourth embodiment.

以下では、本開示の実施形態1について、図面を参照しながら詳細に説明する。各図面において、同一又は対応する要素には同一の符号が付されており、説明の明確化のため、必要に応じて重複説明は省略される。Hereinafter, the first embodiment of the present disclosure will be described in detail with reference to the drawings. In each drawing, the same or corresponding elements are denoted by the same reference numerals, and duplicated descriptions will be omitted as necessary for clarity of explanation.

<実施形態1>
図1は、本実施形態にかかる入力制御装置10の構成を示すブロック図である。図1に示すように、入力制御装置10は、生体情報取得部11、認証制御部12、受付部14を備えている。
生体情報取得部11は、所定のユーザの生体情報をユーザから非接触で取得する。
認証制御部12は、生体情報を用いた生体認証を制御する。
受付部14は、生体認証に成功した場合、非接触での入力方法を用いて、ユーザに提供されるサービスに対するユーザの意思の入力を受け付ける。
<Embodiment 1>
1 is a block diagram showing the configuration of an input control device 10 according to the present embodiment. As shown in FIG. 1, the input control device 10 includes a biometric information acquisition unit 11, an authentication control unit 12, and a reception unit .
The biometric information acquiring unit 11 acquires biometric information of a predetermined user from the user in a non-contact manner.
The authentication control unit 12 controls biometric authentication using biometric information.
If the biometric authentication is successful, the accepting unit 14 accepts, using a contactless input method, input of the user's intention regarding the service to be provided to the user.

図2は、本実施形態にかかる入力制御装置10が行う処理を示すフローチャートである。
まず、生体情報取得部11は、所定のユーザの生体情報をユーザから非接触で取得する(S11)。次に、認証制御部12は、生体情報を用いた生体認証を制御する(S12)。そして、受付部14は、生体認証に成功したか否かを判定する(S13)。生体認証に成功した場合(S13のYes)、受付部14は、非接触での入力方法を用いて、ユーザに提供されるサービスに対するユーザの意思の入力を受け付ける(S14)。生体認証に失敗した場合(S13のNo)、入力制御装置10は処理を終了する。
FIG. 2 is a flowchart showing the process performed by the input control device 10 according to the present embodiment.
First, the biometric information acquisition unit 11 acquires biometric information of a specific user from the user in a non-contact manner (S11). Next, the authentication control unit 12 controls biometric authentication using the biometric information (S12). Then, the acceptance unit 14 determines whether the biometric authentication is successful or not (S13). If the biometric authentication is successful (Yes in S13), the acceptance unit 14 accepts input of the user's intention regarding the service provided to the user using a non-contact input method (S14). If the biometric authentication is unsuccessful (No in S13), the input control device 10 ends the process.

以上説明したように、本実施形態にかかる入力制御装置10は、ユーザの生体情報をユーザから非接触で取得し、取得した生体情報を用いて生体認証を行う。生体認証に成功した場合、入力制御装置10は、非接触での入力方法を用いて、ユーザに提供されるサービスに対するユーザの意思の入力を受け付ける。これにより、物体に接触することなく、ユーザが適切に認証及びサービス提供を受けることができる。As described above, the input control device 10 according to this embodiment acquires biometric information of a user from the user in a non-contact manner and performs biometric authentication using the acquired biometric information. If the biometric authentication is successful, the input control device 10 uses a non-contact input method to accept input of the user's intention regarding the service to be provided to the user. This allows the user to be properly authenticated and receive the service without coming into contact with an object.

なお、入力制御装置10は、図示しない構成としてプロセッサ、メモリ及び記憶装置を備えるものである。また、当該記憶装置には、本実施形態にかかる入力制御方法の処理が実装されたコンピュータプログラムが記憶されている。そして、当該プロセッサは、記憶装置からコンピュータプログラムを前記メモリへ読み込ませ、当該コンピュータプログラムを実行する。これにより、前記プロセッサは、生体情報取得部11、認証制御部12、受付部14の機能を実現する。The input control device 10 includes a processor, a memory, and a storage device, which are not shown in the figure. The storage device also stores a computer program that implements the processing of the input control method according to this embodiment. The processor then loads the computer program from the storage device into the memory and executes the computer program. In this way, the processor realizes the functions of the biometric information acquisition unit 11, the authentication control unit 12, and the reception unit 14.

又は、生体情報取得部11、認証制御部12、受付部14は、それぞれが専用のハードウェアで実現されていてもよい。また、各装置の各構成要素の一部又は全部は、汎用又は専用の回路(circuitry)、プロセッサ等やこれらの組合せによって実現されもよい。これらは、単一のチップによって構成されてもよいし、バスを介して接続される複数のチップによって構成されてもよい。各装置の各構成要素の一部又は全部は、上述した回路等とプログラムとの組合せによって実現されてもよい。また、プロセッサとして、CPU(Central Processing Unit)、GPU(Graphics Processing Unit)、FPGA(field-programmable gate array)等を用いることができる。Alternatively, the biometric information acquisition unit 11, the authentication control unit 12, and the reception unit 14 may each be realized by dedicated hardware. In addition, some or all of the components of each device may be realized by general-purpose or dedicated circuits, processors, etc., or a combination of these. These may be configured by a single chip, or may be configured by multiple chips connected via a bus. Some or all of the components of each device may be realized by a combination of the above-mentioned circuits, etc., and programs. In addition, a CPU (Central Processing Unit), GPU (Graphics Processing Unit), FPGA (field-programmable gate array), etc. can be used as the processor.

また、入力制御装置10の各構成要素の一部又は全部が複数の情報処理装置や回路等により実現される場合には、複数の情報処理装置や回路等は、集中配置されてもよいし、分散配置されてもよい。例えば、情報処理装置や回路等は、クライアントサーバシステム、クラウドコンピューティングシステム等、各々が通信ネットワークを介して接続される形態として実現されてもよい。また、入力制御装置10の機能がSaaS(Software as a Service)形式で提供されてもよい。 In addition, when some or all of the components of the input control device 10 are realized by multiple information processing devices, circuits, etc., the multiple information processing devices, circuits, etc. may be centrally arranged or distributed. For example, the information processing devices, circuits, etc. may be realized as a client-server system, cloud computing system, etc., in which each is connected via a communication network. In addition, the functions of the input control device 10 may be provided in the form of SaaS (Software as a Service).

<実施形態2>
実施形態2は、上述した実施形態1の具体例である。図3は、本実施形態にかかる入力システム1000の全体構成を示すブロック図である。入力システム1000は、認証装置100、認証端末400、入力制御装置200を備えている。認証装置100、認証端末400、入力制御装置200のそれぞれは、ネットワークNを介して接続されている。ここで、ネットワークNは、有線又は無線の通信回線である。
<Embodiment 2>
The second embodiment is a specific example of the first embodiment. Fig. 3 is a block diagram showing the overall configuration of an input system 1000 according to this embodiment. The input system 1000 includes an authentication device 100, an authentication terminal 400, and an input control device 200. The authentication device 100, the authentication terminal 400, and the input control device 200 are each connected via a network N. Here, the network N is a wired or wireless communication line.

まず、本実施形態にかかる入力システム1000の概要を説明する。
入力システム1000は、ユーザUに対して非接触で認証を行い、認証に成功した場合、非接触での入力方法を用いて、ユーザUに提供されるサービスに対するユーザUの意思の入力を受け付ける。また、入力システム1000は、その入力方法を、生体認証の方式に基づいて決定し、決定された入力方法を用いてユーザUの意思の入力を受け付ける。
First, an overview of an input system 1000 according to this embodiment will be described.
The input system 1000 performs contactless authentication on the user U, and if the authentication is successful, uses a contactless input method to accept input of the user U's intention regarding the service to be provided to the user U. Furthermore, the input system 1000 determines the input method based on a biometric authentication method, and accepts input of the user U's intention using the determined input method.

ユーザUは、サービスの提供場所に配置された認証端末400を介して、認証及び意思の入力を行う。本実施形態では、ホテルの売店内に設置された認証端末400を用いて、ユーザUが商品購入のための決済処理を行う場合を例として説明を行う。サービスの提供場所及びサービスの内容は、上記に限られない。本発明は、ユーザUの認証を行い、認証の成功に応じてサービス提供に対するユーザUの意思の入力が求められる処理であればどのようなものに対しても適用することができる。例えば、ホテルの例では、チェックイン処理、チェックアウト処理、ルームサービスの受け取り、フィットネスジムの利用などにおいて、本発明を適用することができる。ユーザUは、これらのサービスの提供を受けるにあたり認証を行い、認証に成功した場合に意思の入力を行う。ユーザUの意思とは、例えば、これらのサービスの提供を受けることに同意する又は同意しないという意思である。
サービスの提供場所はホテルに限らず、小売店、飲食店等においても適用可能である。また、マンションや施設の入退室管理に適用し、ユーザUの認証の成功に応じて、入退室に対するユーザの意思の入力を受け付けてもよい。
The user U performs authentication and inputs his/her intention via the authentication terminal 400 installed at the place where the service is provided. In this embodiment, an example will be described in which the user U performs a payment process for purchasing a product using the authentication terminal 400 installed in a hotel shop. The place where the service is provided and the contents of the service are not limited to the above. The present invention can be applied to any process that requires the user U to authenticate and input the user U's intention regarding the service provision depending on the success of the authentication. For example, in the example of a hotel, the present invention can be applied to check-in processing, check-out processing, receiving room service, using a fitness gym, etc. The user U performs authentication when receiving these services, and inputs his/her intention when the authentication is successful. The intention of the user U is, for example, whether or not he/she agrees to receive these services.
The service is not limited to being provided in hotels, but may also be applied to retail stores, restaurants, etc. In addition, the service may be applied to entrance and exit management for condominiums and facilities, and input of the user's intention to enter and exit the facility may be accepted depending on the success of authentication of the user U.

認証端末400は、複数の認証方式を組み合わせたマルチモーダル認証を行うことが可能な情報処理装置である。認証端末400は、例えばデジタルサイネージであり、ユーザUに対して生体認証を促す表示や認証結果の結果を示す表示を行う表示部440を備えている。The authentication terminal 400 is an information processing device capable of performing multimodal authentication that combines multiple authentication methods. The authentication terminal 400 is, for example, a digital signage device, and includes a display unit 440 that displays a message prompting the user U to perform biometric authentication and a message showing the authentication result.

本実施形態では、ユーザUが顔情報及び虹彩情報を用いて、顔認証及び虹彩認証により認証を行うものとする。したがって、認証端末400は、顔認証と虹彩認証のいずれによっても認証を行うことができる。なお、生体認証方式は上記に限らず、例えば、静脈認証、音声認証など、種々の認証方式を用いることができる。In this embodiment, it is assumed that user U performs authentication by face authentication and iris authentication using face information and iris information. Therefore, the authentication terminal 400 can perform authentication by either face authentication or iris authentication. Note that the biometric authentication method is not limited to the above, and various authentication methods such as vein authentication and voice authentication can be used.

また、認証端末400は、用途又は設置場所に応じて生体認証を行う。例えば、売店等において代金の決済処理を行う場合には高い認証精度が求められるため、認証端末400は、ユーザUに対しマルチモーダル認証を行う。しかし、全ての認証場面においてマルチモーダル認証を行うとすると、認証を受けるユーザUの利便性の低下を招くおそれがある。例えば、ユーザUがマスクをしている場合には、ユーザUは、虹彩認証には成功するが顔認証には失敗すると考えられる。ユーザUは、顔認証に成功するためにはマスクを外す必要があり、両手に荷物を持っている場合などには特に不便である。そのため、認証端末400は、用途又は設置場所に応じて、求められる認証精度に応じた生体認証方式を用いて生体認証を行う。 The authentication terminal 400 also performs biometric authentication according to the purpose or installation location. For example, high authentication accuracy is required when processing payment at a convenience store, etc., so the authentication terminal 400 performs multimodal authentication on the user U. However, if multimodal authentication is performed in all authentication situations, it may lead to a decrease in convenience for the user U who is authenticated. For example, if the user U is wearing a mask, it is considered that the user U will succeed in iris authentication but fail in face authentication. The user U needs to remove the mask in order to succeed in face authentication, which is particularly inconvenient when the user U is carrying luggage in both hands. Therefore, the authentication terminal 400 performs biometric authentication using a biometric authentication method according to the required authentication accuracy according to the purpose or installation location.

図9に、認証端末400の用途及び設置場所と、ユーザUの認証において用いられる生体認証方式の組合せの一例を示す。図9に示すように、認証端末400の設置場所又は用途により、用いる生体認証方式は異なっている。例えば、ホテル入口では、顔認証のみが行われるので、ユーザUは、顔認証に成功すればホテルに入館することができる。また、カウンターでチェックアウトをする際や売店で商品の購入をする際には、決済処理を含むため、ユーザUは、顔認証及び虹彩認証の双方に成功する必要がある。顔認証及び虹彩認証の双方に成功することで、ユーザUは、チェックアウトや商品購入を行うことができる。 Figure 9 shows an example of a combination of the purpose and installation location of the authentication terminal 400 and the biometric authentication method used to authenticate user U. As shown in Figure 9, the biometric authentication method used varies depending on the installation location or purpose of the authentication terminal 400. For example, only facial authentication is performed at the hotel entrance, so user U can enter the hotel if facial authentication is successful. In addition, when checking out at the counter or purchasing goods at a convenience store, user U needs to succeed in both facial authentication and iris authentication, as this includes payment processing. By succeeding in both facial authentication and iris authentication, user U can check out or purchase goods.

ホテル内で生体認証を行うために、ユーザUは、認証端末400や登録用のwebサイトなどを通じて、入力制御装置200に個人情報を予め登録する。個人情報とは、例えば、ユーザUの氏名、クレジットカード情報、パスコード等である。入力制御装置200には、ユーザUを識別するユーザIDと、これらの個人情報とが対応付けて記憶される。また、ユーザUは、ユーザUの顔画像及び虹彩画像を認証端末400や登録用のwebサイト等を通じて認証装置100に予め登録する。これにより、ユーザUは、決済等の処理において顔認証及び虹彩認証を利用することができる。また、ユーザUは、顔認証又は虹彩認証と併用するパスコード認証に用いるために、パスコードを上記画像と共に入力制御装置200に登録してもよい。これにより、顔認証又は虹彩認証に失敗した場合においても、パスコード認証に成功することでサービスの提供を受けられる場合がある。To perform biometric authentication in a hotel, the user U registers personal information in advance in the input control device 200 through the authentication terminal 400, a registration website, etc. The personal information is, for example, the user U's name, credit card information, passcode, etc. The input control device 200 stores a user ID that identifies the user U in association with the personal information. The user U also registers a face image and an iris image of the user U in advance in the authentication device 100 through the authentication terminal 400, a registration website, etc. This allows the user U to use face authentication and iris authentication in processing such as payment. The user U may also register a passcode in the input control device 200 together with the image for use in passcode authentication in conjunction with face authentication or iris authentication. This may allow the user to receive services even if face authentication or iris authentication fails, by succeeding in passcode authentication.

認証端末400は、この予め認証装置100に登録された顔画像及び虹彩画像と、サービスの提供場所で撮影した顔画像及び虹彩画像とを、それらの特徴情報の比較により照合して、ユーザUに対する生体認証を行う。認証端末400で生体認証に成功することにより、ユーザUは所望のサービスの提供を受けるための手続を進めることができる。The authentication terminal 400 performs biometric authentication for the user U by comparing the facial image and iris image registered in advance in the authentication device 100 with the facial image and iris image taken at the service providing location by comparing their characteristic information. If the biometric authentication is successful at the authentication terminal 400, the user U can proceed with the procedure to receive the desired service.

認証端末400は、ユーザUが決済処理を行う際、ユーザUに対して顔認証及び虹彩認証を行う。認証端末400は、例えば、表示部440に「決済処理のため、顔認証及び虹彩認証を行います。」などのメッセージを表示して、ユーザUに顔認証及び虹彩認証を促すことができる。また、認証端末400は、スピーカ等を用いて、上記の表示と共に音声でユーザUに案内を行ってもよい。When user U performs payment processing, authentication terminal 400 performs facial authentication and iris authentication on user U. For example, authentication terminal 400 can display a message such as "Facial authentication and iris authentication will be performed for payment processing" on display unit 440 to prompt user U to perform facial authentication and iris authentication. In addition, authentication terminal 400 may use a speaker or the like to provide audio guidance to user U along with the above display.

認証端末400は、内蔵されたカメラでユーザUの顔及び虹彩を撮影し、撮影された顔画像及び虹彩画像を用いてユーザUの生体認証を行う。具体的には、認証端末400は、入力制御装置200に対して生体認証要求を送信する。生体認証要求には、撮影した顔画像及び虹彩画像が含まれる。The authentication terminal 400 captures an image of the face and iris of the user U with a built-in camera, and performs biometric authentication of the user U using the captured face image and iris image. Specifically, the authentication terminal 400 transmits a biometric authentication request to the input control device 200. The biometric authentication request includes the captured face image and iris image.

入力制御装置200は、認証端末400から生体認証要求を受信して、所定の処理を行い認証装置100に対して生体認証要求を送信する。認証装置100は、入力制御装置200からの生体認証要求を受けて生体認証を行い、結果を入力制御装置200に対して返信する。入力制御装置200は、その結果を認証端末400に返信する。
以上の処理により、認証端末400は、ユーザUに対する生体認証の結果を受信することができる。これらの処理について、より詳細な内容は後述する。
The input control device 200 receives a biometric authentication request from the authentication terminal 400, performs a predetermined process, and transmits the biometric authentication request to the authentication device 100. The authentication device 100 performs biometric authentication upon receiving the biometric authentication request from the input control device 200, and returns the result to the input control device 200. The input control device 200 returns the result to the authentication terminal 400.
Through the above processes, the authentication terminal 400 can receive the result of biometric authentication for the user U. The above processes will be described in more detail later.

ユーザUが顔認証及び虹彩認証に成功すると、認証端末400は、表示部440に「○○様、顔認証及び虹彩認証に成功しました。」などのメッセージを表示する。これにより、ユーザUは、予め登録した顔画像及び虹彩画像によって生体認証に成功したことを把握することができる。When the user U is successful in the face authentication and iris authentication, the authentication terminal 400 displays a message such as "Mr./Ms. XX, face authentication and iris authentication have been successful" on the display unit 440. This allows the user U to know that the biometric authentication has been successful based on the face image and iris image registered in advance.

また、認証に成功したユーザUに対し、認証端末400は、決済処理を完了させるためのジェスチャ(動作)を行うようユーザUに対し促す。認証端末400は、例えば、表示部440に図10に示すようなメッセージを表示する。例えば、表示部440は、「支払代金は○○円です。支払に同意する場合には、右側のジェスチャをしてください。戻る場合には、左側のジェスチャをしてください。」と表示する。Furthermore, for user U who has been successfully authenticated, the authentication terminal 400 prompts the user U to make a gesture (action) to complete the payment process. The authentication terminal 400 displays, for example, a message as shown in FIG. 10 on the display unit 440. For example, the display unit 440 displays "The payment amount is XX yen. If you agree to the payment, make a gesture to the right. If you want to go back, make a gesture to the left."

上記の例では、ユーザUは、支払に同意する場合には、空間に対して「Z」の文字を描くように手や腕を動かすジェスチャを行う。ユーザUが支払に同意せず、前の処理に戻る場合には、ユーザUは空間に対して「H」の文字を描くように手や腕を動かすジェスチャを行う。認証端末400は、内蔵されたカメラでユーザUを撮影し、ユーザUが行ったジェスチャの内容を読み取り、ユーザUの支払に対する意思を受け付ける。ユーザUが支払に同意するジェスチャを行った場合には、支払処理が行われる。これにより、ユーザUは、商品購入の手続を完了することができる。In the above example, if user U agrees to pay, he or she makes a gesture of moving their hands and arms as if drawing the letter "Z" in the space. If user U does not agree to pay and returns to the previous process, user U makes a gesture of moving their hands and arms as if drawing the letter "H" in the space. The authentication terminal 400 photographs user U with its built-in camera, reads the content of the gesture made by user U, and accepts user U's intention to pay. If user U makes a gesture of agreeing to pay, the payment process is carried out. This allows user U to complete the procedure for purchasing the product.

以上のように、本実施形態にかかる入力システム1000によれば、ユーザUは、本人確認のための認証処理だけでなく、支払に対する意思の入力処理についても、周囲の物体に接触することなく行うことができる。なお、当該意思の入力処理についても入力内容が適切かを検証するため広義の認証処理と呼ぶことができる。よって、本実施形態では、生体認証とユーザの意思の入力内容による認証との少なくとも二要素認証が行われるものといえる。
なお、決済以外の処理についても上記と同様の流れである。決済以外においても、ユーザUは、認証端末400の用途又は設置場所に応じて生体認証を行い、認証に成功した場合に、表示部440に表示された入力方法を用いて意思の入力を行う。また、本実施形態では、空間に対してユーザUがアルファベットなどの文字を描くジェスチャをすることにより入力を行うが、入力方法はこれに限られない。例えば、認証端末400は、表示部440とユーザUとの間の空間にホログラムを表示してもよい。例えば、ホログラムに「戻る」ボタンと「支払同意」ボタンを表示し、ユーザUがホログラム上でいずれかをタッチすることで、ユーザUの意思の入力を受け付けてもよい。また、認証端末400にマイクを設けて、ユーザUの音声により入力を受け付けてもよい。認証端末400の設置場所の広さや周囲の環境に応じた入力方法を用いることで、設置スペースやセキュリティについても考慮することができる。
As described above, according to the input system 1000 of the present embodiment, the user U can perform not only the authentication process for identity verification but also the input process of the intention to make a payment without touching any surrounding object. The input process of the intention can also be called an authentication process in a broad sense because it verifies whether the input contents are appropriate. Therefore, in the present embodiment, at least two-factor authentication is performed, which is biometric authentication and authentication based on the input contents of the user's intention.
The same flow is followed for processes other than payment. For processes other than payment, the user U performs biometric authentication according to the purpose or installation location of the authentication terminal 400, and if the authentication is successful, inputs the intention using the input method displayed on the display unit 440. In this embodiment, the user U performs input by making a gesture of drawing letters such as the alphabet in the space, but the input method is not limited to this. For example, the authentication terminal 400 may display a hologram in the space between the display unit 440 and the user U. For example, a "Back" button and a "Payment Agreement" button may be displayed on the hologram, and the user U may touch either of them on the hologram to accept the input of the intention of the user U. In addition, a microphone may be provided in the authentication terminal 400 to accept input by the user U's voice. By using an input method according to the size of the installation location of the authentication terminal 400 and the surrounding environment, the installation space and security can also be taken into consideration.

以上が、本実施形態にかかる入力システム1000が行う処理の概要である。続いて、入力システム1000を構成する認証装置100、認証端末400、入力制御装置200のそれぞれについて詳細に説明する。The above is an overview of the processing performed by the input system 1000 according to this embodiment. Next, the authentication device 100, the authentication terminal 400, and the input control device 200 that constitute the input system 1000 will be described in detail.

認証装置100は、外部から受信した生体認証要求に応じて、当該要求に含まれる顔や虹彩等の画像又はこれらの生体特徴情報について、ユーザUの生体特徴情報と照合を行い、照合結果(認証結果)を要求元へ返信する情報処理装置である。認証装置100は、複数のユーザUの生体特徴情報を記憶する。また、認証装置100は、1人のユーザUにつき複数の生体特徴情報を記憶し、それぞれの生体特徴情報を用いて認証を行うことができる。生体特徴情報とは、生体認証に用いる生体情報の特徴情報である。生体情報は、例えば顔、虹彩、指紋、静脈等である。本実施形態では、生体認証の一例として、顔認証及び虹彩認証を用いている。The authentication device 100 is an information processing device that, in response to a biometric authentication request received from outside, compares an image of a face, iris, etc., or the biometric feature information of the image, with the biometric feature information of a user U, and returns the comparison result (authentication result) to the request source. The authentication device 100 stores the biometric feature information of multiple users U. The authentication device 100 can also store multiple pieces of biometric feature information for one user U and perform authentication using each piece of biometric feature information. Biometric feature information is feature information of the biometric information used for biometric authentication. Examples of biometric information include face, iris, fingerprint, and veins. In this embodiment, face authentication and iris authentication are used as examples of biometric authentication.

図4は、本実施形態にかかる認証装置100の構成を示すブロック図である。認証装置100は、生体情報DB(Database)110と、検出部120と、特徴点抽出部130と、登録部140と、認証部150とを備える。 Figure 4 is a block diagram showing the configuration of the authentication device 100 according to this embodiment. The authentication device 100 includes a biometric information database (DB) 110, a detection unit 120, a feature point extraction unit 130, a registration unit 140, and an authentication unit 150.

生体情報DB110は、ユーザID111、当該ユーザIDの生体特徴情報112、生体認証方式113を対応付けて記憶する。生体特徴情報112は、顔画像や虹彩画像から抽出された特徴点の集合である。生体認証方式113は、顔認証、虹彩認証、静脈認証等の認証方式を示す情報である。なお、認証装置100は、生体特徴情報112の登録ユーザUからの要望に応じて、生体情報DB110内の生体特徴情報112を削除してもよい。又は、認証装置100は、生体特徴情報112の登録から一定期間経過後に削除してもよい。The biometric information DB 110 stores a user ID 111, biometric feature information 112 for the user ID, and a biometric authentication method 113 in association with each other. The biometric feature information 112 is a collection of feature points extracted from a face image or an iris image. The biometric authentication method 113 is information indicating an authentication method such as face authentication, iris authentication, or vein authentication. The authentication device 100 may delete the biometric feature information 112 in the biometric information DB 110 at the request of a registered user U of the biometric feature information 112. Alternatively, the authentication device 100 may delete the biometric feature information 112 after a certain period of time has passed since its registration.

検出部120は、生体情報を登録するための登録画像に含まれる顔や虹彩の領域を検出し、特徴点抽出部130に出力する。特徴点抽出部130は、検出部120が検出した顔領域等から特徴点を抽出し、登録部140に生体特徴情報を出力する。また、特徴点抽出部130は、入力制御装置200から受信した顔画像等に含まれる特徴点を抽出し、認証部150に生体特徴情報を出力する。The detection unit 120 detects face and iris areas included in a registration image for registering biometric information, and outputs the areas to the feature point extraction unit 130. The feature point extraction unit 130 extracts feature points from the face area etc. detected by the detection unit 120, and outputs biometric feature information to the registration unit 140. The feature point extraction unit 130 also extracts feature points included in the face image etc. received from the input control device 200, and outputs the biometric feature information to the authentication unit 150.

登録部140は、生体特徴情報の登録に際して、ユーザID111を新規に発行する。登録部140は、発行したユーザID111と、登録画像から抽出した生体特徴情報112とを対応付けて生体情報DB110へ登録する。認証部150は、生体特徴情報112を用いた生体認証を行う。具体的には、認証部150は、顔画像等から抽出された生体特徴情報と、生体情報DB110内の生体特徴情報112との照合を行う。認証部150は、生体特徴情報の一致の有無を入力制御装置200に返信する。生体特徴情報の一致の有無は、認証の成否に対応する。なお、生体特徴情報が一致する(一致有)とは、一致度が所定値以上である場合をいうものとする。The registration unit 140 issues a new user ID 111 when registering biometric feature information. The registration unit 140 associates the issued user ID 111 with the biometric feature information 112 extracted from the registration image and registers them in the biometric information DB 110. The authentication unit 150 performs biometric authentication using the biometric feature information 112. Specifically, the authentication unit 150 compares the biometric feature information extracted from a face image or the like with the biometric feature information 112 in the biometric information DB 110. The authentication unit 150 returns a response to the input control device 200 indicating whether or not there is a match in the biometric feature information. The presence or absence of a match in the biometric feature information corresponds to the success or failure of authentication. Note that a match in the biometric feature information (match present) refers to a case where the degree of match is equal to or greater than a predetermined value.

続いて、本実施形態にかかる生体情報の登録処理及び認証処理について説明する。図5は、本実施形態にかかる生体情報登録処理の流れを示すフローチャートである。まず、認証装置100は、生体情報登録要求に含まれる登録画像を取得する(S21)。例えば、認証装置100は、生体情報登録要求を、認証端末400や登録用webサイト等からネットワークNを介して受け付ける。次に、検出部120は、登録画像に含まれる顔領域等を検出する(S22)。次に、特徴点抽出部130は、ステップS22で検出した顔領域等から特徴点を抽出し、登録部140に生体特徴情報を出力する(S23)。最後に、登録部140は、ユーザID111を発行し、当該ユーザID111、生体特徴情報112、生体認証方式113を対応付けて生体情報DB110に登録する(S24)。認証装置100は、ユーザUが所有する端末等から生体特徴情報112を受信し、生体特徴情報112をユーザID111及び生体認証方式113と対応付けて生体情報DB110に登録してもよい。Next, the biometric information registration process and authentication process according to this embodiment will be described. FIG. 5 is a flowchart showing the flow of the biometric information registration process according to this embodiment. First, the authentication device 100 acquires a registration image included in a biometric information registration request (S21). For example, the authentication device 100 accepts a biometric information registration request from the authentication terminal 400, a registration website, or the like via the network N. Next, the detection unit 120 detects a face area, etc. included in the registration image (S22). Next, the feature point extraction unit 130 extracts feature points from the face area, etc. detected in step S22, and outputs biometric feature information to the registration unit 140 (S23). Finally, the registration unit 140 issues a user ID 111, and associates the user ID 111, biometric feature information 112, and biometric authentication method 113 with each other and registers them in the biometric information DB 110 (S24). The authentication device 100 may receive biometric feature information 112 from a terminal or the like owned by the user U, and register the biometric feature information 112 in the biometric information DB 110 in association with the user ID 111 and the biometric authentication method 113 .

図6は、本実施形態にかかる認証装置100による生体認証処理の流れを示すフローチャートである。まず、特徴点抽出部130は、生体認証要求に含まれる認証用の顔画像等を取得する(S31)。例えば、認証装置100は、入力制御装置200からネットワークNを介して生体認証要求を受信し、生体認証要求に含まれる生体画像からステップS21からS23のように生体特徴情報を抽出する。又は、認証装置100は、入力制御装置200から生体特徴情報を受信してもよい。 Figure 6 is a flowchart showing the flow of biometric authentication processing by the authentication device 100 according to this embodiment. First, the feature point extraction unit 130 acquires a face image for authentication, etc., included in the biometric authentication request (S31). For example, the authentication device 100 receives a biometric authentication request from the input control device 200 via the network N, and extracts biometric feature information from the biometric image included in the biometric authentication request as in steps S21 to S23. Alternatively, the authentication device 100 may receive biometric feature information from the input control device 200.

次に、認証部150は、取得した生体特徴情報を、生体情報DB110の生体特徴情報112と照合する(S32)。生体特徴情報が一致した場合、つまり、生体特徴情報の一致度が所定値以上である場合(S33のYes)、認証部150は、生体特徴情報が一致したユーザUのユーザID111を特定する(S34)。そして、認証部150は、生体認証に成功した旨と特定したユーザID111とを入力制御装置200に返信する(S35)。一致する生体特徴情報が存在しない場合(S33のNo)、認証部150は、生体認証に失敗した旨を入力制御装置200に返信する(S36)。Next, the authentication unit 150 compares the acquired biometric feature information with the biometric feature information 112 in the biometric information DB 110 (S32). If the biometric feature information matches, that is, if the degree of match of the biometric feature information is equal to or greater than a predetermined value (Yes in S33), the authentication unit 150 identifies the user ID 111 of the user U whose biometric feature information matches (S34). The authentication unit 150 then returns to the input control device 200 a message indicating that the biometric authentication was successful and the identified user ID 111 (S35). If there is no matching biometric feature information (No in S33), the authentication unit 150 returns to the input control device 200 a message indicating that the biometric authentication failed (S36).

なお、ステップS32において、認証部150は、生体情報DB110内の全ての生体特徴情報112との照合を試みる必要はない。例えば、認証部150は、生体認証要求に生体認証方式113を含めて受信し、生体認証方式113が一致するものの中から照合を行うことができる。又は、認証部150は、生体認証要求を受け付けた当日から数日前までの期間に登録が行われた生体特徴情報と優先的に照合を試みるなどしてもよい。これらにより、照合速度が向上し得る。また、上記優先的な照合に失敗した場合、残り全ての生体特徴情報と照合を行うようにするとよい。 Note that in step S32, the authentication unit 150 does not need to attempt matching with all biometric feature information 112 in the biometric information DB 110. For example, the authentication unit 150 can receive the biometric authentication request including the biometric authentication method 113 and perform matching from among those with a matching biometric authentication method 113. Alternatively, the authentication unit 150 may preferentially attempt matching with biometric feature information registered in the period from the day the biometric authentication request was received to several days prior. This can improve the matching speed. Also, if the preferential matching fails, it is advisable to perform matching with all remaining biometric feature information.

次に、認証端末400について詳細に説明する。図7は、本実施形態にかかる認証端末400の構成を示すブロック図である。認証端末400は、第1のカメラ410と、第2のカメラ411と、記憶部420と、通信部430と、表示部440と、制御部450とを備える。Next, the authentication terminal 400 will be described in detail. FIG. 7 is a block diagram showing the configuration of the authentication terminal 400 according to this embodiment. The authentication terminal 400 includes a first camera 410, a second camera 411, a memory unit 420, a communication unit 430, a display unit 440, and a control unit 450.

第1のカメラ410及び第2のカメラ411は、制御部450の制御に応じて撮影を行う撮影装置である。本実施形態では、第1のカメラ410がユーザUの顔を撮影し、第2のカメラ411がユーザUの虹彩を撮影する。第2のカメラ411は、虹彩の撮影が可能な赤外線カメラである。また、第1のカメラ410は、ユーザUのジェスチャを撮影する。
上記により、認証端末400は、ユーザUから非接触でユーザの生体情報を取得することができる。また、認証端末400は、ユーザUから非接触でサービスに対するユーザUの意思の入力を受け付けることができる。
The first camera 410 and the second camera 411 are imaging devices that capture images under the control of the control unit 450. In this embodiment, the first camera 410 captures an image of the face of the user U, and the second camera 411 captures an image of the iris of the user U. The second camera 411 is an infrared camera capable of capturing an image of the iris. In addition, the first camera 410 captures an image of a gesture of the user U.
As described above, the authentication terminal 400 can contactlessly acquire biometric information of the user U. Furthermore, the authentication terminal 400 can contactlessly receive input of the user U's intention regarding the service from the user U.

記憶部420は、認証端末400の各機能を実現するためのプログラムが格納される記憶装置である。
通信部430は、ネットワークNとの通信インタフェースである。
表示部440は、少なくとも表示装置である。また、表示部440は、表示装置と入力装置を含む入出力部、例えば、タッチパネルであってもよい。
The storage unit 420 is a storage device in which programs for implementing the various functions of the authentication terminal 400 are stored.
The communication unit 430 is a communication interface with the network N.
The display unit 440 is at least a display device. The display unit 440 may also be an input/output unit including a display device and an input device, such as a touch panel.

制御部450は、認証端末400が有するハードウェアの制御を行う。制御部450は、撮影制御部451と、登録部452と、認証制御部453と、表示制御部454とを備える。The control unit 450 controls the hardware of the authentication terminal 400. The control unit 450 includes a photography control unit 451, a registration unit 452, an authentication control unit 453, and a display control unit 454.

撮影制御部451は、第1のカメラ410及び第2のカメラ411を制御し、ユーザUの登録画像、認証用画像及びジェスチャ画像を撮影する。第1のカメラ410及び第2のカメラ411が撮影する登録画像、認証用画像は、少なくともユーザUの顔領域及び虹彩領域をそれぞれ含む画像である。また、第1のカメラ410が撮影するユーザUのジェスチャ画像は、少なくともユーザUのジェスチャが含まれる領域の画像を撮影する。例えば、ユーザUが手や腕を用いて空間に文字を描く場合、ユーザUの手や腕が少なくとも含まれる領域(上半身など)の画像を撮影する。これに限らず、第1のカメラ410の撮影領域は、ジェスチャ内容に応じて適宜変更されてよい。
撮影制御部451は、登録画像を登録部452へ出力する。また、撮影制御部451は、認証用画像及びジェスチャ画像を認証制御部453へ出力する。
The photographing control unit 451 controls the first camera 410 and the second camera 411 to photograph the registration image, the authentication image, and the gesture image of the user U. The registration image and the authentication image photographed by the first camera 410 and the second camera 411 are images including at least the face area and the iris area of the user U, respectively. In addition, the gesture image of the user U photographed by the first camera 410 photographs an image of an area including at least the gesture of the user U. For example, when the user U draws a character in a space using his/her hand or arm, an image of an area including at least the hand or arm of the user U (such as the upper body) is photographed. Not limited to this, the photographing area of the first camera 410 may be appropriately changed according to the gesture content.
The photography control unit 451 outputs the registration image to the registration unit 452. In addition, the photography control unit 451 outputs the authentication image and the gesture image to the authentication control unit 453.

登録部452は、登録画像を含む生体情報登録要求を、ネットワークNを介して認証装置100へ送信する。The registration unit 452 transmits a biometric information registration request including the registration image to the authentication device 100 via the network N.

認証制御部453は、認証用画像を含む生体認証要求を、ネットワークNを介して入力制御装置200へ送信する。また、認証制御部453は、設置されている場所を識別する場所IDと、生体認証の用途をこの生体認証要求に含めて入力制御装置200に対して送信する。用途には、例えば決済処理や本人確認を含むか否かの情報が含まれる。また、認証制御部453は、場所IDに代えて、認証端末400を識別する端末IDを、この生体認証要求に含めて入力制御装置200に送信してもよい。その場合、入力制御装置200は、認証端末400の端末IDと、その認証端末400の設置場所の場所IDとを対応付けて、予め記憶部210に記憶しておく。これにより、入力制御装置200は、受信した生体認証要求に含まれる端末IDに基づいて、記憶部210を参照し、認証端末400の場所IDを取得することができる。The authentication control unit 453 transmits a biometric authentication request including an authentication image to the input control device 200 via the network N. The authentication control unit 453 also transmits the biometric authentication request including a location ID for identifying the location where the device is installed and the purpose of the biometric authentication to the input control device 200. The purpose includes, for example, information on whether or not the request includes payment processing or identity verification. The authentication control unit 453 may also transmit the biometric authentication request including a terminal ID for identifying the authentication terminal 400 instead of the location ID to the input control device 200. In that case, the input control device 200 associates the terminal ID of the authentication terminal 400 with the location ID of the location where the authentication terminal 400 is installed, and stores the terminal ID in the storage unit 210 in advance. As a result, the input control device 200 can refer to the storage unit 210 based on the terminal ID included in the received biometric authentication request and obtain the location ID of the authentication terminal 400.

また、認証制御部453は、入力制御装置200から生体認証の結果を受信する。また、認証結果が成功である場合、認証制御部453は、生体認証に成功した旨と共に、成功した認証方式に応じて決定されたユーザUの意思の入力方法を入力制御装置200から受信する。生体認証に成功した場合、認証制御部453は、生体認証に成功した旨と、決定された意思の入力方法を表示制御部454に出力する。生体認証に失敗した場合、認証制御部453は、その旨を表示制御部454に出力する。The authentication control unit 453 also receives the result of the biometric authentication from the input control device 200. Furthermore, if the authentication result is successful, the authentication control unit 453 receives from the input control device 200 a message indicating that the biometric authentication was successful, as well as the input method of user U's intention that was determined according to the successful authentication method. If the biometric authentication is successful, the authentication control unit 453 outputs a message indicating that the biometric authentication was successful and the determined input method of intention to the display control unit 454. If the biometric authentication is unsuccessful, the authentication control unit 453 outputs that message to the display control unit 454.

ユーザUが、決定された意思の入力方法を用いてジェスチャを行うと、認証制御部453は、第1のカメラ410が撮影したジェスチャ画像を撮影制御部451から受信する。また、認証制御部453は、そのジェスチャ画像を入力制御装置200に送信する。When the user U makes a gesture using the determined intention input method, the authentication control unit 453 receives the gesture image captured by the first camera 410 from the capture control unit 451. The authentication control unit 453 also transmits the gesture image to the input control device 200.

認証制御部453は、ジェスチャにより入力されたユーザUの意思に応じて、所定のサービスの制御機器に対し、そのサービスを実行させるための指示信号を出力する。所定のサービスとは、例えば、決済処理の実行、ドア(ゲート)の開閉、施錠の開錠、チェックイン処理の実行、チェックアウト処理の実行等である。これらに限らず、所定のサービスには、ユーザUの認証の成功及びユーザUの意思の入力に応じて提供される種々のサービスが含まれる。これにより、ユーザUは、生体認証の結果及び入力したユーザUの意思に応じて、決済処理や各種施設の利用など、認証を求められた所定のサービスの提供を受けることができる。The authentication control unit 453 outputs an instruction signal to a control device for a specific service to execute the service in accordance with the intention of user U input by a gesture. Examples of specific services include execution of payment processing, opening and closing of doors (gates), unlocking of locks, execution of check-in processing, execution of check-out processing, etc. In addition, the specific services include various services that are provided in response to successful authentication of user U and input of the intention of user U. As a result, user U can be provided with the specific service for which authentication is requested, such as payment processing and use of various facilities, in accordance with the results of biometric authentication and the intention of user U input.

表示制御部454は、生体認証結果に応じた表示内容を表示部440に表示する。表示制御部454は、例えば、認証が成功した旨又は失敗した旨をユーザUに対して表示する。また、表示制御部454は、生体認証の方式、ユーザUの氏名等を認証結果と併せて表示部440に表示してもよい。例えば、表示制御部454は、「○○様、顔認証に成功しました。」、「○○様、顔認証と虹彩認証に成功しました。」などと表示する。氏名等の情報は、必要に応じて非表示や個人を特定できない形式にしてもよい。これらに加え、表示制御部454は、生体認証のために必要な動作(マスクを外す、顔を認証端末400に向けるなど)をユーザUに対して案内してもよい。The display control unit 454 displays display content according to the biometric authentication result on the display unit 440. For example, the display control unit 454 displays to the user U that the authentication was successful or unsuccessful. The display control unit 454 may also display the biometric authentication method, the name of the user U, etc. on the display unit 440 together with the authentication result. For example, the display control unit 454 displays "Mr. XX, face authentication was successful," "Mr. XX, face authentication and iris authentication were successful," etc. Information such as the name may be hidden or in a format that does not identify the individual as necessary. In addition to these, the display control unit 454 may guide the user U on the actions required for biometric authentication (such as removing a mask or pointing the face toward the authentication terminal 400).

また、表示制御部454は、上記の生体認証結果に加えて、決定された意思の入力方法を表示部440に表示する。図10及び図11は、表示部440に表示する表示内容の一例を示す図である。
図10は、ユーザUが顔認証及び虹彩認証に成功した場合の表示部440の表示内容を示す図である。ユーザUは、手や腕を用いて「H」又は「Z」のジェスチャを行うことにより、支払に同意するか否かの意思を認証端末400に入力することができる。
図11は、ユーザUが虹彩認証のみに成功した場合の表示部440の表示内容を示す図である。上述の例と異なり、ユーザUが認証に成功しているのは虹彩認証のみであるので、ユーザUには、「Z」の文字に代えて、パスコードの入力が求められる。
Furthermore, the display control unit 454 displays the determined method for inputting the intention, in addition to the biometric authentication result, on the display unit 440. Fig. 10 and Fig. 11 are diagrams showing an example of the display contents displayed on the display unit 440.
10 is a diagram showing the display content of the display unit 440 when the user U has succeeded in face authentication and iris authentication. The user U can input his/her intention of agreeing to the payment or not to the authentication terminal 400 by making a gesture of "H" or "Z" with his/her hand or arm.
11 is a diagram showing the display content of the display unit 440 when the user U has succeeded in only the iris authentication. Unlike the above example, the user U has succeeded in only the iris authentication, so the user U is required to input a passcode instead of the letter "Z."

このように、表示制御部454は、生体認証の精度に応じて入力のし易さが異なる入力方法を表示部440に表示する。なお、虹彩認証のみに成功した場合には、顔認証及び虹彩認証の双方を行い、顔認証に失敗した場合も含まれる。In this way, the display control unit 454 displays on the display unit 440 input methods with different ease of input depending on the accuracy of the biometric authentication. Note that when only iris authentication is successful, both face authentication and iris authentication are performed, which also includes cases where face authentication fails.

また、表示制御部454は、表示部440とユーザUとの間の空間にホログラムを表示してもよい。表示制御部454は、例えば、ホログラムに「戻る」ボタンと「支払同意」ボタンを表示し、ユーザUがホログラム上でいずれかをタッチすることで、ユーザUの意思の入力を受け付ける。また、表示制御部454は、ホログラム上にパスコード入力のためのキーボード画面を表示してもよい。ユーザUは、ホログラム上でキーを押すことでパスコードを入力する。これにより、ジェスチャ以外の方法により、ユーザUが物体に触れることなく、意思の入力を行うことができる。 The display control unit 454 may also display a hologram in the space between the display unit 440 and the user U. For example, the display control unit 454 may display a "Back" button and a "Payment Agreement" button on the hologram, and accept input of the user U's intention when the user U touches either of them on the hologram. The display control unit 454 may also display a keyboard screen for inputting a passcode on the hologram. The user U inputs the passcode by pressing the keys on the hologram. This allows the user U to input his or her intention by a method other than gestures, without touching an object.

続いて、入力制御装置200について説明を行う。入力制御装置200は、所定の認証端末400におけるユーザUの入力処理を制御する情報処理装置である。入力制御装置200は、複数台のサーバに冗長化されてもよく、各機能ブロックが複数台のコンピュータで実現されてもよい。Next, the input control device 200 will be described. The input control device 200 is an information processing device that controls the input processing of the user U at a specific authentication terminal 400. The input control device 200 may be made redundant with multiple servers, and each functional block may be realized by multiple computers.

具体的には、まず、入力制御装置200は、認証端末400からユーザUの生体情報、認証端末400の場所ID、生体認証の用途を含む生体認証要求を受け付ける。次に、入力制御装置200は、これらの情報を含む生体認証要求を認証装置100に対して送信する。複数の生体認証を行う場合、入力制御装置200は、複数の生体認証の方式のそれぞれに対応する複数の生体情報を取得し、生体認証の方式ごとに生体認証要求を行う。ここで、入力制御装置200は、認証端末400の用途又は設置場所に応じて生体認証を制御する。入力制御装置200は、例えば、図9に示すような用途及び設置場所の組合せを用いて、生体認証を制御する。本実施形態では、入力制御装置200は、ユーザUの顔及び虹彩の生体情報を取得し、これらと共に認証端末400の場所ID、生体認証の用途を含む生体認証要求を認証装置100に送信する。Specifically, first, the input control device 200 receives a biometric authentication request including the biometric information of the user U, the location ID of the authentication terminal 400, and the purpose of the biometric authentication from the authentication terminal 400. Next, the input control device 200 transmits a biometric authentication request including these pieces of information to the authentication device 100. When performing multiple biometric authentications, the input control device 200 acquires multiple pieces of biometric information corresponding to each of the multiple biometric authentication methods, and transmits a biometric authentication request for each biometric authentication method. Here, the input control device 200 controls the biometric authentication according to the purpose or installation location of the authentication terminal 400. The input control device 200 controls the biometric authentication using, for example, a combination of purpose and installation location as shown in FIG. 9. In this embodiment, the input control device 200 acquires biometric information of the face and iris of the user U, and transmits a biometric authentication request including the location ID of the authentication terminal 400 and the purpose of the biometric authentication to the authentication device 100.

入力制御装置200は、生体認証の結果を認証装置100から受信する。生体認証に成功した場合、入力制御装置200は、非接触での入力方法を用いて、ユーザUに提供されるサービスに対するユーザUの意思の入力を受け付ける。また、入力制御装置200は、ユーザUに提供されるサービスに対するユーザUの意思の非接触での入力方法を、成功した生体認証の方式に基づいて決定する。入力制御装置200は、成功した生体認証の精度に応じて、入力方法におけるユーザUの意思の入力のし易さを決定する。例えば、既に説明したように、ユーザUの意思にサービスの決済処理に対する同意が含まれる場合には、顔認証及び虹彩認証を行う。顔認証及び虹彩認証の双方に成功した場合、高い認証精度が得られるため、入力制御装置200は、ユーザUにとって入力し易い入力方法を決定する。The input control device 200 receives the result of the biometric authentication from the authentication device 100. If the biometric authentication is successful, the input control device 200 accepts the input of the user U's intention regarding the service provided to the user U using a non-contact input method. The input control device 200 also determines the non-contact input method of the user U's intention regarding the service provided to the user U based on the successful biometric authentication method. The input control device 200 determines the ease of inputting the user U's intention in the input method according to the accuracy of the successful biometric authentication. For example, as already described, if the intention of the user U includes consent to the payment processing of the service, face authentication and iris authentication are performed. If both face authentication and iris authentication are successful, high authentication accuracy is obtained, so the input control device 200 determines the input method that is easy for the user U to input.

入力制御装置200は、生体認証に成功した旨及び決定したユーザUの意思の入力方法を認証端末400に返信する。そして、入力制御装置200は、決定された入力方法を用いてユーザUの意思の入力を受け付ける。例えば、図10の例において、ユーザUが手や腕を動かして「Z」のジェスチャをした場合には、ユーザUの支払同意の意思を受け付ける。The input control device 200 returns to the authentication terminal 400 a message indicating that the biometric authentication was successful and the determined input method of user U's intention. The input control device 200 then accepts the input of user U's intention using the determined input method. For example, in the example of FIG. 10, if user U makes a "Z" gesture by moving his or her hand or arm, user U's intention to agree to payment is accepted.

次に、入力制御装置200の構成について詳細に説明する。図8は、本実施形態にかかる入力制御装置200の構成を示すブロック図である。入力制御装置200は、記憶部210、メモリ220、通信部230、制御部240を備える。Next, the configuration of the input control device 200 will be described in detail. FIG. 8 is a block diagram showing the configuration of the input control device 200 according to this embodiment. The input control device 200 includes a storage unit 210, a memory 220, a communication unit 230, and a control unit 240.

記憶部210は、ハードディスク、フラッシュメモリ等の記憶装置である。記憶部210は、プログラム211、入力方法情報212、認証方式情報213、ユーザ情報214を記憶する。
プログラム211は、本実施形態にかかる入力制御方法の処理が実装されたコンピュータプログラムである。
The storage unit 210 is a storage device such as a hard disk, a flash memory, etc. The storage unit 210 stores a program 211, input method information 212, authentication method information 213, and user information 214.
The program 211 is a computer program in which the processing of the input control method according to this embodiment is implemented.

入力方法情報212は、認証方式2121と入力方法2122とを対応付けた情報である。図12は、入力方法情報212の一例を示す図である。顔認証及び虹彩認証に成功した場合には、高い認証精度が得られるため、ユーザUは、比較的入力し易い「H」又は「Z」のジェスチャにより入力を行うことができる。また、顔認証及び虹彩認証のいずれかのみに成功した場合には、ユーザUは、これより入力し易さの低いパスコードの入力をする必要がある。このように、ユーザUが成功した生体認証の精度に応じて、ユーザUの意思の入力のし易さが決定され、記憶されている。これにより、ユーザUに対する認証の精度を高めることができる。 The input method information 212 is information that associates an authentication method 2121 with an input method 2122. FIG. 12 is a diagram showing an example of the input method information 212. If the face authentication and iris authentication are successful, high authentication accuracy is obtained, and the user U can input using the gestures of "H" or "Z," which are relatively easy to input. If only either the face authentication or the iris authentication is successful, the user U needs to input a passcode that is less easy to input. In this way, the ease of inputting the user U's intention is determined and stored according to the accuracy of the biometric authentication that the user U succeeded in. This makes it possible to improve the accuracy of authentication for the user U.

また、入力方法及び入力のし易さは、上記に限られない。例えば、図13に示すように、得られる認証精度に応じて3段階又はそれ以上の入力のし易さを設けてもよい。図13では、虹彩認証にのみ成功した場合の入力方法として、ジェスチャによる生年月日の入力が設けられている。ユーザUは、例えば、生年月日を表す8桁の数字をジェスチャにより入力する。「H」や「Z」よりも入力し易さは低いが、事前に登録が必要なパスコードと比較すると入力し易い入力方法である。 Furthermore, the input method and ease of input are not limited to the above. For example, as shown in FIG. 13, three or more levels of ease of input may be provided depending on the authentication accuracy obtained. In FIG. 13, input of date of birth by gesture is provided as an input method when only iris authentication is successful. User U inputs, for example, an eight-digit number representing date of birth by gesture. Although it is less easy to input than "H" or "Z," it is an easier input method than a passcode that must be registered in advance.

なお、入力方法はジェスチャに限られない。認証端末400にマイクを設けて、ユーザUの音声を収音し、音声認識を用いてユーザUの意思の入力を行ってもよい。
さらに、認証方式2121は、ユーザUが成功した認証方式に限らず、ユーザUが登録している認証画像に対応する認証方式を考慮してもよい。例えば、ユーザUが虹彩認証に成功し、顔認証には失敗した場合であっても、ユーザUが顔情報を登録している場合には、顔認証及び虹彩認証に成功した場合と同様の入力方法とするなどしてもよい。
The input method is not limited to gestures. The authentication terminal 400 may be provided with a microphone to pick up the voice of the user U, and the user U's intention may be input using voice recognition.
Furthermore, the authentication method 2121 is not limited to the authentication method in which the user U has succeeded, and may take into consideration an authentication method corresponding to an authentication image registered by the user U. For example, even if the user U has succeeded in iris authentication but failed in face authentication, if the user U has registered face information, the input method may be the same as that in the case where face authentication and iris authentication have succeeded.

認証方式情報213は、場所ID2131、用途2132、認証方式2134を対応付けた情報である。既に図9を用いて説明したように、ユーザUに対して行う認証方式は、認証端末400の設置場所及び用途に応じて決定される。認証方式情報213はこれらを対応付けて記憶したものである。
なお、図9に示す認証方式の組合せは一例であり、これに限られない。例えば、生体認証の精度の高さによって、組み合わせる認証方式の数を増減させてもよい。
The authentication method information 213 is information that associates a location ID 2131, a purpose 2132, and an authentication method 2134. As already described with reference to Fig. 9, the authentication method to be performed on the user U is determined according to the installation location and purpose of the authentication terminal 400. The authentication method information 213 stores these in association with each other.
Note that the combination of authentication methods shown in Fig. 9 is an example, and is not limited to this. For example, the number of authentication methods to be combined may be increased or decreased depending on the accuracy of biometric authentication.

ユーザ情報214は、ユーザID2141とユーザUの個人情報2142とを対応付けた情報である。ユーザID2141は、ユーザUを識別する識別情報である。個人情報2142は、ユーザUの氏名、クレジットカード情報、パスコード等である。 User information 214 is information that associates a user ID 2141 with personal information 2142 of user U. User ID 2141 is identification information that identifies user U. Personal information 2142 is user U's name, credit card information, passcode, etc.

メモリ220は、RAM(Random Access Memory)等の揮発性記憶装置であり、制御部240の動作時に一時的に情報を保持するための記憶領域である。
通信部230は、ネットワークNとの通信インタフェースである。
The memory 220 is a volatile storage device such as a RAM (Random Access Memory), and is a storage area for temporarily holding information when the control unit 240 is operating.
The communication unit 230 is a communication interface with the network N.

制御部240は、入力制御装置200の各構成を制御するプロセッサつまり制御装置である。制御部240は、記憶部210からプログラム211をメモリ220へ読み込ませ、プログラム211を実行する。これにより、制御部240は、生体情報取得部241、認証制御部242、決定部243、受付部244の機能を実現する。The control unit 240 is a processor, or control device, that controls each component of the input control device 200. The control unit 240 loads the program 211 from the storage unit 210 into the memory 220 and executes the program 211. As a result, the control unit 240 realizes the functions of the biometric information acquisition unit 241, the authentication control unit 242, the determination unit 243, and the reception unit 244.

生体情報取得部241は、上述した生体情報取得部11の一例である。生体情報取得部241は、所定の認証端末400からユーザUの生体情報を取得する。複数の生体認証方式を用いて生体認証を行う場合、生体情報取得部241は、複数の生体認証の方式のそれぞれに対応する複数の生体情報を取得する。具体的には、生体情報取得部241は、ユーザUの生体情報を、ネットワークNを介して認証端末400から取得する。生体情報は、例えば第1のカメラ410及び第2のカメラ411により撮影されたユーザUの顔及び虹彩の生体情報である。したがって、生体情報取得部241は、ユーザUから非接触で生体情報を取得する。The biometric information acquisition unit 241 is an example of the biometric information acquisition unit 11 described above. The biometric information acquisition unit 241 acquires biometric information of the user U from a specified authentication terminal 400. When biometric authentication is performed using multiple biometric authentication methods, the biometric information acquisition unit 241 acquires multiple pieces of biometric information corresponding to each of the multiple biometric authentication methods. Specifically, the biometric information acquisition unit 241 acquires the biometric information of the user U from the authentication terminal 400 via the network N. The biometric information is, for example, biometric information of the face and irises of the user U captured by the first camera 410 and the second camera 411. Therefore, the biometric information acquisition unit 241 acquires biometric information from the user U without contact.

認証制御部242は、上述した認証制御部12の一例である。認証制御部242は、取得した生体情報を用いた生体認証を制御する。また、複数の方式の生体認証を行う場合、認証制御部242は、生体認証の方式ごとに生体認証を制御する。認証制御部242は、例えば、取得した顔情報及び虹彩情報を用いて、顔認証及び虹彩認証を、それぞれの方式ごとに制御する。具体的には、認証制御部242は、ネットワークNを介して、顔認証要求及び虹彩認証要求を認証装置100に対して送信する。顔認証要求及び虹彩認証要求には、それぞれの生体情報が含まれる。これらの生体認証要求には、それぞれの生体認証方式の情報を含めてもよい。これにより、認証装置100における照合速度が向上し得る。The authentication control unit 242 is an example of the authentication control unit 12 described above. The authentication control unit 242 controls biometric authentication using the acquired biometric information. When multiple methods of biometric authentication are performed, the authentication control unit 242 controls the biometric authentication for each method of biometric authentication. The authentication control unit 242 controls the face authentication and iris authentication for each method, for example, using the acquired face information and iris information. Specifically, the authentication control unit 242 transmits a face authentication request and an iris authentication request to the authentication device 100 via the network N. The face authentication request and the iris authentication request include the respective biometric information. These biometric authentication requests may also include information on the respective biometric authentication methods. This can improve the matching speed in the authentication device 100.

また、認証制御部242は、認証方式情報213を参照して、認証端末400の用途又は設置場所に応じて生体認証を制御する。認証方式情報213には、図9に示すように、場所ID、用途、認証方式が対応付けて記憶されている。認証制御部242は、顔認証及び虹彩認証の制御を共に行ってもよいし、まず一方の制御を行い、その成功に応じて他方の制御を行ってもよい。例えば、顔認証及び虹彩認証の成功が必要な場合に、まず顔認証を行い、顔認証が成功した場合にのみ虹彩認証を行うこととしてもよい。 The authentication control unit 242 also refers to the authentication method information 213 to control biometric authentication according to the purpose or installation location of the authentication terminal 400. As shown in FIG. 9, the authentication method information 213 stores a location ID, purpose, and authentication method in association with each other. The authentication control unit 242 may control both face authentication and iris authentication, or may first control one and then control the other depending on the success of that. For example, when success of face authentication and iris authentication is required, face authentication may be performed first, and iris authentication may be performed only if face authentication is successful.

決定部243は、ユーザUが生体認証に成功した場合、ユーザUに提供されるサービスに対するユーザUの意思の非接触での入力方法を、生体認証の方式に基づいて決定する。また、複数の生体認証方式を用いて生体認証を行う場合、決定部243は、生体認証に成功した方式に応じて入力方法を決定する。When the user U is successful in the biometric authentication, the determination unit 243 determines a contactless input method of the user U's intention regarding the service to be provided to the user U based on the biometric authentication method. In addition, when the biometric authentication is performed using multiple biometric authentication methods, the determination unit 243 determines the input method depending on the method that succeeded in the biometric authentication.

具体的には、決定部243は、入力方法情報212を参照してユーザUの意思の非接触での入力方法を決定する。入力方法情報212には、図12及び図13に示す例のように、認証方式と入力方法とが対応付けて記憶されている。これらの図に示すように、決定部243は、生体認証の精度に応じて、入力方法におけるユーザUの意思の入力のし易さを決定する。例えば、ユーザUの意思は、サービスの決済処理に対する同意が含まれる場合がある。決済処理には高い認証精度が求められるため、ユーザUは、顔認証及び虹彩認証に成功する必要がある。ユーザUが顔認証及び虹彩認証に成功すると、決定部243は、ユーザUが比較的入力し易い「H」又は「Z」のジェスチャを入力方法として決定する。また、顔認証及び虹彩認証のいずれかのみに成功した場合には、決定部243は、これより入力し易さの低いパスコード等のジェスチャ入力を入力方法として決定する。これにより、認証精度を高めることが可能となる。Specifically, the determination unit 243 refers to the input method information 212 to determine a contactless input method of the user U's intention. In the input method information 212, as in the examples shown in FIG. 12 and FIG. 13, the authentication method and the input method are stored in association with each other. As shown in these figures, the determination unit 243 determines the ease of inputting the user U's intention in the input method according to the accuracy of the biometric authentication. For example, the user U's intention may include consent to the payment process of the service. Since high authentication accuracy is required for the payment process, the user U needs to succeed in the face authentication and iris authentication. When the user U succeeds in the face authentication and iris authentication, the determination unit 243 determines the gesture of "H" or "Z", which is relatively easy for the user U to input, as the input method. In addition, when only one of the face authentication and the iris authentication is successful, the determination unit 243 determines the gesture input of a passcode, which is less easy to input, as the input method. This makes it possible to improve the authentication accuracy.

なお、決定部243は、ジェスチャに限らず、音声による入力を入力方法として決定してもよい。これにより、ジェスチャ同様、ユーザUが物体に接触することなく、意思の入力を行うことができる。
さらに、決定部243は、ユーザUが成功した認証方式に限らず、失敗した認証方式を考慮して入力方法を決定してよい。例えば、ユーザUがマスクをしている場合には、虹彩認証に成功し、顔認証に失敗すると考えられる。このような場合でも、ユーザUが顔情報を登録している場合には、決定部243は、ユーザUが顔認証に成功した場合と同様の入力方法を決定してもよい。これにより、ユーザUの利便性を低下させずに、処理を進めることができる。
Note that the determination unit 243 may determine input by voice as the input method, in addition to gestures. This allows the user U to input his/her intention without touching an object, similar to gestures.
Furthermore, the determination unit 243 may determine the input method in consideration of the authentication method that the user U has succeeded in, and also in consideration of the authentication method that has failed. For example, when the user U is wearing a mask, it is considered that the iris authentication will be successful and the face authentication will be unsuccessful. Even in such a case, when the user U has registered face information, the determination unit 243 may determine the same input method as when the user U has succeeded in face authentication. This allows the process to proceed without reducing the convenience of the user U.

受付部244は、上述した受付部14の一例である。受付部244は、ユーザUが生体認証に成功した場合、非接触での入力方法を用いて、ユーザUに提供されるサービスに対するユーザUの意思の入力を受け付ける。また、受付部244は、決定された入力方法を用いてユーザUの意思の入力を受け付ける。受付部244は、例えば、ユーザUが空間に対して行うジェスチャにより、ユーザUから非接触で入力を受け付ける。具体的には、ユーザUは、決定された入力方法を認証端末400において確認し、その入力方法に従いジェスチャを行う。認証端末400はジェスチャを撮影し、入力制御装置200に送信する。受付部244は、受信したジェスチャ画像からユーザUの意思を読み取り、ユーザUの意思の入力を受け付ける。また、受付部244は、受け付けたユーザUの意思に基づいて、所定のサービスの制御機器にそのサービスを実行させるための指示信号を生成し、生成した指示信号を認証端末400に対し出力する。これにより、ユーザUは、所望のサービスの提供を受けることができる。The reception unit 244 is an example of the reception unit 14 described above. When the user U has succeeded in biometric authentication, the reception unit 244 uses a non-contact input method to receive the input of the user U's intention regarding the service provided to the user U. The reception unit 244 also receives the input of the user U's intention using the determined input method. The reception unit 244 receives the input from the user U in a non-contact manner, for example, by a gesture made by the user U in space. Specifically, the user U checks the determined input method on the authentication terminal 400 and makes a gesture according to the input method. The authentication terminal 400 photographs the gesture and transmits it to the input control device 200. The reception unit 244 reads the intention of the user U from the received gesture image and receives the input of the user U's intention. The reception unit 244 also generates an instruction signal for causing a control device of a specific service to execute the service based on the received intention of the user U, and outputs the generated instruction signal to the authentication terminal 400. This allows the user U to receive the desired service.

図14は、本実施形態にかかる入力制御装置200が行う入力制御処理の流れを示すフローチャートである。まず、生体情報取得部241は、認証端末400から生体認証要求を受信し、認証端末400においてユーザから非接触で取得された生体情報を取得する(S401)。次に、認証制御部242は、認証端末400の用途又は設置場所に応じて認証装置100に生体認証を要求する(S402)。認証制御部242は、複数の生体認証を同時に要求してもよいし、いずれかの生体認証を要求し、その成功に応じて他の生体認証を要求してもよい。 Figure 14 is a flowchart showing the flow of input control processing performed by the input control device 200 according to this embodiment. First, the biometric information acquisition unit 241 receives a biometric authentication request from the authentication terminal 400, and acquires biometric information acquired from the user in a non-contact manner at the authentication terminal 400 (S401). Next, the authentication control unit 242 requests biometric authentication from the authentication device 100 depending on the purpose or installation location of the authentication terminal 400 (S402). The authentication control unit 242 may request multiple biometric authentications simultaneously, or may request one biometric authentication and then request another biometric authentication depending on the success of the first biometric authentication.

続いて、受付部244は、認証装置100から生体認証の結果を受信し、生体認証に成功したか否かを判定する(S403)。認証に成功した場合(S403のYes)、決定部243は、成功した認証の方式に応じて、ユーザUに提供されるサービスに対するユーザUの意思の非接触での入力方法を決定する(S404)。そして、認証制御部242は、認証端末400に対し、認証に成功した旨と、決定した入力方法を返信する(S405)。Next, the reception unit 244 receives the result of the biometric authentication from the authentication device 100 and determines whether the biometric authentication was successful (S403). If the authentication is successful (Yes in S403), the determination unit 243 determines the contactless input method of the user U's intention regarding the service provided to the user U according to the successful authentication method (S404). The authentication control unit 242 then replies to the authentication terminal 400 with a message indicating that the authentication was successful and the determined input method (S405).

ユーザUは、認証端末400の表示に従い、ジェスチャ等により、サービスに対するユーザUの意思の入力を行う。受付部244は、ユーザUの意思を認証端末400から受信して、ユーザUの意思の入力を受け付ける(S406)。受付部244は、受け付けたユーザUの意思に基づいて、所定のサービスの制御機器にそのサービスを実行させるための指示信号を生成し、認証端末400にこれを出力する。認証端末400がサービスの制御機器に対して指示信号を送信することにより、ユーザUは、所望のサービスの提供を受けることができる。
ステップS403において、認証に成功しなかった場合(S403のNo)、認証制御部242は、生体認証に失敗した旨を認証端末400に返信する(S407)。
User U inputs his/her intention regarding the service by gestures or the like in accordance with the display of authentication terminal 400. Accepting unit 244 receives user U's intention from authentication terminal 400 and accepts the input of user U's intention (S406). Based on the accepted intention of user U, accepting unit 244 generates an instruction signal for causing a control device of a specified service to execute the service, and outputs this to authentication terminal 400. By authentication terminal 400 transmitting the instruction signal to the control device of the service, user U can be provided with the desired service.
In step S403, if the authentication is not successful (No in S403), the authentication control unit 242 returns a message to the authentication terminal 400 indicating that the biometric authentication has failed (S407).

以上説明したように、本実施形態にかかる入力システム1000によれば、非接触型の認証方式を用いるので、ユーザUが物体に接触することなく認証を行うことができる。また、提供されるサービスに対するユーザUの意思の非接触での入力方法を、生体認証の方式に基づいて決定するので、認証精度に応じた入力方法を決定することができる。さらに、ユーザUの意思の入力はジェスチャ等により行われ、受け付けられるので、ユーザUは物体に接触することなく意思の入力を行うことができる。したがって、所定のサービスの提供を受けるために、ユーザUは、認証から意思の入力までを物体に接触することなく完了することができる。
また、本実施形態にかかる入力システム1000によれば、認証端末400の用途又は設置場所に応じて生体認証を行うことができる。そして、ユーザUの意思の入力方法は、成功した生体認証の方式に応じて、入力のし易さを変えて決定することができる。このように、本実施形態にかかる入力システム1000は、認証を行うシーンに応じて要素数を変えることができるので、認証の精度を低下させることなく、ユーザUに対して適切に認証及びサービスの提供を行うことができる。
As described above, the input system 1000 according to the present embodiment uses a contactless authentication method, so that authentication can be performed without the user U touching an object. In addition, the contactless input method of the user U's intention for the provided service is determined based on the biometric authentication method, so that the input method can be determined according to the authentication accuracy. Furthermore, the input of the user U's intention is performed and accepted by gestures or the like, so that the user U can input his/her intention without touching an object. Therefore, in order to receive the provision of a predetermined service, the user U can complete the process from authentication to input of intention without touching an object.
Furthermore, according to the input system 1000 of the present embodiment, biometric authentication can be performed according to the purpose or installation location of the authentication terminal 400. The input method of the user U's intention can be determined by changing the ease of input according to the successful biometric authentication method. In this way, the input system 1000 of the present embodiment can change the number of elements according to the authentication scene, so that it is possible to appropriately authenticate and provide services to the user U without reducing the accuracy of authentication.

<実施形態3>
本実施形態は、上述した実施形態2の変形例である。本実施形態にかかる入力制御装置200aは、認証端末400から受信した生体認証要求に対し、認証装置100を介すことなく認証処理を行い、その結果を認証端末400に返信するものである。
<Embodiment 3>
This embodiment is a modification of the above-described embodiment 2. The input control device 200a according to this embodiment performs authentication processing for a biometric authentication request received from the authentication terminal 400 without going through the authentication device 100, and returns the result to the authentication terminal 400.

図15は、本実施形態にかかる入力制御装置200aの構成を示すブロック図である。図15に示すように、入力制御装置200aは、記憶部210と、メモリ220と、通信部230と、制御部240とを備えている。記憶部210は、プログラム211と、入力方法情報212と、認証方式情報213、ユーザ情報214に加え、生体情報215をさらに記憶する。 Figure 15 is a block diagram showing the configuration of the input control device 200a according to this embodiment. As shown in Figure 15, the input control device 200a includes a storage unit 210, a memory 220, a communication unit 230, and a control unit 240. The storage unit 210 stores a program 211, input method information 212, authentication method information 213, user information 214, and further stores biometric information 215.

生体情報215は、上述した認証装置100の生体情報DB110に相当するものであり、ユーザID2151と、生体特徴情報2152と、生体認証方式2153とが対応付けられて記憶されている。The biometric information 215 corresponds to the biometric information DB 110 of the authentication device 100 described above, and stores a user ID 2151, biometric feature information 2152, and biometric authentication method 2153 in correspondence with each other.

生体情報取得部241aは、実施形態2で説明した機能に加え、認証装置100における検出部120、特徴点抽出部130、登録部140、認証部150の機能を有している。つまり、生体情報取得部241aは、認証端末400から受信した生体情報登録要求に含まれる顔等の画像から顔領域等を検出し、顔等の特徴情報を抽出し、ユーザIDを発行する。また、生体情報取得部241aは、ユーザID2151と生体特徴情報2152及び生体認証方式2153とを対応付けた生体情報215を記憶部210に登録する。The biometric information acquisition unit 241a has the functions of the detection unit 120, feature point extraction unit 130, registration unit 140, and authentication unit 150 in the authentication device 100, in addition to the functions described in the second embodiment. That is, the biometric information acquisition unit 241a detects a face area, etc. from an image of a face, etc. included in a biometric information registration request received from the authentication terminal 400, extracts feature information of the face, etc., and issues a user ID. The biometric information acquisition unit 241a also registers in the storage unit 210 the biometric information 215 that associates a user ID 2151 with biometric feature information 2152 and a biometric authentication method 2153.

認証制御部242aは、取得した撮影画像に含まれるユーザUの顔や虹彩等の領域から抽出された特徴情報と、記憶部210に記憶された生体特徴情報2152とを照合することにより、生体認証を制御する。
上記以外の構成については、実施形態2と同様であるので、それらの説明を省略する。
The authentication control unit 242a controls biometric authentication by comparing feature information extracted from areas of the user U's face, iris, etc. contained in the acquired captured image with the biometric feature information 2152 stored in the memory unit 210.
The configuration other than the above is the same as that of the second embodiment, so the description thereof will be omitted.

以上説明したように、本実施形態にかかる入力制御装置200aによれば、実施形態2と同様の効果を奏することができる。As described above, the input control device 200a of this embodiment can achieve the same effects as those of embodiment 2.

<実施形態4>
本実施形態は、上述した実施形態2の変形例である。本実施形態にかかる入力制御装置200bは、実施形態2で説明した認証端末400の機能を有するものである。
<Embodiment 4>
This embodiment is a modification of the above-described embodiment 2. An input control device 200b according to this embodiment has the functions of the authentication terminal 400 described in the embodiment 2.

図16は、本実施形態にかかる入力制御装置200bの構成を示すブロック図である。図16に示すように、入力制御装置200bは、記憶部210と、メモリ220と、通信部230と、制御部240に加えて、第1のカメラ250、第2のカメラ251、表示部260を備えている。
また、制御部240は、実施形態2で説明した機能に加えて、撮影制御部245、登録部246、表示制御部248の各機能を実現することが可能である。
Fig. 16 is a block diagram showing the configuration of an input control device 200b according to this embodiment. As shown in Fig. 16, the input control device 200b includes a storage unit 210, a memory 220, a communication unit 230, a control unit 240, a first camera 250, a second camera 251, and a display unit 260.
Furthermore, the control unit 240 can realize the functions of an imaging control unit 245, a registration unit 246, and a display control unit 248 in addition to the functions described in the second embodiment.

第1のカメラ250、第2のカメラ251、表示部260は、それぞれ実施形態2における第1のカメラ410、第2のカメラ411、表示部440に相当する。つまり、第1のカメラ250は、例えばユーザUの顔を撮影し、第2のカメラ251は、ユーザUの虹彩を撮影する。また、第1のカメラ250は、ユーザUのジェスチャを撮影する。表示部260は、少なくとも表示装置であり、入力装置を含む出力部、例えば、タッチパネルであってもよい。The first camera 250, the second camera 251, and the display unit 260 correspond to the first camera 410, the second camera 411, and the display unit 440 in embodiment 2, respectively. That is, the first camera 250 captures, for example, the face of the user U, and the second camera 251 captures the iris of the user U. The first camera 250 also captures the gestures of the user U. The display unit 260 is at least a display device, and may be an output unit including an input device, for example, a touch panel.

生体情報取得部241bは、ユーザUの生体情報を、第1のカメラ250及び第2のカメラ251により撮影されたユーザUの顔画像等から取得する。The biometric information acquisition unit 241b acquires biometric information of user U from facial images of user U captured by the first camera 250 and the second camera 251.

撮影制御部245、登録部246、表示制御部248は、それぞれ実施形態2で説明した撮影制御部451、登録部452、表示制御部454に相当する。ただし、撮影制御部245は、登録画像を登録部246に出力するが、認証用画像及びジェスチャ画像は認証制御部242bに出力する。The photographing control unit 245, the registration unit 246, and the display control unit 248 correspond to the photographing control unit 451, the registration unit 452, and the display control unit 454 described in embodiment 2, respectively. However, the photographing control unit 245 outputs the registration image to the registration unit 246, but outputs the authentication image and the gesture image to the authentication control unit 242b.

認証制御部242bは、入力制御装置200bの用途又は設置場所に応じて生体認証を制御する。
上記以外の構成については、実施形態2と同様であるので、それらの説明を省略する。
The authentication control unit 242b controls biometric authentication depending on the purpose or installation location of the input control device 200b.
The configuration other than the above is the same as that of the second embodiment, so the description thereof will be omitted.

以上説明したように、本実施形態にかかる入力制御装置200bによれば、実施形態2と同様の効果を奏することができる。As described above, the input control device 200b of this embodiment can achieve the same effects as those of embodiment 2.

なお、上述の実施形態では、ハードウェアの構成として説明したが、これに限定されるものではない。本開示は、任意の処理を、CPUにコンピュータプログラムを実行させることにより実現することも可能である。In the above embodiment, the configuration is described as hardware, but the present disclosure is not limited to this. Any processing can be realized by causing a CPU to execute a computer program.

上述の例において、プログラムは、様々なタイプの非一時的なコンピュータ可読媒体(non-transitory computer readable medium)を用いて格納され、コンピュータに供給することができる。非一時的なコンピュータ可読媒体は、様々なタイプの実体のある記録媒体(tangible storage medium)を含む。非一時的なコンピュータ可読媒体の例は、磁気記録媒体(例えばフレキシブルディスク、磁気テープ、ハードディスクドライブ)、光磁気記録媒体(例えば光磁気ディスク)、CD-ROM(Read Only Memory)、CD-R、CD-R/W、DVD(Digital Versatile Disc)、半導体メモリ(例えば、マスクROM、PROM(Programmable ROM)、EPROM(Erasable PROM)、フラッシュROM、RAM(Random Access Memory))を含む。また、プログラムは、様々なタイプの一時的なコンピュータ可読媒体(transitory computer readable medium)によってコンピュータに供給されてもよい。一時的なコンピュータ可読媒体の例は、電気信号、光信号、及び電磁波を含む。一時的なコンピュータ可読媒体は、電線及び光ファイバ等の有線通信路、又は無線通信路を介して、プログラムをコンピュータに供給できる。In the above example, the program can be stored and supplied to the computer using various types of non-transitory computer readable media. Non-transitory computer readable media include various types of tangible storage media. Examples of non-transitory computer readable media include magnetic recording media (e.g., flexible disks, magnetic tapes, hard disk drives), magneto-optical recording media (e.g., magneto-optical disks), CD-ROMs (Read Only Memory), CD-Rs, CD-R/Ws, DVDs (Digital Versatile Discs), and semiconductor memories (e.g., mask ROMs, PROMs (Programmable ROMs), EPROMs (Erasable PROMs), flash ROMs, and RAMs (Random Access Memory)). The program may also be supplied to the computer by various types of transitory computer readable media. Examples of transitory computer readable media include electrical signals, optical signals, and electromagnetic waves. The temporary computer-readable medium can supply the program to the computer via a wired communication path such as an electric wire or an optical fiber, or via a wireless communication path.

なお、本開示は上記実施形態に限られたものではなく、趣旨を逸脱しない範囲で適宜変更することが可能である。また、本開示は、それぞれの実施形態を適宜組み合わせて実施されてもよい。Note that the present disclosure is not limited to the above-described embodiments, and can be modified as appropriate without departing from the spirit and scope of the present disclosure. In addition, the present disclosure may be implemented by combining the respective embodiments as appropriate.

上記の実施形態の一部又は全部は、以下の付記のようにも記載されうるが、以下には限られない。
(付記1)
所定のユーザの生体情報を前記ユーザから非接触で取得する生体情報取得手段と、
前記生体情報を用いた生体認証を制御する認証制御手段と、
前記生体認証に成功した場合、非接触での入力方法を用いて、前記ユーザに提供されるサービスに対する前記ユーザの意思の入力を受け付ける受付手段と、
を備える
入力制御装置。
(付記2)
前記入力方法を前記生体認証の方式に基づいて決定する決定手段をさらに備え、
前記受付手段は、前記決定された入力方法を用いて前記ユーザの意思の入力を受け付ける
付記1に記載の入力制御装置。
(付記3)
前記生体情報取得手段は、複数の前記生体認証の方式のそれぞれに対応する複数の前記生体情報を取得し、
前記認証制御手段は、前記生体認証の方式ごとに前記生体認証を制御し、
前記決定手段は、前記生体認証に成功した方式に応じて前記入力方法を決定する
付記2に記載の入力制御装置。
(付記4)
前記受付手段は、前記ユーザが空間に対して行う動作により前記入力を受け付ける
付記2又は3に記載の入力制御装置。
(付記5)
前記決定手段は、前記生体認証の精度に応じて前記入力方法における前記ユーザの意思の入力のし易さを決定する
付記2から4のいずれか1項に記載の入力制御装置。
(付記6)
前記ユーザの意思は、前記サービスの決済処理に対する同意が含まれる
付記1から5のいずれか1項に記載の入力制御装置。
(付記7)
前記生体情報取得手段は、所定の認証端末から前記ユーザの生体情報を取得し、
前記認証制御手段は、前記認証端末の用途又は設置場所に応じて前記生体認証を制御する
付記1から6のいずれか1項に記載の入力制御装置。
(付記8)
前記認証制御手段は、前記入力制御装置の用途又は設置場所に応じて前記生体認証を制御する
付記1から7のいずれか1項に記載の入力制御装置。
(付記9)
所定のユーザの生体情報を前記ユーザから非接触で取得する認証端末と、
前記認証端末と接続された入力制御装置と、
を備え、
前記入力制御装置は、
前記認証端末から前記ユーザの生体情報を取得し、
前記生体情報を用いた生体認証を制御し、
前記生体認証に成功した場合、非接触での入力方法を用いて、前記ユーザに提供されるサービスに対する前記ユーザの意思の入力を受け付ける
入力システム。
(付記10)
前記入力制御装置は、
前記入力方法を前記生体認証の方式に基づいて決定し、
前記決定された入力方法を用いて前記ユーザの意思の入力を受け付ける
付記9に記載の入力システム。
(付記11)
コンピュータが、
所定のユーザの生体情報を前記ユーザから非接触で取得し、
前記生体情報を用いた生体認証を制御し、
前記生体認証に成功した場合、非接触での入力方法を用いて、前記ユーザに提供されるサービスに対する前記ユーザの意思の入力を受け付ける
入力制御方法。
(付記12)
所定のユーザの生体情報を前記ユーザから非接触で取得する生体情報取得処理と、
前記生体情報を用いた生体認証を制御する認証制御処理と、
前記生体認証に成功した場合、非接触での入力方法を用いて、前記ユーザに提供されるサービスに対する前記ユーザの意思の入力を受け付ける受付処理と、
をコンピュータに実行させる入力制御プログラムが格納された非一時的なコンピュータ可読媒体。
A part or all of the above-described embodiments can be described as, but is not limited to, the following supplementary notes.
(Appendix 1)
A biometric information acquiring means for acquiring biometric information of a predetermined user from the user in a non-contact manner;
an authentication control means for controlling biometric authentication using the biometric information;
a receiving means for receiving an input of the user's intention regarding a service to be provided to the user by using a non-contact input method when the biometric authentication is successful;
An input control device comprising:
(Appendix 2)
a determination unit for determining the input method based on the biometric authentication method,
The input control device according to claim 1, wherein the accepting means accepts an input of the user's intention using the determined input method.
(Appendix 3)
the biometric information acquisition means acquires a plurality of pieces of biometric information corresponding to the plurality of biometric authentication methods,
the authentication control means controls the biometric authentication for each of the biometric authentication methods;
The input control device according to claim 2, wherein the determination means determines the input method depending on a method that has resulted in successful biometric authentication.
(Appendix 4)
The input control device according to claim 2 or 3, wherein the accepting means accepts the input by a motion made by the user in a space.
(Appendix 5)
The input control device according to any one of claims 2 to 4, wherein the determination means determines the ease of inputting the user's intention in the input method depending on accuracy of the biometric authentication.
(Appendix 6)
The input control device according to any one of appendixes 1 to 5, wherein the user's intention includes consent to a payment process for the service.
(Appendix 7)
the biometric information acquiring means acquires biometric information of the user from a predetermined authentication terminal;
The input control device according to any one of claims 1 to 6, wherein the authentication control means controls the biometric authentication depending on a purpose or an installation location of the authentication terminal.
(Appendix 8)
The input control device according to any one of claims 1 to 7, wherein the authentication control means controls the biometric authentication depending on a purpose or an installation location of the input control device.
(Appendix 9)
an authentication terminal that acquires biometric information of a predetermined user from the user in a non-contact manner;
an input control device connected to the authentication terminal;
Equipped with
The input control device includes:
Acquiring biometric information of the user from the authentication terminal;
Controlling biometric authentication using the biometric information;
If the biometric authentication is successful, the input system accepts, using a non-contact input method, an input of the user's intention regarding a service to be provided to the user.
(Appendix 10)
The input control device includes:
determining the input method based on the biometric authentication method;
The input system according to claim 9, further comprising: receiving an input of the user's intention using the determined input method.
(Appendix 11)
The computer
Acquiring biometric information of a predetermined user from the user in a non-contact manner;
Controlling biometric authentication using the biometric information;
If the biometric authentication is successful, the input control method accepts, using a non-contact input method, an input of the user's intention regarding a service to be provided to the user.
(Appendix 12)
A biometric information acquisition process for acquiring biometric information of a predetermined user from the user in a non-contact manner;
an authentication control process for controlling biometric authentication using the biometric information;
a receiving process for receiving, by a non-contact input method, an input of the user's intention regarding a service to be provided to the user, when the biometric authentication is successful;
A non-transitory computer-readable medium storing an input control program for causing a computer to execute the above.

10 入力制御装置
11 生体情報取得部
12 認証制御部
14 受付部
100 認証装置
112 生体特徴情報
120 検出部
130 特徴点抽出部
140 登録部
150 認証部
200 入力制御装置
200a 入力制御装置
200b 入力制御装置
210 記憶部
211 プログラム
212 入力方法情報
213 認証方式情報
214 ユーザ情報
215 生体情報
220 メモリ
230 通信部
240 制御部
241 生体情報取得部
241a 生体情報取得部
241b 生体情報取得部
242 認証制御部
242a 認証制御部
242b 認証制御部
243 決定部
244 受付部
245 撮影制御部
246 登録部
248 表示制御部
250 第1のカメラ
251 第2のカメラ
260 表示部
400 認証端末
410 第1のカメラ
411 第2のカメラ
420 記憶部
430 通信部
440 表示部
450 制御部
451 撮影制御部
452 登録部
453 認証制御部
454 表示制御部
1000 入力システム
2122 入力方法
2132 用途
2142 個人情報
2152 生体特徴情報
110 生体情報DB
111 ユーザID
2131 場所ID
2141 ユーザID
2151 ユーザID
N ネットワーク
U ユーザ
10 Input control device 11 Biometric information acquisition unit 12 Authentication control unit 14 Reception unit 100 Authentication device 112 Biometric feature information 120 Detection unit 130 Feature point extraction unit 140 Registration unit 150 Authentication unit 200 Input control device 200a Input control device 200b Input control device 210 Storage unit 211 Program 212 Input method information 213 Authentication method information 214 User information 215 Biometric information 220 Memory 230 Communication unit 240 Control unit 241 Biometric information acquisition unit 241a Biometric information acquisition unit 241b Biometric information acquisition unit 242 Authentication control unit 242a Authentication control unit 242b Authentication control unit 243 Determination unit 244 Reception unit 245 Photography control unit 246 Registration unit 248 Display control unit 250 First camera 251 Second camera 260 Display unit 400 Authentication terminal 410 First camera 411 Second camera 420 Storage unit 430 Communication unit 440 Display unit 450 Control unit 451 Photography control unit 452 Registration unit 453 Authentication control unit 454 Display control unit 1000 Input system 2122 Input method 2132 Use 2142 Personal information 2152 Biometric feature information 110 Biometric information DB
111 User ID
2131 Location ID
2141 User ID
2151 User ID
N Network U User

Claims (9)

所定のユーザの生体情報を前記ユーザから非接触で取得する生体情報取得手段と、
前記生体情報を用いた生体認証を制御する認証制御手段と、
前記生体認証に成功した場合、非接触での入力方法を用いて、前記ユーザに提供されるサービスに対する前記ユーザの意思の入力を受け付ける受付手段と、
前記入力方法を前記生体認証の方式に基づいて決定する決定手段と、
を備え
前記受付手段は、前記決定された入力方法を用いて前記ユーザの意思の入力を受け付け
入力制御装置。
a biometric information acquiring means for acquiring biometric information of a predetermined user from the user in a non-contact manner;
an authentication control means for controlling biometric authentication using the biometric information;
a receiving means for receiving an input of the user's intention regarding a service to be provided to the user by using a non-contact input method when the biometric authentication is successful;
a determination means for determining the input method based on the biometric authentication method;
Equipped with
The receiving means receives an input of the user's intention using the determined input method .
前記生体情報取得手段は、複数の前記生体認証の方式のそれぞれに対応する複数の前記生体情報を取得し、
前記認証制御手段は、前記生体認証の方式ごとに前記生体認証を制御し、
前記決定手段は、前記生体認証に成功した方式に応じて前記入力方法を決定する
請求項に記載の入力制御装置。
the biometric information acquisition means acquires a plurality of pieces of biometric information corresponding to the plurality of biometric authentication methods,
the authentication control means controls the biometric authentication for each of the biometric authentication methods;
The input control device according to claim 1 , wherein the determination means determines the input method depending on a method in which the biometric authentication has succeeded.
前記受付手段は、前記ユーザが空間に対して行う動作により前記入力を受け付ける
請求項又はに記載の入力制御装置。
The input control device according to claim 1 , wherein the accepting unit accepts the input by a motion made by the user in a space.
前記決定手段は、前記生体認証の精度に応じて前記入力方法における前記ユーザの意思の入力のし易さを決定する
請求項からのいずれか1項に記載の入力制御装置。
The input control device according to claim 1 , wherein the determination means determines the ease of inputting the user's intention in the input method depending on the accuracy of the biometric authentication.
前記ユーザの意思は、前記サービスの決済処理に対する同意が含まれる
請求項1からのいずれか1項に記載の入力制御装置。
The input control device according to claim 1 , wherein the user's intention includes consent to a payment process for the service.
前記生体情報取得手段は、所定の認証端末から前記ユーザの生体情報を取得し、
前記認証制御手段は、前記認証端末の用途又は設置場所に応じて前記生体認証を制御する
請求項1からのいずれか1項に記載の入力制御装置。
the biometric information acquiring means acquires biometric information of the user from a predetermined authentication terminal;
The input control device according to claim 1 , wherein the authentication control means controls the biometric authentication depending on a purpose or an installation location of the authentication terminal.
所定のユーザの生体情報を前記ユーザから非接触で取得する認証端末と、
前記認証端末と接続された入力制御装置と、
を備え、
前記入力制御装置は、
前記認証端末から前記ユーザの生体情報を取得し、
前記生体情報を用いた生体認証を制御し、
前記生体認証に成功した場合、非接触での入力方法を用いて、前記ユーザに提供されるサービスに対する前記ユーザの意思の入力を受け付け
前記入力方法を前記生体認証の方式に基づいて決定し、
前記ユーザの意思の入力の受け付けでは、前記決定された入力方法を用いて前記ユーザの意思の入力を受け付け
入力システム。
an authentication terminal that acquires biometric information of a predetermined user from the user in a non-contact manner;
an input control device connected to the authentication terminal;
Equipped with
The input control device includes:
Acquiring biometric information of the user from the authentication terminal;
Controlling biometric authentication using the biometric information;
If the biometric authentication is successful, accepting an input of the user's intention regarding a service to be provided to the user using a contactless input method ;
determining the input method based on the biometric authentication method;
The input system receives the input of the user's intention using the determined input method .
コンピュータが、
所定のユーザの生体情報を前記ユーザから非接触で取得し、
前記生体情報を用いた生体認証を制御し、
前記生体認証に成功した場合、非接触での入力方法を用いて、前記ユーザに提供されるサービスに対する前記ユーザの意思の入力を受け付け
前記入力方法を前記生体認証の方式に基づいて決定し、
前記ユーザの意思の入力の受け付けでは、前記決定された入力方法を用いて前記ユーザの意思の入力を受け付け
入力制御方法。
The computer
Acquiring biometric information of a predetermined user from the user in a non-contact manner;
Controlling biometric authentication using the biometric information;
If the biometric authentication is successful, accepting an input of the user's intention regarding a service to be provided to the user using a contactless input method ;
determining the input method based on the biometric authentication method;
The input control method includes accepting the input of the user's intention using the determined input method .
所定のユーザの生体情報を前記ユーザから非接触で取得する生体情報取得処理と、
前記生体情報を用いた生体認証を制御する認証制御処理と、
前記生体認証に成功した場合、非接触での入力方法を用いて、前記ユーザに提供されるサービスに対する前記ユーザの意思の入力を受け付ける受付処理と、
前記入力方法を前記生体認証の方式に基づいて決定する決定処理と、
をコンピュータに実行させ
前記受付処理では、前記決定された入力方法を用いて前記ユーザの意思の入力を受け付ける入力制御プログラム。
A biometric information acquisition process for acquiring biometric information of a predetermined user from the user in a non-contact manner;
an authentication control process for controlling biometric authentication using the biometric information;
a receiving process for receiving, by a non-contact input method, an input of the user's intention regarding a service to be provided to the user, when the biometric authentication is successful;
a determination process of determining the input method based on the biometric authentication method;
Run the following on your computer :
an input control program for receiving an input of the user's intention using the determined input method in the reception process ;
JP2022550082A 2020-09-16 2020-09-16 Input control device, input system, input control method and input control program Active JP7509216B2 (en)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/JP2020/035029 WO2022059081A1 (en) 2020-09-16 2020-09-16 Input control device, input system, input control method, and non-transitory computer-readable medium

Publications (3)

Publication Number Publication Date
JPWO2022059081A1 JPWO2022059081A1 (en) 2022-03-24
JPWO2022059081A5 JPWO2022059081A5 (en) 2023-05-17
JP7509216B2 true JP7509216B2 (en) 2024-07-02

Family

ID=80777289

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2022550082A Active JP7509216B2 (en) 2020-09-16 2020-09-16 Input control device, input system, input control method and input control program

Country Status (2)

Country Link
JP (1) JP7509216B2 (en)
WO (1) WO2022059081A1 (en)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2023188083A1 (en) * 2022-03-30 2023-10-05 日本電気株式会社 Equipment control device, authentication device, method, and computer-readable medium
WO2023223489A1 (en) * 2022-05-19 2023-11-23 日本電気株式会社 Server device, system, method for controlling server device, and storage medium
WO2024014559A1 (en) * 2022-07-15 2024-01-18 パナソニックIpマネジメント株式会社 Multifactor authentication system, multifactor authentication method, and multifactor authentication information acquisition system

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20020089412A1 (en) 2001-01-09 2002-07-11 Siemens Aktiengesellschaft Control system with user authentication
JP2010042206A (en) 2008-08-18 2010-02-25 Fujifilm Corp System for managing medical instrument
JP2017049867A (en) 2015-09-03 2017-03-09 日本電気株式会社 Authentication device, crime prevention system, authentication method, and program
JP2019144695A (en) 2018-02-16 2019-08-29 グローリー株式会社 Face authentication system, face authentication server and face authentication method

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20020089412A1 (en) 2001-01-09 2002-07-11 Siemens Aktiengesellschaft Control system with user authentication
JP2010042206A (en) 2008-08-18 2010-02-25 Fujifilm Corp System for managing medical instrument
JP2017049867A (en) 2015-09-03 2017-03-09 日本電気株式会社 Authentication device, crime prevention system, authentication method, and program
JP2019144695A (en) 2018-02-16 2019-08-29 グローリー株式会社 Face authentication system, face authentication server and face authentication method

Also Published As

Publication number Publication date
WO2022059081A1 (en) 2022-03-24
JPWO2022059081A1 (en) 2022-03-24

Similar Documents

Publication Publication Date Title
US10509951B1 (en) Access control through multi-factor image authentication
JP7509216B2 (en) Input control device, input system, input control method and input control program
US10346675B1 (en) Access control through multi-factor image authentication
US11755868B2 (en) Methods and systems for a combined transaction by an assignee on behalf of one or more users
KR20160147515A (en) Method for authenticating user and electronic device supporting the same
Amin et al. Biometric and traditional mobile authentication techniques: Overviews and open issues
US11496471B2 (en) Mobile enrollment using a known biometric
CN111414119A (en) Method, system and apparatus for biometric authentication system
US10552596B2 (en) Biometric authentication
CN109426963B (en) Biometric system for authenticating biometric requests
US11494474B2 (en) Brain activity-based authentication
JP7428242B2 (en) Authentication device, authentication system, authentication method and authentication program
JP7298733B2 (en) SERVER DEVICE, SYSTEM, CONTROL METHOD FOR SERVER DEVICE, AND COMPUTER PROGRAM
EP3786820B1 (en) Authentication system, authentication device, authentication method, and program
US20220366726A1 (en) Augmented signature authentication method and electronic device
WO2021214970A1 (en) Information processing device, system, facial image updating method, and storage medium
JP6891356B1 (en) Authentication system, authentication device, authentication method, and program
JP2023138550A (en) Gate device, immigration examination system, method for controlling gate device, and program
JP7402940B2 (en) User authentication methods, systems and programs
JP6584855B2 (en) Input support apparatus, input support method, and program
TWI771819B (en) Authentication system, authentication device, authentication method, and program product
WO2022059173A1 (en) Display control device, display system, display control method, and non-transitory computer-readable medium
TW202209139A (en) Authentication method based on biological characteristic information, computer system and readable medium
WO2014092665A1 (en) Integrated user authentication system in self-service machines
WO2023073838A1 (en) Authentication device, authentication system, authentication method, and non-transitory computer-readable medium

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20230227

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20230227

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20240305

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20240501

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20240521

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20240603