JP2022140114A - Information processing device, information processing method, program and information processing system - Google Patents

Information processing device, information processing method, program and information processing system Download PDF

Info

Publication number
JP2022140114A
JP2022140114A JP2021040775A JP2021040775A JP2022140114A JP 2022140114 A JP2022140114 A JP 2022140114A JP 2021040775 A JP2021040775 A JP 2021040775A JP 2021040775 A JP2021040775 A JP 2021040775A JP 2022140114 A JP2022140114 A JP 2022140114A
Authority
JP
Japan
Prior art keywords
authentication
customer
facility
processing unit
information processing
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2021040775A
Other languages
Japanese (ja)
Inventor
博孝 高志保
Hirotaka Takashiho
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Smart Hotel Solutions Co Ltd
Original Assignee
Smart Hotel Solutions Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Smart Hotel Solutions Co Ltd filed Critical Smart Hotel Solutions Co Ltd
Priority to JP2021040775A priority Critical patent/JP2022140114A/en
Publication of JP2022140114A publication Critical patent/JP2022140114A/en
Pending legal-status Critical Current

Links

Images

Landscapes

  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)

Abstract

To improve a satisfaction level of users of a facility.SOLUTION: An information processing device 1 comprises: a first authentication processing unit 131 for authenticating a user by first authentication means in a check-in place where users using a facility check in and causing a storage unit 12 to store an authentication result in association with user identification information for identifying the user; a second authentication processing unit 132 which, when successful authentication by the first authentication means is stored in the storage unit 12 in association with the user ID by the first authentication processing unit 131, authenticates users present in one or more places other than the check-in place in the facility by second authentication means that is different from the first authentication means, and causes the storage unit 12 to store the authentication result in association with the user IDs; and an equipment control unit 133 for controlling equipment in the facility when successful authentication by the second authentication means is stored in the storage unit 12 in association with the user IDs by the second authentication processing unit 132.SELECTED DRAWING: Figure 4

Description

本発明は、施設の利用客を認証するための情報処理装置、情報処理方法、プログラム及び情報処理システムに関する。 The present invention relates to an information processing device, an information processing method, a program, and an information processing system for authenticating users of facilities.

従来、宿泊施設へのチェックイン時に撮影した利用客の顔画像を予め登録された画像と照合することにより、宿泊施設の運営者がいない状態でチェックインを可能にするためのシステムが知られている(例えば、特許文献1を参照)。 Conventionally, there has been known a system for enabling check-in in the absence of an accommodation facility operator by matching a facial image of a customer taken at the time of check-in to the accommodation facility with a pre-registered image. (See Patent Document 1, for example).

特開2020-201665号公報JP 2020-201665 A

施設の運営者がいない状態で利用客がチェックインをする場合、ホスピタリティが低下してしまい、利用客の満足度が低下することが懸念されるという問題が生じる。 When a customer checks in without the operator of the facility present, there is a concern that the hospitality of the facility will deteriorate and the satisfaction level of the customer will decrease.

そこで、本発明はこれらの点に鑑みてなされたものであり、施設の利用客の満足度を向上させることを目的とする。 Accordingly, the present invention has been made in view of these points, and an object of the present invention is to improve the satisfaction of facility users.

本発明の第1の態様の情報処理装置は、施設を利用する利用客が前記施設にチェックインする際にチェックイン場所において前記利用客を第1認証手段により認証し、前記利用客を識別するための利用客識別情報に関連付けて認証結果を記憶部に記憶させる第1認証処理部と、前記第1認証処理部が前記第1認証手段による認証に成功したことが前記利用客識別情報に関連付けて前記記憶部に記憶されている場合に、前記施設における前記チェックイン場所以外の一以上の場所にいる前記利用客を前記第1認証手段と異なる第2認証手段により認証し、前記利用客識別情報に関連付けて認証結果を前記記憶部に記憶させる第2認証処理部と、前記第2認証処理部が前記第2認証手段による認証に成功したことが前記利用客識別情報に関連付けて前記記憶部に記憶されている場合に、前記施設内の設備を制御する設備制御部と、を有する。 The information processing apparatus according to the first aspect of the present invention authenticates the customer using the first authentication means at the check-in place when the customer using the facility checks in to the facility, and identifies the customer. a first authentication processing unit for storing an authentication result in a storage unit in association with the customer identification information for the purpose; is stored in the storage unit, the user who is at one or more places other than the check-in place in the facility is authenticated by a second authentication means different from the first authentication means, and the user identification is performed. a second authentication processing unit for storing an authentication result in the storage unit in association with the information; and a facility control unit that controls the facility in the facility when stored in the facility.

前記第2認証処理部は、前記第1認証手段よりも精度が低い前記第2認証手段により前記利用客を認証してもよい。 The second authentication processing unit may authenticate the customer by the second authentication means having accuracy lower than that of the first authentication means.

前記第1認証処理部は、顔認証を前記第1認証手段として用いて前記利用客を認証するとともに、前記顔認証をした際の前記利用客の顔以外の部分を含む画像データをサブ特徴データとして、前記利用客識別情報に関連付けて前記記憶部に記憶させ、前記第2認証処理部は、前記サブ特徴データを使用する前記第2認証手段を用いて前記利用客を認証してもよい。 The first authentication processing unit authenticates the customer using face authentication as the first authentication means, and converts image data including parts other than the face of the customer at the time of face authentication to sub-feature data. , may be stored in the storage unit in association with the customer identification information, and the second authentication processing unit may authenticate the customer using the second authentication means using the sub-feature data.

前記第1認証処理部は、前記利用客の服装の色、種類又は大きさの少なくともいずれかを示す前記サブ特徴データを前記記憶部に記憶させ、前記第2認証処理部は、前記チェックインが行われる場所以外の一以上の場所で前記利用客が撮影された画像が示す服装と、前記記憶部に記憶されたサブ特徴データが示す服装とを比較することにより前記利用客を認証してもよい。 The first authentication processing unit causes the storage unit to store the sub-characteristic data indicating at least one of the color, type, and size of the customer's clothes, The user may be authenticated by comparing the clothes indicated by the image of the user taken at one or more places other than the place where the service is performed and the clothes indicated by the sub-feature data stored in the storage unit. good.

前記第1認証処理部は、前記利用客の動作の特徴を示す前記サブ特徴データを前記記憶部に記憶させ、前記第2認証処理部は、前記チェックインが行われる場所以外の一以上の場所で前記利用客が撮影された画像に基づいて特定した前記利用客の体形又は動作の少なくともいずれかの特徴と、前記記憶部に記憶されたサブ特徴データが示す体形又は動作の少なくともいずれかの特徴とを比較することにより前記利用客を認証してもよい。 The first authentication processing unit causes the storage unit to store the sub-feature data indicating the feature of the customer's operation, and the second authentication processing unit stores the sub-characteristic data at one or more places other than the place where the check-in is performed. at least one feature of the body shape or movement of the customer specified based on the image taken by the customer in step 1, and at least one feature of the body shape or movement indicated by the sub-feature data stored in the storage unit The customer may be authenticated by comparing the .

前記第1認証処理部は、前記利用客識別情報に関連付けて前記第1認証手段により認証した日時である第1認証日時を前記記憶部に記憶させ、前記第2認証処理部は、前記記憶部に記憶された前記第1認証日時から所定の期間以内であることを条件として、前記第2認証手段により前記利用客を認証してもよい。 The first authentication processing unit causes the storage unit to store a first authentication date and time, which is the date and time of authentication by the first authentication means, in association with the customer identification information, and the second authentication processing unit stores the storage unit. The user may be authenticated by the second authentication means on condition that it is within a predetermined period from the first authentication date and time stored in .

前記記憶部は、施設を利用する利用客を識別するための利用客識別情報と、前記利用客が前記施設内で利用する部屋を識別するための部屋識別情報とが関連付けられた利用客データベースと、をさらに記憶し、前記設備制御部は、前記第2認証処理部が前記第2認証手段による認証に成功したことが前記利用客識別情報に関連付けて前記記憶部に記憶されている場合に、前記部屋識別情報に対応する前記施設内の設備を制御してもよい。 The storage unit includes a customer database in which customer identification information for identifying customers who use the facility and room identification information for identifying rooms used by the customers in the facility are associated with each other. , and when the fact that the second authentication processing unit has successfully authenticated by the second authentication means is stored in the storage unit in association with the passenger identification information, Equipment in the facility corresponding to the room identification information may be controlled.

前記第2認証処理部は、前記チェックイン場所から前記部屋に移動するために使用される場所で撮影された前記利用客の画像に基づいて、前記第2認証手段により前記利用客を認証してもよい。 The second authentication processing unit authenticates the user by the second authentication means based on an image of the user taken at a place used for moving from the check-in place to the room. good too.

前記設備制御部は、前記チェックイン場所から前記利用客が利用する部屋に前記利用客が移動するまでの想定ルート上の前記設備を制御してもよい。前記設備制御部は、前記利用客が利用する部屋に設置された前記設備を制御してもよい。 The equipment control unit may control the equipment on an assumed route from the check-in place to the room used by the customer. The equipment control unit may control the equipment installed in the room used by the customer.

前記第2認証処理部は、前記第1認証処理部による認証に成功した後に前記利用客が前記チェックイン場所を通る場合に、前記第2認証手段により前記利用客を認証してもよい。 The second authentication processing unit may authenticate the user by the second authentication means when the user passes through the check-in place after successful authentication by the first authentication processing unit.

前記第2認証処理部は、前記第1認証処理部による認証に成功した後に前記利用客が、前記施設に関連付けられた他の施設のチェックイン場所を通る場合に、前記第2認証手段により前記利用客を認証してもよい。 The second authentication processing unit causes the second authentication means to use the Customers may be authenticated.

前記第1認証処理部は、前記第2認証処理部が前記第2認証手段により認証した後に、再び前記第1認証手段を用いて認証する場合に、前記第1認証手段とともに、前記第2認証処理部が認証した結果を用いて認証してもよい。 The first authentication processing unit performs authentication using the first authentication unit again after the second authentication processing unit performs authentication using the second authentication unit. Authentication may be performed using the result of authentication performed by the processing unit.

本発明の第2の態様の情報処理方法は、コンピュータが、施設を利用する利用客が前記施設にチェックインする際にチェックイン場所において前記利用客を第1認証手段により認証するステップと、前記第1認証手段による認証に成功した場合に、前記施設における前記チェックイン場所以外の一以上の場所にいる前記利用客を前記第1認証手段と異なる第2認証手段により認証するステップと、前記第2認証手段による認証に成功した場合に前記施設内の設備を制御するステップと、を実行する。 An information processing method according to a second aspect of the present invention comprises the step of authenticating a customer using a facility by a first authentication means at a check-in place when the customer using the facility checks in to the facility; authenticating the customer who is at one or more places other than the check-in place in the facility by a second authentication means different from the first authentication means when the authentication by the first authentication means is successful; 2. Controlling the equipment in the facility when the authentication by the authentication means is successful.

本発明の第3の態様のプログラムは、コンピュータに、施設を利用する利用客が前記施設にチェックインする際にチェックイン場所において前記利用客を第1認証手段により認証するステップと、前記第1認証手段による認証に成功した場合に、前記施設における前記チェックイン場所以外の一以上の場所にいる前記利用客を前記第1認証手段と異なる第2認証手段により認証するステップと、前記第2認証手段による認証に成功した場合に前記施設内の設備を制御するステップと、を実行させる。 A program according to a third aspect of the present invention comprises, in a computer, the step of authenticating the customer using a first authentication means at a check-in place when the customer using the facility checks in to the facility; a step of authenticating the customer who is at one or more places other than the check-in place in the facility by a second authentication means different from the first authentication means when the authentication by the authentication means succeeds; and controlling equipment in the facility if authentication by means is successful.

本発明の第4の態様の情報処理システムは、施設のチェックイン場所に設置された第1認証装置と、前記施設の前記チェックイン場所以外の場所に設置された第2認証装置と、前記第1認証装置及び前記第2認証装置と通信可能な情報処理装置と、を備え、前記情報処理装置は、前記第1認証装置が送信した、前記施設を利用する利用客の特徴を示す第1特徴データに基づいて第1認証手段により前記利用客を認証し、前記利用客を識別するための利用客識別情報に関連付けて認証結果を記憶部に記憶させる第1認証処理部と、前記第1認証処理部が前記第1認証手段による認証に成功したことが前記利用客識別情報に関連付けて前記記憶部に記憶されている場合に、前記第2認証装置が送信した前記利用客の特徴を示す第2特徴データに基づいて、前記施設における前記チェックイン場所以外の一以上の場所にいる前記利用客を前記第1認証手段と異なる第2認証手段により認証し、前記利用客識別情報に関連付けて認証結果を前記記憶部に記憶させる第2認証処理部と、前記第2認証処理部が前記第2認証手段による認証に成功したことが前記利用客識別情報に関連付けて前記記憶部に記憶されている場合に、前記施設内の設備を制御する設備制御部と、を有する。 An information processing system according to a fourth aspect of the present invention includes a first authentication device installed at a check-in place of a facility, a second authentication device installed at a place other than the check-in place of the facility, and and an information processing device capable of communicating with the first authentication device and the second authentication device, wherein the information processing device transmits a first feature indicating a feature of a customer who uses the facility, which is transmitted by the first authentication device. a first authentication processing unit that authenticates the customer by a first authentication unit based on the data and stores the authentication result in a storage unit in association with customer identification information for identifying the customer; When the fact that the processing unit has successfully authenticated by the first authentication means is stored in the storage unit in association with the user identification information, the second authentication device transmits the second authentication device indicating the characteristics of the user. 2 Based on the feature data, the user who is at one or more locations other than the check-in location in the facility is authenticated by a second authentication means different from the first authentication means, and authenticated by associating with the customer identification information. a second authentication processing unit that stores a result in the storage unit; and that the second authentication processing unit successfully authenticated by the second authentication means is stored in the storage unit in association with the customer identification information. and a facility control unit for controlling facilities in the facility.

本発明によれば、施設の利用客の満足度を向上させることができるという効果を奏する。 ADVANTAGE OF THE INVENTION According to this invention, there exists an effect that the satisfaction of the visitor of a facility can be improved.

情報処理システムの構成を示す図である。It is a figure which shows the structure of an information processing system. 施設内のレイアウトを模式的に示す図である。It is a figure which shows the layout in a facility typically. 情報処理システムにおける処理の流れを示すシーケンス図である。4 is a sequence diagram showing the flow of processing in the information processing system; FIG. 情報処理装置の構成を示す図である。It is a figure which shows the structure of an information processing apparatus. 記憶部が記憶する利用客データベースの一例を示す図である。It is a figure which shows an example of the customer database which a memory|storage part memorize|stores. 情報処理装置における処理の流れを示すフローチャートである。4 is a flow chart showing the flow of processing in the information processing apparatus;

[情報処理システムSの概要]
図1は、情報処理システムSの構成を示す図である。情報処理システムSは、施設を利用する利用客を認証し、利用客が施設を利用しやすくするために施設内の設備を制御するためのシステムである。情報処理システムSが利用される施設は、例えばホテル、旅館、カラオケルーム又はスポーツジム等のように、チェックインをした後に利用客が施設内の設備を利用できるようになる施設である。以下の説明においては、施設がホテルである場合を主に説明するが、情報処理システムSはホテル以外の任意の施設に適用することができる。
[Overview of information processing system S]
FIG. 1 is a diagram showing the configuration of an information processing system S. As shown in FIG. The information processing system S is a system for authenticating a customer who uses the facility and controlling the equipment in the facility so that the customer can easily use the facility. The facility where the information processing system S is used is, for example, a hotel, an inn, a karaoke room, a gym, or the like, in which a user can use the facility after checking in. In the following description, the case where the facility is a hotel will be mainly described, but the information processing system S can be applied to any facility other than the hotel.

情報処理システムSは、情報処理装置1と、第1認証装置2と、第2認証装置3と、館内設備4と、室内設備5と、を備える。情報処理装置1は、利用客を認証するための処理を実行するコンピュータである。情報処理装置1は、施設内に設けられたコンピュータであってもよく、クラウド上に存在するサーバであってもよい。情報処理装置1は、複数のコンピュータにより構成されていてもよい。情報処理装置1は、一以上の第1認証装置2、一以上の第2認証装置3、一以上の館内設備4、一以上の室内設備5との間で、ネットワークNを介して各種のデータを送受信する。ネットワークNは、例えばインターネット又はイントラネットを含む。 The information processing system S includes an information processing device 1 , a first authentication device 2 , a second authentication device 3 , indoor facilities 4 , and indoor facilities 5 . The information processing device 1 is a computer that executes processing for authenticating customers. The information processing device 1 may be a computer provided in a facility, or may be a server existing on the cloud. The information processing device 1 may be configured by a plurality of computers. The information processing device 1 exchanges various data with one or more first authentication devices 2, one or more second authentication devices 3, one or more in-house facilities 4, and one or more indoor facilities 5 via a network N. send and receive Network N includes, for example, the Internet or an intranet.

第1認証装置2は、情報処理装置1が第1認証手段で利用客を認証するために用いる第1特徴データを作成する装置である。第1特徴データは、利用客の身体的な特徴を示すデータであり、例えば利用客の顔を撮影して作成された顔画像データ又は利用客の生体情報データである。第1認証装置2は、利用客の顔画像を撮影して作成した顔画像データを情報処理装置1に送信する顔画像撮影装置、利用客の指紋を読み取って作成した指紋データを情報処理装置1に送信する指紋読取装置、又は利用客の静脈形状パターンを読み取って作成した静脈形状データを情報処理装置1に送信する静脈読取装置である。第1認証装置2は、例えば施設のチェックイン場所に設置されている。 The first authentication device 2 is a device that creates first feature data used by the information processing device 1 to authenticate a customer by first authentication means. The first feature data is data indicating physical features of the customer, such as face image data created by photographing the face of the customer or biological information data of the customer. The first authentication device 2 is a face image photographing device that transmits face image data created by photographing a customer's face image to the information processing device 1, and a fingerprint data created by reading the customer's fingerprint. or a vein reading device that sends vein shape data created by reading a customer's vein shape pattern to the information processing device 1 . The first authentication device 2 is installed, for example, at a facility check-in location.

第1認証装置2は、さらに、利用客が静止した状態で顔画像を撮影したり、指紋又は静脈形状パターンを読み取ったりしている間に、利用客が着用している衣服若しくは靴、利用客が持っている鞄、又は利用客の全身を撮影することにより、これらの少なくともいずれかの画像が含まれる撮像画像データをサブ特徴データとして作成する。第1認証装置2は、このようにして作成したサブ特徴データを、第1特徴データとともに情報処理装置1に送信する。第1認証装置2は、利用客が発する声を録音して作成した音声データをサブ特徴データとして送信してもよい。 The first authentication device 2 further detects the clothes or shoes worn by the user, the user's Captured image data containing at least one of these images is created as sub-feature data by photographing the bag held by the customer or the whole body of the customer. The first authentication device 2 transmits the sub-feature data thus created to the information processing device 1 together with the first feature data. The first authentication device 2 may transmit audio data created by recording the customer's voice as sub-feature data.

図1においては、複数の第1認証装置2(第1認証装置2-1~第1認証装置2-m、mは自然数)が示されているが、第1認証装置2の台数は任意である。第1認証装置2は、施設の入口又はフロント付近に1台だけ設置されていてもよく、施設内の他の場所を含む複数の場所に複数台設置されていてもよい。 FIG. 1 shows a plurality of first authentication devices 2 (first authentication device 2-1 to first authentication device 2-m, where m is a natural number), but the number of first authentication devices 2 is arbitrary. be. Only one first authentication device 2 may be installed near the entrance or front desk of the facility, or multiple units may be installed at multiple locations including other locations within the facility.

第2認証装置3は、第1認証装置2と異なる手段により利用客の特徴を示す第2特徴データを作成する装置である。第2認証装置3は、例えば利用客を撮影して作成した撮像画像データを情報処理装置1に送信する。第2認証装置3は、例えば利用客が動いている状態で、利用客が着用している衣服、靴又は鞄等を含む利用客全体の画像を撮影することにより第2特徴データとして撮像画像データを作成する。第2認証装置3は、撮像画像データの代わりに利用客の声を録音することにより、音声データを第2特徴データとして作成してもよい。第2認証装置3は、例えば施設のチェックイン場所以外の場所に設置された装置である。 The second authentication device 3 is a device that creates second feature data indicating the features of the customer by a means different from that of the first authentication device 2 . The second authentication device 3 transmits, to the information processing device 1, imaged image data created by photographing a user, for example. The second authentication device 3 captures an image of the entire customer, including the clothes, shoes, bags, etc. worn by the customer, while the customer is moving, for example, and obtains captured image data as second feature data. to create The second authentication device 3 may create voice data as the second characteristic data by recording the customer's voice instead of the captured image data. The second authentication device 3 is, for example, a device installed at a place other than the check-in place of the facility.

館内設備4は、施設において利用客が通る場所又は滞在する場所に設置されている設備である。館内設備4は、例えば、エレベータ、通路の照明、スピーカ、通路の壁に設置されたディスプレイ又は通路に設置された空調機器等のように、外部から受信する制御データに基づいて起動したり、動作の内容を変更したりすることができる電気機器である。 The in-house facility 4 is a facility installed at a place where a user passes or stays in the facility. The in-house facility 4, for example, an elevator, aisle lighting, a speaker, a display installed on the wall of the aisle, an air conditioner installed in the aisle, etc., is activated or operated based on control data received from the outside. It is an electrical device that can change the contents of

室内設備5は、施設において利用客が使用する部屋に設置されている設備である。室内設備5は、例えば、部屋の入口の鍵、部屋の入口に設置された認証装置、室内灯、室内空調機器、冷蔵庫又はテレビのように、利用客に割り当てられた部屋に利用客が入る際、又は利用客が部屋に入った後に使用する設備である。 The indoor equipment 5 is equipment installed in a room used by a user in the facility. The indoor equipment 5 is, for example, a room entrance key, an authentication device installed at the room entrance, an indoor light, an indoor air conditioner, a refrigerator, or a television. , or equipment used after the guest enters the room.

図2は、施設内のレイアウトを模式的に示す図である。図2(a)は、ホテルの1階のレイアウトを示しており、図2(b)はホテルの2階のレイアウトを示している。図3は、情報処理システムSにおける処理の流れを示すシーケンス図である。以下、図2及び図3を参照しながら、情報処理システムSの動作の概要を説明する。 FIG. 2 is a diagram schematically showing the layout within the facility. FIG. 2(a) shows the layout of the first floor of the hotel, and FIG. 2(b) shows the layout of the second floor of the hotel. FIG. 3 is a sequence diagram showing the flow of processing in the information processing system S. As shown in FIG. The outline of the operation of the information processing system S will be described below with reference to FIGS. 2 and 3. FIG.

図2に示す例においては、1階のフロントの前のチェックイン場所に第1認証装置2-1が設置されている。また、エレベータ内に第2認証装置3-1、階段に第2認証装置3-2、2階の通路に第2認証装置3-3が設置されている。また、1階の通路に館内設備4-1が設置されており、2階の通路に館内設備4-2、館内設備4-3及び館内設備4-4が設置されている。館内設備4-1、館内設備4-2、館内設備4-3及び館内設備4-4は、例えば照明である。 In the example shown in FIG. 2, the first authentication device 2-1 is installed at the check-in place in front of the front desk on the first floor. Also, the second authentication device 3-1 is installed in the elevator, the second authentication device 3-2 is installed in the stairs, and the second authentication device 3-3 is installed in the passageway of the second floor. Further, facility facility 4-1 is installed in the passage on the first floor, facility facility 4-2, facility facility 4-3, and facility facility 4-4 are installed in the passage on the second floor. In-house facility 4-1, in-house facility 4-2, in-house facility 4-3, and in-house facility 4-4 are, for example, lighting.

図3は、情報処理システムにおける処理の流れを示すシーケンス図である。ホテルに到着した利用客は、チェックイン場所に設置された第1認証装置2-1の前に立つ。第1認証装置2-1は、例えば利用客の顔画像を撮影するカメラを有しており、利用客が来たことを検出すると、利用客の顔を撮影することにより第1特徴データとして顔画像データを作成する(図3におけるS1)。また、第1認証装置2-1は、利用客の顔以外の領域を含む領域(例えば全身)を撮影し、サブ特徴データを作成する。第1認証装置2-1は、作成した第1特徴データ及びサブ特徴データを情報処理装置1に送信する。 FIG. 3 is a sequence diagram showing the flow of processing in the information processing system. A customer arriving at the hotel stands in front of the first authentication device 2-1 installed at the check-in location. The first authentication device 2-1 has, for example, a camera for photographing a customer's face image, and upon detecting the arrival of the customer, photographs the customer's face and obtains the facial image as the first feature data. Image data is created (S1 in FIG. 3). In addition, the first authentication device 2-1 captures an area (for example, the whole body) including an area other than the customer's face, and creates sub-feature data. The first authentication device 2 - 1 transmits the created first feature data and sub-feature data to the information processing device 1 .

情報処理装置1は、受信した第1特徴データを、予め記憶している複数の利用客(例えば予約している利用客)の第1認証データ(例えば顔画像データ)と照合することにより、利用客が予約済の利用客であることを認証するための第1認証処理を実行する(S2)。情報処理装置1は、認証に成功すると、利用客に関連付けて、第1認証装置2-1から受信したサブ特徴データを、第2認証装置3を用いて第2認証処理を実行するための第2認証用データとして記憶する。 The information processing device 1 compares the received first feature data with the first authentication data (for example, face image data) of a plurality of pre-stored guests (for example, guests who have made reservations), thereby enabling the use of the data. A first authentication process is executed to authenticate that the customer is a reserved customer (S2). When the authentication is successful, the information processing device 1 associates the user with the sub-feature data received from the first authentication device 2-1 and uses the second authentication device 3 to perform the second authentication process. 2 Store as authentication data.

情報処理装置1は、認証結果を第1認証装置2-1に送信する。情報処理装置1は、認証に成功した場合、利用客が使用可能な部屋の番号を第1認証装置2-1に通知する。第1認証装置2-1は、認証に成功したという結果を受信すると部屋番号をディスプレイに表示し、認証に失敗したという結果を受信すると、認証に失敗したことを表示したり、フロントでチェックインをすることを案内したりする。本例においては、利用客の部屋番号が2階の201号室であるとする。 The information processing device 1 transmits the authentication result to the first authentication device 2-1. When the authentication is successful, the information processing device 1 notifies the first authentication device 2-1 of the number of the room that the customer can use. The first authentication device 2-1 displays the room number on the display when it receives the result that the authentication has succeeded, and displays that the authentication has failed or checks in at the front desk when it receives the result that the authentication has failed. or guide you to do In this example, it is assumed that the guest's room number is room 201 on the second floor.

また、情報処理装置1は、認証に成功すると、館内設備4-1に対して起動指示を含む制御データを送信することにより、館内設備4-1を起動させて点灯状態にする(S3)。これにより、情報処理システムSは、利用客が部屋に移動する際に、通路を明るい状態にすることができる。情報処理装置1は、館内設備4の一種であるエレベータを利用客がすぐに利用できるように、エレベータを1階に移動させるように制御してもよい。 When the information processing apparatus 1 succeeds in the authentication, the information processing apparatus 1 transmits control data including an activation instruction to the facility facility 4-1, thereby activating the facility facility 4-1 and turning it on (S3). As a result, the information processing system S can brighten the corridor when the customer moves to the room. The information processing device 1 may control the elevator to move to the first floor so that the customer can immediately use the elevator, which is one of the facility facilities 4 .

情報処理装置1は、認証に成功したことを条件として、第2認証装置3-1を起動させてもよい。情報処理装置1は、第2認証装置3-1に限らず、利用客が部屋に移動するために通る場所に設置された複数の第2認証装置3を起動させてもよい。これにより、情報処理システムSは、利用客が部屋に移動する途中に設置された第2認証装置3を用いて利用客を認証することが可能になる。 The information processing device 1 may activate the second authentication device 3-1 on condition that the authentication is successful. The information processing device 1 may activate not only the second authentication device 3-1, but also a plurality of second authentication devices 3 installed in a place where the customer passes to move to the room. This enables the information processing system S to authenticate the customer using the second authentication device 3 installed while the customer is moving to the room.

利用客がエレベータに乗ると、エレベータに設置された第2認証装置3-1は、利用客を撮影する(S4)。第2認証装置3-1は、撮影により作成した撮像画像データを情報処理装置1に送信する。 When the user gets on the elevator, the second authentication device 3-1 installed in the elevator takes an image of the user (S4). The second authentication device 3 - 1 transmits captured image data created by photography to the information processing device 1 .

情報処理装置1は、第2認証装置3-1から受信した画像データに基づいて、第2認証処理を実行する(S5)。具体的には、情報処理装置1は、第2認証用データとして記憶していたサブ特徴データと第2認証装置3-2から受信した画像データとを比較し、第2認証装置3-1から受信した画像データに含まれている被写体がサブ特徴データに含まれている被写体と一致するか否かを判定することにより認証する。 The information processing device 1 executes the second authentication process based on the image data received from the second authentication device 3-1 (S5). Specifically, the information processing device 1 compares the sub-feature data stored as the second authentication data with the image data received from the second authentication device 3-2, and Authentication is performed by determining whether or not the subject included in the received image data matches the subject included in the sub-feature data.

情報処理装置1は、第2認証処理において利用客の認証に成功した場合(すなわち、利用客がエレベータに乗っていると判定した場合)、当該利用客が利用する部屋の階の設備を制御する。例えば、情報処理装置1は、利用客が利用する部屋の階の設備を起動させたり、動作状態を変化させたりする(S6)。図2に示す例の場合、情報処理装置1は、利用客の部屋がある2階に設置された館内設備4-2に起動指示を含む制御データを送信することにより、2階の通路に設置されている照明を点灯させる。また、情報処理装置1は、利用客の部屋の設備に対して起動指示を含む制御データを送信し、利用客が部屋に入った時点で室内の照明が点灯している状態にしたり、空調設備が起動している状態にしたりしてもよい(S7)。
以下、情報処理装置1の構成及び動作を詳細に説明する。
When the user is successfully authenticated in the second authentication process (that is, when it is determined that the user is on the elevator), the information processing device 1 controls the facilities on the floor of the room used by the user. . For example, the information processing device 1 activates the equipment on the floor of the room used by the customer, or changes the operating state (S6). In the case of the example shown in FIG. 2, the information processing device 1 is installed in the passage on the second floor by transmitting control data including an activation instruction to the in-house facility 4-2 installed on the second floor where the guest's room is located. turn on the lights that are on. In addition, the information processing device 1 transmits control data including a start instruction to the equipment in the guest's room, and when the guest enters the room, the lighting in the room is turned on, and the air conditioning equipment is turned on. may be activated (S7).
The configuration and operation of the information processing apparatus 1 will be described in detail below.

図4は、情報処理装置1の構成を示す図である。情報処理装置1は、通信部11と、記憶部12と、制御部13と、を有する。制御部13は、第1認証処理部131と、第2認証処理部132と、設備制御部133と、を有する。 FIG. 4 is a diagram showing the configuration of the information processing device 1. As shown in FIG. The information processing device 1 has a communication section 11 , a storage section 12 and a control section 13 . The control unit 13 has a first authentication processing unit 131 , a second authentication processing unit 132 and an equipment control unit 133 .

通信部11は、ネットワークNを介して第1認証装置2、第2認証装置3、館内設備4及び室内設備5との間で各種のデータを送受信するための通信インターフェースを有する。通信部11は、第1認証装置2から受信したデータ(例えば第1特徴データ及びサブ特徴データ)を第1認証処理部131に入力し、第1認証処理部131から入力された認証結果を第1認証装置2に送信する。通信部11は、第2認証装置3から受信したデータ(例えば撮像画像データ)を第2認証処理部132に入力する。また、通信部11は、設備制御部133から受信した制御データを館内設備4及び室内設備5に送信する。 The communication unit 11 has a communication interface for transmitting/receiving various data to/from the first authentication device 2, the second authentication device 3, the facility equipment 4, and the indoor equipment 5 via the network N. The communication unit 11 inputs data received from the first authentication device 2 (for example, first feature data and sub-feature data) to the first authentication processing unit 131, and transmits the authentication result input from the first authentication processing unit 131 to the first authentication processing unit 131. 1 to the authentication device 2. The communication unit 11 inputs data (for example, captured image data) received from the second authentication device 3 to the second authentication processing unit 132 . Also, the communication unit 11 transmits the control data received from the facility control unit 133 to the facility facility 4 and the indoor facility 5 .

記憶部12は、ROM(Read Only Memory)、RAM(Random Access Memory)及びSSD(Solid State Drive)等の記憶媒体を含む。記憶部12は、制御部13が実行するプログラムを記憶する。また、記憶部12は、施設を利用する利用客を識別するための利用客識別情報(以下、「利用客ID」という)と、利用客が施設内で利用する部屋を識別するための部屋識別情報(以下、「部屋ID」という)とが関連付けられた利用客データベースを記憶する。 The storage unit 12 includes storage media such as ROM (Read Only Memory), RAM (Random Access Memory), and SSD (Solid State Drive). The storage unit 12 stores programs executed by the control unit 13 . The storage unit 12 also stores customer identification information (hereinafter referred to as "customer ID") for identifying the customer who uses the facility, and room identification information for identifying the room used by the customer within the facility. A customer database associated with information (hereinafter referred to as "room ID") is stored.

図5は、記憶部12が記憶する利用客データベースの一例を示す図である。図5に示す例においては、利用客IDと、部屋IDと、第1認証用データと、第1認証結果と、第2認証用データと、複数の第2認証結果とが関連付けられている。部屋IDは、利用客が利用する予定の部屋を識別するための情報である。 FIG. 5 is a diagram showing an example of a customer database stored in the storage unit 12. As shown in FIG. In the example shown in FIG. 5, a customer ID, a room ID, first authentication data, a first authentication result, second authentication data, and a plurality of second authentication results are associated. The room ID is information for identifying a room to be used by the customer.

第1認証用データは、第1認証処理部131が第1認証装置2を用いて第1認証処理を実行するために用いられるデータである。第1認証用データは、例えば利用客が施設を利用するための予約をする際に登録した顔画像データである。第1認証用データは、施設の利用を予約するためのサービスを利用するための会員情報の一つとして予め登録された顔画像データ、生体情報データ若しくは認証用コード等のいずれか、又はこれらの組み合わせであってもよい。 The first authentication data is data used by the first authentication processing unit 131 to execute the first authentication process using the first authentication device 2 . The first authentication data is, for example, face image data registered when a customer makes a reservation to use a facility. The first authentication data is any of face image data, biometric information data, authentication code, etc. registered in advance as one of the member information for using the service for reserving the use of the facility, or any of these It may be a combination.

第1認証結果は、第1認証装置2から送信された第1特徴データ(例えば顔画像データ)と第1認証用データとに基づいて第1認証処理が成功した日時を示すデータである。第1認証結果は、第1認証処理が成功したことを示すデータであってもよい。記憶部12は、第1認証結果を記憶せず、第1認証処理が成功した場合にのみ第2認証用データを記憶するように構成されていてもよい。 The first authentication result is data indicating the date and time when the first authentication process was successful based on the first feature data (for example, face image data) and the first authentication data transmitted from the first authentication device 2 . The first authentication result may be data indicating that the first authentication process was successful. The storage unit 12 may be configured not to store the first authentication result, but to store the second authentication data only when the first authentication process is successful.

第2認証用データは、第2認証処理部132が第2認証装置3を用いて第2認証処理を実行するために用いられるデータである。第2認証用データは、例えば第1認証装置2から送信されたサブ特徴データである。 The second authentication data is data used by the second authentication processing unit 132 to execute the second authentication process using the second authentication device 3 . The second authentication data is sub-feature data transmitted from the first authentication device 2, for example.

第2認証結果は、第2認証装置3から送信された第2特徴データ(例えば撮像画像データ)と第2認証用データとに基づいて第2認証処理が成功した日時を示すデータである。第2認証結果は、第2認証処理が成功したことを示すデータであってもよい。 The second authentication result is data indicating the date and time when the second authentication process was successful based on the second characteristic data (for example, captured image data) and the second authentication data transmitted from the second authentication device 3 . The second authentication result may be data indicating that the second authentication process was successful.

なお、図5における「第2認証結果a」は、第2認証装置3-1から受信した第2特徴データに基づく第2認証処理が成功した日時を示し、「第2認証結果b」は、第2認証装置3-2から受信した第2特徴データに基づく第2認証処理が成功した日時を示し、「第2認証結果c」は、第2認証装置3-3から受信した第2特徴データに基づく第2認証処理が成功した日時を示している。 The "second authentication result a" in FIG. 5 indicates the date and time when the second authentication process based on the second characteristic data received from the second authentication device 3-1 was successful, and the "second authentication result b" Indicates the date and time when the second authentication process based on the second feature data received from the second authentication device 3-2 was successful, and "second authentication result c" is the second feature data received from the second authentication device 3-3. indicates the date and time when the second authentication process based on is successful.

利用客IDがG001の利用客及び利用客IDがG003の利用客は、エレベータを利用したので、第2認証装置3-1が送信した第2特徴データに基づいて第2認証処理が行われている。利用客IDがG002の利用客及び利用客IDがG004の利用客は、階段を利用したので、第2認証装置3-2が送信した第2特徴データに基づいて第2認証処理が行われている。このように、どの第2認証装置3から受信した第2特徴データに基づいて第2認証処理が行われたかに基づいて、情報処理装置1は、利用客の移動経路を特定することもできる。 Since the customer with the customer ID G001 and the customer with the customer ID G003 used the elevator, the second authentication process is performed based on the second characteristic data transmitted by the second authentication device 3-1. there is Since the customer with the customer ID G002 and the customer with the customer ID G004 used the stairs, the second authentication process is performed based on the second feature data transmitted by the second authentication device 3-2. there is In this way, the information processing device 1 can also identify the travel route of the customer based on which second authentication device 3 received the second characteristic data from which the second authentication process was performed.

制御部13は、例えばCPU(Central Processing Unit)を有している。制御部13は、記憶部12に記憶されたプログラムを実行することにより、第1認証処理部131、第2認証処理部132及び設備制御部133として機能する。 The control unit 13 has, for example, a CPU (Central Processing Unit). The control unit 13 functions as a first authentication processing unit 131 , a second authentication processing unit 132 and an equipment control unit 133 by executing programs stored in the storage unit 12 .

第1認証処理部131は、利用客が施設のチェックイン場所でチェックインする際に、施設を利用する利用客を第1認証手段により認証し、図5に示したように、利用客を識別するための利用客IDに関連付けて第1認証結果を記憶部12に記憶させる。第1認証処理部131は、例えば、顔認証を第1認証手段として用いて利用客を認証するとともに、顔認証をした際の利用客の顔以外の部分を含む画像データをサブ特徴データとして、利用客IDに関連付けて記憶部12に記憶させる。 The first authentication processing unit 131 authenticates the user using the facility by the first authentication means when the user checks in at the check-in place of the facility, and identifies the user as shown in FIG. The first authentication result is stored in the storage unit 12 in association with the customer ID for performing the authentication. The first authentication processing unit 131, for example, uses face authentication as the first authentication means to authenticate the customer, and uses image data including parts other than the customer's face at the time of face authentication as sub-feature data, It is stored in the storage unit 12 in association with the customer ID.

一例として、第1認証処理部131は、利用客の全身の画像を示すサブ特徴データを記憶部12に記憶させる。第1認証処理部131は、利用客の服装の色、種類又は大きさの少なくともいずれかを示すサブ特徴データを記憶部12に記憶させてもよい。 As an example, the first authentication processing unit 131 causes the storage unit 12 to store sub-feature data representing an image of the whole body of the customer. The first authentication processing unit 131 may cause the storage unit 12 to store sub-feature data indicating at least one of the color, type, and size of the customer's clothing.

また、第1認証処理部131は、図5に示したように、利用客IDに関連付けて第1認証手段により認証した日時である第1認証日時を記憶部12に記憶させてもよい。第1認証日時は、例えば、第2認証処理部132が第2認証処理を実行するか否かの判定に用いられる。 In addition, as shown in FIG. 5, the first authentication processing unit 131 may cause the storage unit 12 to store the first authentication date and time, which is the date and time of authentication by the first authentication means, in association with the customer ID. The first authentication date and time is used, for example, to determine whether or not the second authentication processing unit 132 executes the second authentication process.

第2認証処理部132は、第1認証処理部131が第1認証手段による第1認証処理に成功したことが利用客IDに関連付けて記憶部12に記憶されている場合に、施設におけるチェックイン場所以外の一以上の場所にいる利用客を第1認証手段と異なる第2認証手段により認証する。第2認証処理部132は、例えばチェックイン場所から部屋に移動するために使用される場所で撮影された利用客の画像に基づいて、第2認証手段により利用客を認証する。第2認証処理部132は、利用客IDに関連付けて第2認証結果を記憶部12に記憶させる。チェックイン場所から部屋に移動するために使用される場所は、例えば施設内の廊下、駐車場、レストラン又はプールである。 The second authentication processing unit 132 performs check-in at the facility when the fact that the first authentication processing unit 131 has succeeded in the first authentication processing by the first authentication means is stored in the storage unit 12 in association with the customer ID. A user at one or more places other than the place is authenticated by a second authentication means different from the first authentication means. The second authentication processing unit 132 authenticates the user by the second authentication means based on the image of the user taken at the place used for moving from the check-in place to the room, for example. The second authentication processing unit 132 stores the second authentication result in the storage unit 12 in association with the customer ID. Locations used to move from the check-in location to the room are, for example, corridors, parking lots, restaurants or swimming pools within the facility.

第2認証処理部132は、第1認証手段よりも精度が低い第2認証手段により利用客を認証する。第2認証処理部132は、例えば第2認証装置3が作成したサブ特徴データを用いる第2認証手段により利用客を認証する。第1認証手段が顔画像に基づく顔認証である場合、第2認証手段は、例えばサブ特徴データが示す服装の特徴を利用した認証である。具体的には、第2認証処理部132は、チェックインが行われる場所以外の一以上の場所で利用客が撮影された画像が示す服装と、記憶部12に記憶されたサブ特徴データが示す服装とを比較することにより利用客を認証する。 The second authentication processing unit 132 authenticates the user by a second authentication means with accuracy lower than that of the first authentication means. The second authentication processing unit 132 authenticates the customer by the second authentication means using sub-feature data created by the second authentication device 3, for example. When the first authentication means is face authentication based on a face image, the second authentication means is authentication using, for example, clothing features indicated by sub-feature data. Specifically, the second authentication processing unit 132 determines the clothing indicated by the image of the passenger taken at one or more locations other than the place where the check-in is performed, and the sub-characteristic data stored in the storage unit 12. The user is authenticated by comparing with the clothes.

第2認証処理部132が、このように第1認証手段よりも精度が低い第2認証手段を用いることで、例えば顔認証をする際のように利用客が静止したり、利用客が特別な動作をしたりすることなく、第2認証処理部132は第2認証処理に用いるためのデータを取得することができる。したがって、情報処理システムSは、施設内の多数の場所に設置された第2認証装置3が作成した多数のサブ特徴データを利用して第2認証処理を実行することができるので、利用客がいる場所又は利用者の状態を細かく認識し、利用客の状態に適した設備の制御をすることが可能になり、利用客の満足度が向上する。 When the second authentication processing unit 132 uses the second authentication means having a lower accuracy than the first authentication means in this way, the user can stand still, for example, when performing face authentication, or the user can be in a special situation. Without taking any action, the second authentication processing unit 132 can acquire data for use in the second authentication process. Therefore, the information processing system S can execute the second authentication process using a large number of sub-characteristic data created by the second authentication devices 3 installed at many places in the facility. It is possible to finely recognize the place where the user is or the state of the user, and control the equipment suitable for the state of the user, thereby improving the satisfaction of the user.

第2認証処理部132は、記憶部12に記憶された第1認証日時から所定の期間以内であることを条件として、第2認証手段により利用客を認証してもよい。所定の期間は、例えば、第1認証処理部131が第1認証処理を行った利用客が、利用客が使用可能な部屋まで移動する際に第2認証装置3が設置された場所に到達するまでに要する標準時間(例えば1分)に基づいて決定された期間(例えば2分)である。第2認証処理部132がこのように動作することで、第2認証装置3から取得したサブ特徴データに、第1認証処理に成功した利用客を示す情報(例えば服装の画像)が含まれている蓋然性が高まるので、第2認証の精度が向上する。 The second authentication processing unit 132 may authenticate the customer by the second authentication means on the condition that it is within a predetermined period from the first authentication date and time stored in the storage unit 12 . For a predetermined period of time, for example, a customer for whom the first authentication processing unit 131 has performed the first authentication process reaches the place where the second authentication device 3 is installed when moving to a room that the customer can use. It is a period (for example, 2 minutes) determined based on a standard time (for example, 1 minute) required until. By operating the second authentication processing unit 132 in this way, the sub-characteristic data acquired from the second authentication device 3 includes information (for example, an image of clothes) indicating a user who has successfully completed the first authentication processing. Since the probability of being present increases, the accuracy of the second authentication improves.

第2認証処理部132は、複数の第2認証装置3の位置を利用客が通る順序に基づいて第2認証処理を実行するか否かを決定してもよい。第2認証処理部132は、例えば、1つの第2認証装置3から送信されたサブ特徴データを取得した場合、当該サブ特徴データを取得する前に、他の所定の第2認証装置3から取得したサブ特徴データに基づく第2認証が成功していたことを条件として、第2認証処理を実行してもよい。 The second authentication processing unit 132 may determine whether to execute the second authentication process based on the order in which the customer passes through the positions of the plurality of second authentication devices 3 . For example, when sub-characteristic data transmitted from one second authentication device 3 is acquired, the second authentication processing unit 132 acquires sub-characteristic data from another predetermined second authentication device 3 before acquiring the sub-characteristic data. The second authentication process may be executed on the condition that the second authentication based on the sub-feature data obtained has been successful.

例えば図2及び図3に示した例において利用客がチェックイン場所から201号室まで移動する場合、第2認証装置3-3が設置された位置に利用客が到達する前に、第2認証装置3-1又は第2認証装置3-2が設置された位置を必ず通ることになる。したがって、第2認証装置3-1又は第2認証装置3-2から送信されたサブ特徴データに基づく第2認証処理に成功していない場合、第2認証装置3-3が設置された位置に利用客が到達しないと考えられる。 For example, in the example shown in FIGS. 2 and 3, when the user moves from the check-in place to room 201, before the user reaches the position where the second authentication device 3-3 is installed, the second authentication device 3-1 or the position where the second authentication device 3-2 is installed. Therefore, if the second authentication process based on the sub-characteristic data transmitted from the second authentication device 3-1 or the second authentication device 3-2 is not successful, the position where the second authentication device 3-3 is installed Customers may not arrive.

そこで、第2認証処理部132は、第2認証装置3-3が設置された場所を利用客が通る前に利用客が通る位置に設置された第2認証装置3から送信されたサブ特徴データに基づく第2認証処理に成功していない場合、第2認証装置3-3から送信されたサブ特徴データに基づく第2認証処理を実行しない。第2認証処理部132がこのように、複数の第2認証装置3の位置を利用客が通る順序に基づいて第2認証処理を実行するか否かを決定することで、第2認証処理の精度を向上させることができる。 Therefore, the second authentication processing unit 132, before the user passes through the place where the second authentication device 3-3 is installed, sets the sub-characteristic data transmitted from the second authentication device 3 installed at the position where the user passes through. is not successful, the second authentication process based on the sub-feature data transmitted from the second authentication device 3-3 is not executed. In this way, the second authentication processing unit 132 determines whether or not to execute the second authentication processing based on the order in which the customer passes through the positions of the plurality of second authentication devices 3. Accuracy can be improved.

ところで、利用客は、部屋に入った後に施設の外に出てから戻ってくる場合がある。このように、チェックインが終了している利用客が再びチェックイン場所を通る場合に、利用客に第1認証装置2の前で停止してもらうと、利用客の満足度が低下する。そこで、第2認証処理部132は、第1認証処理部131による認証が成功した後に利用客がチェックイン場所を通る場合に、第2認証手段により利用客を認証してもよい。 By the way, after entering the room, the user may leave the facility and then come back. In this way, when a customer who has completed check-in passes through the check-in place again, if the customer is stopped in front of the first authentication device 2, the customer's satisfaction is lowered. Therefore, the second authentication processing unit 132 may authenticate the user by the second authentication means when the user passes through the check-in place after the authentication by the first authentication processing unit 131 is successful.

この場合、第1認証装置2-1は、付近を移動している利用客を撮影することにより撮像画像データを作成して情報処理装置1に送信し、第2認証処理部132は、第1認証装置2から受信した撮像画像データに基づいて第2認証処理を実行する。この場合、第1認証装置2-1が作成した撮像画像データは第2特徴データとして使用される。第2認証処理部132は、第2認証処理に失敗した場合に第1認証装置2に認証結果を送信し、第1認証装置2が警報音を発してもよい。情報処理装置1及び第1認証装置2がこのように動作することで、チェックインをしていない人が施設内に入ってしまうことを防止できる。 In this case, the first authentication device 2-1 creates captured image data by capturing an image of a customer moving in the vicinity, and transmits the image data to the information processing device 1. A second authentication process is executed based on the captured image data received from the authentication device 2 . In this case, the captured image data created by the first authentication device 2-1 is used as the second feature data. The second authentication processing unit 132 may transmit the authentication result to the first authentication device 2 when the second authentication processing fails, and the first authentication device 2 may emit an alarm sound. By operating the information processing device 1 and the first authentication device 2 in this manner, it is possible to prevent a person who has not checked in from entering the facility.

設備制御部133は、第2認証処理部132が第2認証手段による第2認証処理に成功したことが利用客IDに関連付けて記憶部12に記憶されている場合に、施設内の設備を制御する。設備制御部133は、例えば、第2認証処理部132が第2認証手段による認証が成功したことが利用客IDに関連付けて記憶部12に記憶されている場合に、部屋IDに対応する施設内の設備を制御する。設備制御部133は、例えばチェックイン場所から利用客が利用する部屋に利用客が移動するまでの想定ルート上の一以上の館内設備4を起動させる。設備制御部133は、利用客が利用する部屋に設置された一以上の室内設備5を制御してもよい。設備制御部133は、例えば、利用客が利用する部屋に設置された一以上の室内設備を起動させたり、動作状態を変化させたりする。 The equipment control unit 133 controls the equipment in the facility when the fact that the second authentication processing unit 132 has succeeded in the second authentication processing by the second authentication means is stored in the storage unit 12 in association with the customer ID. do. For example, when the second authentication processing unit 132 stores in the storage unit 12 that the second authentication processing unit 132 has successfully authenticated by the second authentication means in association with the user ID, the facility control unit 133 determines whether the facility inside the facility corresponding to the room ID equipment. The equipment control unit 133 activates one or more in-house equipment 4 on an assumed route from the check-in place to the room used by the customer, for example. The facility control unit 133 may control one or more indoor facilities 5 installed in the room used by the customer. The equipment control unit 133, for example, activates one or more indoor equipment installed in a room used by a customer, or changes the operating state.

設備制御部133は、第1認証処理部131が第1認証手段による第1認証に成功したことが利用客IDに関連付けて記憶部12に記憶されている場合にも施設内の設備を制御してもよい。この場合、設備制御部133は、第2認証処理部132が第2認証手段による第2認証処理に成功した場合に、第1認証処理部131が第1認証手段による第1認証処理に成功した場合に制御する設備と異なる設備を制御してもよい。 The equipment control unit 133 controls equipment in the facility even when the fact that the first authentication processing unit 131 has successfully performed the first authentication by the first authentication means is stored in the storage unit 12 in association with the user ID. may In this case, when the second authentication processing unit 132 succeeds in the second authentication processing by the second authentication means, the facility control unit 133 determines that the first authentication processing unit 131 has succeeded in the first authentication processing by the first authentication means. A facility different from the facility controlled in the case may be controlled.

一例として、設備制御部133は、第1認証処理部131が、第1認証装置2-1が送信した第1特徴データに基づく第1認証手段による第1認証処理に成功した場合に、第1認証手段に用いるデータを作成する第1認証装置2-1が設置された位置から所定の範囲内の館内設備4-1を起動させる。設備制御部133は、第1認証処理部131が第1認証処理に成功した後に、第2認証処理部132が、第2認証装置3-1が送信した第2特徴データに基づく第2認証処理に成功した場合に、第2認証装置3-1が設置された位置から所定の範囲外の館内設備4-2及び館内設備4-3を起動させたり、室内設備5を起動させたりする。設備制御部133がこのように動作することで、利用客の移動状況に合わせて設備が動作するので、利用客の満足度が向上する。 As an example, if the first authentication processing unit 131 succeeds in the first authentication processing by the first authentication means based on the first feature data transmitted by the first authentication device 2-1, the facility control unit 133 performs the first The in-house facility 4-1 within a predetermined range from the position where the first authentication device 2-1 that creates the data used for the authentication means is installed is activated. After the first authentication processing unit 131 succeeds in the first authentication processing, the equipment control unit 133 causes the second authentication processing unit 132 to perform the second authentication processing based on the second characteristic data transmitted by the second authentication device 3-1. If successful, the indoor facility 4-2 and the indoor facility 4-3 outside the predetermined range from the position where the second authentication device 3-1 is installed, or the indoor facility 5 is activated. By operating the equipment control unit 133 in this manner, the equipment operates in accordance with the movement status of the customer, thereby improving customer satisfaction.

また、設備制御部133は、第2認証処理部132が第2認証手段による第2認証処理に成功した場合に、第1認証処理部131が第1認証手段による第1認証処理に成功した場合と異なる状態に設備がなるように設備を制御してもよい。設備制御部133は、例えば第1認証処理部131が、第1認証装置2-1が送信した第1特徴データに基づく第1認証処理に成功した時点で、館内設備4-2~館内設備4-4を第1照度で点灯させる。そして、第2認証処理部132が、第2認証装置3-1が送信した第2特徴データに基づく第2認証処理に成功した場合に、館内設備4-2~館内設備4-4を第1照度よりも明るい第2照度で点灯させる。設備制御部133は、例えば第1認証処理部131が第1認証処理に成功した時点で室内設備5の電源を投入し、第2認証処理部132が第2認証処理に成功した時点で室内設備5の動作を開始させてもよい。 In addition, when the second authentication processing unit 132 succeeds in the second authentication processing by the second authentication means, the facility control unit 133 performs the first authentication processing by the first authentication means when the first authentication processing unit 131 The equipment may be controlled so that the equipment is in a state different from For example, when the first authentication processing unit 131 succeeds in the first authentication processing based on the first feature data transmitted by the first authentication device 2-1, the facility control unit 133 controls the facility facilities 4-2 to 4. -4 is lit at the first illuminance. Then, when the second authentication processing unit 132 succeeds in the second authentication processing based on the second characteristic data transmitted by the second authentication device 3-1, the facility facilities 4-2 to 4-4 are It is lit with a second illuminance that is brighter than the illuminance. For example, the equipment control unit 133 turns on the power of the indoor equipment 5 when the first authentication processing unit 131 succeeds in the first authentication process, and turns on the indoor equipment when the second authentication processing unit 132 succeeds in the second authentication process. 5 may be started.

設備制御部133がこのように動作することで、例えば館内設備4が第2照度で点灯するまでに所定の時間を要したり、室内設備5の電源が投入されてから動作を開始するまでに所定の時間を要したりする場合であっても、利用客が館内設備4又は室内設備5が設置された場所に到達する際に、館内設備4及び室内設備5が所定の動作をすることができる。 By operating the equipment control unit 133 in this way, for example, it takes a predetermined time for the indoor equipment 4 to turn on at the second illuminance, or it takes a long time to start operating after the indoor equipment 5 is turned on. Even if it takes a predetermined amount of time, when the user reaches the place where the facility equipment 4 or the room equipment 5 is installed, the facility equipment 4 and the room equipment 5 may perform the predetermined operation. can.

[情報処理装置1における処理の流れ]
図6は、情報処理装置1における処理の流れを示すフローチャートである。図6に示すフローチャートは、利用客がチェックイン場所に来た時点から開始している。図6に示すフローチャートにおいては、部屋の入口に、利用客の顔画像データを情報処理装置1に送信する顔認証用の撮像装置が設置されている場合が想定されている。
[Flow of processing in information processing device 1]
FIG. 6 is a flowchart showing the flow of processing in the information processing apparatus 1. As shown in FIG. The flow chart shown in FIG. 6 starts when the customer arrives at the check-in location. In the flowchart shown in FIG. 6, it is assumed that an imaging device for face authentication is installed at the entrance of the room to transmit the face image data of the user to the information processing device 1 .

第1認証装置2-1は、例えば利用客の第1特徴データ(例えば顔画像データ)及びサブ特徴データ(例えば全身画像データ)を情報処理装置1に送信し、第1認証処理部131は、第1特徴データ及びサブ特徴データを取得する(S11)。第1認証処理部131は、予め記憶部12に記憶された第1認証用データと第1特徴データとを照合することにより第1認証処理を実行する(S12)。 The first authentication device 2-1, for example, transmits the customer's first feature data (eg, face image data) and sub-feature data (eg, full-body image data) to the information processing device 1, and the first authentication processing unit 131, First feature data and sub-feature data are acquired (S11). The first authentication processing unit 131 performs the first authentication processing by comparing the first data for authentication stored in advance in the storage unit 12 and the first feature data (S12).

第1認証処理部131は、第1認証処理に成功すると(S12においてYES)、第1認証結果及びサブ特徴データを第2認証用データとして記憶部12に記憶させる(S13)。第1認証処理部131は、第1認証処理に失敗すると(S12においてNO)、認証に失敗したことを示す失敗通知データを第1認証装置2-1に送信する(S22)。第1認証処理部131は、失敗通知データを所定の外部装置(例えば施設の管理者のコンピュータ)に送信してもよい。 When the first authentication processing is successful (YES in S12), the first authentication processing unit 131 stores the first authentication result and sub-feature data in the storage unit 12 as second authentication data (S13). When the first authentication process fails (NO in S12), the first authentication processing unit 131 transmits failure notification data indicating that the authentication has failed to the first authentication device 2-1 (S22). The first authentication processing unit 131 may transmit the failure notification data to a predetermined external device (for example, a facility manager's computer).

設備制御部133は、第1認証処理部131が第1認証処理に成功すると、所定の館内設備4に制御データを送信することにより館内設備4-1(第1館内設備)を起動させる(S14)。設備制御部133は、例えば第1認証装置2-1から所定の範囲内に設置されている1階の通路灯を点灯させる。 When the first authentication processing unit 131 succeeds in the first authentication process, the equipment control unit 133 transmits control data to a predetermined in-house equipment 4 to activate the in-house equipment 4-1 (first in-house equipment) (S14 ). The equipment control unit 133 turns on, for example, the first-floor aisle lights installed within a predetermined range from the first authentication device 2-1.

続いて、第2認証処理部132は、第2認証装置3から第2特徴データを取得する(S15)。第2認証処理部132は、第1認証処理部131が記憶部に第2認証用データとして記憶させたサブ特徴データと第2特徴データとを照合することにより第2認証処理を実行する(S16)。設備制御部133は、第2認証処理部132が第2認証処理に成功すると(S16においてYES)、所定の館内設備4(第2館内設備)に制御データを送信することにより所定の館内設備4を起動させる(S17)。設備制御部133は、例えば利用客が利用する部屋まで利用客が移動する間に通る位置に設置されている2階の通路灯を点灯させる。第2認証処理部132は、第2認証処理に失敗すると(S16においてNO)、認証に失敗したことを示す失敗通知データを所定の外部装置に送信してもよい(S22)。 Subsequently, the second authentication processing unit 132 acquires second feature data from the second authentication device 3 (S15). The second authentication processing unit 132 performs the second authentication processing by matching the second feature data with the sub-characteristic data stored as the second authentication data in the storage unit by the first authentication processing unit 131 (S16 ). When the second authentication processing unit 132 succeeds in the second authentication processing (YES in S16), the equipment control unit 133 transmits the control data to the predetermined in-house equipment 4 (second in-house equipment), thereby (S17). The facility control unit 133 turns on, for example, a second-floor aisle light installed at a position through which a customer passes while moving to a room used by the customer. When the second authentication processing fails (NO in S16), the second authentication processing unit 132 may transmit failure notification data indicating that authentication has failed to a predetermined external device (S22).

続いて、設備制御部133は第2認証処理に成功した利用客が利用する部屋に設置されている室内設備5及び部屋の入口に設置されている撮像装置を起動させる(S18)。利用客が部屋の入口に達すると、撮像装置は、利用客の顔を撮影することにより顔画像データを作成し、作成した顔画像データを情報処理装置1に送信する。撮像装置が送信した顔画像データを第1認証処理部131が取得して(S19)、認証処理に成功すると(S20においてYES)、設備制御部133は、部屋の電子錠に制御データを送信することにより開錠する(S21)。第1認証処理部131が認証処理に失敗すると(S20においてNO)、失敗通知データを外部装置に送信する(S22)。 Subsequently, the equipment control unit 133 activates the indoor equipment 5 installed in the room used by the customer who has succeeded in the second authentication process and the imaging device installed at the entrance of the room (S18). When the customer reaches the entrance of the room, the imaging device creates face image data by photographing the customer's face, and transmits the created face image data to the information processing device 1 . When the first authentication processing unit 131 acquires the face image data transmitted by the imaging device (S19) and the authentication processing succeeds (YES in S20), the equipment control unit 133 transmits control data to the electronic lock of the room. By doing so, the door is unlocked (S21). If the first authentication processing unit 131 fails the authentication processing (NO in S20), it transmits failure notification data to the external device (S22).

情報処理装置1は、利用客がチェックアウトするまでの間(S23においてNO)、利用客を対象としてS12からS22までの処理を繰り返す。情報処理装置1は、利用客がチェックアウトをした場合、処理を終了する。 The information processing device 1 repeats the processes from S12 to S22 for the customer until the customer checks out (NO in S23). The information processing device 1 ends the process when the customer has checked out.

[第1変形例]
以上の説明においては、情報処理システムSが一つの施設内の第1認証装置2、第2認証装置3、館内設備4及び室内設備5を管理する場合を例示したが、情報処理システムSが管理する第1認証装置2、第2認証装置3、館内設備4及び室内設備5が複数の施設に設置されていてもよい。例えば、利用客が第1施設においてチェックインした際に第1認証処理部131が第1認証処理を実行し、利用客が第1施設と異なる第2施設を利用する際に、第2施設に設置された第2認証装置3から送信される第2特徴データに基づいて第2認証処理部132が第2認証処理を実行してもよい。
[First modification]
In the above description, the information processing system S manages the first authentication device 2, the second authentication device 3, the facility equipment 4, and the indoor equipment 5 in one facility. The first authentication device 2, the second authentication device 3, the indoor facility 4, and the indoor facility 5 may be installed in a plurality of facilities. For example, when the customer checks in at the first facility, the first authentication processing unit 131 executes the first authentication process, and when the customer uses the second facility different from the first facility, the second facility The second authentication processing section 132 may perform the second authentication process based on the second characteristic data transmitted from the installed second authentication device 3 .

すなわち、第2認証処理部132は、第1認証処理部131による認証が成功した後に利用客が、施設に関連付けられた他の施設のチェックイン場所を通る場合に、第2認証手段により利用客を認証してもよい。第2認証処理部132は、所定の回数以上にわたって第1認証処理部131が第1認証処理に成功した履歴がある利用客であることを条件として、他の施設のチェックイン時に第2認証手段により利用客を認証してもよい。情報処理装置1がこのように動作することで、情報処理システムSを用いて提供されるサービスを利用する利用客が他の施設にチェックインする場合に、利用客がチェックイン場所で停止する必要がなくなるので、利用客の満足度がさらに向上する。 That is, the second authentication processing unit 132 allows the user to pass through the check-in location of another facility associated with the facility after the authentication by the first authentication processing unit 131 is successful. may be authenticated. The second authentication processing unit 132 uses the second authentication means when checking in to another facility on the condition that the user has a history of successful first authentication processing by the first authentication processing unit 131 a predetermined number of times or more. The customer may be authenticated by By operating the information processing device 1 in this way, when a user who uses the service provided using the information processing system S checks in at another facility, the user does not have to stop at the check-in place. customer satisfaction is further improved.

[第2変形例]
以上の説明においては、図5に示した利用客データベースが記憶部12に記憶されている場合を例示したが、利用客データベースは、情報処理装置1の外部の装置に記憶されていてもよい。また、利用客データベースに含まれるデータの一部が記憶部12に記憶されており、他の一部のデータが外部の装置に記憶されていてもよい。
[Second modification]
In the above description, the case where the customer database shown in FIG. Further, part of the data included in the customer database may be stored in the storage unit 12, and other part of the data may be stored in an external device.

[第3変形例]
以上の説明においては、第2認証処理部132が、チェックインが行われる場所以外の一以上の場所で利用客が撮影された画像が示す服装と、記憶部12に記憶されたサブ特徴データが示す服装とを比較することにより利用客を認証するという例を示したが、第2認証処理部132は、サブ特徴データに基づく服装以外の特徴を利用して利用客を認証してもよい。第2認証処理部132は、サブ特徴データに基づいて特定される利用客の体形又は動作の特徴を用いて利用客を認証してもよい。第2認証処理部132が動作の特徴を用いる場合、サブ特徴データは動画像データであることが好ましい。
[Third Modification]
In the above description, the second authentication processing unit 132 determines that the clothing indicated by the image of the customer taken at one or more locations other than the check-in location and the sub-feature data stored in the storage unit 12 are Although an example of authenticating the customer by comparing with the indicated clothing has been shown, the second authentication processing unit 132 may authenticate the customer using features other than the clothing based on the sub-feature data. The second authentication processing unit 132 may authenticate the customer using the feature of the customer's body shape or movement specified based on the sub-feature data. When the second authentication processing unit 132 uses motion features, the sub-feature data is preferably moving image data.

第1認証処理部131は、利用客の体形又は動作の少なくともいずれかの特徴を示すサブ特徴データを記憶部12に記憶させる。第2認証処理部132は、チェックインが行われる場所以外の一以上の場所で利用客が撮影された画像に基づいて特定した利用客の体形又は動作の少なくともいずれかの特徴と、記憶部12に記憶されたサブ特徴データが示す体形又は動作の少なくともいずれかの特徴とを比較することにより利用客を認証する。 The first authentication processing unit 131 causes the storage unit 12 to store sub-feature data indicating at least one feature of the customer's body shape or motion. The second authentication processing unit 132 stores at least one feature of the customer's body shape or movement identified based on the image taken by the customer at one or more locations other than the place where the check-in is performed, and the storage unit 12 The user is authenticated by comparing with at least one feature of body shape or movement indicated by the sub-feature data stored in the .

第2認証処理部132は、例えば、サブ特徴データに含まれる画像データに基づいて、利用客の骨格上の複数のポイントを抽出し、抽出した複数のポイントの位置関係が、チェックインが行われる場所以外の一以上の場所で利用客が撮影された画像から抽出される骨格上の複数のポイントの位置関係と一致するか否かを判定することにより利用客を認証する。 For example, the second authentication processing unit 132 extracts a plurality of points on the customer's skeleton based on the image data included in the sub-feature data, and the positional relationship of the extracted points is determined by the check-in process. A user is authenticated by determining whether or not the positional relationship of a plurality of points on the skeleton extracted from images of the user photographed at one or more places other than the place matches.

第2認証処理部132は、複数のポイントが時間の経過とともに変化するパターンを特定する。パターンは、サブ特徴データに含まれる動画像データに基づいて抽出した骨格上の複数のポイントの変化パターンが、チェックインが行われる場所以外の一以上の場所で利用客が撮影された画像から抽出される骨格上の複数のポイントの変化パターンと一致するか否かを判定することにより利用客を認証する。複数のポイントの変化パターンは、例えば、複数のポイントそれぞれの単位時間あたりの変化量、変化する方向又は複数のポイントの位置関係の変化傾向により定められる。 The second authentication processing unit 132 identifies a pattern in which multiple points change over time. The pattern is extracted based on the moving image data included in the sub-feature data, and the change pattern of multiple points on the skeleton is extracted from images taken of the passenger at one or more locations other than the check-in location. The customer is authenticated by determining whether or not it matches the change pattern of a plurality of points on the skeleton. The change pattern of the plurality of points is determined, for example, by the amount of change per unit time of each of the plurality of points, the direction of change, or the tendency of change in the positional relationship of the plurality of points.

第2認証処理部132が、このような利用者の体形又は動作の少なくともいずれかの特徴を利用することで、利用客が正面を向いていない状態で撮影されて作成された撮像画像データを用いて利用客を認証できるので、さまざまな場所で容易に利用客を認証することができる。また、複数の利用客で体形又は動作が一致する確率は服装が一致する確率よりも低いので、認証の精度が向上する。 The second authentication processing unit 132 utilizes at least one of the characteristics of the user's body shape and movement, so that the captured image data created when the user is not facing the front is used. Since users can be authenticated at various locations, users can be easily authenticated at various locations. In addition, since the probability that a plurality of customers have the same body shape or motion is lower than the probability that the clothes match, the accuracy of authentication is improved.

[第4変形例]
以上の説明においては、チェックイン時に第1認証を行う場合を例示したが、第1認証を行う回数及び場所は任意である。第1認証装置2は、例えば、チェックイン場所、エレベータ内、部屋の入口又は精算場所の少なくともいずれかの場所に設けられていてもよい。
[Fourth Modification]
In the above description, the case where the first authentication is performed at the time of check-in was exemplified, but the number and place of performing the first authentication are arbitrary. The first authentication device 2 may be provided, for example, at least one of the check-in place, the inside of the elevator, the entrance of the room, and the checkout place.

また、第1認証処理部131は、第2認証処理部132が第2認証装置3により認証した後に、再び第1認証装置2を用いて認証する場合に、第1認証装置2とともに、第2認証装置3を用いて第2認証処理部132が認証した結果を用いて認証してもよい。すなわち、第1認証処理部131が2回目以降の第1認証を行う際に、第1認証処理で用いる認証方法(例えば顔画像を用いる認証)とともに、1回目の第1認証処理の後に第2認証処理部132が行った第2認証の結果を用いてもよい。第2認証処理の結果は、例えば、利用客の服装、体形、動き方、利用客が撮影された位置及び時刻、又は利用客の携帯端末の位置情報に基づいて特定される位置である。このように第1認証手段と第2認証手段とを併用することにより、認証の精度が向上する。 Further, when the second authentication processing unit 132 uses the first authentication device 2 again for authentication after the second authentication processing unit 132 authenticates using the second authentication device 3, the first authentication processing unit 131 uses the first authentication device 2 together with the second authentication device 2. Authentication may be performed using the result of authentication performed by the second authentication processing unit 132 using the authentication device 3 . That is, when the first authentication processing unit 131 performs the first authentication for the second and subsequent times, the authentication method used in the first authentication process (for example, authentication using a face image) is used, and the second authentication process is performed after the first authentication process. A result of the second authentication performed by the authentication processing unit 132 may be used. The result of the second authentication process is, for example, the customer's clothing, body shape, movement, the location and time when the customer was photographed, or the location specified based on the location information of the customer's portable terminal. By using both the first authentication means and the second authentication means in this way, the accuracy of authentication is improved.

一例として、第1認証処理部131は、第1認証手段と併用する第2認証手段として、利用客の携帯端末の位置情報の履歴を用いてもよい。例えば、第2認証処理部132は、第2認証処理をした際の利用客の位置(すなわち第2認証処理に用いた撮像画像を取得した第2認証装置3の位置)を時刻及び利用客に関連付けて記憶部12に記憶させる。そして、第1認証処理部131は、第1認証処理を実行する時刻及び位置と、記憶部12に記憶された利用客に対して第2認証処理をした時刻及び位置との関係に基づいて、第1認証処理の対象の利用客が第2認証処理をした利用客とが同一人物でないと判定した場合、第1認証処理を実行しない。 As an example, the first authentication processing unit 131 may use the history of location information of the user's mobile terminal as a second authentication means used together with the first authentication means. For example, the second authentication processing unit 132 stores the position of the user when the second authentication process is performed (that is, the position of the second authentication device 3 that acquired the captured image used in the second authentication process) as the time and the user. They are stored in the storage unit 12 in association with each other. Then, the first authentication processing unit 131, based on the relationship between the time and position at which the first authentication processing is performed and the time and position at which the second authentication processing is performed for the customer stored in the storage unit 12, When it is determined that the customer targeted for the first authentication process is not the same person as the customer who performed the second authentication process, the first authentication process is not executed.

第1認証処理部131は、例えば、第1位置で第1認証装置2の位置にいる利用客が、第1位置から5分で移動することが不可能な第2位置で5分前に第2認証装置3を介して第2認証が行われたという場合に、当該利用客に第1認証処理を実行せず、エラーメッセージを出力する。第1認証処理部131は、第2認証処理部132が記憶部12に記憶させた時刻及び位置の代わりに、予約した利用客の携帯端末の位置情報を検索することにより、予約した利用客の位置を時刻に関連付けて確認し、確認した位置及び時刻と第1認証装置2の位置及び第1認証装置2に利用客が到着した時刻との関係に基づいて、第1認証処理の対象の利用客が第2認証処理をした利用客とが同一人物であるか否かを判定してもよい。第1認証処理部131がこのように動作することで、双子のように顔が似ている人を取り違えてしまうことを防げる。 For example, the first authentication processing unit 131 causes the customer who is at the first authentication device 2 to move from the first location to the second location five minutes before five minutes. 2 When the second authentication is performed via the authentication device 3, the first authentication processing is not executed for the customer and an error message is output. The first authentication processing unit 131 retrieves the location information of the mobile terminal of the reserved customer instead of the time and location stored in the storage unit 12 by the second authentication processing unit 132. The position is confirmed in association with the time, and the use of the target of the first authentication process is performed based on the relationship between the confirmed position and time, the position of the first authentication device 2, and the time when the user arrives at the first authentication device 2. It may be determined whether or not the customer is the same person as the customer who has undergone the second authentication process. By operating the first authentication processing unit 131 in this way, it is possible to prevent people who have similar faces from being mistaken for each other, such as twins.

[情報処理システムSによる効果]
以上説明したように、情報処理システムSは、情報処理装置1と、第1認証装置2と、第2認証装置3と、を備えている。そして、情報処理装置1は、施設を利用する利用客が施設にチェックインする際にチェックイン場所において利用客を第1認証手段により認証し、第1認証手段による認証に成功した場合に、利用客を第2認証手段により認証する。情報処理装置1は、第2認証手段による認証に成功した場合に、施設内の設備を制御して、設備に所定の動作を実行させる。
[Effects of information processing system S]
As described above, the information processing system S includes the information processing device 1 , the first authentication device 2 and the second authentication device 3 . Then, the information processing device 1 authenticates the customer using the first authentication means at the check-in place when the customer using the facility checks in to the facility, and if the authentication by the first authentication means succeeds, the user can use the facility. The customer is authenticated by the second authentication means. The information processing device 1 controls the equipment in the facility and causes the equipment to perform a predetermined operation when the authentication by the second authentication means is successful.

情報処理装置1がこのように構成されていることで、チェックイン時に利用客を認証した後に、チェックイン場所以外の場所に適した手段で利用客を認証することができる。したがって、情報処理装置1は、複数の場所で利用客を認証した結果に基づいて利用客の満足度が向上するように設備を制御することが可能になるので、施設の運営者がいない状態で利用客がチェックインをした場合の利用客の満足度を向上させることができる。 By configuring the information processing device 1 in this way, after authenticating the user at the time of check-in, the user can be authenticated by means suitable for a place other than the check-in place. Therefore, the information processing apparatus 1 can control the facilities so as to improve customer satisfaction based on the results of authenticating customers at a plurality of locations. To improve customer satisfaction when the customer checks in.

また、第1認証手段を用いた第1認証処理よりも第2認証手段を用いた第2認証処理の精度は低いので、多数の場所で第2認証処理をするための第2特徴データが収集されたとしても利用客の負担が増加しない。その結果、利用客の負担が増えることなく利用客にとっての利便性が高まるので、利用客の満足度が向上しやすくなる。 Further, since the accuracy of the second authentication process using the second authentication means is lower than that of the first authentication process using the first authentication means, the second feature data for performing the second authentication process at many places is collected. Even if it is, the burden on users will not increase. As a result, the convenience for the customer is enhanced without increasing the burden on the customer, so that the satisfaction level of the customer is likely to be improved.

以上、本発明を実施の形態を用いて説明したが、本発明の技術的範囲は上記実施の形態に記載の範囲には限定されず、その要旨の範囲内で種々の変形及び変更が可能である。例えば、装置の全部又は一部は、任意の単位で機能的又は物理的に分散・統合して構成することができる。また、複数の実施の形態の任意の組み合わせによって生じる新たな実施の形態も、本発明の実施の形態に含まれる。組み合わせによって生じる新たな実施の形態の効果は、もとの実施の形態の効果を併せ持つ。 Although the present invention has been described above using the embodiments, the technical scope of the present invention is not limited to the scope described in the above embodiments, and various modifications and changes are possible within the scope of the gist thereof. be. For example, all or part of the device can be functionally or physically distributed and integrated in arbitrary units. In addition, new embodiments resulting from arbitrary combinations of multiple embodiments are also included in the embodiments of the present invention. The effect of the new embodiment caused by the combination has the effect of the original embodiment.

1 情報処理装置
2 第1認証装置
3 第2認証装置
4 館内設備
5 室内設備
11 通信部
12 記憶部
13 制御部
131 第1認証処理部
132 第2認証処理部
133 設備制御部
1 information processing device 2 first authentication device 3 second authentication device 4 facility facility 5 indoor facility 11 communication unit 12 storage unit 13 control unit 131 first authentication processing unit 132 second authentication processing unit 133 facility control unit

Claims (16)

施設を利用する利用客が前記施設にチェックインする際にチェックイン場所において前記利用客を第1認証手段により認証し、前記利用客を識別するための利用客識別情報に関連付けて認証結果を記憶部に記憶させる第1認証処理部と、
前記第1認証処理部が前記第1認証手段による認証に成功したことが前記利用客識別情報に関連付けて前記記憶部に記憶されている場合に、前記施設における前記チェックイン場所以外の一以上の場所にいる前記利用客を前記第1認証手段と異なる第2認証手段により認証し、前記利用客識別情報に関連付けて認証結果を前記記憶部に記憶させる第2認証処理部と、
前記第2認証処理部が前記第2認証手段による認証に成功したことが前記利用客識別情報に関連付けて前記記憶部に記憶されている場合に、前記施設内の設備を制御する設備制御部と、
を有する情報処理装置。
When a customer using the facility checks in at the facility, the customer is authenticated by a first authentication means at the check-in place, and the authentication result is stored in association with customer identification information for identifying the customer. a first authentication processing unit stored in the unit;
When the fact that the first authentication processing unit has successfully authenticated by the first authentication means is stored in the storage unit in association with the customer identification information, one or more locations other than the check-in location in the facility a second authentication processing unit that authenticates the customer at the location by a second authentication unit different from the first authentication unit, and stores the authentication result in the storage unit in association with the customer identification information;
a facility control section for controlling facilities in the facility when the fact that the second authentication processing section has successfully authenticated by the second authentication means is stored in the storage section in association with the user identification information; ,
Information processing device having
前記第2認証処理部は、前記第1認証手段よりも精度が低い前記第2認証手段により前記利用客を認証する、
請求項1に記載の情報処理装置。
The second authentication processing unit authenticates the customer by the second authentication means having lower accuracy than the first authentication means,
The information processing device according to claim 1 .
前記第1認証処理部は、顔認証を前記第1認証手段として用いて前記利用客を認証するとともに、前記顔認証をした際の前記利用客の顔以外の部分を含む画像データをサブ特徴データとして、前記利用客識別情報に関連付けて前記記憶部に記憶させ、
前記第2認証処理部は、前記サブ特徴データを使用する前記第2認証手段を用いて前記利用客を認証する、
請求項2に記載の情報処理装置。
The first authentication processing unit authenticates the customer using face authentication as the first authentication means, and converts image data including parts other than the face of the customer at the time of face authentication to sub-feature data. and stored in the storage unit in association with the customer identification information,
The second authentication processing unit authenticates the customer using the second authentication means that uses the sub-feature data.
The information processing apparatus according to claim 2.
前記第1認証処理部は、前記利用客の服装の色、種類又は大きさの少なくともいずれかを示す前記サブ特徴データを前記記憶部に記憶させ、
前記第2認証処理部は、前記チェックインが行われる場所以外の一以上の場所で前記利用客が撮影された画像が示す服装と、前記記憶部に記憶されたサブ特徴データが示す服装とを比較することにより前記利用客を認証する、
請求項3に記載の情報処理装置。
The first authentication processing unit causes the storage unit to store the sub-characteristic data indicating at least one of the color, type, and size of the customer's clothing,
The second authentication processing unit distinguishes clothing indicated by an image of the user taken at one or more locations other than the check-in location and clothing indicated by the sub-feature data stored in the storage unit. authenticating the patron by comparison;
The information processing apparatus according to claim 3.
前記第1認証処理部は、前記利用客の動作の特徴を示す前記サブ特徴データを前記記憶部に記憶させ、
前記第2認証処理部は、前記チェックインが行われる場所以外の一以上の場所で前記利用客が撮影された画像に基づいて特定した前記利用客の体形又は動作の少なくともいずれかの特徴と、前記記憶部に記憶されたサブ特徴データが示す体形又は動作の少なくともいずれかの特徴とを比較することにより前記利用客を認証する、
請求項3に記載の情報処理装置。
The first authentication processing unit causes the storage unit to store the sub-characteristic data indicating characteristics of the customer's operation,
The second authentication processing unit identifies at least one feature of the body shape or behavior of the customer identified based on the image of the customer taken at one or more locations other than the place where the check-in is performed; authenticating the customer by comparing with at least one feature of body shape or movement indicated by the sub-feature data stored in the storage unit;
The information processing apparatus according to claim 3.
前記第1認証処理部は、前記利用客識別情報に関連付けて前記第1認証手段により認証した日時である第1認証日時を前記記憶部に記憶させ、
前記第2認証処理部は、前記記憶部に記憶された前記第1認証日時から所定の期間以内であることを条件として、前記第2認証手段により前記利用客を認証する、
請求項1から5のいずれか一項に記載の情報処理装置。
The first authentication processing unit causes the storage unit to store a first authentication date and time, which is a date and time of authentication by the first authentication means in association with the customer identification information,
The second authentication processing unit authenticates the customer by the second authentication means on the condition that it is within a predetermined period from the first authentication date and time stored in the storage unit.
The information processing apparatus according to any one of claims 1 to 5.
前記記憶部は、施設を利用する利用客を識別するための利用客識別情報と、前記利用客が前記施設内で利用する部屋を識別するための部屋識別情報とが関連付けられた利用客データベースと、をさらに記憶し、
前記設備制御部は、前記第2認証処理部が前記第2認証手段による認証に成功したことが前記利用客識別情報に関連付けて前記記憶部に記憶されている場合に、前記部屋識別情報に対応する前記施設内の設備を制御する、
請求項1から6のいずれか一項に記載の情報処理装置。
The storage unit includes a customer database in which customer identification information for identifying customers who use the facility and room identification information for identifying rooms used by the customers in the facility are associated with each other. , and
The facility control unit corresponds to the room identification information when the fact that the second authentication processing unit has successfully authenticated by the second authentication means is stored in the storage unit in association with the user identification information. controlling equipment within said facility to
The information processing apparatus according to any one of claims 1 to 6.
前記第2認証処理部は、前記チェックイン場所から前記部屋に移動するために使用される場所で撮影された前記利用客の画像に基づいて、前記第2認証手段により前記利用客を認証する、
請求項7に記載の情報処理装置。
The second authentication processing unit authenticates the user by the second authentication means based on an image of the user taken at a place used for moving from the check-in place to the room.
The information processing apparatus according to claim 7.
前記設備制御部は、前記チェックイン場所から前記利用客が利用する部屋に前記利用客が移動するまでの想定ルート上の前記設備を制御する、
請求項7又は8に記載の情報処理装置。
The equipment control unit controls the equipment on an assumed route from the check-in location to the room used by the customer.
The information processing apparatus according to claim 7 or 8.
前記設備制御部は、前記利用客が利用する部屋に設置された前記設備を制御する、
請求項7から9のいずれか一項に記載の情報処理装置。
The equipment control unit controls the equipment installed in the room used by the customer.
The information processing apparatus according to any one of claims 7 to 9.
前記第2認証処理部は、前記第1認証処理部による認証に成功した後に前記利用客が前記チェックイン場所を通る場合に、前記第2認証手段により前記利用客を認証する、
請求項1から10のいずれか一項に記載の情報処理装置。
The second authentication processing unit authenticates the customer by the second authentication means when the customer passes through the check-in place after successful authentication by the first authentication processing unit.
The information processing apparatus according to any one of claims 1 to 10.
前記第2認証処理部は、前記第1認証処理部による認証に成功した後に前記利用客が、前記施設に関連付けられた他の施設のチェックイン場所を通る場合に、前記第2認証手段により前記利用客を認証する、
請求項1から11のいずれか一項に記載の情報処理装置。
The second authentication processing unit causes the second authentication means to use the authenticate the customer,
The information processing apparatus according to any one of claims 1 to 11.
前記第1認証処理部は、前記第2認証処理部が前記第2認証手段により認証した後に、再び前記第1認証手段を用いて認証する場合に、前記第1認証手段とともに、前記第2認証処理部が認証した結果を用いて認証する、
請求項1から12のいずれか一項に記載の情報処理装置。
The first authentication processing unit performs authentication using the first authentication unit again after the second authentication processing unit performs authentication using the second authentication unit. authenticate using the result authenticated by the processing unit;
The information processing apparatus according to any one of claims 1 to 12.
コンピュータが、
施設を利用する利用客が前記施設にチェックインする際にチェックイン場所において前記利用客を第1認証手段により認証するステップと、
前記第1認証手段による認証に成功した場合に、前記施設における前記チェックイン場所以外の一以上の場所にいる前記利用客を前記第1認証手段と異なる第2認証手段により認証するステップと、
前記第2認証手段による認証に成功した場合に前記施設内の設備を制御するステップと、
を実行する情報処理方法。
the computer
a step of authenticating the customer using a first authentication means at a check-in place when the customer using the facility checks in at the facility;
a step of authenticating the customer who is at one or more places other than the check-in place in the facility by a second authentication means different from the first authentication means when the authentication by the first authentication means is successful;
a step of controlling equipment in the facility when the authentication by the second authentication means is successful;
Information processing method that performs
コンピュータに、
施設を利用する利用客が前記施設にチェックインする際にチェックイン場所において前記利用客を第1認証手段により認証するステップと、
前記第1認証手段による認証に成功した場合に、前記施設における前記チェックイン場所以外の一以上の場所にいる前記利用客を前記第1認証手段と異なる第2認証手段により認証するステップと、
前記第2認証手段による認証に成功した場合に前記施設内の設備を制御するステップと、
を実行させるためのプログラム。
to the computer,
a step of authenticating the customer using a first authentication means at a check-in place when the customer using the facility checks in at the facility;
a step of authenticating the customer who is at one or more places other than the check-in place in the facility by a second authentication means different from the first authentication means when the authentication by the first authentication means is successful;
a step of controlling equipment in the facility when the authentication by the second authentication means is successful;
program to run the
施設のチェックイン場所に設置された第1認証装置と、
前記施設の前記チェックイン場所以外の場所に設置された第2認証装置と、
前記第1認証装置及び前記第2認証装置と通信可能な情報処理装置と、
を備え、
前記情報処理装置は、
前記第1認証装置が送信した、前記施設を利用する利用客の特徴を示す第1特徴データに基づいて第1認証手段により前記利用客を認証し、前記利用客を識別するための利用客識別情報に関連付けて認証結果を記憶部に記憶させる第1認証処理部と、
前記第1認証処理部が前記第1認証手段による認証に成功したことが前記利用客識別情報に関連付けて前記記憶部に記憶されている場合に、前記第2認証装置が送信した前記利用客の特徴を示す第2特徴データに基づいて、前記施設における前記チェックイン場所以外の一以上の場所にいる前記利用客を前記第1認証手段と異なる第2認証手段により認証し、前記利用客識別情報に関連付けて認証結果を前記記憶部に記憶させる第2認証処理部と、
前記第2認証処理部が前記第2認証手段による認証に成功したことが前記利用客識別情報に関連付けて前記記憶部に記憶されている場合に、前記施設内の設備を制御する設備制御部と、
を有する情報処理システム。
a first authentication device installed at a facility check-in location;
a second authentication device installed at a location other than the check-in location of the facility;
an information processing device capable of communicating with the first authentication device and the second authentication device;
with
The information processing device is
Customer identification for identifying the customer by authenticating the customer by a first authentication means based on the first feature data indicating the characteristics of the customer who uses the facility, transmitted by the first authentication device. a first authentication processing unit that stores an authentication result in a storage unit in association with information;
When the fact that the first authentication processing unit has successfully authenticated by the first authentication means is stored in the storage unit in association with the customer identification information, the identification information of the customer transmitted by the second authentication device Authenticating the customer who is at one or more locations other than the check-in location in the facility by a second authentication means different from the first authentication means based on second feature data indicating characteristics, and obtaining the customer identification information A second authentication processing unit that stores the authentication result in the storage unit in association with
a facility control section for controlling facilities in the facility when the fact that the second authentication processing section has successfully authenticated by the second authentication means is stored in the storage section in association with the user identification information; ,
An information processing system having
JP2021040775A 2021-03-12 2021-03-12 Information processing device, information processing method, program and information processing system Pending JP2022140114A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2021040775A JP2022140114A (en) 2021-03-12 2021-03-12 Information processing device, information processing method, program and information processing system

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2021040775A JP2022140114A (en) 2021-03-12 2021-03-12 Information processing device, information processing method, program and information processing system

Publications (1)

Publication Number Publication Date
JP2022140114A true JP2022140114A (en) 2022-09-26

Family

ID=83398946

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2021040775A Pending JP2022140114A (en) 2021-03-12 2021-03-12 Information processing device, information processing method, program and information processing system

Country Status (1)

Country Link
JP (1) JP2022140114A (en)

Similar Documents

Publication Publication Date Title
CN110443923B (en) Hotel safety management method based on artificial intelligence
US11170086B2 (en) Face image processing method and face image processing device that narrow a search range of face images utilizing a registration database
CN111401159A (en) Hotel authentication management method and system, hotel management system and user terminal
JP7223296B2 (en) Information processing device, information processing method and program
CN110002290B (en) Elevator access control method and device, storage medium and electronic equipment
JP7485158B2 (en) Facility management system, facility management method, and computer program
JP4910717B2 (en) Age confirmation device, age confirmation method, and age confirmation program
JP2024056872A (en) Stay management device, stay management method, and program
JP2023025299A (en) Facility management device, facility management method, and computer program
JP2020119066A (en) Information processing device, determination method, and program
JP2005132549A (en) Control device for elevator
CN109809262B (en) Elevator permission safety control system
JP2019144933A (en) Information processor
JP5405341B2 (en) Image monitoring apparatus and monitoring system
CN111383375B (en) Power control method and power control system for hotel rooms and hotel management system
JP2022140114A (en) Information processing device, information processing method, program and information processing system
WO2019009782A1 (en) Method for verifying an operator in a security system
US20040230811A1 (en) Authentication system and method allowing for selection of a location to perform various authentication operations
US20230095529A1 (en) Visit assistance apparatus, visit assistance method, and non-transitory computerreadable medium storing program
WO2023033057A1 (en) Gate system, security system, and sensor unit
JP7276527B1 (en) ELEVATOR SYSTEM, PORTABLE TERMINAL, PROGRAM, AND CONTROL METHOD FOR PORTABLE TERMINAL
JP5405340B2 (en) Image monitoring apparatus and monitoring system
US20240153326A1 (en) Entry control device, entry control system, entry control method, and non-transitory computer-readable medium
JP7507390B2 (en) Behavioral observation system and behavioral observation method
JP7127703B2 (en) Information processing device, information processing method and program

Legal Events

Date Code Title Description
RD02 Notification of acceptance of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7422

Effective date: 20231227

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20240214

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20240611

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20240612