JP6690074B1 - Face recognition method, face recognition system, program and recording medium - Google Patents
Face recognition method, face recognition system, program and recording medium Download PDFInfo
- Publication number
- JP6690074B1 JP6690074B1 JP2020039957A JP2020039957A JP6690074B1 JP 6690074 B1 JP6690074 B1 JP 6690074B1 JP 2020039957 A JP2020039957 A JP 2020039957A JP 2020039957 A JP2020039957 A JP 2020039957A JP 6690074 B1 JP6690074 B1 JP 6690074B1
- Authority
- JP
- Japan
- Prior art keywords
- visitor
- information
- face
- face authentication
- registration
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims abstract description 35
- 238000003384 imaging method Methods 0.000 claims abstract description 62
- 238000010586 diagram Methods 0.000 abstract description 3
- 230000006870 function Effects 0.000 description 6
- 239000000284 extract Substances 0.000 description 5
- 230000001815 facial effect Effects 0.000 description 4
- 125000002066 L-histidyl group Chemical group [H]N1C([H])=NC(C([H])([H])[C@](C(=O)[*])([H])N([H])[H])=C1[H] 0.000 description 3
- 230000005540 biological transmission Effects 0.000 description 2
Images
Landscapes
- Lock And Its Accessories (AREA)
Abstract
【課題】顔認証を活用して占有スペースに所有者がいなくても訪問者が占有スペースに入ることができるため利便性が高く、またセキュリティ性の高い顔認証方法、顔認証システム、プログラムおよび記録媒体を提供する。【解決手段】顔認証システム10により行われる顔認証方法は、占有スペースの入口に設置された施錠システム40の撮像装置42により撮像された訪問者の顔画像に関する情報を受け付けると、撮像装置42により撮像された訪問者の顔画像に関する情報と記録されている訪問者の顔画像に関する情報とを比較するとともに撮像装置42により訪問者の顔画像が撮像された日時と事前に登録されている訪問日時情報とを比較することにより訪問者の認証を行い、訪問者の認証が行われると、開錠指令を施錠システム40の施錠装置44に送信するとともに開錠完了通知を所有者のユーザ端末20に送信する。【選択図】図1A face authentication method, a face authentication system, a program, and a record which are highly convenient and highly secure because a visitor can enter the occupied space by utilizing the face authentication even if the owner does not exist in the occupied space. Provide media. SOLUTION: A face authentication method performed by a face authentication system 10 allows an image capturing device 42 to receive information about a face image of a visitor captured by an image capturing device 42 of a locking system 40 installed at an entrance of an occupied space. The information regarding the captured face image of the visitor is compared with the recorded information regarding the face image of the visitor, and the date and time when the image of the visitor was captured by the imaging device 42 and the visit date and time registered in advance. The visitor is authenticated by comparing the information with the information, and when the visitor is authenticated, the unlock command is transmitted to the locking device 44 of the locking system 40 and the unlock completion notification is sent to the owner's user terminal 20. Send. [Selection diagram] Figure 1
Description
本発明は、顔認証方法、顔認証システム、プログラムおよび記録媒体に関する。 The present invention relates to a face recognition method, a face recognition system, a program and a recording medium.
従来、顔データに基づいて認証を行う顔認証システムとして、入力された入力顔データと、予め登録された登録顔データとを照合して本人認証を行う顔認証システムが知られている(例えば、特許文献1、2参照)。 BACKGROUND ART Conventionally, as a face authentication system that performs authentication based on face data, a face authentication system that performs personal authentication by collating input input face data with registered face data that has been registered in advance is known (for example, See Patent Documents 1 and 2.
特許文献1に記載された顔認証システムでは、カメラにより撮像された撮像画像中の顔部分の画像を用いて対象人物を認証する。また、特許文献2に記載された顔認証システムでは、例えば登録される顔画像が4つの場合、2つを精度保証用の顔パターンとし、1つを外乱成分吸収用の顔パターンとし、1つを更新対象用の顔パターンとしている。そして、新たに顔パターンを登録するときには、事前に登録されている4つの顔パターンのうち、新たに登録される顔パターンとの類似度が2番目に低い更新対象用の顔パターンを削除する。すなわち、新たに登録される顔パターンとの類似度が一番低い外乱成分吸収用の顔パターンを残すことにより、環境のばらつきに順応して顔認証を行う。 In the face authentication system described in Patent Document 1, the target person is authenticated using the image of the face portion in the captured image captured by the camera. Further, in the face authentication system described in Patent Document 2, for example, when there are four face images to be registered, two face patterns are provided for accuracy assurance and one face pattern for absorbing disturbance components is provided. Is the face pattern for updating. Then, when newly registering a face pattern, the face pattern for update which has the second lowest similarity to the newly registered face pattern is deleted from the four face patterns registered in advance. That is, by leaving the face pattern for absorbing the disturbance component having the lowest degree of similarity with the newly registered face pattern, face authentication is performed in accordance with the variation in environment.
占有スペースを所有する所有者の関係者である訪問者が占有スペースを訪問する際に訪問者の顔認証を行うことにより占有スペースに所有者がいなくても訪問者が占有スペースに入ることができるようになると便利であるが、従来はこのようなシステムは存在しなかった。 When a visitor who is related to the owner who owns the occupied space visits the occupied space, the facial recognition of the visitor enables the visitor to enter the occupied space even if the occupied space has no owner. It would be convenient, but there was no such system in the past.
本発明は、このような点を考慮してなされたものであり、顔認証を活用して占有スペースに所有者がいなくても訪問者が占有スペースに入ることができるため利便性が高く、またセキュリティ性の高い顔認証方法、顔認証システム、プログラムおよび記録媒体を提供することを目的とする。 The present invention has been made in consideration of such a point, and it is highly convenient because a visitor can enter the occupied space by utilizing face recognition without the owner in the occupied space. An object of the present invention is to provide a face authentication method, a face authentication system, a program and a recording medium with high security.
本発明の顔認証方法は、
顔認証システムにより行われる顔認証方法であって、
訪問者が初めて所有者の占有スペースを訪問する前に訪問者情報を事前に登録する際に、所有者のユーザ端末から追加登録申請情報を前記顔認証システムが受け付けると登録必要情報を新たに割り振り、この割り振られた登録必要情報を前記顔認証システムが所有者のユーザ端末に送信する工程と、
訪問者の顔画像に関する情報を含む訪問者の登録情報を前記顔認証システムが受け付けると、受け付けた訪問者の登録情報を前記顔認証システムに記録するとともに、前記顔認証システムが登録完了情報を所有者のユーザ端末に送信する工程と、
前記顔認証システムが登録完了情報を所有者のユーザ端末に送信した後、訪問者が占有スペースを訪問する日時に関する訪問日時情報を受け付けると、受け付けた訪問日時情報を前記顔認証システムに記録する工程と、
占有スペースの入口に設置された施錠システムの撮像装置により撮像された訪問者の顔画像に関する情報を前記顔認証システムが受け付けると、前記顔認証システムが、前記撮像装置により撮像された訪問者の顔画像に関する情報と記録されている訪問者の顔画像に関する情報とを比較するとともに前記撮像装置により訪問者の顔画像が撮像された日時と事前に登録されている訪問日時情報とを比較することにより訪問者の認証を行う工程と、
前記顔認証システムにおいて訪問者の認証が行われると、前記顔認証システムが開錠指令を前記施錠システムの施錠装置に送信するとともに開錠完了通知を所有者のユーザ端末に送信する工程と、
を備えている。
The face recognition method of the present invention is
A face recognition method performed by a face recognition system,
When the visitor pre-registers the visitor information before visiting the owner's occupied space for the first time, if the face authentication system receives additional registration application information from the owner's user terminal, the necessary registration information is newly allocated. , The face authentication system transmitting the allocated registration required information to the owner's user terminal,
When the face authentication system receives the registration information of the visitor including the information about the face image of the visitor, the received registration information of the visitor is recorded in the face authentication system, and the face authentication system owns the registration completion information. Sending to the user's user terminal,
After the face authentication system transmits registration completion information to the owner's user terminal, and when the visitor receives visit date and time information regarding the date and time to visit the occupied space, recording the received visit date and time information in the face authentication system. When,
When the face authentication system receives information about the face image of the visitor imaged by the imaging device of the locking system installed at the entrance of the occupied space, the face authentication system causes the face of the visitor imaged by the imaging device. By comparing the information about the image and the recorded information about the face image of the visitor, and comparing the date and time when the face image of the visitor was captured by the imaging device with the visit date and time information registered in advance. The process of authenticating the visitor,
When the face authentication system authenticates the visitor, the face authentication system transmits an unlock command to the lock device of the lock system and a lock completion notification to the owner's user terminal,
Is equipped with.
本発明の顔認証システムは、
訪問者が初めて所有者の占有スペースを訪問する前に訪問者情報を事前に登録する際に、所有者のユーザ端末から追加登録申請情報を受け付ける追加登録申請情報受付手段と、
追加登録申請情報を前記追加登録申請情報受付手段が受け付けることにより新たに割り振られた登録必要情報を所有者のユーザ端末に送信する登録情報送信手段と、
訪問者の顔画像に関する情報を含む訪問者の登録情報を受け付ける訪問者登録情報受付手段と、
前記訪問者登録情報受付手段により受け付けた訪問者の登録情報を記録する顔認証クラウドと、
訪問者の登録情報が前記顔認証クラウドに記録されると、登録完了情報を所有者のユーザ端末に送信する登録完了情報送信手段と、
占有スペースの入口に設置された施錠システムの撮像装置により撮像された訪問者の顔画像に関する情報を受け付けると、前記撮像装置により撮像された訪問者の顔画像に関する情報と前記顔認証クラウドに記録されている訪問者の顔画像に関する情報とを比較するとともに前記撮像装置により訪問者の顔画像が撮像された日時と事前に登録されている訪問日時情報とを比較することにより訪問者の認証を行う認証手段と、
前記認証手段により訪問者の認証が行われると、開錠指令を前記施錠システムの施錠装置に送信する開錠指示送信手段と、
前記認証手段により訪問者の認証が行われると、開錠完了通知を所有者のユーザ端末に送信する開錠完了情報送信手段と、
を備えている。
The face recognition system of the present invention is
Additional registration application information receiving means for receiving additional registration application information from the user terminal of the owner when the visitor information is registered in advance before the visitor first visits the occupied space of the owner,
Registration information transmitting means for transmitting the newly allocated registration required information to the user terminal of the owner by receiving the additional registration application information by the additional registration application information receiving means,
A visitor registration information receiving means for receiving visitor registration information including information about the face image of the visitor,
A face authentication cloud that records the registration information of the visitor accepted by the visitor registration information acceptance means,
When the visitor's registration information is recorded in the face authentication cloud, registration completion information transmitting means for transmitting registration completion information to the owner's user terminal,
When information about the face image of the visitor imaged by the imaging device of the locking system installed at the entrance of the occupied space is received, the information about the face image of the visitor imaged by the imaging device and the face authentication cloud are recorded. The visitor's face image by the image pickup device and the visit date and time information registered in advance to authenticate the visitor. Authentication method,
When a visitor is authenticated by the authenticating means, an unlock instruction transmitting means for transmitting an unlock instruction to the locking device of the locking system,
When the visitor is authenticated by the authenticating means, an unlocking completion information transmitting means for transmitting an unlocking completion notice to the owner's user terminal,
Is equipped with.
本発明のプログラムは、
顔認証システムのプロセッサにより実行されるプログラムであって、
前記プロセッサが前記プログラムを実行することにより、
訪問者が初めて所有者の占有スペースを訪問する前に訪問者情報を事前に登録する際に、所有者のユーザ端末から追加登録申請情報を前記顔認証システムが受け付けると登録必要情報を新たに割り振り、この割り振られた登録必要情報を前記顔認証システムが所有者のユーザ端末に送信する工程と、
訪問者の顔画像に関する情報を含む訪問者の登録情報を前記顔認証システムが受け付けると、受け付けた訪問者の登録情報を前記顔認証システムに記録するとともに、前記顔認証システムが登録完了情報を所有者のユーザ端末に送信する工程と、
前記顔認証システムが登録完了情報を所有者のユーザ端末に送信した後、訪問者が占有スペースを訪問する日時に関する訪問日時情報を受け付けると、受け付けた訪問日時情報を前記顔認証システムに記録する工程と、
占有スペースの入口に設置された施錠システムの撮像装置により撮像された訪問者の顔画像に関する情報を前記顔認証システムが受け付けると、前記顔認証システムが、前記撮像装置により撮像された訪問者の顔画像に関する情報と記録されている訪問者の顔画像に関する情報とを比較するとともに前記撮像装置により訪問者の顔画像が撮像された日時と事前に登録されている訪問日時情報とを比較することにより訪問者の認証を行う工程と、
前記顔認証システムにおいて訪問者の認証が行われると、前記顔認証システムが開錠指令を前記施錠システムの施錠装置に送信するとともに開錠完了通知を所有者のユーザ端末に送信する工程と、
が行われる。
The program of the present invention is
A program executed by the processor of the face recognition system,
By the processor executing the program,
When the visitor pre-registers the visitor information before visiting the owner's occupied space for the first time, if the face authentication system receives additional registration application information from the owner's user terminal, the necessary registration information is newly allocated. , The face authentication system transmitting the allocated registration required information to the owner's user terminal,
When the face authentication system receives the registration information of the visitor including the information about the face image of the visitor, the received registration information of the visitor is recorded in the face authentication system, and the face authentication system owns the registration completion information. Sending to the user's user terminal,
After the face authentication system transmits registration completion information to the owner's user terminal, and when the visitor receives visit date and time information regarding the date and time to visit the occupied space, recording the received visit date and time information in the face authentication system. When,
When the face authentication system receives information about the face image of the visitor imaged by the imaging device of the locking system installed at the entrance of the occupied space, the face authentication system causes the face of the visitor imaged by the imaging device. By comparing the information about the image with the recorded information about the face image of the visitor, and comparing the date and time when the face image of the visitor was captured by the imaging device with the visit date and time information registered in advance. The process of authenticating the visitor,
When the face authentication system authenticates the visitor, the face authentication system transmits an unlock command to the lock device of the lock system and a lock completion notification to the owner's user terminal,
Is done.
本発明の記録媒体は、
顔認証システムのプロセッサにより実行されるプログラムが記録される記録媒体であって、
前記プロセッサが前記プログラムを実行することにより、
訪問者が初めて所有者の占有スペースを訪問する前に訪問者情報を事前に登録する際に、所有者のユーザ端末から追加登録申請情報を前記顔認証システムが受け付けると登録必要情報を新たに割り振り、この割り振られた登録必要情報を前記顔認証システムが所有者のユーザ端末に送信する工程と、
訪問者の顔画像に関する情報を含む訪問者の登録情報を前記顔認証システムが受け付けると、受け付けた訪問者の登録情報を前記顔認証システムに記録するとともに、前記顔認証システムが登録完了情報を所有者のユーザ端末に送信する工程と、
前記顔認証システムが登録完了情報を所有者のユーザ端末に送信した後、訪問者が占有スペースを訪問する日時に関する訪問日時情報を受け付けると、受け付けた訪問日時情報を前記顔認証システムに記録する工程と、
占有スペースの入口に設置された施錠システムの撮像装置により撮像された訪問者の顔画像に関する情報を前記顔認証システムが受け付けると、前記顔認証システムが、前記撮像装置により撮像された訪問者の顔画像に関する情報と記録されている訪問者の顔画像に関する情報とを比較するとともに前記撮像装置により訪問者の顔画像が撮像された日時と事前に登録されている訪問日時情報とを比較することにより訪問者の認証を行う工程と、
前記顔認証システムにおいて訪問者の認証が行われると、前記顔認証システムが開錠指令を前記施錠システムの施錠装置に送信するとともに開錠完了通知を所有者のユーザ端末に送信する工程と、
が行われる。
The recording medium of the present invention is
A recording medium on which a program executed by a processor of the face recognition system is recorded,
By the processor executing the program,
When the visitor pre-registers the visitor information before visiting the owner's occupied space for the first time, if the face authentication system receives additional registration application information from the owner's user terminal, the necessary registration information is newly allocated. , The face authentication system transmitting the allocated registration required information to the owner's user terminal,
When the face authentication system receives the registration information of the visitor including the information about the face image of the visitor, the received registration information of the visitor is recorded in the face authentication system, and the face authentication system owns the registration completion information. Sending to the user's user terminal,
After the face authentication system transmits registration completion information to the owner's user terminal, and when the visitor receives visit date and time information regarding the date and time to visit the occupied space, recording the received visit date and time information in the face authentication system. When,
When the face authentication system receives information about the face image of the visitor imaged by the imaging device of the locking system installed at the entrance of the occupied space, the face authentication system causes the face of the visitor imaged by the imaging device. By comparing the information about the image and the recorded information about the face image of the visitor, and comparing the date and time when the face image of the visitor was captured by the imaging device with the visit date and time information registered in advance. The process of authenticating the visitor,
When the face authentication system authenticates the visitor, the face authentication system transmits an unlock command to the lock device of the lock system and a lock completion notification to the owner's user terminal,
Is done.
本発明の顔認証方法、プログラム、記録媒体および顔認証システムによれば、顔認証を活用して占有スペースに所有者がいなくても訪問者が占有スペースに入ることができるため利便性を高めることができ、またセキュリティ性を高めることができる。 According to the face authentication method, the program, the recording medium, and the face authentication system of the present invention, it is possible to improve convenience because a visitor can enter the occupied space by utilizing the face authentication without the owner in the occupied space. It is also possible to improve security.
以下、図面を参照して本発明の実施の形態について説明する。図1乃至図4は、本実施の形態に係る顔認証システムおよびこのような顔認証システムを用いた顔認証方法を示す図である。 Hereinafter, embodiments of the present invention will be described with reference to the drawings. 1 to 4 are diagrams showing a face recognition system according to the present embodiment and a face recognition method using such a face recognition system.
本実施の形態による顔認証システム10および顔認証方法は、占有スペースを所有する所有者の関係者である訪問者が占有スペースを訪問する際に訪問者の顔認証を行うことにより占有スペースに所有者がいなくても訪問者が占有スペースに入ることができるようにするものである。なお、本発明では、占有スペースとは、マンションの一室や一戸建て住宅の内部空間のことをいう。また、占有スペースは、貸会議室やマンションの共有エリアであってもよい。また、所有者は、占有スペースを所有していたり占有スペースの管理権限を有したりすればよく、所有者は占有スペースに住む者に限定されることはない。例えば、旅行者が対価を占有スペースの所有者に支払うことによりこの所有者の占有スペースに旅行者を宿泊させる民泊にも本発明を適用することができる。すなわち、この場合は旅行者が訪問者となる。また、占有スペースがマンションの賃貸の部屋である場合には、所有者はこの部屋を借りている賃借人であってもよい。 The face recognition system 10 and the face recognition method according to the present embodiment are owned in the occupied space by performing face recognition of the visitor when the visitor who is a person concerned with the owner of the occupied space visits the occupied space. It allows visitors to enter the occupied space without a visitor. In the present invention, the occupied space refers to a room in a condominium or an internal space of a detached house. Further, the occupied space may be a shared area of a rental conference room or an apartment. Further, the owner may own the occupied space or have the management authority of the occupied space, and the owner is not limited to those who live in the occupied space. For example, the present invention can be applied to private lodging in which a traveler pays the price to the owner of the occupied space to allow the traveler to stay in the occupied space of the owner. That is, in this case, the traveler becomes the visitor. Further, when the occupied space is a rented room of an apartment, the owner may be a renter who rents this room.
図1に示すように、本実施の形態による顔認証システム10は、訪問者受付システム12および顔認証クラウド14を有している。また、占有スペースの入口には施錠システム40が設置されている。例えば、占有スペースが一戸建て住宅の内部空間である場合には、一戸建て住宅の外壁における入口扉の近傍に施錠システム40が設置されている。また、占有スペースがマンションの一室や共有エリアである場合には、マンションの外壁における各戸の入口扉の近傍またはマンション自体のオートロックシステムが導入されたエントランス、エレベータ等に施錠システム40が設置されている。また、1つのマンションで例えばエントランス、エレベータおよび各戸の入口扉のうち複数のものに施錠システム40が設置されるように、セキュリティ性をより向上させるために施錠システム40が何重にわたって設置されていてもよい。施錠システム40は、撮像装置42および施錠装置44を有している。撮像装置42および施錠装置44はLANケーブル等の配線により互いに接続されている。撮像装置42は、所有者の占有スペースに来訪した訪問者の顔画像を撮像することができるようになっている。また、撮像装置42はインターネット回線等のネットワークに通信可能に接続されている。また、施錠装置44は、一戸建て住宅やマンションの入口扉の施錠および開錠を行うことができるようになっている。また、施錠装置44がマンション自体のオートロックシステムが導入されたエントランスに設置されている場合には、このエントランスにある入口扉の施錠および開錠を行うことができるようになっている。また、施錠装置44がエレベータに設置されている場合には、施錠装置44が開錠を行うとエレベータが昇降したり所定の階に止まったりすることができるようになっていてもよい。訪問者受付システム12は、施錠システム40の撮像装置42により撮像された訪問者の顔画像を用いて認証を行うことにより、施錠装置44による入口扉の開錠を行うようになっている。また、顔認証クラウド14は、事前に登録された訪問者の顔画像の特徴量に係る情報を含む訪問者の登録情報を記憶するようになっている。顔認証システム10および施錠システム40はインターネット回線等のネットワークを介して通信可能に接続されている。また、訪問者が所持するスマートフォン等のユーザ端末30および所有者が所持するスマートフォン等のユーザ端末20はそれぞれインターネット回線等のネットワークを介して顔認証システム10に通信可能に接続されている。
As shown in FIG. 1, the face authentication system 10 according to the present embodiment has a
顔認証システム10の訪問者受付システム12は例えばコンピュータ等から構成されており、当該訪問者受付システム12はCPU等のプロセッサ12aと、プログラムを記憶するメモリ12b(記録媒体)とを有している。そして、プロセッサ12aは、メモリ12bに記憶されているプログラムを実行することにより、後述する様々な処理を行うようになっている。なお、プロセッサ12aにより実行されるプログラムはメモリ12bに記憶されているものに限定されることはない。外部装置から顔認証システム10に送信されたプログラムや、顔認証システム10に着脱自在に装着される記録媒体に記憶されているプログラムをプロセッサ12aが実行することにより、後述する様々な処理が行われてもよい。
The
次に、このような構成からなる顔認証システム10により訪問者の認証を行う際の処理内容について図2乃至図4を用いて説明する。 Next, the processing contents when the visitor is authenticated by the face authentication system 10 having such a configuration will be described with reference to FIGS. 2 to 4.
まず、本実施の形態による顔認証システム10において訪問者が初めて所有者の占有スペースを訪問する前に訪問者情報を事前に登録する際の処理内容について図2を用いて説明する。占有スペースの所有者は、事前にユーザ端末20に訪問者受付サービスのアプリケーションをインストールしておく。このようなアプリケーションにより所有者は訪問者の登録を行うことができる。具体的には、所有者と訪問者との間で電話やメール、チャットや会話アプリ等により訪問者が占有スペースを訪問する日時等が確定すると、所有者は自分のユーザ端末20において訪問者受付サービスのアプリケーションを実行し、「追加登録申請ボタン」を押下する。所有者によって「追加登録申請ボタン」が押下されると、追加登録申請情報がユーザ端末20から顔認証システム10の訪問者受付システム12に送信される(図2の(1))。
First, the processing content when the visitor information is registered in advance before the visitor first visits the occupied space of the owner in the face authentication system 10 according to the present embodiment will be described with reference to FIG. The owner of the occupied space installs the visitor reception service application in the
訪問者受付システム12のプロセッサ12aは、ユーザ端末20から追加登録申請情報を追加登録申請情報受付手段50により受け付ける。そして、訪問者受付システム12のプロセッサ12aは、追加登録申請情報を追加登録申請情報受付手段50により受け付けると登録必要情報を新たに割り振り、この割り振られた登録必要情報を登録必要情報送信手段52により所有者のユーザ端末20に自動送信する(図2の(2))。ここで、登録必要情報とは、例えば顔認証アプリのダウンロード用のURLのことをいう。所有者のユーザ端末20に送信された登録必要情報は、所有者のユーザ端末20において実行される訪問者受付サービスのアプリケーション等に表示される。
The
所有者は、ユーザ端末20において実行される訪問者受付サービスのアプリケーション等に表示される登録必要情報を訪問者のユーザ端末30に送信する(図2の(3))。具体的には、所有者は、訪問者受付サービスのアプリケーション等に表示される登録必要情報をコピーし、メール、チャットや会話アプリ等によりこのコピーした登録必要情報を訪問者のユーザ端末30に送信する。
The owner transmits the registration required information displayed on the application of the visitor reception service executed on the
訪問者は、所有者のユーザ端末20から送信された登録必要情報をユーザ端末30により受け付けると、ユーザ端末30において受け取った登録必要情報を用いて顔認証アプリをユーザ端末30にインストールする。例えば、登録必要情報が顔認証アプリのダウンロード用のURLである場合には、訪問者はユーザ端末20においてこのURLにアクセスすることにより顔認証アプリをダウンロードする。このような顔認証アプリをユーザ端末30にインストールすると、訪問者は顔認証アプリで登録情報を入力することができる。具体的には、顔認証アプリを用いることにより訪問者受付サービスを使用することを設定することができる。訪問者受付サービスの使用を設定する際に、訪問者はユーザ端末30により登録情報として自分の氏名、生年月日、性別、メールアドレス、電話番号、パスワード等を入力する。また、訪問者が訪問者受付サービスを使用することを設定する際に、訪問者受付サービスの利用規約に同意する旨の情報を入力する。なお、上述した訪問者受付サービスの使用の設定は、顔認証アプリで行うことができるようになっていてもよく、あるいは顔認証アプリとは別に行うことができるようになっていてもよい。また、訪問者は顔認証アプリにより自分の顔をユーザ端末30のカメラにより撮像する。このことにより、訪問者の顔画像データがユーザ端末30により得られる。
When the visitor receives the registration required information transmitted from the owner's
訪問者がユーザ端末30により訪問者受付サービスの登録を行うと、訪問者により入力された登録情報がユーザ端末30から顔認証システム10の顔認証クラウド14に送信される(図2の(4))。具体的には、訪問者により入力された氏名、生年月日、性別、メールアドレス、電話番号、パスワード、および訪問者の顔画像データ等に係る情報がユーザ端末30から顔認証システム10の顔認証クラウド14に送信される。顔認証クラウド14は、ユーザ端末30から送信された顔画像データに基づいて、所定のハッシュ関数によりハッシュ値を抽出する。このようなハッシュ値は訪問者の顔画像の特徴量として用いられる。また、顔認証クラウド14は、訪問者の識別情報(例えば、識別番号)の割り当てを行う。そして、訪問者の氏名、生年月日、性別、メールアドレス、電話番号、パスワード等の情報、および訪問者の顔画像の特徴量等に係る情報が、訪問者の識別情報に関連付けられて顔認証クラウド14に記録される。
When the visitor registers the visitor reception service with the
また、顔認証クラウド14により割り当てられた訪問者の識別情報および訪問者の氏名に係る情報等が訪問者受付システム12に送られる(図2の(5))。訪問者受付システム12のメモリ12bには、訪問者の氏名が訪問者の識別情報に関連付けられて記録手段56により記録される。その後、訪問者受付システム12から所有者のユーザ端末20には訪問者の氏名に係る情報を含む登録完了情報が登録完了情報送信手段58により送信される(図2の(6))。このことにより、所有者のユーザ端末20には訪問者の顔登録が完了した旨の情報がプッシュ通知される。
Further, the identification information of the visitor assigned by the
その後、所有者がユーザ端末20において訪問者受付サービスのアプリケーション等を実行し、登録完了情報送信手段58により送信された登録完了情報に含まれる訪問者の氏名をタップすると、訪問者が占有スペースを訪問する日時に係る情報をユーザ端末20により入力することができるようになる。そして、所有者がユーザ端末20により訪問者が占有スペースを訪問する日時に係る情報を入力すると、所有者のユーザ端末20から訪問者受付システム12に訪問者の氏名および訪問日時情報が送信される(図2の(7))。訪問者受付システム12のプロセッサ12aは、所有者のユーザ端末20から訪問者の氏名および訪問日時情報を訪問日時情報受付手段60により受け付ける。そして、プロセッサ12aは、訪問者の氏名および訪問日時情報を訪問者の識別情報に関連付けてメモリ12bに記録する。その後、プロセッサ12aは、登録完了通知情報を登録完了通知情報送信手段62により訪問者のユーザ端末30に送信する(図2の(8))。このことにより、訪問者のユーザ端末30には、登録完了メッセージおよび訪問日時情報がプッシュ通知される。
After that, when the owner executes the application of the visitor reception service in the
その後、訪問者がユーザ端末30において訪問者受付サービスのアプリを実行し、受け取り通知ボタンを押下すると、訪問者のユーザ端末30から訪問者受付システム12のプロセッサ12aに受け取り通知情報が送信される(図2の(9))。プロセッサ12aは、受け取り通知情報を受け付けると、訪問者が登録完了メッセージを受け取った旨を所有者のユーザ端末20にプッシュ通知する(図2の(10))。本実施の形態では、所有者は、顔認証システム10の訪問者受付システム12から訪問者の登録完了通知を受け取った後、この訪問者受付システム12から更に受け取り通知情報を受け付けることにより、セキュリティ性を向上させることができる。より詳細に説明すると、本発明に係る顔認証システム10は、所有者の不在時に訪問者が占有スペースに入ることができるようにするものであるため、厳重なセキュリティ性が求められる。すなわち、所有者が訪問者の登録を行う際に誤って別の訪問者を登録してしまうことにより、所有者が登録していない訪問者が占有スペースに入ってしまうことを防止する必要がある。この点について、本実施の形態では、所有者は、顔認証システム10の訪問者受付システム12から訪問者の登録完了通知を受け付けるだけではなく、この訪問者受付システム12から更に受け取り通知情報を受け付ける。このことにより、もし所有者が訪問者の登録を行う際に誤って別の訪問者を登録した場合は、この別の訪問者から身に覚えのない登録の通知があった旨の連絡があったり、別の訪問者に関する受け取り通知情報を受け取ったりすることにより、所有者は登録の誤りに気付くことができるようになる。また、所有者がユーザ端末20を用いて入力した訪問者情報が第三者にハッキングされた場合でも、所有者の不在時にこの第三者が占有スペースに入ってしまうことを防止することができる。
After that, when the visitor executes the visitor reception service application on the
次に、本実施の形態による顔認証システム10において訪問者が初めて占有スペースを訪問する際の処理内容について図3を用いて説明する。訪問者が占有スペースの入口に到達すると、訪問者はこの入口に設けられた施錠システム40の撮像装置42の画面で顔認証ボタンをタップする。そして、この撮像装置42に顔をかざすと、撮像装置42のカメラにより訪問者の顔が撮像される。なお、訪問者は撮像装置42を操作しなくても顔をかざすだけで撮像装置42のカメラにより訪問者の顔が撮像されるようになっていてもよい。撮像装置42は、カメラにより撮像された訪問者の顔画像データに基づいて、所定のハッシュ関数によりハッシュ値を抽出する。このようなハッシュ値は訪問者の顔画像の特徴量として用いられる。
Next, processing contents when a visitor first visits the occupied space in the face authentication system 10 according to the present embodiment will be described with reference to FIG. When the visitor reaches the entrance of the occupied space, the visitor taps the face authentication button on the screen of the
上述したように訪問者の顔が撮像装置42のカメラにより撮像されると、この訪問者の顔画像の特徴量に係る情報が撮像装置42から顔認証システム10の顔認証クラウド14に送信される(図3の(1))。また、訪問者の顔画像が撮像装置42により撮像された日時(以下、撮像日時ともいう)に関する情報も撮像装置42から顔認証システム10の顔認証クラウド14に送信される。
As described above, when the face of the visitor is imaged by the camera of the
顔認証システム10の顔認証クラウド14は、撮像装置42から訪問者の顔画像の特徴量に係る情報を受け付けると、撮像装置42から受け取った訪問者の顔画像の特徴量と、顔認証クラウド14に記録されている訪問者の顔画像の特徴量とを比較する。そして、撮像装置42から受け取った訪問者の顔画像の特徴量が、顔認証クラウド14に記録されている訪問者の顔画像の特徴量に略一致すれば、この訪問者の氏名、訪問者の識別情報および撮像日時に関する情報が顔認証クラウド14から訪問者受付システム12に送信される(図3の(2))。なお、撮像装置42から受け取った訪問者の顔画像の特徴量が、顔認証クラウド14に記録されている訪問者の顔画像の特徴量と略一致しない場合には、その後の処理は行われない。また、撮像装置42により訪問者の顔画像を一定回数撮像してもこの訪問者の顔画像の特徴量が顔認証クラウド14に記録されている訪問者の顔画像の特徴量と略一致しない場合には、所有者が契約する警備会社等に通知が行われてもよい。
When the
訪問者受付システム12のプロセッサ12aは、顔認証クラウド14から送られた訪問者の氏名、訪問者の識別情報および撮像日時と、メモリ12bに記録されている訪問者の氏名、訪問者の識別情報および事前に登録されている訪問日時情報とを比較する。そして、顔認証クラウド14から送られた訪問者の氏名、訪問者の識別情報および撮像日時が、メモリ12bに記録されている訪問者の氏名、訪問者の識別情報および訪問日時情報に略一致する場合には、訪問者受付システム12のプロセッサ12aは訪問者の認証を認証手段64により行う。
The
認証手段64により訪問者の認証が行われると、訪問者受付システム12のプロセッサ12aは開錠指示を開錠指示送信手段66により施錠システム40に送信する(図3の(3))。施錠システム40が顔認証システム10の訪問者受付システム12から開錠指示を受け付けると、施錠装置44は占有スペースの入口扉の開錠を行う。このことにより、占有スペースに所有者がいなくても訪問者は占有スペースに入ることができるようになる。また、認証手段64により訪問者の認証が行われると、訪問者受付システム12のプロセッサ12aは開錠完了情報を開錠完了情報送信手段68により所有者のユーザ端末20に送信する(図3の(4))。このことにより、所有者は占有スペースの入口扉の開錠が行われたことを知ることができる。なお、他の態様として、施錠装置44が占有スペースの入口扉の開錠を行った後、この施錠装置44から訪問者受付システム12のプロセッサ12aに開錠完了情報が送信されてもよい。この場合は、訪問者受付システム12のプロセッサ12aは、施錠装置44から開錠完了情報を受け取った後、開錠完了情報を開錠完了情報送信手段68により所有者のユーザ端末20に送信する。このようにして、顔認証システム10において訪問者が初めて占有スペースを訪問する際の処理が完了する。
When the
なお、訪問者の顔画像の特徴量が略一致するとは、例えば、施錠システム40の撮像装置42から受け取った訪問者の顔画像の特徴量と、顔認証クラウド14に記録されている訪問者の顔画像の特徴量との一致率が所定の閾値(例えば、80%)を超える場合のことをいう。また、撮像装置42による撮像日時が、事前に登録されている訪問日時情報と略一致するとは、撮像装置42により訪問者の顔画像が撮像された日時と、訪問者受付システム12のメモリ12bに記録されている、訪問者が占有スペースを訪問する日時との誤差が所定の時間(例えば3時間)以内であることをいう。
It should be noted that the fact that the feature amounts of the face image of the visitor substantially match, for example, the feature amount of the face image of the visitor received from the
次に、本実施の形態による顔認証システム10において訪問者が2回目以降に占有スペースを訪問する際の処理内容について図4を用いて説明する。 Next, the processing contents when the visitor visits the occupied space for the second time or later in the face authentication system 10 according to the present embodiment will be described with reference to FIG.
所有者と訪問者との間で電話やメール、チャットや会話アプリ等により訪問者が占有スペースを訪問する日時や人数等が確定すると、所有者は自分のユーザ端末20において訪問者受付サービスのアプリケーションを実行し、訪問者の氏名および訪問者が所有者の占有スペースを訪問する日時等の情報を入力する。
When the date and the number of visitors of the visitor to the occupied space are determined by telephone, email, chat, conversation application, etc. between the owner and the visitor, the owner uses the application for the visitor reception service in his / her
所有者によってユーザ端末20に訪問者の氏名および訪問者が所有者の占有スペースを訪問する日時等の情報が入力されると、この入力された訪問者の氏名および訪問日時情報はユーザ端末20から顔認証システム10の訪問者受付システム12に送信される(図4の(1))。訪問者受付システム12のプロセッサ12aは、ユーザ端末20から訪問者の氏名および訪問日時情報を訪問日時情報受付手段60により受け付ける。プロセッサ12aは、訪問者の氏名および訪問日時情報を訪問者の識別情報に関連付けてメモリ12bに記録する。そして、訪問者受付システム12のプロセッサ12aは、登録完了通知情報を登録完了通知情報送信手段62により訪問者のユーザ端末30に送信する(図4の(2))。このことにより、訪問者のユーザ端末30には、登録完了メッセージおよび訪問日時情報がプッシュ通知される。
When the owner inputs information such as the name of the visitor and the date and time when the visitor visits the occupied space of the owner to the
その後、訪問者がユーザ端末30において訪問者受付サービスのアプリを実行し、受け取り通知ボタンを押下すると、訪問者のユーザ端末30から訪問者受付システム12のプロセッサ12aに受け取り通知情報が送信される(図4の(3))。プロセッサ12aは、受け取り通知情報を受け付けると、訪問者が登録完了メッセージを受け取った旨を所有者のユーザ端末20にプッシュ通知する(図4の(4))。2回目以降に訪問者が所有者エリアを訪問する場合でも、所有者は、訪問者が受け取り通知ボタンを押下した場合に訪問者受付システム12から登録完了通知情報を受け取った旨の通知を受け付けることにより、セキュリティ性を向上させることができる。
After that, when the visitor executes the visitor reception service application on the
その後、訪問者が占有スペースの入口に到達すると、訪問者はこの入口に設けられた施錠システム40の撮像装置42の画面で顔認証ボタンをタップする。そして、この撮像装置42に顔をかざすと、撮像装置42のカメラにより訪問者の顔が撮像される。なお、訪問者は撮像装置42を操作しなくても顔をかざすだけで撮像装置42のカメラにより訪問者の顔が撮像されるようになっていてもよい。撮像装置42は、カメラにより撮像された訪問者の顔画像データに基づいて、所定のハッシュ関数によりハッシュ値を抽出する。このようなハッシュ値は訪問者の顔画像の特徴量として用いられる。
After that, when the visitor reaches the entrance of the occupied space, the visitor taps the face authentication button on the screen of the
上述したように訪問者の顔が撮像装置42のカメラにより撮像されると、この訪問者の顔画像の特徴量に係る情報が撮像装置42から顔認証システム10の顔認証クラウド14に送信される(図4の(5))。また、撮像日時に関する情報も撮像装置42から顔認証システム10の顔認証クラウド14に送信される。
As described above, when the face of the visitor is imaged by the camera of the
顔認証システム10の顔認証クラウド14は、撮像装置42から訪問者の顔画像の特徴量に係る情報を受け付けると、撮像装置42から受け取った訪問者の顔画像の特徴量と、顔認証クラウド14に記録されている訪問者の顔画像の特徴量とを比較する。そして、撮像装置42から受け取った訪問者の顔画像の特徴量が、顔認証クラウド14に記録されている訪問者の顔画像の特徴量に略一致すれば、この訪問者の氏名、訪問者の識別情報および撮像日時に関する情報が顔認証クラウド14から訪問者受付システム12に送信される(図4の(6))。なお、撮像装置42から受け取った訪問者の顔画像の特徴量が、顔認証クラウド14に記録されている訪問者の顔画像の特徴量と略一致しない場合には、その後の処理は行われない。
When the
訪問者受付システム12のプロセッサ12aは、顔認証クラウド14から送られた訪問者の氏名、訪問者の識別情報および撮像日時と、メモリ12bに記録されている訪問者の氏名、訪問者の識別情報および事前に登録されている訪問日時情報とを比較する。そして、顔認証クラウド14から送られた訪問者の氏名、訪問者の識別情報および撮像日時が、メモリ12bに記録されている訪問者の氏名、訪問者の識別情報および訪問日時情報に略一致する場合には、訪問者受付システム12のプロセッサ12aは訪問者の認証を認証手段64により行う。
The
認証手段64により訪問者の認証が行われると、訪問者受付システム12のプロセッサ12aは開錠指示を開錠指示送信手段66により施錠システム40に送信する(図4の(7))。施錠システム40が顔認証システム10の訪問者受付システム12から開錠指示を受け付けると、施錠装置44は占有スペースの入口扉の開錠を行う。このことにより、占有スペースに所有者がいなくても訪問者は占有スペースに入ることができるようになる。また、認証手段64により訪問者の認証が行われると、訪問者受付システム12のプロセッサ12aは開錠完了情報を開錠完了情報送信手段68により所有者のユーザ端末20に送信する(図4の(8))。このことにより、所有者は占有スペースの入口扉の開錠が行われたことを知ることができる。なお、他の態様として、施錠装置44が占有スペースの入口扉の開錠を行った後、この施錠装置44から訪問者受付システム12のプロセッサ12aに開錠完了情報が送信されてもよい。この場合は、訪問者受付システム12のプロセッサ12aは、施錠装置44から開錠完了情報を受け取った後、開錠完了情報を開錠完了情報送信手段68により所有者のユーザ端末20に送信する。このようにして、顔認証システム10において訪問者が2回目以降に占有スペースを訪問する際の処理が完了する。
When the
以上のような構成からなる、本実施の形態に係る、顔認証システム10により行われる顔認証方法によれば、訪問者が初めて所有者の占有スペースを訪問する前に訪問者情報を事前に登録する際に、所有者のユーザ端末20から追加登録申請情報を顔認証システム10が受け付けると登録必要情報を新たに割り振り、この割り振られた登録必要情報を顔認証システム10が所有者のユーザ端末20に送信する。また、訪問者の顔画像に関する情報を含む訪問者の登録情報を顔認証システム10が受け付けると、受け付けた訪問者の登録情報を顔認証システム10に記録するとともに、顔認証システム10が登録完了情報を所有者のユーザ端末20に送信する。また、顔認証システム10が登録完了情報を所有者のユーザ端末20に送信した後、訪問者が占有スペースを訪問する日時に関する訪問日時情報を受け付けると、受け付けた訪問日時情報を顔認証システム10に記録する。また、占有スペースの入口に設置された施錠システム40の撮像装置42により撮像された訪問者の顔画像に関する情報を顔認証システム10が受け付けると、顔認証システム10が、撮像装置42により撮像された訪問者の顔画像に関する情報と記録されている訪問者の顔画像に関する情報とを比較するとともに撮像装置42により訪問者の顔画像が撮像された日時と事前に登録されている訪問日時情報とを比較することにより訪問者の認証を行う。そして、顔認証システム10において訪問者の認証が行われると、顔認証システム10が開錠指令を施錠システム40の施錠装置44に送信するとともに開錠完了通知を所有者のユーザ端末20に送信する。このような顔認証方法によれば、顔認証を活用して訪問者が所有者の占有スペースに到達したときに占有スペースに所有者がいなくても施錠装置44により入口扉が開錠されるため訪問者が占有スペースに入ることができる。よって利便性を高めることができる。また、訪問者の認証が行われると開錠完了通知が所有者のユーザ端末20に送信されるため、訪問者が占有スペースに入ったことを所有者が知ることができる。よってセキュリティ性を高めることができる。更に、訪問者の顔画像に関する情報を含む訪問者の登録情報を顔認証システム10が受け付け、この受け付けた訪問者の登録情報が顔認証システム10に記録されると、登録完了情報が所有者のユーザ端末20に送信されるため、訪問者が情報の登録を行ったことを所有者が知ることができる。よってセキュリティ性をより一層高めることができる。
According to the face authentication method performed by the face authentication system 10 according to the present embodiment configured as described above, the visitor information is registered in advance before the visitor first visits the owner's occupied space. When the face authentication system 10 receives additional registration application information from the
また、本実施の形態に係る顔認証方法によれば、訪問者が初めて所有者の占有スペースを訪問する前に訪問者情報を事前に登録する際に、顔認証システム10が登録完了情報を所有者のユーザ端末20に送信した後、訪問日時情報を顔認証システム10が受け付けると、顔認証システム10が訪問者のユーザ端末30に登録完了通知情報を送信する。この場合には、訪問者のユーザ端末30に登録完了通知情報を送信することにより、訪問者は所有者の占有スペースへの訪問が予約されたことを確実に認識することができる。
Further, according to the face authentication method according to the present embodiment, when the visitor registers the visitor information in advance before visiting the owner's occupied space for the first time, the face authentication system 10 owns the registration completion information. When the face authentication system 10 receives the visit date / time information after transmitting it to the
また、本実施の形態に係る顔認証方法によれば、顔認証システム10により所有者のユーザ端末20に送信される登録必要情報は、顔認証アプリのダウンロードに必要な情報であり、顔認証アプリにより訪問者の顔画像に関する情報を含む訪問者の登録情報が顔認証システム10に送られる。この場合には、訪問者は所有者から教えてもらった顔認証アプリのダウンロードに必要な情報によって顔認証アプリをユーザ端末30にダウンロードすることにより、顔認証アプリを用いて訪問者の顔画像に関する情報を含む訪問者の登録情報を顔認証システム10に送信することができるようになる。
Further, according to the face authentication method according to the present embodiment, the registration required information transmitted to the owner's
また、本実施の形態に係る顔認証方法によれば、2回目以降に訪問者が所有者の占有スペースを訪問する際に、少なくとも訪問者の氏名および訪問日時情報を顔認証システム10が受け付けると、顔認証システム10が訪問者のユーザ端末30に登録完了通知情報を送信する。この場合には、2回目以降に訪問者が所有者の占有スペースを訪問する際には所有者はシンプルな方法で訪問者の占有スペースへの訪問を予約することができる。
Further, according to the face authentication method according to the present embodiment, when the visitor visits the owner's occupied space for the second time and thereafter, the face authentication system 10 receives at least the visitor's name and visit date / time information. The face authentication system 10 transmits the registration completion notification information to the
また、本実施の形態に係る顔認証システム10は、訪問者が初めて所有者の占有スペースを訪問する前に訪問者情報を事前に登録する際に、所有者のユーザ端末20から追加登録申請情報を受け付ける追加登録申請情報受付手段50と、追加登録申請情報を顔認証システム10が受け付けることにより新たに割り振られた登録必要情報を所有者のユーザ端末20に送信する登録必要情報送信手段52と、訪問者の顔画像に関する情報を含む訪問者の登録情報を受け付ける訪問者登録情報受付手段54と、訪問者登録情報受付手段54により受け付けた訪問者の登録情報を記録する顔認証クラウド14と、訪問者の登録情報が顔認証クラウド14に記録されると、登録完了情報を所有者のユーザ端末20に送信する登録完了情報送信手段58と、占有スペースの入口に設置された施錠システム40の撮像装置42により撮像された訪問者の顔画像に関する情報を受け付けると、撮像装置42により撮像された訪問者の顔画像に関する情報と顔認証クラウド14に記録されている訪問者の顔画像に関する情報とを比較するとともに撮像装置42により訪問者の顔画像が撮像された日時と事前に登録されている訪問日時情報とを比較することにより訪問者の認証を行う認証手段64と、認証手段64により訪問者の認証が行われると、開錠指令を施錠システム40の施錠装置44に送信する開錠指示送信手段66と、認証手段64により訪問者の認証が行われると、開錠完了通知を所有者のユーザ端末20に送信する開錠完了情報送信手段68とを備えている。このような顔認証システム10によれば、顔認証を活用して訪問者が所有者の占有スペースに到達したときに占有スペースに所有者がいなくても施錠装置44により入口扉が開錠されるため訪問者が占有スペースに入ることができる。よって利便性を高めることができる。また、訪問者の認証が行われると開錠完了通知が所有者のユーザ端末20に送信されるため、訪問者が占有スペースに入ったことを所有者が知ることができる。よってセキュリティ性を高めることができる。更に、訪問者の顔画像に関する情報を含む訪問者の登録情報を顔認証システム10が受け付け、この受け付けた訪問者の登録情報が顔認証システム10に記録されると、登録完了情報が所有者のユーザ端末20に送信されるため、訪問者が情報の登録を行ったことを所有者が知ることができる。よってセキュリティ性をより一層高めることができる。
Further, the face authentication system 10 according to the present embodiment, when the visitor information is registered in advance before the visitor first visits the occupied space of the owner, additional registration application information from the owner's
また、本実施の形態では、プロセッサ12aにより実行される、顔認証システム10により顔認証方法を行うためのプログラムおよびこのプログラムが記録された記録媒体が用いられる。ここで、プロセッサ12aがプログラムを実行することにより、訪問者が初めて所有者の占有スペースを訪問する前に訪問者情報を事前に登録する際に、所有者のユーザ端末20から追加登録申請情報を顔認証システム10が受け付けると登録必要情報を新たに割り振り、この割り振られた登録必要情報を顔認証システム10が所有者のユーザ端末20に送信する。また、訪問者の顔画像に関する情報を含む訪問者の登録情報を顔認証システム10が受け付けると、受け付けた訪問者の登録情報を顔認証システム10に記録するとともに、顔認証システム10が登録完了情報を所有者のユーザ端末20に送信する。また、顔認証システム10が登録完了情報を所有者のユーザ端末20に送信した後、訪問者が占有スペースを訪問する日時に関する訪問日時情報を受け付けると、受け付けた訪問日時情報を顔認証システム10に記録する。また、占有スペースの入口に設置された施錠システム40の撮像装置42により撮像された訪問者の顔画像に関する情報を顔認証システム10が受け付けると、顔認証システム10が、撮像装置42により撮像された訪問者の顔画像に関する情報と記録されている訪問者の顔画像に関する情報とを比較するとともに撮像装置42により訪問者の顔画像が撮像された日時と事前に登録されている訪問日時情報とを比較することにより訪問者の認証を行う。そして、顔認証システム10において訪問者の認証が行われると、顔認証システム10が開錠指令を施錠システム40の施錠装置44に送信するとともに開錠完了通知を所有者のユーザ端末20に送信する。このようなプログラムおよび記録媒体によれば、顔認証を活用して訪問者が所有者の占有スペースに到達したときに占有スペースに所有者がいなくても施錠装置44により入口扉が開錠されるため訪問者が占有スペースに入ることができる。よって利便性を高めることができる。また、訪問者の認証が行われると開錠完了通知が所有者のユーザ端末20に送信されるため、訪問者が占有スペースに入ったことを所有者が知ることができる。よってセキュリティ性を高めることができる。更に、訪問者の顔画像に関する情報を含む訪問者の登録情報を顔認証システム10が受け付け、この受け付けた訪問者の登録情報が顔認証システム10に記録されると、登録完了情報が所有者のユーザ端末20に送信されるため、訪問者が情報の登録を行ったことを所有者が知ることができる。よってセキュリティ性をより一層高めることができる。
Further, in the present embodiment, a program executed by the
なお、本発明による顔認証方法や顔認証システムは、上述したような態様に限定されることはなく、様々な変更を加えることができる。 The face authentication method and the face authentication system according to the present invention are not limited to the above-described modes, and various changes can be added.
例えば、上記の説明では、施錠システム40の撮像装置42は、カメラにより撮像された訪問者の顔画像データに基づいて、所定のハッシュ関数によりハッシュ値を抽出し、このようなハッシュ値を訪問者の顔画像の特徴量として用いている。そして、訪問者の顔画像の特徴量が撮像装置42から顔認証システム10の顔認証クラウド14に送信されるようになっている。しかしながら、他の態様では、撮像装置42により撮像された訪問者の顔画像データがそのまま撮像装置42から顔認証システム10の顔認証クラウド14に送信されてもよい。この場合は、顔認証クラウド14は、撮像装置42から送信された訪問者の顔画像データに基づいて、所定のハッシュ関数によりハッシュ値を抽出し、このようなハッシュ値を訪問者の顔画像の特徴量として用いる。
For example, in the above description, the
また、別の態様として、訪問者のユーザ端末30において用いられる顔認証アプリは、ユーザ端末30のカメラにより撮像された訪問者の顔画像データそのものを顔認証システム10の顔認証クラウド14に送信にする代わりに、ユーザ端末30のカメラにより撮像された訪問者の顔画像データに基づいて、所定のハッシュ関数によりハッシュ値を特徴量として抽出し、抽出された訪問者の顔画像の特徴量を顔認証システム10の顔認証クラウド14に送信してもよい。この場合は、顔認証クラウド14は、ユーザ端末30から訪問者の顔画像の特徴量を含む登録情報を受け付けると、訪問者の識別情報(例えば、識別番号)の割り当てを行う。そして、訪問者の氏名、生年月日、性別、メールアドレス、電話番号、パスワード等の情報、および訪問者の顔画像の特徴量に係る情報が、訪問者の識別情報に関連付けられて顔認証クラウド14に記録される。
As another aspect, the face authentication application used in the visitor's
また、更に別の態様として、施錠システム40の撮像装置42により撮像された訪問者の顔画像データがそのまま撮像装置42から顔認証クラウド14に送信される場合に、顔認証クラウド14は、撮像装置42から送信された訪問者の顔画像データと、顔認証クラウド14に記録されている訪問者の顔画像データとを比較してもよい。この場合には、顔認証クラウド14は、撮像装置42から受け取った訪問者の顔画像データが、顔認証クラウド14に記録されている訪問者の顔画像データに略一致すれば、この訪問者の氏名、訪問者の識別情報および撮像日時に関する情報が顔認証クラウド14から訪問者受付システム12に送信される。
Further, as still another aspect, when the face image data of the visitor imaged by the
10 顔認証システム
12 訪問者受付システム
12a プロセッサ
12b メモリ
14 顔認証クラウド
20 占有スペースの所有者のユーザ端末
30 訪問者のユーザ端末
40 施錠システム
42 撮像装置
44 施錠装置
50 追加登録申請情報受付手段
52 登録必要情報送信手段
54 訪問者登録情報受付手段
56 記録手段
58 登録完了情報送信手段
60 訪問日時情報受付手段
62 登録完了通知情報送信手段
64 認証手段
66 開錠指示送信手段
68 開錠完了情報送信手段
10
Claims (9)
訪問者が初めて所有者の占有スペースを訪問する前に訪問者情報を事前に登録する際に、所有者のユーザ端末から追加登録申請情報を前記顔認証システムが受け付けると登録必要情報を新たに割り振り、この割り振られた登録必要情報を前記顔認証システムが所有者のユーザ端末に送信する工程と、
訪問者の顔画像に関する情報を含む訪問者の登録情報を前記顔認証システムが受け付けると、受け付けた訪問者の登録情報を前記顔認証システムに記録するとともに、前記顔認証システムが登録完了情報を所有者のユーザ端末に送信する工程と、
前記顔認証システムが登録完了情報を所有者のユーザ端末に送信した後、訪問者が占有スペースを訪問する日時に関する訪問日時情報を受け付けると、受け付けた訪問日時情報を前記顔認証システムに記録する工程と、
占有スペースの入口に設置された施錠システムの撮像装置により撮像された訪問者の顔画像に関する情報を前記顔認証システムが受け付けると、前記顔認証システムが、前記撮像装置により撮像された訪問者の顔画像に関する情報と記録されている訪問者の顔画像に関する情報とを比較するとともに前記撮像装置により訪問者の顔画像が撮像された日時と事前に登録されている訪問日時情報とを比較することにより訪問者の認証を行う工程と、
前記顔認証システムにおいて訪問者の認証が行われると、前記顔認証システムが開錠指令を前記施錠システムの施錠装置に送信するとともに開錠完了通知を所有者のユーザ端末に送信する工程と、
を備えた、顔認証方法。 A face recognition method performed by a face recognition system,
When the visitor pre-registers the visitor information before visiting the owner's occupied space for the first time, if the face authentication system receives additional registration application information from the owner's user terminal, the necessary registration information is newly allocated. , The face authentication system transmitting the allocated registration required information to the owner's user terminal,
When the face authentication system receives the registration information of the visitor including the information about the face image of the visitor, the received registration information of the visitor is recorded in the face authentication system, and the face authentication system owns the registration completion information. Sending to the user's user terminal,
After the face authentication system transmits registration completion information to the owner's user terminal, and when the visitor receives visit date and time information regarding the date and time to visit the occupied space, recording the received visit date and time information in the face authentication system. When,
When the face authentication system receives information about the face image of the visitor imaged by the imaging device of the locking system installed at the entrance of the occupied space, the face authentication system causes the face of the visitor imaged by the imaging device. By comparing the information about the image and the recorded information about the face image of the visitor, and comparing the date and time when the face image of the visitor was captured by the imaging device with the visit date and time information registered in advance. The process of authenticating the visitor,
When the face authentication system authenticates the visitor, the face authentication system transmits an unlock command to the lock device of the lock system and a lock completion notification to the owner's user terminal,
Face recognition method with.
追加登録申請情報を前記追加登録申請情報受付手段が受け付けることにより新たに割り振られた登録必要情報を所有者のユーザ端末に送信する登録情報送信手段と、
訪問者の顔画像に関する情報を含む訪問者の登録情報を受け付ける訪問者登録情報受付手段と、
前記訪問者登録情報受付手段により受け付けた訪問者の登録情報を記録する顔認証クラウドと、
訪問者の登録情報が前記顔認証クラウドに記録されると、登録完了情報を所有者のユーザ端末に送信する登録完了情報送信手段と、
占有スペースの入口に設置された施錠システムの撮像装置により撮像された訪問者の顔画像に関する情報を受け付けると、前記撮像装置により撮像された訪問者の顔画像に関する情報と前記顔認証クラウドに記録されている訪問者の顔画像に関する情報とを比較するとともに前記撮像装置により訪問者の顔画像が撮像された日時と事前に登録されている訪問日時情報とを比較することにより訪問者の認証を行う認証手段と、
前記認証手段により訪問者の認証が行われると、開錠指令を前記施錠システムの施錠装置に送信する開錠指示送信手段と、
前記認証手段により訪問者の認証が行われると、開錠完了通知を所有者のユーザ端末に送信する開錠完了情報送信手段と、
を備えた、顔認証システム。 Additional registration application information receiving means for receiving additional registration application information from the user terminal of the owner when the visitor information is registered in advance before the visitor first visits the occupied space of the owner,
Registration information transmitting means for transmitting the newly allocated registration required information to the user terminal of the owner by receiving the additional registration application information by the additional registration application information receiving means,
A visitor registration information receiving means for receiving visitor registration information including information about the face image of the visitor,
A face authentication cloud that records the registration information of the visitor accepted by the visitor registration information acceptance means,
When the visitor's registration information is recorded in the face authentication cloud, registration completion information transmitting means for transmitting registration completion information to the owner's user terminal,
When information about the face image of the visitor imaged by the imaging device of the locking system installed at the entrance of the occupied space is received, the information about the face image of the visitor imaged by the imaging device and the face authentication cloud are recorded. The visitor's face image by the image pickup device and the visit date and time information registered in advance to authenticate the visitor. Authentication method,
When a visitor is authenticated by the authenticating means, an unlock instruction transmitting means for transmitting an unlock instruction to the locking device of the locking system,
When the visitor is authenticated by the authenticating means, an unlocking completion information transmitting means for transmitting an unlocking completion notice to the owner's user terminal,
Face recognition system with.
前記訪問日時情報受付手段により訪問日時情報を受け付けると、訪問者のユーザ端末に登録完了通知情報を送信する登録完了通知情報送信手段と、
を更に備えた、請求項5記載の顔認証システム。 When the visitor information is registered in advance before the visitor first visits the occupied space of the owner, after the registration completion information transmitting means transmits the registration completion information to the owner's user terminal, the visit date and time information is displayed. Visit date and time information acceptance means to be accepted,
Registration completion notification information transmitting means for transmitting registration completion notification information to a visitor's user terminal when the visit date information is received by the visit date information receiving means,
The face authentication system according to claim 5, further comprising:
前記プロセッサが前記プログラムを実行することにより、
訪問者が初めて所有者の占有スペースを訪問する前に訪問者情報を事前に登録する際に、所有者のユーザ端末から追加登録申請情報を前記顔認証システムが受け付けると登録必要情報を新たに割り振り、この割り振られた登録必要情報を前記顔認証システムが所有者のユーザ端末に送信する工程と、
訪問者の顔画像に関する情報を含む訪問者の登録情報を前記顔認証システムが受け付けると、受け付けた訪問者の登録情報を前記顔認証システムに記録するとともに、前記顔認証システムが登録完了情報を所有者のユーザ端末に送信する工程と、
前記顔認証システムが登録完了情報を所有者のユーザ端末に送信した後、訪問者が占有スペースを訪問する日時に関する訪問日時情報を受け付けると、受け付けた訪問日時情報を前記顔認証システムに記録する工程と、
占有スペースの入口に設置された施錠システムの撮像装置により撮像された訪問者の顔画像に関する情報を前記顔認証システムが受け付けると、前記顔認証システムが、前記撮像装置により撮像された訪問者の顔画像に関する情報と記録されている訪問者の顔画像に関する情報とを比較するとともに前記撮像装置により訪問者の顔画像が撮像された日時と事前に登録されている訪問日時情報とを比較することにより訪問者の認証を行う工程と、
前記顔認証システムにおいて訪問者の認証が行われると、前記顔認証システムが開錠指令を前記施錠システムの施錠装置に送信するとともに開錠完了通知を所有者のユーザ端末に送信する工程と、
が行われる、プログラム。 A program executed by the processor of the face recognition system,
By the processor executing the program,
When the visitor pre-registers the visitor information before visiting the owner's occupied space for the first time, if the face authentication system receives additional registration application information from the owner's user terminal, the necessary registration information is newly allocated. , The face authentication system transmitting the allocated registration required information to the owner's user terminal,
When the face authentication system receives the registration information of the visitor including the information about the face image of the visitor, the received registration information of the visitor is recorded in the face authentication system, and the face authentication system owns the registration completion information. Sending to the user's user terminal,
After the face authentication system transmits registration completion information to the owner's user terminal, and when the visitor receives visit date and time information regarding the date and time to visit the occupied space, recording the received visit date and time information in the face authentication system. When,
When the face authentication system receives information about the face image of the visitor imaged by the imaging device of the locking system installed at the entrance of the occupied space, the face authentication system causes the face of the visitor imaged by the imaging device. By comparing the information about the image and the recorded information about the face image of the visitor, and comparing the date and time when the face image of the visitor was captured by the imaging device with the visit date and time information registered in advance. The process of authenticating the visitor,
When the face authentication system authenticates the visitor, the face authentication system transmits an unlock command to the lock device of the lock system and a lock completion notification to the owner's user terminal,
The program that is performed.
前記プロセッサが前記プログラムを実行することにより、
訪問者が初めて所有者の占有スペースを訪問する前に訪問者情報を事前に登録する際に、所有者のユーザ端末から追加登録申請情報を前記顔認証システムが受け付けると登録必要情報を新たに割り振り、この割り振られた登録必要情報を前記顔認証システムが所有者のユーザ端末に送信する工程と、
訪問者の顔画像に関する情報を含む訪問者の登録情報を前記顔認証システムが受け付けると、受け付けた訪問者の登録情報を前記顔認証システムに記録するとともに、前記顔認証システムが登録完了情報を所有者のユーザ端末に送信する工程と、
前記顔認証システムが登録完了情報を所有者のユーザ端末に送信した後、訪問者が占有スペースを訪問する日時に関する訪問日時情報を受け付けると、受け付けた訪問日時情報を前記顔認証システムに記録する工程と、
占有スペースの入口に設置された施錠システムの撮像装置により撮像された訪問者の顔画像に関する情報を前記顔認証システムが受け付けると、前記顔認証システムが、前記撮像装置により撮像された訪問者の顔画像に関する情報と記録されている訪問者の顔画像に関する情報とを比較するとともに前記撮像装置により訪問者の顔画像が撮像された日時と事前に登録されている訪問日時情報とを比較することにより訪問者の認証を行う工程と、
前記顔認証システムにおいて訪問者の認証が行われると、前記顔認証システムが開錠指令を前記施錠システムの施錠装置に送信するとともに開錠完了通知を所有者のユーザ端末に送信する工程と、
が行われる、記録媒体。 A recording medium on which a program executed by a processor of the face recognition system is recorded,
By the processor executing the program,
When the visitor pre-registers the visitor information before visiting the owner's occupied space for the first time, if the face authentication system receives additional registration application information from the owner's user terminal, the necessary registration information is newly allocated. , The face authentication system transmitting the allocated registration required information to the owner's user terminal,
When the face authentication system receives the registration information of the visitor including the information about the face image of the visitor, the received registration information of the visitor is recorded in the face authentication system, and the face authentication system owns the registration completion information. Sending to the user's user terminal,
After the face authentication system transmits registration completion information to the owner's user terminal, and when the visitor receives visit date and time information regarding the date and time to visit the occupied space, recording the accepted visit date and time information in the face authentication system. When,
When the face authentication system receives information about the face image of the visitor imaged by the imaging device of the locking system installed at the entrance of the occupied space, the face authentication system causes the face of the visitor imaged by the imaging device. By comparing the information about the image and the recorded information about the face image of the visitor, and comparing the date and time when the face image of the visitor was captured by the imaging device with the visit date and time information registered in advance. The process of authenticating the visitor,
When the face authentication system authenticates the visitor, the face authentication system transmits an unlock command to the lock device of the lock system and a lock completion notification to the owner's user terminal,
The recording medium on which is performed.
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2020039957A JP6690074B1 (en) | 2020-03-09 | 2020-03-09 | Face recognition method, face recognition system, program and recording medium |
JP2020070026A JP6799223B1 (en) | 2020-03-09 | 2020-04-08 | Face recognition methods, face recognition systems, programs and recording media |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2020039957A JP6690074B1 (en) | 2020-03-09 | 2020-03-09 | Face recognition method, face recognition system, program and recording medium |
Related Child Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2020070026A Division JP6799223B1 (en) | 2020-03-09 | 2020-04-08 | Face recognition methods, face recognition systems, programs and recording media |
Publications (2)
Publication Number | Publication Date |
---|---|
JP6690074B1 true JP6690074B1 (en) | 2020-04-28 |
JP2021140656A JP2021140656A (en) | 2021-09-16 |
Family
ID=70413786
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2020039957A Active JP6690074B1 (en) | 2020-03-09 | 2020-03-09 | Face recognition method, face recognition system, program and recording medium |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP6690074B1 (en) |
Cited By (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP6896131B1 (en) * | 2020-08-20 | 2021-06-30 | Dxyz株式会社 | Face recognition methods, face recognition systems, programs and recording media |
JP2022035373A (en) * | 2020-08-20 | 2022-03-04 | Dxyz株式会社 | Management server, delivery management method, program, and recording medium |
JP7038877B1 (en) | 2021-06-29 | 2022-03-18 | プロパティエージェント株式会社 | Face recognition system and program |
JPWO2022059140A1 (en) * | 2020-09-17 | 2022-03-24 | ||
JP7055924B1 (en) | 2021-06-29 | 2022-04-18 | プロパティエージェント株式会社 | Face recognition system and program |
JP2023004868A (en) * | 2021-06-29 | 2023-01-17 | プロパティエージェント株式会社 | Face authentication system and program |
JP7510366B2 (en) | 2021-01-22 | 2024-07-03 | Dxyz株式会社 | Management server, delivery management method, program and recording medium |
Family Cites Families (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2008123277A (en) * | 2006-11-13 | 2008-05-29 | Nippon Steel Corp | Access management device, method and program |
JP7056194B2 (en) * | 2018-02-06 | 2022-04-19 | 日本電気株式会社 | Information processing equipment |
JP2019138145A (en) * | 2019-05-07 | 2019-08-22 | キヤノンマーケティングジャパン株式会社 | Information processor, control method for information processor, and program |
-
2020
- 2020-03-09 JP JP2020039957A patent/JP6690074B1/en active Active
Cited By (16)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP6896131B1 (en) * | 2020-08-20 | 2021-06-30 | Dxyz株式会社 | Face recognition methods, face recognition systems, programs and recording media |
JP2022035373A (en) * | 2020-08-20 | 2022-03-04 | Dxyz株式会社 | Management server, delivery management method, program, and recording medium |
JP2022035374A (en) * | 2020-08-20 | 2022-03-04 | Dxyz株式会社 | Face authentication method, face authentication system, program, and recording medium |
JP7204014B2 (en) | 2020-09-17 | 2023-01-13 | 楽天グループ株式会社 | Authentication system, authentication method, and program |
JPWO2022059140A1 (en) * | 2020-09-17 | 2022-03-24 | ||
WO2022059140A1 (en) * | 2020-09-17 | 2022-03-24 | 楽天グループ株式会社 | Authentication system, authentication method, and program |
US20220309140A1 (en) * | 2020-09-17 | 2022-09-29 | Rakuten Group, Inc. | Authentication system, authentication method and program |
TWI795822B (en) * | 2020-09-17 | 2023-03-11 | 日商樂天集團股份有限公司 | Authentication system, authentication method, and program product |
US11971969B2 (en) * | 2020-09-17 | 2024-04-30 | Rakuten Group, Inc. | Authentication system, authentication method and program |
JP7510366B2 (en) | 2021-01-22 | 2024-07-03 | Dxyz株式会社 | Management server, delivery management method, program and recording medium |
JP7055924B1 (en) | 2021-06-29 | 2022-04-18 | プロパティエージェント株式会社 | Face recognition system and program |
JP7038877B1 (en) | 2021-06-29 | 2022-03-18 | プロパティエージェント株式会社 | Face recognition system and program |
JP2023004868A (en) * | 2021-06-29 | 2023-01-17 | プロパティエージェント株式会社 | Face authentication system and program |
JP2023005617A (en) * | 2021-06-29 | 2023-01-18 | プロパティエージェント株式会社 | Face authentication system and program |
JP2023005614A (en) * | 2021-06-29 | 2023-01-18 | プロパティエージェント株式会社 | Face authentication system and program |
JP7245377B2 (en) | 2021-06-29 | 2023-03-23 | プロパティエージェント株式会社 | facial recognition systems and programs |
Also Published As
Publication number | Publication date |
---|---|
JP2021140656A (en) | 2021-09-16 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6690074B1 (en) | Face recognition method, face recognition system, program and recording medium | |
JP6277494B2 (en) | Application control system and application control method | |
JP2020042440A (en) | Entry/exit control system | |
JP2020042374A (en) | Room entry/exit management system | |
JP6799223B1 (en) | Face recognition methods, face recognition systems, programs and recording media | |
WO2016208143A1 (en) | Image capture system and application control method | |
US20010016824A1 (en) | Small sized information device, system and method for management of lending of small sized information devices, and computer product | |
JP2021140795A (en) | Face authentication method, face authentication system, program and recording medium | |
JP7403093B2 (en) | Authentication system and intercom system | |
JP6918503B2 (en) | System and method | |
JP6858914B1 (en) | Information processing methods, information processing systems, programs and recording media | |
JP5992896B2 (en) | Information providing device, information providing method, terminal device, and information providing program | |
JP7055924B1 (en) | Face recognition system and program | |
JP2007332650A (en) | Security object control server | |
JP7450569B2 (en) | Visitor management system and visitor management method | |
JP6485697B2 (en) | Imaging system and application control method | |
US8442277B1 (en) | Identity authentication system for controlling egress of an individual visiting a facility | |
JP4977545B2 (en) | Equipment management system | |
JP2022022275A (en) | Authentification system and information processing method | |
JP2006163715A (en) | User authentication system | |
JP7038877B1 (en) | Face recognition system and program | |
JP6896131B1 (en) | Face recognition methods, face recognition systems, programs and recording media | |
JP7240360B2 (en) | Information processing system, information processing method, and visitor management server | |
TWI740475B (en) | Guest authentication method and guest authentication device | |
JP7382764B2 (en) | Image distribution system, image distribution method, building, and photography system |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20200309 |
|
A871 | Explanation of circumstances concerning accelerated examination |
Free format text: JAPANESE INTERMEDIATE CODE: A871 Effective date: 20200309 |
|
A975 | Report on accelerated examination |
Free format text: JAPANESE INTERMEDIATE CODE: A971005 Effective date: 20200325 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20200330 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20200408 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6690074 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
S111 | Request for change of ownership or part of ownership |
Free format text: JAPANESE INTERMEDIATE CODE: R313113 |
|
R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
S111 | Request for change of ownership or part of ownership |
Free format text: JAPANESE INTERMEDIATE CODE: R313114 |
|
R371 | Transfer withdrawn |
Free format text: JAPANESE INTERMEDIATE CODE: R371 |
|
S111 | Request for change of ownership or part of ownership |
Free format text: JAPANESE INTERMEDIATE CODE: R313114 |
|
R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
S111 | Request for change of ownership or part of ownership |
Free format text: JAPANESE INTERMEDIATE CODE: R313117 |
|
R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |