JP6835419B2 - Face recognition terminal device, face recognition sales management system, and face recognition sales management method - Google Patents
Face recognition terminal device, face recognition sales management system, and face recognition sales management method Download PDFInfo
- Publication number
- JP6835419B2 JP6835419B2 JP2019117464A JP2019117464A JP6835419B2 JP 6835419 B2 JP6835419 B2 JP 6835419B2 JP 2019117464 A JP2019117464 A JP 2019117464A JP 2019117464 A JP2019117464 A JP 2019117464A JP 6835419 B2 JP6835419 B2 JP 6835419B2
- Authority
- JP
- Japan
- Prior art keywords
- face recognition
- terminal device
- recognition terminal
- customer
- unit
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Landscapes
- Cash Registers Or Receiving Machines (AREA)
Description
本開示は、顔認証端末装置、顔認証販売管理システム、及び顔認証販売管理方法に関する。 The present disclosure relates to a face recognition terminal device, a face recognition sales management system, and a face recognition sales management method.
店舗の売り上げ等を管理するために、店舗に設置される業務端末装置の一例であるPOS(Point of sale)端末を含むPOSシステムが利用されている。 In order to manage the sales of a store, a POS system including a POS (Point of sale) terminal, which is an example of a business terminal device installed in a store, is used.
例えば、特許文献1には、店員用表示部及び顧客用表示部を備え、顧客用表示部の表示面側の上部には、CCD(Charge Coupled Device)イメージセンサ等で構成される撮像部が設けられたPOS端末装置が記載されている。上記撮像部は、上記POS端末装置の顧客側において、撮像部に略正対する顧客の顔を中心に撮像する。また、上記店員用表示部は、表示面を操作者である店員に向けて設置され、店員に対して情報を表示し、上記顧客用表示部は、表示面を顧客に向けて設置され、顧客に対して情報を表示する。上記POS端末装置は、店員用表示部及び顧客用表示部に表示され、タッチすることでキーの役割を果たすタッチキーも操作部の一部として設けられている。そして、特許文献1に記載のPOS端末装置は、上記撮像部で撮像した顔に基づき顧客の年齢及び性別を判定している。
For example,
ところで、タッチパネル付きディスプレイを有する顔認証端末装置を用いて顧客の顔認証を行う場合には、次の2つの場面が想定できる。第1に、店員が顧客と対面して、店員がタッチパネル付きディスプレイを操作して顧客の顔認証を行う場面があり、第2に、顧客自身がタッチパネル付きディスプレイを操作して顧客自身の顔認証を行う場面とである。第1の場面では、カメラのレンズは顧客側を向き、タッチパネル付きディスプレイの操作画面は店員側を向くことになるが、第2の場面では、カメラのレンズとタッチパネル付きディスプレイの操作画面は顧客側を向くことになる。よって、タッチパネル付きディスプレイを有する顔認証端末装置は、それぞれの場面で、異なる構造とならざるをえず、それぞれの構造のタッチパネル付きディスプレイを有する顔認証端末装置が必要となる。なお、特許文献1に記載の装置において顔認証を行う機能を付加した場合には、2つの場面が同じ位置での場面に限られ、離間した2つの位置での使用はできない。
By the way, when performing face recognition of a customer using a face recognition terminal device having a display with a touch panel, the following two situations can be assumed. First, there is a scene where the clerk faces the customer and the clerk operates the display with the touch panel to authenticate the customer's face. Second, the customer himself operates the display with the touch panel to authenticate the customer's face. It is a scene to do. In the first scene, the camera lens faces the customer side and the operation screen of the display with the touch panel faces the clerk side, but in the second scene, the operation screen of the camera lens and the display with the touch panel faces the customer side. Will turn to. Therefore, the face recognition terminal device having a display with a touch panel has to have a different structure in each scene, and a face recognition terminal device having a display with a touch panel having each structure is required. When the function of performing face recognition is added to the device described in
本開示の目的は、上述した課題を解決する、顔認証端末装置、顔認証販売管理システム、及び顔認証販売管理方法を提供することにある。上記課題は、タッチパネル付きディスプレイを備える顔認証端末装置において、店員が顧客と対面して店員が操作して顧客の顔認証を行う場合と、顧客自身が顔認証を行い顧客自身が操作して顧客自身の顔認証を行う場合の両方に使用できるようにすることにある。 An object of the present disclosure is to provide a face recognition terminal device, a face recognition sales management system, and a face recognition sales management method that solve the above-mentioned problems. The above problems are the case where the clerk faces the customer and the clerk operates the customer's face recognition in the face recognition terminal device provided with the display with a touch panel, and the case where the customer himself performs the face recognition and the customer operates the customer. The purpose is to be able to use it for both when performing own face recognition.
本開示の第1の態様に係る顔認証端末装置は、カメラを内蔵するカメラ部と、タッチパネル付きディスプレイを有するモニタ部と、を備え、前記カメラ部を、前記カメラが撮影する撮影方向と前記タッチパネル付きディスプレイの操作面に垂直な方向のうち前記操作面から前記操作面を視認可能な位置へ向かう方向であるモニタ方向とが異なる方向である第1の形態と、前記撮影方向と前記モニタ方向とが同一方向である第2の形態と、に配置可能であり、前記第1の形態においては、前記カメラ部と前記モニタ部とはそれぞれの厚さ方向の中心線が所定の角度をなすように当接しており、前記第2の形態においては、前記カメラ部と前記モニタ部とはそれぞれの厚さ方向の中心線の方向が略平行となるように当接している、ものである。 The face recognition terminal device according to the first aspect of the present disclosure includes a camera unit incorporating a camera and a monitor unit having a display with a touch panel, and the camera unit is photographed by the camera in a shooting direction and the touch panel. The first aspect, which is a direction perpendicular to the operation surface of the display with a monitor, which is a direction different from the monitor direction, which is a direction from the operation surface to a position where the operation surface can be visually recognized, and the shooting direction and the monitor direction. Can be arranged in the second form in which is the same direction, and in the first form, the center lines of the camera unit and the monitor unit in the thickness direction form a predetermined angle. In the second embodiment, the camera unit and the monitor unit are in contact with each other so that the directions of the center lines in the thickness directions of the camera unit and the monitor unit are substantially parallel to each other.
本開示の第2の態様に係る顔認証販売管理方法は、第1の顔認証端末装置、第2の顔認証端末装置、飲料供給装置、及び業務端末装置を備え、前記業務端末装置が前記第1の顔認証端末装置、前記第2の顔認証端末装置、及び前記飲料供給装置のいずれにも通信可能に接続された顔認証販売管理システムにおける顔認証販売管理方法であって、前記第1の顔認証端末装置及び前記第2の顔認証端末装置は、いずれも、カメラを内蔵するカメラ部と、タッチパネル付きディスプレイを有するモニタ部と、を備え、前記カメラ部を、前記カメラが撮影する撮影方向と前記タッチパネル付きディスプレイの操作面に垂直な方向のうち前記操作面から前記操作面を視認可能な位置へ向かう方向であるモニタ方向とが異なる方向である第1の形態と、前記撮影方向と前記モニタ方向とが同一方向である第2の形態と、に配置可能であり、前記第1の形態においては、前記カメラ部と前記モニタ部とはそれぞれの厚さ方向の中心線が所定の角度をなすように当接しており、前記第2の形態においては、前記カメラ部と前記モニタ部とはそれぞれの厚さ方向の中心線の方向が略平行となるように当接しており、前記顔認証販売管理方法は、前記第1の顔認証端末装置を、前記第1の形態に前記カメラ部が配置された状態で前記業務端末装置の近傍に設置し、前記第2の顔認証端末装置を、前記第2の形態に前記カメラ部が配置された状態で前記飲料供給装置の近傍に設置し、前記第1の顔認証端末装置で顧客についての顔認証処理を行い、前記第2の顔認証端末装置で同一顧客についての顔認証処理を行い、販売処理を行う、ものである。 The face authentication sales management method according to the second aspect of the present disclosure includes a first face authentication terminal device, a second face authentication terminal device, a beverage supply device, and a business terminal device, and the business terminal device is the first. A face authentication sales management method in a face authentication sales management system that is communicably connected to any of the face authentication terminal device, the second face authentication terminal device, and the beverage supply device, wherein the first face authentication sales management method is performed. Both the face recognition terminal device and the second face recognition terminal device include a camera unit having a built-in camera and a monitor unit having a display with a touch panel, and the camera unit is photographed in a shooting direction by the camera. The first embodiment is a direction perpendicular to the operation surface of the display with a touch panel, which is a direction different from the monitor direction, which is a direction from the operation surface to a position where the operation surface can be visually recognized, and the shooting direction and the above. It can be arranged in a second form in which the monitor direction is the same, and in the first form, the center line in the thickness direction of the camera unit and the monitor unit has a predetermined angle. In the second form, the camera unit and the monitor unit are in contact with each other so that the directions of the center lines in the thickness directions are substantially parallel to each other, and the face recognition is performed. In the sales management method, the first face recognition terminal device is installed in the vicinity of the business terminal device with the camera unit arranged in the first form, and the second face recognition terminal device is installed. The camera unit is arranged in the second form and installed in the vicinity of the beverage supply device, the first face recognition terminal device performs face recognition processing for the customer, and the second face recognition terminal is used. The device performs face recognition processing for the same customer and performs sales processing.
本開示により、上記課題を解決する顔認証端末装置、顔認証販売管理システム、及び顔認証販売管理方法を提供することができる。即ち、本開示によれば、タッチパネル付きディスプレイを備える顔認証端末装置において、店員が顧客と対面して店員が操作して顧客の顔認証を行う場合と、顧客自身が顔認証を行い顧客自身が操作して顧客自身の顔認証を行う場合の両方に使用できるようになる。 According to the present disclosure, it is possible to provide a face recognition terminal device, a face recognition sales management system, and a face recognition sales management method that solve the above problems. That is, according to the present disclosure, in a face recognition terminal device provided with a display with a touch panel, a clerk faces the customer and the clerk operates the face recognition of the customer, and the customer himself / herself performs face recognition and the customer himself / herself performs face recognition. It can be used for both operations and face recognition of the customer.
以下、図面を参照して、実施形態について説明する。なお、実施形態において、同一又は同等の要素には、同一の符号を付すことがあり、重複する説明は適宜省略される。 Hereinafter, embodiments will be described with reference to the drawings. In the embodiment, the same or equivalent elements may be designated by the same reference numerals, and duplicate description may be omitted as appropriate.
<実施形態1>
図1は、実施形態1に係る顔認証端末装置の一構成例を示す概略側面図である。
図1に示すように、本実施形態に係る顔認証端末装置1aは、カメラ14を内蔵するカメラ部12と、タッチパネル付きディスプレイ13を有するモニタ部11と、を備える。顔認証端末装置1bは、顔認証端末装置1aと同じ装置であるが、そのモニタ部11に対するカメラ部12の配置を異ならせたもの、つまり異なる形態のものである。以下、顔認証端末装置1a,1bに共通の説明については、顔認証端末装置1として説明することがある。
<
FIG. 1 is a schematic side view showing a configuration example of the face authentication terminal device according to the first embodiment.
As shown in FIG. 1, the face
顔認証端末装置1は、カメラ部12をモニタ部11に対して第1形態と第2形態と配置可能となっている。第1形態は、カメラ14が撮影する撮影方向(例えば被写体の中心に向かう方向)Vcと、タッチパネル付きディスプレイ13の操作面に垂直な方向のうち操作面から操作面を視認可能な位置へ向かう方向であるモニタ方向Vsと、が異なる方向である形態を指す。第1形態については、顔認証端末装置1aで例示するような形態である。第2形態は、顔認証端末装置1bで例示するように、上記撮影方向Vcと上記モニタ方向Vsとが同一方向である形態である。
In the face
換言すれば、顔認証端末装置1は、上記第1形態と上記第2形態との間でカメラ部12のモニタ部11に対する配置を変更する変更機構を有することができる。このような変更により、カメラ部12は、操作面側(フロント側)を撮影する場合とリア側を撮影する場合とで切り替えることができる。
In other words, the face
また、第1形態においては、顔認証端末装置1aで例示するように、カメラ部12とモニタ部11とはそれぞれの厚さ方向の中心線(例えば中心面とすることもできる)が所定の角度θをなすように当接している。θは、例えば顧客の平均的な顔の位置にカメラ14の撮影方向Vcが向くように設計しておくことができる。一方で、第2形態においては、顔認証端末装置1bで例示するように、カメラ部12とモニタ部11とはそれぞれの厚さ方向の中心線の方向が略平行となるように当接しており、例えばこれらの方向が略一致するように当接しているようにすることができる。なお、顔認証端末装置1として、操作面側の面が略四角形(この例では略長方形)の平板状の形状の装置を例示しているが、その形状は問わない。
Further, in the first embodiment, as illustrated in the face
第1形態の顔認証端末装置1aでは、図1の左側に示すようにカメラ14の撮影方向Vcとモニタ方向Vsとのなす角度は定まっているため、使用する際は、タッチパネル付きディスプレイの角度を調整するだけでよくカメラ14の角度を別途調整する必要はない。第2形態の顔認証端末装置1bは、図1の右側に示すようにカメラ14の撮影方向Vcとモニタ方向Vsとが同一方向であるため、使用する際は、モニタ部11の角度を調整するだけでよく、カメラ14の角度を別途調整する必要はない。
In the face
このような構成により、本実施形態に係る顔認証端末装置1は、店員が顧客と対面して店員がタッチ操作して顧客の顔認証を行う場合と、顧客自身が顔認証を行い顧客自身がタッチ操作して顧客自身の顔認証を行う場合の両方に使用することができる。
With such a configuration, in the face
次に、このような使用例について、図2を参照しながら、図1の顔認証端末装置1a,1bの各状態の合計2台の顔認証端末装置を備えた顔認証販売管理システム(以下、本システムという)について説明する。図2は、本システムの一構成例を示す概略図である。
Next, with reference to FIG. 2, regarding such a usage example, a face recognition sales management system (hereinafter, referred to as a face recognition sales management system) including a total of two face recognition terminal devices in each state of the face
図2に示すように、本システムは、上記第1形態にカメラ部12が配置された顔認証端末装置1aと、上記第2形態にカメラ部12が配置された顔認証端末装置1bと、業務端末装置2と、飲料供給装置3と、を備える。顔認証端末装置1aは第1形態の顔認証端末装置であり、顔認証端末装置1bは第2形態の顔認証端末装置である。業務端末装置2は、顔認証端末装置1a、顔認証端末装置1b、及び飲料供給装置3のいずれにも有線/無線を問わず通信可能に接続されている。
As shown in FIG. 2, this system includes a face
業務端末装置2は、例えばPOS端末装置で構成することができ、その場合、本システムは顔認証POSシステムと称することができる。業務端末装置2は、商品又はサービスの少なくとも一方についての販売情報(決済情報或いは売上情報)を入力することが可能に構成されることができる。よって、業務端末装置2は、例えば、販売される商品を登録する処理やその商品の決済に関する処理を実行するように構成することができる。これらの処理は、例えば、業務端末装置2に接続された図示しないサーバ装置と協働して行うように構成することもできる。業務端末装置2は、コンビニエンスストアをはじめ、スーパーマーケット、ドラッグストア等の多店舗チェーン店などに設置されることができ、その場合、店舗端末装置と称することもできる。
The
飲料供給装置3は、飲料供給装置3は、コーヒーサーバ等、飲料を供給する装置とすることができ、また、有線/無線を問わず、直接、顔認証端末装置1bに通信可能に接続しておくこともできる。なお、業務端末装置2、飲料供給装置3は、それぞれ業務アプリケーションプログラム、飲料供給アプリケーションプログラムを実行可能に組み込んでおくことができる。
The
図2において、概略的な配置をその接続距離をイメージして図示するように、顔認証端末装置1aは、業務端末装置2の近傍に設置され、顔認証端末装置1bは飲料供給装置3の近傍に設置されている。
In FIG. 2, the face
本システムにおける顔認証販売管理方法(以下、本方法という)の一例について、図3を併せて参照しながら説明する。図3は、本方法の一例を説明するためのフロー図である。 An example of the face recognition sales management method (hereinafter referred to as this method) in this system will be described with reference to FIG. FIG. 3 is a flow chart for explaining an example of this method.
本方法では、第1形態にカメラ部12が配置された状態の顔認証端末装置1aを、業務端末装置2の近傍に設置し、第2形態にカメラ部12が配置された状態の顔認証端末装置1bを、飲料供給装置3の近傍に設置しておく。そして、本方法は、第1の顔認証端末装置(顔認証端末装置1a)で顧客についての顔認証処理を行い(ステップS1)、次いで、第2の顔認証端末装置(顔認証端末装置1b)で同一の顧客についての顔認証処理を行う(ステップS2)。本方法は、その後、業務端末装置2等が販売処理を行う(ステップS3)。
In this method, the face
ステップS3の販売処理には、ステップS1とステップS2の間に行う処理を含むこともできる。なお、販売処理は、例えばチケット販売や飲料供給指示などの様々な処理を含むことができる。 The sales process in step S3 may include a process performed between steps S1 and S2. The sales process can include various processes such as ticket sales and beverage supply instructions.
以上、本システム及び本方法によれば、顔認証端末装置1を、店員が顧客と対面して店員がタッチ操作して顧客の顔認証を行う場合と、顧客自身が顔認証を行い顧客自身がタッチ操作して顧客自身の顔認証を行う場合の両方に使用し、飲料を販売することができる。
As described above, according to this system and this method, there are cases where the clerk faces the customer and the clerk touch-operates the face
<実施形態2>
実施形態2について、図4〜図7を併せて参照しながら、実施形態1との相違点を中心に説明するが、実施形態1で説明した様々な例が適用できる。図4は、本実施形態に係る顔認証端末装置の第1形態における一構成例を示す概略側面図で、図5は、本実施形態に係る顔認証端末装置の第2形態における一構成例を示す概略側面図である。また、図6は、本実施形態に係る顔認証端末装置の第1形態及び第2形態における一構成例を示す概略正面図である。
<
The second embodiment will be described mainly on the differences from the first embodiment with reference to FIGS. 4 to 7, but various examples described in the first embodiment can be applied. FIG. 4 is a schematic side view showing a configuration example of the face recognition terminal device according to the present embodiment in the first embodiment, and FIG. 5 is a configuration example of the face recognition terminal device according to the present embodiment in the second embodiment. It is a schematic side view which shows. Further, FIG. 6 is a schematic front view showing one configuration example in the first and second embodiments of the face recognition terminal device according to the present embodiment.
図4に示す顔認証端末装置10aは、図1の顔認証端末装置1aと同様のモニタ部11及びカメラ部12を備える。つまり顔認証端末装置10aは、カメラ部12がカメラ14の撮影方向Vcとタッチパネル付きディスプレイ13のモニタ方向Vsとが異なる方向に配置され、カメラ部12とモニタ部11とはそれぞれの厚さ方向の中心線が所定の角度θをなすように当接している。このような配置により、図4に示すように、モニタ部11のモニタ方向Vsを店員PSが居る方向とし、カメラ14の撮影方向Vcを顧客CUが居る方向とすることができる。
The face
図5に示す顔認証端末装置10bは、図1の顔認証端末装置1bと同様のモニタ部11及びカメラ部12を備える。つまり、顔認証端末装置10bは、は、カメラ部12がカメラ14の撮影方向Vcとタッチパネル付きディスプレイ13のモニタ方向Vsとが同一方向に配置され、カメラ部12とモニタ部11とはそれぞれの厚さ方向の中心線が略平行になるように当接している。
The face
本実施形態では、カメラ部12の厚さとモニタ部11の厚さとが同一である例を示しており、それらの厚さ方向の中心線が一致しており、また、略四角形の平板状の形状である。このように、本実施形態でも、第2形態においては、顔認証端末装置は略四角形の平板状の形状とすることができる。無論、カメラ部12の厚さとモニタ部11の厚さとは異なっていてもよく、カメラ部12とモニタ部11のそれぞれの厚さ方向の中心線は平行であればよい。このような配置により、図5に示すように、モニタ部11のモニタ方向Vs及びカメラ14の撮影方向Vcの双方を顧客CUが居る方向とすることができる。
In the present embodiment, an example is shown in which the thickness of the
また、図4の白抜き矢印で示すように顔認証端末装置10aのカメラ部12を回転(逆回転でもよい)させることで、図5に示す顔認証端末装置10bとして機能させることができる。同様に、図5の白抜き矢印で示すように顔認証端末装置10bのカメラ部12を回転(逆回転でもよい)させることで、図4に示す顔認証端末装置10aとして機能させることができる。このようなカメラ14の撮影方向の変更により、図6で例示する顔認証端末装置10a,10bのようにその正面が変更されることになる。以下、顔認証端末装置10a,10bに共通の説明については、顔認証端末装置10として説明することがある。
Further, by rotating the
カメラ部12の回転は、例えば回転軸及び回転軸孔を有する回転機構15を備えることで実現させることができる。つまり、カメラ部12とモニタ部11とは、一方に回転軸を有し、他方に回転軸孔を有し、回転軸孔に対して回転軸が回転されることで、第1形態と第2形態との間でのカメラ部12の配置変更が可能に構成されることができる。顔認証端末装置10は、このような回転機構を介してモニタ部11とカメラ部12とが配置されることになる。その結果、カメラ部12を回転させてカメラ部12のモニタ部11に対する向きを変えて第1形態又は第2形態とすることができる。
The rotation of the
例えば、回転軸をカメラ部12の底部に設け、回転軸孔をモニタ部11の上部に設けておくことで、カメラ部12は回転軸を中心にモニタ部11に対して回転可能とすることができる。また、回転軸又は回転軸孔は、カメラ部12の底面の縦方向及び横方向の中心であり、モニタ部11の上面の縦方向及び横方向の中心である位置に設けておくことができる。なお、回転軸及び回転軸孔は、それぞれ備えられた側に固定しておけばよい。
For example, by providing the rotating shaft at the bottom of the
このような構成により、カメラ部12を回転させることで、カメラ14はフロントカメラにもなるしリアカメラにもなる。これにより、カメラ14をリア側に向けて店員が顧客の顔認証を行うことができ、カメラ14をフロント側に向けて顧客が顧客自身の顔認証を行うことができる。なお、カメラ部12がカメラ14の撮影方向Vcとタッチパネル付きディスプレイ13のモニタ方向Vsとが異なる方向であるとき(第1形態のとき)の上記所定の角度θは、顧客CUの顔認証ができる範囲(例えば100度〜135度)としておくことができる。
With such a configuration, by rotating the
また、回転軸及び回転軸孔に代えて、カメラ部12とモニタ部11の一方に取付軸を有し、他方に対応する取付軸孔を有し、カメラ部12を挿抜可能とすることもできる。取付軸及び取付軸孔も、それぞれ備えられた側に固定しておけばよい。取付軸及び取付軸孔は、例えば回転機構15として図示した位置に設けておくことができる。このような構成により、カメラ部12をモニタ部11側から取り外してカメラ部12の向きを変えてモニタ部11側に装着することで、カメラ部12とモニタ部11に対する向きを変えることができる。このように、顔認証端末装置10は、取付軸孔に対して取付軸が抜き差しされることで、第1形態と第2形態との間でのカメラ部12の配置変更が可能に構成しておくこともできる。
Further, instead of the rotating shaft and the rotating shaft hole, one of the
また、図4及び図5に示すように、顔認証端末装置10は、モニタ部11及びカメラ部12のほかに、モニタ部11を支持する支持部を備えることができる。この支持部は、例えば、土台部(固定部)16、アーム部17、及びモニタ取付部18を有することができる。
Further, as shown in FIGS. 4 and 5, the face
土台部16は、図4及び図5に示すようにテーブル等の載置面に載置する台座状のものであってもよいし、テーブル等の板の端部を挟んで固定するクランプ状のものであってもよい。
As shown in FIGS. 4 and 5, the
モニタ取付部18は、タッチパネル付きディスプレイ13の裏側に位置するモニタ部11の背面側筐体(又は筐体の側面側)に取り付ける部位である。また、土台部16とモニタ取付部18とはアーム部17を介して接続されている。これにより、支持部で顔認証端末装置10が支持できるようになる。
The
アーム部17は、土台部16に固定又は取付がなされた下部(支柱部)17aと、モニタ取付部18に固定又は取付がなされた上部(モニタアーム部)17bと、ヒンジ部17cと、を有することができる。ヒンジ部17cは、下部17aと上部17bとが回動可能で回動させた位置で固定されるように接続(結合)する部位とすることができる。例えばモニタ部11を把持して顔認証端末装置10を角度θsで示す方向にこの回転の操作を実施することで、この角度θsを変え、タッチパネル付きディスプレイ13の操作面の角度を変えることができる。また、上部17bの一端には上述のようにヒンジ部17cを設けておくことができ、この場合、上部17bの他端はモニタ取付部18に固定又は取付がなされていることになるが、この部分も回動可能に固定又は取付がなされていてもよい。
The
次に、図7を併せて参照しながら、顔認証端末装置10の機能の一構成例について説明する。図7は、顔認証端末装置10の一構成例を示すブロック図である。
Next, one configuration example of the function of the face
顔認証端末装置10は、図7に示すように、モニタ部11及びカメラ部12のほかに、通信部19を備えることができる。また、カメラ部12は、例えば、レンズ(カメラ14のレンズ)14aと、撮影した画像を処理する撮像デバイス(カメラデバイス)14bと、を有することができる。
As shown in FIG. 7, the face
モニタ部11は、タッチパネル付きディスプレイ13を有し、制御部11aが収容されている。制御部11aは、カメラ部12とタッチパネル付きディスプレイ13と接続され、これらの制御を行い、また、通信部19を介して業務端末装置2等の他の装置との通信を行う。制御部11aは、例えば、CPU(Central Processing Unit)、作業用メモリ、及びプログラムを記憶した不揮発性の記憶装置などによって実現することができる。また、制御部は、例えば集積回路(Integrated Circuit)によって実現することもできる。
The
通信部19は、通信インタフェースを有することができる。なお、通信部19は、カメラ部12側に収容すること、或いはモニタ部11側に収容することもできる。制御部11aについても同様にカメラ部12側に収容することもできる。
The
以上のような構成により、店員が顧客と対面して店員がタッチパネル付きディスプレイ13を操作して顧客の顔認証を行う場合には、カメラ部12を、カメラ14の撮影方向Vcがモニタ方向Vsとは異なる方向となるように配置することができる。従って、顔認証端末装置10のカメラ部12を、カメラ14のレンズ14aが顧客側に向き、タッチパネル付きディスプレイ13の操作画面が店員側に向くように配置することができる。これにより、店員は、顧客の顔認証を行い、店員用の操作メニューが表示されたタッチパネル付きディスプレイ13の操作をすることができる。
With the above configuration, when the store clerk faces the customer and the store clerk operates the
また、顧客自身がタッチパネル付きディスプレイ13を操作してする場合には、顔認証端末装置10のカメラ部12を、カメラ14の撮影方向Vcがモニタ方向Vsと同一方向となるように配置することができる。従って、顔認証端末装置10のカメラ部12を、レンズ14aとタッチパネル付きディスプレイ13が顧客側に向くように配置することができる。これにより、顧客自身が、顧客用の操作メニューが表示されたタッチパネル付きディスプレイ13を操作して顧客自身の顔認証を行うことができる。
Further, when the customer himself / herself operates the
タッチパネル付きディスプレイ13の操作画面に表示される操作メニューは、例えばGUI(Graphical User Interface)画像により提供することができる。また、この操作メニューは、店員用操作メニューか顧客用操作メニューかを選択するキーをタッチパネル付きディスプレイ13に表示して、その選択するキーをユーザ(主に店員)が押下して選択する。以下、店員が、店員用の操作メニューが表示されたタッチパネル付きディスプレイ13を操作して顧客の顔認証を行うモードを、店員使用モードと称する。また、顧客自身が顧客用の操作メニューが表示されたタッチパネル付きディスプレイ13を操作して顧客自身の顔認証を行うモードを、顧客使用モードと称する。ここでは、モードに応じて制御部11aが主にモニタ部11におけるタッチパネル付きディスプレイ13の制御(例えば表示させるGUI画像の切り替え等の制御)を行うことを前提としているが、モードに応じた制御対象はこれに限らない。
The operation menu displayed on the operation screen of the
上記のキー操作による方法に替えて、制御部11aが、カメラ部12の配置の向き、即ち、顔認証端末装置10が第1形態であるか、第2形態であるかに応じて、第1形態であれば店員使用モードで、第2形態であれば顧客使用モードで動作するようにしてもよい。なお、この場合、顔認証端末装置10は、電源ONで、第1形態であれば店員使用モードで、第2形態であれば顧客使用モードで立ち上がるようにしておくことができる。
Instead of the above-mentioned key operation method, the control unit 11a first determines the orientation of the
第1形態又は第2形態の検出のため、顔認証端末装置10は、カメラ部12が第1形態及び第2形態のいずれの形態に配置されているかを検出する検出部(図示せず)を備えることができる。これにより、制御部11aは、この検出部における検出結果に基づき、第1形態であった場合に店員使用モードで動作し、第2形態であった場合に顧客使用モードで動作するように、顔認証端末装置10の制御を行う。ここでの制御は主にモニタ部11におけるタッチパネル付きディスプレイ13の制御(例えば表示させるGUI画像の切り替え等の制御)となるが、モードに応じた制御対象はに限らない。
For the detection of the first form or the second form, the face
上記検出部は、接点を検出する検出部とすること、或いはセンサとすることができる。前者の場合、例えば、カメラ部12の底面とモニタ部11の上面とに、第1形態であれば接触し、第2形態であれば接触しない接点を設けておく。そして、制御部11aは、導通があれば、第1形態であると判断し、導通がなければ、第2形態であると判断する。後者の場合、センサとして、例えば、カメラ部12の底部とモニタ部11の上部とに設けた光センサ等を採用することができる。
The detection unit can be a detection unit that detects a contact point, or can be a sensor. In the former case, for example, the bottom surface of the
以上、本実施形態に係る顔認証端末装置10は、店員が顧客と対面して、店員がタッチパネル付きディスプレイ13を操作して顧客の顔認証を行う場合と、顧客自身がタッチパネル付きディスプレイ13を操作して顧客自身の顔認証を行う場合の両方に使用できる。
As described above, in the face
<実施形態3>
実施形態3について、図8〜図12を併せて参照し、その効果も含めた実施形態1,2との相違点を中心に説明する。実施形態3は、実施形態1で説明した様々な例や、さらには実施形態2で説明した様々な例が適宜利用できる。
<
The third embodiment will be described with reference to FIGS. 8 to 12 and mainly the differences from the first and second embodiments including their effects. In the third embodiment, various examples described in the first embodiment and further various examples described in the second embodiment can be appropriately used.
図8は、本実施形態に係る顔認証端末装置を用いた顔認証販売管理システムの一構成例を示す図である。図8に示すように、本実施形態に係る顔認証POSシステム(以下、本システムという)は、2台の顔認証端末装置10a,10b、POS端末装置20、及びコーヒーサーバ30を備える。
FIG. 8 is a diagram showing a configuration example of a face recognition sales management system using the face recognition terminal device according to the present embodiment. As shown in FIG. 8, the face recognition POS system (hereinafter referred to as the present system) according to the present embodiment includes two face
実施形態1で説明したように、本システムでは、第1形態にカメラ部12が配置された状態の顔認証端末装置10aを、業務端末装置の一例であるPOS端末装置20の近傍に設置する。また、本システムでは、第2形態にカメラ部12が配置された状態の顔認証端末装置10bを、飲料供給装置の一例であるコーヒーサーバ30の近傍に設置しておく。そして、顔認証端末装置10a、顔認証端末装置10b、及びコーヒーサーバ30は、POS端末装置20と有線で通信可能に接続されている。なお、有線に限らず、無線で通信可能に接続されていてもよい。また、顔認証端末装置10bとコーヒーサーバ30とは、有線又は無線で通信可能に接続されている。
As described in the first embodiment, in this system, the face
本システムにおいて、顧客は、顔認証端末装置10aでの顔データの登録後、もしくは顔認証後、POS端末装置20でコーヒーチケット(飲料購入券)を購入し、顔認証端末装置10bでの顔認証後、コーヒーチケットでコーヒーを購入する。このコーヒーチケットは、コーヒーサーバ30(又は同様の他店のコーヒーサーバ)でコーヒーを供給可能にするチケットである。無論、コーヒー以外の飲料についても適用でき、飲料の種類や、砂糖やミルク等の付加などの条件の違いによって飲料の種類を分けることもできる。
In this system, the customer purchases a coffee ticket (beverage purchase ticket) with the
このようなチケット購入及びコーヒーの提供の例について、図9〜図12を併せて参照しながら説明する。図9は、POS端末装置20前に設置された顔認証端末装置10aの顔認証前の様子の一例を示す図で、図10は、図9に続く、顔認証端末装置10aの顔認証成功直後から回数券選択前までの様子の一例を示す図である。図11は、図10に続く、顔認証端末装置10aの確定ボタン押下前から押下後までの様子の一例を示す図である。また、図12は、コーヒーサーバ30前に設置された顔認証端末装置10bの顔認証成功直後からチケット選択後までの様子の一例を示す図である。
An example of such ticket purchase and coffee provision will be described with reference to FIGS. 9 to 12. FIG. 9 is a diagram showing an example of the state before face authentication of the face
まず、図9〜図11に基づき、顧客がコーヒーチケットを追加購入する場合に、店員が操作する顔認証端末装置10aのモニタ部11における操作画面に表示されるGUI画像例について説明する。顔認証端末装置10aは、店舗の精算場所に設置されており、店員が操作者となり、カメラ14は顧客を向いており、モニタ方向は精算場所に居る店員を向いている。
First, based on FIGS. 9 to 11, an example of a GUI image displayed on the operation screen of the
図9の画像13a,13b,13cは、顧客を顔認証するまでに表示される画像を示し、図10の画像13d,13e及び図11の画像13f,13gは、顧客がコーヒーチケットを追加購入するまでに表示される画像を示す。
顧客は、予め顔データと会員番号とが対応付けられて、POS端末装置20に登録されている。また、当該顧客は、コーヒーチケットを既に購入済みで、顔データと会員番号と対応付けられて、POS端末装置20に登録されているものとするが、コーヒーチケットの購入も行うことができる。
The customer is registered in the
まず、図9の左側の画像13aが、顔認証端末装置10aの制御部11aによって、顔画像の取得前に表示される。ここでは、顔をカメラに向けるように示唆する文言が表示されている。次に、図9の中央の画像13bが、顔認証端末装置10aの制御部11aによって、顔画像の取得中に表示される。図9の画像13a,13bについては、店員が操作することなく自動で処理がなされる。
First, the
次に、図9の右側の画像13cが、顔認証端末装置10aの制御部11aによって、顔認証前に表示される。画像13cには「顔認証スタートボタン」が含まれ、これが押下されると、顔認証端末装置10aは、POS端末装置20に取得した顧客の顔画像データを送信する。これに応答して、POS端末装置20は、登録されている顔画像データとの照合(顔認証)を行って、結果を顔認証端末装置10aに送信する。POS端末装置20は、顔認証が成功であった場合、当該顧客のコーヒーチケットのデータについても顔認証端末装置10aに送信する。
Next, the
次に、図10の左側の画像13dが、顔認証端末装置10aの制御部11aによって、顔認証後(認証成功直後)に表示される。なお、画像13dには会員番号及び対応する登録顔画像(撮影した顔画像でもよい)を含むポップアップ画像を表示させることができる。また、画像13dの表示から所定時間(例えば1秒)経過後、このポップアップ画像を自動で消し、図10の右側の画像13e(又は図11の画像13f)を表示させることができる。
Next, the
画像13dの表示後、図10の右側の画像13eが、顔認証端末装置10aの制御部11aによって、コーヒーチケットの追加購入の決定前に表示される。ここでは、追加購入可能なコーヒーの種類としてアイス、ホット、サイズなどの選択画像が活性化している。
After the
次いで、図11の左側の画像13fが、顔認証端末装置10aの制御部11aによって、コーヒーチケットの追加購入の決定後に表示される。顔認証端末装置10aは、コーヒーチケットの追加購入のデータをPOS端末装置20に送信する。POS端末装置20は、コーヒーチケットの追加購入代金の精算後、当該顧客のコーヒーチケットデータを更新し、更新後の当該顧客のコーヒーチケットデータを顔認証端末装置10aに送信する。次いで、図11の右側の画像13gが、顔認証端末装置10aの制御部11aによって、コーヒーチケットの追加購入代金の精算後に表示される。なお、ここでは、追加を取りやめるボタンを、所定の猶予期間(例えば2秒)の間、押下することを可能にすることができる。
Next, the
次に、図12に基づき、顧客がコーヒーチケットを利用してコーヒーを購入する場合に、顧客が操作する顔認証端末装置10bのモニタ部11における操作画面に表示されるGUI画像例について説明する。顔認証端末装置10bは、コーヒーサーバ30前に設置されており、顧客が操作者となり、カメラ14は顧客を向いており、モニタ方向も顧客を向いている。
Next, based on FIG. 12, an example of a GUI image displayed on the operation screen of the
まず、図12の左側の画像13hが、顔認証端末装置10bの制御部11aによって、顔認証後(認証成功直後)に表示される。この前に、顔認証端末装置10bは、POS端末装置20に取得した顧客の顔画像データを送信し、POS端末装置20は登録されている顔画像データとの照合(顔認証)を行って、結果を顔認証端末装置10bに送信する。POS端末装置20は、顔認証が成功であった場合、当該顧客のコーヒーチケットのデータについても顔認証端末装置10bに送信する。
First, the
次いで、画像13hの表示後、所定期間(例えば1秒)経過後に、図12の中央の画像13iが、顔認証端末装置10bの制御部11aによって表示される。画像13iは、顔認証成功後に購入するコーヒーの種類を選択する画像であり、図10の画像13eと同様の種類選択画像を含むことができる。
Next, after a predetermined period (for example, 1 second) has elapsed after displaying the
次いで、図12の右側の画像13jが、顔認証端末装置10bの制御部11aによって、購入するコーヒーの種類を選択した後に表示される。画像13jは、「OKボタン」を含み、これが押下されると、顔認証端末装置10bは、選択されたコーヒーの種類をPOS端末装置20に送信する。POS端末装置20は、当該顧客のコーヒーチケットのデータを更新し、更新後の当該顧客のコーヒーチケットのデータを顔認証端末装置10bに送信する。POS端末装置20は、これらの処理とともに、コーヒーサーバ30を、選択されたコーヒーの種類を供給可能な状態とする。
Next, the
以上に例示したように、本システムでは、顔認証端末装置10aで顧客を撮影した第1の画像データを被認証データとして第1の顔認証処理を行う。そして、本システムでは、第1の顔認証処理により認証がなされた顧客に購入させるコーヒーチケットを選択する選択画像を、顔認証端末装置10aにおけるモニタ部11に表示させる。次いで、本システムでは、選択されるコーヒーチケットを示す購入データと第1の顔認証処理で用いた認証データ又は被認証データと対応付けて記憶する。なお、認証データは、例えば、顧客の氏名、会員番号、顔特徴データ等を示す顧客データとすることができる。記憶等の処理は、POS端末装置20が実行すればよいが、システム内の他の装置が実行することもできる。
As illustrated above, in this system, the first face authentication process is performed using the first image data obtained by photographing the customer with the face
次いで、本システムでは、顔認証端末装置10bで顧客を撮影した第2の画像データを被認証データとして第2の顔認証処理を行い、購入データの更新処理を行う。この更新処理は、第2の顔認証処理により認証がなされた顧客に対応付けられた購入データについて、購入データで示されるコーヒーチケットに対応する飲料をコーヒーサーバ30から供給可能とする処理を含む。また、この更新処理は、それとともに、コーヒーサーバ30から供給された(供給開始された場合、つまり一部が供給された場合でもよい)飲料に基づき購入データを更新する処理を含む。
Next, in this system, the second image data obtained by photographing the customer with the face
以上、本実施形態によれば、店員が顧客と対面して、店員がタッチパネル付きディスプレイを操作して顧客の顔認証を行う場合と、顧客自身がタッチパネル付きディスプレイを操作して顧客自身の顔認証を行う場合の両方に使用できる。 As described above, according to the present embodiment, there are cases where the clerk faces the customer and the clerk operates the display with the touch panel to authenticate the customer's face, and the customer himself operates the display with the touch panel to authenticate the customer's face. Can be used for both when doing.
<他の実施形態>
[a]
各実施形態において、システム及びそのシステムに含まれる各装置の機能について説明したが、各装置は、図示した構成例に限ったものではなく、各装置としてこれらの機能が実現できればよい。
<Other embodiments>
[A]
In each embodiment, the system and the functions of each device included in the system have been described, but each device is not limited to the illustrated configuration example, and it is sufficient that each device can realize these functions.
例えば、実施形態3は、上述した例に限定されるものではない。例えば、顔認証端末装置として実施形態2に係る顔認証端末装置を用いたが、双方又はいずれか一方の顔認証端末装置として、他の顔認証端末装置を適用することもできる。上記他の顔認証端末装置は、カメラ部とモニタ部を有するものであればよい。つまり上記他の顔認証端末装置は、店員が顧客の要望に応えてタッチパネル付きディスプレイを操作して顧客の顔認証を行う場合と、顧客自身がタッチパネル付きディスプレイを操作して顧客自身の顔認証を行う場合の両方に使用できるものでなくともよい。 For example, the third embodiment is not limited to the above-mentioned example. For example, although the face recognition terminal device according to the second embodiment is used as the face recognition terminal device, another face recognition terminal device can also be applied as the face recognition terminal device of both or either one. The other face recognition terminal device may have a camera unit and a monitor unit. That is, in the other face recognition terminal devices described above, the store clerk operates the display with a touch panel to perform face recognition of the customer in response to the customer's request, and the customer himself operates the display with a touch panel to perform face recognition of the customer himself. It does not have to be something that can be used for both cases.
[b]
実施形態1〜3に係る各装置は、例えば、次のようなハードウェア構成を有することができる。図13は、装置のハードウェア構成の一例を示す図である。なお、上記他の実施形態[a]についても同様である。
[B]
Each device according to the first to third embodiments can have the following hardware configuration, for example. FIG. 13 is a diagram showing an example of the hardware configuration of the device. The same applies to the other embodiment [a].
図13に示す装置100は、プロセッサ101、メモリ102、及び通信インタフェース103を有することができる。プロセッサ101は、例えば、マイクロプロセッサ、MPU(Micro Processor Unit)、又はCPUなどであってもよい。プロセッサ101は、複数のプロセッサを含んでもよい。メモリ102は、例えば、揮発性メモリ及び不揮発性メモリの組み合わせによって構成される。実施形態1〜3で説明した各装置における機能は、プロセッサ101がメモリ102に記憶されたプログラムを読み込んで実行することにより実現される。この際、情報の入出力は図示しない入出力インタフェースを介して行うことができ、他の装置との情報の送受は通信インタフェース103を介して行うことができる。
The
上述の例において、プログラムは、様々なタイプの非一時的なコンピュータ可読媒体(non-transitory computer readable medium)を用いて格納され、コンピュータに供給することができる。非一時的なコンピュータ可読媒体は、様々なタイプの実体のある記録媒体(tangible storage medium)を含む。非一時的なコンピュータ可読媒体の例は、磁気記録媒体(例えばフレキシブルディスク、磁気テープ、ハードディスクドライブ)、光磁気記録媒体(例えば光磁気ディスク)を含む。さらに、この例は、CD−ROM(Read Only Memory)、CD−R、CD−R/Wを含む。さらに、この例は、半導体メモリ(例えば、マスクROM、PROM(Programmable ROM)、EPROM(Erasable PROM)、フラッシュROM、RAM(Random Access Memory))を含む。また、プログラムは、様々なタイプの一時的なコンピュータ可読媒体(transitory computer readable medium)によってコンピュータに供給されてもよい。一時的なコンピュータ可読媒体の例は、電気信号、光信号、及び電磁波を含む。一時的なコンピュータ可読媒体は、電線及び光ファイバ等の有線通信路、又は無線通信路を介して、プログラムをコンピュータに供給できる。 In the above example, the program can be stored and supplied to a computer using various types of non-transitory computer readable media. Non-transitory computer-readable media include various types of tangible storage media. Examples of non-temporary computer-readable media include magnetic recording media (eg, flexible disks, magnetic tapes, hard disk drives), magneto-optical recording media (eg, magneto-optical disks). Further, this example includes CD-ROM (Read Only Memory), CD-R, CD-R / W. Further, this example includes semiconductor memories (eg, mask ROM, PROM (Programmable ROM), EPROM (Erasable PROM), flash ROM, RAM (Random Access Memory)). The program may also be supplied to the computer by various types of transient computer readable media. Examples of temporary computer-readable media include electrical, optical, and electromagnetic waves. The temporary computer-readable medium can supply the program to the computer via a wired communication path such as an electric wire and an optical fiber, or a wireless communication path.
なお、本開示は上記実施形態に限られたものではなく、趣旨を逸脱しない範囲で適宜変更することが可能である。また、本開示は、それぞれの実施形態を適宜組み合わせて実施されてもよい。 The present disclosure is not limited to the above embodiment, and can be appropriately modified without departing from the spirit. Further, the present disclosure may be carried out by appropriately combining the respective embodiments.
1,1a,1b,10,10a,10b 顔認証端末装置
2 業務端末装置
3 飲料供給装置
11 モニタ部
11a 制御部
12 カメラ部
13 タッチパネル付きディスプレイ
13a,13b,13c,13d,13e,13f,13g,13h,13i,13j 画像
14 カメラ
14a レンズ
15 回転機構
16 土台部
17 アーム部
17a 下部
17b 上部
17c ヒンジ部
18 モニタ取付部
19 通信部
20 POS端末装置
30 コーヒーサーバ
100 装置
101 プロセッサ
102 メモリ
103 通信インタフェース
1,1a, 1b, 10, 10a, 10b Face
Claims (8)
前記カメラ部を、前記カメラが撮影する撮影方向と前記タッチパネル付きディスプレイの操作面に垂直な方向のうち前記操作面から前記操作面を視認可能な位置へ向かう方向であるモニタ方向とが異なる方向である第1の形態と、前記撮影方向と前記モニタ方向とが同一方向である第2の形態と、に配置可能であり、
前記第1の形態においては、前記カメラ部と前記モニタ部とはそれぞれの厚さ方向の中心線が所定の角度をなすように当接しており、
前記第2の形態においては、前記カメラ部と前記モニタ部とはそれぞれの厚さ方向の中心線の方向が略平行となるように当接している、
顔認証端末装置。 It is equipped with a camera unit with a built-in camera and a monitor unit with a display with a touch panel.
The camera unit is photographed in a direction different from the shooting direction taken by the camera and the direction perpendicular to the operation surface of the display with a touch panel, which is the direction from the operation surface to a position where the operation surface can be visually recognized. It can be arranged in a first form and a second form in which the shooting direction and the monitor direction are the same.
In the first embodiment, the camera unit and the monitor unit are in contact with each other so that the center lines in the thickness directions form a predetermined angle.
In the second aspect, the camera unit and the monitor unit are in contact with each other so that the directions of the center lines in the thickness directions are substantially parallel to each other.
Face recognition terminal device.
請求項1に記載の顔認証端末装置。 In the second aspect, the face recognition terminal device has a substantially quadrangular flat plate shape.
The face recognition terminal device according to claim 1.
請求項1又は2に記載の顔認証端末装置。 The camera unit and the monitor unit have a rotation shaft on one side and a rotation shaft hole on the other side, and the rotation shaft is rotated with respect to the rotation shaft hole to obtain the first embodiment. It is configured so that the arrangement of the camera unit can be changed from that of the second form.
The face recognition terminal device according to claim 1 or 2.
請求項1又は2に記載の顔認証端末装置。 The camera unit and the monitor unit have a mounting shaft on one side and a mounting shaft hole on the other side, and the mounting shaft is inserted into and removed from the mounting shaft hole to obtain the first embodiment. It is configured so that the arrangement of the camera unit can be changed from that of the second form.
The face recognition terminal device according to claim 1 or 2.
前記検出部における検出結果に基づき、前記第1の形態であった場合に店員使用モードで動作し、前記第2の形態であった場合に顧客使用モードで動作するように、前記顔認証端末装置の制御を行う制御部と、
を備えた、
請求項1から4のいずれか1項に記載の顔認証端末装置。 A detection unit that detects whether the camera unit is arranged in the first form or the second form, and
Based on the detection result in the detection unit, the face recognition terminal device operates in the clerk use mode in the case of the first form and operates in the customer use mode in the case of the second form. And the control unit that controls
With,
The face recognition terminal device according to any one of claims 1 to 4.
請求項1から5のいずれか1項に記載の顔認証端末装置であって前記第2の形態に前記カメラ部が配置された第2の顔認証端末装置と、
飲料供給装置と、
前記第1の顔認証端末装置、前記第2の顔認証端末装置、及び前記飲料供給装置のいずれにも通信可能に接続された業務端末装置と、
を備え、
前記第1の顔認証端末装置は、前記業務端末装置の近傍に設置され、
前記第2の顔認証端末装置は、前記飲料供給装置の近傍に設置されている、
顔認証販売管理システム。 The first face recognition terminal device according to any one of claims 1 to 5, wherein the camera unit is arranged in the first form.
The second face recognition terminal device according to any one of claims 1 to 5, wherein the camera unit is arranged in the second form.
Beverage supply device and
A business terminal device communicably connected to any of the first face recognition terminal device, the second face recognition terminal device, and the beverage supply device.
With
The first face recognition terminal device is installed in the vicinity of the business terminal device, and is
The second face recognition terminal device is installed in the vicinity of the beverage supply device.
Face recognition sales management system.
前記第1の顔認証処理により認証がなされた顧客に購入させる飲料購入券を選択する選択画像を、前記第1の顔認証端末装置における前記モニタ部に表示させ、
選択された飲料購入券を示す購入データと前記第1の顔認証処理で用いた認証データ又は被認証データ)と対応付けて記憶し、
前記第2の顔認証端末装置で顧客を撮影した第2の画像データを被認証データとして第2の顔認証処理を行い、
前記第2の顔認証処理により認証がなされた顧客に対応付けられた前記購入データについて、前記購入データで示される飲料購入券に対応する飲料を前記飲料供給装置から供給可能とするとともに、前記飲料供給装置から供給された飲料に基づき前記購入データを更新する、
請求項6に記載の顔認証販売管理システム。 The first face recognition process is performed using the first image data obtained by photographing the customer with the first face recognition terminal device as the authenticated data.
A selection image for selecting a beverage purchase ticket to be purchased by a customer authenticated by the first face recognition process is displayed on the monitor unit of the first face recognition terminal device.
The purchase data indicating the selected beverage purchase ticket and the authentication data or the authenticated data used in the first face recognition process) are stored in association with each other.
The second face recognition process is performed using the second image data obtained by photographing the customer with the second face recognition terminal device as the authenticated data.
With respect to the purchase data associated with the customer authenticated by the second face recognition process, the beverage corresponding to the beverage purchase ticket indicated by the purchase data can be supplied from the beverage supply device, and the beverage can be supplied. Update the purchase data based on the beverage supplied by the feeder,
The face recognition point-of-sale management system according to claim 6.
前記第1の顔認証端末装置及び前記第2の顔認証端末装置は、いずれも、
カメラを内蔵するカメラ部と、タッチパネル付きディスプレイを有するモニタ部と、を備え、
前記カメラ部を、前記カメラが撮影する撮影方向と前記タッチパネル付きディスプレイの操作面に垂直な方向のうち前記操作面から前記操作面を視認可能な位置へ向かう方向であるモニタ方向とが異なる方向である第1の形態と、前記撮影方向と前記モニタ方向とが同一方向である第2の形態と、に配置可能であり、
前記第1の形態においては、前記カメラ部と前記モニタ部とはそれぞれの厚さ方向の中心線が所定の角度をなすように当接しており、
前記第2の形態においては、前記カメラ部と前記モニタ部とはそれぞれの厚さ方向の中心線の方向が略平行となるように当接しており、
前記顔認証販売管理方法は、
前記第1の顔認証端末装置を、前記第1の形態に前記カメラ部が配置された状態で前記業務端末装置の近傍に設置し、
前記第2の顔認証端末装置を、前記第2の形態に前記カメラ部が配置された状態で前記飲料供給装置の近傍に設置し、
前記第1の顔認証端末装置で顧客についての顔認証処理を行い、前記第2の顔認証端末装置で同一顧客についての顔認証処理を行い、販売処理を行う、
顔認証販売管理方法。 A first face recognition terminal device, a second face recognition terminal device, a beverage supply device, and a business terminal device are provided, and the business terminal device is the first face recognition terminal device, the second face recognition terminal device, and the like. And a face recognition sales management method in a face recognition sales management system that is communicably connected to any of the beverage supply devices.
Both the first face recognition terminal device and the second face recognition terminal device
It is equipped with a camera unit with a built-in camera and a monitor unit with a display with a touch panel.
The camera unit is photographed in a direction different from the shooting direction taken by the camera and the direction perpendicular to the operation surface of the display with a touch panel, which is the direction from the operation surface to a position where the operation surface can be visually recognized. It can be arranged in a first form and a second form in which the shooting direction and the monitor direction are the same.
In the first embodiment, the camera unit and the monitor unit are in contact with each other so that the center lines in the thickness directions form a predetermined angle.
In the second embodiment, the camera unit and the monitor unit are in contact with each other so that the directions of the center lines in the thickness directions are substantially parallel to each other.
The face recognition sales management method is
The first face recognition terminal device is installed in the vicinity of the business terminal device with the camera unit arranged in the first form.
The second face recognition terminal device is installed in the vicinity of the beverage supply device with the camera unit arranged in the second form.
The first face recognition terminal device performs face recognition processing for a customer, the second face recognition terminal device performs face recognition processing for the same customer, and sales processing is performed.
Face recognition sales management method.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2019117464A JP6835419B2 (en) | 2019-06-25 | 2019-06-25 | Face recognition terminal device, face recognition sales management system, and face recognition sales management method |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2019117464A JP6835419B2 (en) | 2019-06-25 | 2019-06-25 | Face recognition terminal device, face recognition sales management system, and face recognition sales management method |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2021005155A JP2021005155A (en) | 2021-01-14 |
JP6835419B2 true JP6835419B2 (en) | 2021-02-24 |
Family
ID=74097608
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2019117464A Active JP6835419B2 (en) | 2019-06-25 | 2019-06-25 | Face recognition terminal device, face recognition sales management system, and face recognition sales management method |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP6835419B2 (en) |
Family Cites Families (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH10188133A (en) * | 1996-12-20 | 1998-07-21 | Fujitsu General Ltd | Money card ecr |
JP2000099826A (en) * | 1998-07-22 | 2000-04-07 | Seiko Epson Corp | Pos terminal, pos system and transaction information recording method |
JP4347681B2 (en) * | 2003-12-24 | 2009-10-21 | 京セラ株式会社 | Cradle and imaging device system |
JP4625117B2 (en) * | 2008-07-28 | 2011-02-02 | 東芝テック株式会社 | Transaction processing equipment |
JP5790160B2 (en) * | 2011-05-31 | 2015-10-07 | 株式会社寺岡精工 | Self-accounting POS system and accounting device |
-
2019
- 2019-06-25 JP JP2019117464A patent/JP6835419B2/en active Active
Also Published As
Publication number | Publication date |
---|---|
JP2021005155A (en) | 2021-01-14 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP4625117B2 (en) | Transaction processing equipment | |
US9892399B2 (en) | Reading apparatus | |
WO2016040187A1 (en) | Point-of-sale systems and methods for money transfer transactions | |
JP6323586B1 (en) | Store system, electronic shelf label, store system processing method and program | |
JP2015153377A (en) | Device and program for merchandise data processor | |
JP2016146126A (en) | Information processing device and security program | |
JP7525223B2 (en) | Information processing system, information processing method, and program | |
JP6115034B2 (en) | POS system, registration device, and program | |
WO2019128908A1 (en) | Data object information processing method, apparatus, and system, and electronic device | |
JP7524388B2 (en) | Information processing device, store system, program | |
JP2021517296A (en) | Systems, methods and equipment for processing try-on clothing information | |
JP6313731B2 (en) | Payment apparatus and control program thereof | |
US9245264B2 (en) | Reading apparatus | |
JP6835419B2 (en) | Face recognition terminal device, face recognition sales management system, and face recognition sales management method | |
JP2000099826A (en) | Pos terminal, pos system and transaction information recording method | |
JP6735574B2 (en) | Information processing apparatus, information processing system, control method thereof, and program | |
JP2017219909A (en) | Operation input device, sales data processor and program | |
US20180276636A1 (en) | Point-of-sale terminal having a dynamically set user interface | |
JP7411364B2 (en) | checkout system | |
JP5153851B2 (en) | Transaction processing apparatus and control program therefor | |
JPH08123874A (en) | Merchandise management system | |
JP6247245B2 (en) | Sales data processing apparatus and program | |
JP6372585B2 (en) | Shooting unit | |
JP6313701B2 (en) | Merchandise sales data processing system and program thereof | |
JP6123876B2 (en) | Image processing apparatus and program |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20190625 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20200825 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20210105 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20210128 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6835419 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |