JP6727559B2 - Display processing device and program - Google Patents
Display processing device and program Download PDFInfo
- Publication number
- JP6727559B2 JP6727559B2 JP2019015059A JP2019015059A JP6727559B2 JP 6727559 B2 JP6727559 B2 JP 6727559B2 JP 2019015059 A JP2019015059 A JP 2019015059A JP 2019015059 A JP2019015059 A JP 2019015059A JP 6727559 B2 JP6727559 B2 JP 6727559B2
- Authority
- JP
- Japan
- Prior art keywords
- operator
- display
- image
- unit
- displayed
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Landscapes
- Cash Registers Or Receiving Machines (AREA)
- Closed-Circuit Television Systems (AREA)
Description
本発明は、表示画面上の表示内容に対する指示操作に応じて各種処理を実行する表示処理装置及びプログラムに関する。 The present invention relates to a display processing device and a program that execute various processes according to an instruction operation on display contents on a display screen.
一般に、ECR(Electronic Cash Register)、POS(Point of sale)端末などの売上処理装置、又は金融機関のATM(現金自動預け払い機)には、操作者を確認する認証機能が備えられている。例えば、特許文献1には、指紋センサを用いて指紋照合して本人であることを確認できた場合のみドロアを解放するように技術が記載されている。また、特許文献2には、従業員がPOS端末を操作する作業を開始するときに従業員の顔を撮影して顔認証を行うことによりPOS端末を制御するようにした技術が記載されている。
Generally, a sales processing device such as an ECR (Electronic Cash Register) or a POS (Point of Sale) terminal, or an ATM (Automatic Teller Machine) of a financial institution has an authentication function for confirming an operator. For example,
更に、特許文献3には、上述のような認証機能によらず、利用者の顔画像を表示するだけで不正操作を抑制するようにした技術が記載されている。特許文献3の技術は、口座開設者以外の利用者による不正取引を予防するために、口座開設者の顔画像(登録画像)と利用者の顔画像とを表示することにより利用者が口座開設者であるかをその周囲に居る第三者が確認することができるようにしたものであり、口座開設者以外の利用者による不正な取引を抑制するようにしている。
Furthermore,
しかしながら、特許文献3の技術にあっては、利用者の周囲に居る第三者がその利用者を確認することができるようにするために顔画像を表示することを目的とするものであるが、撮影された利用者の顔画像が無条件に表示されてしまうことになる。その結果、口座開設者(正規の操作者)にあっては、自分の顔が表示されていることに不快感や抵抗感が増して、口座開設者から苦情が出る可能性も高くなる。特に、個人情報を保護する面でも大きな問題になる。
However, the technique of
本発明の課題は、操作者を容易に識別できるような撮影画像を取得することである。 An object of the present invention is to acquire a captured image that allows an operator to be easily identified .
上述した課題を解決するために、本発明に係る表示処理装置は、操作者を撮像する撮像手段と、前記撮像手段と並べて配置された表示手段と、前記撮像手段により撮像された操作者の画像を、前記表示手段に表示するとともに、録画する制御手段と、を備え、前記制御手段は、所定の処理の実行を指示するための操作を受け付ける操作手段を前記操作者の画像と前記撮像手段との間に介在するように前記表示手段に表示させるとともに、前記操作者の画像を録画している旨の表示を前記操作者の画像と並べて前記表示手段に表示させる、ことを特徴とする。 In order to solve the above-mentioned problems, a display processing device according to the present invention provides an image capturing means for capturing an image of an operator, a display means arranged side by side with the image capturing means, and an image of the operator captured by the image capturing means. Is displayed on the display means and recorded, and the control means includes an operation means for receiving an operation for instructing execution of a predetermined process, the image of the operator and the imaging means. Is displayed on the display means so as to be interposed between the two, and a display indicating that the image of the operator is being recorded is displayed on the display means side by side with the image of the operator .
本発明によれば、操作者を容易に識別できるような撮影画像を取得することができる。
According to the present invention, as possible out to acquire the captured image that allows easy identification of the operator.
以下、本発明の実施の形態について、図面を参照して詳細に説明する。
(第1実施形態)
先ず、図1〜図6を参照して本発明の第1実施形態を説明する。
本実施形態は、表示画面上の表示内容に対する指示操作に応じて各種処理を実行する表示処理装置として、店舗内設置の売上処理装置に適用した場合で、図1は、この売上処理装置を含む売上処理システムを説明するためのブロック図である。
売上処理システムは、例えば、全国規模の広域通信システムであり、各店舗内に設置されている各売上処理装置1は、本部サーバ装置2に公衆回線網(例えば、電話回線網、無線通信網、インターネット)3を介して接続されていると共に、店内などに居る警備員所持の携帯端末装置(例えば、スマートフォン)4に公衆回線網3を介して接続されている。なお、売上処理システムは、広域通信システムに限らず、単体の店舗内に構築した構内通信システムであってもよい。
Hereinafter, embodiments of the present invention will be described in detail with reference to the drawings.
(First embodiment)
First, a first embodiment of the present invention will be described with reference to FIGS.
The present embodiment is applied to a sales processing device installed in a store as a display processing device that executes various kinds of processing in response to an instruction operation on display contents on a display screen, and FIG. 1 includes the sales processing device. It is a block diagram for explaining a sales processing system.
The sales processing system is, for example, a nationwide wide area communication system, and each
売上処理装置1は、店舗内で顧客が購入した各商品に対して精算処理(会計処理)を行う際に、商品毎にその売上データを登録する登録処理を実行したり、一取引の登録の終了時に締め処理(ドロアオープン処理を含む)を実行したりする持ち運び可能なタブレット端末であり、店舗内において短距離無線通信を介してスキャナ装置5、プリンタ装置6、ドロア装置7に接続されている。ドロア装置7は、現金を収納するもので、例えば、電磁石(図示省略)によってドロアの開閉を制御する構成となっており、売上処理装置1からのオープン指示信号に応答してドロアを開放する動作を行い、売上処理装置1からのクローズ指示信号に応答してドロアを強制的に閉じる動作を行う。また、ドロア装置7は、ドロアが人為的にクローズされた際には、クローズ信号を売上処理装置1に対して送信するようにしている。
The
図2は、売上処理装置(タブレット端末)1の基本的な構成要素を示したブロック図である。
売上処理装置1の中核を成すCPU11は、記憶部12内の各種のプログラムに応じてこの売上処理装置1の全体動作を制御する中央演算処理装置である。記憶部12は、各種のプログラムや情報を記憶するもので、図4及び図5に示した動作手順に応じて本実施形態を実現するためのプログラムや各種のアプリケーションなどが格納されている他、売上処理装置1が動作するために必要な各種の情報(例えば、計時機能によって得られた計時情報、フラグなど)を一時的に記憶するワーク領域を有している。CPU11には、その入出力周辺デバイスとして、タッチ入力表示部13、キー操作部14、広域通信部15、短距離無線通信部16、カメラ部17などが接続されており、入出力プログラムにしたがってCPU11はそれらの動作を制御する。
FIG. 2 is a block diagram showing basic components of the sales processing device (tablet terminal) 1.
The
タッチ入力表示部13は、表示パネルとタッチパネル(図示省略)を有し、高精細な表示パネルの前面にタッチパネルを配置することによりその画面(タッチ画面)上に各種のソフトウェアキー(タッチキー)として、図示省略したが、例えば、商品登録モード、設定モードなどの各種の動作モードに切り替えるモードキー、また、商品登録モードにおいては、数値キー、商品別登録キー、出金キー、預り金キー(締めキー)などを割当て配置してその機能名を表示したり、処理メニューなどを表示したりするもので、指などによるタッチ操作を感知してそのタッチ操作に応じたデータを入力する。
The touch
キー操作部14は、押しボタン式の電源キー(図示省略)などを有している。広域通信部15は、公衆回線網3に通信接続し、短距離無線通信部16は、例えば、無線LAN(Local Area Network)又はBluetooth(登録商標)通信を介してスキャナ装置5、プリンタ装置6、ドロア装置7に通信接続する通信インターフェイスである。カメラ部17は、出金に絡む特定処理時(ドロアオープン時や出金時)に起動されて、操作者の顔を中心に撮影を行うもので、CPU11は、その顔画像(操作者の撮影画像)をタッチ入力表示部13の画面(タッチ画面)上に表示させる。なお、カメラ部17は、静止画像に限らず、動画像も撮影が可能なデジタルカメラであり、タッチ画面上には、顔画像として静止画像又は動画像が表示される。
The key operation unit 14 has a push button type power key (not shown) and the like. The wide-
図3(1)は、タッチ入力表示部13の画面(タッチ画面)上の表示内容を示した図である。
すなわち、図3(1)は、商品別に売上データを登録する商品登録モード時において、タッチ画面上に表示される表示内容を示したもので、このタッチ画面は、ソフトウェアキー(タッチキー)として、商品A〜H別の商品登録キー、小計キー、現金キー、訂正キー、テンキーなどが表示されている商品登録画面である。タッチ入力表示部13の前面(タッチ画面)の上側中央部には、タッチ画面の表示内容を見ながら操作する操作者の顔を撮影可能とするためにカメラ部17が配置されている。なお、その撮影パラメータとしては、タッチ画面を見ながらタッチ操作を行っている操作者の顔全体を撮影可能な画角に設定されていると共に、顔全体が画面一杯に写るようなズーム値に設定されている。
FIG. 3A is a diagram showing the display content on the screen (touch screen) of the touch
That is, FIG. 3A shows the display contents displayed on the touch screen in the product registration mode in which sales data is registered for each product. This touch screen is a software key (touch key). It is a product registration screen on which product registration keys for each of products A to H, a subtotal key, a cash key, a correction key, a numeric keypad, and the like are displayed. A
図3(2)は、不正される可能性が高い特定処理の実行を指示する操作が行われた際にその操作に応じて操作者を撮影した画像(顔画像)をタッチ画面上に表示した場合を例示した図である。
CPU11は、商品登録モードにおいて一顧客分の登録終了時に現金キーが操作されることにより特定処理(第1実施形態においてはドロアオープン処理)が指示された際に、この特定処理(ドロアオープン処理)が実行されている間、操作者を撮影するようにカメラ部17を制御するようにしている。そして、CPU11は、このカメラ部17で撮影された操作者の顔画像を取得して、商品登録画面上にその表示内容(登録キー、小計キー、現金キーなど)と共に操作者の顔画像を表示させるようにしている。なお、操作者が自分自身の顔を十分に認識することが可能な大きさ(例えば、名刺サイズ)で顔画像が表示される。
In FIG. 3B, when an operation for instructing execution of a specific process that is likely to be fraudulent is performed, an image (face image) of the operator is displayed on the touch screen according to the operation. It is the figure which illustrated the case.
When the cash key is operated at the end of registration for one customer in the product registration mode to instruct the specific processing (drawer open processing in the first embodiment), the
操作者の顔画像は、特定処理(ドロアオープン処理)が所定の条件下で実行された場合に表示されるもので、“所定の条件”とは、特定処理(ドロアオープン処理)がどのような条件で実行されたのかを示し、第1実施形態においては、所定の時間帯(例えば、深夜や早朝の時間帯、営業外の時間帯)を意味している。すなわち、ドロアオープン処理の実行を指示する現金キーが所定の条件(所定の時間帯)に操作された際に、CPU11は、ドロアオープン処理の実行時に操作者の顔画像と共に、操作者の顔画像を記録中である旨のメッセージをタッチ画面(商品登録画面)上に表示させるようにしている。なお、図示の例では、商品登録画面上の空き領域に、顔画像及び記録中メッセージを表示するようにしたが、ドロアオープン中には使用されることがない登録キー、小計キーなどの表示領域上に重ね合わせて顔画像を表示するようにしてもよい。
The face image of the operator is displayed when the specific process (drawer open process) is executed under a predetermined condition, and the “predetermined condition” is what the specific process (drawer open process) is. In the first embodiment, it indicates a predetermined time zone (for example, a midnight or early morning time zone, a non-business time zone). That is, when the cash key instructing the execution of the drawer open process is operated under a predetermined condition (predetermined time period), the
次に、第1実施形態における売上処理装置(タブレット端末)1の動作概念を図4及び図5に示すフローチャートを参照して説明する。ここで、これらのフローチャートに記述されている各機能は、読み取り可能なプログラムコードの形態で格納されており、このプログラムコードにしたがった動作が逐次実行される。また、ネットワークなどの伝送媒体を介して伝送されてきた上述のプログラムコードに従った動作を逐次実行することもできる。このことは後述する他の実施形態においても同様であり、記録媒体の他に、伝送媒体を介して外部供給されたプログラム/データを利用して本実施形態特有の動作を実行することもできる。なお、図4及び図5は、売上処理装置1の全体動作のうち、本実施形態の特徴部分の動作概要を示したフローチャートであり、この図4及び図5のフローから抜けた際には、全体動作のメインフロー(図示省略)に戻る。
Next, the operation concept of the sales processing device (tablet terminal) 1 in the first embodiment will be described with reference to the flowcharts shown in FIGS. 4 and 5. Here, each function described in these flowcharts is stored in the form of a readable program code, and the operation according to this program code is sequentially executed. Further, the operation according to the above-mentioned program code transmitted via a transmission medium such as a network can be sequentially executed. This is the same in other embodiments described later, and it is also possible to execute the operation peculiar to this embodiment by using a program/data externally supplied via a transmission medium in addition to the recording medium. 4 and 5 are flowcharts showing an outline of the operation of the characteristic part of the present embodiment in the overall operation of the
図4及び図5は、商品登録モードに切り替えられた際に実行開始される第1実施形態の特徴的な動作を説明するためのフローチャートである。
先ず、CPU11は、商品登録モードに切り替えられると、図3(1)に示すような商品登録画面をタッチ入力表示部13に表示させる(図4のステップA1)。この状態において、商品登録を指示する商品別登録キーがタッチ操作されたかを調べたり(ステップA2)、特定処理(ドロアオープン処理)の実行を指示する操作(現金キー操作)が行われたかを調べたりする(ステップA2)。
FIG. 4 and FIG. 5 are flowcharts for explaining the characteristic operation of the first embodiment that is started when the product registration mode is switched to.
First, when the
商品別登録キーが操作されたときには(ステップA2でYES)、その商品の売上データを記憶部12内の商品別合計器(図示省略)などに登録する処理(ステップA3)を行った後、ステップA2に戻る。また、商品別登録キー及び現金キー以外のキー(例えば、小計キー、訂正キーなど)が操作されたときには(ステップA4でNO)、その操作に応じた処理として小計処理、訂正処理などを実行(ステップA5)した後、上述のステップA2に戻る。
When the product-specific registration key is operated (YES in step A2), after performing a process (step A3) of registering sales data of the product in a product-specific totalizer (not shown) in the
いま、特定処理(ドロアオープン処理)の実行を指示する操作(現金キーの操作)が行われたときには(ステップA4でYES)、その特定処理の開始に先だって、カメラ部17によって撮影された操作者の撮影画像を取得して、その撮像画像から操作者の写り具合を解析し、操作者を認識するのに困難な写り具合であるか(後述するが、操作者が意図的に隠れているような写り具合であるか)を判別し、意図的に隠れていれば、その特定処理の実行を抑制するようにしている。この場合、特定処理を実行しないように制御するようにしている。
Now, when an operation (an operation of the cash key) for instructing the execution of the specific process (drawer open process) is performed (YES in step A4), the operator photographed by the
すなわち、CPU11は、現金キーの操作に応答して、カメラ部17で撮影された操作者の顔画像を取得し(ステップA6)、その撮影画像を記憶部12内の画像メモリ(図示省略)に記録保存する動作を開始する(ステップA7)。そして、この撮影画像を解析することによって操作者の顔の写り具合を判別し(ステップA8)、操作者がカメラ部17に写らないように意図的に隠れているかを調べる(ステップA9)。ここで、本実施形態において“意図的に隠れている”とは、操作者が現金キーの操作時に手などでカメラ部17のレンズ部分を覆っている場合(例えば、画像全体が暗い場合、顔の前に遮蔽物がある場合)の他、現金キーの操作時に顔の大部分(例えば、3/4以上)が撮影範囲の外にある場合などである。なお、マスク着用及びサングラス着用によって目、鼻、口が隠れている場合にも“意図的に隠れている”に含めるようにしてもよい。
That is, the
このように操作者が意図的に隠れる動作を行っていると判断した場合には(ステップA9でYES)、その動作が所定時間(例えば、5秒間)以上継続したかを調べる(ステップA10)。いま、意図的な隠れ動作が所定時間以上継続しているときには(ステップA10でYES)、不正者の可能性があるものと判断して特定処理(ドロアオープン処理)を禁止する旨のメッセージを、タッチ画面(商品登録画面)上にその表示内容と共に表示させる(ステップA11)。図6(1)は、この禁止メッセージの表示例を示したもので、タッチ画面(商品登録画面)上にはその表示内容(登録キーなど)と共に禁止メッセージが表示された場合である。その後、上述のステップA2に戻る。 When it is determined that the operator is intentionally hiding (YES in step A9), it is checked whether the operation has continued for a predetermined time (for example, 5 seconds) or more (step A10). Now, when the intentional hiding action continues for a predetermined time or longer (YES in step A10), a message indicating that there is a possibility of an illicit person and prohibiting the specific process (drawer open process) is displayed. It is displayed together with the display contents on the touch screen (product registration screen) (step A11). FIG. 6(1) shows a display example of the prohibition message, in which the prohibition message is displayed on the touch screen (product registration screen) together with the display content (registration key or the like). Then, the process returns to step A2 described above.
一方、現金キーの操作時に操作者が意図的に隠れていない場合、又は瞬間的に隠れた状態になっても所定時間継続しなかった場合には(ステップA9でNO)、図5のステップA12に移り、計時機能によって得られた現在時刻に基づいて現在の時間帯を判別する。そして、現金キーが操作された際の現在時刻が所定の時間帯(例えば、不正される可能性の高い深夜や早朝の時間帯、営業外の時間帯)であるかを調べ(ステップA13)、所定の時間帯でなければ(ステップA13でNO)、特定処理(ドロアオープン処理)を実行してドロア装置7にオープン指示信号を送信し、ドロアを開放させる(ステップA14)
。その後、ドロアが人為的に閉じられた際にドロア装置7側から出力されるドロアクローズ信号を受信したことを条件(ステップA15)に、図4のステップA2に戻る。
On the other hand, if the operator intentionally does not hide when the cash key is operated, or if the operator does not continue for the predetermined time even if the operator temporarily hides (NO in step A9), step A12 in FIG. Then, the current time zone is determined based on the current time obtained by the time counting function. Then, it is checked whether or not the current time when the cash key is operated is in a predetermined time zone (for example, a late night or early morning time zone where there is a high possibility of being fraudulent, or a non-business time zone) (step A13). If it is not within the predetermined time period (NO in step A13), a specific process (drawer open process) is executed, an open instruction signal is transmitted to the
.. After that, on condition that the drawer close signal output from the
また、現金キーの操作時が所定の時間帯内であれば(ステップA13でYES)、撮影画像(操作者の顔画像)を取得して、図3(2)に示すようにタッチ画面(商品登録画面)上にその表示内容と共に撮影画像(操作者の顔画像)を表示させる(ステップA16)。この場合、商品登録画面上の空き領域に撮影画像(操作者の顔画像)を表示させる。また、撮影画像が動画であれば、撮影画像を逐次取得しながら表示する動作を開始する。そして、操作者の顔画像を記録保存中である旨のメッセージを撮影画像と共に、商品登録画面上に表示させる(ステップA17)。その後、特定処理(ドロアオープン処理)を実行してドロアを開放させる(ステップA18)。 If the cash key is operated within the predetermined time period (YES in step A13), the captured image (face image of the operator) is acquired and the touch screen (product shown in FIG. 3B) is displayed. The photographed image (face image of the operator) is displayed on the registration screen together with the displayed contents (step A16). In this case, the captured image (face image of the operator) is displayed in an empty area on the product registration screen. If the captured image is a moving image, the operation of displaying the captured images sequentially is started. Then, a message indicating that the face image of the operator is being recorded and stored is displayed together with the captured image on the product registration screen (step A17). After that, a specific process (drawer open process) is executed to open the drawer (step A18).
そして、ステップA19に移り、ドロアが人為的にクローズされたか、つまり、ドロア装置7側からドロアクローズ信号を受信したかを調べ、クローズ信号を受信したときには(ステップ19AでYES)、図4のステップA2に戻るが、ドロアクローズ信号を受信しなければ(ステップA19でNO)、上述の場合(ステップA8〜A10)と同様の処理(ステップA20〜A22)に移る。
Then, the process proceeds to step A19, and it is checked whether the drawer is artificially closed, that is, whether the drawer closing signal is received from the
すなわち、カメラ部17で撮影された操作者の顔画像を取得して、操作者の顔の写り具合を判別し(ステップA20)、操作者が意図的に隠れているかを調べたり(ステップA21)、隠れている状態が所定時間(例えば、2秒間)以上継続しているかを調べたりする(ステップA22)。なお、上述したステップA8〜A10は、ドロアのオープン前の処理であるため、隠れている状態の継続時間を“5秒”としたが、今回のステップA20〜A22は、ドロアのオープン中であるために不正防止の観点から継続時間を“3秒”として、より短くしたが、これらを同一の時間(例えば、3秒)としてもよい。
That is, the face image of the operator captured by the
ここで、操作者が意図的に隠れていない場合には、又は瞬間的に隠れた状態になっても所定時間継続していない場合には(ステップA21でNO)、図4のステップA2に戻るが、操作者が意図的に隠れている状態が所定時間以上継続しているときには(ステップA22でYES)、特定処理を中断させるために、ドロア装置7に対してクローズ指示信号を送信して、ドロアを強制的に閉じさせる(ステップA23)。そして、図6(2)に示すように特定処理(ドロアオープン処理)を中断した旨のメッセージをタッチ画面(商品登録画面)に表示させる(ステップA24)。
If the operator has not intentionally hidden, or if the operator has hidden for a certain period of time and has not continued for a predetermined time (NO in step A21), the process returns to step A2 in FIG. However, when the state in which the operator intentionally hides continues for a predetermined time or longer (YES in step A22), a close instruction signal is transmitted to the
更に、店内などに居る警備員所持の携帯端末装置4に接続して、その操作者の撮影画像と共に不正者の確認を要請するメッセージを送信する他、図6(2)に示すように警告報知する旨の警告メッセージ(例えば、警備要請を行った旨のメッセージ又はアラーム音を発生する旨のメッセージ)をタッチ画面(商品登録画面)内に表示させる(ステップA25)。図6(2)は、タッチ画面(商品登録画面)上にその表示内容と共に、操作者の顔画像、中断メッセージ、警告メッセージが表示された場合である。その後、図4のステップA2に戻る。なお、この警告を行った時点で特定処理を強制終了させて一時停止状態にしてもよい。
Further, in addition to transmitting a message requesting confirmation of an illegal person together with a photographed image of the operator by connecting to the portable
以上のように、第1実施形態において売上処理装置1のCPU11は、各種処理の内での特定処理を検出すると、カメラ部17で撮影された操作者の撮影画像を取得し、この撮影画像をタッチ入力表示部13の表示画面上に表示内容と共に表示するようにしたので、操作者を撮影していることを操作者自身に知らせて不正行為を牽制することができると共に、不正される可能性が高い場合に不正行為を適切に牽制することができ、不正防止効果の高いものとなる。つまり、操作者の撮影画像が特定処理のための表示内容と同時に表示されるので、操作者は自身の撮影画像を見ながら操作することになり、不正操作を心理的に抑制することができ、また、操作者の撮影画像を常時表示するのではなく、必要最小限の牽制で不正を適切に防止することができ、不正者ではない操作者が持つ抵抗感(自分が撮影されているという抵抗感)を大幅に軽減することも可能となり、不正目的ではない操作者にも納得がいくものとなる。
As described above, in the first embodiment, when the
CPU11、特定処理が所定の条件下で実行されるのか否かを判別し、所定の条件下で実行される場合に操作者を撮影した撮影画像をタッチ画面上に表示するようにしたので、特定処理の実行時に無条件に不正行為を牽制するのではなく、不正される可能性が高い時間帯(例えば、深夜や早朝、営業外などの危険な時間帯)に限って不正行為を牽制することが可能となる。
The
CPU11は、特定処理が実行されている間、操作者を撮影するようにカメラ部17を制御するようにしたので、不正される可能性の高い特定処理の実行時に限って操作者を撮影することができ、特定処理以外の各種の処理時には操作者を撮影して表示しないような制御が可能となる。
Since the
操作者の撮影画像を表示すると共に、その撮影画像を記録している旨のメッセージを表示するようにしたので、不正行為に対する牽制力を更に高めることができる。 Since the photographed image of the operator is displayed and the message indicating that the photographed image is recorded is displayed, it is possible to further enhance the restraint power against illegal acts.
CPU11は、特定処理の開始に先だって、撮影画像から操作者の写り具合を解析した結果、操作者を認識するのに困難な写り具合であれば、特定処理の実行を抑制するようにしたので、不正行為を未然に防ぐことができる。
Before the start of the specific process, the
CPU11は、操作者による意図的な隠れ動作によって操作者を認識するのに不可能な写り具合であれば、その特定処理を実行しないように制御するようにしたので、意図的な隠れ動作を行う者は不正者の可能性が高いと認めて特定処理を禁止することができ、不正行為を未然に防ぐことができる。
The
特定処理の実行を抑制する場合に、その旨をメッセージ出力するようにしたので、操作者が不正者でなければ、正しく撮影されるように姿勢など正すことによって即座に特定処理の実行に移行させることができる。 When the execution of the specific process is suppressed, a message to that effect is output, so if the operator is not an unauthorized person, the posture is corrected so that the image is correctly captured, and immediately the execution of the specific process is performed. be able to.
特定処理の実行中に撮影画像が表示されている場合において、その撮影画像内の操作者の写り具合を解析した結果、操作者による意図的な隠れ動作によって操作者を認識するのに不可能な写り具合であれば、その特定処理を中断するようにしたので、特定処理の実行中であっても、意図的な隠れ動作を行う者は不正者であると認めて特定処理を中断することができ、不正行為をその直前で防ぐことができる。 When the captured image is displayed during the execution of the specific process, the result of analyzing the appearance of the operator in the captured image shows that it is impossible to recognize the operator due to the intentional hiding motion by the operator. If the image is in the state of reflection, the specific process is interrupted. Therefore, even if the specific process is being executed, the person performing the intentional hiding action may be recognized as an illegal person and the specific process may be interrupted. It is possible to prevent cheating just before that.
特定処理を中断する場合に、中断する旨のメッセージを出力するようにしたので、操作者が不正者でなければ、正しく撮影されるように姿勢など正すことによって即座に特定処理の実行に移行させることが可能となる。 When the specific process is interrupted, a message to the effect that it is interrupted is output, so if the operator is not a fraudulent person, the posture is corrected so that the image is captured correctly, and the specific process is immediately executed. It becomes possible.
操作者による意図的な隠れ動作によって操作者を認識するのに不可能な写り具合であれば、その撮影画像を外部に通報したり、警告報知する旨の警告メッセージを出力したりするようにしたので、警備員の要請などの緊急対応が可能となると共に、更に牽制力を高めることができる。 If it is impossible to recognize the operator due to the intentional hiding motion by the operator, the captured image is reported to the outside and a warning message is output to warn the operator. Therefore, an emergency response such as a request from a security guard can be performed, and the restraint power can be further enhanced.
現金を収納するドロアとの連携で売上処理を行う売上処理装置1において、表示画面上の表示内容に対する指示操作に応じて実行する特定処理は、ドロアを開放させるドロアオープン処理であり、不正される可能性の高いドロアオープン時に不正を牽制することができる。
In the
表示画面は、タッチ操作が可能なタッチ画面であり、このタッチ画面に操作者の撮影画像を表示するようにしたてので、操作者はタッチ画面を見ながら操作する際に自分の撮影画像も合わせて見ることになり、不正行為に対する牽制力を更に高めることができる。 The display screen is a touch screen that can be touch-operated, and since the operator's captured image is displayed on this touch screen, the operator can also adjust his or her captured image when operating while looking at the touch screen. It can be seen from the above, and the restraint power against fraud can be further enhanced.
なお、上述した第1実施形態においては、特定処理(ドロアオープン処理)の実行を指示する現金キーが所定の条件下(例えば、深夜や早朝の時間帯、営業外の時間帯)で操作された際に、操作者の撮影画像を表示するようにしたが、所定の条件は、時間帯に限らず、例えば、店内が込み合ったり、人手が不足したりする所定の曜日、日時、期間などの他、ドロアに収納されている現金が所定金額(例えば、5千円)以上の場合であってもよく、更に、時間帯及び金額の両方を所定の条件としてもよい。 In the first embodiment described above, the cash key for instructing execution of the specific process (drawer open process) is operated under a predetermined condition (for example, a late night or early morning time period, a non-business time period). At this time, the photographed image of the operator is displayed, but the predetermined condition is not limited to the time zone, for example, the predetermined day of the week, the date and time, the period when the store is crowded or the manpower is insufficient. The cash stored in the drawer may be a predetermined amount (for example, 5,000 yen) or more, and both the time zone and the amount may be predetermined conditions.
上述した第1実施形態においては、現金キーの操作時に特定処理を実行する場合を示したが、出金キーの操作時に特定処理を実行する場合であってもよい。 In the above-described first embodiment, the case where the specific process is executed when the cash key is operated has been described, but the specific process may be executed when the cash dispense key is operated.
上述した第1実施形態においては、撮影画像が操作者を認識するのに困難な写り具合であれば、特定処理を行わないように制御するようにしたが、特定処理の一部だけの実行に抑制するようにしてもよい。 In the above-described first embodiment, if the captured image is in a state in which it is difficult to recognize the operator, the control is performed so that the specific process is not performed. However, only a part of the specific process is executed. You may make it suppress.
また、第1実施形態においては、特定処理を中断するようにしたが、特定処理を停止(ロック)するようにしてもよい。 Further, in the first embodiment, the specific process is interrupted, but the specific process may be stopped (locked).
(第2実施形態)
以下、この発明の第2実施形態について図7〜図10を参照して説明する。
なお、上述した第1実施形態は、表示画面上の表示内容に対する指示操作に応じて各種処理を実行する表示処理装置として、売上処理装置(タブレット端末)に適用した場合を例示したが、この第2実施形態においては、本人認証を前提とする特定処理(現金支払い処理)を実行する金融機関側のATM(現金自動預け払い機)に適用した場合である。ここで、両実施形態において基本的或いは名称的に同一のものは、同一符号を付して示し、その説明を省略すると共に、以下、第2実施形態の特徴部分を中心に説明するものとする。
(Second embodiment)
The second embodiment of the present invention will be described below with reference to FIGS.
Note that the first embodiment described above exemplifies a case where the present invention is applied to a sales processing device (tablet terminal) as a display processing device that executes various processes according to an instruction operation on display contents on a display screen. The second embodiment is a case where the present invention is applied to an ATM (Automatic Teller Machine) on the financial institution side that executes a specific process (cash payment process) that requires personal authentication. Here, in both the embodiments, the same basic or nominal items are denoted by the same reference numerals, the description thereof will be omitted, and the characteristic part of the second embodiment will be mainly described below. ..
図7は、ATM(現金自動預け払い機)8の基本的な構成要素を示したブロック図である。
ATM8は、表示画面上の表示内容に対する指示操作に応じて各種処理を実行するもので、その中核を成すCPU81は、記憶部82内の各種のプログラムに応じてこのATM8の全体動作を制御する。記憶部82は、各種のプログラムや情報を記憶するもので、図8及び図9に示した動作手順に応じて本実施形態を実現するためのプログラムや各種のアプリケーションなどが格納されている。CPU81にはその入出力デバイスとして、タッチ表示部83、カメラ部84、カード処理部85、金銭入出力部86、印字部87などが接続されている。
FIG. 7 is a block diagram showing basic components of an ATM (Automatic Teller Machine) 8.
The
タッチ表示部83は、利用者(操作者)に対して取引内容を案内表示したり、操作者によるタッチ操作で取引情報を入力したりするもので、カメラ部84は、その利用者(操作者)の顔を撮影するもので、例えば、タッチ画面の上側中央部に配置されている。カード処理部85は、キャッシュカードやICカードなどに対するカードリーダライタであり、金銭入出力部86は、金銭の入出金を処理する金銭授受部である。印字部87は、明細票の印字を行ったり、通帳への印字を行ったりする。このように構成されたATM8においても、第1実施形態と同様に、各種処理の内で特定処理の実行を指示する操作を検出すると、その操作者を撮影した画像を取得して、表示画面上にその表示内容と共に表示するようにしている。この場合、第2実施形態の特定処理は、本人認証を前提とする処理(現金支払い処理)である。
The
図8は、ATM8の外観図である。
ATM8は、下部ユニット88と上部ユニット89を有し、この下部ユニット88の上面部には、タッチ表示部83が配設され、更に、紙幣専用の金銭入出部86と硬貨専用の金銭入出部86が配設されている。また、上部ユニット89の前面部には、カード出入口を備えたカード処理部85と、通帳又は単票の出入口を備えた印字部87が配設されている他、この上部ユニット89の前面部の中央部分には、カメラ部84が配設されている。カメラ部84は、タッチ表示部83を操作したり、カード処理部85からカードを投入したりしている利用者(操作者)の顔を撮影可能とするために、その撮影方向が斜め上方向(利用者の顔方向)に設定されているもので、利用者(操作者)の顔全体を所定の大きさで撮影する。このカメラ部84によって撮影された画像は、図示のようにタッチ表示部83の画面(タッチ画面)上にその表示内容と共に表示される。
FIG. 8 is an external view of the
The
図9及び図10は、第2実施形態において、電源投入に応じて実行開始されるATM8の全体動作のうち、本実施形態の特徴部分の動作概要を示したフローチャートである。
先ず、ATM8のCPU81は、取引メニュー画面をタッチ表示部83に表示させる(図9のステップB1)。この状態において、“現金支払い”のメニュー項目が選択されたかを調べ(ステップB2)、その他のメニュー項目(例えば、“入金”、“残高照会”などのメニュー項目)が選択されたときには(ステップB2でNO)、次のステップB3に移り、選択メニューに対応する処理として、例えば、入金処理、残高照会処理などを行った後、上述のステップB1に戻る。
9 and 10 are flowcharts showing an outline of the operation of the characteristic part of the present embodiment among the overall operations of the
First, the
いま、“現金支払い”のメニュー項目が選択されたときには(ステップB2でYES)、その特定処理(現金支払い処理)の開始に先だって、カメラ部17で撮影された操作者の顔画像を取得し(ステップB4)、その撮影画像を記憶部12内の画像メモリ(図示省略)に記録保存する動作を開始する(ステップB5)。そして、この撮影画像を解析することによって操作者の顔の写り具合を判別し(ステップB6)、カメラ部17に写らないように操作者が意図的に隠れているかを調べ(ステップB7)、意図的に隠れている場合には(ステップB7でYES)、その状態が所定時間(例えば、5秒間)以上継続しているかを調べる(ステップB8)。いま、意図的な隠れ動作が所定時間以上継続しているときには(ステップB8でYES)、不正者の可能性が高いものと認めて特定処理(現金支払い処理)を禁止する旨のメッセージをタッチ画面(取引メニュー画面)上に表示(ステップB9)させた後、上述のステップB1に戻る。
Now, when the "cash payment" menu item is selected (YES in step B2), the face image of the operator photographed by the
一方、操作者が意図的に隠れていない場合、又は瞬間的に隠れていた状態となっても所定時間継続していない場合には(ステップB7でNO)、図10のフローに移り、顔認証処理(第1の認証処理)を行うと共に(ステップB10)、この第1の認証処理とは異なる他の方法で本人認証を行う暗号番号認証処理(第2の認証処理)を行う(ステップB11)。この顔認証処理は、カメラ部17から取得した撮影画像(顔画像)と予め登録されている顧客の顔画像とを比較してその類否判断で本人確認を行うが、その際、類似判断の許容誤差は、予め広め(緩め)に設定されている。このように顔認証処理は、その精度を低めに設定することにより、パスワードを照合する暗号番号認証処理に対してその補助的、或いは二次的な認証処理とも言えるが、2重の認証処理によって全体として本人認証の精度は高くなる。
On the other hand, if the operator has not intentionally hidden, or if the operator has hidden for a moment and has not continued for a predetermined time (NO in step B7), the process moves to the flow of FIG. The processing (first authentication processing) is performed (step B10), and the encryption number authentication processing (second authentication processing) for performing personal authentication by another method different from the first authentication processing is performed (step B11). .. In this face authentication processing, a photographed image (face image) acquired from the
この第1及び第2の認証処理の結果、本人を確認できたか、つまり、“認証OK”であるかを調べ(ステップB12)、顔認証、暗号番号認証のいずれか一つでも本人確認ができなければ(ステップB12でNO)、リトライ回数を計数するカウンタ(図示省略)に“1”を加算してその値を更新する処理(ステップB13)を行った後、上述のステップB10に戻る。また、顔認証、暗号番号認証の結果、“認証OK”であってもリトライ回数が制限値(例えば、4回)を超えたときには(ステップB14でYES)、特定処理(現金支払い処理)を禁止するために図9のステップB1に戻るが、リトライ回数が制限値を超える前に“認証OK”となったときには(ステップB12でYES、ステップB14でNO)、特定処理(現金支払い処理)を開始する(ステップB15)。なお、現金支払い処理が開始されると、タッチ画面の表示内容は、その処理の進行に応じて変化する取引画面に順次切り替えられる。 As a result of the first and second authentication processing, it is checked whether or not the person can be confirmed, that is, whether the person is "authentication OK" (step B12), and the person can be confirmed by any one of face authentication and encryption number authentication. If not (NO in step B12), "1" is added to the counter (not shown) that counts the number of retries and the value is updated (step B13), and then the process returns to step B10. Further, as a result of face authentication and encryption number authentication, even if the authentication is OK, if the number of retries exceeds the limit value (for example, 4 times) (YES in step B14), the specific processing (cash payment processing) is prohibited. In order to do so, the process returns to step B1 in FIG. 9, but when the “authentication is OK” before the number of retries exceeds the limit value (YES in step B12, NO in step B14), the specific process (cash payment process) is started. (Step B15). When the cash payment process is started, the display content of the touch screen is sequentially switched to the transaction screen that changes according to the progress of the process.
そして、特定処理(現金支払い処理)が所定の条件下で実行されるのか否かを判別する(ステップB16〜B18)。ここで、所定の条件下は、“顔認証時の誤差”、“所定の時間帯”、“所定金額以上の取引”のいずれか場合である。すなわち、上述したように顔認証処理は、類似判断の許容誤差を広め(緩め)に設定されているので、その許容誤差内であるがその誤差が所定値以上の場合であるか、所定値未満の場合であるかを調べる(ステップB16)。更に、その取引時が所定の時間帯(例えば、深夜や早朝などの危険な時間帯)であるかを調べたり(ステップB17)、その取引金額が所定金額(例えば、10万円)以上の場合であるかを調べたりする(ステップB18)。 Then, it is determined whether or not the specific process (cash payment process) is executed under a predetermined condition (steps B16 to B18). Here, the predetermined condition is any one of "error during face authentication", "predetermined time period", and "transaction over predetermined amount". That is, as described above, in the face authentication processing, the allowable error for similarity determination is set to be wider (loose), so that the error is within the allowable error but is greater than or equal to a predetermined value, or less than the predetermined value. It is checked whether this is the case (step B16). Further, it is checked whether the transaction is in a predetermined time zone (for example, a dangerous time zone such as midnight or early morning) (step B17), and the transaction amount is a predetermined amount (for example, 100,000 yen) or more. (Step B18).
ここで、許容誤差内であるがその誤差が所定値以上の場合(ステップB16でYES)、又は取引時が所定の時間帯に該当する場合(ステップB17でYES)、或いは取引金額が所定金額以上の場合には(ステップB18でYES)、撮影画像(操作者の顔画像)を取得して、タッチ画面(取引画面)上にその表示内容と共に撮影画像(操作者の顔画像)を表示させる(ステップB19)。更に、タッチ画面(取引画面)上に操作者の顔画像を記録保存中である旨のメッセージを表示させる(ステップB20)。そして、実行中の特定処理(現金支払い処理)が完了したことを条件として(ステップB21)、図9のステップB1に戻る。 Here, if the error is within the permissible error but is equal to or more than a predetermined value (YES in step B16), or if the transaction time falls within a predetermined time zone (YES in step B17), or the transaction amount is equal to or more than the predetermined amount. In the case of (YES in step B18), the captured image (face image of the operator) is acquired, and the captured image (face image of the operator) is displayed on the touch screen (transaction screen) together with the display content ( Step B19). Further, a message indicating that the face image of the operator is being recorded and stored is displayed on the touch screen (transaction screen) (step B20). Then, on condition that the specific process (cash payment process) being executed is completed (step B21), the process returns to step B1 in FIG.
以上のように、第2実施形態においては、本人認証を前提とする特定処理を行う場合に、不正行為の牽制用として取得した撮影画像と予め登録されている顔画像とを比較して本人認証を行うようにしたので、不正牽制用の撮影画像を用いて本人認証を行うことができる。 As described above, in the second embodiment, in the case of performing the specific processing premised on the personal authentication, the captured image acquired for restraint of the misconduct and the face image registered in advance are compared to perform the personal authentication. Since this is performed, it is possible to perform personal authentication using the captured image for fraudulent restraint.
特定処理の前提として、顔画像による認証処理と暗証番号による認証処理を行うようにしたので、全体として本人認証の精度を高めることができる。 As the premise of the specific processing, since the authentication processing by the face image and the authentication processing by the personal identification number are performed, the accuracy of the personal authentication can be improved as a whole.
顔画像による認証処理として、予め広め(緩め)に設定されている許容誤差内であるか否かの類似判断を行った結果、許容誤差内であるがその誤差が所定値以上の場合には、撮影画像を表示し、所定値未満の場合には撮影画像を表示しないよう制御するようにしたので、許容誤差を広め(緩め)にして精度を低く設定したとしても操作者の顔表示によりそれを補うことができ、不正操作を牽制することが可能となる。 As a result of performing a similarity judgment as to whether the error is within a permissible error set in advance (loose) as the authentication process using the face image, if the error is within the permissible error but the error is equal to or more than a predetermined value, The captured image is displayed, and if it is less than the specified value, the captured image is not displayed.Therefore, even if the tolerance is widened (loosed) and the accuracy is set low, it is displayed by the operator's face display. It is possible to make up for it and prevent unauthorized operations.
なお、上述した第2実施形態においては、所定の条件下での特定処理(現金支払い処理)の実行であるかを調べる際に、その所定の条件として、“顔認証時の誤差”、“所定の時間帯”、“所定金額以上の取引”を例示したが、リトライ回数が制限値(例えば、4回)に達しなくても所定値(2回)以上の場合であれば、その場合のリトライ回数を所定の条件として、撮影画像を表示するようにしてもよい。 In the second embodiment described above, when checking whether or not the specific process (cash payment process) is executed under a predetermined condition, the predetermined condition is “error during face authentication” and “predetermined condition”. ”Time zone” and “transaction over a predetermined amount” are illustrated, but if the number of retries does not reach the limit value (for example, 4 times) and it is more than a predetermined value (2 times), the retry in that case The captured image may be displayed with the number of times as a predetermined condition.
上述した第2実施形態においては、特定処理として本人認証を前提とする処理(現金支払い処理)を例示したが、本人認証を前提とする出金に絡む取引であれば、現金支払い処理に限らない。 In the above-described second embodiment, the process (cash payment process) that is based on the personal authentication is illustrated as the specific process, but the transaction is not limited to the cash payment process as long as it is a transaction involving withdrawal that is based on the personal authentication. ..
上述した第2実施形態においては、特定処理の前提として、2重の認証処理(顔画像による認証処理と暗証番号による認証処理)を行うようにしたが、2重の認証処理としては、顔画像による認証処理と指紋による認証処理であってもよい。 In the above-described second embodiment, the double authentication process (the authentication process using the face image and the authentication process using the personal identification number) is performed as the premise of the specific process. Alternatively, the authentication processing may be performed by the fingerprint authentication processing.
上述した第2実施形態においては、ATM(現金自動預け払い機)8に適用した場合を例示したが、認証処理を前提とする特定処理を行う認証端末やPC(パーソナルコンピュータ)などであってもよい。例えば、本人確認を行ってクレジット決済処理を行うPC、入場者を確認して入場ゲートを開放するゲート装置などであってもよい。その他、PDA(個人向け携帯型情報通信機器)、スマートフォンなどの携帯電話機であってもよい。 In the above-described second embodiment, the case where it is applied to the ATM (Automatic Teller Machine) 8 is illustrated, but it may be an authentication terminal or a PC (personal computer) that performs specific processing premised on the authentication processing. Good. For example, it may be a PC that confirms the identity and performs credit settlement processing, a gate device that confirms the visitors and opens the entrance gate, or the like. In addition, a mobile phone such as a PDA (personal portable information communication device) or a smartphone may be used.
上述した各実施形態においては、種処理の内で特定処理の実行を指示する操作を検出した際に、カメラ部17で撮影された操作者の撮影画像を取得するようにしたが、特定処理を実際に開始する際に、操作者の撮影画像を取得するようにしてもよい。
In each of the above-described embodiments, when the operation instructing the execution of the specific processing is detected in the seed processing, the captured image of the operator captured by the
上述した各実施形態においては、各種のメッセージを出力する場合に表示メッセージの他に、音声メッセージを合わせて出力したり、音声メッセージのみを出力したりするようにしてもよい。 In each of the above-described embodiments, when outputting various messages, a voice message may be output together with the display message, or only the voice message may be output.
上述した第1実施形態においては、内蔵型のカメラ部17(カメラ部84)をタッチ画面の前面の上側中央部に配設し、第2実施形態においては、上部ユニット89の前面部に中央部に配設したが、その配設位置は、任意であり、更に、売上処理装置1(ATM8)とは別体のカメラ装置を操作者の前方に配設し、この別体のカメラ装置を売上処理装置1(ATM8)から遠隔制御することにより操作者の顔を撮影するようにしてもよい。 In the above-described first embodiment, the built-in camera unit 17 (camera unit 84) is arranged in the upper central portion of the front surface of the touch screen, and in the second embodiment, the central portion is provided in the front portion of the upper unit 89. However, the installation position is arbitrary, and a camera device separate from the sales processing device 1 (ATM8) is installed in front of the operator, and the separate camera device is sold. The operator's face may be photographed by remote control from the processing device 1 (ATM8).
上述した各実施形態においては、表示画面としてタッチ画面を例示したが、タッチ画面に限らず、例えば、押しボタン式のキー操作部に隣接した表示画面であってもよい。このようにキー操作部と表示画面とを隣接する場合であっても、操作者は表示画面上の表示内容を見ながらキー操作を行うようになるため、自分自身の顔画像が表示されていることを確認することができる。また、表示画面上の表示内容は、処理メニュー、各種のガイダンスなどであってもよい。 In each of the above-described embodiments, the touch screen is illustrated as the display screen, but the display screen is not limited to the touch screen, and may be, for example, a display screen adjacent to the push button type key operation unit. Even when the key operation unit and the display screen are adjacent to each other as described above, the operator performs the key operation while watching the display content on the display screen, and thus the face image of himself is displayed. You can check that. Further, the display content on the display screen may be a processing menu, various guidances, or the like.
また、上述した各実施形態において示した“装置”や“部”とは、機能別に複数の筐体に分離されていてもよく、単一の筐体に限らない。また、上述したフローチャートに記述した各ステップは、時系列的な処理に限らず、複数のステップを並列的に処理したり、別個独立して処理したりするようにしてもよい。 Further, the “apparatus” and “unit” shown in each of the above-described embodiments may be separated into a plurality of housings according to their functions, and are not limited to a single housing. Further, each step described in the above-mentioned flowchart is not limited to the time-series processing, and a plurality of steps may be processed in parallel or may be processed independently.
以上、この発明の実施形態について説明したが、この発明は、これに限定されるものではなく、特許請求の範囲に記載された発明とその均等の範囲を含むものである。
以下、本願出願の特許請求の範囲に記載された発明を付記する。
(付記)
(請求項1)
請求項1に記載の発明は、
表示画面上の表示内容に対する指示操作に応じて各種処理を実行する表示処理装置であって、
前記各種処理の内での特定処理を検出する検出手段と、
前記検出手段によって特定処理が検出された場合に、操作者を撮影した画像を取得する取得手段と、
前記取得手段によって取得した撮影画像を前記表示画面上に表示内容と共に表示する表示制御を行う表示制御手段と、
を備えることを特徴とする、
(請求項2)
請求項2に記載の発明は、請求項1に記載の表示処理装置において、
前記表示制御手段は、所定の条件下での前記特定処理の実行であるかを判別し、所定の条件下での実行である場合に、前記取得した撮影画像を前記表示画面上に表示する、
ことを特徴とする。
(請求項3)
請求項3に記載の発明は、請求項1又は2に記載の表示処理装置において、
前記特定処理の開始に先だって、前記撮影画像内の操作者の写り具合を解析する解析手段と、
前記解析手段による解析の結果、操作者を認識するのに困難な写り具合であれば、前記特定処理の実行を抑制する処理抑制手段と、
を更に備える、
ことを特徴とする。
(請求項4)
請求項4に記載の発明は、請求項3に記載の表示処理装置において、
前記処理抑制手段は、前記解析手段による解析の結果、操作者による意図的な隠れ動作によって操作者を認識するのに不可能な写り具合であれば、その特定処理を実行しないように制御する、
ことを特徴とする。
(請求項5)
請求項5に記載の発明は、請求項1又は2に記載の表示処理装置において、
前記特定処理の実行中に前記表示画面上に前記撮影画像が表示されている場合に、前記撮影画像内の操作者の写り具合を解析する解析手段と、
前記解析手段による解析の結果、操作者による意図的な隠れ動作によって操作者を認識するのに不可能な写り具合であれば、その特定処理を中断する処理中断手段と、
を更に備える、
ことを特徴とする。
(請求項6)
請求項6に記載の発明は、請求項8に記載の表示処理装置において、
前記処理中断手段は、前記操作者による意図的な隠れ動作によって操作者を認識するのに不可能な写り具合であれば、その撮影画像を外部に通報、或いは、警告報知する旨の警告メッセージを出力する、
ことを特徴とする。
(請求項7)
請求項7に記載の発明は、請求項1乃至6のいずれか1項に記載の表示処理装置において、
前記特定処理は、本人認証を前提とする特定処理であり、前記取得した撮影画像と予め登録されている顔画像とを比較して本人認証を行う、
ことを特徴とする。
(請求項8)
請求項8に記載の発明は、請求項7に記載の表示処理装置において、
前記特定処理は、本人認証を前提とする特定処理であり、前記取得した撮影画像と予め登録されている顔画像とを比較して本人認証を行う第1の認証処理と、前記第1の認証処理とは異なる他の方法で本人認証を行う第2の認証処理とを行う、
ことを特徴とする。
(請求項9)
請求項9に記載の発明は、請求項7又は8に記載の表示処理装置において、
前記本人認証の処理は、前記取得した撮影画像と予め登録されている顔画像とを比較する際に、予め広めに設定されている許容誤差内であるか否かの類似判断を行い、
前記表示制御手段は、前記許容誤差内であるが誤差が所定値以上の場合には前記取得した撮影画像を前記表示画面上に表示し、前記誤差が前記所定値未満の場合には前記取得した撮影画像を前記表示画面上に表示させないよう制御する、
ことを特徴とする。
(請求項10)
請求項10に記載の発明は、請求項1乃至9のいずれか1項に記載の表示処理装置において、
当該処理装置は、現金を収納するドロアとの連携で売上処理を行う売上処理機能付の表示処理装置であって、
前記表示画面上の表示内容に対する指示操作に応じて実行する特定処理は、前記ドロアを開放させるドロアオープン処理である、
ことを特徴とする。
(請求項11)
請求項11に記載の発明は、請求項1乃至10のいずれか1項に記載の表示処理装置において、
前記表示画面は、タッチ操作が可能なタッチ画面、又は、操作部に隣接されている表示画面であり、
当該処理装置は、前記表示画面上の表示内容に対するタッチ操作に応じて各種処理を実行する、又は、前記表示画面に隣接している操作部上での操作に応じて各種処理を実行する、
ことを特徴とする。
(請求項12)
請求項12に記載の発明は、
表示画面上の表示内容に対する指示操作に応じて各種処理を実行する表示処理装置のコンピュータを制御するためのプログラムであって、
前記コンピュータを、
前記各種処理の内での特定処理を検出する検出手段と、
前記検出手段によって特定処理が検出された場合に、操作者を撮影した画像を取得する取得手段と、
前記取得手段によって取得した撮影画像を前記表示画面上に表示内容と共に表示する表示制御を行う表示制御手段と、
として機能させるためのプログラム。
Although the embodiment of the present invention has been described above, the present invention is not limited to this, and includes the invention described in the claims and the scope equivalent thereto.
The inventions described in the claims of the present application will be additionally described below.
(Appendix)
(Claim 1)
The invention according to
A display processing device for executing various processes according to an instruction operation for display contents on a display screen,
A detection unit that detects a specific process among the various processes,
An acquisition unit that acquires an image of the operator when a specific process is detected by the detection unit;
Display control means for performing display control for displaying the captured image acquired by the acquisition means on the display screen together with the display content;
Characterized in that,
(Claim 2)
The invention according to
The display control unit determines whether or not the specific process is executed under a predetermined condition, and when the specific process is executed, displays the acquired captured image on the display screen.
It is characterized by
(Claim 3)
The invention according to
Prior to the start of the specific processing, analysis means for analyzing the image quality of the operator in the photographed image,
As a result of the analysis by the analysis means, if it is difficult to recognize the operator, a processing suppressing means for suppressing the execution of the specific processing,
Further comprises,
It is characterized by
(Claim 4)
The invention according to
The processing suppressing means controls, as a result of the analysis by the analyzing means, not to execute the specific processing if the operator cannot recognize the operator due to an intentional hidden motion by the operator.
It is characterized by
(Claim 5)
The invention according to
When the photographed image is displayed on the display screen during the execution of the specific process, an analyzing unit that analyzes the appearance of the operator in the photographed image,
As a result of the analysis by the analysis means, if it is impossible to recognize the operator due to the intentional hidden motion by the operator, a processing interruption means for interrupting the specific processing,
Further comprises,
It is characterized by
(Claim 6)
The invention according to
The processing interruption means, if the photographer cannot recognize the operator due to the intentional hiding motion by the operator, reports the photographed image to the outside or a warning message to the effect that a warning is given. Output,
It is characterized by
(Claim 7)
According to a seventh aspect of the present invention, in the display processing device according to any one of the first to sixth aspects,
The specific process is a specific process premised on personal authentication, and performs personal authentication by comparing the acquired captured image with a face image registered in advance,
It is characterized by
(Claim 8)
The invention according to
The identification processing is identification processing premised on personal authentication, and includes a first authentication processing for performing personal authentication by comparing the acquired captured image with a face image registered in advance, and the first authentication. Perform a second authentication process in which the user is authenticated by another method different from the process,
It is characterized by
(Claim 9)
The invention according to claim 9 is the display processing apparatus according to
The personal identification processing, when comparing the obtained captured image with a face image registered in advance, performs a similarity determination as to whether or not it is within a preset wide tolerance,
The display control unit displays the acquired captured image on the display screen when the error is within the allowable error but is equal to or more than a predetermined value, and the acquired image is acquired when the error is less than the predetermined value. Control so that the captured image is not displayed on the display screen,
It is characterized by
(Claim 10)
The invention according to
The processing device is a display processing device with a sales processing function that performs sales processing in cooperation with a drawer that stores cash,
The specific process executed in response to the instruction operation for the display content on the display screen is a drawer open process for opening the drawer,
It is characterized by
(Claim 11)
The invention according to
The display screen is a touch screen capable of touch operation, or a display screen adjacent to the operation unit,
The processing device executes various processes in response to a touch operation on display contents on the display screen, or executes various processes in response to an operation on an operation unit adjacent to the display screen,
It is characterized by
(Claim 12)
The invention according to
A program for controlling a computer of a display processing device that executes various processes according to an instruction operation for display contents on a display screen,
The computer,
A detection unit that detects a specific process among the various processes,
An acquisition unit that acquires an image of the operator when a specific process is detected by the detection unit;
Display control means for performing display control for displaying the captured image acquired by the acquisition means on the display screen together with the display content;
Program to function as.
1 売上処理装置
3 公衆回線網
4 警備員所持の携帯端末装置
8 ATM
11、81 CPU
12、82 記憶部
13、83 タッチ入力表示部
17、84 カメラ部
1
11, 81 CPU
12, 82
Claims (4)
前記撮像手段と並べて配置された表示手段と、
前記撮像手段により撮像された操作者の画像を、前記表示手段に表示するとともに、録画する制御手段と、
を備え、
前記制御手段は、所定の処理の実行を指示するための操作を受け付ける操作手段を前記操作者の画像と前記撮像手段との間に介在するように前記表示手段に表示させるとともに、前記操作者の画像を録画している旨の表示を前記操作者の画像と並べて前記表示手段に表示させる、
ことを特徴とする表示制御装置。 Imaging means for imaging the operator ,
Display means arranged side by side with the imaging means ,
Control means for displaying and recording the image of the operator imaged by the imaging means on the display means,
Equipped with
The control unit causes the display unit to display an operation unit that receives an operation for instructing execution of a predetermined process so as to be interposed between the image of the operator and the imaging unit, and A display indicating that an image is being recorded is displayed on the display unit side by side with the image of the operator,
A display control device characterized by the above.
ことを特徴とする請求項1に記載の表示制御装置。 The control unit causes the display unit to display an image of the operator and a display indicating that the image of the operator is being recorded when the operation of the operation unit is accepted.
The display control device according to claim 1, wherein:
ことを特徴とする請求項1または2に記載の表示制御装置。 The control means starts recording an image of the operator when the operation of the operation means is accepted,
The display control device according to claim 1, wherein the display control device is a display control device.
前記撮像手段により撮像された操作者の画像を、前記表示手段に表示するとともに、録画する制御手段、Control means for displaying and recording the image of the operator imaged by the imaging means on the display means,
として機能させ、Function as
前記制御手段は、所定の処理の実行を指示するための操作を受け付ける操作手段を前記操作者の画像と前記撮像手段との間に介在するように前記表示手段に表示させるとともに、前記操作者の画像を録画している旨の表示を前記操作者の画像と並べて前記表示手段に表示させる、The control unit causes the display unit to display an operation unit that receives an operation for instructing execution of a predetermined process so as to be interposed between the image of the operator and the imaging unit, and A display indicating that an image is being recorded is displayed on the display unit side by side with the image of the operator,
ことを特徴とするプログラム。A program characterized by that.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2019015059A JP6727559B2 (en) | 2019-01-31 | 2019-01-31 | Display processing device and program |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2019015059A JP6727559B2 (en) | 2019-01-31 | 2019-01-31 | Display processing device and program |
Related Parent Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2014228649A Division JP6473962B2 (en) | 2014-11-11 | 2014-11-11 | Display processing apparatus and program |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2019079573A JP2019079573A (en) | 2019-05-23 |
JP6727559B2 true JP6727559B2 (en) | 2020-07-22 |
Family
ID=66627963
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2019015059A Active JP6727559B2 (en) | 2019-01-31 | 2019-01-31 | Display processing device and program |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP6727559B2 (en) |
Family Cites Families (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP5316971B2 (en) * | 2011-06-28 | 2013-10-16 | カシオ計算機株式会社 | Transaction processing apparatus and program |
US20170228989A1 (en) * | 2014-09-18 | 2017-08-10 | Nec Corporation | Information processing apparatus, information processing system, information processing method, and non-transitory storage medium |
WO2016052216A1 (en) * | 2014-09-29 | 2016-04-07 | 日本電気株式会社 | Information processing device, information processing system, information processing method, and program |
JP6473962B2 (en) * | 2014-11-11 | 2019-02-27 | カシオ計算機株式会社 | Display processing apparatus and program |
-
2019
- 2019-01-31 JP JP2019015059A patent/JP6727559B2/en active Active
Also Published As
Publication number | Publication date |
---|---|
JP2019079573A (en) | 2019-05-23 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP5084712B2 (en) | User authentication terminal, authentication system, user authentication method, and user authentication program | |
EP2239927A1 (en) | Portable terminal device and method of judging communication permission thereof | |
JP5319946B2 (en) | POS register and POS system | |
JP6473962B2 (en) | Display processing apparatus and program | |
JP2007295449A (en) | Photographing apparatus and monitoring system | |
JP2010282262A (en) | Information processor, transaction inspection method, and program | |
JP2007220036A (en) | Automatic teller machine | |
JP2007087316A (en) | Automatic transaction device and automatic transaction system | |
JP2006331049A (en) | Security monitoring system | |
JP2003168147A (en) | Automatic teller machine and automatic transaction system | |
WO2021123919A1 (en) | Method for operating an automated teller machine | |
JP6727559B2 (en) | Display processing device and program | |
JP5269553B2 (en) | Automatic teller machine and transfer confirmation method | |
JP5340008B2 (en) | Automatic cash transaction system, automatic cash transaction method, and automatic cash transaction apparatus | |
JP2007052688A (en) | Automatic transaction system | |
JP2007094588A (en) | Face authentication system | |
JP2010218097A (en) | Automatic transaction apparatus | |
JP5564775B2 (en) | Automatic transaction equipment | |
JP7008309B2 (en) | Two-dimensional code payment system for laundry stores | |
JP2010123010A (en) | Automatic transaction device and system | |
JP5857534B2 (en) | Wire fraud prevention system | |
WO2019117011A1 (en) | Terminal device, automatic teller machine, transfer processing method, and program | |
JP2008310456A (en) | Automatic teller machine system | |
JP5436359B2 (en) | Automatic teller machine and method for controlling the same | |
JP2010079752A (en) | Automatic transaction system |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20190220 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20190220 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20200318 |
|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20200421 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20200601 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20200614 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6727559 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |