JP6727559B2 - Display processing device and program - Google Patents

Description

本発明は、表示画面上の表示内容に対する指示操作に応じて各種処理を実行する表示処理装置及びプログラムに関する。 The present invention relates to a display processing device and a program that execute various processes according to an instruction operation on display contents on a display screen.

一般に、ＥＣＲ（Ｅｌｅｃｔｒｏｎｉｃ Ｃａｓｈ Ｒｅｇｉｓｔｅｒ）、ＰＯＳ（Ｐｏｉｎｔ ｏｆ ｓａｌｅ）端末などの売上処理装置、又は金融機関のＡＴＭ（現金自動預け払い機）には、操作者を確認する認証機能が備えられている。例えば、特許文献１には、指紋センサを用いて指紋照合して本人であることを確認できた場合のみドロアを解放するように技術が記載されている。また、特許文献２には、従業員がＰＯＳ端末を操作する作業を開始するときに従業員の顔を撮影して顔認証を行うことによりＰＯＳ端末を制御するようにした技術が記載されている。 Generally, a sales processing device such as an ECR (Electronic Cash Register) or a POS (Point of Sale) terminal, or an ATM (Automatic Teller Machine) of a financial institution has an authentication function for confirming an operator. For example, Patent Literature 1 describes a technique of releasing a drawer only when a fingerprint sensor is used to verify a fingerprint to confirm that the person is the person. Further, Patent Document 2 describes a technique in which the POS terminal is controlled by photographing the employee's face and performing face authentication when the employee starts the operation of operating the POS terminal. ..

更に、特許文献３には、上述のような認証機能によらず、利用者の顔画像を表示するだけで不正操作を抑制するようにした技術が記載されている。特許文献３の技術は、口座開設者以外の利用者による不正取引を予防するために、口座開設者の顔画像（登録画像）と利用者の顔画像とを表示することにより利用者が口座開設者であるかをその周囲に居る第三者が確認することができるようにしたものであり、口座開設者以外の利用者による不正な取引を抑制するようにしている。 Furthermore, Patent Document 3 describes a technique that suppresses an unauthorized operation by merely displaying a face image of a user without relying on the above-described authentication function. The technology of Patent Document 3 allows the user to open an account by displaying the face image (registered image) of the account opener and the face image of the user in order to prevent unauthorized transactions by users other than the account opener. It is designed so that a third party in the vicinity can confirm whether the person is the person who is the person who is the person who holds the account, and prevents unauthorized transactions by users other than the account opener.

特開平６−２７４７５９号公報JP-A-6-274759 特開２００５−２９３１７２号公報JP, 2005-293172, A 特開２００９−１１０１４８号公報JP, 2009-110148, A

しかしながら、特許文献３の技術にあっては、利用者の周囲に居る第三者がその利用者を確認することができるようにするために顔画像を表示することを目的とするものであるが、撮影された利用者の顔画像が無条件に表示されてしまうことになる。その結果、口座開設者（正規の操作者）にあっては、自分の顔が表示されていることに不快感や抵抗感が増して、口座開設者から苦情が出る可能性も高くなる。特に、個人情報を保護する面でも大きな問題になる。 However, the technique of Patent Document 3 aims to display a facial image so that a third party around the user can confirm the user. The photographed user's face image is unconditionally displayed. As a result, the account opener (regular operator) becomes more uncomfortable and reluctant to display his/her face, and the account opener is more likely to complain. In particular, it becomes a big problem in terms of protecting personal information.

本発明の課題は、操作者を容易に識別できるような撮影画像を取得することである。 An object of the present invention is to acquire a captured image that allows an operator to be easily identified .

上述した課題を解決するために、本発明に係る表示処理装置は、操作者を撮像する撮像手段と、前記撮像手段と並べて配置された表示手段と、前記撮像手段により撮像された操作者の画像を、前記表示手段に表示するとともに、録画する制御手段と、を備え、前記制御手段は、所定の処理の実行を指示するための操作を受け付ける操作手段を前記操作者の画像と前記撮像手段との間に介在するように前記表示手段に表示させるとともに、前記操作者の画像を録画している旨の表示を前記操作者の画像と並べて前記表示手段に表示させる、ことを特徴とする。 In order to solve the above-mentioned problems, a display processing device according to the present invention provides an image capturing means for capturing an image of an operator, a display means arranged side by side with the image capturing means, and an image of the operator captured by the image capturing means. Is displayed on the display means and recorded, and the control means includes an operation means for receiving an operation for instructing execution of a predetermined process, the image of the operator and the imaging means. Is displayed on the display means so as to be interposed between the two, and a display indicating that the image of the operator is being recorded is displayed on the display means side by side with the image of the operator .

本発明によれば、操作者を容易に識別できるような撮影画像を取得することができる。
According to the present invention, as possible out to acquire the captured image that allows easy identification of the operator.

表示処理装置として適用した売上処理装置を含む売上処理システムを説明するためのブロック図。A block diagram for explaining a sales processing system including a sales processing device applied as a display processing device. 売上処理装置１の基本的な構成要素を示したブロック図。The block diagram which showed the basic component of the sales processing apparatus 1. （１）は、タッチ入力表示部１３の画面（タッチ画面）上の表示内容を示した図、（２）は、不正される可能性の高い特定処理の実行を指示する操作が行われた際にその操作に応じて操作者を撮影した画像をタッチ画面上に表示した場合を例示した図。(1) is a diagram showing the display content on the screen (touch screen) of the touch input display unit 13, and (2) is when an operation for instructing execution of specific processing that is highly likely to be fraudulent is performed. The figure which illustrated the case where the image which image|photographed the operator was displayed on the touch screen according to the operation. 商品登録モードに切り替えられた際に実行開始される第１実施形態の特徴的な動作を説明するためのフローチャート。6 is a flowchart for explaining a characteristic operation of the first embodiment that is started when the product registration mode is switched to. 図４の動作に続くフローチャート。The flowchart following the operation of FIG. （１）、（２）は、タッチ画面の表示例を示した図。(1), (2) is the figure which showed the example of a display of a touch screen. 第２実施形態において、ＡＴＭ（現金自動預け払い機）の基本的な構成要素を示したブロック図。The block diagram which showed the basic component of ATM (Automatic Teller Machine) in 2nd Embodiment. 第２実施形態におけるＡＴＭの外観図。The external view of ATM in 2nd Embodiment. 第２実施形態におけるＡＴＭの特徴的な動作を説明するためのフローチャート。9 is a flowchart for explaining a characteristic operation of ATM in the second embodiment. 図９の動作に続くフローチャート。10 is a flowchart following the operation of FIG. 9.

以下、本発明の実施の形態について、図面を参照して詳細に説明する。
（第１実施形態）
先ず、図１〜図６を参照して本発明の第１実施形態を説明する。
本実施形態は、表示画面上の表示内容に対する指示操作に応じて各種処理を実行する表示処理装置として、店舗内設置の売上処理装置に適用した場合で、図１は、この売上処理装置を含む売上処理システムを説明するためのブロック図である。
売上処理システムは、例えば、全国規模の広域通信システムであり、各店舗内に設置されている各売上処理装置１は、本部サーバ装置２に公衆回線網（例えば、電話回線網、無線通信網、インターネット）３を介して接続されていると共に、店内などに居る警備員所持の携帯端末装置（例えば、スマートフォン）４に公衆回線網３を介して接続されている。なお、売上処理システムは、広域通信システムに限らず、単体の店舗内に構築した構内通信システムであってもよい。 Hereinafter, embodiments of the present invention will be described in detail with reference to the drawings.
(First embodiment)
First, a first embodiment of the present invention will be described with reference to FIGS.
The present embodiment is applied to a sales processing device installed in a store as a display processing device that executes various kinds of processing in response to an instruction operation on display contents on a display screen, and FIG. 1 includes the sales processing device. It is a block diagram for explaining a sales processing system.
The sales processing system is, for example, a nationwide wide area communication system, and each sales processing device 1 installed in each store has a public line network (for example, a telephone line network, a wireless communication network, etc.) In addition to being connected via the Internet) 3, it is also connected via a public line network 3 to a mobile terminal device (for example, a smartphone) 4 owned by a security guard in a store or the like. The sales processing system is not limited to the wide area communication system, but may be a local communication system built in a single store.

売上処理装置１は、店舗内で顧客が購入した各商品に対して精算処理（会計処理）を行う際に、商品毎にその売上データを登録する登録処理を実行したり、一取引の登録の終了時に締め処理（ドロアオープン処理を含む）を実行したりする持ち運び可能なタブレット端末であり、店舗内において短距離無線通信を介してスキャナ装置５、プリンタ装置６、ドロア装置７に接続されている。ドロア装置７は、現金を収納するもので、例えば、電磁石（図示省略）によってドロアの開閉を制御する構成となっており、売上処理装置１からのオープン指示信号に応答してドロアを開放する動作を行い、売上処理装置１からのクローズ指示信号に応答してドロアを強制的に閉じる動作を行う。また、ドロア装置７は、ドロアが人為的にクローズされた際には、クローズ信号を売上処理装置１に対して送信するようにしている。 The sales processing device 1 executes a registration process for registering sales data for each product when performing a settlement process (accounting process) for each product purchased by a customer in a store, and for registering one transaction. A portable tablet terminal that executes a closing process (including a drawer open process) at the end, and is connected to the scanner device 5, the printer device 6, and the drawer device 7 via short-range wireless communication in the store. .. The drawer device 7 stores cash, and is configured to control the opening and closing of the drawer by, for example, an electromagnet (not shown), and operates to open the drawer in response to an open instruction signal from the sales processing device 1. Then, in response to the close instruction signal from the sales processing device 1, the drawer is forcibly closed. Further, the drawer device 7 transmits a close signal to the sales processing device 1 when the drawer is artificially closed.

図２は、売上処理装置（タブレット端末）１の基本的な構成要素を示したブロック図である。
売上処理装置１の中核を成すＣＰＵ１１は、記憶部１２内の各種のプログラムに応じてこの売上処理装置１の全体動作を制御する中央演算処理装置である。記憶部１２は、各種のプログラムや情報を記憶するもので、図４及び図５に示した動作手順に応じて本実施形態を実現するためのプログラムや各種のアプリケーションなどが格納されている他、売上処理装置１が動作するために必要な各種の情報（例えば、計時機能によって得られた計時情報、フラグなど）を一時的に記憶するワーク領域を有している。ＣＰＵ１１には、その入出力周辺デバイスとして、タッチ入力表示部１３、キー操作部１４、広域通信部１５、短距離無線通信部１６、カメラ部１７などが接続されており、入出力プログラムにしたがってＣＰＵ１１はそれらの動作を制御する。 FIG. 2 is a block diagram showing basic components of the sales processing device (tablet terminal) 1.
The CPU 11 that is the core of the sales processing device 1 is a central processing unit that controls the overall operation of the sales processing device 1 according to various programs in the storage unit 12. The storage unit 12 stores various programs and information, and stores programs and various applications for realizing the present embodiment according to the operation procedure shown in FIGS. 4 and 5, and It has a work area for temporarily storing various information necessary for operating the sales processing device 1 (for example, timing information obtained by a timing function, a flag, etc.). A touch input display unit 13, a key operation unit 14, a wide area communication unit 15, a short-range wireless communication unit 16, a camera unit 17 and the like are connected to the CPU 11 as its input/output peripheral devices. Controls their behavior.

タッチ入力表示部１３は、表示パネルとタッチパネル（図示省略）を有し、高精細な表示パネルの前面にタッチパネルを配置することによりその画面（タッチ画面）上に各種のソフトウェアキー（タッチキー）として、図示省略したが、例えば、商品登録モード、設定モードなどの各種の動作モードに切り替えるモードキー、また、商品登録モードにおいては、数値キー、商品別登録キー、出金キー、預り金キー（締めキー）などを割当て配置してその機能名を表示したり、処理メニューなどを表示したりするもので、指などによるタッチ操作を感知してそのタッチ操作に応じたデータを入力する。 The touch input display unit 13 has a display panel and a touch panel (not shown), and by arranging the touch panel on the front surface of the high-definition display panel, various software keys (touch keys) are displayed on the screen (touch screen). Although not shown, for example, a mode key for switching to various operation modes such as a product registration mode and a setting mode.In the product registration mode, a numeric key, a product-specific registration key, a withdrawal key, a deposit key Keys) are allocated and displayed to display their function names, or display a processing menu or the like, and a touch operation by a finger or the like is detected to input data corresponding to the touch operation.

キー操作部１４は、押しボタン式の電源キー（図示省略）などを有している。広域通信部１５は、公衆回線網３に通信接続し、短距離無線通信部１６は、例えば、無線ＬＡＮ（Ｌｏｃａｌ Ａｒｅａ Ｎｅｔｗｏｒｋ）又はＢｌｕｅｔｏｏｔｈ（登録商標）通信を介してスキャナ装置５、プリンタ装置６、ドロア装置７に通信接続する通信インターフェイスである。カメラ部１７は、出金に絡む特定処理時（ドロアオープン時や出金時）に起動されて、操作者の顔を中心に撮影を行うもので、ＣＰＵ１１は、その顔画像（操作者の撮影画像）をタッチ入力表示部１３の画面（タッチ画面）上に表示させる。なお、カメラ部１７は、静止画像に限らず、動画像も撮影が可能なデジタルカメラであり、タッチ画面上には、顔画像として静止画像又は動画像が表示される。 The key operation unit 14 has a push button type power key (not shown) and the like. The wide-area communication unit 15 is communicatively connected to the public line network 3, and the short-range wireless communication unit 16 is, for example, a scanner device 5, a printer device 6, a printer device 6, via a wireless LAN (Local Area Network) or Bluetooth (registered trademark) communication. It is a communication interface for communicatively connecting to the drawer device 7. The camera unit 17 is activated at the time of specific processing related to withdrawal (when a drawer is opened or withdrawal) and mainly takes an image of the face of the operator. The image) is displayed on the screen (touch screen) of the touch input display unit 13. The camera unit 17 is a digital camera capable of capturing not only still images but also moving images, and a still image or a moving image is displayed as a face image on the touch screen.

図３（１）は、タッチ入力表示部１３の画面（タッチ画面）上の表示内容を示した図である。
すなわち、図３（１）は、商品別に売上データを登録する商品登録モード時において、タッチ画面上に表示される表示内容を示したもので、このタッチ画面は、ソフトウェアキー（タッチキー）として、商品Ａ〜Ｈ別の商品登録キー、小計キー、現金キー、訂正キー、テンキーなどが表示されている商品登録画面である。タッチ入力表示部１３の前面（タッチ画面）の上側中央部には、タッチ画面の表示内容を見ながら操作する操作者の顔を撮影可能とするためにカメラ部１７が配置されている。なお、その撮影パラメータとしては、タッチ画面を見ながらタッチ操作を行っている操作者の顔全体を撮影可能な画角に設定されていると共に、顔全体が画面一杯に写るようなズーム値に設定されている。 FIG. 3A is a diagram showing the display content on the screen (touch screen) of the touch input display unit 13.
That is, FIG. 3A shows the display contents displayed on the touch screen in the product registration mode in which sales data is registered for each product. This touch screen is a software key (touch key). It is a product registration screen on which product registration keys for each of products A to H, a subtotal key, a cash key, a correction key, a numeric keypad, and the like are displayed. A camera unit 17 is arranged in the center of the upper side of the front surface (touch screen) of the touch input display unit 13 so that the face of an operator who operates while watching the display content of the touch screen can be photographed. The shooting parameters are set to an angle of view that allows the entire face of the operator who is performing the touch operation while looking at the touch screen to be captured, and a zoom value that allows the entire face to be displayed in full screen. Has been done.

図３（２）は、不正される可能性が高い特定処理の実行を指示する操作が行われた際にその操作に応じて操作者を撮影した画像（顔画像）をタッチ画面上に表示した場合を例示した図である。
ＣＰＵ１１は、商品登録モードにおいて一顧客分の登録終了時に現金キーが操作されることにより特定処理（第１実施形態においてはドロアオープン処理）が指示された際に、この特定処理（ドロアオープン処理）が実行されている間、操作者を撮影するようにカメラ部１７を制御するようにしている。そして、ＣＰＵ１１は、このカメラ部１７で撮影された操作者の顔画像を取得して、商品登録画面上にその表示内容（登録キー、小計キー、現金キーなど）と共に操作者の顔画像を表示させるようにしている。なお、操作者が自分自身の顔を十分に認識することが可能な大きさ（例えば、名刺サイズ）で顔画像が表示される。 In FIG. 3B, when an operation for instructing execution of a specific process that is likely to be fraudulent is performed, an image (face image) of the operator is displayed on the touch screen according to the operation. It is the figure which illustrated the case.
When the cash key is operated at the end of registration for one customer in the product registration mode to instruct the specific processing (drawer open processing in the first embodiment), the CPU 11 performs the specific processing (drawer open processing). The camera section 17 is controlled so that the operator is photographed while is executed. Then, the CPU 11 acquires the face image of the operator photographed by the camera unit 17, and displays the face image of the operator together with the display contents (registration key, subtotal key, cash key, etc.) on the product registration screen. I am trying to let you. The face image is displayed in a size (for example, a business card size) that allows the operator to sufficiently recognize his/her own face.

操作者の顔画像は、特定処理（ドロアオープン処理）が所定の条件下で実行された場合に表示されるもので、“所定の条件”とは、特定処理（ドロアオープン処理）がどのような条件で実行されたのかを示し、第１実施形態においては、所定の時間帯（例えば、深夜や早朝の時間帯、営業外の時間帯）を意味している。すなわち、ドロアオープン処理の実行を指示する現金キーが所定の条件（所定の時間帯）に操作された際に、ＣＰＵ１１は、ドロアオープン処理の実行時に操作者の顔画像と共に、操作者の顔画像を記録中である旨のメッセージをタッチ画面（商品登録画面）上に表示させるようにしている。なお、図示の例では、商品登録画面上の空き領域に、顔画像及び記録中メッセージを表示するようにしたが、ドロアオープン中には使用されることがない登録キー、小計キーなどの表示領域上に重ね合わせて顔画像を表示するようにしてもよい。 The face image of the operator is displayed when the specific process (drawer open process) is executed under a predetermined condition, and the “predetermined condition” is what the specific process (drawer open process) is. In the first embodiment, it indicates a predetermined time zone (for example, a midnight or early morning time zone, a non-business time zone). That is, when the cash key instructing the execution of the drawer open process is operated under a predetermined condition (predetermined time period), the CPU 11 causes the face image of the operator and the face image of the operator at the time of executing the drawer open process. The message indicating that is being recorded is displayed on the touch screen (product registration screen). In the illustrated example, the face image and the recording message are displayed in the empty area on the product registration screen, but the display area for registration keys, subtotal keys, etc. that are not used during drawer open You may make it display a face image on top of it.

次に、第１実施形態における売上処理装置（タブレット端末）１の動作概念を図４及び図５に示すフローチャートを参照して説明する。ここで、これらのフローチャートに記述されている各機能は、読み取り可能なプログラムコードの形態で格納されており、このプログラムコードにしたがった動作が逐次実行される。また、ネットワークなどの伝送媒体を介して伝送されてきた上述のプログラムコードに従った動作を逐次実行することもできる。このことは後述する他の実施形態においても同様であり、記録媒体の他に、伝送媒体を介して外部供給されたプログラム／データを利用して本実施形態特有の動作を実行することもできる。なお、図４及び図５は、売上処理装置１の全体動作のうち、本実施形態の特徴部分の動作概要を示したフローチャートであり、この図４及び図５のフローから抜けた際には、全体動作のメインフロー（図示省略）に戻る。 Next, the operation concept of the sales processing device (tablet terminal) 1 in the first embodiment will be described with reference to the flowcharts shown in FIGS. 4 and 5. Here, each function described in these flowcharts is stored in the form of a readable program code, and the operation according to this program code is sequentially executed. Further, the operation according to the above-mentioned program code transmitted via a transmission medium such as a network can be sequentially executed. This is the same in other embodiments described later, and it is also possible to execute the operation peculiar to this embodiment by using a program/data externally supplied via a transmission medium in addition to the recording medium. 4 and 5 are flowcharts showing an outline of the operation of the characteristic part of the present embodiment in the overall operation of the sales processing device 1. When the flow of FIGS. 4 and 5 is exited, The procedure returns to the main flow (not shown) of the overall operation.

図４及び図５は、商品登録モードに切り替えられた際に実行開始される第１実施形態の特徴的な動作を説明するためのフローチャートである。
先ず、ＣＰＵ１１は、商品登録モードに切り替えられると、図３（１）に示すような商品登録画面をタッチ入力表示部１３に表示させる（図４のステップＡ１）。この状態において、商品登録を指示する商品別登録キーがタッチ操作されたかを調べたり（ステップＡ２）、特定処理（ドロアオープン処理）の実行を指示する操作（現金キー操作）が行われたかを調べたりする（ステップＡ２）。 FIG. 4 and FIG. 5 are flowcharts for explaining the characteristic operation of the first embodiment that is started when the product registration mode is switched to.
First, when the CPU 11 is switched to the product registration mode, the CPU 11 displays a product registration screen as shown in FIG. 3A on the touch input display unit 13 (step A1 in FIG. 4). In this state, it is checked whether or not the product-specific registration key for instructing product registration is touch-operated (step A2), and whether or not an operation (cash key operation) for instructing execution of specific processing (drawer open processing) is performed. (Step A2).

商品別登録キーが操作されたときには（ステップＡ２でＹＥＳ）、その商品の売上データを記憶部１２内の商品別合計器（図示省略）などに登録する処理（ステップＡ３）を行った後、ステップＡ２に戻る。また、商品別登録キー及び現金キー以外のキー（例えば、小計キー、訂正キーなど）が操作されたときには（ステップＡ４でＮＯ）、その操作に応じた処理として小計処理、訂正処理などを実行（ステップＡ５）した後、上述のステップＡ２に戻る。 When the product-specific registration key is operated (YES in step A2), after performing a process (step A3) of registering sales data of the product in a product-specific totalizer (not shown) in the storage unit 12, the step is performed. Return to A2. When a key other than the product-specific registration key and the cash key (for example, the subtotal key, the correction key, etc.) is operated (NO in step A4), the subtotal process, the correction process, etc. are executed as the process corresponding to the operation ( After performing step A5), the process returns to step A2 described above.

いま、特定処理（ドロアオープン処理）の実行を指示する操作（現金キーの操作）が行われたときには（ステップＡ４でＹＥＳ）、その特定処理の開始に先だって、カメラ部１７によって撮影された操作者の撮影画像を取得して、その撮像画像から操作者の写り具合を解析し、操作者を認識するのに困難な写り具合であるか（後述するが、操作者が意図的に隠れているような写り具合であるか）を判別し、意図的に隠れていれば、その特定処理の実行を抑制するようにしている。この場合、特定処理を実行しないように制御するようにしている。 Now, when an operation (an operation of the cash key) for instructing the execution of the specific process (drawer open process) is performed (YES in step A4), the operator photographed by the camera unit 17 before the start of the specific process. The captured image of the image is acquired, the image quality of the operator is analyzed from the captured image, and it is difficult for the operator to recognize the image. If the image is hidden intentionally, the execution of the specific process is suppressed. In this case, control is performed so that the specific process is not executed.

すなわち、ＣＰＵ１１は、現金キーの操作に応答して、カメラ部１７で撮影された操作者の顔画像を取得し（ステップＡ６）、その撮影画像を記憶部１２内の画像メモリ（図示省略）に記録保存する動作を開始する（ステップＡ７）。そして、この撮影画像を解析することによって操作者の顔の写り具合を判別し（ステップＡ８）、操作者がカメラ部１７に写らないように意図的に隠れているかを調べる（ステップＡ９）。ここで、本実施形態において“意図的に隠れている”とは、操作者が現金キーの操作時に手などでカメラ部１７のレンズ部分を覆っている場合（例えば、画像全体が暗い場合、顔の前に遮蔽物がある場合）の他、現金キーの操作時に顔の大部分（例えば、３／４以上）が撮影範囲の外にある場合などである。なお、マスク着用及びサングラス着用によって目、鼻、口が隠れている場合にも“意図的に隠れている”に含めるようにしてもよい。 That is, the CPU 11 acquires the face image of the operator photographed by the camera unit 17 in response to the operation of the cash key (step A6), and stores the photographed image in the image memory (not shown) in the storage unit 12. The operation of recording and saving is started (step A7). Then, the photographed image is analyzed to determine the appearance of the operator's face (step A8), and it is checked whether the operator is intentionally hidden so as not to be seen in the camera unit 17 (step A9). Here, in the present embodiment, “intentionally hidden” means that the operator covers the lens portion of the camera unit 17 with his/her hand or the like when operating the cash key (for example, when the entire image is dark, the face is dark). In addition to the case where there is a shield in front of, the majority of the face (for example, 3/4 or more) is outside the shooting range when the cash key is operated. It should be noted that the case where the eyes, nose, and mouth are hidden by wearing a mask and wearing sunglasses may be included in “intentionally hiding”.

このように操作者が意図的に隠れる動作を行っていると判断した場合には（ステップＡ９でＹＥＳ）、その動作が所定時間（例えば、５秒間）以上継続したかを調べる（ステップＡ１０）。いま、意図的な隠れ動作が所定時間以上継続しているときには（ステップＡ１０でＹＥＳ）、不正者の可能性があるものと判断して特定処理（ドロアオープン処理）を禁止する旨のメッセージを、タッチ画面（商品登録画面）上にその表示内容と共に表示させる（ステップＡ１１）。図６（１）は、この禁止メッセージの表示例を示したもので、タッチ画面（商品登録画面）上にはその表示内容（登録キーなど）と共に禁止メッセージが表示された場合である。その後、上述のステップＡ２に戻る。 When it is determined that the operator is intentionally hiding (YES in step A9), it is checked whether the operation has continued for a predetermined time (for example, 5 seconds) or more (step A10). Now, when the intentional hiding action continues for a predetermined time or longer (YES in step A10), a message indicating that there is a possibility of an illicit person and prohibiting the specific process (drawer open process) is displayed. It is displayed together with the display contents on the touch screen (product registration screen) (step A11). FIG. 6(1) shows a display example of the prohibition message, in which the prohibition message is displayed on the touch screen (product registration screen) together with the display content (registration key or the like). Then, the process returns to step A2 described above.

一方、現金キーの操作時に操作者が意図的に隠れていない場合、又は瞬間的に隠れた状態になっても所定時間継続しなかった場合には（ステップＡ９でＮＯ）、図５のステップＡ１２に移り、計時機能によって得られた現在時刻に基づいて現在の時間帯を判別する。そして、現金キーが操作された際の現在時刻が所定の時間帯（例えば、不正される可能性の高い深夜や早朝の時間帯、営業外の時間帯）であるかを調べ（ステップＡ１３）、所定の時間帯でなければ（ステップＡ１３でＮＯ）、特定処理（ドロアオープン処理）を実行してドロア装置７にオープン指示信号を送信し、ドロアを開放させる（ステップＡ１４）
。その後、ドロアが人為的に閉じられた際にドロア装置７側から出力されるドロアクローズ信号を受信したことを条件（ステップＡ１５）に、図４のステップＡ２に戻る。 On the other hand, if the operator intentionally does not hide when the cash key is operated, or if the operator does not continue for the predetermined time even if the operator temporarily hides (NO in step A9), step A12 in FIG. Then, the current time zone is determined based on the current time obtained by the time counting function. Then, it is checked whether or not the current time when the cash key is operated is in a predetermined time zone (for example, a late night or early morning time zone where there is a high possibility of being fraudulent, or a non-business time zone) (step A13). If it is not within the predetermined time period (NO in step A13), a specific process (drawer open process) is executed, an open instruction signal is transmitted to the drawer device 7, and the drawer is opened (step A14).
.. After that, on condition that the drawer close signal output from the drawer device 7 side is received when the drawer is artificially closed (step A15), the process returns to step A2 in FIG.

また、現金キーの操作時が所定の時間帯内であれば（ステップＡ１３でＹＥＳ）、撮影画像（操作者の顔画像）を取得して、図３（２）に示すようにタッチ画面（商品登録画面）上にその表示内容と共に撮影画像（操作者の顔画像）を表示させる（ステップＡ１６）。この場合、商品登録画面上の空き領域に撮影画像（操作者の顔画像）を表示させる。また、撮影画像が動画であれば、撮影画像を逐次取得しながら表示する動作を開始する。そして、操作者の顔画像を記録保存中である旨のメッセージを撮影画像と共に、商品登録画面上に表示させる（ステップＡ１７）。その後、特定処理（ドロアオープン処理）を実行してドロアを開放させる（ステップＡ１８）。 If the cash key is operated within the predetermined time period (YES in step A13), the captured image (face image of the operator) is acquired and the touch screen (product shown in FIG. 3B) is displayed. The photographed image (face image of the operator) is displayed on the registration screen together with the displayed contents (step A16). In this case, the captured image (face image of the operator) is displayed in an empty area on the product registration screen. If the captured image is a moving image, the operation of displaying the captured images sequentially is started. Then, a message indicating that the face image of the operator is being recorded and stored is displayed together with the captured image on the product registration screen (step A17). After that, a specific process (drawer open process) is executed to open the drawer (step A18).

そして、ステップＡ１９に移り、ドロアが人為的にクローズされたか、つまり、ドロア装置７側からドロアクローズ信号を受信したかを調べ、クローズ信号を受信したときには（ステップ１９ＡでＹＥＳ）、図４のステップＡ２に戻るが、ドロアクローズ信号を受信しなければ（ステップＡ１９でＮＯ）、上述の場合（ステップＡ８〜Ａ１０）と同様の処理（ステップＡ２０〜Ａ２２）に移る。 Then, the process proceeds to step A19, and it is checked whether the drawer is artificially closed, that is, whether the drawer closing signal is received from the drawer device 7 side, and when the closing signal is received (YES in step 19A), the step of FIG. Returning to A2, if the drawer close signal is not received (NO in step A19), the process (steps A20 to A22) similar to the above case (steps A8 to A10) is performed.

すなわち、カメラ部１７で撮影された操作者の顔画像を取得して、操作者の顔の写り具合を判別し（ステップＡ２０）、操作者が意図的に隠れているかを調べたり（ステップＡ２１）、隠れている状態が所定時間（例えば、２秒間）以上継続しているかを調べたりする（ステップＡ２２）。なお、上述したステップＡ８〜Ａ１０は、ドロアのオープン前の処理であるため、隠れている状態の継続時間を“５秒”としたが、今回のステップＡ２０〜Ａ２２は、ドロアのオープン中であるために不正防止の観点から継続時間を“３秒”として、より短くしたが、これらを同一の時間（例えば、３秒）としてもよい。 That is, the face image of the operator captured by the camera unit 17 is acquired, the appearance of the operator's face is determined (step A20), and it is checked whether the operator is intentionally hidden (step A21). It is checked whether or not the hidden state continues for a predetermined time (for example, 2 seconds) or more (step A22). Since the steps A8 to A10 described above are the processes before the opening of the drawer, the duration of the hidden state is set to "5 seconds", but the steps A20 to A22 this time are that the drawer is open. For this reason, from the viewpoint of fraud prevention, the duration is set to "3 seconds" to be shorter, but they may be set to the same time (for example, 3 seconds).

ここで、操作者が意図的に隠れていない場合には、又は瞬間的に隠れた状態になっても所定時間継続していない場合には（ステップＡ２１でＮＯ）、図４のステップＡ２に戻るが、操作者が意図的に隠れている状態が所定時間以上継続しているときには（ステップＡ２２でＹＥＳ）、特定処理を中断させるために、ドロア装置７に対してクローズ指示信号を送信して、ドロアを強制的に閉じさせる（ステップＡ２３）。そして、図６（２）に示すように特定処理（ドロアオープン処理）を中断した旨のメッセージをタッチ画面（商品登録画面）に表示させる（ステップＡ２４）。 If the operator has not intentionally hidden, or if the operator has hidden for a certain period of time and has not continued for a predetermined time (NO in step A21), the process returns to step A2 in FIG. However, when the state in which the operator intentionally hides continues for a predetermined time or longer (YES in step A22), a close instruction signal is transmitted to the drawer device 7 to suspend the specific processing, The drawer is forcibly closed (step A23). Then, as shown in FIG. 6B, a message indicating that the specific process (drawer open process) has been interrupted is displayed on the touch screen (product registration screen) (step A24).

更に、店内などに居る警備員所持の携帯端末装置４に接続して、その操作者の撮影画像と共に不正者の確認を要請するメッセージを送信する他、図６（２）に示すように警告報知する旨の警告メッセージ（例えば、警備要請を行った旨のメッセージ又はアラーム音を発生する旨のメッセージ）をタッチ画面（商品登録画面）内に表示させる（ステップＡ２５）。図６（２）は、タッチ画面（商品登録画面）上にその表示内容と共に、操作者の顔画像、中断メッセージ、警告メッセージが表示された場合である。その後、図４のステップＡ２に戻る。なお、この警告を行った時点で特定処理を強制終了させて一時停止状態にしてもよい。 Further, in addition to transmitting a message requesting confirmation of an illegal person together with a photographed image of the operator by connecting to the portable terminal device 4 possessed by a security guard in a store or the like, a warning notification is given as shown in FIG. 6(2). A warning message to that effect (for example, a message to the effect that a security request has been made or a message to the effect that an alarm sound will be generated) is displayed in the touch screen (product registration screen) (step A25). FIG. 6B shows the case where the operator's face image, an interruption message, and a warning message are displayed on the touch screen (product registration screen) together with the display content. Then, the process returns to step A2 in FIG. Note that the specific process may be forcibly terminated at the time of issuing this warning and put in a temporary stop state.

以上のように、第１実施形態において売上処理装置１のＣＰＵ１１は、各種処理の内での特定処理を検出すると、カメラ部１７で撮影された操作者の撮影画像を取得し、この撮影画像をタッチ入力表示部１３の表示画面上に表示内容と共に表示するようにしたので、操作者を撮影していることを操作者自身に知らせて不正行為を牽制することができると共に、不正される可能性が高い場合に不正行為を適切に牽制することができ、不正防止効果の高いものとなる。つまり、操作者の撮影画像が特定処理のための表示内容と同時に表示されるので、操作者は自身の撮影画像を見ながら操作することになり、不正操作を心理的に抑制することができ、また、操作者の撮影画像を常時表示するのではなく、必要最小限の牽制で不正を適切に防止することができ、不正者ではない操作者が持つ抵抗感（自分が撮影されているという抵抗感）を大幅に軽減することも可能となり、不正目的ではない操作者にも納得がいくものとなる。 As described above, in the first embodiment, when the CPU 11 of the sales processing device 1 detects a specific process among various processes, the CPU 11 acquires a captured image of the operator captured by the camera unit 17, and acquires this captured image. Since the information is displayed on the display screen of the touch input display unit 13 together with the display content, it is possible to inform the operator himself that the operator is photographing and prevent the wrongdoing, and there is a possibility that the wrongdoing will be done. If the rate is high, fraud can be properly controlled, and the fraud prevention effect will be high. In other words, since the photographed image of the operator is displayed at the same time as the display content for the specific processing, the operator operates while looking at the photographed image of himself, and it is possible to psychologically suppress the illegal operation, In addition, instead of constantly displaying the photographed image of the operator, it is possible to appropriately prevent fraud with the minimum necessary restraint, and the sense of resistance of an operator who is not a fraudulent person (the resistance that oneself is photographed It is also possible to significantly reduce the feeling, and it will be convincing even to an operator who is not an illegal purpose.

ＣＰＵ１１、特定処理が所定の条件下で実行されるのか否かを判別し、所定の条件下で実行される場合に操作者を撮影した撮影画像をタッチ画面上に表示するようにしたので、特定処理の実行時に無条件に不正行為を牽制するのではなく、不正される可能性が高い時間帯（例えば、深夜や早朝、営業外などの危険な時間帯）に限って不正行為を牽制することが可能となる。 The CPU 11 determines whether or not the specific process is executed under a predetermined condition, and when the specific process is executed under the predetermined condition, the captured image of the operator is displayed on the touch screen. Instead of unconditionally controlling fraud during execution of processing, restrict fraud only during times when there is a high possibility of being fraudulent (for example, during dangerous hours such as midnight, early morning, or non-business hours). Is possible.

ＣＰＵ１１は、特定処理が実行されている間、操作者を撮影するようにカメラ部１７を制御するようにしたので、不正される可能性の高い特定処理の実行時に限って操作者を撮影することができ、特定処理以外の各種の処理時には操作者を撮影して表示しないような制御が可能となる。 Since the CPU 11 controls the camera unit 17 so as to photograph the operator while the specific processing is being executed, the operator should be photographed only when the specific processing that is highly likely to be fraudulent is executed. Therefore, it is possible to perform control such that the operator is not photographed and displayed during various processes other than the specific process.

操作者の撮影画像を表示すると共に、その撮影画像を記録している旨のメッセージを表示するようにしたので、不正行為に対する牽制力を更に高めることができる。 Since the photographed image of the operator is displayed and the message indicating that the photographed image is recorded is displayed, it is possible to further enhance the restraint power against illegal acts.

ＣＰＵ１１は、特定処理の開始に先だって、撮影画像から操作者の写り具合を解析した結果、操作者を認識するのに困難な写り具合であれば、特定処理の実行を抑制するようにしたので、不正行為を未然に防ぐことができる。 Before the start of the specific process, the CPU 11 analyzes the image quality of the operator from the captured image, and if the image quality is difficult to recognize the operator, the CPU 11 suppresses the execution of the specific process. It is possible to prevent cheating.

ＣＰＵ１１は、操作者による意図的な隠れ動作によって操作者を認識するのに不可能な写り具合であれば、その特定処理を実行しないように制御するようにしたので、意図的な隠れ動作を行う者は不正者の可能性が高いと認めて特定処理を禁止することができ、不正行為を未然に防ぐことができる。 The CPU 11 controls not to execute the specific process if the image cannot be recognized by the operator due to the intentional hiding action by the operator, so that the intentional hiding action is performed. The person who recognizes that there is a high possibility of being an illicit person can prohibit the specific processing, and can prevent the illicit behavior.

特定処理の実行を抑制する場合に、その旨をメッセージ出力するようにしたので、操作者が不正者でなければ、正しく撮影されるように姿勢など正すことによって即座に特定処理の実行に移行させることができる。 When the execution of the specific process is suppressed, a message to that effect is output, so if the operator is not an unauthorized person, the posture is corrected so that the image is correctly captured, and immediately the execution of the specific process is performed. be able to.

特定処理の実行中に撮影画像が表示されている場合において、その撮影画像内の操作者の写り具合を解析した結果、操作者による意図的な隠れ動作によって操作者を認識するのに不可能な写り具合であれば、その特定処理を中断するようにしたので、特定処理の実行中であっても、意図的な隠れ動作を行う者は不正者であると認めて特定処理を中断することができ、不正行為をその直前で防ぐことができる。 When the captured image is displayed during the execution of the specific process, the result of analyzing the appearance of the operator in the captured image shows that it is impossible to recognize the operator due to the intentional hiding motion by the operator. If the image is in the state of reflection, the specific process is interrupted. Therefore, even if the specific process is being executed, the person performing the intentional hiding action may be recognized as an illegal person and the specific process may be interrupted. It is possible to prevent cheating just before that.

特定処理を中断する場合に、中断する旨のメッセージを出力するようにしたので、操作者が不正者でなければ、正しく撮影されるように姿勢など正すことによって即座に特定処理の実行に移行させることが可能となる。 When the specific process is interrupted, a message to the effect that it is interrupted is output, so if the operator is not a fraudulent person, the posture is corrected so that the image is captured correctly, and the specific process is immediately executed. It becomes possible.

操作者による意図的な隠れ動作によって操作者を認識するのに不可能な写り具合であれば、その撮影画像を外部に通報したり、警告報知する旨の警告メッセージを出力したりするようにしたので、警備員の要請などの緊急対応が可能となると共に、更に牽制力を高めることができる。 If it is impossible to recognize the operator due to the intentional hiding motion by the operator, the captured image is reported to the outside and a warning message is output to warn the operator. Therefore, an emergency response such as a request from a security guard can be performed, and the restraint power can be further enhanced.

現金を収納するドロアとの連携で売上処理を行う売上処理装置１において、表示画面上の表示内容に対する指示操作に応じて実行する特定処理は、ドロアを開放させるドロアオープン処理であり、不正される可能性の高いドロアオープン時に不正を牽制することができる。 In the sales processing device 1 that performs sales processing in cooperation with a drawer that stores cash, the specific processing that is executed in response to an instruction operation with respect to the display content on the display screen is a drawer opening processing that opens the drawer and is fraudulent. It is possible to restrain fraud when opening a drawer with a high possibility.

表示画面は、タッチ操作が可能なタッチ画面であり、このタッチ画面に操作者の撮影画像を表示するようにしたてので、操作者はタッチ画面を見ながら操作する際に自分の撮影画像も合わせて見ることになり、不正行為に対する牽制力を更に高めることができる。 The display screen is a touch screen that can be touch-operated, and since the operator's captured image is displayed on this touch screen, the operator can also adjust his or her captured image when operating while looking at the touch screen. It can be seen from the above, and the restraint power against fraud can be further enhanced.

なお、上述した第１実施形態においては、特定処理（ドロアオープン処理）の実行を指示する現金キーが所定の条件下（例えば、深夜や早朝の時間帯、営業外の時間帯）で操作された際に、操作者の撮影画像を表示するようにしたが、所定の条件は、時間帯に限らず、例えば、店内が込み合ったり、人手が不足したりする所定の曜日、日時、期間などの他、ドロアに収納されている現金が所定金額（例えば、５千円）以上の場合であってもよく、更に、時間帯及び金額の両方を所定の条件としてもよい。 In the first embodiment described above, the cash key for instructing execution of the specific process (drawer open process) is operated under a predetermined condition (for example, a late night or early morning time period, a non-business time period). At this time, the photographed image of the operator is displayed, but the predetermined condition is not limited to the time zone, for example, the predetermined day of the week, the date and time, the period when the store is crowded or the manpower is insufficient. The cash stored in the drawer may be a predetermined amount (for example, 5,000 yen) or more, and both the time zone and the amount may be predetermined conditions.

上述した第１実施形態においては、現金キーの操作時に特定処理を実行する場合を示したが、出金キーの操作時に特定処理を実行する場合であってもよい。 In the above-described first embodiment, the case where the specific process is executed when the cash key is operated has been described, but the specific process may be executed when the cash dispense key is operated.

上述した第１実施形態においては、撮影画像が操作者を認識するのに困難な写り具合であれば、特定処理を行わないように制御するようにしたが、特定処理の一部だけの実行に抑制するようにしてもよい。 In the above-described first embodiment, if the captured image is in a state in which it is difficult to recognize the operator, the control is performed so that the specific process is not performed. However, only a part of the specific process is executed. You may make it suppress.

また、第１実施形態においては、特定処理を中断するようにしたが、特定処理を停止（ロック）するようにしてもよい。 Further, in the first embodiment, the specific process is interrupted, but the specific process may be stopped (locked).

（第２実施形態）
以下、この発明の第２実施形態について図７〜図１０を参照して説明する。
なお、上述した第１実施形態は、表示画面上の表示内容に対する指示操作に応じて各種処理を実行する表示処理装置として、売上処理装置（タブレット端末）に適用した場合を例示したが、この第２実施形態においては、本人認証を前提とする特定処理（現金支払い処理）を実行する金融機関側のＡＴＭ（現金自動預け払い機）に適用した場合である。ここで、両実施形態において基本的或いは名称的に同一のものは、同一符号を付して示し、その説明を省略すると共に、以下、第２実施形態の特徴部分を中心に説明するものとする。 (Second embodiment)
The second embodiment of the present invention will be described below with reference to FIGS.
Note that the first embodiment described above exemplifies a case where the present invention is applied to a sales processing device (tablet terminal) as a display processing device that executes various processes according to an instruction operation on display contents on a display screen. The second embodiment is a case where the present invention is applied to an ATM (Automatic Teller Machine) on the financial institution side that executes a specific process (cash payment process) that requires personal authentication. Here, in both the embodiments, the same basic or nominal items are denoted by the same reference numerals, the description thereof will be omitted, and the characteristic part of the second embodiment will be mainly described below. ..

図７は、ＡＴＭ（現金自動預け払い機）８の基本的な構成要素を示したブロック図である。
ＡＴＭ８は、表示画面上の表示内容に対する指示操作に応じて各種処理を実行するもので、その中核を成すＣＰＵ８１は、記憶部８２内の各種のプログラムに応じてこのＡＴＭ８の全体動作を制御する。記憶部８２は、各種のプログラムや情報を記憶するもので、図８及び図９に示した動作手順に応じて本実施形態を実現するためのプログラムや各種のアプリケーションなどが格納されている。ＣＰＵ８１にはその入出力デバイスとして、タッチ表示部８３、カメラ部８４、カード処理部８５、金銭入出力部８６、印字部８７などが接続されている。 FIG. 7 is a block diagram showing basic components of an ATM (Automatic Teller Machine) 8.
The ATM 8 executes various processes in response to an instruction operation with respect to the display contents on the display screen, and the CPU 81, which is the core of the ATM 8, controls the entire operation of the ATM 8 according to various programs in the storage unit 82. The storage unit 82 stores various programs and information, and stores programs and various applications for realizing the present embodiment according to the operation procedure shown in FIGS. 8 and 9. A touch display unit 83, a camera unit 84, a card processing unit 85, a money input/output unit 86, a printing unit 87, etc. are connected to the CPU 81 as its input/output devices.

タッチ表示部８３は、利用者（操作者）に対して取引内容を案内表示したり、操作者によるタッチ操作で取引情報を入力したりするもので、カメラ部８４は、その利用者（操作者）の顔を撮影するもので、例えば、タッチ画面の上側中央部に配置されている。カード処理部８５は、キャッシュカードやＩＣカードなどに対するカードリーダライタであり、金銭入出力部８６は、金銭の入出金を処理する金銭授受部である。印字部８７は、明細票の印字を行ったり、通帳への印字を行ったりする。このように構成されたＡＴＭ８においても、第１実施形態と同様に、各種処理の内で特定処理の実行を指示する操作を検出すると、その操作者を撮影した画像を取得して、表示画面上にその表示内容と共に表示するようにしている。この場合、第２実施形態の特定処理は、本人認証を前提とする処理（現金支払い処理）である。 The touch display unit 83 guides and displays transaction contents to a user (operator) and inputs transaction information by a touch operation by the operator, and the camera unit 84 uses the user (operator). ) Is taken, and it is arranged, for example, in the upper center part of the touch screen. The card processing unit 85 is a card reader/writer for a cash card, an IC card, etc., and the money input/output unit 86 is a money transfer unit that processes the deposit and withdrawal of money. The printing unit 87 prints a statement slip or a passbook. Also in the ATM 8 configured in this way, as in the first embodiment, when an operation instructing execution of a specific process is detected among various processes, an image of the operator is captured and displayed on the display screen. It is displayed together with the display content. In this case, the identification process of the second embodiment is a process (cash payment process) that requires personal authentication.

図８は、ＡＴＭ８の外観図である。
ＡＴＭ８は、下部ユニット８８と上部ユニット８９を有し、この下部ユニット８８の上面部には、タッチ表示部８３が配設され、更に、紙幣専用の金銭入出部８６と硬貨専用の金銭入出部８６が配設されている。また、上部ユニット８９の前面部には、カード出入口を備えたカード処理部８５と、通帳又は単票の出入口を備えた印字部８７が配設されている他、この上部ユニット８９の前面部の中央部分には、カメラ部８４が配設されている。カメラ部８４は、タッチ表示部８３を操作したり、カード処理部８５からカードを投入したりしている利用者（操作者）の顔を撮影可能とするために、その撮影方向が斜め上方向（利用者の顔方向）に設定されているもので、利用者（操作者）の顔全体を所定の大きさで撮影する。このカメラ部８４によって撮影された画像は、図示のようにタッチ表示部８３の画面（タッチ画面）上にその表示内容と共に表示される。 FIG. 8 is an external view of the ATM 8.
The ATM 8 has a lower unit 88 and an upper unit 89, a touch display section 83 is arranged on the upper surface of the lower unit 88, and further, a money input/output section 86 for banknotes and a money input/output section 86 for coins. Are arranged. Further, on the front surface of the upper unit 89, a card processing section 85 having a card entrance and exit and a printing section 87 having an entrance and exit of a passbook or a single-cut sheet are arranged. A camera section 84 is arranged in the central portion. The camera unit 84 is capable of shooting the face of a user (operator) operating the touch display unit 83 or inserting a card from the card processing unit 85, so that the shooting direction is diagonally upward. It is set in (Face direction of user), and the entire face of the user (operator) is photographed in a predetermined size. The image captured by the camera unit 84 is displayed on the screen (touch screen) of the touch display unit 83 together with its display content as shown in the figure.

図９及び図１０は、第２実施形態において、電源投入に応じて実行開始されるＡＴＭ８の全体動作のうち、本実施形態の特徴部分の動作概要を示したフローチャートである。
先ず、ＡＴＭ８のＣＰＵ８１は、取引メニュー画面をタッチ表示部８３に表示させる（図９のステップＢ１）。この状態において、“現金支払い”のメニュー項目が選択されたかを調べ（ステップＢ２）、その他のメニュー項目（例えば、“入金”、“残高照会”などのメニュー項目）が選択されたときには（ステップＢ２でＮＯ）、次のステップＢ３に移り、選択メニューに対応する処理として、例えば、入金処理、残高照会処理などを行った後、上述のステップＢ１に戻る。 9 and 10 are flowcharts showing an outline of the operation of the characteristic part of the present embodiment among the overall operations of the ATM 8 which is started in response to power-on in the second embodiment.
First, the CPU 81 of the ATM 8 displays the transaction menu screen on the touch display unit 83 (step B1 in FIG. 9). In this state, it is checked whether the "cash payment" menu item has been selected (step B2), and when another menu item (for example, "payment" or "balance inquiry" menu item) has been selected (step B2). NO), the process proceeds to the next step B3, and, for example, as a process corresponding to the selection menu, a deposit process, a balance inquiry process, and the like are performed, and then the process returns to the step B1.

いま、“現金支払い”のメニュー項目が選択されたときには（ステップＢ２でＹＥＳ）、その特定処理（現金支払い処理）の開始に先だって、カメラ部１７で撮影された操作者の顔画像を取得し（ステップＢ４）、その撮影画像を記憶部１２内の画像メモリ（図示省略）に記録保存する動作を開始する（ステップＢ５）。そして、この撮影画像を解析することによって操作者の顔の写り具合を判別し（ステップＢ６）、カメラ部１７に写らないように操作者が意図的に隠れているかを調べ（ステップＢ７）、意図的に隠れている場合には（ステップＢ７でＹＥＳ）、その状態が所定時間（例えば、５秒間）以上継続しているかを調べる（ステップＢ８）。いま、意図的な隠れ動作が所定時間以上継続しているときには（ステップＢ８でＹＥＳ）、不正者の可能性が高いものと認めて特定処理（現金支払い処理）を禁止する旨のメッセージをタッチ画面（取引メニュー画面）上に表示（ステップＢ９）させた後、上述のステップＢ１に戻る。 Now, when the "cash payment" menu item is selected (YES in step B2), the face image of the operator photographed by the camera unit 17 is acquired prior to the start of the specific process (cash payment process) ( In step B4), the operation of recording and saving the captured image in an image memory (not shown) in the storage unit 12 is started (step B5). Then, the photographed image is analyzed to determine the image quality of the operator's face (step B6), and it is checked whether the operator is intentionally hidden so as not to be captured by the camera unit 17 (step B7). If it is hidden (YES in step B7), it is checked whether or not the state continues for a predetermined time (for example, 5 seconds) or more (step B8). Now, when the intentional hiding action continues for a predetermined time or longer (YES in step B8), a message that the specific process (cash payment process) is prohibited because the possibility of being an unauthorized person is high is displayed on the touch screen. After displaying (step B9) on the (transaction menu screen), the process returns to step B1.

一方、操作者が意図的に隠れていない場合、又は瞬間的に隠れていた状態となっても所定時間継続していない場合には（ステップＢ７でＮＯ）、図１０のフローに移り、顔認証処理（第１の認証処理）を行うと共に（ステップＢ１０）、この第１の認証処理とは異なる他の方法で本人認証を行う暗号番号認証処理（第２の認証処理）を行う（ステップＢ１１）。この顔認証処理は、カメラ部１７から取得した撮影画像（顔画像）と予め登録されている顧客の顔画像とを比較してその類否判断で本人確認を行うが、その際、類似判断の許容誤差は、予め広め（緩め）に設定されている。このように顔認証処理は、その精度を低めに設定することにより、パスワードを照合する暗号番号認証処理に対してその補助的、或いは二次的な認証処理とも言えるが、２重の認証処理によって全体として本人認証の精度は高くなる。 On the other hand, if the operator has not intentionally hidden, or if the operator has hidden for a moment and has not continued for a predetermined time (NO in step B7), the process moves to the flow of FIG. The processing (first authentication processing) is performed (step B10), and the encryption number authentication processing (second authentication processing) for performing personal authentication by another method different from the first authentication processing is performed (step B11). .. In this face authentication processing, a photographed image (face image) acquired from the camera unit 17 is compared with a face image of a customer registered in advance and the identity is confirmed by the similarity judgment. The permissible error is set to be wider (loose) in advance. In this way, the face authentication process can be said to be a supplementary or secondary authentication process to the encryption number authentication process for collating the password by setting the accuracy to a low level. The accuracy of personal authentication is high as a whole.

この第１及び第２の認証処理の結果、本人を確認できたか、つまり、“認証ＯＫ”であるかを調べ（ステップＢ１２）、顔認証、暗号番号認証のいずれか一つでも本人確認ができなければ（ステップＢ１２でＮＯ）、リトライ回数を計数するカウンタ（図示省略）に“１”を加算してその値を更新する処理（ステップＢ１３）を行った後、上述のステップＢ１０に戻る。また、顔認証、暗号番号認証の結果、“認証ＯＫ”であってもリトライ回数が制限値（例えば、４回）を超えたときには（ステップＢ１４でＹＥＳ）、特定処理（現金支払い処理）を禁止するために図９のステップＢ１に戻るが、リトライ回数が制限値を超える前に“認証ＯＫ”となったときには（ステップＢ１２でＹＥＳ、ステップＢ１４でＮＯ）、特定処理（現金支払い処理）を開始する（ステップＢ１５）。なお、現金支払い処理が開始されると、タッチ画面の表示内容は、その処理の進行に応じて変化する取引画面に順次切り替えられる。 As a result of the first and second authentication processing, it is checked whether or not the person can be confirmed, that is, whether the person is "authentication OK" (step B12), and the person can be confirmed by any one of face authentication and encryption number authentication. If not (NO in step B12), "1" is added to the counter (not shown) that counts the number of retries and the value is updated (step B13), and then the process returns to step B10. Further, as a result of face authentication and encryption number authentication, even if the authentication is OK, if the number of retries exceeds the limit value (for example, 4 times) (YES in step B14), the specific processing (cash payment processing) is prohibited. In order to do so, the process returns to step B1 in FIG. 9, but when the “authentication is OK” before the number of retries exceeds the limit value (YES in step B12, NO in step B14), the specific process (cash payment process) is started. (Step B15). When the cash payment process is started, the display content of the touch screen is sequentially switched to the transaction screen that changes according to the progress of the process.

そして、特定処理（現金支払い処理）が所定の条件下で実行されるのか否かを判別する（ステップＢ１６〜Ｂ１８）。ここで、所定の条件下は、“顔認証時の誤差”、“所定の時間帯”、“所定金額以上の取引”のいずれか場合である。すなわち、上述したように顔認証処理は、類似判断の許容誤差を広め（緩め）に設定されているので、その許容誤差内であるがその誤差が所定値以上の場合であるか、所定値未満の場合であるかを調べる（ステップＢ１６）。更に、その取引時が所定の時間帯（例えば、深夜や早朝などの危険な時間帯）であるかを調べたり（ステップＢ１７）、その取引金額が所定金額（例えば、１０万円）以上の場合であるかを調べたりする（ステップＢ１８）。 Then, it is determined whether or not the specific process (cash payment process) is executed under a predetermined condition (steps B16 to B18). Here, the predetermined condition is any one of "error during face authentication", "predetermined time period", and "transaction over predetermined amount". That is, as described above, in the face authentication processing, the allowable error for similarity determination is set to be wider (loose), so that the error is within the allowable error but is greater than or equal to a predetermined value, or less than the predetermined value. It is checked whether this is the case (step B16). Further, it is checked whether the transaction is in a predetermined time zone (for example, a dangerous time zone such as midnight or early morning) (step B17), and the transaction amount is a predetermined amount (for example, 100,000 yen) or more. (Step B18).

ここで、許容誤差内であるがその誤差が所定値以上の場合（ステップＢ１６でＹＥＳ）、又は取引時が所定の時間帯に該当する場合（ステップＢ１７でＹＥＳ）、或いは取引金額が所定金額以上の場合には（ステップＢ１８でＹＥＳ）、撮影画像（操作者の顔画像）を取得して、タッチ画面（取引画面）上にその表示内容と共に撮影画像（操作者の顔画像）を表示させる（ステップＢ１９）。更に、タッチ画面（取引画面）上に操作者の顔画像を記録保存中である旨のメッセージを表示させる（ステップＢ２０）。そして、実行中の特定処理（現金支払い処理）が完了したことを条件として（ステップＢ２１）、図９のステップＢ１に戻る。 Here, if the error is within the permissible error but is equal to or more than a predetermined value (YES in step B16), or if the transaction time falls within a predetermined time zone (YES in step B17), or the transaction amount is equal to or more than the predetermined amount. In the case of (YES in step B18), the captured image (face image of the operator) is acquired, and the captured image (face image of the operator) is displayed on the touch screen (transaction screen) together with the display content ( Step B19). Further, a message indicating that the face image of the operator is being recorded and stored is displayed on the touch screen (transaction screen) (step B20). Then, on condition that the specific process (cash payment process) being executed is completed (step B21), the process returns to step B1 in FIG.

以上のように、第２実施形態においては、本人認証を前提とする特定処理を行う場合に、不正行為の牽制用として取得した撮影画像と予め登録されている顔画像とを比較して本人認証を行うようにしたので、不正牽制用の撮影画像を用いて本人認証を行うことができる。 As described above, in the second embodiment, in the case of performing the specific processing premised on the personal authentication, the captured image acquired for restraint of the misconduct and the face image registered in advance are compared to perform the personal authentication. Since this is performed, it is possible to perform personal authentication using the captured image for fraudulent restraint.

特定処理の前提として、顔画像による認証処理と暗証番号による認証処理を行うようにしたので、全体として本人認証の精度を高めることができる。 As the premise of the specific processing, since the authentication processing by the face image and the authentication processing by the personal identification number are performed, the accuracy of the personal authentication can be improved as a whole.

顔画像による認証処理として、予め広め（緩め）に設定されている許容誤差内であるか否かの類似判断を行った結果、許容誤差内であるがその誤差が所定値以上の場合には、撮影画像を表示し、所定値未満の場合には撮影画像を表示しないよう制御するようにしたので、許容誤差を広め（緩め）にして精度を低く設定したとしても操作者の顔表示によりそれを補うことができ、不正操作を牽制することが可能となる。 As a result of performing a similarity judgment as to whether the error is within a permissible error set in advance (loose) as the authentication process using the face image, if the error is within the permissible error but the error is equal to or more than a predetermined value, The captured image is displayed, and if it is less than the specified value, the captured image is not displayed.Therefore, even if the tolerance is widened (loosed) and the accuracy is set low, it is displayed by the operator's face display. It is possible to make up for it and prevent unauthorized operations.

なお、上述した第２実施形態においては、所定の条件下での特定処理（現金支払い処理）の実行であるかを調べる際に、その所定の条件として、“顔認証時の誤差”、“所定の時間帯”、“所定金額以上の取引”を例示したが、リトライ回数が制限値（例えば、４回）に達しなくても所定値（２回）以上の場合であれば、その場合のリトライ回数を所定の条件として、撮影画像を表示するようにしてもよい。 In the second embodiment described above, when checking whether or not the specific process (cash payment process) is executed under a predetermined condition, the predetermined condition is “error during face authentication” and “predetermined condition”. ”Time zone” and “transaction over a predetermined amount” are illustrated, but if the number of retries does not reach the limit value (for example, 4 times) and it is more than a predetermined value (2 times), the retry in that case The captured image may be displayed with the number of times as a predetermined condition.

上述した第２実施形態においては、特定処理として本人認証を前提とする処理（現金支払い処理）を例示したが、本人認証を前提とする出金に絡む取引であれば、現金支払い処理に限らない。 In the above-described second embodiment, the process (cash payment process) that is based on the personal authentication is illustrated as the specific process, but the transaction is not limited to the cash payment process as long as it is a transaction involving withdrawal that is based on the personal authentication. ..

上述した第２実施形態においては、特定処理の前提として、２重の認証処理（顔画像による認証処理と暗証番号による認証処理）を行うようにしたが、２重の認証処理としては、顔画像による認証処理と指紋による認証処理であってもよい。 In the above-described second embodiment, the double authentication process (the authentication process using the face image and the authentication process using the personal identification number) is performed as the premise of the specific process. Alternatively, the authentication processing may be performed by the fingerprint authentication processing.

上述した第２実施形態においては、ＡＴＭ（現金自動預け払い機）８に適用した場合を例示したが、認証処理を前提とする特定処理を行う認証端末やＰＣ（パーソナルコンピュータ）などであってもよい。例えば、本人確認を行ってクレジット決済処理を行うＰＣ、入場者を確認して入場ゲートを開放するゲート装置などであってもよい。その他、ＰＤＡ（個人向け携帯型情報通信機器）、スマートフォンなどの携帯電話機であってもよい。 In the above-described second embodiment, the case where it is applied to the ATM (Automatic Teller Machine) 8 is illustrated, but it may be an authentication terminal or a PC (personal computer) that performs specific processing premised on the authentication processing. Good. For example, it may be a PC that confirms the identity and performs credit settlement processing, a gate device that confirms the visitors and opens the entrance gate, or the like. In addition, a mobile phone such as a PDA (personal portable information communication device) or a smartphone may be used.

上述した各実施形態においては、種処理の内で特定処理の実行を指示する操作を検出した際に、カメラ部１７で撮影された操作者の撮影画像を取得するようにしたが、特定処理を実際に開始する際に、操作者の撮影画像を取得するようにしてもよい。 In each of the above-described embodiments, when the operation instructing the execution of the specific processing is detected in the seed processing, the captured image of the operator captured by the camera unit 17 is acquired. When actually starting, the photographed image of the operator may be acquired.

上述した各実施形態においては、各種のメッセージを出力する場合に表示メッセージの他に、音声メッセージを合わせて出力したり、音声メッセージのみを出力したりするようにしてもよい。 In each of the above-described embodiments, when outputting various messages, a voice message may be output together with the display message, or only the voice message may be output.

上述した第１実施形態においては、内蔵型のカメラ部１７（カメラ部８４）をタッチ画面の前面の上側中央部に配設し、第２実施形態においては、上部ユニット８９の前面部に中央部に配設したが、その配設位置は、任意であり、更に、売上処理装置１（ＡＴＭ８）とは別体のカメラ装置を操作者の前方に配設し、この別体のカメラ装置を売上処理装置１（ＡＴＭ８）から遠隔制御することにより操作者の顔を撮影するようにしてもよい。 In the above-described first embodiment, the built-in camera unit 17 (camera unit 84) is arranged in the upper central portion of the front surface of the touch screen, and in the second embodiment, the central portion is provided in the front portion of the upper unit 89. However, the installation position is arbitrary, and a camera device separate from the sales processing device 1 (ATM8) is installed in front of the operator, and the separate camera device is sold. The operator's face may be photographed by remote control from the processing device 1 (ATM8).

上述した各実施形態においては、表示画面としてタッチ画面を例示したが、タッチ画面に限らず、例えば、押しボタン式のキー操作部に隣接した表示画面であってもよい。このようにキー操作部と表示画面とを隣接する場合であっても、操作者は表示画面上の表示内容を見ながらキー操作を行うようになるため、自分自身の顔画像が表示されていることを確認することができる。また、表示画面上の表示内容は、処理メニュー、各種のガイダンスなどであってもよい。 In each of the above-described embodiments, the touch screen is illustrated as the display screen, but the display screen is not limited to the touch screen, and may be, for example, a display screen adjacent to the push button type key operation unit. Even when the key operation unit and the display screen are adjacent to each other as described above, the operator performs the key operation while watching the display content on the display screen, and thus the face image of himself is displayed. You can check that. Further, the display content on the display screen may be a processing menu, various guidances, or the like.

また、上述した各実施形態において示した“装置”や“部”とは、機能別に複数の筐体に分離されていてもよく、単一の筐体に限らない。また、上述したフローチャートに記述した各ステップは、時系列的な処理に限らず、複数のステップを並列的に処理したり、別個独立して処理したりするようにしてもよい。 Further, the “apparatus” and “unit” shown in each of the above-described embodiments may be separated into a plurality of housings according to their functions, and are not limited to a single housing. Further, each step described in the above-mentioned flowchart is not limited to the time-series processing, and a plurality of steps may be processed in parallel or may be processed independently.

以上、この発明の実施形態について説明したが、この発明は、これに限定されるものではなく、特許請求の範囲に記載された発明とその均等の範囲を含むものである。
以下、本願出願の特許請求の範囲に記載された発明を付記する。
（付記）
（請求項１）
請求項１に記載の発明は、
表示画面上の表示内容に対する指示操作に応じて各種処理を実行する表示処理装置であって、
前記各種処理の内での特定処理を検出する検出手段と、
前記検出手段によって特定処理が検出された場合に、操作者を撮影した画像を取得する取得手段と、
前記取得手段によって取得した撮影画像を前記表示画面上に表示内容と共に表示する表示制御を行う表示制御手段と、
を備えることを特徴とする、
（請求項２）
請求項２に記載の発明は、請求項１に記載の表示処理装置において、
前記表示制御手段は、所定の条件下での前記特定処理の実行であるかを判別し、所定の条件下での実行である場合に、前記取得した撮影画像を前記表示画面上に表示する、
ことを特徴とする。
（請求項３）
請求項３に記載の発明は、請求項１又は２に記載の表示処理装置において、
前記特定処理の開始に先だって、前記撮影画像内の操作者の写り具合を解析する解析手段と、
前記解析手段による解析の結果、操作者を認識するのに困難な写り具合であれば、前記特定処理の実行を抑制する処理抑制手段と、
を更に備える、
ことを特徴とする。
（請求項４）
請求項４に記載の発明は、請求項３に記載の表示処理装置において、
前記処理抑制手段は、前記解析手段による解析の結果、操作者による意図的な隠れ動作によって操作者を認識するのに不可能な写り具合であれば、その特定処理を実行しないように制御する、
ことを特徴とする。
（請求項５）
請求項５に記載の発明は、請求項１又は２に記載の表示処理装置において、
前記特定処理の実行中に前記表示画面上に前記撮影画像が表示されている場合に、前記撮影画像内の操作者の写り具合を解析する解析手段と、
前記解析手段による解析の結果、操作者による意図的な隠れ動作によって操作者を認識するのに不可能な写り具合であれば、その特定処理を中断する処理中断手段と、
を更に備える、
ことを特徴とする。
（請求項６）
請求項６に記載の発明は、請求項８に記載の表示処理装置において、
前記処理中断手段は、前記操作者による意図的な隠れ動作によって操作者を認識するのに不可能な写り具合であれば、その撮影画像を外部に通報、或いは、警告報知する旨の警告メッセージを出力する、
ことを特徴とする。
（請求項７）
請求項７に記載の発明は、請求項１乃至６のいずれか１項に記載の表示処理装置において、
前記特定処理は、本人認証を前提とする特定処理であり、前記取得した撮影画像と予め登録されている顔画像とを比較して本人認証を行う、
ことを特徴とする。
（請求項８）
請求項８に記載の発明は、請求項７に記載の表示処理装置において、
前記特定処理は、本人認証を前提とする特定処理であり、前記取得した撮影画像と予め登録されている顔画像とを比較して本人認証を行う第１の認証処理と、前記第１の認証処理とは異なる他の方法で本人認証を行う第２の認証処理とを行う、
ことを特徴とする。
（請求項９）
請求項９に記載の発明は、請求項７又は８に記載の表示処理装置において、
前記本人認証の処理は、前記取得した撮影画像と予め登録されている顔画像とを比較する際に、予め広めに設定されている許容誤差内であるか否かの類似判断を行い、
前記表示制御手段は、前記許容誤差内であるが誤差が所定値以上の場合には前記取得した撮影画像を前記表示画面上に表示し、前記誤差が前記所定値未満の場合には前記取得した撮影画像を前記表示画面上に表示させないよう制御する、
ことを特徴とする。
（請求項１０）
請求項１０に記載の発明は、請求項１乃至９のいずれか１項に記載の表示処理装置において、
当該処理装置は、現金を収納するドロアとの連携で売上処理を行う売上処理機能付の表示処理装置であって、
前記表示画面上の表示内容に対する指示操作に応じて実行する特定処理は、前記ドロアを開放させるドロアオープン処理である、
ことを特徴とする。
（請求項１１）
請求項１１に記載の発明は、請求項１乃至１０のいずれか１項に記載の表示処理装置において、
前記表示画面は、タッチ操作が可能なタッチ画面、又は、操作部に隣接されている表示画面であり、
当該処理装置は、前記表示画面上の表示内容に対するタッチ操作に応じて各種処理を実行する、又は、前記表示画面に隣接している操作部上での操作に応じて各種処理を実行する、
ことを特徴とする。
（請求項１２）
請求項１２に記載の発明は、
表示画面上の表示内容に対する指示操作に応じて各種処理を実行する表示処理装置のコンピュータを制御するためのプログラムであって、
前記コンピュータを、
前記各種処理の内での特定処理を検出する検出手段と、
前記検出手段によって特定処理が検出された場合に、操作者を撮影した画像を取得する取得手段と、
前記取得手段によって取得した撮影画像を前記表示画面上に表示内容と共に表示する表示制御を行う表示制御手段と、
として機能させるためのプログラム。 Although the embodiment of the present invention has been described above, the present invention is not limited to this, and includes the invention described in the claims and the scope equivalent thereto.
The inventions described in the claims of the present application will be additionally described below.
(Appendix)
(Claim 1)
The invention according to claim 1 is
A display processing device for executing various processes according to an instruction operation for display contents on a display screen,
A detection unit that detects a specific process among the various processes,
An acquisition unit that acquires an image of the operator when a specific process is detected by the detection unit;
Display control means for performing display control for displaying the captured image acquired by the acquisition means on the display screen together with the display content;
Characterized in that,
(Claim 2)
The invention according to claim 2 is the display processing apparatus according to claim 1,
The display control unit determines whether or not the specific process is executed under a predetermined condition, and when the specific process is executed, displays the acquired captured image on the display screen.
It is characterized by
(Claim 3)
The invention according to claim 3 is the display processing device according to claim 1 or 2,
Prior to the start of the specific processing, analysis means for analyzing the image quality of the operator in the photographed image,
As a result of the analysis by the analysis means, if it is difficult to recognize the operator, a processing suppressing means for suppressing the execution of the specific processing,
Further comprises,
It is characterized by
(Claim 4)
The invention according to claim 4 is the display processing apparatus according to claim 3,
The processing suppressing means controls, as a result of the analysis by the analyzing means, not to execute the specific processing if the operator cannot recognize the operator due to an intentional hidden motion by the operator.
It is characterized by
(Claim 5)
The invention according to claim 5 is the display processing device according to claim 1 or 2, wherein:
When the photographed image is displayed on the display screen during the execution of the specific process, an analyzing unit that analyzes the appearance of the operator in the photographed image,
As a result of the analysis by the analysis means, if it is impossible to recognize the operator due to the intentional hidden motion by the operator, a processing interruption means for interrupting the specific processing,
Further comprises,
It is characterized by
(Claim 6)
The invention according to claim 6 is the display processing apparatus according to claim 8,
The processing interruption means, if the photographer cannot recognize the operator due to the intentional hiding motion by the operator, reports the photographed image to the outside or a warning message to the effect that a warning is given. Output,
It is characterized by
(Claim 7)
According to a seventh aspect of the present invention, in the display processing device according to any one of the first to sixth aspects,
The specific process is a specific process premised on personal authentication, and performs personal authentication by comparing the acquired captured image with a face image registered in advance,
It is characterized by
(Claim 8)
The invention according to claim 8 is the display processing device according to claim 7,
The identification processing is identification processing premised on personal authentication, and includes a first authentication processing for performing personal authentication by comparing the acquired captured image with a face image registered in advance, and the first authentication. Perform a second authentication process in which the user is authenticated by another method different from the process,
It is characterized by
(Claim 9)
The invention according to claim 9 is the display processing apparatus according to claim 7 or 8,
The personal identification processing, when comparing the obtained captured image with a face image registered in advance, performs a similarity determination as to whether or not it is within a preset wide tolerance,
The display control unit displays the acquired captured image on the display screen when the error is within the allowable error but is equal to or more than a predetermined value, and the acquired image is acquired when the error is less than the predetermined value. Control so that the captured image is not displayed on the display screen,
It is characterized by
(Claim 10)
The invention according to claim 10 is the display processing apparatus according to any one of claims 1 to 9,
The processing device is a display processing device with a sales processing function that performs sales processing in cooperation with a drawer that stores cash,
The specific process executed in response to the instruction operation for the display content on the display screen is a drawer open process for opening the drawer,
It is characterized by
(Claim 11)
The invention according to claim 11 is the display processing apparatus according to any one of claims 1 to 10,
The display screen is a touch screen capable of touch operation, or a display screen adjacent to the operation unit,
The processing device executes various processes in response to a touch operation on display contents on the display screen, or executes various processes in response to an operation on an operation unit adjacent to the display screen,
It is characterized by
(Claim 12)
The invention according to claim 12 is
A program for controlling a computer of a display processing device that executes various processes according to an instruction operation for display contents on a display screen,
The computer,
A detection unit that detects a specific process among the various processes,
An acquisition unit that acquires an image of the operator when a specific process is detected by the detection unit;
Display control means for performing display control for displaying the captured image acquired by the acquisition means on the display screen together with the display content;
Program to function as.

１ 売上処理装置
３ 公衆回線網
４ 警備員所持の携帯端末装置
８ ＡＴＭ
１１、８１ ＣＰＵ
１２、８２ 記憶部
１３、８３ タッチ入力表示部
１７、８４ カメラ部

1 Sales processing device 3 Public line network 4 Mobile terminal device possessed by security guards 8 ATM
11, 81 CPU
12, 82 Storage unit 13, 83 Touch input display unit 17, 84 Camera unit

Claims (4)

操作者を撮像する撮像手段と、
前記撮像手段と並べて配置された表示手段と、
前記撮像手段により撮像された操作者の画像を、前記表示手段に表示するとともに、録画する制御手段と、
を備え、
前記制御手段は、所定の処理の実行を指示するための操作を受け付ける操作手段を前記操作者の画像と前記撮像手段との間に介在するように前記表示手段に表示させるとともに、前記操作者の画像を録画している旨の表示を前記操作者の画像と並べて前記表示手段に表示させる、
ことを特徴とする表示制御装置。 Imaging means for imaging the operator ,
Display means arranged side by side with the imaging means ,
Control means for displaying and recording the image of the operator imaged by the imaging means on the display means,
Equipped with
The control unit causes the display unit to display an operation unit that receives an operation for instructing execution of a predetermined process so as to be interposed between the image of the operator and the imaging unit, and A display indicating that an image is being recorded is displayed on the display unit side by side with the image of the operator,
A display control device characterized by the above. 前記制御手段は、前記操作手段の操作を受け付けた際に、前記操作者の画像及び前記操作者の画像を録画している旨の表示を前記表示手段に表示させる、
ことを特徴とする請求項１に記載の表示制御装置。 The control unit causes the display unit to display an image of the operator and a display indicating that the image of the operator is being recorded when the operation of the operation unit is accepted.
The display control device according to claim 1, wherein: 前記制御手段は、前記操作手段の操作を受け付けた際に、前記操作者の画像の録画を開始する、
ことを特徴とする請求項１または２に記載の表示制御装置。 The control means starts recording an image of the operator when the operation of the operation means is accepted,
The display control device according to claim 1, wherein the display control device is a display control device. 操作者を撮像する撮像手段と、前記撮像手段と並べて配置された表示手段と、を備える表示処理装置のコンピュータを、A computer of a display processing device, comprising: an image pickup unit for picking up an image of an operator; and a display unit arranged side by side with the image pickup unit,
前記撮像手段により撮像された操作者の画像を、前記表示手段に表示するとともに、録画する制御手段、Control means for displaying and recording the image of the operator imaged by the imaging means on the display means,
として機能させ、Function as
前記制御手段は、所定の処理の実行を指示するための操作を受け付ける操作手段を前記操作者の画像と前記撮像手段との間に介在するように前記表示手段に表示させるとともに、前記操作者の画像を録画している旨の表示を前記操作者の画像と並べて前記表示手段に表示させる、The control unit causes the display unit to display an operation unit that receives an operation for instructing execution of a predetermined process so as to be interposed between the image of the operator and the imaging unit, and A display indicating that an image is being recorded is displayed on the display unit side by side with the image of the operator,
ことを特徴とするプログラム。A program characterized by that.

Images