JP7375047B2 - 表示制御装置、管理装置、表示制御システム、表示制御方法、管理方法及びプログラム - Google Patents

表示制御装置、管理装置、表示制御システム、表示制御方法、管理方法及びプログラム Download PDF

Info

Publication number
JP7375047B2
JP7375047B2 JP2021570558A JP2021570558A JP7375047B2 JP 7375047 B2 JP7375047 B2 JP 7375047B2 JP 2021570558 A JP2021570558 A JP 2021570558A JP 2021570558 A JP2021570558 A JP 2021570558A JP 7375047 B2 JP7375047 B2 JP 7375047B2
Authority
JP
Japan
Prior art keywords
clerk
duty
display
display control
information
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2021570558A
Other languages
English (en)
Other versions
JPWO2021144908A1 (ja
Inventor
貴広 浅野
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sharp NEC Display Solutions Ltd
Original Assignee
Sharp NEC Display Solutions Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sharp NEC Display Solutions Ltd filed Critical Sharp NEC Display Solutions Ltd
Publication of JPWO2021144908A1 publication Critical patent/JPWO2021144908A1/ja
Application granted granted Critical
Publication of JP7375047B2 publication Critical patent/JP7375047B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/50Context or environment of the image
    • G06V20/52Surveillance or monitoring of activities, e.g. for recognising suspicious objects
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q10/00Administration; Management
    • G06Q10/10Office automation; Time management
    • G06Q10/109Time management, e.g. calendars, reminders, meetings or time accounting
    • G06Q10/1091Recording time for administrative or management purposes
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q10/00Administration; Management
    • G06Q10/06Resources, workflows, human or project management; Enterprise or organisation planning; Enterprise or organisation modelling
    • G06Q10/063Operations research, analysis or management
    • G06Q10/0631Resource planning, allocation, distributing or scheduling for enterprises or organisations
    • G06Q10/06311Scheduling, planning or task assignment for a person or group
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q10/00Administration; Management
    • G06Q10/06Resources, workflows, human or project management; Enterprise or organisation planning; Enterprise or organisation modelling
    • G06Q10/063Operations research, analysis or management
    • G06Q10/0631Resource planning, allocation, distributing or scheduling for enterprises or organisations
    • G06Q10/06311Scheduling, planning or task assignment for a person or group
    • G06Q10/063114Status monitoring or status determination for a person or group
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q10/00Administration; Management
    • G06Q10/06Resources, workflows, human or project management; Enterprise or organisation planning; Enterprise or organisation modelling
    • G06Q10/063Operations research, analysis or management
    • G06Q10/0639Performance analysis of employees; Performance analysis of enterprise or organisation operations
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q10/00Administration; Management
    • G06Q10/10Office automation; Time management
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00Commerce
    • G06Q30/02Marketing; Price estimation or determination; Fundraising
    • G06Q30/0201Market modelling; Market analysis; Collecting market data
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00Commerce
    • G06Q30/02Marketing; Price estimation or determination; Fundraising
    • G06Q30/0207Discounts or incentives, e.g. coupons or rebates
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00Commerce
    • G06Q30/02Marketing; Price estimation or determination; Fundraising
    • G06Q30/0241Advertisements
    • G06Q30/0251Targeted advertisements
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00Commerce
    • G06Q30/06Buying, selling or leasing transactions
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16Human faces, e.g. facial parts, sketches or expressions
    • G06V40/168Feature extraction; Face representation
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16Human faces, e.g. facial parts, sketches or expressions
    • G06V40/172Classification, e.g. identification
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/50Maintenance of biometric data or enrolment thereof
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2354/00Aspects of interface with display user

Landscapes

  • Engineering & Computer Science (AREA)
  • Business, Economics & Management (AREA)
  • Human Resources & Organizations (AREA)
  • Strategic Management (AREA)
  • Theoretical Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Physics & Mathematics (AREA)
  • Entrepreneurship & Innovation (AREA)
  • Economics (AREA)
  • Development Economics (AREA)
  • General Business, Economics & Management (AREA)
  • Marketing (AREA)
  • Finance (AREA)
  • Accounting & Taxation (AREA)
  • Multimedia (AREA)
  • Game Theory and Decision Science (AREA)
  • Human Computer Interaction (AREA)
  • Quality & Reliability (AREA)
  • Operations Research (AREA)
  • Educational Administration (AREA)
  • Tourism & Hospitality (AREA)
  • Health & Medical Sciences (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • General Health & Medical Sciences (AREA)
  • Data Mining & Analysis (AREA)
  • General Engineering & Computer Science (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Controls And Circuits For Display Device (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)

Description

本発明は、表示制御装置、管理装置、表示制御システム、表示制御方法、管理方法及びプログラムに関する。
特許文献1は、店舗に設置された表示装置に、広告やクーポン等を表示する技術を開示している。特許文献2は、従業員の出退勤データを管理する技術を開示している。特許文献3は、顔画像に基づき認証を行い、認証した人物が店員か顧客かを判別する技術を開示している。
特開2010-20051号 特開2006-107101号 特開2009-230565号
表示装置(デジタルサイネージ)の周辺を撮影し、撮影画像に基づき視聴者の属性(年令、性別等)を推定し、推定した属性に応じた情報(広告やクーポン等)を表示装置に表示させる技術がある。当該技術によれば、視聴者が興味をもつ可能性が高い情報を表示装置に表示させることができる。
ところで、このような表示装置を店舗に設置した場合、客と店員が表示装置の周辺に位置し、撮影される可能性がある。客は、コンテンツの視聴を楽しむために表示装置の周辺に位置する一方で、勤務中の店員は、表示装置のメンテナンス等の業務目的で表示装置の周辺に位置する。このように客と店員とは表示装置の周辺に位置する目的が違う。それにも関わらず、店員が表示装置の周辺に位置する際にも、客が表示装置の周辺に位置する場合と同様に、撮影画像に基づき属性(年令、性別等)を推定し、推定した属性に応じた情報を表示装置に入力するという不要な処理を行ってしまうと、コンピュータの負担が大きくなる。また、業務目的で表示装置の周辺に位置する店員に対し、適切な情報を表示できないという問題もある。
本発明の目的は、店舗に設置された表示装置に適切な情報を表示させる技術を提供することである。
本発明によれば、
カメラが生成した画像を取得する取得手段と、
前記画像から人物を抽出する人物抽出手段と、
抽出された前記人物の顔画像又は外観の特徴量と、勤務中の店員の顔画像及び外観の特徴量の少なくとも一方を含む勤務中店員情報とに基づき、抽出された前記人物が勤務中の店員であるか判断する判断手段と、
抽出された前記人物が勤務中の店員であるか否かに応じて、店舗に設置されたディスプレイの表示制御を異ならせる表示制御手段と、
を有する表示制御装置が提供される。
また、本発明によれば、
コンピュータが、
カメラが生成した画像を取得し、
前記画像から人物を抽出し、
抽出された前記人物の顔画像又は外観の特徴量と、勤務中の店員の顔画像及び外観の特徴量の少なくとも一方を含む勤務中店員情報とに基づき、抽出された前記人物が勤務中の店員であるか判断し、
抽出された前記人物が勤務中の店員であるか否かに応じて、店舗に設置されたディスプレイの表示制御を異ならせる表示制御方法が提供される。
また、本発明によれば、
コンピュータを、
カメラが生成した画像を取得する取得手段、
前記画像から人物を抽出する人物抽出手段、
抽出された前記人物の顔画像又は外観の特徴量と、勤務中の店員の顔画像及び外観の特徴量の少なくとも一方を含む勤務中店員情報とに基づき、抽出された前記人物が勤務中の店員であるか判断する判断手段、
抽出された前記人物が勤務中の店員であるか否かに応じて、店舗に設置されたディスプレイの表示制御を異ならせる表示制御手段、
として機能させるプログラムが提供される。
また、本発明によれば、
店員の出勤及び退勤を検出する出退勤検出手段と、
前記出退勤検出手段による検出結果に基づき、勤務中の店員の顔画像及び外観の特徴量の少なくとも一方を含む勤務中店員情報を生成する生成手段と、
画像から抽出した人物が勤務中の店員であるか否かに応じて店舗に設置されたディスプレイの表示制御を異ならせる表示制御装置に、前記勤務中店員情報を送信する送信手段と、
を有する管理装置が提供される。
また、本発明によれば、
コンピュータが、
店員の出勤及び退勤を検出し、
前記検出の結果に基づき、勤務中の店員の顔画像及び外観の特徴量の少なくとも一方を含む勤務中店員情報を生成し、
前記勤務中店員情報を、画像から抽出した人物が勤務中の店員であるか否かに応じて店舗に設置されたディスプレイの表示制御を異ならせる表示制御装置に送信する管理方法が提供される。
また、本発明によれば、
コンピュータを、
店員の出勤及び退勤を検出する出退勤検出手段、
前記出退勤検出手段による検出結果に基づき、勤務中の店員の顔画像及び外観の特徴量の少なくとも一方を含む勤務中店員情報を生成する生成手段、
前記勤務中店員情報を、画像から抽出した人物が勤務中の店員であるか否かに応じて店舗に設置されたディスプレイの表示制御を異ならせる表示制御装置に送信する送信手段、
として機能させるプログラムが提供される。
また、本発明によれば、前記表示制御装置と、前記管理装置と、を有する表示制御システムが提供される。
本発明によれば、店舗に設置された表示装置に適切な情報を表示させる技術が実現される。
上述した目的、および、その他の目的、特徴および利点は、以下に述べる好適な実施の形態、および、それに付随する以下の図面によって、さらに明らかになる。
本実施形態の表示制御システムの全体像及び概要を説明するための図である。 本実施形態の表示制御装置及び管理装置のハードウエア構成の一例を示す図である。 本実施形態の管理装置の機能ブロック図の一例である。 本実施形態の表示制御システムが処理する情報の一例を模式的に示す図である。 本実施形態の管理装置の処理の流れの一例を示すフローチャートである。 本実施形態の表示制御装置の機能ブロック図の一例である。 本実施形態の表示制御装置の処理の流れの一例を示すフローチャートである。 本実施形態の表示制御システムが処理する情報の一例を模式的に示す図である。 本実施形態の表示制御システムが処理する情報の一例を模式的に示す図である。 本実施形態の表示制御システムが処理する情報の一例を模式的に示す図である。
<第1の実施形態>
まず、図1を用いて本実施形態の表示制御システムの全体像及び概要を説明する。表示制御システムは、表示制御装置1及び管理装置2を有する。表示制御システムは、さらに、ディスプレイ3、カメラ4及びカメラ5の中の少なくとも1つを含んでもよい。
カメラ5は、出勤した店員7、及び、退勤する店員7を撮影するためのカメラである。カメラ5が生成した映像データは、有線及び/又は無線での通信で管理装置2に送信される。
管理装置2は、カメラ5から受信した映像データに基づき、店員7の出勤及び退勤を検出する。そして、管理装置2は、検出結果に基づき、勤務中の店員7のリスト(勤務中店員情報)を生成する。勤務中店員情報は、勤務中の店員7の顔画像及び外観の特徴量の少なくとも一方を含む。管理装置2は、勤務中店員情報、ディスプレイ3に表示させる表示データ、配信スケジュール等を、有線及び/又は無線での通信で表示制御装置1に送信する。管理端末2は、勤務中店員情報が更新されるごとに、更新後の勤務中店員情報を表示制御装置1に送信してもよい。
表示データは、客6に向けて表示する客用の表示データを含む。客用の表示データは、ターゲット毎(成人女性用、成人男性用、子供用等)の表示データを含んでもよい。また、表示データは、店員7に向けて表示する店員用の表示データを含んでもよい。また、表示データは、店員7及び客6が検出されていないとき用の表示データを含んでもよい。
ディスプレイ3は、店舗に設置される。カメラ4は、ディスプレイ3の周辺、又は、ディスプレイ3に設置され、ディスプレイ3の周辺を撮影する。例えば、カメラ4は、ディスプレイ3を視聴している人が存在すると考えられる位置を撮影する位置及び向きで設置される。カメラ4が生成した映像データは、有線及び/又は無線での通信で表示制御装置1に送信される。
表示制御装置1は、カメラ4から受信した映像データを解析する。まず、表示制御装置1は、映像データから人物を抽出する。人物が抽出された場合、表示制御装置1は、抽出した人物の顔画像又は外観の特徴量と、勤務中店員情報とに基づき、抽出した人物が勤務中の店員であるか判断する。そして、表示制御装置1は、抽出した人物が勤務中の店員であるか否かに応じて、ディスプレイ3の表示制御を異ならせる。
例えば、抽出した人物が勤務中の店員でない場合、表示制御装置1は、客用の表示データをディスプレイ3に入力し、客用の情報を表示させる。例えば、表示制御装置1は、抽出した人物の属性(年令、性別等)を画像から推定し、推定した属性に応じた表示データをディスプレイ3に入力してもよい。
一方、抽出した人物が勤務中の店員7である場合、表示制御装置1は、上述のような処理(客用の表示データをディスプレイ3に入力し、客用の情報を表示させる処理)を行わない。この場合、例えば、表示制御装置1は、店員用の表示データをディスプレイ3に入力し、店員用の情報を表示させてもよい。
このように、本実施形態の処理システムは、ディスプレイ3の周辺に位置する人物が店員7か客6かを認識し、認識結果に応じてディスプレイ3の表示制御を異ならせることができる。
次に、表示制御装置1及び管理装置2の構成を詳細に説明する。まず、表示制御装置1及び管理装置2のハードウエア構成の一例を説明する。
表示制御装置1及び管理装置2の各機能部は、任意のコンピュータのCPU(Central Processing Unit)、メモリ、メモリにロードされるプログラム、そのプログラムを格納するハードディスク等の記憶ユニット(あらかじめ装置を出荷する段階から格納されているプログラムのほか、CD(Compact Disc)等の記憶媒体やインターネット上のサーバ等からダウンロードされたプログラムをも格納できる)、ネットワーク接続用インターフェイスを中心にハードウエアとソフトウエアの任意の組合せによって実現される。そして、その実現方法、装置にはいろいろな変形例があることは、当業者には理解されるところである。
図2は、表示制御装置1及び管理装置2のハードウエア構成を例示するブロック図である。図2に示すように、表示制御装置1及び管理装置2各々は、プロセッサ1A、メモリ2A、入出力インターフェイス3A、周辺回路4A、バス5Aを有する。周辺回路4Aには、様々なモジュールが含まれる。表示制御装置1及び管理装置2の少なくとも一方は周辺回路4Aを有さなくてもよい。なお、表示制御装置1及び管理装置2各々は、物理的及び/又は論理的に分かれた複数の装置で構成されてもよいし、物理的及び/又は論理的に一体となった1つの装置で構成されてもよい。表示制御装置1及び管理装置2の少なくとも一方が物理的及び/又は論理的に分かれた複数の装置で構成される場合、複数の装置各々が上記ハードウエア構成を備えることができる。
バス5Aは、プロセッサ1A、メモリ2A、周辺回路4A及び入出力インターフェイス3Aが相互にデータを送受信するためのデータ伝送路である。プロセッサ1Aは、例えばCPU、GPU(Graphics Processing Unit)などの演算処理装置である。メモリ2Aは、例えばRAM(Random Access Memory)やROM(Read Only Memory)などのメモリである。入出力インターフェイス3Aは、入力装置、外部装置、外部サーバ、外部センサー、カメラ等から情報を取得するためのインターフェイスや、出力装置、外部装置、外部サーバ等に情報を出力するためのインターフェイスなどを含む。入力装置は、例えばキーボード、マウス、マイク、物理ボタン、タッチパネル等である。出力装置は、例えばディスプレイ、スピーカ、プリンター、メーラ等である。プロセッサ1Aは、各モジュールに指令を出し、それらの演算結果をもとに演算を行うことができる。
次に、管理装置2の機能構成を説明する。図3に、管理装置2の機能ブロック図の一例を示す。図示するように、管理装置2は、出退勤検出部16と、生成部17と、送信部18と、記憶部19とを有する。管理装置2は、ディスプレイ3を設置した店舗に設置されるのが好ましい。特に、記憶部19は、店舗に設けられたローカルエリアネットワーク(通信ネットワーク)の中に位置し、当該ローカルエリアネットワークの外部からアクセスできない環境に置かれることが好ましい。例えば、記憶部19は、ローカルエリアネットワークの中に置かれ、当該ローカルエリアネットワークと外部ネットワークとの間には外部ネットワークからのアクセスを管理する装置(ファイアウォール等)が設置されてもよい。
出退勤検出部16は、店員7の出勤及び退勤を検出する。本実施形態では、出退勤検出部16は、カメラ5が生成した画像に基づき、店員7の出勤及び退勤を検出する。カメラ5は、出勤した店員7、及び、退勤する店員7を撮影するためのカメラである。例えば、カメラ5は、スタッフルームの出入口や出退勤を管理するためのタイムレコーダ付近等に設置されてもよいし、その他の場所に設置されてもよい。店員7は、出勤時及び退勤時にカメラ5を操作して自信を撮影してもよい。すなわち、カメラ5は、カメラ5の前に位置した店員7の撮影指示入力に応じて、その店員7の顔画像(静止画像)を撮影してもよい。撮影指示入力は、タッチパネル、物理ボタン、マイク、マウス、キーボード等のあらゆる入力装置を介して実現される。その他、カメラ5は、例えば監視カメラのように、常時動画像を撮影してもよい。監視カメラは、例えばスタッフルームの出入口等、出退勤時に店員7が通る場所に設置されてもよい。
ここで、出退勤検出部16が、画像に含まれる店員7が出勤時及び退勤時のいずれであるかを判断する方法の一例を説明する。上述の通り、本実施形態では、勤務中の店員7の顔画像及び外観の特徴量の少なくとも一方を含む勤務中店員情報(勤務中の店員7のリスト)を作成し、管理する。そこで、出退勤検出部16は、画像に含まれる店員7の顔画像又は外観の特徴量が勤務中店員情報に登録されていない場合に「出勤時」と判断し、登録されている場合に「退勤時」と判断してもよい。
その他、店員7は、カメラ5での撮影時に、出勤時及び退勤時のいずれであるかを、カメラ5や任意の入力装置に入力してもよい。そして、出退勤検出部16は、当該入力内容に基づき、画像に含まれる店員7が出勤時及び退勤時のいずれであるか判断してもよい。
生成部17は、出退勤検出部16による検出結果に基づき、勤務中の店員7の顔画像及び外観の特徴量の少なくとも一方を含む勤務中店員情報を生成し、記憶部19に記憶させる。図4に、勤務中店員情報の一例を模式的に示す。図示する勤務中店員情報は、勤務中の店員7の顔画像と外観の特徴量とを含む。
生成部17は、出退勤検出部16により店員7の出勤が検出されると、カメラが生成した画像に含まれるその店員7の顔画像及びその顔画像から抽出した外観の特徴量の少なくとも一方を勤務中店員情報に登録する。そして、生成部17は、出退勤検出部16により店員7の退勤が検出されると、勤務中店員情報に登録されているその店員7の情報(顔画像及び外観の特徴量の少なくも一方)を削除する。
送信部18は、勤務中店員情報を表示制御装置1に送信する。送信部18は、勤務中店員情報が更新されるごとに、更新後の勤務中店員情報を表示制御装置1に送信してもよい。
次に、図5のフローチャートを用いて、管理装置2の処理の流れの一例を説明する。
出退勤検出部16は、カメラ5により生成された画像を取得すると(S10)、その画像から人物(店員)を抽出する処理を行う(S11)。そして、人物(店員7)が抽出された場合(S11のYes)、出退勤検出部16は、画像に含まれる店員7が出勤時及び退勤時のいずれであるかを判断する(S12)。
出勤時と判断された場合(S12のYes)、生成部17は、勤務中店員情報(図4参照)に、画像に含まれる店員7の顔画像及び当該顔画像から抽出された外観の特徴量の少なくとも一方を登録する(S13)。
一方、退勤時と判断された場合(S12のNo)、生成部17は、勤務中店員情報(図4参照)に登録されているその店員7の情報(顔画像及び外観の特徴量の少なくとも一方)を削除する(S14)。
その後、送信部18は、更新後の勤務中店員情報を表示制御装置1に送信する(S15)。そして、処理を終了する入力がなければ(S16のNo)、管理装置2はS10に戻って同様の処理を繰り返す。
次に、表示制御装置1の機能構成を説明する。図6に、表示制御装置1の機能ブロック図の一例を示す。図示するように、表示制御装置1は、取得部11と、人物抽出部12と、判断部13と、表示制御部14と、記憶部15とを有する。表示制御装置1は、ディスプレイ3を設置した店舗に設置されるのが好ましい。特に、記憶部15は、店舗に設けられたローカルエリアネットワーク(通信ネットワーク)の中に位置し、当該ローカルエリアネットワークの外部からアクセスできない環境に置かれることが好ましい。例えば、記憶部15は、ローカルエリアネットワークの中に置かれ、当該ローカルエリアネットワークと外部ネットワークとの間には外部ネットワークからのアクセスを管理する装置(ファイアウォール等)が設置されてもよい。
記憶部15は、管理装置2から表示制御装置1に送信された各種情報を記憶する。例えば、記憶部15は、勤務中店員情報(図4参照)、ディスプレイ3に表示させる表示データ、配信スケジュール等を記憶する。
取得部11は、カメラ4が生成した画像(以下、「ディスプレイ周辺画像」という場合がある)を取得する。カメラ4は、ディスプレイ3の周辺、又は、ディスプレイ3に設置され、ディスプレイ3の周辺を撮影する。例えば、カメラ4は、ディスプレイ3を視聴している人が存在すると考えられる位置を撮影する位置及び向きで設置される。なお、図1では、ディスプレイ3とカメラ4とが物理的に分かれている例を示しているが、これらは物理的に一体となっていてもよい。例えば、カメラ4がディスプレイ3に内蔵されており、ディスプレイ3の任意の位置にカメラ4のレンズが設けられてもよい。その他、ディスプレイ3の任意の位置にカメラ4が取り付けられてもよい(カメラ4が後付けされたディスプレイ3)。
カメラ4は、常時動画像を撮影してもよい。その他、例えば人感センサーなどの任意のセンサーでディスプレイ3の周辺に人がいることが検知されたことに応じて、カメラ4は、静止画像の撮影又は所定時間分の動画像の撮影を行ってもよい。
人物抽出部12は、ディスプレイ周辺画像から人物を抽出する。人物抽出部12は、従来のあらゆる画像解析技術を用いて、当該抽出を行うことができる。
判断部13は、抽出された人物のディスプレイ周辺画像における顔画像又は外観の特徴量と、勤務中店員情報に登録されている勤務中の店員7の顔画像又は外観の特徴量との照合により、抽出された人物が勤務中の店員であるか判断する。具体的には、判断部13は、抽出された人物のディスプレイ周辺画像における顔画像又は外観の特徴量とマッチング(一致、又は、所定レベル以上類似)するデータが勤務中店員情報に登録されている場合、抽出された人物は勤務中の店員であると判断する。そして、抽出された人物のディスプレイ周辺画像における顔画像又は外観の特徴量とマッチングするデータが勤務中店員情報に登録されていない場合、抽出された人物は勤務中の店員でないと判断する。
表示制御部14は、抽出された人物が勤務中の店員であるか否かに応じて、店舗に設置されたディスプレイ3の表示制御を異ならせる。以下、表示制御の例を説明する。
「表示制御例1」
例えば、表示制御部14は、抽出された人物が勤務中の店員7である場合、第1の情報をディスプレイ3に入力し、表示させてもよい。そして、表示制御部14は、抽出された人物が勤務中の店員7でない場合、第1の情報と異なる第2の情報をディスプレイ3に入力し、表示させてもよい。
第1の情報は、店員7に向けて提供される情報である。第1の情報は、業務アドバイスであってもよい。例えば、「空き時間を利用して、商品の前出し、ゴミ箱チェック、掃除などを行いましょう」等の業務アドバイスがディスプレイ3に表示されてもよい。
また、ディスプレイ3に表示される業務アドバイスは、現在時刻等に応じて変化してもよい。例えば、13時から14時の間には「商品の前出しは終わりましたか?」等の業務アドバイスがディスプレイ3に表示され、14時から15時の間には、「ゴミ箱がいっぱいになっていないか確認しましたか?」等の業務アドバイスがディスプレイ3に表示されてもよい。例えば、表示制御部14は、予め記憶部15に記憶されている時間帯毎に出力する業務アドバイスを定めた情報に基づき、上述した様な時間帯毎の業務アドバイスの出力を実現することができる。
その他、第1の情報として店員用のメニュー画面がディスプレイ3に表示されてもよい。メニュー画面は、「業務アドバイス」、「ディスプレイ設定」、「ディスプレイ操作方法」等の各種メニューが含まれてもよい。「業務アドバイス」が選択された場合、上述した業務アドバイスがディスプレイ3に表示されてもよい。「ディスプレイ設定」が選択された場合、ディスプレイ3の設定(明るさ、音量等)を調整する画面がディスプレイ3に表示されてもよい。「ディスプレイ操作方法」が選択された場合、ディスプレイ3の操作方法のガイダンスがディスプレイ3に表示されてもよい。
なお、上述した第1の情報はあくまで一例であり、これに限定されない。
第2の情報は、客6に向けて提供される情報である。第2の情報は、商品や店等の広告、店のキャンペーン情報等であるが、これらに限定されない。
例えば、ターゲット毎に第2の情報(表示データ)が用意され、記憶部15に記憶されていてもよい。ターゲットは、客6の属性に基づき定義することができ、例えば、「成人女性」、「成人男性」、「子供」等が例示される。表示制御部14は、抽出された人物が店員7でないと判断された場合、すなわち抽出された人物が客6であると判断された場合、ディスプレイ周辺画像に基づき推定されたその客6の属性(年令、性別等)に基づきその客6がどのターゲットに属するかを特定する。そして、表示制御部14は、特定したターゲットに対応する第2の情報をディスプレイ3に入力する。
なお、ターゲット毎に、複数の第2の情報、及び、配信スケジュール(各時間帯にディスプレイ3に表示する第2の情報を定めたもの)が用意され、記憶部15に記憶されていてもよい。この場合、表示制御部14は、ディスプレイ周辺画像から抽出された客6が属するターゲットに対応する配信スケジュールと、現在日時とに基づき、ディスプレイ3に入力する第2の情報を決定する。
また、表示制御部14は、ディスプレイ周辺画像から人物が抽出されなかった場合、すなわち、ディスプレイ3の周辺に人物がいない場合、第1及び第2の情報と異なる第3の情報をディスプレイ3に入力し、表示させてもよい。第3の情報は、例えば、天気予報やニュース等が例示されるがこれらに限定されない。
「表示制御例2」
表示制御部14は、抽出された人物が勤務中の店員7でない場合、上記表示制御例1と同様に、第2の情報をディスプレイ3に入力し、表示させてもよい。そして、表示制御部14は、抽出された人物が勤務中の店員7である場合、ディスプレイ3をスリープ状態や休止状態にしてもよい。また、表示制御部14は、ディスプレイ周辺画像から人物が抽出されなかった場合、すなわち、ディスプレイ3の周辺に人物がいない場合も同様に、ディスプレイ3をスリープ状態や休止状態にしてもよい。
次に、図7のフローチャートを用いて、表示制御装置1の処理の流れの一例を説明する。
取得部11が、カメラ4により生成されたディスプレイ周辺画像を取得すると(S20)、人物抽出部12は、そのディスプレイ周辺画像から人物を抽出する処理を行う。
人物が抽出された場合(S21のYes)、判断部13は、抽出された人物の顔画像又は外観の特徴量が勤務中店員情報(図4参照)に登録されているか判断することで、抽出された人物が勤務中の店員7か否かを判断する。
勤務中店員情報に登録されている場合、すなわち人物抽出部12により抽出された人物は勤務中の店員7であると判断された場合(S22のYes)、表示制御部14は、第1の情報をディスプレイ3に入力する(S23)。一方、勤務中店員情報に登録されていない場合、すなわち人物抽出部12により抽出された人物は勤務中の店員7でないと判断された場合(S22のNo)、表示制御部14は、第2の情報をディスプレイ3に入力する(S24)。
また、S21でディスプレイ周辺画像から人物が抽出されなかった場合(S21のNo)、表示制御部14は、第3の情報をディスプレイ3に入力する(S25)。第1乃至第3の情報の詳細、及び、これらをディスプレイ3に入力する処理の詳細は上述したので、ここでの説明は省略する。
次に、本実施形態の表示制御システムの作用効果を説明する。本実施形態の表示制御システムは、ディスプレイ3の周辺で人物を検出すると、その人物が勤務中の店員7か否かを判断し、判断結果に応じてディスプレイ3の表示制御を異ならせることができる。
例えば、ディスプレイ3の周辺で検出した人物が勤務中の店員7でない場合、広告などをディスプレイ3に表示することで、販売促進等が期待される。また、ディスプレイ3の周辺で検出した人物が勤務中の店員7である場合、例えば業務に関する情報をディスプレイ3に表示することで、業務効率や業務品質の向上等が期待される。その他、ディスプレイ3の周辺で検出した人物が勤務中の店員7である場合、例えばディスプレイ3をスリープ状態や休止状態とすることで、不要な情報表示を回避し、節電効果や表示制御システムの処理負担の軽減などが実現される。
また、本実施形態の場合、出勤に応じて店員7の顔画像及び外観の特徴量の少なくとも一方が勤務中店員情報としてシステムに登録され、退勤に応じて登録された店員7の顔画像や外観の特徴量はシステムから削除される。すなわち、勤務中の店員7の顔画像又は外観の特徴量のシステムへの登録は、勤務中のみに限定される。このため、店員7の顔画像や外観の特徴量を不要に長くシステムに記憶させておく場合に比べて、それらを通信ネットワーク上に流出させるリスクを軽減できる。
また、本実施形態の場合、表示制御装置1や管理装置2は、クラウド等のセンターに設置する必要がなく、ディスプレイ3を設置した店舗(ローカル)に設置することができる。そして、これらの記憶部(記憶部15、記憶部19)を、店舗に設けられたローカルエリアネットワークの中に位置させ、外部からアクセスできない環境に置くことができる。このため、店員7の顔画像や外観の特徴量が通信ネットワーク上に流出するリスクをより軽減できる。
また、本実施形態の場合、店員7の出勤及び退勤を自動的に検出し、検出結果に応じて自動的に勤務中店員情報を生成することができる。このため、当該情報の生成や、当該情報を記憶するデータベースのメンテナンスなどが不要となり、作業者負担が軽減される。
<第2の実施形態>
本実施形態の管理装置2の記憶部19は、図8に示すような店員情報を記憶する。店員情報は、店舗に所属する店員7に関する情報である。図8に示す例の場合、店員情報は、氏名、性別、年齢、顔画像、外観の特徴量(顔画像から抽出された特徴量)等を含む。なお、店員情報は、例示した情報の一部を含まなくてもよいし、連絡先(電話番号、住所)等のその他の情報を含んでもよい。
そして、出退勤検出部16は、カメラ5が生成した画像に含まれる店員7の顔画像又はその特徴量と、店員情報に含まれる各店員7の顔画像及び外観の特徴量の少なくとも一方に基づく店員認証により、カメラ5が生成した画像に含まれる店員7を特定する。そして、出退勤検出部16は、第1の実施形態と同様の手段で、画像に含まれることを特定した店員7が出勤時か退勤時かを特定する。
生成部17は、カメラ5が生成した画像に含まれる出勤した店員7の顔画像及び外観の特徴量の少なくとも一方、又は、店員情報に含まれる出勤した店員7の顔画像及び外観の特徴量の少なくとも一方を、勤務中店員情報に登録する。なお、生成部17は、カメラ5が生成した画像に基づく店員認証に失敗し、カメラ5が生成した画像に含まれる店員7を特定できなかった場合、勤務中店員情報の登録処理は行わない。例えば、カメラ5が生成した画像に店員7と異なる人物が含まれる場合、店員認証に失敗する。そして、そのような人物の顔画像や外観の特徴量は勤務中店員情報に登録されない。
本実施形態の変形例として、出退勤検出部16は、カメラ5が生成した画像を利用しないで店員7の出勤及び退勤を検出してもよい。そして、生成部17は、店員情報に含まれる出勤した店員7の顔画像及び外観の特徴量の少なくとも一方を、勤務中店員情報に登録してもよい。
カメラ5が生成した画像を利用しないで店員7の出勤及び退勤を検出する処理例として、例えば、管理装置2は、店員7の出勤時刻及び退勤時刻を記録するタイムレコーダと通信可能に接続され、タイムレコーダの登録内容を取得してもよい。そして、出退勤検出部16は、タイムレコーダの登録内容に基づき、各店員7の出勤及び退勤を検出してもよい。その他、予め図9に示すような各店員7の勤務日時を示す勤務スケジュールが生成され、記憶部19に記憶されていてもよい。図示する勤務スケジュールによれば、香川道子さんは、2019年11月20日7時から9時まで勤務すること等がわかる。そして、出退勤検出部16は、当該勤務スケジュールに基づき、各店員7の出勤及び退勤を検出してもよい。
本実施形態の表示制御システムのその他の構成は、第1の実施形態と同様である。本実施形態の表示制御システムによれば、第1の実施形態と同様な作用効果が実現される。また、本実施形態の表示制御システムは、店員情報を用いた店員認証を行うので、店員7と異なる人物の顔画像や外観の特徴量が勤務中店員情報に登録される不都合を抑制できる。
また、予め店員情報として店員7の顔画像や外観の特徴量を登録しておけば、それらを勤務中店員情報に登録すればよいので、勤務中店員情報に登録する情報を生成する目的での出勤時における店員7の撮影は不要となる。また、上述の通り、カメラ5が生成した画像を利用しないで店員7の出勤及び退勤を検出する構成を採用すれば、店員7の出勤及び退勤を検出する目的での出退勤時における店員7の撮影も不要となる。結果、カメラ5が不要とり、コスト負担やメンテナンスに要する労力負担が軽減される。
<第3の実施形態>
本実施形態の記憶部19は、各店員7の勤務日における休憩タイミングを示す休憩スケジュールを記憶する。図10に、休憩スケジュールの一例を模式的に示す。図示する休憩スケジュールによれば、徳島景子さん及び高知昇さんは、2019年11月20日の勤務において、13時から14時まで休憩をとること等がわかる。
そして、生成部17は、当該休憩スケジュールに基づき、勤務中であり、かつ、休憩中でない店員7の顔画像及び外観の特徴量の少なくとも一方を含む勤務中店員情報を生成する。具体的には、生成部17は、第1又は第2の実施形態で説明した方法で勤務中店員情報を生成するとともに、休憩スケジュールに基づき、各店員7の休憩開始タイミング及び休憩終了タイミングの到来を監視する。そして、勤務中のある店員7の休憩開始タイミングになると、その店員7の顔画像及び外観の特徴量の少なくとも一方を勤務中店員情報から削除する。そして、その店員7の休憩終了タイミングになると、その店員7の顔画像及び外観の特徴量の少なくとも一方を勤務中店員情報に登録する。
表示制御システムのその他の構成は、第1又は第2の実施形態と同様である。
本実施形態の表示制御システムによれば、第1又は第2の実施形態と同様の作用効果が実現される。また、休憩中の店員7は、店の商品を購入することが可能となるため、客6と同等な扱いとすることが好ましい。本実施形態の表示制御システムによれば、休憩中であり、業務から離れている店員7の情報を勤務中店員情報に含めないようにすることができる。これにより、表示制御システムは、休憩中の店員7を客6と同様に扱い、休憩中の店員7に対して客6と同様な情報を提供することが可能とる。結果、休憩中の店員7に有益な情報(広告等)を提供することが可能となるので、売上向上等が期待される。
以上、実施形態(及び実施例)を参照して本願発明を説明したが、本願発明は上記実施形態(及び実施例)に限定されるものではない。本願発明の構成や詳細には、本願発明のスコープ内で当業者が理解し得る様々な変更をすることができる。
なお、本明細書において、「取得」とは、ユーザ入力に基づき、又は、プログラムの指示に基づき、「自装置が他の装置や記憶媒体に格納されているデータを取りに行くこと(能動的な取得)」、たとえば、他の装置にリクエストまたは問い合わせして受信すること、他の装置や記憶媒体にアクセスして読み出すこと等を含んでもよい。また、「取得」とは、ユーザ入力に基づき、又は、プログラムの指示に基づき、「自装置に他の装置から出力されるデータを入力すること(受動的な取得)」、たとえば、配信(または、送信、プッシュ通知等)されるデータを受信すること等を含んでもよい。また、「取得」とは、受信したデータまたは情報の中から選択して取得すること、及び、「データを編集(テキスト化、データの並び替え、一部データの抽出、ファイル形式の変更等)などして新たなデータを生成し、当該新たなデータを取得すること」を含んでもよい。
上記の実施形態の一部又は全部は、以下の付記のようにも記載されうるが、以下には限定されない。
1. カメラが生成した画像を取得する取得手段と、
前記画像から人物を抽出する人物抽出手段と、
抽出された前記人物の顔画像又は外観の特徴量と、勤務中の店員の顔画像及び外観の特徴量の少なくとも一方を含む勤務中店員情報とに基づき、抽出された前記人物が勤務中の店員であるか判断する判断手段と、
抽出された前記人物が勤務中の店員であるか否かに応じて、店舗に設置されたディスプレイの表示制御を異ならせる表示制御手段と、
を有する表示制御装置。
2. 前記カメラは、前記ディスプレイの周辺又は前記ディスプレイに設置される1に記載の表示制御装置。
3. 前記表示制御手段は、
抽出された前記人物が勤務中の店員である場合、第1の情報を前記ディスプレイに入力し、
抽出された前記人物が勤務中の店員でない場合、前記第1の情報と異なる第2の情報を前記ディスプレイに入力する1又は2に記載の表示制御装置。
4. 前記第1の情報は、業務アドバイスである3に記載の表示制御システム。
5. 前記表示制御手段は、時間帯毎に前記業務アドバイスを定めた情報と、現在時刻とに基づき、前記ディスプレイに表示させる前記業務アドバイスを決定する4に記載の表示制御システム。
6. 前記第2の情報は、広告又はキャンペーン情報である3から5のいずれかに記載の表示制御システム。
7. 前記表示制御手段は、前記画像に基づき前記人物の属性を推定し、推定した前記属性に基づき、ディスプレイに表示させる前記広告又は前記キャンペーン情報を決定する6に記載の表示制御システム。
8. 前記勤務中店員情報を記憶し、前記ディスプレイを設置した店舗に設置されている記憶手段をさらに有し、
前記判断手段は、前記記憶手段に記憶された前記勤務中店員情報に基づき、前記判断を行う1から7のいずれかに記載の表示制御装置。
9. 前記勤務中店員情報は、勤務中であり、かつ、休憩中でない店員の顔画像及び外観の特徴量の少なくとも一方を含む1から8のいずれかに記載の表示制御装置。
10. コンピュータが、
カメラが生成した画像を取得し、
前記画像から人物を抽出し、
抽出された前記人物の顔画像又は外観の特徴量と、勤務中の店員の顔画像及び外観の特徴量の少なくとも一方を含む勤務中店員情報とに基づき、抽出された前記人物が勤務中の店員であるか判断し、
抽出された前記人物が勤務中の店員であるか否かに応じて、店舗に設置されたディスプレイの表示制御を異ならせる表示制御方法。
11. コンピュータを、
カメラが生成した画像を取得する取得手段、
前記画像から人物を抽出する人物抽出手段、
抽出された前記人物の顔画像又は外観の特徴量と、勤務中の店員の顔画像及び外観の特徴量の少なくとも一方を含む勤務中店員情報とに基づき、抽出された前記人物が勤務中の店員であるか判断する判断手段、
抽出された前記人物が勤務中の店員であるか否かに応じて、店舗に設置されたディスプレイの表示制御を異ならせる表示制御手段、
として機能させるプログラム。
12. 店員の出勤及び退勤を検出する出退勤検出手段と、
前記出退勤検出手段による検出結果に基づき、勤務中の店員の顔画像及び外観の特徴量の少なくとも一方を含む勤務中店員情報を生成する生成手段と、
画像から抽出した人物が勤務中の店員であるか否かに応じて店舗に設置されたディスプレイの表示制御を異ならせる表示制御装置に、前記勤務中店員情報を送信する送信手段と、
を有する管理装置。
13. 前記出退勤検出手段は、カメラが生成した画像に基づき店員の出勤を検出し、
前記生成手段は、前記カメラが生成した画像に含まれる出勤した店員の顔画像及び外観の特徴量の少なくとも一方を前記勤務中店員情報に登録する12に記載の管理装置。
14. 前記出退勤検出手段は、カメラが生成した画像と、店員の顔画像及び外観の特徴量の少なくとも一方を含む店員情報とに基づく店員認証により、店員の出勤を検出し、
前記生成手段は、前記カメラが生成した画像に含まれる出勤した店員の顔画像及び外観の特徴量の少なくとも一方、又は、前記店員情報に含まれる出勤した店員の顔画像及び外観の特徴量の少なくとも一方を、前記勤務中店員情報に登録する12に記載の管理装置。
15. 前記生成手段は、前記出退勤検出手段による店員の退勤の検出に応じて、当該退勤する店員の顔画像及び外観の特徴量の少なくとも一方を前記勤務中店員情報から削除する12から14のいずれかに記載の管理装置。
16. 前記生成手段は、各店員の勤務日における休憩タイミングを示す休憩スケジュールに基づき、勤務中であり、かつ、休憩中でない店員の顔画像及び外観の特徴量の少なくとも一方を含む前記勤務中店員情報を生成する12から15のいずれかに記載の管理装置。
17. コンピュータが、
店員の出勤及び退勤を検出し、
前記検出の結果に基づき、勤務中の店員の顔画像及び外観の特徴量の少なくとも一方を含む勤務中店員情報を生成し、
前記勤務中店員情報を、画像から抽出した人物が勤務中の店員であるか否かに応じて店舗に設置されたディスプレイの表示制御を異ならせる表示制御装置に送信する管理方法。
18. コンピュータを、
店員の出勤及び退勤を検出する出退勤検出手段、
前記出退勤検出手段による検出結果に基づき、勤務中の店員の顔画像及び外観の特徴量の少なくとも一方を含む勤務中店員情報を生成する生成手段、
前記勤務中店員情報を、画像から抽出した人物が勤務中の店員であるか否かに応じて店舗に設置されたディスプレイの表示制御を異ならせる表示制御装置に送信する送信手段、
として機能させるプログラム。
19. 1から9のいずれかに記載の表示制御装置と、12から16のいずれかに記載の管理装置と、を有する表示制御システム。

Claims (19)

  1. カメラが生成した画像を取得する取得手段と、
    前記画像から人物を抽出する人物抽出手段と、
    抽出された前記人物の顔画像又は外観の特徴量と、勤務中の店員の顔画像及び外観の特徴量の少なくとも一方を含む勤務中店員情報とに基づき、抽出された前記人物が勤務中の店員であるか判断する判断手段と、
    抽出された前記人物が勤務中の店員であるか否かに応じて、店舗に設置されたディスプレイの表示制御を異ならせる表示制御手段と、
    を有する表示制御装置。
  2. 前記カメラは、前記ディスプレイの周辺又は前記ディスプレイに設置される請求項1に記載の表示制御装置。
  3. 前記表示制御手段は、
    抽出された前記人物が勤務中の店員である場合、第1の情報を前記ディスプレイに入力し、
    抽出された前記人物が勤務中の店員でない場合、前記第1の情報と異なる第2の情報を前記ディスプレイに入力する請求項1又は2に記載の表示制御装置。
  4. 前記第1の情報は、業務アドバイスである請求項3に記載の表示制御装置
  5. 前記表示制御手段は、時間帯毎に前記業務アドバイスを定めた情報と、現在時刻とに基づき、前記ディスプレイに表示させる前記業務アドバイスを決定する請求項4に記載の表示制御装置
  6. 前記第2の情報は、広告又はキャンペーン情報である請求項3から5のいずれか1項に記載の表示制御装置
  7. 前記表示制御手段は、前記画像に基づき前記人物の属性を推定し、推定した前記属性に基づき、ディスプレイに表示させる前記広告又は前記キャンペーン情報を決定する請求項6に記載の表示制御装置
  8. 前記勤務中店員情報を記憶し、前記ディスプレイを設置した店舗に設置されている記憶手段をさらに有し、
    前記判断手段は、前記記憶手段に記憶された前記勤務中店員情報に基づき、前記判断を行う請求項1から7のいずれか1項に記載の表示制御装置。
  9. 前記勤務中店員情報は、勤務中であり、かつ、休憩中でない店員の顔画像及び外観の特徴量の少なくとも一方を含む請求項1から8のいずれか1項に記載の表示制御装置。
  10. コンピュータが、
    カメラが生成した画像を取得し、
    前記画像から人物を抽出し、
    抽出された前記人物の顔画像又は外観の特徴量と、勤務中の店員の顔画像及び外観の特徴量の少なくとも一方を含む勤務中店員情報とに基づき、抽出された前記人物が勤務中の店員であるか判断し、
    抽出された前記人物が勤務中の店員であるか否かに応じて、店舗に設置されたディスプレイの表示制御を異ならせる表示制御方法。
  11. コンピュータを、
    カメラが生成した画像を取得する取得手段、
    前記画像から人物を抽出する人物抽出手段、
    抽出された前記人物の顔画像又は外観の特徴量と、勤務中の店員の顔画像及び外観の特徴量の少なくとも一方を含む勤務中店員情報とに基づき、抽出された前記人物が勤務中の店員であるか判断する判断手段、
    抽出された前記人物が勤務中の店員であるか否かに応じて、店舗に設置されたディスプレイの表示制御を異ならせる表示制御手段、
    として機能させるプログラム。
  12. 店員の出勤及び退勤を検出する出退勤検出手段と、
    前記出退勤検出手段による検出結果に基づき、勤務中の店員の顔画像及び外観の特徴量の少なくとも一方を含む勤務中店員情報を生成する生成手段と、
    画像から抽出した人物が勤務中の店員であるか否かに応じて店舗に設置されたディスプレイの表示制御を異ならせる表示制御装置に、前記勤務中店員情報を送信する送信手段と、
    を有する管理装置。
  13. 前記出退勤検出手段は、カメラが生成した画像に基づき店員の出勤を検出し、
    前記生成手段は、前記カメラが生成した画像に含まれる出勤した店員の顔画像及び外観の特徴量の少なくとも一方を前記勤務中店員情報に登録する請求項12に記載の管理装置。
  14. 前記出退勤検出手段は、カメラが生成した画像と、店員の顔画像及び外観の特徴量の少なくとも一方を含む店員情報とに基づく店員認証により、店員の出勤を検出し、
    前記生成手段は、前記カメラが生成した画像に含まれる出勤した店員の顔画像及び外観の特徴量の少なくとも一方、又は、前記店員情報に含まれる出勤した店員の顔画像及び外観の特徴量の少なくとも一方を、前記勤務中店員情報に登録する請求項12に記載の管理装置。
  15. 前記生成手段は、前記出退勤検出手段による店員の退勤の検出に応じて、当該退勤する店員の顔画像及び外観の特徴量の少なくとも一方を前記勤務中店員情報から削除する請求項12から14のいずれか1項に記載の管理装置。
  16. 前記生成手段は、各店員の勤務日における休憩タイミングを示す休憩スケジュールに基づき、勤務中であり、かつ、休憩中でない店員の顔画像及び外観の特徴量の少なくとも一方を含む前記勤務中店員情報を生成する請求項12から15のいずれか1項に記載の管理装置。
  17. コンピュータが、
    店員の出勤及び退勤を検出し、
    前記検出の結果に基づき、勤務中の店員の顔画像及び外観の特徴量の少なくとも一方を含む勤務中店員情報を生成し、
    前記勤務中店員情報を、画像から抽出した人物が勤務中の店員であるか否かに応じて店舗に設置されたディスプレイの表示制御を異ならせる表示制御装置に送信する管理方法。
  18. コンピュータを、
    店員の出勤及び退勤を検出する出退勤検出手段、
    前記出退勤検出手段による検出結果に基づき、勤務中の店員の顔画像及び外観の特徴量の少なくとも一方を含む勤務中店員情報を生成する生成手段、
    前記勤務中店員情報を、画像から抽出した人物が勤務中の店員であるか否かに応じて店舗に設置されたディスプレイの表示制御を異ならせる表示制御装置に送信する送信手段、
    として機能させるプログラム。
  19. 請求項1から9のいずれか1項に記載の表示制御装置と、
    請求項12から16のいずれか1項に記載の管理装置と、
    を有する表示制御システム。
JP2021570558A 2020-01-16 2020-01-16 表示制御装置、管理装置、表示制御システム、表示制御方法、管理方法及びプログラム Active JP7375047B2 (ja)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/JP2020/001229 WO2021144908A1 (ja) 2020-01-16 2020-01-16 表示制御装置、管理装置、表示制御システム、表示制御方法、管理方法及びプログラム

Publications (2)

Publication Number Publication Date
JPWO2021144908A1 JPWO2021144908A1 (ja) 2021-07-22
JP7375047B2 true JP7375047B2 (ja) 2023-11-07

Family

ID=76864592

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2021570558A Active JP7375047B2 (ja) 2020-01-16 2020-01-16 表示制御装置、管理装置、表示制御システム、表示制御方法、管理方法及びプログラム

Country Status (5)

Country Link
US (1) US20220351146A1 (ja)
EP (1) EP4092593A4 (ja)
JP (1) JP7375047B2 (ja)
CN (1) CN114930366A (ja)
WO (1) WO2021144908A1 (ja)

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2018132811A (ja) 2017-02-13 2018-08-23 日本電気株式会社 情報処理装置、情報処理方法および情報処理プログラム
JP2019113978A (ja) 2017-12-22 2019-07-11 キヤノンマーケティングジャパン株式会社 動線分析システム、動線分析システムの制御方法、およびプログラム

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2568029B2 (ja) * 1993-04-30 1996-12-25 株式会社富士通ソーシアルサイエンスラボラトリ 出退勤不正チェックシステム
JP2006107101A (ja) 2004-10-05 2006-04-20 Ganko Food Service Kk 出退勤管理システム
JP4966896B2 (ja) 2008-03-24 2012-07-04 ローレルバンクマシン株式会社 行動管理装置
JP2010020051A (ja) 2008-07-10 2010-01-28 Seiko Epson Corp 表示装置、広告配信システム、表示装置の制御方法およびそのプログラム
EP3742336A1 (en) * 2018-01-10 2020-11-25 Trax Technology Solutions Pte Ltd. Automatically monitoring retail products based on captured images

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2018132811A (ja) 2017-02-13 2018-08-23 日本電気株式会社 情報処理装置、情報処理方法および情報処理プログラム
JP2019113978A (ja) 2017-12-22 2019-07-11 キヤノンマーケティングジャパン株式会社 動線分析システム、動線分析システムの制御方法、およびプログラム

Also Published As

Publication number Publication date
EP4092593A4 (en) 2023-08-30
EP4092593A1 (en) 2022-11-23
JPWO2021144908A1 (ja) 2021-07-22
US20220351146A1 (en) 2022-11-03
CN114930366A (zh) 2022-08-19
WO2021144908A1 (ja) 2021-07-22

Similar Documents

Publication Publication Date Title
JP5344547B2 (ja) 人の属性情報を取得するpos端末装置、posシステム、属性情報取得方法、及び属性情報取得プログラム
JP5217922B2 (ja) 電子広告システム、電子広告配信装置、及びプログラム
KR20130117868A (ko) 동적 광고 컨텐츠 선택
JP6148948B2 (ja) 情報処理システム、情報処理方法および情報処理プログラム
JP2010272077A (ja) 情報再生方法及び情報再生装置
JPWO2018235595A1 (ja) 情報提供装置、情報提供方法及びプログラム
KR102187773B1 (ko) Ai카메라를 이용한 광고 송출 시스템
JP5489197B2 (ja) 電子広告装置・方法及びプログラム
WO2011047279A2 (en) A system and method for personalizing content for a mobile device
JP7375047B2 (ja) 表示制御装置、管理装置、表示制御システム、表示制御方法、管理方法及びプログラム
US20180357667A1 (en) Systems and Methods for Interactive Media Communication
US11294909B2 (en) Detection and utilization of attributes
JP2014146242A (ja) 情報配信装置、情報表示システムおよびプログラム
KR20120020191A (ko) 광고 제공 방법
JP5496144B2 (ja) 情報再生装置、情報再生用のプログラム、情報再生方法
US11659273B2 (en) Information processing apparatus, information processing method, and non-transitory storage medium
CN114255056A (zh) 广告显示方法及电子设备
US20230088964A1 (en) Information processing apparatus, information processing method, and non-transitory storage medium
WO2021205875A1 (ja) 店舗システム、処理方法及びプログラム
US20220180380A1 (en) Information processing apparatus, information processing method, and program
JP7190620B2 (ja) 情報処理装置、情報配信方法、及び情報配信プログラム
JP7494933B2 (ja) 情報提供システム、情報提供方法及びプログラム
JP7505497B2 (ja) 処理装置、処理システム、処理方法及びプログラム
WO2023032000A1 (ja) 処理装置、処理方法及びプログラム
JP2024043680A (ja) 情報処理プログラム、端末装置および情報処理方法

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20220707

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20230808

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20230925

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20231003

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20231025

R150 Certificate of patent or registration of utility model

Ref document number: 7375047

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150