JP7505524B2 - 情報処理システム、情報処理装置、情報処理方法および情報処理プログラム - Google Patents

情報処理システム、情報処理装置、情報処理方法および情報処理プログラム Download PDF

Info

Publication number
JP7505524B2
JP7505524B2 JP2022126981A JP2022126981A JP7505524B2 JP 7505524 B2 JP7505524 B2 JP 7505524B2 JP 2022126981 A JP2022126981 A JP 2022126981A JP 2022126981 A JP2022126981 A JP 2022126981A JP 7505524 B2 JP7505524 B2 JP 7505524B2
Authority
JP
Japan
Prior art keywords
imaging
information
timing
information processing
movement
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2022126981A
Other languages
English (en)
Other versions
JP2022160631A (ja
Inventor
大 金野
浩太 岩元
可菜子 多賀
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
NEC Corp
Original Assignee
NEC Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by NEC Corp filed Critical NEC Corp
Priority to JP2022126981A priority Critical patent/JP7505524B2/ja
Publication of JP2022160631A publication Critical patent/JP2022160631A/ja
Application granted granted Critical
Publication of JP7505524B2 publication Critical patent/JP7505524B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)

Description

本発明は、情報処理システム、情報処理装置、情報処理方法および情報処理プログラムに関する。
上記技術分野において、特許文献1には、商品棚を撮影して商品が適切に配置されているかチェックする技術が開示されている。
特開2017-14014号公報
しかしながら、上記文献に記載の技術では、カメラの撮像および移動のタイミングを考慮していないので、より効率的に店舗運営をすることができなかった。
本発明の目的は、上述の課題を解決する技術を提供することにある。
上記目的を達成するため、本発明に係る情報処理システムは、
商品棚を撮像する少なくとも1つの撮像手段と、
前記撮像手段を移動させる移動手段と、
前記商品棚における商品の陳列状態を検知するセンサからの情報と、POS(Point of Sales)システムからの情報とに基づいて、前記撮像手段の撮像および前記移動手段による前記撮像手段の移動のタイミングを制御する制御手段と、
を備え
前記制御手段は、前記センサからの情報と前記POSシステムからの情報とに基づいて、前記商品棚の状態変化を検出した後のタイミングで前記撮像および移動を制御する情報処理システムである。
上記目的を達成するため、本発明に係る他の情報処理システムは、
商品棚を撮像する少なくとも1つの撮像手段と、
前記撮像手段を移動させる移動手段と、
前記商品棚における商品の陳列状態を検知するセンサからの情報と、POS(Point of Sales)システムからの情報とに基づいて、前記撮像手段の撮像および前記移動手段による前記撮像手段の移動のタイミングを制御する制御手段と、
を備え、
前記制御手段は、前記センサからの情報と前記POSシステムからの情報とに基づいて、店舗内に陳列されている商品の販売可能期限から所定時間前のタイミングで前記撮像および移動を制御する情報処理システムである。
上記目的を達成するため、本発明に係る他の情報処理システムは、
商品棚を撮像する少なくとも1つの撮像手段と、
前記撮像手段を移動させる移動手段と、
前記商品棚における商品の陳列状態を検知するセンサからの情報と、POS(Point of Sales)システムからの情報とに基づいて、前記撮像手段の撮像および前記移動手段による前記撮像手段の移動のタイミングを制御する制御手段と、
を備え、
前記制御手段は、店舗内の監視カメラからの情報に基づいて、客が所定の商品棚の周辺に集中したことを検出した後のタイミングで前記撮像および移動を制御する情報処理システム。
上記目的を達成するため、本発明に係る他の情報処理システムは、
商品棚を撮像する少なくとも1つの撮像手段と、
前記撮像手段を移動させる移動手段と、
前記商品棚における商品の陳列状態を検知するセンサからの情報と、POS(Point of Sales)システムからの情報とに基づいて、前記撮像手段の撮像および前記移動手段による前記撮像手段の移動のタイミングを制御する制御手段と、 バックルームに商品の在庫があるか否かを判定する在庫判定手段と、
備え、
前記制御手段は、前記在庫判定手段による判定結果に基づいて、前記撮像および前記移動を制御する情報処理システムである。
上記目的を達成するため、本発明に係る情報処理システムの制御方法は、
商品棚を撮像する少なくとも1つの撮像手段と、
前記撮像手段を移動させる移動手段と、
を備えた情報処理システムの制御方法であって、
制御手段が、前記商品棚における商品の陳列状態を検知するセンサからの情報と、POS(Point of Sales)システムからの情報とに基づいて、前記撮像手段の撮像および前記移動手段による前記撮像手段の移動のタイミングを制御する制御ステップを含み
前記制御ステップでは、前記センサからの情報と前記POSシステムからの情報とに基づいて、前記商品棚の状態変化を検出した後のタイミングで前記撮像および移動を制御する情報処理システムの制御方法である。
上記目的を達成するため、本発明に係る他の情報処理システムの制御方法は、
商品棚を撮像する少なくとも1つの撮像手段と、
前記撮像手段を移動させる移動手段と、
を備えた情報処理システムの制御方法であって、
制御手段が、前記商品棚における商品の陳列状態を検知するセンサからの情報と、POS(Point of Sales)システムからの情報とに基づいて、前記撮像手段の撮像および前記移動手段による前記撮像手段の移動のタイミングを制御する制御ステップを含み、
前記制御ステップでは、前記センサからの情報と前記POSシステムからの情報とに基づいて、店舗内に陳列されている商品の販売可能期限から所定時間前のタイミングで前記撮像および移動を制御する情報処理システムの制御方法である。
上記目的を達成するため、本発明に係る他の情報処理システムの制御方法は、
商品棚を撮像する少なくとも1つの撮像手段と、
前記撮像手段を移動させる移動手段と、
を備えた情報処理システムの制御方法であって、
制御手段が、前記商品棚における商品の陳列状態を検知するセンサからの情報と、POS(Point of Sales)システムからの情報とに基づいて、前記撮像手段の撮像および前記移動手段による前記撮像手段の移動のタイミングを制御する制御ステップを含み、
前記制御ステップでは、店舗内の監視カメラからの情報に基づいて、客が所定の商品棚の周辺に集中したことを検出した後のタイミングで前記撮像および移動を制御する情報処理システムの制御方法である。
上記目的を達成するため、本発明に係る他の情報処理システムの制御方法は、
商品棚を撮像する少なくとも1つの撮像手段と、
前記撮像手段を移動させる移動手段と、
を備えた情報処理システムの制御方法であって、
制御手段が前記商品棚における商品の陳列状態を検知するセンサからの情報と、POS(Point of Sales)システムからの情報とに基づいて、前記撮像手段の撮像および前記移動手段による前記撮像手段の移動のタイミングを制御する制御ステップと、
バックルームに商品の在庫があるか否かを判定する在庫判定ステップと、
含み、
前記制御ステップでは、前記在庫判定ステップにおける判定結果に基づいて、前記撮像および前記移動を制御する情報処理システムの制御方法である。
上記目的を達成するため、本発明に係る情報処理プログラムは、
商品棚を撮像する少なくとも1つの撮像手段と、
前記撮像手段を移動させる移動手段と、
を備えた情報処理システムにおいて、
前記商品棚における商品の陳列状態を検知するセンサからの情報と、POS(Point of Sales)システムからの情報とに基づいて、前記撮像手段の撮像および前記移動手段による前記撮像手段の移動のタイミングを制御する制御ステップを実行させる情報処理プログラムであって
前記制御ステップでは、前記センサからの情報と前記POSシステムからの情報とに基づいて、前記商品棚の状態変化を検出した後のタイミングで前記撮像および移動を制御する情報処理プログラムである。
上記目的を達成するため、本発明に係る他の情報処理プログラムは、
商品棚を撮像する少なくとも1つの撮像手段と、
前記撮像手段を移動させる移動手段と、
を備えた情報処理システムにおいて、
前記商品棚における商品の陳列状態を検知するセンサからの情報と、POS(Point of Sales)システムからの情報とに基づいて、前記撮像手段の撮像および前記移動手段による前記撮像手段の移動のタイミングを制御する制御ステップを実行させる情報処理プログラムであって、
前記制御ステップでは、前記センサからの情報と前記POSシステムからの情報とに基づいて、店舗内に陳列されている商品の販売可能期限から所定時間前のタイミングで前記撮像および移動を制御する情報処理プログラムである。
上記目的を達成するため、本発明に係る他の情報処理プログラムは、
商品棚を撮像する少なくとも1つの撮像手段と、
前記撮像手段を移動させる移動手段と、
を備えた情報処理システムにおいて、
制御手段が、前記商品棚における商品の陳列状態を検知するセンサからの情報と、POS(Point of Sales)システムからの情報とに基づいて、前記撮像手段の撮像および前記移動手段による前記撮像手段の移動のタイミングを制御する制御ステップを実行させる情報処理プログラムであって、
前記制御ステップでは、店舗内の監視カメラからの情報に基づいて、客が所定の商品棚の周辺に集中したことを検出した後のタイミングで前記撮像および移動を制御する情報処理プログラムである。
上記目的を達成するため、本発明に係る他の情報処理プログラムは、
商品棚を撮像する少なくとも1つの撮像手段と、
前記撮像手段を移動させる移動手段と、
を備えた情報処理システムにおいて、
前記商品棚における商品の陳列状態を検知するセンサからの情報と、POS(Point of Sales)システムからの情報とに基づいて、前記撮像手段の撮像および前記移動手段による前記撮像手段の移動のタイミングを制御する制御ステップと、
バックルームに商品の在庫があるか否かを判定する在庫判定ステップと、
を実行させる情報処理プログラムであって、
前記制御ステップでは、前記在庫判定ステップにおける判定結果に基づいて、前記撮像および前記移動を制御する情報処理プログラムである。
本発明によれば、より効率的に店舗運営をすることができる。
本発明の第1実施形態に係る情報処理システムの構成を示すブロック図である。 本発明の第2実施形態に係る情報処理システムの概略を説明する図である。 本発明の第2実施形態に係る情報処理システムの構成を示すブロック図である。 本発明の第2実施形態に係る情報処理システムに含まれる情報処理装置の備える制御テーブルの一例を示す図である。 本発明の第2実施形態に係る情報処理システムに含まれる情報処理装置のハードウェア構成を説明するブロック図である。 本発明の第2実施形態に係る情報処理システムに含まれる情報処理装置の処理手順を説明するフローチャートである。 本発明の第3実施形態に係る情報処理システムの構成を示すブロック図である。 本発明の第3実施形態に係る情報処理システムに含まれる情報処理装置の備える在庫テーブルの一例を示す図である。 本発明の第3実施形態に係る情報処理システムに含まれる情報処理装置のハードウェア構成を説明するブロック図である。 本発明の第3実施形態に係る情報処理システムに含まれる情報処理装置の処理手順を説明するフローチャートである。
以下に、本発明を実施するための形態について、図面を参照して、例示的に詳しく説明記載する。ただし、以下の実施の形態に記載されている、構成、数値、処理の流れ、機能要素などは一例に過ぎず、その変形や変更は自由であって、本発明の技術範囲を以下の記載に限定する趣旨のものではない。
[第1実施形態]
本発明の第1実施形態としての情報処理システム100について、図1を用いて説明する。情報処理システム100は、所定のタイミングで撮像部の撮像および移動を制御するシステムである。
図1に示すように、情報処理システム100は、撮像部101と、移動部102と、制御部103と、を含む。撮像部101は、商品棚を撮像する。撮像部101は、少なくとも1つある。移動部102は、撮像部101を移動させる。制御部103は、所定のタイミングで、撮像部101による撮像および移動部102による移動を制御する。
本実施形態によれば、より効率的に店舗運営をすることができる。
[第2実施形態]
次に本発明の第2実施形態に係る情報処理システム200について、図2乃至図6を用いて説明する。図2は、本実施形態に係る情報処理システムの概略を説明する図である。情報処理システム200は、カメラ201、レール202および情報処理装置203を含む。
カメラ201は店舗内の売場210をレール202に沿って移動可能となっている。また、カメラ201は、滑車などを含むアタッチメントを介してレール202に取り付けられている。情報処理装置203は、欠品商品222を検知するために、所定のタイミングでカメラ201を移動させて、商品棚221の画像を撮像するように制御する。なお、カメラ201が撮像する画像は静止画であるが、これには限られず、動画であってもよい。
そして、カメラ201は、売場210にある商品棚221を撮像する。カメラ201は、撮像した商品棚221の画像を情報処理装置203へ送信する。商品棚221の画像を受信した情報処理装置203は、撮像した商品棚221の画像に基づいて、欠品商品222を検知する。
なお、ここでは、レール202が、売場210の天井に設けられた例で説明をしたが、レール202は、例えば、商品棚221と壁との間に設けてもよい。また、商品棚221が背中合わせに配置されている場合には、商品棚221の間に設けてもよい。さらに、カメラ201は、横方向(水平方向)のみならず、縦方向(垂直方向)に移動可能であってもよい。
図3は、本実施形態に係る情報処理システム200の構成を示すブロック図である。情報処理システム200は、撮像部301、移動部302および情報処理装置203を有する。撮像部301は、店舗内を移動して商品棚221の画像を撮像する。撮像部301が撮像する画像は静止画であるが、これには限定されず、動画であってもよい。また、撮像部301は、1つであっても、複数であってもよい。
移動部302は、撮像部301を移動させる。移動部302は、例えば、店舗の天井に設けられたレール202を含み、撮像部301は、このレール202に沿って動くことにより、店舗内を移動する。撮像部301は、滑車などを含むアタッチメントなどを介して移動部302に取り付けられている。
情報処理装置203は、タイミング生成部331と、制御部332とを有する。タイミング生成部331は、店舗における商品の出入に基づいて、店舗内を移動して商品棚221を撮像する撮像部301の撮像および移動のタイミングを生成する。つまり、タイミング生成部331は、商品の出入、例えば、商品が販売されたことや、商品が入荷されたことに基づいて、撮像部301が移動を開始したり、撮像を実施したりするためのトリガーとなるタイミングを生成する。
タイミングは、例えば、商品棚221の状態変化を検出した後のタイミングである。具体的には、店舗への来店客が商品棚221から商品を手に取り、レジにおいて精算し、店外へ出ていった後のタイミングである。すなわち、商品が売れて、商品棚221から商品がなくなるので、商品棚221の商品の陳列状態に変化が生じる。このような場合に、例えば、商品棚221の商品の陳列状態を検知するセンサなどを設けておき、このセンサとPOS(Point of Sales)システムとを連動させておけば、商品棚221の状態変化を検出することが可能となる。したがって、タイミング生成部331は、撮像部301の撮像および移動を制御するためのタイミングとして、商品棚221の状態変化を検出した後のタイミングを生成する。
また、他のタイミングは、店舗に商品が入荷されたタイミングである。店舗に商品が入荷されれば、店舗のバックルームに在庫として商品が保管されるため、欠品商品を検知することができれば、欠品商品を補充することができる。これとは反対に、バックルームに在庫商品がなければ、カメラ201を動かして、欠品商品を検知しても、補充すべき商品がバックルームに存在しないので、カメラ201を動かすことが無駄となってしまう。したがって、タイミング生成部331は、撮像部301の撮像および移動を制御するためのタイミングとして、商品が店舗に入荷されたタイミングを生成する。
さらに、他のタイミングは、店舗内の売場210の商品棚221に陳列されている商品の販売可能期限、例えば、賞味期限や消費期限から所定時間前のタイミングである。例えば、コンビニエンスストアやスーパーマーケットなどの店舗において、消費期限切れの商品を販売することは、様々な理由から店舗の評判を落とす原因となるので、消費期限切れ前に商品を入れ替えなければならない。したがって、商品棚221に陳列されている商品の販売可能期限から所定時間前にカメラ201を動かして、商品棚221の画像を撮像する。この場合、店員は、商品が入荷されると、入荷処理を行い、入荷商品名や商品数、入荷日時、販売可能期限などのデータをPOSシステムなどに入力するので、情報処理装置203は、ここで入力したデータを用いれば、商品の販売可能期限から所定時間前のタイミングを生成することができる。ここで、所定時間前は、例えば、5分前、10分前など、商品の入れ替えに要する時間などに基づいて決定されるが、所定時間前の決定方法はこれには限定されない。
また、他のタイミングは、商品を販売した後のタイミング、すなわち、商品棚221に陳列された商品が来店客に売れた後のタイミングである。この場合も、情報処理装置203とPOSシステムとが連動していれば、情報処理装置203は、POSシステムから商品が販売されたという情報を受け取ったことをトリガーとして、タイミング生成部331が、タイミングを生成する。
さらに、他のタイミングは、例えば、来店客が所定の商品棚221の周辺に集中したことを検出した後のタイミングである。このように、所定の商品棚221の前に、来店客が集中すると、その商品棚221にある商品が売れてしまい、欠品が生じている可能性が高くなる。よって、タイミング生成部331は、撮像部301の撮像および移動を制御するためのタイミングとして、このようなタイミングを生成する。これにより、情報処理装置203は、このようなタイミングで撮像部301を制御して商品棚221の画像を撮像するように制御できるようになる。この場合、店舗内の監視カメラの映像などから来店客の集中を検出するとともに、来店客が集中していた商品棚221を特定して、これらの情報を情報処理装置203に提供すれば、情報処理装置203が撮像部301を制御することができる。
制御部332は、タイミング生成部331が生成したタイミングで撮像部301による撮像および移動部302による撮像部301の移動を制御する。制御部332は、撮像部301および移動部302に対して、店舗内の売場210のどの位置にある商品棚221を撮像するかについての信号を送信することにより、制御する。なお、移動部302は、店舗に設置されたレール202を含み、レール202は、例えば、店舗の天井に設置されている。
また、制御部332は、店舗周辺のイベント開始前の所定時間帯における撮像部301による撮像および移動部302による移動の制御の間隔を短くする。店舗周辺でイベントが開催される前の所定の時間帯、例えば、1時間前~10分前には、来店客が集中することが予想され、欠品商品が発生する可能性が高い。したがって、このような事態に対処するために、この時間帯においては、制御部332は、撮像部301の制御の間隔を短くして、撮像部301が、頻繁に撮像および移動するように制御する。このように、制御の間隔を短くして、撮像部301を頻繁に移動させて、商品棚221を撮像すれば、欠品商品の検知が容易になる。
なお、制御部332は、撮像部301に撮像すべき商品棚211が複数ある場合などには、撮像部301をどのように移動させるかを示す撮像部301の巡回ルートを決定してもよい。そして、制御部332は、決定した巡回ルートに沿って撮像部301を動かして、商品棚211を撮像するように制御してもよい。
図4は、本実施形態に係る情報処理システム200に含まれる情報処理装置203の備える制御テーブル401の一例を示す図である。制御テーブル401は、カメラID(Identifier)411に関連付けて、タイミング412およびカメラ位置413を記憶する。カメラID411は、撮像部301としてのカメラを識別する識別子である。タイミング412は、撮像部301の移動や撮像を制御するタイミングである。カメラ位置413は、例えば、撮像部301の現在位置などの位置に関する情報である。情報処理装置203の制御部332は、例えば、制御テーブル401を参照し、撮像部301の撮像や移動を制御する。
図5は、本実施形態に係る情報処理システムに含まれる情報処理装置203のハードウェア構成を説明するブロック図である。CPU(Central Processing Unit)510は、演算制御用のプロセッサであり、プログラムを実行することで図3の情報処理装置203の機能構成部を実現する。CPU510は複数のプロセッサを有し、異なるプログラムやモジュール、タスク、スレッドなどを並行して実行してもよい。ROM(Read Only Memory)520は、初期データおよびプログラムなどの固定データおよびその他のプログラムを記憶する。また、ネットワークインタフェース530は、ネットワークを介して他の装置などと通信する。なお、CPU510は1つに限定されず、複数のCPUであっても、あるいは画像処理用のGPU(Graphics Processing Unit)を含んでもよい。また、ネットワークインタフェース530は、CPU510とは独立したCPUを有して、RAM(Random Access Memory)540の領域に送受信データを書き込みあるいは読み出しするのが望ましい。また、RAM540とストレージ550との間でデータを転送するDMAC(Direct Memory Access Controller)を設けるのが望ましい(図示なし)。さらに、入出力インタフェース560は、CPU510とは独立したCPUを有して、RAM540の領域に入出力データを書き込みあるいは読み出しするのが望ましい。したがって、CPU510は、RAM540にデータが受信あるいは転送されたことを認識してデータを処理する。また、CPU510は、処理結果をRAM540に準備し、後の送信あるいは転送はネットワークインタフェース530やDMAC、あるいは入出力インタフェース560に任せる。
RAM540は、CPU510が一時記憶のワークエリアとして使用するランダムアクセスメモリである。RAM540には、本実施形態の実現に必要なデータを記憶する領域が確保されている。カメラID541は、店舗内にあるカメラを識別するための識別子である。タイミング542は、カメラ201の移動および撮像を制御するタイミングを表すデータである。棚番号543は、商品が陳列されている商品棚221の位置やバックルームにおける商品の保管場所を示すデータである。カメラ位置544は、カメラ201の現在位置などを表すデータである。これらのデータは、例えば、制御テーブル401から展開されたデータである。
入出力データ545は、入出力インタフェース560を介して入出力されるデータである。送受信データ546は、ネットワークインタフェース530を介して送受信されるデータである。また、RAM540は、各種アプリケーションモジュールを実行するためのアプリケーション実行領域547を有する。
ストレージ550には、データベースや各種のパラメータ、あるいは本実施形態の実現に必要な以下のデータまたはプログラムが記憶されている。ストレージ550は、制御テーブル401を格納する。制御テーブル401は、図4に示した、カメラID411とタイミング412やカメラ位置413などとの関係を管理するテーブルである。
ストレージ550は、さらに、タイミング生成モジュール551および制御モジュール552を格納する。
タイミング生成モジュール551は、店舗内の商品の出入に基づいて、店舗内を移動して商品棚221を撮像する撮像部301の撮像および移動のタイミングを生成するモジュールである。制御モジュール552は、所定のタイミングで撮像部301による撮像および移動部302による移動を制御するモジュールである。これらのモジュール551~552は、CPU510によりRAM540のアプリケーション実行領域547に読み出され、実行される。制御プログラム553は、情報処理装置203の全体を制御するためのプログラムである。
入出力インタフェース560は、入出力機器との入出力データをインタフェースする。入出力インタフェース560には、表示部561、操作部562、が接続される。また、入出力インタフェース560には、さらに、記憶媒体564が接続されてもよい。さらに、音声出力部であるスピーカ563や、音声入力部であるマイク(図示せず)、あるいは、GPS位置判定部が接続されてもよい。なお、図5に示したRAM540やストレージ550には、情報処理装置203が有する汎用の機能や他の実現可能な機能に関するプログラムやデータは図示されていない。
図6は、本実施形態に係る情報処理システム200の情報処理装置203の処理手順を説明するフローチャートである。このフローチャートは、図5のCPU510がRAM540を使用して実行し、図3の情報処理装置203の機能構成部を実現する。
ステップS601において、情報処理装置203は、カメラ201の移動および撮像を制御するタイミングを生成する。ステップS603において、情報処理装置203は、カメラ201の移動および撮像を制御するタイミングが到来したか否かを判断する。タイミングが到来していない場合(ステップS603のNO)、情報処理装置203は、タイミングが到来するまで待機する。タイミングが到来している場合(ステップS603のYES)、情報処理装置203は、ステップS605へ進む。
ステップS605において、情報処理装置203は、カメラ201の移動を制御して、所定の位置まで移動させる。ステップS607において、情報処理装置203は、カメラ201の移動が完了したか否かを判断する。カメラ201の移動が完了していない場合(ステップS607のNO)、情報処理装置203は、カメラ201の移動の制御を継続する。カメラ201の移動が完了した場合(ステップS607のYES)、情報処理装置203は、ステップS609に進む。
ステップS609において、情報処理装置203は、カメラ201による撮像を制御して、商品棚211の画像を撮像する。ステップS611において、情報処理装置203は、カメラ201による撮像が完了したか否かを判断する。撮像が完了していない場合(ステップS611のNO)、情報処理装置203は、カメラ201による撮像の制御を継続する。撮像が完了した場合(ステップS611のYES)、情報処理装置203は、ステップS613へ進む。
ステップS613において、情報処理装置203は、例えば、カメラ201を待機位置に移動させて、カメラ201を待機させて、処理を終了する。
本実施形態によれば、所定のタイミングでカメラの移動および撮像を制御するので、カメラの撮像および移動を効率的に制御することができる。
[第3実施形態]
次に本発明の第3実施形態に係る情報処理システムについて、図7乃至図10を用いて説明する。図7は、本実施形態に係る情報処理システム700の構成を説明するための図である。本実施形態に係る情報処理システム700は、上記第2実施形態と比べると、情報処理装置が在庫判定部を有する点で異なる。その他の構成および動作は、第2実施形態と同様であるため、同じ構成および動作については同じ符号を付してその詳しい説明を省略する。
情報処理装置703は、在庫判定部733を有する。在庫判定部733は、店舗のバックルームに商品の在庫があるか否かを判定する。そして、制御部332は、在庫判定部733による判定結果に基づいて、撮像部301の撮像および移動を制御する。例えば、バックルームに商品の在庫がない状態において、撮像部301を制御して、商品棚211を撮像して欠品商品を検知しても、補充すべき商品がバックルームに保管されていないため、撮像部301の制御が無駄になってしまう。したがって、在庫判定部733は、仮に所定のタイミングが到来していて、制御部332が、撮像部301を制御しなければならい状況にあったとしても、商品の在庫がなければ、撮像部301の制御を抑制する。
図8は、本実施形態に係る情報処理システム700に含まれる情報処理装置703の備える在庫テーブル801の一例を示す図である。在庫テーブル801は、商品ID811に関連付けて在庫状況812を格納する。商品ID(Identifier)811は、商品を識別するための識別子である。在庫状況812は、商品の在庫の状況、例えば、残りの商品数や在庫の有無、入荷予定日時などに関する情報である。そして、情報処理装置703は、例えば、在庫テーブル801を参照して、撮像部301を制御する。
図9は、本実施形態に係る情報処理システムに含まれる情報処理装置703のハードウェア構成を説明するブロック図である。RAM940は、CPU510が一時記憶のワークエリアとして使用するランダムアクセスメモリである。RAM940には、本実施形態の実現に必要なデータを記憶する領域が確保されている。在庫状況941は、商品の在庫状況に関するデータである。このデータは、例えば、在庫テーブル801から展開されたデータである。
ストレージ950には、データベースや各種のパラメータ、あるいは本実施形態の実現に必要な以下のデータまたはプログラムが記憶されている。ストレージ950は、在庫テーブル801を格納する。在庫テーブル801は、図8に示した、商品ID811と在庫状況812との関係を管理するテーブルである。
ストレージ950は、さらに、在庫判定モジュール951を格納する。在庫判定モジュール951は、バックルームに商品の在庫があるか否かを判定するモジュールである。このモジュール951は、CPU510によりRAM540のアプリケーション実行領域547に読み出され、実行される。
図10は、本実施形態に係る情報処理システム700の情報処理装置703の処理手順を説明するフローチャートである。このフローチャートは、図9のCPU510がRAM540を使用して実行し、図7の情報処理装置703の機能構成部を実現する。
ステップS1001において、情報処理装置703は、商品の在庫の有無を判定する。商品の在庫がある場合(ステップS1001のYES)、情報処理装置703は、ステップS605に進む。商品の在庫がない場合(ステップS1001のNO)、情報処理装置703は、処理を終了して、撮像部301の移動や撮像の制御を行わない。
本実施形態によれば、在庫の有無を判断するので、無駄な制御を減らすことができ、より効率的に欠品商品を検知することができる。
[他の実施形態]
以上、実施形態を参照して本願発明を説明したが、本願発明は上記実施形態に限定されるものではない。本願発明の構成や詳細には、本願発明のスコープ内で当業者が理解し得る様々な変更をすることができる。また、それぞれの実施形態に含まれる別々の特徴を如何様に組み合わせたシステムまたは装置も、本発明の範疇に含まれる。
また、本発明は、複数の機器から構成されるシステムに適用されてもよいし、単体の装置に適用されてもよい。さらに、本発明は、実施形態の機能を実現する情報処理プログラムが、システムあるいは装置に直接あるいは遠隔から供給される場合にも適用可能である。したがって、本発明の機能をコンピュータで実現するために、コンピュータにインストールされるプログラム、あるいはそのプログラムを格納した媒体、そのプログラムをダウンロードさせるWWW(World Wide Web)サーバも、本発明の範疇に含まれる。特に、少なくとも、上述した実施形態に含まれる処理ステップをコンピュータに実行させるプログラムを格納した非一時的コンピュータ可読媒体(non-transitory computer readable medium)は本発明の範疇に含まれる。

Claims (17)

  1. 商品棚を撮像する少なくとも1つの撮像手段と、
    前記撮像手段を移動させる移動手段と、
    前記商品棚における商品の陳列状態を検知するセンサからの情報と、POS(Point of Sales)システムからの情報とに基づいて、前記撮像手段の撮像および前記移動手段による前記撮像手段の移動のタイミングを制御する制御手段と、
    を備え
    前記制御手段は、前記センサからの情報と前記POSシステムからの情報とに基づいて、前記商品棚の状態変化を検出した後のタイミングで前記撮像および移動を制御する情報処理システム。
  2. 商品棚を撮像する少なくとも1つの撮像手段と、
    前記撮像手段を移動させる移動手段と、
    前記商品棚における商品の陳列状態を検知するセンサからの情報と、POS(Point of Sales)システムからの情報とに基づいて、前記撮像手段の撮像および前記移動手段による前記撮像手段の移動のタイミングを制御する制御手段と、
    を備え、
    前記制御手段は、前記センサからの情報と前記POSシステムからの情報とに基づいて、店舗内に陳列されている商品の販売可能期限から所定時間前のタイミングで前記撮像および移動を制御する情報処理システム。
  3. 前記制御手段は、前記センサからの情報と前記POSシステムからの情報とに基づいて、商品を販売した後のタイミングで前記撮像および移動を制御する請求項1または2に記載の情報処理システム。
  4. 商品棚を撮像する少なくとも1つの撮像手段と、
    前記撮像手段を移動させる移動手段と、
    前記商品棚における商品の陳列状態を検知するセンサからの情報と、POS(Point of Sales)システムからの情報とに基づいて、前記撮像手段の撮像および前記移動手段による前記撮像手段の移動のタイミングを制御する制御手段と、
    を備え、
    前記制御手段は、店舗内の監視カメラからの情報に基づいて、客が所定の商品棚の周辺に集中したことを検出した後のタイミングで前記撮像および移動を制御する情報処理システム。
  5. 前記制御手段は、店舗周辺のイベント開始前の所定時間帯における前記撮像手段による撮像および前記移動手段による移動の間隔を短くする請求項1乃至のいずれか1項に記載の情報処理システム。
  6. 商品棚を撮像する少なくとも1つの撮像手段と、
    前記撮像手段を移動させる移動手段と、
    前記商品棚における商品の陳列状態を検知するセンサからの情報と、POS(Point of Sales)システムからの情報とに基づいて、前記撮像手段の撮像および前記移動手段による前記撮像手段の移動のタイミングを制御する制御手段と、
    バックルームに商品の在庫があるか否かを判定する在庫判定手段と、
    備え、
    前記制御手段は、前記在庫判定手段による判定結果に基づいて、前記撮像および前記移動を制御する情報処理システム。
  7. 前記在庫判定手段により在庫がないと判定された場合、前記制御手段は、前記撮像および前記移動の制御を抑制する請求項に記載の情報処理システム。
  8. 前記移動手段は、店舗に設置されたレールを含む請求項1乃至のいずれか1項に記載の情報処理システム。
  9. 前記レールは、前記店舗の天井に設置されている請求項に記載の情報処理システム。
  10. 商品棚を撮像する少なくとも1つの撮像手段と、
    前記撮像手段を移動させる移動手段と、
    を備えた情報処理システムの制御方法であって、
    制御手段が、前記商品棚における商品の陳列状態を検知するセンサからの情報と、POS(Point of Sales)システムからの情報とに基づいて、前記撮像手段の撮像および前記移動手段による前記撮像手段の移動のタイミングを制御する制御ステップを含み
    前記制御ステップでは、前記センサからの情報と前記POSシステムからの情報とに基づいて、前記商品棚の状態変化を検出した後のタイミングで前記撮像および移動を制御する情報処理システムの制御方法。
  11. 商品棚を撮像する少なくとも1つの撮像手段と、
    前記撮像手段を移動させる移動手段と、
    を備えた情報処理システムの制御方法であって、
    制御手段が、前記商品棚における商品の陳列状態を検知するセンサからの情報と、POS(Point of Sales)システムからの情報とに基づいて、前記撮像手段の撮像および前記移動手段による前記撮像手段の移動のタイミングを制御する制御ステップを含み、
    前記制御ステップでは、前記センサからの情報と前記POSシステムからの情報とに基づいて、店舗内に陳列されている商品の販売可能期限から所定時間前のタイミングで前記撮像および移動を制御する情報処理システムの制御方法。
  12. 商品棚を撮像する少なくとも1つの撮像手段と、
    前記撮像手段を移動させる移動手段と、
    を備えた情報処理システムの制御方法であって、
    制御手段が、前記商品棚における商品の陳列状態を検知するセンサからの情報と、POS(Point of Sales)システムからの情報とに基づいて、前記撮像手段の撮像および前記移動手段による前記撮像手段の移動のタイミングを制御する制御ステップを含み、
    前記制御ステップでは、店舗内の監視カメラからの情報に基づいて、客が所定の商品棚の周辺に集中したことを検出した後のタイミングで前記撮像および移動を制御する情報処理システムの制御方法。
  13. 商品棚を撮像する少なくとも1つの撮像手段と、
    前記撮像手段を移動させる移動手段と、
    を備えた情報処理システムの制御方法であって、
    制御手段が前記商品棚における商品の陳列状態を検知するセンサからの情報と、POS(Point of Sales)システムからの情報とに基づいて、前記撮像手段の撮像および前記移動手段による前記撮像手段の移動のタイミングを制御する制御ステップと、
    バックルームに商品の在庫があるか否かを判定する在庫判定ステップと、
    含み、
    前記制御ステップでは、前記在庫判定ステップにおける判定結果に基づいて、前記撮像および前記移動を制御する情報処理システムの制御方法。
  14. 商品棚を撮像する少なくとも1つの撮像手段と、
    前記撮像手段を移動させる移動手段と、
    を備えた情報処理システムにおいて、
    前記商品棚における商品の陳列状態を検知するセンサからの情報と、POS(Point of Sales)システムからの情報とに基づいて、前記撮像手段の撮像および前記移動手段による前記撮像手段の移動のタイミングを制御する制御ステップを実行させる情報処理プログラムであって
    前記制御ステップでは、前記センサからの情報と前記POSシステムからの情報とに基づいて、前記商品棚の状態変化を検出した後のタイミングで前記撮像および移動を制御する情報処理プログラム。
  15. 商品棚を撮像する少なくとも1つの撮像手段と、
    前記撮像手段を移動させる移動手段と、
    を備えた情報処理システムにおいて、
    前記商品棚における商品の陳列状態を検知するセンサからの情報と、POS(Point of Sales)システムからの情報とに基づいて、前記撮像手段の撮像および前記移動手段による前記撮像手段の移動のタイミングを制御する制御ステップを実行させる情報処理プログラムであって、
    前記制御ステップでは、前記センサからの情報と前記POSシステムからの情報とに基づいて、店舗内に陳列されている商品の販売可能期限から所定時間前のタイミングで前記撮像および移動を制御する情報処理プログラム。
  16. 商品棚を撮像する少なくとも1つの撮像手段と、
    前記撮像手段を移動させる移動手段と、
    を備えた情報処理システムにおいて、
    制御手段が、前記商品棚における商品の陳列状態を検知するセンサからの情報と、POS(Point of Sales)システムからの情報とに基づいて、前記撮像手段の撮像および前記移動手段による前記撮像手段の移動のタイミングを制御する制御ステップを実行させる情報処理プログラムであって、
    前記制御ステップでは、店舗内の監視カメラからの情報に基づいて、客が所定の商品棚の周辺に集中したことを検出した後のタイミングで前記撮像および移動を制御する情報処理プログラム。
  17. 商品棚を撮像する少なくとも1つの撮像手段と、
    前記撮像手段を移動させる移動手段と、
    を備えた情報処理システムにおいて、
    前記商品棚における商品の陳列状態を検知するセンサからの情報と、POS(Point of Sales)システムからの情報とに基づいて、前記撮像手段の撮像および前記移動手段による前記撮像手段の移動のタイミングを制御する制御ステップと、
    バックルームに商品の在庫があるか否かを判定する在庫判定ステップと、
    を実行させる情報処理プログラムであって、
    前記制御ステップでは、前記在庫判定ステップにおける判定結果に基づいて、前記撮像および前記移動を制御する情報処理プログラム。
JP2022126981A 2017-03-03 2022-08-09 情報処理システム、情報処理装置、情報処理方法および情報処理プログラム Active JP7505524B2 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2022126981A JP7505524B2 (ja) 2017-03-03 2022-08-09 情報処理システム、情報処理装置、情報処理方法および情報処理プログラム

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2017040121A JP7124269B2 (ja) 2017-03-03 2017-03-03 情報処理システム、情報処理装置、情報処理方法および情報処理プログラム
JP2022126981A JP7505524B2 (ja) 2017-03-03 2022-08-09 情報処理システム、情報処理装置、情報処理方法および情報処理プログラム

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
JP2017040121A Division JP7124269B2 (ja) 2017-03-03 2017-03-03 情報処理システム、情報処理装置、情報処理方法および情報処理プログラム

Publications (2)

Publication Number Publication Date
JP2022160631A JP2022160631A (ja) 2022-10-19
JP7505524B2 true JP7505524B2 (ja) 2024-06-25

Family

ID=63591374

Family Applications (2)

Application Number Title Priority Date Filing Date
JP2017040121A Active JP7124269B2 (ja) 2017-03-03 2017-03-03 情報処理システム、情報処理装置、情報処理方法および情報処理プログラム
JP2022126981A Active JP7505524B2 (ja) 2017-03-03 2022-08-09 情報処理システム、情報処理装置、情報処理方法および情報処理プログラム

Family Applications Before (1)

Application Number Title Priority Date Filing Date
JP2017040121A Active JP7124269B2 (ja) 2017-03-03 2017-03-03 情報処理システム、情報処理装置、情報処理方法および情報処理プログラム

Country Status (1)

Country Link
JP (2) JP7124269B2 (ja)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP7304965B2 (ja) * 2019-12-04 2023-07-07 三菱電機株式会社 冷凍サイクル装置
JP6958946B1 (ja) * 2020-05-26 2021-11-02 Necプラットフォームズ株式会社 在庫管理システム、在庫管理装置、在庫管理方法及び在庫管理プログラム

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001088912A (ja) 1999-09-20 2001-04-03 Fujitsu General Ltd 画像認識による棚卸管理方法及び棚卸システム
JP2004196553A (ja) 2004-04-09 2004-07-15 Penta Ocean Constr Co Ltd 物体移動管理方法、庫内物流管理システム及びそれらのためのプログラム
JP2010222098A (ja) 2009-03-24 2010-10-07 Mitsubishi Denki Information Technology Corp 棚卸提案装置及び棚卸提案プログラムおよび記録媒体
JP2010235222A (ja) 2009-03-30 2010-10-21 Brother Ind Ltd 物品管理システムおよび物品棚卸装置
JP2010277264A (ja) 2009-05-27 2010-12-09 Takachiho Koeki Kk 防犯装置、その制御方法、プログラム、及び防犯システム
WO2015079622A1 (ja) 2013-11-27 2015-06-04 パナソニックIpマネジメント株式会社 商品モニタリング装置、商品モニタリングシステムおよび商品モニタリング方法

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001088912A (ja) 1999-09-20 2001-04-03 Fujitsu General Ltd 画像認識による棚卸管理方法及び棚卸システム
JP2004196553A (ja) 2004-04-09 2004-07-15 Penta Ocean Constr Co Ltd 物体移動管理方法、庫内物流管理システム及びそれらのためのプログラム
JP2010222098A (ja) 2009-03-24 2010-10-07 Mitsubishi Denki Information Technology Corp 棚卸提案装置及び棚卸提案プログラムおよび記録媒体
JP2010235222A (ja) 2009-03-30 2010-10-21 Brother Ind Ltd 物品管理システムおよび物品棚卸装置
JP2010277264A (ja) 2009-05-27 2010-12-09 Takachiho Koeki Kk 防犯装置、その制御方法、プログラム、及び防犯システム
WO2015079622A1 (ja) 2013-11-27 2015-06-04 パナソニックIpマネジメント株式会社 商品モニタリング装置、商品モニタリングシステムおよび商品モニタリング方法

Also Published As

Publication number Publication date
JP2022160631A (ja) 2022-10-19
JP2018147139A (ja) 2018-09-20
JP7124269B2 (ja) 2022-08-24

Similar Documents

Publication Publication Date Title
JP7505524B2 (ja) 情報処理システム、情報処理装置、情報処理方法および情報処理プログラム
WO2018159132A1 (ja) 情報処理システム、情報処理装置、情報処理方法および情報処理プログラム
JP7106815B2 (ja) 情報処理システム
US20090204512A1 (en) Method and system for determining a restocking state of a product
WO2019087519A1 (ja) 棚監視装置、棚監視方法、及び、棚監視プログラム
US20130226643A1 (en) Operation management apparatus and sorting system with operation management apparatus
WO2016117600A1 (ja) 商品棚割管理装置及び商品棚割管理方法
US20190057325A1 (en) Information processing device, information processing method, recording medium, and seat reservation system
JP2019109751A (ja) 情報処理装置、システム、情報処理装置の制御方法、及び、プログラム
US20150220784A1 (en) Method and system for semi-automated venue monitoring
JP2018531463A6 (ja) 小売店における生鮮品の廃棄を減らすためのシステム及び方法
JP2018531463A (ja) 小売店における生鮮品の廃棄を減らすためのシステム及び方法
JP2011525018A5 (ja)
WO2020195765A1 (ja) 在庫管理サーバ、在庫管理システム、在庫管理方法および記録媒体
US20170213427A1 (en) Register system that tracks a position of a customer for checkout
WO2019123714A1 (ja) 情報処理装置、商品推薦方法、およびプログラム
JP2021012518A (ja) 無人店舗の商品を管理する管理サーバ及び管理方法
JP2005309951A (ja) 販売促進支援システム
JPH0581552A (ja) 商品監視システム
AU2023274066A1 (en) System, method and apparatus for a monitoring drone
JP2006221367A (ja) サーバ、情報処理装置及びコンピュータプログラム
JP7126066B2 (ja) 投影指示装置、荷物仕分けシステムおよび投影指示方法
US20230306741A1 (en) Product detection device, product detection method, and recording medium
JP4656114B2 (ja) 対象管理装置およびシステム、コンピュータプログラム、データ処理方法
JP7396499B2 (ja) 学習モデル生成装置、学習モデル生成システム、学習モデル生成方法および学習モデル生成プログラム

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20220809

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20230808

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20231010

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20240109

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20240408

A911 Transfer to examiner for re-examination before appeal (zenchi)

Free format text: JAPANESE INTERMEDIATE CODE: A911

Effective date: 20240419

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20240514

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20240527

R150 Certificate of patent or registration of utility model

Ref document number: 7505524

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150