JP2014127168A - 自動販売機管理装置、そのデータ処理方法、およびプログラム - Google Patents

自動販売機管理装置、そのデータ処理方法、およびプログラム Download PDF

Info

Publication number
JP2014127168A
JP2014127168A JP2012285754A JP2012285754A JP2014127168A JP 2014127168 A JP2014127168 A JP 2014127168A JP 2012285754 A JP2012285754 A JP 2012285754A JP 2012285754 A JP2012285754 A JP 2012285754A JP 2014127168 A JP2014127168 A JP 2014127168A
Authority
JP
Japan
Prior art keywords
vending machine
image
product
information
identification code
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2012285754A
Other languages
English (en)
Other versions
JP6136257B2 (ja
Inventor
Hiroshi Miyagawa
博 宮川
Rie KAWABE
理恵 川邉
Katsuyo Hayashi
雄代 林
Toshiyuki Nomura
俊之 野村
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
NEC Corp
Original Assignee
NEC Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by NEC Corp filed Critical NEC Corp
Priority to JP2012285754A priority Critical patent/JP6136257B2/ja
Publication of JP2014127168A publication Critical patent/JP2014127168A/ja
Application granted granted Critical
Publication of JP6136257B2 publication Critical patent/JP6136257B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Control Of Vending Devices And Auxiliary Devices For Vending Devices (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)

Abstract

【課題】自動販売機の情報を精度よく効率的に取得できる自動販売機管理装置、そのデータ処理方法、およびプログラムを提供する。
【解決手段】自動販売機管理装置100は、自動販売機10の位置情報を示す識別コード画像と、自動販売機10に陳列されている少なくとも1つの商品見本12とが一緒に撮像された、当該自動販売機10のフェイス画像を取得する画像取得部102と、取得したフェイス画像を画像認識し、画像認識された識別コード画像から自動販売機10の位置を特定する自動販売機特定部104と、取得したフェイス画像を画像認識し、画像認識された商品見本画像から少なくとも1つの商品を特定するとともに、特定された商品情報を、自動販売機特定部104により位置が特定された自動販売機10の位置情報に紐付ける商品特定部106と、を備える。
【選択図】図1

Description

本発明は、自動販売機管理装置、そのデータ処理方法、およびプログラムに関する。
特許文献1には、自動販売機のフェイス画像を撮影し、画像解析した結果(コラムNo、商品コード、売価、H/C区分を解析)と自動販売機の設置データ(コラムNo、売価、H/C区分)とを比較判定し、自動販売機のフェイス表示通りに設定されていないときに通知するシステムが記載されている。
特開2012−73738号公報
上述したシステムにおいては、作業員が自動販売機の識別情報を手入力やGPS(Global Positioning System)により位置情報を取得することで自動販売機の識別情報を取得する構成であったため、入力に手間がかかったり、入力ミスやGPSの通信状態悪化により精度が低下したりする等の可能性があり、精度や効率がよくないという問題点があった。
本発明は上記事情に鑑みてなされたものであり、その目的とするところは、自動販売機の情報を精度よく効率的に取得できる自動販売機管理装置、そのデータ処理方法、およびプログラムを提供することにある。
本発明の自動販売機管理装置は、
自動販売機の位置情報を示す識別コード画像と、前記自動販売機に陳列されている少なくとも1つの商品見本とが一緒に撮像された、当該自動販売機のフェイス画像を取得する画像取得手段と、
取得した前記フェイス画像を画像認識し、画像認識された前記識別コード画像から前記自動販売機の位置を特定する自動販売機特定手段と、
取得した前記フェイス画像を画像認識し、画像認識された商品見本画像から少なくとも1つの商品を特定するとともに、特定された商品情報を、前記自動販売機特定手段により前記位置が特定された前記自動販売機の位置情報に紐付ける商品特定手段と、を備える。
本発明の自動販売機管理装置のデータ処理方法は、
自動販売機管理装置が、
自動販売機の位置情報を示す識別コード画像と、前記自動販売機に陳列されている少なくとも1つの商品見本とが一緒に撮像された、当該自動販売機のフェイス画像を取得し、
取得した前記フェイス画像を画像認識し、画像認識された前記識別コード画像から前記自動販売機の位置を特定し、
取得した前記フェイス画像を画像認識し、画像認識された商品見本画像から少なくとも1つの商品を特定するとともに、特定された商品情報を、前記位置が特定された前記自動販売機の位置情報に紐付ける自動販売機管理装置のデータ処理方法である。
本発明のコンピュータプログラムは、
自動販売機管理装置を実現するコンピュータに、
自動販売機の位置情報を示す識別コード画像と、前記自動販売機に陳列されている少なくとも1つの商品見本とが一緒に撮像された、当該自動販売機のフェイス画像を取得する手順、
取得した前記フェイス画像を画像認識し、画像認識された前記識別コード画像から前記自動販売機の位置を特定する手順、
取得した前記フェイス画像を画像認識し、画像認識された商品見本画像から少なくとも1つの商品を特定するとともに、特定された商品情報を、前記位置が特定された前記自動販売機の位置情報に紐付ける手順を実行させるためのプログラムである。
なお、以上の構成要素の任意の組合せ、本発明の表現を方法、装置、システム、記録媒体、コンピュータプログラムなどの間で変換したものもまた、本発明の態様として有効である。
また、本発明の各種の構成要素は、必ずしも個々に独立した存在である必要はなく、複数の構成要素が一個の部材として形成されていること、一つの構成要素が複数の部材で形成されていること、ある構成要素が他の構成要素の一部であること、ある構成要素の一部と他の構成要素の一部とが重複していること、等でもよい。
また、本発明のデータ処理方法およびコンピュータプログラムには複数の手順を順番に記載してあるが、その記載の順番は複数の手順を実行する順番を限定するものではない。このため、本発明のデータ処理方法およびコンピュータプログラムを実施するときには、その複数の手順の順番は内容的に支障のない範囲で変更することができる。
さらに、本発明のデータ処理方法およびコンピュータプログラムの複数の手順は個々に相違するタイミングで実行されることに限定されない。このため、ある手順の実行中に他の手順が発生すること、ある手順の実行タイミングと他の手順の実行タイミングとの一部ないし全部が重複していること、等でもよい。
本発明によれば、自動販売機の情報を精度よく効率的に取得できる自動販売機管理装置、そのデータ処理方法、およびプログラムが提供される。
本発明の実施の形態に係る自動販売機管理装置の構成を示す機能ブロック図である。 本発明の実施の形態に係る自動販売機管理装置を用いた管理システムの構成例を示すブロック図である。 本発明の実施の形態に係る自動販売機管理装置の利用シーンを説明するための図である。 本発明の実施の形態に係る自動販売機管理装置の具体的な構成例を示す機能ブロック図である。 本発明の実施の形態に係る自動販売機管理装置が利用する特徴量データベースの構造の一例を説明するための図である。 本発明の実施の形態に係る自動販売機管理装置が利用する自動販売機データベースの構造の一例を説明するための図である。 本発明の実施の形態に係る自動販売機管理装置が出力するフェイス情報の一例を説明するための図である。 本発明の実施の形態に係る自動販売機管理装置が利用する商品データベースの構造の一例を説明するための図である。 本発明の実施の形態に係る自動販売機管理装置の動作の一例を示すフローチャートである。 本発明の実施の形態に係る自動販売機管理装置を利用した管理システムの携帯端末とサーバの動作の手順の一例を示すフローチャートである。 本発明の実施の形態に係る自動販売機管理装置の構成を示す機能ブロック図である。 本発明の実施の形態に係る自動販売機管理装置で撮像されたフェイス画像を説明するための図である。 本発明の実施の形態に係る自動販売機管理装置が出力するコラム情報の一例を説明するための図である。 本発明の実施の形態に係る自動販売機管理装置の構成を示す機能ブロック図である。 本発明の実施の形態に係る自動販売機管理装置を用いた管理システムの構成例を示すブロック図である。 本発明の実施の形態に係る自動販売機管理装置の構成を示す機能ブロック図である。
以下、本発明の実施の形態について、図面を用いて説明する。尚、すべての図面において、同様な構成要素には同様の符号を付し、適宜説明を省略する。
(第1の実施の形態)
図1は、本発明の実施の形態に係る自動販売機管理装置100の構成を示す機能ブロック図である。図2は、本発明の実施の形態に係る自動販売機管理装置100を用いた管理システム1の構成例を示すブロック図である。図3は、本発明の実施の形態に係る自動販売機管理装置100の利用シーンを説明するための図である。
図2または図3では、複数の自動販売機10a、10b、または10cが示されているが、自動販売機の台数はこれらに限定されるものではない。また、以後、特に複数の自動販売機を区別する必要がない場合は、単に自動販売機10と示す。
各自動販売機10は、複数の商品見本12が陳列される展示ウインドウ14を筐体の前面パネルに有する。あるいは、複数の商品見本12が表示される液晶表示器を筐体の前面パネルに有してもよい。
自動販売機10は、さらに、札投入口、硬貨投入口、釣銭戻しレバー、非接触ICカード読取部、液晶表示部、釣銭口、および商品搬出口等を含んでもよい。
また、展示ウインドウ14は、複数の商品見本12に対応して設けられた複数の購入ボタンを含む。利用者は、商品を購入する際、たとえば、札投入口または硬貨投入口に金銭を投入し、展示ウインドウ14を参照し、複数の商品見本12の中から購入する商品を選択する。そして、その商品の購入ボタンを押下することにより商品を購入し、商品搬出口に払い出された商品を受け取ることができる。必要に応じて、釣銭戻しレバーを操作し、釣銭口から釣銭を受け取る。
本発明の実施の形態に係る自動販売機管理装置100は、自動販売機10の位置情報を示す識別コード画像16(図2)と、自動販売機10に陳列されている少なくとも1つの商品見本12とが一緒に撮像された、当該自動販売機10のフェイス画像18(たとえば、図2の一点鎖線で囲まれた撮影範囲の画像)を取得する画像取得部102と、取得したフェイス画像18を画像認識し、画像認識された識別コード画像から自動販売機10の位置を特定する自動販売機特定部104と、取得したフェイス画像18を画像認識し、画像認識された商品見本画像から少なくとも1つの商品を特定するとともに、特定された商品情報を、自動販売機特定部104により位置が特定された自動販売機10の位置情報に紐付ける商品特定部106と、を備える。
自動販売機10の位置情報を示す識別コード画像とは、複数の色を配列して情報をコード化した画像であり、たとえば、カメレオンコード(登録商標)、カラービット(登録商標)、またはカラーコード(商標)等のカラーの識別コード画像を用いることができる。また、識別コード画像として、QRコード(登録商標)やバーコード等の白黒の識別コード画像を用いてもよい。
なお、識別コード画像がカラーの場合は、接写する必要がなく、比較的離れた位置や、また斜めの位置からでも読み取ることができる。また、カメレオンコードやカラーコードの場合には、コードに保持できる情報量が多く、管理できる自動販売機10の台数が多くなる。また、カラービットやカラーコードの場合、配列パターンを元として、文字、ロゴ、絵柄、または写真等をデザインして組み込むこともできる。そのため、自動販売機10に識別コード画像としてカラービットやカラーコードを付けた場合にも、外観を損なうこともなく、また、ロゴや絵柄を組み込むことで、注目度を向上させ、識別コード画像に宣伝や広告の役割を持たせることもできる。
どの識別コード画像を採用するかは、システムの管理対象となる自動販売機10の台数や、サーバまたは端末のコード識別能力、端末とサーバとの通信負荷や接続環境等により適宜選択することができる。
識別コード画像は、たとえば、自動販売機10にシール、またはマグネット等で貼付してもよいし、自動販売機10の液晶表示器等に表示させてもよい。あるいは、識別コード画像は、自動販売機10の展示ウインドウ14や専用保持部に設置されるポップやポスター等に印刷されてもよいし、自動販売機10の筐体に直に印刷されてもよい。
自動販売機10の位置情報とは、自動販売機10が設置されている所在地を示し、たとえば、地番、または所定の領域(例として、関東、東京西部、東京23区、キャンペーン対象エリア、新宿区、山手線管内、品川駅周辺または、これらの組み合わせ)を示すデータである。たとえば、地図データ、あるいは、GPS(Global Positioning System)データ等でもよい。または、設置場所が建物や施設内であれば、その所在地とともに設置されているフロアやエリア等の位置情報を含むこともできる。また、同じ場所に複数の自動販売機10が併設されている場合、位置情報に、各自動販売機10の識別情報や、相対位置関係を含むこともできる。相対位置関係は、たとえば、近くにあることだけを示してもよいし、具体的に、基準となる位置からの方向(例として、左右、方位または、これらの組み合わせ)、配列や並び順(例として、座標、何番目、何列目または、これらの組み合わせ)等を示してもよい。
画像取得部102は、このようにして取得された自動販売機10のフェイス画像を取得する。
自動販売機特定部104は、画像取得部102が取得したフェイス画像を画像認識し、画像認識された識別コード画像から自動販売機10の位置を特定する。
図2および図3に示すように、本実施形態の管理システム1は、たとえば、作業員が携帯端末20を自動販売機10に向けてかざし、自動販売機10の展示ウインドウ14に陳列されている少なくとも1つの商品見本12とともに、識別コード画像16を撮像し、得られたフェイス画像18を、ネットワーク3を介してデータセンタ5に送信する。そして、データセンタ5に設けられたサーバ30が、受信した画像の認識処理を行う。
サーバ30は、たとえば、データウェアハウス32に接続されてもよく、自動販売機10に関連する各種情報を蓄積し、管理する。サーバ30は、携帯端末20から受信した自動販売機10のフェイス画像から、自動販売機10の展示ウインドウ14に陳列されている商品見本12の配列等を解析することができる。
本実施形態では、展示ウインドウ14全体と識別コード画像16を撮像しているが、これに限定されない。展示ウインドウ14の少なくとも一部と識別コード画像16を撮像してもよい。また、複数台の自動販売機10を一緒に撮像してもよい。また、必ずしも一度の撮影でフェイス画像を取得する必要はなく、複数回に分けて、1部分ずつを所定の順序で撮像し、得られた複数の画像を関連付けて画像認識対象のフェイス画像としてもよい。たとえば、アプリケーションプログラム等により、撮影順序等を利用者にガイダンスすること等で複数の画像を関連付けることもできる。
自動販売機特定部104における識別コード画像の認識処理は、具体的には、以下の方法で行うことができる。
自動販売機特定部104は、識別コード画像をシリアルナンバーやビット列に変換して識別コードを取得し、自動販売機10の位置情報をシリアルナンバーやビット列(識別コード)に対応付けて管理することで、識別コード画像から自動販売機10の位置情報を特定する。但し、自動販売機特定部104は、識別コード画像から、直接、対応する自動販売機10の位置情報を取得するようにしてもよい。
なお、自動販売機特定部104の動作は、携帯端末20またはサーバ30のいずれで行ってもよい。
たとえば、識別コード画像からシリアルナンバーやビット列への変換を携帯端末20で行い、その変換されたシリアルナンバーやビット列に対応する位置情報の特定をサーバ30が行ってもよい。
あるいは、識別コード画像が、自動販売機10の位置情報そのものを有している場合、携帯端末20で画像から自動販売機10の位置情報を特定することもできる。すなわち、必ずしもサーバ30等でコードと位置情報を管理する必要がない。また、ネットワークに接続できないような撮影現場であっても、携帯端末20により、オフライン状態で位置情報を確認することができる。
商品特定部106は、取得したフェイス画像を画像認識し、画像認識された商品見本画像から少なくとも1つの商品を特定するとともに、特定された商品情報を、自動販売機特定部104により位置が特定された自動販売機10の位置情報に紐付ける。
商品特定部106によって求められた結果は、出力されてもよい。出力形態は特に限定されないが、たとえば、サーバ30または携帯端末20の画面上に表示、ウェブサイトにアップロード、プリンタに印字出力、所定のメールアドレスにメール送信、所定の形式のファイルに記録、データベースに登録、またはこれらの組み合わせとすることができる。
また、求められた位置情報に基づいて、エリア毎に集計した結果を出力したり、あるいは、時系列に履歴を蓄積したりしてもよい。
自動販売機管理装置100の各構成要素は、CPU(Central Processing Unit)、メモリ、メモリにロードされた図1の構成要素を実現するプログラム、そのプログラムを格納する記憶ユニット、通信用インタフェースを備える任意のコンピュータ(不図示)のハードウェアとソフトウェアの任意の組合せによって実現される。そして、その実現方法、装置にはいろいろな変形例があることは、当業者には理解されるところである。ここで、各図は、ハードウェア単位の構成ではなく、機能単位のブロックを示している。なお、各図において、本発明の本質に関わらない部分の構成については省略してあり、図示されていない。
図1の自動販売機管理装置100は、CPUにより各要素とともに自動販売機管理装置100全体が制御される。CPUが、ハードディスクに記憶されるプログラムをメモリに読み出して実行することにより、自動販売機管理装置100の図1の各ユニットの各機能を実現することができる。
本実施形態のコンピュータプログラムは、自動販売機管理装置100を実現するコンピュータに、自動販売機10の位置情報に対応する識別コード画像と、自動販売機10に陳列されている少なくとも1つの商品見本とが一緒に撮像された、当該自動販売機10のフェイス画像を取得する手順、取得したフェイス画像を画像認識し、画像認識された識別コード画像から自動販売機10の位置を特定する手順、取得したフェイス画像を画像認識し、画像認識された商品見本画像から少なくとも1つの商品を特定するとともに、特定された商品情報を、位置が特定された自動販売機10の位置情報に紐付ける手順を実行させるように記述されている。
本実施形態のコンピュータプログラムは、コンピュータで読み取り可能な記録媒体に記録されてもよい。記録媒体は特に限定されず、様々な形態のものが考えられる。また、プログラムは、記録媒体からコンピュータのメモリにロードされてもよいし、ネットワークを通じてコンピュータにダウンロードされ、メモリにロードされてもよい。
図4は、本発明の実施の形態に係る自動販売機管理装置100の具体的な構成例を示す機能ブロック図である。
図4に示すように、本実施形態の管理システム1は、自動販売機10が設置されている現場で使用される携帯端末20と、データセンタ5(図2)に設けられるサーバ30と、を備える。携帯端末20とサーバ30は、ネットワーク3を介して接続される。本実施形態において、図1の自動販売機管理装置100は、図4の携帯端末20とサーバ30により実現される。
携帯端末20は、ネットワーク3に中継局(不図示)を介して接続可能な携帯端末であり、たとえば、タブレット端末、スマートフォン、またはPDA(Personal Digital Assistants)等である。さらに、携帯端末20は、たとえば、カメラ(不図示)内蔵、またはカメラに接続可能な携帯端末である。
また、サーバ30は、本実施形態では、データセンタ5のサーバコンピュータを利用したクラウドコンピューティングにより実現されるが、これに限定されるものではない。また、サーバ30は、仮想サーバなどにより構成されてもよい。
携帯端末20およびサーバ30の各構成要素は、CPU、メモリ、メモリにロードされた図4の構成要素を実現するプログラム、そのプログラムを格納する記憶ユニット、通信用インタフェースを備える任意のコンピュータのハードウェアとソフトウェアの任意の組合せによってそれぞれ実現される。そして、その実現方法、装置にはいろいろな変形例があることは、当業者には理解されるところである。
携帯端末20は、撮像部22と、送信部24と、を備える。
サーバ30は、受信部40と、画像認識部42と、位置特定部46と、商品特定部50と、を備え、データウェアハウス32と、特徴量データベース44と、自動販売機データベース48と、商品データベース52と、に接続される。
図4の実施形態の構成例では、受信部40が図1の画像取得部102に対応し、画像認識部42と位置特定部46が、図1の自動販売機特定部104に対応し、画像認識部42と商品特定部50が、図1の商品特定部106に対応する。
撮像部22は、たとえば、携帯端末20に内蔵、または接続されるカメラ、または、これらの組み合わせとすることができる。また、撮像部22が撮像する画像は、静止画でもよいし、動画でもよい。動画の場合、動画から逐次得られる画像データを用いることができる。各携帯端末20の処理能力やネットワーク3の通信負荷を考慮して、適宜採用することができる。
携帯端末20を用いて画像撮影する際、携帯端末20は、所定のアプリケーションプログラムを起動し、アプリケーションプログラムにより、撮像部22を制御し、自動販売機10の展示ウインドウ14と識別コード画像16を一緒に撮影して自動販売機10のフェイス画像18を取得することができる。
送信部24は、撮像部22が撮像した自動販売機10のフェイス画像18を、ネットワーク3を介してサーバ30に送信する。
送信部24の通信手段は、有線または無線通信のいずれでもよいし、携帯通信網、公衆回線網、LAN(Local Area Network)、またはWAN(Wide Area Network)のいずれを介した通信でもよく、携帯端末20の構成等に応じて適宜採用するのが好ましい。このように、画像の通信方法は様々な方法が考えられ、本発明の本質に関わらないので、詳細な説明は省略する。また、通信時のセキュリティ対策として、暗号化処理や認証処理を行う構成を含むこともできる。
撮像部22が展示ウインドウ14を撮像した画像は、撮影時に携帯端末20に保存せずに逐次送信部24によりサーバ30に送信してもよいし、携帯端末20に、画像を保存しておき、後で複数の画像を一括して送信部24によりサーバ30に送信してもよい。
サーバ30が、携帯端末20等により予め撮影された画像を記録した記録媒体から画像を読み出して取得してもよい。画像の取得方法は様々な方法が考えられ、本発明の本質には関わらないので、詳細な説明は省略する。
図5は、本実施形態の特徴量データベース44の構造の一例を説明するための図である。
図5(a)に示すように、特徴量データベース44には、各商品のフェイス画像の情報が登録されている。さらに、特徴量データベース44は、図示されない、識別コード画像を認識するのに必要な情報が登録されている。図5(b)に示すように、特徴量データベース44は、商品のフェイス画像の情報として、特徴量テーブル45に、商品を識別するための商品IDと、商品のフェイス画像を認識可能な特徴量を有する少なくとも1つの特徴点のデータとを対応付けて保持する。
なお、識別コード画像を認識するのに必要な情報は、たとえば、予め識別コード画像特有の特徴量を有する絵柄や記号、または識別用マーカ等を識別コード画像に含めておき、その特徴量を特徴量データベース44に保持しておくことで、識別コード画像の領域を画像認識することができる。
図4に戻り、受信部40は、ネットワーク3を介して携帯端末20から画像データを受信する。画像認識部42は、受信部40が受信した画像データから特徴量を抽出するとともに、特徴量データベース44を参照し、一致する特徴量を有するものがあるか否かを照合する。本実施形態では、受信部40は、携帯端末20の撮像部22を用いて自動販売機10を撮像して得られた自動販売機10のフェイス画像18を受信し、取得する。
画像認識部42による認識処理には、たとえば、以下の処理が含まれる。
(1)撮像画像(フェイス画像18)から、特徴量を抽出し、特徴量データベース44を参照し、商品のフェイス画像のパターン認識処理を行う。ここで、パターン認識処理する商品フェイス画像は、商品名まで特定できなくてもよく、たとえば、商品が飲料であれば、特徴量データベース44に登録されているペットボトルや缶のフェイス画像がそこにあることを認識できればよい。また、撮像画像内に存在する全商品のフェイス画像の領域を全て特定してもよいし、特定商品のみ認識してもよい。
(2)撮像画像(フェイス画像18)から、特徴量を抽出し、上述したように、たとえば、カラーの識別コード画像特有の特徴量を有する部分を認識し、識別コード画像領域を認識する。
自動販売機データベース48は、図6(a)に示すように、識別コードに位置情報を関連付けて保持する位置情報テーブル60を含むことができる。さらに、自動販売機データベース48は、図6(b)に示すように、位置情報と自動販売機10の識別情報(自動販売機ID)を関連付けて保持する自動販売機テーブル62を含むことができる。
図4の位置特定部46は、画像認識部42が認識した識別コード画像を、識別コード(シリアルナンバーまたはビット列)に変換する。そして、位置特定部46は、位置情報テーブル60を参照し、識別コードに対応する自動販売機10の位置情報を特定する。
また、位置特定部46は、取得した位置情報から、自動販売機テーブル62を参照し、対応する自動販売機10の識別情報(自動販売機ID)を特定してもよい。さらに、自動販売機データベース48には、図示されない自動販売機の属性情報を保持してもよい。たとえば、自動販売機IDに関連付けられた自動販売機10の種類、メーカ、所有者、設置場所、コラム構成、取扱商品、または実施中のキャンペーン情報等を保持してもよい。
商品特定部50は、画像認識部42が認識した自動販売機10の商品見本12の画像から、特徴量テーブル45を参照し、商品IDを特定する。さらに、商品特定部50は、位置特定部46が特定した自動販売機10の位置情報と、少なくとも1つの商品見本12の商品情報、たとえば、商品IDを紐付ける。
たとえば、図7に示すように、自動販売機10の位置情報に、少なくとも1つの商品見本12の商品情報、たとえば、商品IDを紐付けてフェイス情報56として、商品データベース52またはデータウェアハウス32に蓄積してもよい。
また、商品データベース52は、図8に示すように、たとえば、商品ID、商品名、商品の分類コード、価格、または商品のフェイス画像データを識別する画像ID等の情報を商品マスタテーブル54に保持する。商品の分類コードとは、たとえば、階層的な分類を示す情報を含むことができ、大分類が飲料の場合、中分類として、お茶、コーヒー、紅茶、果汁ジュース、炭酸飲料、水等の分類、お茶の小分類として、ほうじ茶、緑茶、烏龍茶、ブレンド茶等の分類、さらに、枝番として、地域限定、期間限定、キャンペーン等の分類を含むことができる。さらに、商品データベース52には、他社の商品の情報を含んでもよい。
商品特定部50は、特定した商品IDに基づいて、商品データベース52から自動販売機10に陳列されている商品の情報を取得できる。
なお、本実施形態では、自動販売機10側からデータセンタ5に撮影した画像データを送信し、データセンタ5のサーバ30が画像認識処理を行う構成としているが、これに限定されない。たとえば、携帯端末20が、撮像部22で撮像した画像から特徴量を抽出する抽出部(不図示)を備えてもよい。そして、送信部24が、データセンタ5に特徴量の情報を送信する構成とすることもできる。画像データを送信する場合に比較して、特徴量の情報を送信する構成の方が、通信量を削減でき、通信負荷を抑制することができる。
さらに、携帯端末20が、認識対象の商品画像の特徴量データを保持し、撮像画像の画像認識処理を行う画像認識部42を備えてもよい。そして、送信部24が、画像認識結果をデータセンタ5に送信する構成とすることもできる。この構成は、たとえば、認識対象の商品の種類が少ない場合や携帯端末20の処理能力を高い場合等に有効であり、データセンタ5のサーバ30の負荷を低減することができる。
このように、図1の自動販売機管理装置100は、データセンタ5のサーバ30と、携帯端末20とを組み合わせて実現することができる。サーバ30または携帯端末20の搭載機能、処理能力、または通信負荷等を考慮して適宜組み合わせを決めるのが望ましい。
また、送信部24により携帯端末20からサーバ30に送信される情報は、画像データそのもの以外に、たとえば、撮影者の情報(認証情報を含んでもよい)、携帯端末20の識別情報等をさらに含めてもよい。また、画像情報に、撮影日時等の属性情報が含まれていない場合、撮影日時も含めてもよい。さらに、展示ウインドウ14の一部の領域を撮影した画像を送信する場合、どの領域を撮影したかを示す情報を含めるのが好ましい。
これらの情報は、たとえば、日報を作成するアプリケーションプログラムと連動させること等で、自動的に取得してもよい。携帯端末20の操作画面を用いて操作者に入力させてもよい。
また、サーバ30は、キーボードやマウス等の入力装置(不図示)やディスプレイなどの表示装置やプリンタ等の出力装置(不図示)と接続されてもよく、操作者が操作するユーザインタフェース機能を有してもよい。また、タッチパネル等の入出力装置が一体となった形態でもよい。
上述のような構成において、本実施の形態の自動販売機管理装置100によるデータ処理方法を以下に説明する。図9は、本実施形態の自動販売機管理装置100の動作の一例を示すフローチャートである。
本実施形態のデータ処理方法は、自動販売機管理装置100が、自動販売機10の位置情報に対応する識別コード画像16と、自動販売機10に陳列されている少なくとも1つの商品見本12とが一緒に撮像された、当該自動販売機10のフェイス画像18を取得し(ステップS101)、取得したフェイス画像を画像認識し、画像認識された識別コード画像から自動販売機10の位置を特定し(ステップS103)、取得したフェイス画像18を画像認識し、画像認識された商品見本画像から少なくとも1つの商品を特定するとともに、特定された商品情報を、位置が特定された自動販売機10の位置情報に紐付ける(ステップS105)。
ここで、携帯端末20の撮像部22を用いて自動販売機10の展示ウインドウ14と識別コード画像16を撮像し、データセンタ5のサーバ30に送信する構成における動作について、具体的に説明する。
図10は、本発明の実施の形態に係る管理システム1の携帯端末20とサーバ30の動作の手順の一例を示すフローチャートである。
まず、撮像部22により自動販売機10を撮像する(ステップS111)。そして、送信部24により撮像画像をデータセンタ5のサーバ30に送信する(ステップS113)。
サーバ30において、受信部40が撮像画像を受信する(ステップS115)。そして、画像認識部42が、画像から特徴量を抽出し、商品のフェイス画像のパターン認識処理を行う(ステップS117)。
そして、画像認識部42が、撮像画像内から識別コード画像領域、すなわち、識別コード画像16を抽出する(ステップS119)。そして、位置特定部46が、識別コード画像16を識別コード(シリアルナンバーまたはビット列)に変換し(ステップS121)、位置情報テーブル60を参照して、自動販売機10の位置情報を特定する(ステップS123)。
さらに、画像認識部42が、撮像画像内に存在する全商品のフェイス画像の領域を抽出する(ステップS125)。そして、商品特定部50が、画像認識部42で認識された商品のフェイス画像の特徴量に対応する少なくとも1つの商品IDを特定し(ステップS127)、さらに、ステップS123で特定された自動販売機10の位置情報と、ステップS127で特定した商品IDを紐付けて出力する(ステップS129)。図7のフェイス情報56として、データウェアハウス32または商品データベース52に蓄積することができる。
このようにして、本実施形態では、携帯端末20を用いて自動販売機10を撮像した画像から、識別コード画像16と商品フェイス画像を認識し、自動販売機10の位置情報と、当該自動販売機10に陳列されている少なくとも1つの商品見本12を特定することができる。
たとえば、本実施形態では、対象となる商品の商品見本12が陳列されている自動販売機10は何処にあるかを調べることができる。あるいは、所定の位置の自動販売機10に対象となる商品の商品見本12が陳列されているか否かを調べることができる。
以上説明したように、本発明の実施の形態の自動販売機管理装置100によれば、自動販売機10を携帯端末20等を用いて撮像した画像に基づいて、その自動販売機10の位置情報を特定できるとともに、さらに、その自動販売機10に陳列されている商品見本12の商品情報を特定することができるので、自動販売機の識別情報を手入力したり、GPS等の機能を用いたりせずに、1つのセンサ(撮像部)で、自動販売機10の位置情報と商品情報を特定し、対応付けすることができる。これにより、精度よく効率的に自動販売機10の情報を把握することができる。
GPSで自動販売機10の位置情報を取得する場合に比較して、測定時のGPSシステムの通信状態の影響を受けることもなく、また、測定者の立ち位置のずれによる位置情報のずれもなく、位置情報の精度が向上する。
(第2の実施の形態)
図11は、本発明の実施の形態に係る自動販売機管理装置200の構成を示す機能ブロック図である。
本実施形態の自動販売機管理装置200は、上記実施の形態とは、さらに、自動販売機の商品見本の陳列状態を取得する点で相違する。
自動販売機管理装置200は、上記実施形態の自動販売機管理装置100と同じ、画像取得部102と、自動販売機特定部104と、商品特定部106と、を備えるとともに、さらに、陳列状態取得部202を備える。
陳列状態取得部202は、フェイス画像を画像認識して得られた商品見本画像から、商品見本12の陳列状態を取得する。
陳列状態とは、例として、以下の情報が考えられる。ここで、対象商品とは、自動販売機管理装置が情報を把握しようとする対象の商品を言う。
(1)自動販売機10内での少なくとも対象商品を含む各商品のコラム位置の情報
例として、商品コードとコラムナンバー、あるいは、商品が存在する段(上、中、下)や列(左、中、右)、その順序や配列等
(2)自動販売機10内における対象商品の存在の有無、またはその数量
(3)対象商品と非対象商品との関係、具体的には、対象商品と非対称商品の相対位置関係や数量の比率等
例として、自社の炭酸飲料Aが対象商品の場合、自社炭酸飲料Aが自動販売機10に存在するか否か、存在する場合、その数量、コラム位置、自動販売機10全体に対する自社炭酸飲料Aの数量の割合、または他社の炭酸飲料に対する自社炭酸飲料Aの数量の割合等を陳列状態として取得してもよい。
なお、陳列状態を把握する際には、商品画像の特徴量に関連付けられた商品の属性情報、自社か他社の区別、商品の種類(炭酸、果汁、スポーツドリンク、水、お茶、コーヒー、スープ等中身の種類や、ホット/コールド等の区分、容器のサイズや種類(缶/ペットボトル))等に基づいて、画像認識された商品を特定するとともに、各商品の陳列状態を把握する。
一般的に、自動販売機10には、自社製品のみを販売する自社の自動販売機と、自社製品は販売されない他社の自動販売機と、自社製品と他社製品が混在するベンダーの自動販売機と、がある。自社の自動販売機の商品の売り上げ情報等は、自社の自動販売機から収集したり、ベンダーから購入したりして取得することができる。
たとえば、飲料の自動販売機の場合、飲料メーカは、自動販売機10の展示ウインドウ14の商品見本12のコラム構成と、販売実績を分析し、コラム構成が売り上げに与える影響の傾向などの分析を行うことが考えられる。本実施形態の自動販売機管理装置200によれば、たとえば、自動販売機10において、商品見本12のコラム数、すなわち、連続して陳列されている商品見本12の数量や、商品見本12の陳列位置、たとえば、真ん中か端か、上、中、下のいずれかの段か、等の情報に基づいて、それらが、売り上げ本数や、売上金額等にどのように影響を及ぼしているか等を分析する。そして、その結果に基づいて、最適なコラム構成を検討することができる。
また、自動販売機10の設置場所による商品の売り上げへの影響も、統計的に分析することが可能になる。
たとえば、男子校の近くに設置される自動販売機10では、炭酸飲料の売り上げが高い傾向があり、女子校の近くに設置される自動販売機10では、お茶等の売り上げが高い傾向がある等の情報を分析することが可能になる。
図12は、本発明の実施の形態に係る自動販売機管理装置200で撮像されたフェイス画像を説明するための図である。
図12には、商品見本12と識別コード画像16を含むフェイス画像18から、各商品見本12のフェイス領域70と、コード領域72を抽出した状態が示されている。
陳列状態取得部202が取得した商品の陳列状態の情報は、たとえば、図13に示すコラム情報210のように、コラムに、商品名(または、商品ID)を関連付けて保持することができる。また、コラム情報210には、商品が自社製品か否かを示すフラグをさらに含めてもよい。ここで、自社製品であるか否かは、たとえば、特徴量データベース44に商品画像の特徴量の登録があるか否かで判断し、登録がない場合は他社製品であると判別してもよい。あるいは、商品マスタテーブル54や特徴量テーブル45に、商品IDに関連付けて自社製品か否かを示す情報を保持してもよい。
また、商品特定部106が、フェイス画像18から、商品見本12の金額や、ホットとコールドの区別等の情報を抽出して、商品情報としてさらに取得し、コラム情報210に保持してもよい。また、フェイス画像18から、展示ウインドウ14や自動販売機10に設置されているポスターやポップの有無や種類を認識して、得られた情報をさらに保持してもよい。
このようにして取得した商品の陳列状態を含む商品情報は、ビッグデータとして、フェイス画像18の撮影日時や自動販売機10の情報とともにデータウェアハウス32に蓄積される。
以上説明したように、本発明の実施の形態に係る自動販売機管理装置200によれば、上記実施形態と同様な効果を奏するとともに、さらに、自動販売機10の位置情報と、その自動販売機10の商品の陳列状態との関連付けを、精度よく効率的に行うことができる。
(第3の実施の形態)
図14は、本発明の実施の形態に係る自動販売機管理装置300の構成を示す機能ブロック図である。
本実施形態の自動販売機管理装置300は、上記実施の形態とは、識別コード画像が付けられていない自動販売機も管理対象に含める構成を有する点で相違する。
本実施形態では、図15に示すように、識別コード画像16が貼付されていない第1の自動販売機10bと、識別コード画像16が貼付されている第2の自動販売機10aが併設されている例について説明する。
自動販売機管理装置300は、画像取得部302と、自動販売機特定部304と、商品特定部306と、を備える。また、自動販売機管理装置300は、上記実施形態の自動販売機管理装置200の陳列状態取得部202をさらに備えた構成としてもよい。
画像取得部302は、上記実施形態の画像取得部102と同様な機能を備えるとともに、さらに、第1の自動販売機10bに隣接する第2の自動販売機10aの識別コード画像16と、第1の自動販売機10bに陳列されている少なくとも1つの商品見本12とが一緒に撮像された、第1の自動販売機10bのフェイス画像19を取得する。
自動販売機特定部304は、上記実施形態の自動販売機特定部104と同様な機能を備えるとともに、さらに、画像認識された識別コード画像16から、第2の自動販売機10aの位置を特定する。
商品特定部306は、上記実施形態の商品特定部106と同様な機能を備えるとともに、さらに、特定された第1の自動販売機10bの商品情報を、自動販売機特定部304により特定された第2の自動販売機10aの位置情報に紐付ける。
本実施形態では、図7のフェイス情報56として、第2の自動販売機10aの位置情報が格納される。本実施形態では、フェイス情報56として、第1の自動販売機10bの位置情報として、第2の自動販売機10aの位置情報が登録されていることを示す情報をさらに保持してもよい。そして、さらに、フェイス情報56として、第2の自動販売機10aの位置情報とともに、第2の自動販売機10aに対する第1の自動販売機10bの相対位置情報、たとえば、右隣、または3つ右隣等の情報を合わせて保持してもよい。
以上説明したように、本発明の実施の形態に係る自動販売機管理装置300によれば、上記実施形態と同様な効果を奏するとともに、さらに、識別コード情報を有していない自動販売機10bについても、その位置情報と商品情報を関連付けて、精度よく効率的に取得することができ、すなわち、情報を管理することが可能になる。
(第4の実施の形態)
図16は、本発明の実施の形態に係る自動販売機管理装置400の構成を示す機能ブロック図である。
本実施形態の自動販売機管理装置400は、上記実施の形態とは、さらに、自動販売機10の利用者の携帯端末20を用いて自動販売機10を撮像して得られた撮像画像から取得した自動販売機10の位置情報に、携帯端末20の利用者の情報を関連付ける構成を有する点で相違する。
自動販売機管理装置400は、自動販売機特定部404と、利用者情報取得部402を備える。
なお、本実施形態は、上記実施形態の自動販売機管理装置と同様な構成に、本実施形態の自動販売機特定部404と、利用者情報取得部402を備えた構成としてもよい。
本実施形態において、自動販売機管理装置400は、自動販売機10の利用者の携帯端末20の撮像部22を用いて撮像された自動販売機10の識別コード画像16と、利用者情報と、を取得する利用者情報取得部402をさらに備える。
自動販売機特定部404が、上記実施形態の自動販売機特定部104と同様な機能を有するとともに、さらに、利用者情報取得部402が取得した自動販売機10の識別コード画像16を画像認識し、画像認識された識別コード画像16から自動販売機10の位置を特定し、位置が特定された自動販売機10の位置情報と、利用者情報とを紐付ける。
本実施形態の自動販売機管理装置400において、携帯端末20の送信部24は、撮像部22を用いて、少なくとも自動販売機10の識別コード画像16を撮像した画像を、利用者情報とともに、データセンタ5のサーバ30に送信する。
利用者情報は、たとえば、携帯端末20の識別情報または利用者の識別情報を含む。さらに、利用者情報は、利用者のプロフィール情報を含んでもよい。あるいは、利用者情報取得部402は、上記実施形態の画像取得部102と同様に、自動販売機10の少なくとも1つの商品見本12と識別コード画像16を一緒に撮像したフェイス画像18を、利用者情報とともに取得してもよい。
利用者情報とともに画像を携帯端末20からサーバ30へ送信する方法は、以下の方法が考えられる。
(1)利用者情報を登録して申し込みまたは購入したアプリケーションを起動し、アプリケーションで管理している利用者情報とともに撮像画像を送信する。
(2)ユーザID等の利用者情報を用いて、所定のURLのウェブページにログインし、撮像画像をアップロードする。この場合、ログイン時に使用したユーザIDが利用者情報となる。
(3)利用者の携帯端末20から所定のメールアドレスに撮像画像を送信する。この場合、携帯端末20のメールアドレスが利用者情報となる。
このように構成された本実施形態の自動販売機管理装置400の利用シーンについて、以下説明する。
(1)利用者が利用する自動販売機10の情報を収集し、利用者のプロフィールとともに分析してマーケティングデータとして利用する。たとえば、自動販売機10の撮像画像を応募シールの替わりに使用させて、キャンペーンに応募できるようにすることで、情報収集できる。
(2)利用者に、所定の商品を販売している自動販売機10や所定の場所(駅や施設等)に設置されている自動販売機10を撮像させることで、スタンプラリーなどに応用し、自動販売機10を情報ステーションとして機能させ、キャンペーン等を展開させる。
以上説明したように、本発明の実施の形態に係る自動販売機管理装置400によれば、上記実施形態と同様な効果を奏するとともに、さらに、利用者情報と紐付けることで、自動販売機10の販売情報をより効率的に収集でき、更なるビジネスチャンスを展開させることが可能になる。
以上、図面を参照して本発明の実施形態について述べたが、これらは本発明の例示であり、上記以外の様々な構成を採用することもできる。
なお、本発明において利用者に関する情報を取得、利用する場合は、これを適法に行うものとする。
以上、実施形態および実施例を参照して本願発明を説明したが、本願発明は上記実施形態および実施例に限定されるものではない。本願発明の構成や詳細には、本願発明のスコープ内で当業者が理解し得る様々な変更をすることができる。
上記の実施形態の一部または全部は、以下の付記のようにも記載されうるが、以下には限られない。
(付記1)
自動販売機管理装置が、
自動販売機の位置情報を示す識別コード画像と、前記自動販売機に陳列されている少なくとも1つの商品見本とが一緒に撮像された、当該自動販売機のフェイス画像を取得し、
取得した前記フェイス画像を画像認識し、画像認識された前記識別コード画像から前記自動販売機の位置を特定し、
取得した前記フェイス画像を画像認識し、画像認識された商品見本画像から少なくとも1つの商品を特定するとともに、特定された商品情報を、前記位置が特定された前記自動販売機の位置情報に紐付ける自動販売機管理装置のデータ処理方法。
(付記2)
付記1に記載の自動販売機管理装置のデータ処理方法において、
前記自動販売機管理装置が、
さらに、前記フェイス画像を画像認識して得られた前記商品見本画像から、前記商品見本の陳列状態を取得する自動販売機管理装置のデータ処理方法。
(付記3)
付記1または2に記載の自動販売機管理装置のデータ処理方法において、
前記自動販売機管理装置が、
第1の自動販売機に隣接する第2の自動販売機の前記識別コード画像と、前記第1の自動販売機に陳列されている少なくとも1つの商品見本とが一緒に撮像された、前記第1の自動販売機の前記フェイス画像を取得し、
画像認識された前記識別コード画像から、前記第2の自動販売機の位置を特定し、
特定された前記第1の自動販売機の前記商品情報を、特定された前記第2の自動販売機の位置情報に紐付ける自動販売機管理装置のデータ処理方法。
(付記4)
付記1乃至3いずれかに記載の自動販売機管理装置のデータ処理方法において、
前記自動販売機管理装置が、
携帯端末に含まれる撮像部を用いて前記自動販売機を撮像して得られた前記自動販売機の前記フェイス画像を取得する自動販売機管理装置のデータ処理方法。
(付記5)
付記4に記載の自動販売機管理装置のデータ処理方法において、
前記自動販売機管理装置が、
前記撮像部を含む携帯端末と、
前記自動販売機の前記位置情報に紐付けられた前記商品情報を管理する管理装置と、を備え、
前記自動販売機の特定処理または前記商品の特定処理は、前記携帯端末または前記管理装置により実現される自動販売機管理装置のデータ処理方法。
(付記6)
付記1乃至5いずれかに記載の自動販売機管理装置のデータ処理方法において、
前記自動販売機管理装置が、
さらに、前記自動販売機の利用者の携帯端末の撮像部を用いて撮像された前記自動販売機の前記識別コード画像と、利用者情報と、を取得し、
取得した前記自動販売機の前記識別コード画像を画像認識し、画像認識された前記識別コード画像から前記自動販売機の位置を特定し、前記位置が特定された前記自動販売機の位置情報と、前記利用者情報とを紐付ける自動販売機管理装置のデータ処理方法。
(付記7)
自動販売機管理装置を実現するコンピュータに、
自動販売機の位置情報を示す識別コード画像と、前記自動販売機に陳列されている少なくとも1つの商品見本とが一緒に撮像された、当該自動販売機のフェイス画像を取得する手順、
取得した前記フェイス画像を画像認識し、画像認識された前記識別コード画像から前記自動販売機の位置を特定する手順、
取得した前記フェイス画像を画像認識し、画像認識された商品見本画像から少なくとも1つの商品を特定するとともに、特定された商品情報を、前記位置が特定された前記自動販売機の位置情報に紐付ける手順を実行させるためのプログラム。
(付記8)
付記7に記載のプログラムにおいて、
前記フェイス画像を画像認識して得られた前記商品見本画像から、前記商品見本の陳列状態を取得する手順をさらにコンピュータに実行させるためのプログラム。
(付記9)
付記7または8に記載のプログラムにおいて、
第1の自動販売機に隣接する第2の自動販売機の前記識別コード画像と、前記第1の自動販売機に陳列されている少なくとも1つの商品見本とが一緒に撮像された、前記第1の自動販売機の前記フェイス画像を取得する手順、
画像認識された前記識別コード画像から、前記第2の自動販売機の位置を特定する手順、
特定された前記第1の自動販売機の前記商品情報を、前記自動販売機を特定する手順により特定された前記第2の自動販売機の位置情報に紐付ける手順をさらにコンピュータに実行させるためのプログラム。
(付記10)
付記7乃至9いずれかに記載のプログラムにおいて、
携帯端末に含まれる撮像部を用いて前記自動販売機を撮像して得られた前記自動販売機の前記フェイス画像を取得する手順をさらにコンピュータに実行させるためのプログラム。
(付記11)
付記10に記載のプログラムにおいて、
前記撮像部を含む携帯端末と、
前記自動販売機の前記位置情報に紐付けられた前記商品情報を管理する管理装置と、を備え、
前記自動販売機を特定する手順または前記商品を特定する手順は、
前記撮像部を含む携帯端末または前記自動販売機の前記位置情報に紐付けられた前記商品情報を管理する管理装置により実行されるプログラム。
(付記12)
付記7乃至11いずれかに記載のプログラムにおいて、
前記自動販売機の利用者の携帯端末の撮像部を用いて撮像された前記自動販売機の前記識別コード画像と、利用者情報と、を取得する手順、
前記利用者情報を取得する手順により取得した前記自動販売機の前記識別コード画像を画像認識し、画像認識された前記識別コード画像から前記自動販売機の位置を特定し、前記位置が特定された前記自動販売機の位置情報と、前記利用者情報とを紐付ける手順をさらにコンピュータに実行させるためのプログラム。
1 管理システム
3 ネットワーク
5 データセンタ
10 自動販売機
12 商品見本
14 展示ウインドウ
16 識別コード画像
18 フェイス画像
19 フェイス画像
20 携帯端末
22 撮像部
24 送信部
30 サーバ
32 データウェアハウス
40 受信部
42 画像認識部
44 特徴量データベース
45 特徴量テーブル
46 位置特定部
48 自動販売機データベース
50 商品特定部
52 商品データベース
54 商品マスタテーブル
56 フェイス情報
60 位置情報テーブル
62 自動販売機テーブル
70 フェイス領域
72 コード領域
100 自動販売機管理装置
102 画像取得部
104 自動販売機特定部
106 商品特定部
200 自動販売機管理装置
202 陳列状態取得部
210 コラム情報
300 自動販売機管理装置
302 画像取得部
304 自動販売機特定部
306 商品特定部
400 自動販売機管理装置
402 利用者情報取得部
404 自動販売機特定部

Claims (8)

  1. 自動販売機の位置情報を示す識別コード画像と、前記自動販売機に陳列されている少なくとも1つの商品見本とが一緒に撮像された、当該自動販売機のフェイス画像を取得する画像取得手段と、
    取得した前記フェイス画像を画像認識し、画像認識された前記識別コード画像から前記自動販売機の位置を特定する自動販売機特定手段と、
    取得した前記フェイス画像を画像認識し、画像認識された商品見本画像から少なくとも1つの商品を特定するとともに、特定された商品情報を、前記自動販売機特定手段により前記位置が特定された前記自動販売機の位置情報に紐付ける商品特定手段と、を備える自動販売機管理装置。
  2. 請求項1に記載の自動販売機管理装置において、
    前記フェイス画像を画像認識して得られた前記商品見本画像から、前記商品見本の陳列状態を取得する陳列状態取得手段をさらに備える自動販売機管理装置。
  3. 請求項1または2に記載の自動販売機管理装置において、
    前記画像取得手段は、第1の自動販売機に隣接する第2の自動販売機の前記識別コード画像と、前記第1の自動販売機に陳列されている少なくとも1つの商品見本とが一緒に撮像された、前記第1の自動販売機の前記フェイス画像を取得し、
    前記自動販売機特定手段は、画像認識された前記識別コード画像から、前記第2の自動販売機の位置を特定し、
    前記商品特定手段は、特定された前記第1の自動販売機の前記商品情報を、前記自動販売機特定手段により特定された前記第2の自動販売機の位置情報に紐付ける自動販売機管理装置。
  4. 請求項1乃至3いずれかに記載の自動販売機管理装置において、
    前記画像取得手段は、携帯端末に含まれる撮像部を用いて前記自動販売機を撮像して得られた前記自動販売機の前記フェイス画像を取得する自動販売機管理装置。
  5. 請求項4に記載の自動販売機管理装置において、
    前記撮像部を含む携帯端末と、
    前記自動販売機の前記位置情報に紐付けられた前記商品情報を管理する管理装置と、を備え、
    前記自動販売機特定手段または前記商品特定手段は、前記携帯端末または前記管理装置により実現される自動販売機管理装置。
  6. 請求項1乃至5いずれかに記載の自動販売機管理装置において、
    前記自動販売機の利用者の携帯端末の撮像部を用いて撮像された前記自動販売機の前記識別コード画像と、利用者情報と、を取得する利用者情報取得手段をさらに備え、
    前記自動販売機特定手段が、前記利用者情報取得手段が取得した前記自動販売機の前記識別コード画像を画像認識し、画像認識された前記識別コード画像から前記自動販売機の位置を特定し、前記位置が特定された前記自動販売機の位置情報と、前記利用者情報とを紐付ける自動販売機管理装置。
  7. 自動販売機管理装置が、
    自動販売機の位置情報を示す識別コード画像と、前記自動販売機に陳列されている少なくとも1つの商品見本とが一緒に撮像された、当該自動販売機のフェイス画像を取得し、
    取得した前記フェイス画像を画像認識し、画像認識された前記識別コード画像から前記自動販売機の位置を特定し、
    取得した前記フェイス画像を画像認識し、画像認識された商品見本画像から少なくとも1つの商品を特定するとともに、特定された商品情報を、前記位置が特定された前記自動販売機の位置情報に紐付ける自動販売機管理装置のデータ処理方法。
  8. 自動販売機管理装置を実現するコンピュータに、
    自動販売機の位置情報を示す識別コード画像と、前記自動販売機に陳列されている少なくとも1つの商品見本とが一緒に撮像された、当該自動販売機のフェイス画像を取得する手順、
    取得した前記フェイス画像を画像認識し、画像認識された前記識別コード画像から前記自動販売機の位置を特定する手順、
    取得した前記フェイス画像を画像認識し、画像認識された商品見本画像から少なくとも1つの商品を特定するとともに、特定された商品情報を、前記位置が特定された前記自動販売機の位置情報に紐付ける手順を実行させるためのプログラム。
JP2012285754A 2012-12-27 2012-12-27 自動販売機管理装置、そのデータ処理方法、およびプログラム Active JP6136257B2 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2012285754A JP6136257B2 (ja) 2012-12-27 2012-12-27 自動販売機管理装置、そのデータ処理方法、およびプログラム

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2012285754A JP6136257B2 (ja) 2012-12-27 2012-12-27 自動販売機管理装置、そのデータ処理方法、およびプログラム

Publications (2)

Publication Number Publication Date
JP2014127168A true JP2014127168A (ja) 2014-07-07
JP6136257B2 JP6136257B2 (ja) 2017-05-31

Family

ID=51406559

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2012285754A Active JP6136257B2 (ja) 2012-12-27 2012-12-27 自動販売機管理装置、そのデータ処理方法、およびプログラム

Country Status (1)

Country Link
JP (1) JP6136257B2 (ja)

Cited By (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105243557A (zh) * 2015-09-16 2016-01-13 上海斐讯数据通信技术有限公司 自助式挑选蔬果的方法及***
CN107993343A (zh) * 2017-12-11 2018-05-04 深圳市满心科技有限公司 自动售货机及盘点货物的方法以及存储介质
WO2018172906A1 (ja) * 2017-03-18 2018-09-27 エコエコドライブ株式会社 行動管理方法、行動管理装置、並びに決済補助コンピュータ
CN109712315A (zh) * 2018-12-27 2019-05-03 苏州浪潮智能软件有限公司 一种基于双摄像头的自动售卖机货物掉落检测方法
WO2019188443A1 (ja) * 2018-03-30 2019-10-03 日本電気株式会社 情報処理装置、情報処理システム、制御方法、及びプログラム
CN111126264A (zh) * 2019-12-24 2020-05-08 北京每日优鲜电子商务有限公司 图像处理方法、装置、设备及存储介质
CN112434769A (zh) * 2017-09-08 2021-03-02 创新先进技术有限公司 应用于客户端、服务端的业务执行方法、装置以及设备
JP2021519991A (ja) * 2018-04-23 2021-08-12 合肥美的智能科技有限公司Hefei Midea Intelligent Technologies Co.,Ltd. 無人販売機の制御方法
JP2021192275A (ja) * 2019-08-22 2021-12-16 日本電気株式会社 情報処理装置、情報処理システム、制御方法、及びプログラム
CN116363795A (zh) * 2023-03-22 2023-06-30 湖南云数信息科技有限公司 售货柜、管理方法及存储介质

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108877053A (zh) * 2018-09-30 2018-11-23 爱九九(青岛)科技股份有限公司 基于人脸识别的多媒体共享智能直饮水机装置管控方法

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004213109A (ja) * 2002-12-26 2004-07-29 Japan Tobacco Inc 販売管理システム
JP2005038103A (ja) * 2003-07-17 2005-02-10 Ntt Docomo Inc 案内装置、案内システム、及び案内方法
WO2005024345A1 (ja) * 2003-09-01 2005-03-17 Fujitsu Limited 位置情報の検索方法及び検索システム
JP2005284566A (ja) * 2004-03-29 2005-10-13 Glory Ltd 自動販売機
JP2005332093A (ja) * 2004-05-18 2005-12-02 Sharp Corp 保守作業システム管理装置、認証装置、携帯情報端末装置、コンピュータプログラム、記録媒体、及び保守作業システム
JP2012073738A (ja) * 2010-09-28 2012-04-12 Canon It Solutions Inc 携帯端末、販売管理システム、制御方法、販売管理方法およびプログラム

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004213109A (ja) * 2002-12-26 2004-07-29 Japan Tobacco Inc 販売管理システム
JP2005038103A (ja) * 2003-07-17 2005-02-10 Ntt Docomo Inc 案内装置、案内システム、及び案内方法
WO2005024345A1 (ja) * 2003-09-01 2005-03-17 Fujitsu Limited 位置情報の検索方法及び検索システム
JP2005284566A (ja) * 2004-03-29 2005-10-13 Glory Ltd 自動販売機
JP2005332093A (ja) * 2004-05-18 2005-12-02 Sharp Corp 保守作業システム管理装置、認証装置、携帯情報端末装置、コンピュータプログラム、記録媒体、及び保守作業システム
JP2012073738A (ja) * 2010-09-28 2012-04-12 Canon It Solutions Inc 携帯端末、販売管理システム、制御方法、販売管理方法およびプログラム

Cited By (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105243557A (zh) * 2015-09-16 2016-01-13 上海斐讯数据通信技术有限公司 自助式挑选蔬果的方法及***
WO2018172906A1 (ja) * 2017-03-18 2018-09-27 エコエコドライブ株式会社 行動管理方法、行動管理装置、並びに決済補助コンピュータ
CN112434769A (zh) * 2017-09-08 2021-03-02 创新先进技术有限公司 应用于客户端、服务端的业务执行方法、装置以及设备
CN107993343A (zh) * 2017-12-11 2018-05-04 深圳市满心科技有限公司 自动售货机及盘点货物的方法以及存储介质
WO2019188443A1 (ja) * 2018-03-30 2019-10-03 日本電気株式会社 情報処理装置、情報処理システム、制御方法、及びプログラム
JP2019179488A (ja) * 2018-03-30 2019-10-17 日本電気株式会社 情報処理装置、情報処理システム、制御方法、及びプログラム
US20210034908A1 (en) * 2018-03-30 2021-02-04 Nec Corporation Information processing device, information processing system, and control method
JP2021519991A (ja) * 2018-04-23 2021-08-12 合肥美的智能科技有限公司Hefei Midea Intelligent Technologies Co.,Ltd. 無人販売機の制御方法
JP7107599B2 (ja) 2018-04-23 2022-07-27 合肥美的智能科技有限公司 無人販売機の制御方法
CN109712315A (zh) * 2018-12-27 2019-05-03 苏州浪潮智能软件有限公司 一种基于双摄像头的自动售卖机货物掉落检测方法
JP2021192275A (ja) * 2019-08-22 2021-12-16 日本電気株式会社 情報処理装置、情報処理システム、制御方法、及びプログラム
JP7279755B2 (ja) 2019-08-22 2023-05-23 日本電気株式会社 情報処理装置、情報処理システム、制御方法、及びプログラム
CN111126264A (zh) * 2019-12-24 2020-05-08 北京每日优鲜电子商务有限公司 图像处理方法、装置、设备及存储介质
CN116363795A (zh) * 2023-03-22 2023-06-30 湖南云数信息科技有限公司 售货柜、管理方法及存储介质

Also Published As

Publication number Publication date
JP6136257B2 (ja) 2017-05-31

Similar Documents

Publication Publication Date Title
JP6136257B2 (ja) 自動販売機管理装置、そのデータ処理方法、およびプログラム
US20180253674A1 (en) System and method for identifying retail products and determining retail product arrangements
US10062257B2 (en) Intelligent display system and method
TWI546740B (zh) Information code, information code generation method, information code reading device, and information code utilization system
JP6801676B2 (ja) 情報処理装置、情報処理方法、及び、プログラム
CN107084780A (zh) 一种智能电子秤及相应的称重方法
US20100253787A1 (en) Method for Object Recognition and Communication of Associated Label and Other Information
CN107167221A (zh) 一种利用智能电子秤的农产品溯源方法及智能电子秤
US10740743B2 (en) Information processing device and screen setting method
JP6784664B2 (ja) 情報処理装置、情報処理方法、および情報処理システム
JP2007334715A (ja) チェックアウトシステム
CN214202398U (zh) 一种快递智能网联安全设备
TWM467132U (zh) 手機圖像辨識行動商務系統
KR20130006878A (ko) 스마트 기기에서의 기초마커를 이용한 객체 이미지 복원 방법 및 그 기초마커를 이용하여 객체이미지를 복원하는 스마트 기기
JP2007241527A (ja) 商品関連アクセス情報提供装置および商品関連アクセス情報提供システムとサーバ装置
JP2009259251A (ja) 移動通信端末によって情報を取得する方法、システム及びその移動通信端末
US20140046760A1 (en) Methods, systems, and computer readable media for identifying qualifying consumer offers
WO2019074011A1 (ja) 対象物取得確認のためのシステム、サーバ、プログラム及び方法
JP2005326972A (ja) 購入情報管理装置
KR20130137805A (ko) 정보기록부를 구비한 구매권을 이용한 디지털 저작물 제공 방법 및 시스템
JP2014006651A (ja) バーコードを用いたマーケティング情報収集システムおよびマーケティング情報収集方法
KR102133863B1 (ko) Qr 코드를 이용한 구매 정보 표시 및 관리가 가능한 시스템 및 그 방법
JP2008159014A (ja) 被管理物品、ゲームシステム、端末装置、およびそのプログラム
KR102342044B1 (ko) 개인 정보 이용 주문 시스템
KR102249997B1 (ko) 단말과 서비스 제공 장치, 그를 포함하는 상품 정보 제공 시스템, 그 제어 방법 및 컴퓨터 프로그램이 기록된 기록매체

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20151105

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20160720

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20160906

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20170404

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20170417

R150 Certificate of patent or registration of utility model

Ref document number: 6136257

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150