JP5682329B2 - vending machine - Google Patents
vending machine Download PDFInfo
- Publication number
- JP5682329B2 JP5682329B2 JP2011013764A JP2011013764A JP5682329B2 JP 5682329 B2 JP5682329 B2 JP 5682329B2 JP 2011013764 A JP2011013764 A JP 2011013764A JP 2011013764 A JP2011013764 A JP 2011013764A JP 5682329 B2 JP5682329 B2 JP 5682329B2
- Authority
- JP
- Japan
- Prior art keywords
- product
- user
- vending machine
- camera
- image
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Images
Landscapes
- Control Of Vending Devices And Auxiliary Devices For Vending Devices (AREA)
Description
本発明は、自動販売機等に関する。 The present invention relates to a vending machine or the like.
内部に複数の商品を配置してこれらの前面にガラス等の透明板を設置している自動販売
機がある。このような自動販売機は一般にグラスフロント型自動販売機と呼ばれている。
グラスフロント型自動販売機では、見えている商品そのものを購入できるため利用者に安
心感を与える。また、グラスフロント型自動販売機では、さまざまな形状やサイズの商品
を販売できる。そのため、利用者が自動販売機で購入できる商品の幅が広がり、利用者に
とっても利便性が高い。さらに、商品が飲料の場合には飲み口を内部の機械に触れさせず
に排出できるため衛生面でも優れており、商品が排出される過程を利用者が視認できるた
めにアミューズメント性も備えている。
There is a vending machine in which a plurality of products are arranged inside and a transparent plate such as glass is installed in front of these. Such a vending machine is generally called a glass front type vending machine.
Glass front vending machines give users a sense of security because they can purchase visible products themselves. Glass front vending machines can sell products of various shapes and sizes. For this reason, the range of products that users can purchase with vending machines is widened, which is convenient for users. In addition, when the product is a beverage, it can be discharged without touching the inside machine, so it is also hygienic, and the user can see the process of discharging the product so that it has amusement characteristics. .
その一方で、グラスフロント型自動販売機では、商品選択時の操作性がよくない場合が
ある。例えば、グラスフロント型でない自動販売機では、商品見本に近接して配置された
ボタンを押すことで利用者は商品を選択する。このときの操作は容易であり、利用者は選
択した商品(以下、選択商品)を誤る可能性は低い。しかし、グラスフロント型自動販売
機では商品の前面はボタンのないガラス板であり、商品選択用のテンキーやダイレクトキ
ーは硬貨投入口等の近傍に集約配置されていることが多い。そのため、利用者は商品に付
された番号を覚えておき、その番号をテンキーで入力する操作を行ったり、その番号の付
されたダイレクトキーを押したりする必要がある。このような商品選択方法は、操作性が
よいとはいえず、利用者が商品を誤選択する可能性が生じてしまう。
On the other hand, in a glass front type vending machine, the operability at the time of product selection may not be good. For example, in a vending machine that is not a glass front type, the user selects a product by pressing a button that is arranged close to the product sample. The operation at this time is easy, and the user is unlikely to mistake the selected product (hereinafter referred to as the selected product). However, in the glass front type vending machine, the front of the product is a glass plate without a button, and the numeric keypad and the direct key for selecting the product are often arranged in the vicinity of a coin slot or the like. Therefore, the user needs to remember the number assigned to the product and perform an operation of inputting the number with the numeric keypad or press the direct key to which the number is attached. Such a product selection method cannot be said to have good operability, and may cause a user to erroneously select a product.
そこで、特許文献1の発明では、例えば商品が配置される段毎に異なる色のシールを貼
り、ダイレクトキーの色をシールの色と略一致させることによって、商品とダイレクトキ
ーの対応を視覚的にわかりやすくする(以下、第1の比較例)。これにより、グラスフロ
ント型自動販売機の商品選択時の操作性を向上させて、利用者が商品を誤選択する可能性
を低減させる。
Therefore, in the invention of Patent Document 1, for example, a sticker of a different color is attached to each stage where a product is arranged, and the correspondence between the product and the direct key is visually determined by substantially matching the color of the direct key with the color of the seal. It will be easy to understand (hereinafter referred to as a first comparative example). Thereby, the operativity at the time of the product selection of a glass front type vending machine is improved, and the possibility that a user erroneously selects a product is reduced.
また、タッチパネルを使用して操作性を向上させることも可能である。例えば、硬貨投
入口等の近傍に商品見本を映像で表示するタッチパネルを配置することで操作性を向上さ
せて誤選択を防止してもよい(以下、第2の比較例)。また、例えば、ガラス面に商品選
択ボタンの機能を有するタッチパネルを貼ることで操作性を向上させて誤選択を防止して
もよい(以下、第3の比較例)。
It is also possible to improve operability using a touch panel. For example, a touch panel that displays product samples in the vicinity of a coin slot or the like may be arranged to improve operability and prevent erroneous selection (hereinafter referred to as a second comparative example). Further, for example, a touch panel having a function of a product selection button may be pasted on the glass surface to improve operability and prevent erroneous selection (hereinafter, a third comparative example).
ここで、第1の比較例では、商品数が増えるにつれて必要な色数も増える。しかし、一
般に利用可能なダイレクトキーの発光色は限られている。そのため、商品数が増えた場合
に、同色に区分された商品間で誤選択が生じる可能性を排除できない。また、ダイレクト
キーの発光色の種類を増やした場合には自動販売機の製造開発コストが増大してしまう。
Here, in the first comparative example, the necessary number of colors increases as the number of products increases. However, generally available direct key emission colors are limited. For this reason, when the number of products increases, the possibility of erroneous selection between products classified in the same color cannot be excluded. In addition, when the number of luminescent colors of the direct key is increased, the manufacturing and development cost of the vending machine increases.
また、第2の比較例と第3の比較例では、自動販売機のサイズに合わせたタッチパネル
が必要になり自動販売機の製造開発コストが増大してしまう。また、多くの人が直接触れ
るためにタッチパネル表面が傷つく可能性がある。この場合には、自動販売機としての機
能が損なわれる恐れがある。さらに、第3の比較例では、タッチパネルによって光の透過
率が低下して商品の視認性が損なわれる可能性もある。
In the second comparative example and the third comparative example, a touch panel that matches the size of the vending machine is required, and the manufacturing and development cost of the vending machine increases. In addition, the touch panel surface may be damaged because many people directly touch it. In this case, the function as a vending machine may be impaired. Furthermore, in the third comparative example, the light transmittance may be lowered by the touch panel, and the visibility of the product may be impaired.
本発明はこのような問題点に鑑みてなされたものである。本発明のいくつかの態様によ
れば、商品選択時の操作性に優れ、商品の誤選択を防止でき、製造開発コストも低い自動
販売機を提供できる。
The present invention has been made in view of such problems. According to some aspects of the present invention, it is possible to provide a vending machine that is excellent in operability at the time of product selection, can prevent erroneous product selection, and has low manufacturing development costs.
(1)本発明は、筐体の一部に設けられた透明板を介して内部の複数の商品が利用者に視
認可能な自動販売機であって、前記透明板を含む所定のエリアを撮影するカメラと、前記
カメラからの画像に基づいて、前記利用者が前記複数の商品の中から選択した選択商品を
判断する画像処理部と、前記複数の商品の中の1つの商品を指定する商品コード信号を受
け取り、前記商品コード信号が指定する商品を出力させる制御部と、を含み、前記画像処
理部は、前記カメラからの画像における前記利用者の指の位置を抽出し、前記利用者の指
の位置と前記透明板との位置関係に基づき、前記選択商品を判断し、前記選択商品と判断
した商品を指定する前記商品コード信号を前記制御部に出力する。
(1) The present invention is a vending machine in which a user can visually recognize a plurality of products inside through a transparent plate provided in a part of the casing, and photographs a predetermined area including the transparent plate. An image processing unit that determines a selected product selected from the plurality of products by the user based on an image from the camera, and a product that specifies one product among the plurality of products A control unit that receives a code signal and outputs a product specified by the product code signal, wherein the image processing unit extracts a position of the user's finger in the image from the camera, and Based on the positional relationship between the finger position and the transparent plate, the selected product is determined, and the product code signal designating the product determined to be the selected product is output to the control unit.
本発明によれば、画像処理部はカメラからの画像に基づいて、利用者の指の位置と透明
板との位置関係から選択商品を判断して、選択商品と判断した商品を指定する商品コード
信号を制御部に出力する。そして、制御部は、商品コード信号が指定する商品を出力させ
る。このとき、利用者は、特にテンキーやダイレクトキーを操作することなく、欲しい商
品を指差すだけで商品選択を行うことが可能である。そのため、本発明の自動販売機は、
商品選択時の操作性に優れている。また、例えばテンキーでの利用者の数値間違い等に起
因する、商品の誤選択を防止することができる。そして、自動販売機のサイズに合わせた
タッチパネルを必要とすることもない。そのため、自動販売機の製造開発コストが低くて
済む。
According to the present invention, the image processing unit determines the selected product from the positional relationship between the position of the user's finger and the transparent plate based on the image from the camera, and specifies the product code that is determined as the selected product The signal is output to the control unit. And a control part outputs the goods which a goods code signal specifies. At this time, the user can select a product simply by pointing to the desired product without operating the numeric keypad or direct key. Therefore, the vending machine of the present invention is
Excellent operability when selecting products. Further, for example, it is possible to prevent a wrong product from being selected due to, for example, an incorrect numerical value of the user with the numeric keypad. And there is no need for a touch panel that matches the size of the vending machine. Therefore, the manufacturing and development cost of the vending machine can be reduced.
ここで、利用者の指の位置と透明板との位置関係とは、例えば、利用者の指が透明板に
接触している場合の平面的な位置だけでなく、非接触時の透明板の表面からの距離も含む
。本発明によれば、例えばセンサー機能をもたないガラス(透明板)が設けられた自動販
売機で、タッチパネルと同様の操作を可能にする。つまり、利用者が選択したい商品の前
面部分のガラスに触れた場合に、画像処理部は利用者の指の先に配置されている商品が選
択商品だと判断することができる。このとき、利用者は実際の商品を見ながらガラスに触
れるだけで選択ができるので操作性がよく、誤選択する可能性はほとんどない。また、セ
ンサー機能をもたないガラスを用いることができるので製造開発コストが低く、タッチパ
ネルで用いる見本画像等も用意する必要がない。
Here, the positional relationship between the position of the user's finger and the transparent plate is, for example, not only the planar position when the user's finger is in contact with the transparent plate, but also of the transparent plate when not in contact. Includes distance from surface. According to the present invention, for example, an operation similar to that of a touch panel can be performed by a vending machine provided with glass (transparent plate) having no sensor function. That is, when the user touches the glass on the front surface of the product to be selected, the image processing unit can determine that the product arranged at the tip of the user's finger is the selected product. At this time, the user can make a selection simply by touching the glass while looking at the actual product, so the operability is good and there is almost no possibility of erroneous selection. Further, since glass having no sensor function can be used, manufacturing and development costs are low, and it is not necessary to prepare a sample image used for the touch panel.
このとき、本発明ではタッチパネルと異なり、必ずしも利用者がガラスに触れる必要は
ない。本発明によれば、利用者の指が透明板の表面からある距離(例えば1cm)以内に
ある場合に、利用者による商品選択が行われていると判断することもできる。この場合に
は、非接触で商品選択を実行できるので、ガラスの表面が傷つくことがない。そのため、
開発製造コストのみならず保守のコストも低く抑えることが可能である。
At this time, unlike the touch panel in the present invention, the user does not necessarily need to touch the glass. According to the present invention, when the user's finger is within a certain distance (for example, 1 cm) from the surface of the transparent plate, it can also be determined that the product is selected by the user. In this case, since the product selection can be executed in a non-contact manner, the glass surface is not damaged. for that reason,
Not only development and manufacturing costs but also maintenance costs can be kept low.
なお、筐体の一部に設けられた透明板は、例えばガラスであっても透明な樹脂であって
もよい。また、この透明板は、内部の商品をそのまま利用者に見せることができるように
無色透明であることが好ましいが、品質保持等の目的のために有色透明であってもよい。
Note that the transparent plate provided in a part of the housing may be glass or transparent resin, for example. The transparent plate is preferably colorless and transparent so that the product inside can be seen as it is, but may be colored and transparent for the purpose of maintaining quality.
本発明のカメラは1つであっても複数であってもよい。カメラは、透明板を含む所定の
エリアを撮影するが、撮影した画像に透明板のほぼ全体が含まれていればよく、必ずしも
自動販売機全体が撮影されている必要はない。所定のエリアは固定されたエリアであるこ
とが好ましいが、切り替えが可能であったりズームが可能であったりしてもよい。透明板
のほぼ全体とは、商品が配置された部分の正面以外(例えば、透明板の外枠部分)は画像
に含まれなくてもよいことを意味する。なお、画像とはカメラが撮影した動画や静止画の
ことであり、特に動画から切り出された1フレームの画像を指す。カメラからの画像とは
、カメラからの出力データに基づいて構成される画像をいう。
The camera of the present invention may be one or plural. The camera captures a predetermined area including the transparent plate, but it is sufficient that the captured image includes almost the entire transparent plate, and the entire vending machine does not necessarily have to be captured. The predetermined area is preferably a fixed area, but may be switched or zoomed. Substantially the entire transparent plate means that an image other than the front of the portion where the product is arranged (for example, the outer frame portion of the transparent plate) may not be included in the image. The image is a moving image or a still image taken by the camera, and particularly refers to a one-frame image cut out from the moving image. An image from a camera refers to an image configured based on output data from the camera.
本発明の画像処理部は、カメラからの画像に基づいて利用者の指の位置を抽出する。例
えば、利用者が自動販売機を使用する前に取得された初期画像を保存しておき、カメラか
らの画像と初期画像とを比較することで指を検出して、その位置を特定してもよい。指の
検出では色による判断や、形状による判断や、これらの組み合わせによる判断等が行われ
てもよい。また、初期画像は、環境の変化(例えば、日中と夜間)に対応するために定期
的に更新されてもよい。また、自動販売機が例えば人感センサーを含んでいて、利用者が
いない状態が一定時間継続した場合に初期画像を更新してもよい。
The image processing unit of the present invention extracts the position of the user's finger based on the image from the camera. For example, even if the user stores an initial image acquired before using the vending machine, detects the finger by comparing the image from the camera with the initial image, and specifies the position thereof Good. In detection of a finger, determination by color, determination by shape, determination by a combination thereof, or the like may be performed. In addition, the initial image may be periodically updated to cope with environmental changes (for example, daytime and nighttime). Further, the initial image may be updated when the vending machine includes, for example, a human sensor and the state where there is no user continues for a certain period of time.
商品コード信号とは、例えば商品のIDである数値を表す信号であってもよい。自動販
売機内部にP個の商品がある場合に、商品コード信号は1〜Pのいずれかの数値を表す信
号であってもよい(Pは2以上の整数)。このとき、制御部は、商品コード信号が表す数
値がIDである商品を、商品取出口に出力させてもよい。また、商品コード信号とは、商
品の位置を表す信号(ロケーションコード信号)であってもよい。このとき、制御部は、
商品コード信号が表す位置にある商品を、商品取出口に出力させてもよい。商品コード信
号がロケーションコード信号である場合には、商品変更や商品位置の移動があっても設定
を変更する必要がない。
The product code signal may be a signal representing a numerical value that is an ID of a product, for example. When there are P products in the vending machine, the product code signal may be a signal representing any numerical value of 1 to P (P is an integer of 2 or more). At this time, the control unit may cause the product outlet to output the product whose ID represented by the product code signal is ID. Further, the product code signal may be a signal (location code signal) indicating the position of the product. At this time, the control unit
The product at the position represented by the product code signal may be output to the product outlet. When the product code signal is a location code signal, it is not necessary to change the setting even if there is a product change or a product position movement.
(2)この自動販売機において、前記画像処理部は、前記カメラからの画像において前記
複数の商品のそれぞれを特定する領域である商品特定領域を設定し、前記利用者の指が前
記透明板の表面から所定の距離内にあって、かつ、1つの前記商品特定領域に含まれる場
合に、当該商品特定領域が特定する商品を前記選択商品と判断してもよい。
(2) In this vending machine, the image processing unit sets a product specifying area that is an area for specifying each of the plurality of products in the image from the camera, and the user's finger is placed on the transparent plate. If the product is within a predetermined distance from the surface and is included in one of the product specific areas, the product specified by the product specific area may be determined as the selected product.
本発明の画像処理部は、複数の商品のそれぞれを特定できる画像上の領域である商品特
定領域を設定する。そして、例えばカメラが固定されたエリアを撮影している場合には、
画像処理部は、画像における画素の位置(画像上の座標)によって、その画素がどの商品
特定領域に含まれるかを瞬時に判断することが可能である。
The image processing unit of the present invention sets a product specifying area which is an area on an image where each of a plurality of products can be specified. And, for example, when shooting an area where the camera is fixed,
The image processing unit can instantaneously determine in which product specific region the pixel is included based on the position of the pixel in the image (coordinates on the image).
本発明の画像処理部は、利用者の指の位置を抽出した場合に、透明板の表面からの距離
とともに、指(特に指先に限ってもよい)を構成する画素がどの商品特定領域に含まれる
かの判断ができる。そして、利用者の指が透明板の表面から所定の距離内にあって、かつ
、1つの商品特定領域に含まれる場合に、当該商品特定領域が特定する商品を選択商品と
判断する。
When the position of the user's finger is extracted, the image processing unit of the present invention includes a pixel that constitutes a finger (particularly limited to the fingertip) along with the distance from the surface of the transparent plate in which product specific region Can be judged. When the user's finger is within a predetermined distance from the surface of the transparent plate and is included in one product specifying area, the product specified by the product specifying area is determined as the selected product.
ここで、商品特定領域は、隣接する商品との混同が生じない程度に大きくとることがで
き、多角形等の形状とすることもできる。そのため、効率的な判断を行うことが可能であ
る。
Here, the product specifying area can be made large enough to avoid confusion with adjacent products, and can also be a polygonal shape. Therefore, it is possible to make an efficient determination.
(3)この自動販売機において、前記画像処理部は、前記利用者の指が所定の時間よりも
長く1つの前記商品特定領域に含まれる場合に、当該商品特定領域が特定する商品を前記
選択商品と判断してもよい。
(3) In this vending machine, the image processing unit selects the product specified by the product specifying area when the user's finger is included in one product specifying area longer than a predetermined time. It may be judged as a product.
(4)本発明は、筐体の一部に設けられた透明板を介して内部の複数の商品が利用者に視
認可能な自動販売機であって、前記透明板を含む所定のエリアを撮影するカメラと、前記
カメラからの画像に基づいて、前記利用者が前記複数の商品の中から選択した選択商品を
判断する画像処理部と、前記複数の商品の中の1つの商品を指定する商品コード信号を受
け取り、前記商品コード信号が指定する商品を出力させる制御部と、を含み、前記画像処
理部は、前記カメラからの画像において前記複数の商品のそれぞれを特定する領域である
商品特定領域を設定し、前記カメラからの画像における前記利用者の指の位置を抽出し、
前記利用者の指が所定の時間よりも長く1つの前記商品特定領域に含まれる場合に、当該
商品特定領域が特定する商品を前記選択商品と判断し、前記選択商品と判断した商品を指
定する前記商品コード信号を前記制御部に出力する。
(4) The present invention is a vending machine in which a user can visually recognize a plurality of products inside through a transparent plate provided in a part of the housing, and images a predetermined area including the transparent plate. An image processing unit that determines a selected product selected from the plurality of products by the user based on an image from the camera, and a product that specifies one product among the plurality of products A control unit that receives a code signal and outputs a product specified by the product code signal, wherein the image processing unit is an area for specifying each of the plurality of products in an image from the camera. And extracting the position of the user's finger in the image from the camera,
When the user's finger is included in one product specifying area longer than a predetermined time, the product specified by the product specifying area is determined as the selected product, and the product determined as the selected product is specified. The product code signal is output to the control unit.
これらの発明によれば、画像処理部は、利用者の指の位置を抽出した場合に、指(特に
指先に限ってもよい)を構成する画素がどの商品特定領域に含まれるかの判断を行う。そ
して、利用者の指が1つの商品特定領域に所定の時間よりも長く含まれている場合に、当
該商品特定領域が特定する商品を選択商品と判断する。
According to these inventions, when the position of the user's finger is extracted, the image processing unit determines which product specific region includes the pixel constituting the finger (in particular, the fingertip may be limited). Do. And when a user's finger | toe is contained in one goods specific area longer than predetermined time, the goods which the said goods specific area pinpoints are judged as selection goods.
所定の時間以上、利用者が1つの商品を指差すことを確認してから選択商品を判断する
ので、画像処理部の誤検出を防止することができる。なお、所定の時間とは例えば1〜1
0秒であってもよいし、それより長くてもよい。
Since the selected product is determined after confirming that the user points to one product for a predetermined time or more, erroneous detection of the image processing unit can be prevented. The predetermined time is, for example, 1-1.
It may be 0 seconds or longer.
なお、利用者の指の位置を抽出した場合に、透明板の表面からの距離も検出して判断に
用いることで、画像処理部の誤検出防止の効果を高めてもよい。
In addition, when the position of a user's finger | toe is extracted, the effect from the misdetection prevention of an image processing part may be heightened by detecting also the distance from the surface of a transparent plate, and using it for determination.
(5)この自動販売機において、前記カメラを複数含み、前記画像処理部は、複数台の前
記カメラからの画像における前記利用者の指の位置が1つの同じ前記商品特定領域に含ま
れる場合に、当該商品特定領域が特定する商品を前記選択商品と判断してもよい。
(5) The vending machine includes a plurality of the cameras, and the image processing unit is configured such that the position of the user's finger in the images from the plurality of cameras is included in one same product specifying area The product specified by the product specifying area may be determined as the selected product.
(6)この自動販売機において、前記カメラを2台備え、2台のカメラからの画像が所定
の視差を生じる位置に設置されてもよい。
(6) In this vending machine, two cameras may be provided and images from the two cameras may be installed at a position where a predetermined parallax occurs.
これらの発明によれば、複数のカメラを使用することで、視差を利用した判断が可能に
なると共に、複数の画像に基づいて商品特定領域を判断するので、画像処理部において選
択商品を正しく検出することが可能になる。
According to these inventions, by using a plurality of cameras, it becomes possible to make a determination using parallax, and a product specific area is determined based on a plurality of images, so that the selected product is correctly detected in the image processing unit. It becomes possible to do.
複数のカメラは同時に全てが使用されてもよいし、複数のカメラのうち利用者の指を検
出可能な一部のカメラが選択により使用されてもよい。そして、製造開発コストを低くす
るために、複数のカメラは2台であってもよい。
All of the plurality of cameras may be used at the same time, or some of the cameras that can detect the user's finger may be used by selection. Then, in order to reduce manufacturing and development costs, the plurality of cameras may be two.
(7)この自動販売機において、赤外線発生源を含み、前記カメラは赤外線カメラであっ
てもよい。
(7) This vending machine may include an infrared ray generation source, and the camera may be an infrared camera.
本発明によれば、例えば赤外線LEDといった赤外線発生源と、赤外線カメラを備える
ことによって、暗い夜間などでも正確に利用者の指の位置をカメラの画像から抽出するこ
とが可能である。よって、例えば夜間であっても画像処理部において選択商品を正しく検
出できる自動販売機を提供できる。
According to the present invention, for example, by providing an infrared generation source such as an infrared LED and an infrared camera, it is possible to accurately extract the position of a user's finger from a camera image even in a dark night. Therefore, for example, it is possible to provide a vending machine capable of correctly detecting the selected product in the image processing unit even at night.
(8)この自動販売機において、前記カメラは可視カメラであってもよい。 (8) In this vending machine, the camera may be a visible camera.
本発明の自動販売機のカメラは、通常の可視光を用いた画像を撮影する可視カメラであ
ってもよい。このとき、特殊なカメラを用いる必要がないため製造開発コストが低くて済
む。
The camera of the vending machine of the present invention may be a visible camera that captures an image using ordinary visible light. At this time, since it is not necessary to use a special camera, manufacturing and development costs can be reduced.
(9)この自動販売機において、前記カメラは自動販売機の上部に設置されていてもよい
。
(9) In this vending machine, the camera may be installed in the upper part of the vending machine.
本発明によれば、カメラを上部に設置した場合には、透明板を撮影するためにレンズ部
は下を向く。そのため、レンズ部が埃等で汚れることがなく、開発製造コストのみならず
保守のコストも低く抑えることが可能になる。
According to the present invention, when the camera is installed on the upper part, the lens unit faces downward in order to photograph the transparent plate. Therefore, the lens portion is not contaminated with dust and the like, and it is possible to keep not only development and manufacturing costs but also maintenance costs low.
(10)この自動販売機において、前記複数の商品を個別に照らす照明を含み、前記制御
部は、前記商品コード信号を受け取った場合に、前記商品コード信号が指定する商品が、
他の商品と区別されて照らされるように前記照明を制御してもよい。
(10) In this vending machine, including lighting that individually illuminates the plurality of products, and when the control unit receives the product code signal, the product specified by the product code signal is:
You may control the said illumination so that it may be distinguished and distinguished from other goods.
(11)この自動販売機において、前記利用者からの指示を受け取り、指示信号として制
御部に出力するユーザーインターフェース部を含み、前記制御部は、前記商品コード信号
が指定する商品が他の商品と区別されて照らされた後に、前記商品コード信号が指定する
商品が前記選択商品であることを前記利用者が確認したことを示す前記指示信号を受け取
った場合に、前記商品コード信号が指定する商品を出力させてもよい。
(11) The vending machine includes a user interface unit that receives an instruction from the user and outputs the instruction signal as an instruction signal to the control unit. The control unit is configured such that the product specified by the product code signal is different from other products. The product specified by the product code signal when the user receives the instruction signal indicating that the product specified by the product code signal is the selected product after being distinguished and illuminated. May be output.
これらの発明によれば、制御部は商品コード信号が指定する商品を出力させる前に利用
者の確認を促すため、誤った商品が出力されることを防ぐことができる。例えば、照明を
操作することで商品コード信号が指定する商品が、他の商品と区別されて利用者に示され
てもよい。制御部は、例えば商品コード信号が指定する商品の照度を上げさせたり、点滅
させたり、照らす色を変えさせたりしてもよい。また、逆に、商品コード信号が指定する
商品以外の商品の照明を暗くさせることで区別してもよい。
According to these inventions, since the control unit prompts the user to confirm before outputting the product specified by the product code signal, it is possible to prevent an erroneous product from being output. For example, the product specified by the product code signal by operating the illumination may be shown to the user separately from other products. For example, the control unit may increase the illuminance of the product specified by the product code signal, blink the product, or change the color to be illuminated. Conversely, the illumination may be made darker for products other than the product specified by the product code signal.
また、商品コード信号が指定する商品が選択商品であるか否かを利用者が確認して、O
Kボタンやキャンセルボタンを用いて回答できるようにしてもよい。これらのボタンはユ
ーザーインターフェース部を経由して、指示信号として制御部に伝えられてもよい。
In addition, the user confirms whether or not the product specified by the product code signal is the selected product, and O
The answer may be made using the K button or the cancel button. These buttons may be transmitted to the control unit as instruction signals via the user interface unit.
(12)本発明は、筐体の一部である商品ディスプレイに複数の商品の見本を表示する自動販売機であって、前記商品ディスプレイを含む所定のエリアを撮影するカメラと、前記カメラからの画像に基づいて、前記利用者が前記複数の商品の中から選択した選択商品を判断する画像処理部と、前記複数の商品の中の1つの商品を指定する商品コード信号を受け取り、前記商品コード信号が指定する商品を出力させる制御部と、を含み、前記画像処理部は、前記カメラからの画像における利用者の指の位置を抽出し、前記利用者の指の位置と前記商品ディスプレイとの位置関係に基づき、前記選択商品を判断し、前記選択商品と判断した商品を指定する前記商品コード信号を前記制御部に出力する。
(12) The present invention is a vending machine that displays a sample of a plurality of products on a product display that is a part of a housing, and a camera that captures a predetermined area including the product display; An image processing unit that determines a selected product selected from the plurality of products based on an image, and a product code signal that specifies one product among the plurality of products, and receives the product code includes a control unit for outputting a product signal designates, wherein the image processing unit extracts the position of the finger of a Subscriber that put the images from the camera, the the position of the finger of the user items Based on the positional relationship with the display, the selected product is determined, and the product code signal designating the product determined to be the selected product is output to the control unit.
本発明によれば、画像処理部はカメラからの画像に基づいて、利用者の指の位置と前記
商品ディスプレイとの位置関係から選択商品を判断して、選択商品と判断した商品を指定
する商品コード信号を制御部に出力する。そして、制御部は、商品コード信号が指定する
商品を出力させる。本発明の自動販売機は、商品のそれぞれに対応するボタンや、自動販
売機のサイズに合わせたタッチパネルを必要とすることもない。そのため、自動販売機の
製造開発コストが低くて済む。このとき、利用者はボタンを押す必要はなく、欲しい商品
の見本を指差すだけで商品選択を行うことが可能である。そのため、本発明の自動販売機
は、商品選択時の操作性に優れている。
According to the present invention, the image processing unit determines the selected product from the positional relationship between the position of the user's finger and the product display based on the image from the camera, and specifies the product determined as the selected product The code signal is output to the control unit. And a control part outputs the goods which a goods code signal specifies. The vending machine according to the present invention does not require a button corresponding to each product or a touch panel that matches the size of the vending machine. Therefore, the manufacturing and development cost of the vending machine can be reduced. At this time, the user does not need to press a button, and can select a product simply by pointing to a sample of the desired product. Therefore, the vending machine of the present invention is excellent in operability when selecting a product.
なお、商品ディスプレイとは、筐体の一部であって複数の商品の見本を表示する部分を
いう。例えば、商品ディスプレイは商品の模型を利用者が視認可能なように格納している
部分であってもよい。また、例えば、商品の見本とは商品の外観の画像であって、商品デ
ィスプレイはその画像を映し出すLCD等のディスプレイ装置であってもよい。
The product display is a part of the housing that displays a sample of a plurality of products. For example, the product display may be a part that stores a product model so that the user can visually recognize the product model. Further, for example, the product sample may be an image of the appearance of the product, and the product display may be a display device such as an LCD that displays the image.
(13)本発明は、筐体の一部である商品ディスプレイに複数の商品の見本を表示する自動販売機であって、前記商品ディスプレイを含む所定のエリアを撮影するカメラと、前記カメラからの画像に基づいて、前記利用者が前記複数の商品の中から選択した選択商品を判断する画像処理部と、前記複数の商品の中の1つの商品を指定する商品コード信号を受け取り、前記商品コード信号が指定する商品を出力させる制御部と、を含み、前記画像処理部は、前記カメラからの画像において前記複数の商品のそれぞれを特定する領域である商品特定領域を設定し、前記カメラからの画像における利用者の指の位置を抽出し、前記利用者の指が所定の時間よりも長く1つの前記商品特定領域に含まれる場合に、当該商品特定領域が特定する商品を前記選択商品と判断し、前記選択商品と判断した商品を指定する前記商品コード信号を前記制御部に出力する。 (13) The present invention is a vending machine that displays a sample of a plurality of products on a product display that is a part of a housing, and a camera that captures a predetermined area including the product display; An image processing unit that determines a selected product selected from the plurality of products based on an image, and a product code signal that specifies one product among the plurality of products, and receives the product code A control unit that outputs a product specified by the signal, and the image processing unit sets a product specifying area that is an area for specifying each of the plurality of products in the image from the camera, and extracting a position of a Subscriber's finger that put the image, when the finger of the user is included in one of the items specific area longer than a predetermined time, before items of the commodity specifying area to specify Determines that the selected item, and outputs the commodity code signal designating the product it is determined that the selected item to the control unit.
本発明によれば、画像処理部は、利用者の指の位置を抽出した場合に、見本の位置に対
応して設けられた商品特定領域のいずれかに指が含まれるかを判断する。そして、利用者
の指が1つの商品特定領域に所定の時間よりも長く含まれている場合に、当該商品特定領
域が特定する商品を選択商品と判断する。所定の時間以上、利用者が1つの商品を指差す
ことを確認してから選択商品を判断するので、画像処理部の誤検出を防止することができ
る。
According to the present invention, when the position of the user's finger is extracted, the image processing unit determines whether the finger is included in any of the product specifying areas provided corresponding to the position of the sample. And when a user's finger | toe is contained in one goods specific area longer than predetermined time, the goods which the said goods specific area pinpoints are judged as selection goods. Since the selected product is determined after confirming that the user points to one product for a predetermined time or more, erroneous detection of the image processing unit can be prevented.
以下、本発明の実施形態について図面を参照して説明する。 Embodiments of the present invention will be described below with reference to the drawings.
1.第1実施形態
本発明の第1実施形態について図1〜図6を参照して説明する。
1. First Embodiment A first embodiment of the present invention will be described with reference to FIGS.
1.1.自動販売機の構成
図1は本実施形態の自動販売機10のブロック図である。自動販売機10は、N台のカ
メラ20−1〜20−N、画像処理部30、制御部40を含む。更に、ユーザーインター
フェース部50や図外の照明や赤外線発生源を含んでもよい。自動販売機10は、一般に
グラスフロント型自動販売機と呼ばれる種類の自動販売機であり、利用者は、筐体の一部
に設けられた透明板を介して内部の複数の商品を視認することができる。
1.1. Configuration of Vending Machine FIG. 1 is a block diagram of a
カメラ20−1〜20−Nは、透明板を含む所定のエリアを撮影する。撮影されるエリ
アはカメラ20−1〜20−Nのそれぞれで異なっており、カメラ20−1〜20−Nの
設置位置に依存する。カメラ20−1〜20−Nは、撮影した画像をそれぞれ画像データ
102−1〜102−Nとして画像処理部30に出力する。ここで、カメラの台数Nは1
以上の自然数である。N=1の場合には、カメラ20−1とカメラ20−Nは同じ1台の
カメラである。
The cameras 20-1 to 20-N photograph a predetermined area including the transparent plate. The area to be photographed is different for each of the cameras 20-1 to 20-N, and depends on the installation position of the cameras 20-1 to 20-N. The cameras 20-1 to 20-N output the captured images as image data 102-1 to 102-N to the
These are natural numbers. When N = 1, the camera 20-1 and the camera 20-N are the same single camera.
本実施形態では、N=2、すなわち2台のカメラで自動販売機10が構成されている。
このとき、後述する視差を利用した判断が可能であり、カメラの台数を2台に抑えること
で製造開発コストを低くすることができる。以下の本実施形態の説明では、カメラ20−
Nをカメラ20−2と、画像データ102−Nを画像データ102−2と表現する。
In the present embodiment, N = 2, that is, the
At this time, determination using parallax, which will be described later, can be performed, and manufacturing and development costs can be reduced by limiting the number of cameras to two. In the following description of the present embodiment, the camera 20-
N is represented as a camera 20-2, and image data 102-N is represented as image data 102-2.
カメラ20−1とカメラ20−2とが撮影する、例えば利用者が指で自動販売機を操作
する様子は、リアルタイムに画像処理部30に送られる。それぞれのカメラが撮影した画
像に基づく画像データ102−1、102−2は、例えば毎秒10フレームといったレー
トで伝送される。画像データ102−1、102−2は、例えばバッファーを経由して画
像処理部30に送られてもよい。
A state in which the camera 20-1 and the camera 20-2, for example, the user operates the vending machine with a finger is sent to the
画像処理部30は、カメラ20−1とカメラ20−2からの画像に基づいて、利用者が
自動販売機内部の複数の商品の中から選択した選択商品を判断する。ここで、画像処理部
30は、画像データ102−1、102−2からカメラ20−1とカメラ20−2が撮影
した画像を得て利用者の指の位置を抽出する。そして、抽出された利用者の指の位置と透
明板との位置関係に基づいて選択商品を判断する。本実施形態の画像処理部30は、利用
者の指が透明板の表面から所定の距離内にある場合に、一定時間以上、利用者が指差す1
つの商品を選択商品であると判断する。所定の距離とは例えば1cmであってもよいし、
ゼロ(指が透明板に触れている状態)であってもよい。なお、画像処理部30の処理の詳
細については後述する。
The
One product is determined to be a selected product. For example, the predetermined distance may be 1 cm,
It may be zero (a state where the finger is touching the transparent plate). Details of the processing of the
画像処理部30は、選択商品と判断した商品を指定する商品コード信号103を制御部
40に出力する。商品コード信号103は自動販売機10の複数の商品の中の1つの商品
を指定する信号である。本実施形態では、例えばP個の商品に対してIDとして固有の番
号が割り当てられており、商品コード信号は1〜Pのいずれかの数値を表す信号であると
する。なお、商品コード信号は商品の位置を表す信号(ロケーションコード信号)であっ
てもよい。そして、例えば商品コード信号が確定して有効であることを示す信号が、商品
コード信号と共に画像処理部30から制御部40に出力されてもよい。
The
なお、画像処理部30は、入力される画像データを選択可能であってもよい。例えば、
本実施形態の別の例として、自動販売機10は4台のカメラ20−1、20−2、20−
3、20−4を備えており(ここでは、N=4)、通常は自動販売機の上部に設置された
カメラ20−1、20−2をペアで使用して、視野角が限られる場合に下部に設置された
カメラ20−3、20−4をペアで使用する。このとき、画像処理部30は、画像データ
102−1、102−2のペアと、画像データ102−3、102−4のペアとを切り替
えて受け取ってもよい。
Note that the
As another example of the present embodiment, the
3 and 20-4 (N = 4 in this case), and the camera 20-1 and 20-2 installed in the upper part of the vending machine are usually used in pairs to limit the viewing angle The cameras 20-3 and 20-4 installed at the bottom are used in pairs. At this time, the
このような画像データの切り替えは、例えば、昼間は低消費電力のカメラ20−1、2
0−2をペアで使用して、夜間には高感度のカメラ20−3、20−4をペアで使用する
場合等にも適用できる。
Such switching of the image data is performed by, for example, the low power consumption cameras 20-1 and 20-2 in the daytime.
The present invention can also be applied to the case where 0-2 is used as a pair and high sensitivity cameras 20-3 and 20-4 are used as a pair at night.
制御部40は、自動販売機が備える様々な機能を制御信号104によって実施させる。
例えば、制御部40は商品コード信号103を受け取り、制御信号104によって商品コ
ード信号103が指定する商品を出力させる。
The
For example, the
また、例えば自動販売機10は商品を個別に照らす照明(図外)を含み、制御部40は
制御信号104によって照明を制御し、商品コード信号103が指定する商品の照明を点
滅させてもよい。その他、制御部40は入金額やつり銭等の計算、温度・電力制御、利用
者への表示制御等も制御信号104によって実施するが、ここでは説明を省略する。
Further, for example, the
また、制御部40は、利用者からの指示である利用者指示100をユーザーインターフ
ェース50経由で指示信号105として受け取り、指示信号105に基づいて制御信号1
04を出力してもよい。例えば、利用者に商品の確認を促して、OK(利用者からの商品
出力の指示)又はキャンセル(利用者からのやり直し要求の指示)をユーザーインターフ
ェース50経由で受け取ってもよい。このとき、利用者からのOKを待ってから商品を出
力させる制御信号104を出力することで、誤った商品が出力されることを防ぐことがで
きる。
In addition, the
04 may be output. For example, the user may be prompted to confirm the product, and OK (instruction for product output from the user) or cancellation (instruction for redo request from the user) may be received via the
なお、制御部40は、例えばCPUと記憶部で構成されてもよい。そして、例えば記憶
部はCPUのプログラムを格納するROMとデータ等を保存するRAMとを含んでいても
よい。このとき、さらにCPUは画像処理部30の機能を兼ねてもよい。
In addition, the
1.2.自動販売機の外観
グラスフロント型自動販売機と呼ばれる種類の自動販売機である自動販売機10を図2
(A)〜図2(B)を用いて説明する。なお、図1と同じ要素については同じ番号を付し
ており説明は省略する。
1.2. Appearance of vending machine The
A description will be given with reference to FIGS. Note that the same elements as those in FIG.
図2(A)は第1実施形態の自動販売機10の外観の正面図である。利用者は、透明板
56を介して商品60を視認することが可能である。自動販売機10はグラスフロント型
でない自動販売機と同様に、紙幣投入口52、硬貨投入口53、商品取出口54を備える
。しかし、従来のグラスフロント型の自動販売機が備えるテンキーやダイレクトキーはな
く、例えばOKボタン51Aとキャンセルボタン51Bとを備える。なお、例えば返却レ
バー、金銭表示部等については図示を省略している。
FIG. 2A is a front view of the appearance of the
自動販売機10は、その上部に庇58を備えており、庇58にはカメラ20−1とカメ
ラ20−2とが設置されている。なお、カメラが設置されるのは自動販売機10の上部に
限らないが、カメラを上部に設置した場合には、透明板56を撮影するためにレンズ部は
下を向くことになる。このとき、カメラのレンズ部が埃等で汚れることがないため、例え
ば保守のコストを低く抑えることが可能になる。
The
図2(B)は第1実施形態の自動販売機10の外観の側面図である。カメラ20−1は
、透明板56のうち少なくとも商品60を視認させる部分、すなわち外枠を除く部分が撮
影されるように取り付けられる。そして、撮影された画像に基づいて利用者の指70の位
置と透明板56との位置関係がわかるように、操作中の利用者の指70が写るように取り
付けられる。なお、カメラ20−2についても同様である。
FIG. 2B is a side view of the appearance of the
ここで、利用者の指70の位置と透明板56との位置関係には、利用者の指70がどの
商品60を指差しているかを区別するための、透明板56の表面おける平面的(2次元的
)な指の位置が含まれる。加えて、利用者の指70が透明板56の表面からどれだけ離れ
ているか、すなわち利用者の指70と透明板56の表面との距離dfも含まれる。
Here, the positional relationship between the position of the user's
1.3.フローチャート
本実施形態では、2つのカメラ20−1、20−2で撮影された2つの画像に基づいて
視差を利用し、距離dfも含めた利用者の指70の位置を算出して選択商品の判断を行う
。この場合の、画像処理部30の処理の流れを図3(A)のフローチャートを用いて説明
し、制御部40の処理の流れを図3(B)のフローチャートを用いて説明する。なお、図
3(A)においては、カメラ20−1、20−2をそれぞれカメラ1、カメラ2と表記し
ている。
1.3. Flowchart in the present embodiment utilizes a parallax based on two images captured by the two cameras 20-1 and 20-2, the distance d f and calculate the position of the
1.3.1.画像処理部の処理のフローチャート
図3(A)は画像処理部のフローチャートである。画像処理部は、カメラ1を用いて初
期画像を取得する(S2)。初期画像とは利用者が自動販売機を使用する前の画像である
。初期画像には利用者および利用者の指は写っていない。取得された初期画像は、画像処
理部又は別に用意された記憶部に保存される。初期画像は、画像に影響する環境の変化が
生じた場合に自動的に更新されてもよいし、定期的に更新されてもよい。
1.3.1. Flowchart of Processing by Image Processing Unit FIG. 3A is a flowchart of the image processing unit. The image processing unit acquires an initial image using the camera 1 (S2). The initial image is an image before the user uses the vending machine. The initial image does not show the user and the user's finger. The acquired initial image is stored in an image processing unit or a storage unit prepared separately. The initial image may be updated automatically when an environmental change that affects the image occurs, or may be updated periodically.
その後、例えば利用者が商品選択を行う場合に、画像処理部はカメラ1で第1の画像を
取得する(S4)。そして、画像処理部は、第1の画像と初期画像との差分を抽出する(
S6)。カメラ1は固定の所定エリアを撮影する。そのため、利用者が商品を指差して選
択する動作をしていれば、差分として指が検出されることになる(S8Y)。指の検出で
は色による判断や、形状による判断や、これらの組み合わせによる判断等が行われてもよ
い。
Thereafter, for example, when the user selects a product, the image processing unit acquires the first image with the camera 1 (S4). Then, the image processing unit extracts a difference between the first image and the initial image (
S6). The camera 1 captures a fixed predetermined area. Therefore, if the user is pointing and selecting a product, the finger is detected as a difference (S8Y). In detection of a finger, determination by color, determination by shape, determination by a combination thereof, or the like may be performed.
利用者の指が検出されると、カメラ2で第2の画像を取得する(S10)。第1の画像
だけでなく第2の画像を用いることで、視差を利用して、利用者の指と透明板の表面との
距離(図2(B)のdf参照)を正確に把握することが可能になる。また、2つの画像に
基づいて判断するので、利用者の指が指す商品を正確に把握することができる。
When the user's finger is detected, the camera 2 acquires a second image (S10). By using the second image not only the first image, by using parallax, to accurately grasp the distance between the user's fingers and the surface of the transparent plate (see d f in FIG. 2 (B)) It becomes possible. Moreover, since it judges based on two images, the goods which a user's finger points can be grasped | ascertained correctly.
本実施形態の画像処理部は、これらの画像において複数の商品のそれぞれを特定する領
域である商品特定領域を設定する。そして、第1の画像と第2の画像とで利用者の指が同
じ位置にあること、すなわち1つの同じ商品特定領域に含まれていることを確認する(S
12Y)。なお、商品特定領域の詳細と視差を利用する方法については後述する。
The image processing unit of the present embodiment sets a product specifying area that is an area for specifying each of a plurality of products in these images. Then, it is confirmed that the user's finger is in the same position in the first image and the second image, that is, included in one same product specifying area (S
12Y). The details of the product specific area and the method of using the parallax will be described later.
そして、利用者の指が一定時間静止していること、すなわち1つの同じ商品特定領域に
一定時間以上含まれることを確認して(S14Y)、商品コード信号を制御部に出力する
(S16)。ここでの商品コード信号は、利用者の指が含まれている商品特定領域によっ
て特定される商品を表す。
Then, it is confirmed that the user's finger is stationary for a certain period of time, that is, it is included in one same commodity identification area for a certain period of time (S14Y), and a commodity code signal is output to the control unit (S16). The product code signal here represents the product specified by the product specifying area including the user's finger.
なお、初期画像との差分で利用者の指が検出されなかった場合(S8N)、第1の画像
と第2の画像で利用者の指が同じ位置にない場合(S12N)、利用者の指が一定時間静
止しなかった場合(S14N)は、いずれも第1の画像を取得するステップ(S4)に戻
る。
If the user's finger is not detected by the difference from the initial image (S8N), the user's finger is not in the same position in the first image and the second image (S12N), and the user's finger Are not stationary for a certain period of time (S14N), all return to the step (S4) of acquiring the first image.
1.3.2.制御部の処理のフローチャート
図3(B)は制御部のフローチャートである。制御部は、画像処理部から商品コード信
号を受け取った場合に(S22Y)、照明の制御を行う(S24)。ここで、照明の制御
とは、商品コード信号が指定する商品(以下、指定商品)の照明を他の商品とは区別する
ような制御である。
1.3.2. Flowchart of Control Unit Processing FIG. 3B is a flowchart of the control unit. When receiving the product code signal from the image processing unit (S22Y), the control unit controls the illumination (S24). Here, the illumination control is control that distinguishes the illumination of a product (hereinafter, designated product) designated by the product code signal from other products.
例えば、指定商品を照らす照明を点滅させたり、明るくしたり、色を変えたりすること
で他の商品と区別することができる。この照明制御により利用者に指定商品を示し、指定
商品が選択商品(利用者が選択した商品)と一致するかの確認を利用者に促す。なお、制
御部は、商品コード信号が入力されるまで入力待ち状態となっている(S22N)。
For example, it can be distinguished from other products by blinking, illuminating, or changing the color of the illumination that illuminates the specified product. This lighting control indicates the designated product to the user and prompts the user to confirm whether the designated product matches the selected product (the product selected by the user). The control unit is in an input waiting state until a product code signal is input (S22N).
利用者は、例えばOKボタンとキャンセルボタン(図2(A)の51A、51B参照)
を用いて確認を行う。そして、制御部は利用者からのOKがあれば(S26Y)、制御信
号によって指定商品を商品取出口に出力させる(S30)。
For example, the user can use an OK button and a cancel button (see 51A and 51B in FIG. 2A).
Use to confirm. If there is an OK from the user (S26Y), the control unit causes the designated product to be output to the product outlet by the control signal (S30).
なお、利用者がキャンセルボタンを押した場合には(S26N)、利用者が再度商品選
択を行うことができるようにする。具体的には、指定商品を照らす照明を通常の状態に戻
し(S28)、制御部は商品コード信号の入力待ちの状態になる(S22)。
When the user presses the cancel button (S26N), the user can select the product again. Specifically, the illumination for illuminating the designated product is returned to the normal state (S28), and the control unit waits for the input of the product code signal (S22).
1.4.画像処理部の判断の詳細
本実施形態の画像処理部は2台のカメラによって視差を利用して、利用者の指の位置を
判断している。このとき、2台のカメラからの画像において複数の商品のそれぞれを特定
する領域である商品特定領域を設定し処理の効率化を図っている。ここでは、図4(A)
〜図5(B)を参照して、商品特定領域、および利用者の指の位置と得られる画像との関
係について説明する。なお、図1〜図3(B)と同じ要素については同じ番号を付してお
り説明は省略する。
1.4. Details of Determination by Image Processing Unit The image processing unit of the present embodiment determines the position of the user's finger using parallax using two cameras. At this time, a product specifying area, which is an area for specifying each of a plurality of products, in the images from the two cameras is set to improve processing efficiency. Here, FIG. 4 (A)
With reference to FIG. 5 (B), the relationship between the product specific area and the position of the user's finger and the obtained image will be described. In addition, the same number is attached | subjected about the same element as FIGS. 1-3 (B), and description is abbreviate | omitted.
図4(A)および図4(B)は商品特定領域を説明する図である。図4(A)および図
4(B)は、カメラからの画像における商品(図2(A)の商品60に対応)の位置と商
品特定領域M11〜M34との位置関係を示している。
FIG. 4A and FIG. 4B are diagrams for explaining the product specifying area. 4A and 4B show the positional relationship between the position of the product (corresponding to the
商品特定領域は、カメラからの画像において複数の商品のそれぞれを特定する領域であ
る。そのため、画像処理部は商品の位置に対応するように、商品と同じ数の商品特定領域
を設定する。なお、複数のカメラからの画像がある場合、画像処理部は画像のそれぞれに
ついて商品特定領域を設定する。本実施形態では2台のカメラからの画像のそれぞれにつ
いて商品特定領域が設定されている。
The product specifying area is an area for specifying each of a plurality of products in the image from the camera. Therefore, the image processing unit sets the same number of product specifying areas as the product so as to correspond to the position of the product. When there are images from a plurality of cameras, the image processing unit sets a product specifying area for each of the images. In the present embodiment, a product specifying area is set for each of the images from the two cameras.
図4(A)は商品特定領域M11〜M34の例である。商品の中心部を含む長方形の商
品特定領域M11〜M34が示されている。画像処理部は、利用者の指が例えば商品特定
領域M11に含まれる場合に、最上段の左に位置する商品が選択されたと判断する。本実
施形態では、商品特定領域M11〜M34を互いに離れて設けることで、誤って隣接する
商品が選択されたと判断することを防止している。ただし、商品特定領域M11〜M34
は互いに接して設けられていてもよい。
FIG. 4A is an example of the product specifying areas M11 to M34. The rectangular product specific areas M11 to M34 including the center of the product are shown. For example, when the user's finger is included in the product specifying area M11, the image processing unit determines that the product located on the left in the uppermost stage has been selected. In the present embodiment, by providing the product specifying areas M11 to M34 apart from each other, it is possible to prevent the adjacent product from being erroneously determined to be selected. However, the product specific areas M11 to M34
May be provided in contact with each other.
図4(B)は図4(A)の部分拡大図である。図4(B)は商品特定領域M11〜M3
4と、格子で示した画素との関係を示している。なお、図4(B)では商品特定領域M1
3〜M34の図示は省略している。それぞれの商品特定領域は、画像における画素で定義
される。例えば、商品特定領域M11は10<x<20かつ30<y<40を満たす画素
(x,y)からなる領域として定義することができる。なお、“x”は水平方向の画素位
置を、“y”は垂直方向の画素位置を表す。
FIG. 4B is a partially enlarged view of FIG. FIG. 4B shows the product specific areas M11 to M3.
4 and a pixel represented by a grid. In FIG. 4B, the product identification area M1
3 to M34 are not shown. Each product specific area is defined by a pixel in the image. For example, the product identification area M11 can be defined as an area composed of pixels (x, y) that satisfy 10 <x <20 and 30 <y <40. Note that “x” represents a horizontal pixel position, and “y” represents a vertical pixel position.
このように、商品特定領域を設けて、利用者の指が商品特定領域に含まれるか否かを判
断することにより効率的な判断が可能になる。つまり、様々な形状を持つ商品自体の輪郭
を記憶して、利用者の指と輪郭との位置関係を比較するのに比べて、判断に要する時間を
短縮することが可能になる。
In this way, an efficient determination can be made by providing the product specifying area and determining whether the user's finger is included in the product specifying area. That is, it is possible to shorten the time required for determination compared to storing the contours of products having various shapes and comparing the positional relationship between the user's finger and the contour.
なお、商品特定領域の形状は多角形に限らず、例えば商品の形状に合わせたものであっ
てもよい。位置と大きさについても、商品の中心を含むだけでなく、全体を覆うように設
定されてもよい。商品特定領域の位置や大きさ等は、環境の変化や処理に応じて可変であ
ってもよい。このとき、制御部又は制御部とは異なる商品特定領域設定部が、例えば画像
処理部に記憶された商品特定領域の設定情報を書き換えて、位置や大きさを変更してもよ
い。
In addition, the shape of the product specific area is not limited to a polygon, and may be a shape matched to the shape of the product, for example. The position and size may be set not only to include the center of the product but also to cover the whole. The position, size, etc. of the product specific area may be variable according to environmental changes and processing. At this time, the product specific area setting unit different from the control unit or the control unit may rewrite the setting information of the product specific area stored in the image processing unit, for example, and change the position and size.
また、商品特定領域M11〜M34のそれぞれが内部にサブ領域を含んでおり、利用者
の指が所定のサブ領域に含まれた場合にだけ、その商品特定領域が特定する商品が選択さ
れたと判断してもよい。例えば、商品特定領域M11〜M34の大きさが同じでない場合
でも、商品が選択されたか否かの判断に用いる領域の大きさを揃えたい場合がある。この
ような場合、商品特定領域M11〜M34のそれぞれが複数のサブ領域から成るようにす
る。このとき、サブ領域の大きさを揃えることが好ましい。そして、商品特定領域M11
〜M34のそれぞれにおいて、例えば利用者の指がある1つのサブ領域に含まれた場合に
、その商品特定領域が特定する商品が選択されたと判断してもよい。なお、判断に用いら
れるサブ領域の位置(例えば中央)、範囲又は数(例えば1つ)は環境の変化や処理等に
応じて可変であってもよい。
In addition, each of the product specifying areas M11 to M34 includes a sub area, and it is determined that the product specified by the product specifying area is selected only when the user's finger is included in the predetermined sub area. May be. For example, even when the product specifying areas M11 to M34 are not the same size, there are cases where it is desired to make the sizes of the areas used for determining whether or not a product has been selected. In such a case, each of the product specifying areas M11 to M34 is made up of a plurality of sub areas. At this time, it is preferable to align the sizes of the sub-regions. And product specific area M11
In each of -M34, for example, when the user's finger is included in one sub-region, it may be determined that the product specified by the product-specific region has been selected. Note that the position (for example, the center), the range, or the number (for example, one) of the sub-regions used for the determination may be variable according to environmental changes, processing, and the like.
図5(A)〜図5(B)は本実施形態の2台のカメラから得られる画像の例を示してい
る。これらの図を用いて視差による利用者の指の見え方の違いを説明する。
FIG. 5A to FIG. 5B show examples of images obtained from the two cameras of this embodiment. The difference in how a user's finger looks due to parallax will be described with reference to these drawings.
画像が自動販売機10のほぼ正面を映している場合には、利用者の指が商品特定領域M
11〜M34(図4(A)参照)のいずれかに含まれるか否かの判断は比較的容易にでき
る。しかし、利用者の指と透明板56の表面との距離(図2(B)のdf参照)を測るこ
とは難しい。
When the image reflects almost the front of the
It is relatively easy to determine whether or not any of 11 to M34 (see FIG. 4A) is included. However, it is difficult to measure the distance between the user's fingers and the
本実施形態では、1台目のカメラからの画像110Aを取得し(図3(A)のS4に対
応)、2台目のカメラからの画像110Bを取得して(図3(A)のS10に対応)、両
画像で利用者の指が1つの同じ商品特定領域を指しているか否かの判断を行う(図3(A
)のS12に対応)。1つの同じ商品特定領域を指している場合には、以下の通り、利用
者の指が透明板56の表面から所定の距離内にあると判断できる。
In the present embodiment, an
Corresponding to S12)). When pointing to one same product specific area, it can be determined that the user's finger is within a predetermined distance from the surface of the
図5(A)は、利用者の指が透明板56の表面から離れている場合における、正面左方
のカメラからの画像110Aと正面右方のカメラからの画像110Bとを示す。利用者の
指は1つの商品特定領域M12の正面にあるが、視差によって、画像110Aでは利用者
の指70Aは右側に、画像110Bでは利用者の指70Bは左側にあるように見える。こ
のとき、画像処理部は2枚の画像の指が同じ位置にないので(図3(A)のS12Nに対
応)、商品コード信号を出力することなく新たな画像を取得する処理に戻る。
FIG. 5A shows an
図5(B)は、利用者の指が透明板56の表面から所定の距離内に近づいた場合の画像
110A、画像110Bを示す。この場合、画像110A、110Bの両方で利用者の指
70A、70Bは共に商品特定領域M12に含まれるため、画像処理部は商品特定領域M
12が特定する商品の商品コード信号を出力する。
FIG. 5B shows
The product code signal of the product specified by 12 is output.
本実施形態では、2台のカメラを用いることで、視差を利用して利用者の指の位置を奥
行き方向についても把握できる。具体的には、利用者の指が透明板56の表面から所定の
距離内にあるか否かの判断が可能である。ここで、透明板56の表面から所定の距離は、
商品特定領域の大きさ(この例では幅)によって調整することが可能である。例えば、商
品特定領域の幅を小さくすることで、利用者の指が透明板56に触れると商品コード信号
が出力されるようにすることが可能である。
In this embodiment, by using two cameras, the position of the user's finger can be grasped in the depth direction using parallax. Specifically, it can be determined whether or not the user's finger is within a predetermined distance from the surface of the
It is possible to adjust according to the size (in this example, the width) of the product specific area. For example, by reducing the width of the product specific area, it is possible to output a product code signal when the user's finger touches the
このとき、商品特定領域の幅を変更するのではなく、判断に使用するサブ領域の大きさ
又は範囲を調整してもよい。例えば、商品特定領域の大きさが商品毎に異なる場合でも、
判断に使用するサブ領域の大きさを全商品で揃えることによって、前記の所定の距離を全
商品で揃えることができる。
At this time, instead of changing the width of the product specific area, the size or range of the sub-area used for the determination may be adjusted. For example, even if the size of the product specific area differs for each product,
By aligning the sizes of the sub-regions used for determination with all products, the predetermined distance can be aligned with all products.
なお、本実施形態では、画像処理部は利用者の指が一定時間静止すること、すなわち1
つの商品特定領域(又は、所定のサブ領域)に含まれて一定時間が経過することを待って
商品コード信号を出力する(図3(A)のS14Yに対応)。これにより、誤った商品に
ついて商品コードを出力することを防止できる。また、本実施形態の別の例として、一定
時間の経過を待つことなく商品コードを出力してもよいし、利用者の指が1つの商品特定
領域に含まれて一定時間が経過することだけを条件として商品コード信号を出力してもよ
い。
In this embodiment, the image processing unit is configured such that the user's finger is stationary for a certain time, that is, 1
The product code signal is output after waiting for a certain period of time to be included in one product specific region (or a predetermined sub-region) (corresponding to S14Y in FIG. 3A). Thereby, it is possible to prevent a product code from being output for an incorrect product. As another example of the present embodiment, the product code may be output without waiting for the elapse of a predetermined time, or only when the user's finger is included in one product specifying area and the predetermined time elapses. The product code signal may be output on the condition.
そして、この例では自動販売機10のほぼ正面からの画像が得られるものとして説明し
たが、カメラの設置位置によっては透明板56が台形型にゆがむ場合がある(図7(B)
参照)。その場合には、台形型の商品特定領域を設定する等の対応を行うことで、前記と
同じ処理を行うことが可能である。
In this example, it has been described that an image from almost the front of the
reference). In that case, it is possible to perform the same processing as described above by taking measures such as setting a trapezoidal product identification area.
1.5.制御部による確認について
本実施形態の制御部は、利用者に指定商品(商品コード信号が指定する商品)が選択商
品(利用者が選択した商品)であるかの確認を促すことで、商品が誤って出力されること
を防止する。この確認作業における、制御部の照明制御とユーザーインターフェースにつ
いて、図6を用いて説明する。
1.5. About confirmation by the control unit The control unit of the present embodiment prompts the user to confirm whether the designated product (the product specified by the product code signal) is the selected product (the product selected by the user), so that the product is Preventing erroneous output. The illumination control and user interface of the control unit in this confirmation operation will be described with reference to FIG.
図6は、制御部が利用者に確認を促しているときの自動販売機10の外観を表している
。なお、図2(A)と同じ要素には同じ番号を付しており説明は省略する。
FIG. 6 shows the appearance of the
自動販売機10は複数の商品を個別に照らす照明を含んでいて、制御部はこれらの照明
を制御できる。本実施形態の制御部は、商品コードを受け取った場合に、指定商品の照明
を明るくさせ、他の商品の商品を暗くさせる(図3(B)のS24参照)。これにより、
利用者に指定商品がどれであるかを示す。
The
Indicate to the user which product is designated.
そして、OKボタン51Aとキャンセルボタン51Bを点滅させて、指定商品が選択商
品と一致している場合にはOKボタン51Aを押すように利用者を促す。このとき、点滅
に代えて、または点滅と共に、音声ガイドによる説明が行われてもよい。制御部は、OK
ボタン51Aが押されたことを示す指示信号を受け取ると、制御信号によって指定商品を
商品取出口に出力させる。
Then, the
When an instruction signal indicating that the
このとき、照明制御によって利用者はどれが選択商品であるかを簡単に把握できる。ま
た、確認作業もOKボタン51A又はキャンセルボタン51Bの一方を押すだけであるの
で、利用者にとって商品選択時の操作性が損なわれることはない。本実施形態の制御部の
これらの処理によって、操作性を損なうことなく、商品が誤って出力されることを防止す
ることができる。
At this time, the user can easily grasp which is the selected product by the lighting control. In addition, since the confirmation work also requires only pressing one of the
本実施形態の自動販売機では、画像処理部はカメラからの画像に基づいて、利用者の指
の位置と透明板との位置関係から選択商品を判断して、その商品を指定する商品コード信
号を制御部に出力する。そして、制御部は、商品コード信号が指定する商品を出力させる
。このとき、利用者は、特にテンキーやダイレクトキーを操作することなく、欲しい商品
を指差すだけで商品選択を行うことが可能である。そのため、本発明の自動販売機は、商
品選択時の操作性に優れている。また、例えばテンキーでの利用者の数値間違い等に起因
する、商品の誤選択を防止することができる。そして、例えば自動販売機のサイズに合わ
せたタッチパネルを必要とすることもない。そのため、自動販売機の製造開発コストが低
くて済む。さらに、カメラは様々なサイズの自動販売機に取り付けが可能である。そのた
め、特に自動販売機のサイズが大きい場合に、タッチパネル式の自動販売機に比べて製造
開発コストを大きく下げることができる。
In the vending machine of the present embodiment, the image processing unit determines a selected product from the positional relationship between the position of the user's finger and the transparent plate based on the image from the camera, and a product code signal that designates the product Is output to the control unit. And a control part outputs the goods which a goods code signal specifies. At this time, the user can select a product simply by pointing to the desired product without operating the numeric keypad or direct key. Therefore, the vending machine of the present invention is excellent in operability when selecting a product. Further, for example, it is possible to prevent a wrong product from being selected due to, for example, an incorrect numerical value of the user with the numeric keypad. For example, a touch panel that matches the size of the vending machine is not required. Therefore, the manufacturing and development cost of the vending machine can be reduced. Furthermore, the camera can be attached to vending machines of various sizes. Therefore, particularly when the size of the vending machine is large, the manufacturing and development costs can be greatly reduced as compared with the touch panel type vending machine.
2.第1変形例
第1実施形態の第1変形例について図7(A)〜図7(B)を参照して説明する。なお
、図7(A)〜図7(B)において、図1〜図6と同じ要素には同じ番号を付しており説
明を省略する。
2. First Modification A first modification of the first embodiment will be described with reference to FIGS. 7 (A) to 7 (B). 7A to 7B, the same elements as those in FIGS. 1 to 6 are denoted by the same reference numerals, and description thereof is omitted.
図7(A)は第1変形例の自動販売機10の外観図である。図7(A)のように、第1
変形例の自動販売機10では1台のカメラ20−1の画像だけに基づいて、画像処理部が
利用者の指の位置を抽出する。なお、第1変形例のブロック図は、図1においてN=1と
した場合が対応する。カメラ20−1は例えば庇58の左方に設置される。
FIG. 7A is an external view of the
In the
図7(B)は、カメラ20−1が撮影した画像110の例である。カメラ20−1は透
明板56が含まれるエリアを斜め上から写すことで、画像処理部が透明板56と利用者の
指70との三次元の位置関係を検出できるようにする。このとき、透明板56は例えば台
形型に歪むが、画像処理部が台形型の商品特定領域(例えば図7(B)のM22、M32
)を設定することで判断が可能になる。
FIG. 7B is an example of an
) Can be used to make judgments.
ここで、本変形例では1台のカメラ20−1からの画像しか利用できない。そのため、
図7(B)のように商品特定領域M22の正面であって透明板56の表面と離れた位置に
利用者の指70がある場合に、商品特定領域M32に利用者の指70が含まれると誤認す
る可能性がある。そこで、画像処理部は、例えば利用者の指70の影72や、反射板56
に映った利用者の指(図外)なども抽出して判断に用いてもよい。
Here, in this modified example, only images from one camera 20-1 can be used. for that reason,
As shown in FIG. 7B, when the user's
The user's finger (not shown) or the like shown in FIG.
本変形例では、1台のカメラ20−1だけを用いるため、製造開発コストをさらに低く
することが可能である。
In this modification, since only one camera 20-1 is used, the manufacturing and development costs can be further reduced.
3.第2変形例
第1実施形態の第2変形例について説明する。第1実施形態のカメラ20−1〜20−
2は例えば可視カメラである。このとき、特殊なカメラを用いる必要がないため製造開発
コストが低くて済む。しかし、自動販売機は戸外に設置され、夜も稼動している。そのた
め、夜間でも正確に利用者の指の位置をカメラの画像から抽出することが求められる場合
がある。また、昼間の使用であっても、環境光が明るすぎる場合には、例えばカメラの自
動露出機能の影響により、利用者の指の位置の抽出がうまくいかない可能性がある。
3. Second Modification A second modification of the first embodiment will be described. Cameras 20-1 to 20- of the first embodiment
2 is a visible camera, for example. At this time, since it is not necessary to use a special camera, manufacturing and development costs can be reduced. However, vending machines are installed outdoors and operate at night. Therefore, it may be required to accurately extract the position of the user's finger from the camera image even at night. Even in daytime use, if the ambient light is too bright, for example, the user's finger position may not be extracted successfully due to the influence of the automatic exposure function of the camera.
本変形例では、第1実施形態のカメラ20−1〜20−2を赤外線カメラとすることで
、夜間や環境光が明るすぎる場合でも正確に利用者の指の位置をカメラの画像から抽出す
ることを可能にする。
In this modification, by using the cameras 20-1 to 20-2 of the first embodiment as infrared cameras, the position of the user's finger is accurately extracted from the camera image even at night or when the ambient light is too bright. Make it possible.
このとき、第2変形例の自動販売機は、例えば赤外線LEDといった赤外線発生源を備
えていてもよい。赤外線発生源からの赤外線を利用者の指が反射し、その様子を赤外線カ
メラが撮影することで正確な利用者の指の位置を夜間等でも把握することが可能になる。
At this time, the vending machine of the second modified example may include an infrared generation source such as an infrared LED. The user's finger reflects the infrared light from the infrared light source, and the state of the user's finger can be grasped at night or the like by photographing the state with the infrared camera.
これらの例示に限らず、本発明は、実施の形態で説明した構成と実質的に同一の構成(
例えば、機能、方法および結果が同一の構成、あるいは目的および効果が同一の構成)を
含む。
The present invention is not limited to these exemplifications, and the present invention is substantially the same as the configuration described in the embodiment (
For example, a configuration having the same function, method and result, or a configuration having the same purpose and effect).
また、グラスフロント型自動販売機を例にして説明したが、実施の形態で説明した構成
はグラスフロント型以外の自動販売機にも適用可能である。例えばタッチパネルで商品選
択を行う方式の自動販売機に本発明を適用した場合、タッチパネルに代えて商品の見本を
示す商品ディスプレイを使用することができる。例えば商品の見本とは、商品の外観を示
す模型、絵、映像等であってもよい。そして、例えば商品ディスプレイは商品の見本が描
かれた樹脂板等であってもよい。
Further, although the glass front type vending machine has been described as an example, the configuration described in the embodiment is applicable to vending machines other than the glass front type. For example, when the present invention is applied to a vending machine that uses a touch panel to select a product, a product display showing a sample of the product can be used instead of the touch panel. For example, the sample of the product may be a model, a picture, a video, or the like showing the appearance of the product. For example, the product display may be a resin plate on which a sample of the product is drawn.
このとき、前記の実施例や変形例における商品を商品の見本に置き換えただけであり、
その他の構成や処理内容は同じである。よって、前記の実施例等と同じく、自動販売機の
製造開発コストを大きく下げることができる。そして、欲しい商品の見本を指差すだけで
商品選択を行うことが可能なため、グラスフロント型でない従来の自動販売機と比較して
も操作性がよい。
At this time, the product in the above-described embodiment or modification is simply replaced with a sample of the product,
Other configurations and processing contents are the same. Therefore, as in the above-described embodiment, the manufacturing and development cost of the vending machine can be greatly reduced. And since it is possible to select a product simply by pointing to a sample of the desired product, the operability is good even when compared with a conventional vending machine that is not a glass front type.
そして、本発明は、実施の形態で説明した構成の本質的でない部分を置き換えた構成を
含む。また、本発明は、実施の形態で説明した構成と同一の作用効果を奏する構成又は同
一の目的を達成することができる構成を含む。また、本発明は、実施の形態で説明した構
成に公知技術を付加した構成を含む。
The present invention includes a configuration in which non-essential portions of the configuration described in the embodiment are replaced. In addition, the present invention includes a configuration that exhibits the same operational effects as the configuration described in the embodiment or a configuration that can achieve the same object. Further, the invention includes a configuration in which a known technique is added to the configuration described in the embodiment.
10…自動販売機、20−1〜20−N…カメラ、30…画像処理部、40…制御部、5
0…ユーザーインターフェース部、51A…OKボタン、51B…キャンセルボタン、5
2…紙幣投入口、53…硬貨投入口、54…商品取出口、56…透明板、58…庇、60
…商品、70…利用者の指、72…影、100…利用者指示、102−1〜102−N…
画像データ、103…商品コード信号、104…制御信号、105…指示信号、110…
画像、110A…画像、110B…画像、M11〜M34…商品特定領域
DESCRIPTION OF
0 ... User interface part, 51A ... OK button, 51B ... Cancel button, 5
2 ... bill input port, 53 ... coin input port, 54 ... commodity outlet, 56 ... transparent plate, 58 ... bag, 60
... Product, 70 ... User's finger, 72 ... Shadow, 100 ... User instruction, 102-1 to 102-N ...
Image, 110A ... Image, 110B ... Image, M11-M34 ... Product specific area
Claims (13)
前記透明板を含む所定のエリアを撮影するカメラと、
前記カメラからの画像に基づいて、前記利用者が前記複数の商品の中から選択した選択商品を判断する画像処理部と、
前記複数の商品の中の1つの商品を指定する商品コード信号を受け取り、前記商品コード信号が指定する商品を出力させる制御部と、を含み、
前記画像処理部は、
前記カメラからの画像における前記利用者の指の位置を抽出し、
前記利用者の指の位置と前記透明板との位置関係に基づき、前記選択商品を判断し、
前記選択商品と判断した商品を指定する前記商品コード信号を前記制御部に出力する自動販売機。 A vending machine in which a plurality of products inside can be visually recognized by a user through a transparent plate provided in a part of the housing,
A camera for photographing a predetermined area including the transparent plate;
An image processing unit that determines a selected product selected from the plurality of products by the user based on an image from the camera;
A control unit that receives a product code signal designating one product of the plurality of products and outputs the product designated by the product code signal,
The image processing unit
Extracting the position of the user's finger in the image from the camera;
Based on the positional relationship between the position of the user's finger and the transparent plate, determine the selected product,
A vending machine that outputs the product code signal designating the product determined to be the selected product to the control unit.
前記画像処理部は、
前記カメラからの画像において前記複数の商品のそれぞれを特定する領域である商品特定領域を設定し、
前記利用者の指が前記透明板の表面から所定の距離内にあって、かつ、1つの前記商品特定領域に含まれる場合に、当該商品特定領域が特定する商品を前記選択商品と判断する自動販売機。 In the vending machine according to claim 1,
The image processing unit
Set a product specifying area that is an area for specifying each of the plurality of products in the image from the camera,
Automatic determination that the product specified by the product specific area is the selected product when the user's finger is within a predetermined distance from the surface of the transparent plate and is included in one of the product specific areas Vending machine.
前記画像処理部は、
前記利用者の指が所定の時間よりも長く1つの前記商品特定領域に含まれる場合に、当該商品特定領域が特定する商品を前記選択商品と判断する自動販売機。 In the vending machine according to claim 2,
The image processing unit
A vending machine that determines that a product specified by the product specifying area is the selected product when the user's finger is included in one of the product specifying areas longer than a predetermined time.
前記透明板を含む所定のエリアを撮影するカメラと、
前記カメラからの画像に基づいて、前記利用者が前記複数の商品の中から選択した選択商品を判断する画像処理部と、
前記複数の商品の中の1つの商品を指定する商品コード信号を受け取り、前記商品コード信号が指定する商品を出力させる制御部と、を含み、
前記画像処理部は、
前記カメラからの画像において前記複数の商品のそれぞれを特定する領域である商品特定領域を設定し、
前記カメラからの画像における前記利用者の指の位置を抽出し、
前記利用者の指が所定の時間よりも長く1つの前記商品特定領域に含まれる場合に、当該商品特定領域が特定する商品を前記選択商品と判断し、
前記選択商品と判断した商品を指定する前記商品コード信号を前記制御部に出力する自動販売機。 A vending machine in which a plurality of products inside can be visually recognized by a user through a transparent plate provided in a part of the housing,
A camera for photographing a predetermined area including the transparent plate;
An image processing unit that determines a selected product selected from the plurality of products by the user based on an image from the camera;
A control unit that receives a product code signal designating one product of the plurality of products and outputs the product designated by the product code signal,
The image processing unit
Set a product specifying area that is an area for specifying each of the plurality of products in the image from the camera,
Extracting the position of the user's finger in the image from the camera;
When the user's finger is included in one of the product specific areas longer than a predetermined time, the product specified by the product specific area is determined as the selected product,
A vending machine that outputs the product code signal designating the product determined to be the selected product to the control unit.
前記カメラを複数含み、
前記画像処理部は、
複数台の前記カメラからの画像における前記利用者の指の位置が1つの同じ前記商品特定領域に含まれる場合に、当該商品特定領域が特定する商品を前記選択商品と判断する自動販売機。 In the vending machine according to claim 2 or 4,
Including a plurality of the cameras,
The image processing unit
A vending machine that determines, when the position of the user's finger in images from a plurality of the cameras is included in one same product specifying area, the product specified by the product specifying area is the selected product.
前記カメラを2台備え、2台のカメラからの画像が所定の視差を生じる位置に設置されている自動販売機。 In the vending machine according to claim 5,
A vending machine provided with two of the cameras and installed at a position where images from the two cameras generate a predetermined parallax.
赤外線発生源を含み、
前記カメラは赤外線カメラである自動販売機。 The vending machine according to any one of claims 1 to 6,
Including an infrared source,
The vending machine, wherein the camera is an infrared camera.
前記カメラは可視カメラである自動販売機。 The vending machine according to any one of claims 1 to 6,
The vending machine, wherein the camera is a visible camera.
前記カメラは自動販売機の上部に設置されている自動販売機。 The vending machine according to any one of claims 1 to 8,
The camera is a vending machine installed at the top of the vending machine.
前記複数の商品を個別に照らす照明を含み、
前記制御部は、
前記商品コード信号を受け取った場合に、前記商品コード信号が指定する商品が、他の商品と区別されて照らされるように前記照明を制御する自動販売機。 The vending machine according to any one of claims 1 to 9,
Including lighting for individually illuminating the plurality of items;
The controller is
A vending machine that controls the lighting so that the product specified by the product code signal is illuminated separately from other products when the product code signal is received.
前記利用者からの指示を受け取り、指示信号として制御部に出力するユーザーインターフェース部を含み、
前記制御部は、
前記商品コード信号が指定する商品が他の商品と区別されて照らされた後に、前記商品コード信号が指定する商品が前記選択商品であることを前記利用者が確認したことを示す前記指示信号を受け取った場合に、前記商品コード信号が指定する商品を出力させる自動販売機。 The vending machine according to claim 10,
A user interface unit that receives an instruction from the user and outputs the instruction signal as an instruction signal to the control unit;
The controller is
The instruction signal indicating that the user has confirmed that the product specified by the product code signal is the selected product after the product specified by the product code signal is distinguished from other products and illuminated. A vending machine that, when received, outputs the product specified by the product code signal.
前記商品ディスプレイを含む所定のエリアを撮影するカメラと、
前記カメラからの画像に基づいて、利用者が前記複数の商品の中から選択した選択商品を判断する画像処理部と、
前記複数の商品の中の1つの商品を指定する商品コード信号を受け取り、前記
商品コード信号が指定する商品を出力させる制御部と、を含み、
前記画像処理部は、
前記カメラからの画像における前記利用者の指の位置を抽出し、
前記利用者の指の位置と前記商品ディスプレイとの位置関係に基づき、前記選択商品を判断し、
前記選択商品と判断した商品を指定する前記商品コード信号を前記制御部に出力する自動販売機。 A vending machine that displays a sample of a plurality of products on a product display that is a part of a housing,
A camera for photographing a predetermined area including the commodity display;
Based on the image from the camera, an image processing unit for determining a selection item selected by the user from among the plurality of items,
Receiving a product code signal designating one product among the plurality of products,
A control unit that outputs the product specified by the product code signal,
The image processing unit
Extracting the position of the user 's finger in the image from the camera;
Based on the positional relationship between the position of the user's finger and the product display, determine the selected product,
A vending machine that outputs the product code signal designating the product determined to be the selected product to the control unit.
前記商品ディスプレイを含む所定のエリアを撮影するカメラと、
前記カメラからの画像に基づいて、利用者が前記複数の商品の中から選択した選択商品を判断する画像処理部と、
前記複数の商品の中の1つの商品を指定する商品コード信号を受け取り、前記商品コード信号が指定する商品を出力させる制御部と、を含み、
前記画像処理部は、
前記カメラからの画像において前記複数の商品のそれぞれを特定する領域である商品特定領域を設定し、
前記カメラからの画像における前記利用者の指の位置を抽出し、
前記利用者の指が所定の時間よりも長く1つの前記商品特定領域に含まれる場合に、当該商品特定領域が特定する商品を前記選択商品と判断し、
前記選択商品と判断した商品を指定する前記商品コード信号を前記制御部に出力する自動販売機。 A vending machine that displays a sample of a plurality of products on a product display that is a part of a housing,
A camera for photographing a predetermined area including the commodity display;
Based on the image from the camera, an image processing unit for determining a selection item selected by the user from among the plurality of items,
A control unit that receives a product code signal designating one product of the plurality of products and outputs the product designated by the product code signal,
The image processing unit
Set a product specifying area that is an area for specifying each of the plurality of products in the image from the camera,
Extracting the position of the user 's finger in the image from the camera;
When the user's finger is included in one of the product specific areas longer than a predetermined time, the product specified by the product specific area is determined as the selected product,
A vending machine that outputs the product code signal designating the product determined to be the selected product to the control unit.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2011013764A JP5682329B2 (en) | 2011-01-26 | 2011-01-26 | vending machine |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2011013764A JP5682329B2 (en) | 2011-01-26 | 2011-01-26 | vending machine |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2012155513A JP2012155513A (en) | 2012-08-16 |
JP5682329B2 true JP5682329B2 (en) | 2015-03-11 |
Family
ID=46837178
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2011013764A Expired - Fee Related JP5682329B2 (en) | 2011-01-26 | 2011-01-26 | vending machine |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP5682329B2 (en) |
Families Citing this family (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
GB2516276A (en) * | 2013-07-17 | 2015-01-21 | Shoprobotic Ltd | A vending machine and associated methods |
CN108806086B (en) * | 2018-08-03 | 2024-05-03 | 虫极科技(北京)有限公司 | Columnar commodity identification system and method |
CN109243096B (en) * | 2018-10-26 | 2024-07-02 | 虫极科技(北京)有限公司 | Intelligent container and method for determining commodity taking |
Family Cites Families (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH0378378U (en) * | 1989-11-30 | 1991-08-08 | ||
JPH10188103A (en) * | 1996-12-26 | 1998-07-21 | Toshiba Corp | Operation guidance device for automatic equipment |
JP2009043176A (en) * | 2007-08-10 | 2009-02-26 | Yamaha Motor Co Ltd | Vending machine |
JP2009140234A (en) * | 2007-12-06 | 2009-06-25 | Yamaha Motor Co Ltd | Automatic dispenser |
JP5560429B2 (en) * | 2010-09-15 | 2014-07-30 | ネッツエスアイ東洋株式会社 | Automatic ticket vending machine |
-
2011
- 2011-01-26 JP JP2011013764A patent/JP5682329B2/en not_active Expired - Fee Related
Also Published As
Publication number | Publication date |
---|---|
JP2012155513A (en) | 2012-08-16 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
EP2191352B1 (en) | Image projection apparatus and control method therefor | |
US10015392B2 (en) | Information processing apparatus, information processing method, and program | |
US20150124086A1 (en) | Hand and object tracking in three-dimensional space | |
CN105718833B (en) | Pattern recognition device and commodity information processor | |
EP3021299A1 (en) | Information processing apparatus, store system and method | |
JPH0844490A (en) | Interface device | |
JP2012193873A (en) | Storage device | |
CN104956377A (en) | Device for capturing person-specific data | |
JP6664920B2 (en) | Surveillance camera system and surveillance method | |
WO2021065413A1 (en) | Object recognition device, object recognition system, and object recognition method | |
CN109922221A (en) | Image forming apparatus, storage medium and control method | |
JP5682329B2 (en) | vending machine | |
KR20200079721A (en) | Smart clothes management system and method thereof | |
CN103677442B (en) | Keyboard device and electronic device | |
JP4870651B2 (en) | Information input system and information input method | |
JP2011188023A (en) | Information processing unit, method of processing information, and program | |
US20160171426A1 (en) | Commodity processing system | |
JP6465197B2 (en) | Information processing apparatus, information processing method, and program | |
CN217060988U (en) | Sweep ink recorder utensil | |
KR101385263B1 (en) | System and method for a virtual keyboard | |
JP2007292894A (en) | Display apparatus, relevant information display method, and program | |
JP2009043176A (en) | Vending machine | |
US20210004644A1 (en) | Store apparatus, store system, image acquisition method and program | |
WO2019159518A1 (en) | Heating cooker and heating cooking system | |
JP2010128903A (en) | Vending machine |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20131210 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20140826 |
|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20140909 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20140930 |
|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20141127 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20141216 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20141229 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 5682329 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
S531 | Written request for registration of change of domicile |
Free format text: JAPANESE INTERMEDIATE CODE: R313531 |
|
R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
LAPS | Cancellation because of no payment of annual fees |