JP2006113254A - Information presenting device and cooking support system - Google Patents

Information presenting device and cooking support system Download PDF

Info

Publication number
JP2006113254A
JP2006113254A JP2004299943A JP2004299943A JP2006113254A JP 2006113254 A JP2006113254 A JP 2006113254A JP 2004299943 A JP2004299943 A JP 2004299943A JP 2004299943 A JP2004299943 A JP 2004299943A JP 2006113254 A JP2006113254 A JP 2006113254A
Authority
JP
Japan
Prior art keywords
article
information
presentation
unit
weight
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2004299943A
Other languages
Japanese (ja)
Inventor
Yoshihiko Matsukawa
善彦 松川
Osamu Yamada
修 山田
Shusaku Okamoto
修作 岡本
Tomonobu Naruoka
知宣 成岡
Toru Tanigawa
徹 谷川
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Panasonic Holdings Corp
Original Assignee
Matsushita Electric Industrial Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Matsushita Electric Industrial Co Ltd filed Critical Matsushita Electric Industrial Co Ltd
Priority to JP2004299943A priority Critical patent/JP2006113254A/en
Publication of JP2006113254A publication Critical patent/JP2006113254A/en
Pending legal-status Critical Current

Links

Images

Landscapes

  • Devices For Indicating Variable Information By Combining Individual Elements (AREA)

Abstract

<P>PROBLEM TO BE SOLVED: To provide an information presenting device without obstructing human working and without enforcing use of a specific device, such as HMD by making an article move only for referring information of the real world article, and to provide a cooking support system that uses it. <P>SOLUTION: The information presenting device comprises a position-detecting part 102 for detecting the position of a plurality of the articles, an article information acquiring means 103 for acquiring attribute information of the article, a presenting part 104 for presenting the attribute information of the article, and a presenting position control means 105 for controlling real spatial position, presenting the attribute information of the article, in response to the position where the article exists. <P>COPYRIGHT: (C)2006,JPO&NCIPI

Description

本発明は、人に特別な機器の装着や操作を強いることなく、物品の属性や状態などの情報(特に見えない情報)を物品の位置付近に直接提示する情報提示装置、及びそれを調理に利用して調理動作を支援する調理支援システムに関する。   The present invention provides an information presentation apparatus for directly presenting information (particularly invisible information) such as the attribute and state of an article near the position of the article without forcing a person to wear or operate a special device, and cooking the same. The present invention relates to a cooking support system that uses and supports cooking operations.

情報世界(コンピュータネットワークの世界)に閉じたところでは、その情報をいかに人にわかりやすく提示するか?という課題に多くの取り組みがなされてきた。たとえば、現在普及しているWWWブラウザは、映像を見たり、音楽を聴いたり、文字が読めたり、と統一したインターフェースであらゆる情報にアクセスができる環境を提供している。一方、実世界にも情報はいろんな物に埋め込まれた形で存在し、これらの情報をストレスなく参照できれば便利なことも多い。たとえば、見ただけではわからない、食品の温度や正味期限、物品の所有者、物品が何に使われる物か、等の情報が何らかの方法で参照できると、非常に便利である。   Where it is closed to the information world (the world of computer networks), how can the information be presented to people in an easy-to-understand manner? Many efforts have been made to address this issue. For example, currently popular WWW browsers provide an environment in which all information can be accessed with a unified interface such as watching videos, listening to music, and reading text. On the other hand, information exists in the real world in an embedded form, and it is often useful if you can refer to this information without stress. For example, it is very convenient if information such as the temperature of the food, the net expiration date, the owner of the article, what the article is used for, and the like can be referred to in some way, which cannot be understood only by looking.

このような、実世界に埋め込まれた情報を参照するには、センシング技術で対象物品の所望の属性を計測し、画面や音などの手段によって提示すればよい。その一つの例としては「秤」があり、対象物品の重量を「秤」で計測し、計測結果を「秤」のLCDに表示するという方法で、実世界に埋め込まれた情報の提示を実現している。また、このような対象物品を移動させずに、HMD(ヘッドマウントディプレー)を用いて、対象物品が存在する場所と人の位置に応じてHMD上に対象物品の情報を重畳表示するというAR(Augmented Reality)という技術も盛んに研究されている。   In order to refer to such information embedded in the real world, a desired attribute of the target article may be measured by a sensing technique and presented by means such as a screen or sound. One example is the “balance”, which measures the weight of the target article with the “balance” and displays the measurement result on the LCD of the “balance”, thereby presenting information embedded in the real world. is doing. In addition, an AR that superimposes and displays information on the target article on the HMD according to the location of the target article and the position of the person using an HMD (head mounted display) without moving the target article. A technique called (Augmented Reality) is also actively studied.

例えば、特許文献1にAR技術を用いた巡回点検支援システムが開示されている。この特許文献1には、点検者に装着可能なHMDと、複数の点検対象に関する情報を記憶する手段と、その記憶された点検対象に関する情報に対応する画像信号を出力する手段とを備え、その頭部装着型表示装置であるHMDにより、その画像信号に対応する点検対象に関する情報を点検者の視野内に表示するものである。   For example, Patent Document 1 discloses a patrol inspection support system using AR technology. This Patent Document 1 includes an HMD that can be worn by an inspector, means for storing information relating to a plurality of inspection objects, and means for outputting an image signal corresponding to the information relating to the stored inspection objects. Information relating to the inspection object corresponding to the image signal is displayed in the field of view of the inspector by the HMD which is a head-mounted display device.

特開平10−214038号公報Japanese Patent Laid-Open No. 10-214038

しかしながら、「秤」は、計測したい対象物品をその秤の場所まで移動させたり、対象物品の個数を限定(1個)するなど、それを使用する人にいくつかの制約を課する。   However, the “balance” imposes some restrictions on the person who uses it, such as moving the object to be measured to the place of the scale or limiting the number of object items (one).

また、AR技術で用いるHMDを通常の生活シーンで装着するというのは、人に過剰な負担を強いることになるのは明らかである。具体的には、例えば、調理の手順情報を調理人にわかりやすく提示するような調理支援システムを構築しようとした場合、調理人がHMDを装着して調理作業を行うことは非常に煩わしいものであり、危険を伴うものである。   In addition, it is clear that wearing an HMD used in AR technology in a normal life scene imposes an excessive burden on a person. Specifically, for example, when trying to construct a cooking support system that easily presents cooking procedure information to the cook, it is very troublesome for the cook to perform the cooking work with the HMD. Yes, it is dangerous.

以上のように、実世界の物品の情報を参照するためだけに物品を移動させたり、HMD等の特殊な装置の使用を強要するようなシステムは人間中心に考えられたシステムではなく、使いやすいものとは言えない。   As described above, a system that moves an article only to refer to information on an article in the real world or forces the use of a special device such as an HMD is not a human-centered system and is easy to use. Not a thing.

従って、本発明の目的は、前記問題を解決することにあって、実世界の物品の情報を参照するためだけに物品を移動させたり、HMD等の特殊な装置の使用を強要することなく、人間の作業を妨げず情報提示を行うことができる情報提示装置、及びそれを利用する調理支援システムを提供することにある。   Therefore, an object of the present invention is to solve the above-mentioned problem without moving the article only for referring to the information of the real-world article, or forcing the use of a special device such as an HMD, An object of the present invention is to provide an information presentation apparatus capable of presenting information without obstructing human work, and a cooking support system using the information presentation apparatus.

前記目的を達成するために、本発明は以下のように構成する。   In order to achieve the above object, the present invention is configured as follows.

本発明の1つの態様によれば、複数の物品の位置を検出する位置検出部と、
前記物品の属性情報を取得する物品情報取得手段と、
前記物品情報取得手段で取得された前記物品の前記属性情報を提示する提示部と、
前記位置検出部により検出された前記物品の前記位置に応じて、前記提示部による前記物品の前記属性情報を提示する実空間位置を制御する提示位置制御手段と、を備えることを特徴とする情報提示装置を提供する。
According to one aspect of the present invention, a position detection unit that detects the positions of a plurality of articles;
Article information acquisition means for acquiring attribute information of the article;
A presentation unit for presenting the attribute information of the article acquired by the article information acquisition unit;
And a presentation position control means for controlling a real space position for presenting the attribute information of the article by the presentation unit in accordance with the position of the article detected by the position detection unit. A presentation device is provided.

本発明の別の態様によれば、複数の物品の位置を検出する位置検出部と、
前記物品の状態情報を取得するセンシング装置と、
前記センシング装置で取得された前記物品の前記状態情報を提示する提示部と、
前記位置検出部により検出された前記物品の前記位置に応じて、前記提示部による前記物品の前記状態情報を提示する実空間位置を制御する提示位置制御手段と、を備えることを特徴とする情報提示装置を提供する。
According to another aspect of the present invention, a position detection unit that detects the positions of a plurality of articles,
A sensing device for obtaining state information of the article;
A presentation unit for presenting the state information of the article acquired by the sensing device;
And a presentation position control means for controlling a real space position for presenting the state information of the article by the presentation unit according to the position of the article detected by the position detection unit. A presentation device is provided.

以上説明したように、本発明による情報提示装置によれば、前記位置検出部により検出された前記物品の前記位置に応じて、前記提示部による前記物品の前記属性情報を提示する実空間位置を提示位置制御手段により制御することができるので、物品が置かれた、まさにその場所付近に物品の属性を検出して表示することができる。よって、見た目では見えない対象物品の情報(重量や温度など)を人が知りたい場合、対象物品をその計測機器(重量であれば秤など)の場所まで移動させたり、作業に妨げとなる動作を強いることがなくなる。また、AR技術で用いるHMDを装着するという煩わしさがなく、人に過剰な負担を強いることもなく、人の動作を妨げない、人中心の情報提示を行うことが可能となる。   As described above, according to the information presentation apparatus of the present invention, the real space position where the attribute information of the article is presented by the presenting unit according to the position of the article detected by the position detecting unit. Since it can be controlled by the presentation position control means, the attribute of the article can be detected and displayed in the vicinity of the place where the article is placed. Therefore, when a person wants to know the information (weight, temperature, etc.) of the target article that cannot be seen visually, the target article is moved to the location of the measuring device (such as a scale if it is weight) or an operation that hinders work. Will not be forced. In addition, it is possible to perform human-centered information presentation that does not obstruct the person's operation without inconvenience of wearing the HMD used in the AR technology, without causing an excessive burden on the person.

本発明の実施の形態について説明する前に、本発明の種々の態様について説明する。   Before describing embodiments of the present invention, various aspects of the present invention will be described.

本発明の第1態様によれば、複数の物品の位置を検出する位置検出部と、
前記物品の属性情報を取得する物品情報取得手段と、
前記物品情報取得手段で取得された前記物品の前記属性情報を提示する提示部と、
前記位置検出部により検出された前記物品の前記位置に応じて、前記提示部による前記物品の前記属性情報を提示する実空間位置を制御する提示位置制御手段と、を備えることを特徴とする情報提示装置を提供する。
According to the first aspect of the present invention, a position detection unit that detects the positions of a plurality of articles;
Article information acquisition means for acquiring attribute information of the article;
A presentation unit for presenting the attribute information of the article acquired by the article information acquisition unit;
And a presentation position control means for controlling a real space position for presenting the attribute information of the article by the presentation unit in accordance with the position of the article detected by the position detection unit. A presentation device is provided.

本発明の第2態様によれば、複数の物品の位置を検出する位置検出部と、
前記物品の状態情報を取得するセンシング装置と、
前記センシング装置で取得された前記物品の前記状態情報を提示する提示部と、
前記位置検出部により検出された前記物品の前記位置に応じて、前記提示部による前記物品の前記状態情報を提示する実空間位置を制御する提示位置制御手段と、を備えることを特徴とする情報提示装置を提供する。
According to the second aspect of the present invention, a position detection unit that detects the positions of a plurality of articles;
A sensing device for obtaining state information of the article;
A presentation unit for presenting the state information of the article acquired by the sensing device;
And a presentation position control means for controlling a real space position for presenting the state information of the article by the presentation unit according to the position of the article detected by the position detection unit. A presentation device is provided.

本発明の第3態様によれば、前記センシング装置は、前記物品の前記状態情報として重量及び温度のいずれか少なく一方を検出することを特徴とする第2の態様に記載の情報提示装置を提供する。   According to a third aspect of the present invention, there is provided the information presentation device according to the second aspect, wherein the sensing device detects at least one of weight and temperature as the state information of the article. To do.

本発明の第4態様によれば、前記物品の前記属性情報は形状情報を有し、前記提示位置制御手段は、前記物品あるいは前記物品以外の物品により隠蔽されない位置に、前記物品の前記属性情報を提示することを特徴とする第1の態様に記載の情報提示装置を提供する。   According to a fourth aspect of the present invention, the attribute information of the article has shape information, and the presentation position control means is configured to position the attribute information of the article at a position that is not concealed by the article or an article other than the article. The information presentation apparatus according to the first aspect is provided.

本発明の第5態様によれば、人の位置を検出する人位置検出部をさらに有し、
前記提示位置制御手段は、前記物品の前記位置及び前記人の前記位置に応じて前記物品の前記属性情報を提示する実空間位置を制御することを特徴とする第1の態様に記載の情報提示装置を提供する。
According to the fifth aspect of the present invention, it further includes a human position detection unit that detects the position of the person,
The information presentation according to the first aspect, wherein the presentation position control unit controls a real space position for presenting the attribute information of the article according to the position of the article and the position of the person. Providing equipment.

本発明の第6態様によれば、前記物品の前記属性情報は前記物品の形状情報を有し、前記提示位置制御手段は、前記物品により隠蔽されない位置でかつ前記人が存在する方向に前記物品の前記属性情報を提示することを特徴とする第5の態様に記載の情報提示装置を提供する。   According to a sixth aspect of the present invention, the attribute information of the article includes shape information of the article, and the presentation position control means is a position that is not concealed by the article and in the direction in which the person exists. The attribute presentation apparatus according to the fifth aspect is provided.

本発明の第7態様によれば、人を認証する認証手段と、
前記認証手段により認証された前記人に応じて、前記物品の前記属性情報を提示する提示方法を制御する前記提示方法制御手段を有することを特徴とする第1の態様に記載の情報提示装置を提供する。
According to the seventh aspect of the present invention, an authentication means for authenticating a person;
The information presentation apparatus according to the first aspect, further comprising: a presentation method control unit that controls a presentation method for presenting the attribute information of the article according to the person authenticated by the authentication unit. provide.

本発明の第8態様によれば、調理を行うために料理の調理手順を提示する調理支援システムにおいて、
前記調理手順で使用する物品が存在する位置に応じて前記物品の属性情報を前記物品が存在する実空間に提示する少なくとも一つの、第1〜7のいずれか1つの態様に記載の情報提示装置と、
前記調理手順を示すレシピ情報を記憶するレシピデータベースと、
前記情報提示装置により提示された情報と、前記レシピデータベースに記憶されたレシピ情報とに基づいて、前記調理手順の呼び出し指示を行うためのインタフェースとを備えることを特徴とする調理支援システムを提供する。
According to the 8th aspect of this invention, in the cooking assistance system which presents the cooking procedure of cooking in order to cook,
The information presentation device according to any one of the first to seventh aspects, in which attribute information of the article is presented in a real space where the article exists according to a position where the article used in the cooking procedure exists. When,
A recipe database for storing recipe information indicating the cooking procedure;
Provided is a cooking support system comprising an interface for instructing to call the cooking procedure based on information presented by the information presentation device and recipe information stored in the recipe database .

以下、本発明の実施の形態について、図面を参照しながら説明する。   Hereinafter, embodiments of the present invention will be described with reference to the drawings.

以下、本発明のそれぞれの実施形態において、実現するために必要な、本発明に係る対象物品位置検出部の構成及び動作についても説明する。   Hereinafter, in each of the embodiments of the present invention, the configuration and operation of the target article position detection unit according to the present invention, which are necessary to be realized, will be described.

(第1実施形態)
図1Aは本発明の第1実施形態における情報提示装置の構成図を示している。
(First embodiment)
FIG. 1A shows a configuration diagram of an information presentation apparatus in the first embodiment of the present invention.

本発明の第1実施形態による情報提示装置101は、提示したい情報を有する対象となる物品すなわち対象物品の位置を検出する位置検出部102と、前記対象物品の属性情報を対象物品から直接的に又は間接的に取得するタグリーダなどの物品情報取得手段103と、前記物品情報取得手段103により取得した対象物品の属性情報を提示する提示部104と、前記対象物品の属性情報及び位置に基づき前記提示部に提示する位置を制御する提示位置制御手段105と、位置検出部102からの出力が入力されて対象物品の位置及び重量を記憶する対象物品情報記憶手段106と、対象物品の属性情報の変化をセンシングして検出するセンシング装置108と、外部の装置との通信を行う通信手段109と、情報提示装置101の動作を制御する制御手段107とを有する。   The information presenting apparatus 101 according to the first embodiment of the present invention directly includes a position detection unit 102 that detects a target article having information to be presented, that is, a position of the target article, and attribute information of the target article directly from the target article. Alternatively, an article information acquisition unit 103 such as a tag reader that is acquired indirectly, a presentation unit 104 that presents attribute information of the target article acquired by the article information acquisition unit 103, and the presentation based on the attribute information and position of the target article Presentation position control means 105 for controlling the position to be presented to the part, target article information storage means 106 for storing the position and weight of the target article by receiving an output from the position detection section 102, and change in attribute information of the target article The sensing device 108 that senses and detects the communication, the communication means 109 that communicates with an external device, and the information presentation device 101 are controlled. And a control unit 107 for.

制御手段107には、位置検出部102と物品情報取得手段103と提示部104と提示位置制御手段105と対象物品情報記憶手段106とセンシング装置108と通信手段109とが接続されて、位置検出部102と物品情報取得手段103とセンシング装置108と通信手段109とからの情報が対象物品情報記憶手段106に記憶されるように制御するとともに、前記情報に基づき、提示部104と提示位置制御手段105と通信手段109とを適宜独立して動作制御して情報提示装置101の動作を制御するようにしている。   The control unit 107 is connected to the position detection unit 102, the article information acquisition unit 103, the presentation unit 104, the presentation position control unit 105, the target article information storage unit 106, the sensing device 108, and the communication unit 109. 102, the article information acquisition means 103, the sensing device 108, and the communication means 109 are controlled so as to be stored in the target article information storage means 106, and based on the information, the presentation unit 104 and the presentation position control means 105 are controlled. And the communication means 109 are appropriately independently controlled to control the operation of the information presentation apparatus 101.

図1B及び図1C及び図1Dは情報提示装置101の一実現例を示している。図1A及び図1B及び図1C及び図1Dの情報提示装置101は、テーブルなどの設置面115上に置かれかつ対象物品が上面に載置される矩形板状構造体110と、板状構造体110の下部に配置されて板状構造体110に載置された対象物品の重量をそれぞれ検出する少なくとも3個(図1Bでは矩形の各隅に配置された4個)の重量センサ111と、少なくとも3個(図1Bでは4個)の前記重量センサ111からの出力が入力されて前記重量センサ111の出力に基づき前記板状構造体110上の対象物品の位置を計算する位置計算手段112と、前記重量センサ111と位置計算手段112とに接続されて対象物品の位置及び重量を記憶する対象物品情報記憶手段106と、位置計算手段112での位置計算動作と対象物品情報記憶手段106への記憶動作などを制御する制御手段107とを備える。   1B, FIG. 1C, and FIG. 1D show an implementation example of the information presentation apparatus 101. FIG. 1A, 1B, 1C, and 1D includes a rectangular plate-like structure 110 that is placed on an installation surface 115 such as a table and a target article is placed on the upper surface, and a plate-like structure. At least three weight sensors 111 (four arranged at each corner of the rectangle in FIG. 1B) for detecting the weights of the target articles placed below the 110 and placed on the plate-like structure 110, and at least Position calculation means 112 that receives three (four in FIG. 1B) outputs from the weight sensor 111 and calculates the position of the target article on the plate-like structure 110 based on the output of the weight sensor 111; A target article information storage means 106 connected to the weight sensor 111 and the position calculation means 112 for storing the position and weight of the target article, a position calculation operation in the position calculation means 112 and a target article information record. And a control unit 107 that controls the operation of storing the unit 106.

図1Aの位置検出部102は、図1B及び図1Cの前記重量センサ111及び前記重量センサ111からの出力が入力される位置計算手段102aより構成される。より具体的には、情報提示装置101は、図1Dに示すように、CPU101A、主記憶装置101B、二次記憶装置101C、提示部104の一例としてのディスプレー、物品情報取得手段103の一例としてのタグリーダ、通信手段109、及び重量センサ111などから構成され、位置計算手段112、提示位置制御手段105、及び制御手段107は、二次記憶装置(ハードディスク等)101Cにプログラムとして記憶され、このプログラムを主記憶装置101BにロードしてCPU101Aが実行するように構成してもよい。   The position detection unit 102 in FIG. 1A includes the weight sensor 111 in FIGS. 1B and 1C and a position calculation unit 102a to which an output from the weight sensor 111 is input. More specifically, as shown in FIG. 1D, the information presentation device 101 includes a CPU 101A, a main storage device 101B, a secondary storage device 101C, a display as an example of the presentation unit 104, and an example of the article information acquisition unit 103. The position calculation unit 112, the presentation position control unit 105, and the control unit 107 are stored as a program in a secondary storage device (hard disk or the like) 101C. The CPU 101A may be configured to be loaded into the main storage device 101B and executed.

本第1実施形態における情報提示装置101の各構成要素について詳細に説明する。まず、板状構造体110の下部に取り付ける少なくとも3個の重量センサ111は、なるべく板状構造体110の外周に近い部分に離して取り付ける。重量センサ111の個数は3個もしくは4個が望ましい。例えば3個の場合は、図2(a)のように二等辺三角形の各頂点に、4個の場合は図2(b)のように長方形の各頂点に配置する。ここで、重量センサ111の数が3個であれば、情報提示装置101を平面(例えば机や床の上)に設置したときに、必ず3個の重量センサ111が設置面115に接触させることができる。また、重量センサ111が4個の場合は、前記板状構造体110自身の重量及び柔軟性も加味することで、4個の重量センサ111を同時に設置面115に接触させることが容易である。重量センサ111が4個より多くなるにつれ、全ての重量センサ111を設置面115に同時に接触させることが困難になる。   Each component of the information presentation apparatus 101 in the first embodiment will be described in detail. First, at least three weight sensors 111 attached to the lower part of the plate-like structure 110 are attached as close to the outer periphery of the plate-like structure 110 as possible. The number of weight sensors 111 is preferably three or four. For example, in the case of three, it is arranged at each vertex of an isosceles triangle as shown in FIG. 2 (a), and in the case of four, it is arranged at each vertex of a rectangle as shown in FIG. 2 (b). Here, if the number of weight sensors 111 is three, the three weight sensors 111 must be brought into contact with the installation surface 115 when the information presentation apparatus 101 is installed on a flat surface (for example, on a desk or floor). Can do. Further, when the number of weight sensors 111 is four, it is easy to bring the four weight sensors 111 into contact with the installation surface 115 at the same time by taking into account the weight and flexibility of the plate-like structure 110 itself. As the number of the weight sensors 111 increases, it becomes difficult to bring all the weight sensors 111 into contact with the installation surface 115 at the same time.

なお、重量センサ111と板状構造体110の間に柔軟性のある物質(ゲルやゴムなど)を挟むことで、設置面115により着実に全ての重量センサ111を接触させることが可能となる。   Note that by placing a flexible substance (such as gel or rubber) between the weight sensor 111 and the plate-like structure 110, all the weight sensors 111 can be steadily brought into contact with the installation surface 115.

また、板状構造体110に重量センサ111を取り付ける理由は、そのように取り付けることで前記情報提示装置101に可搬性を持たせることができる。   The reason why the weight sensor 111 is attached to the plate-like structure 110 is that the information presentation apparatus 101 can be made portable by attaching it as such.

次に、位置計算手段(位置検出部102の内部)112についてその位置計算動作を説明する。まず、第1〜第3(第4)重量センサ111からの出力をn、n,n(、n)とする。通常、重量センサ111の出力は重量に比例した物理量(例えば重量センサ111が歪みセンサの場合は歪み量)であるので、その出力値に係数をかけて補正及び重量に換算する。この係数は、既定の重量の対象物品を既定の位置に置き、そのときの重量センサ111の出力を求めることを係数の数だけ行い、係数に関する連立方程式を解くことで求めることができる。その係数を重量センサ111毎に、c,c,c(,c)とすると、各重量センサ111にかかる重量(m,m,m(,m))は、c×n,c×n,c×n(,c×n)となる。以降では、重量センサ111の出力は重量に換算されているとし、その出力の値を(m,m,m(,m))とする。 Next, the position calculation operation of the position calculation means (inside the position detection unit 102) 112 will be described. First, outputs from the first to third (fourth) weight sensors 111 are n 1 , n 2 , n 3 (, n 4 ). Normally, the output of the weight sensor 111 is a physical quantity proportional to the weight (for example, when the weight sensor 111 is a strain sensor), the output value is multiplied by a coefficient and converted to a weight. This coefficient can be obtained by placing an object having a predetermined weight at a predetermined position, obtaining the output of the weight sensor 111 at that time by the number of coefficients, and solving simultaneous equations relating to the coefficients. If the coefficients are c 1 , c 2 , c 3 (, c 4 ) for each weight sensor 111, the weight (m 1 , m 2 , m 3 (, m 4 )) applied to each weight sensor 111 is c 1 × n 1 , c 2 × n 2 , c 3 × n 3 (, c 4 × n 4 ). Hereinafter, it is assumed that the output of the weight sensor 111 is converted into a weight, and the value of the output is (m 1 , m 2 , m 3 (, m 4 )).

次に、重量センサ111の配置に応じて対象物品の位置を計算する。   Next, the position of the target article is calculated according to the arrangement of the weight sensor 111.

<重量センサ111が3個の場合>
図2(a)のように、3つの重量センサ111を2等辺3角形の各頂点に配置し、板状構造体110の上の座標系を、例えば、板状構造体110の長手方向をx軸とし短手方向をy軸と定義する。すると、対象物品の重量mは、
(数1)
m=m+m+m
となり、対象物品の座標位置(x,y)は簡単な計算により、
(数2)
(x,y)=(b・m/m,a(m−m)/m)
となる。
<When there are three weight sensors 111>
As shown in FIG. 2A, three weight sensors 111 are arranged at the vertices of an isosceles triangle, and the coordinate system on the plate-like structure 110 is represented by, for example, the longitudinal direction of the plate-like structure 110 as x. The short direction is defined as the y-axis. Then, the weight m of the target article is
(Equation 1)
m = m 1 + m 2 + m 3
The coordinate position (x, y) of the target article is obtained by simple calculation,
(Equation 2)
(X, y) = (b · m 1 / m, a (m 2 −m 3 ) / m)
It becomes.

<重量センサ111が4個の場合>
図2(b)のように、4つの重量センサ111を長方形の各頂点に配置し、板状構造体110の上の座標系を定義する。すると、対象物品の重量mは、
(数3)
m=m+m+m+m
となり、対象物品の座標位置(x,y)は簡単な計算により、
(数4)
(x,y)=(b・(m+m)/m,a・(m+m)/m)
となる。
<When there are four weight sensors 111>
As shown in FIG. 2B, four weight sensors 111 are arranged at each vertex of the rectangle, and a coordinate system on the plate-like structure 110 is defined. Then, the weight m of the target article is
(Equation 3)
m = m 1 + m 2 + m 3 + m 4
The coordinate position (x, y) of the target article is obtained by simple calculation,
(Equation 4)
(X, y) = (b · (m 2 + m 4 ) / m, a · (m 1 + m 2 ) / m)
It becomes.

なお、2等辺3角形(3個の場合)や長方形(4個の場合)の外部に対象物品が存在する場合は、出力が負となる重量センサ111が現れるが、板状構造体110が柔軟性を持つことで板状構造体110自体の重量が依然としてその重量センサ111へ過重してしまい、本来の出力より小さくなる可能性がある。そのため、可能な限り重量センサ111に囲まれた領域(2等辺3角形及び長方形の領域)に対象物品を設置することが望ましい。あるいはなるべく硬度の高い材質(ガラスなど)で前記板状構造体110を使用するのがよい。   In addition, when the target article exists outside the isosceles triangle (in the case of three) or the rectangle (in the case of four), the weight sensor 111 whose output is negative appears, but the plate-like structure 110 is flexible. Therefore, there is a possibility that the weight of the plate-like structure 110 itself will still overload the weight sensor 111 and become smaller than the original output. Therefore, it is desirable to install the target article in an area (an isosceles triangle and a rectangular area) surrounded by the weight sensor 111 as much as possible. Alternatively, the plate-like structure 110 is preferably made of a material having as high a hardness as possible (glass or the like).

また、前記では重量センサ111の配置を2等辺3角形及び長方形としたが、これに限るものではなく、任意の3角形、4角形に配置し、その配置に応じた位置計算を位置計算手段112により行うことが可能であることは言うまでもない。   In the above description, the arrangement of the weight sensor 111 is an isosceles triangle and a rectangle. However, the present invention is not limited to this, and the position of the weight sensor 111 is set to an arbitrary triangle and a quadrangle, and position calculation according to the arrangement is performed. It goes without saying that it is possible to do this.

あるいは、予め重量が既知の対象物品(分銅など)を位置がわかった点に置き、そのときの重量センサ111の出力を求める。この作業を複数の点について求め、そのときの重量センサ111の出力比をテーブルにして位置計算手段112内のメモリに記憶させておき、実際に計測する対象物品が置かれた場合には、重量センサ111の出力比を位置計算手段112により求め、位置計算手段112により前記テーブルを参照することでその位置を知ることができる。   Alternatively, an object (such as a weight) whose weight is known in advance is placed at a point where the position is known, and the output of the weight sensor 111 at that time is obtained. This operation is obtained for a plurality of points, and the output ratio of the weight sensor 111 at that time is stored in a memory in the position calculation means 112 as a table. When the target article to be actually measured is placed, the weight The position calculation means 112 obtains the output ratio of the sensor 111 and the position calculation means 112 refers to the table to know the position.

物品情報取得手段103は、対象物品固有の属性情報を取得する。例えば、物品情報取得手段103は、板状構造体110の周囲に三重程度に巻かれて配置されたアンテナなどより構成されるRFIDタグ(Radio Frequency Identificationタグ)(物品の識別に利用される微小な無線ICチップ。物品自体の識別コードなどの情報が記録されており、電波を使って情報を送受信する能力を持つもの。)のリーダである。対象物品に予め取り付けたRFIDタグ(これには対象物品のIDや、メモリが十分ある場合にはその他の対象物品の物品属性(例えば、名称、重量、温度など)が書き込まれている。)から、対象物品IDをRFIDタグのリーダにより読み取り、インターネット150を利用することで前記対象物品IDに紐づけられた物品固有の情報(製造者が記録する、形状、重量、重心位置、製造者情報、食料であれば単位重量あたりのカロリーや賞味期限など)を取得することができる。図3(a)は、このような物品の属性情報であり、対象物品IDを物品情報取得手段103が取得すると、取得した対象物品IDに基づき、物品情報取得手段103が、制御手段107と通信手段109とを介して、インターネット150上のサーバー151に接続して、サーバー151(サーバー151に接続されてた記憶手段)から通信手段109を介して、対象物品IDの物品情報を取得したり、対象物品IDを予想して予め以下で述べる対象物品情報記憶手段106に記憶しておいてもよい。   The article information acquisition unit 103 acquires attribute information unique to the target article. For example, the article information acquisition unit 103 includes an RFID tag (Radio Frequency Identification tag) (a micrometer used for identifying an article) configured by an antenna or the like wound around the plate-like structure 110 in a triple manner. A wireless IC chip, which records information such as an identification code of an article itself and has a capability of transmitting and receiving information using radio waves. From an RFID tag attached in advance to the target article (in this case, the ID of the target article and the article attributes (for example, name, weight, temperature, etc.) of the other target article are written if there is sufficient memory). , By reading the target article ID with a reader of an RFID tag and using the Internet 150, information unique to the article linked to the target article ID (shape, weight, center of gravity position, manufacturer information, recorded by the manufacturer, For food, calories per unit weight, expiration date, etc.) can be acquired. FIG. 3A shows attribute information of such an article. When the article information acquisition unit 103 acquires the target article ID, the article information acquisition unit 103 communicates with the control unit 107 based on the acquired target article ID. Via the means 109, connect to the server 151 on the Internet 150, acquire the article information of the target article ID from the server 151 (storage means connected to the server 151) via the communication means 109, The target article ID may be predicted and stored in advance in the target article information storage unit 106 described below.

対象物品情報記憶手段106(対象物品の重量、座標位置を記録)は、検出した対象物品の重量(m)と座標位置(x,y)を対にして、対象物品IDに関連付けて記憶しておく。図3(b)は、対象物品情報記憶手段106に記録されかつ対象物品IDに関連付けられた、対象物品の重量と座標位置(図3(b)では局所位置として表示。)の対を示している。この対象物品情報記憶手段106に記憶された情報は、前記情報提示装置101の板状構造体110上に複数の対象物品を一つずつ置いてゆく場合に、検出された対象物品の重量と座標位置を、対象物品情報記憶手段106に逐次記録し、載せた順とは無関係に対象物品を下ろしてゆく場合に、どの対象物品が下ろされたか、減少した重量とその座標位置から制御手段107が判断するために使用する。対象物品を載せる場合と取り去る場合の処理手順に関しては、後で詳しく述べる。なお、図3(b)の「茶碗」は食器としての「茶碗」と食材としての「ご飯」を合わせた情報となる。   The target article information storage means 106 (records the weight and coordinate position of the target article) stores the detected weight (m) of the target article and the coordinate position (x, y) in association with the target article ID. deep. FIG. 3B shows a pair of the weight of the target article and the coordinate position (displayed as a local position in FIG. 3B) recorded in the target article information storage unit 106 and associated with the target article ID. Yes. The information stored in the target article information storage means 106 is the weight and coordinates of the detected target article when a plurality of target articles are placed one by one on the plate-like structure 110 of the information presentation apparatus 101. When the position is sequentially recorded in the target article information storage unit 106 and the target article is lowered regardless of the order of loading, the control unit 107 determines which target article has been lowered, the reduced weight and its coordinate position. Used to judge. The processing procedure for placing and removing the target article will be described in detail later. Note that “tea bowl” in FIG. 3B is information that combines “tea bowl” as tableware and “rice” as ingredients.

対象物品に関する情報としては、このように物品の製造時に確定する物品固有の情報の他に、使用中に様々に変化する情報があり得る。例えば、食料品であれば使用されることにより重量が減少し、調理されることにより温度が変化する。このような情報を取得するセンシング装置108(例えば、重量センサや温度センサなど)を設け、通常は、対象物品の外観からは見えないこれらの情報を、前記情報提示装置101で対象物品が存在する実空間上に明示的に提示することで、ユーザーに利便性や安全性を与えることが可能となる。例えば、センシング装置108が重量センサ111であれば、現在の重量を計測し提示したり、さらにその物品が食料品であれば、前記物品情報取得手段103で得られた単位重量あたりのカロリーに前記重量(食器自体の重量を差し引いたもの)を乗ずることで、カロリーを表示させたりすることが可能となる。そして、第1実施形態では重量センサ111は対象物品の位置検出と重量計測とを兼ね備えているので、センシング装置108を有する場合の実施形態をも同時に示している。   As information on the target article, there may be information that changes in various ways during use in addition to information unique to the article that is determined when the article is manufactured. For example, if it is a foodstuff, a weight will reduce by being used and a temperature will change by cooking. A sensing device 108 (for example, a weight sensor or a temperature sensor) that acquires such information is provided, and such information that is not normally visible from the appearance of the target article is present in the information presentation apparatus 101. By explicitly presenting in the real space, it is possible to give convenience and safety to the user. For example, if the sensing device 108 is the weight sensor 111, the current weight is measured and presented, and if the article is a food, the calorie per unit weight obtained by the article information acquisition unit 103 is It is possible to display calories by multiplying the weight (subtracting the weight of the tableware itself). In the first embodiment, since the weight sensor 111 combines the position detection of the target article and the weight measurement, the embodiment in the case of including the sensing device 108 is also shown.

図4Aに示したように、重量以外にも、前記板状構造体110Aに格子状に多数の温度センサ(熱電対)108Aを付けることで、板状構造体110Aの上面の熱分布を計測することができ、前記位置検出部102で得られた対象物品の位置に基づいて該対象物品の温度を対象物品情報として物品情報取得手段103で取得することが可能となる。そして、図4Bのように、対象物品が載置されるお盆の部分に、温度により色が変わるような液晶表示部などの提示部104を備えることにより、温度センサ(熱電対)108Aより検出された対象物品の温度に基づき、対象物品が載置された部分の提示部104の色により、対象物品の現在温度を表示することで、対象物品(加熱した鍋など)が熱いのかどうかを目視しただけで知ることができ、安全性を確保できたり、調理した料理が冷めているかを目視で判断できるので、再度暖めるなどの判断に用いることができる。   As shown in FIG. 4A, in addition to the weight, the heat distribution on the upper surface of the plate-like structure 110A is measured by attaching a large number of temperature sensors (thermocouples) 108A in a lattice pattern to the plate-like structure 110A. Based on the position of the target article obtained by the position detection unit 102, the temperature of the target article can be acquired as target article information by the article information acquisition unit 103. Then, as shown in FIG. 4B, the presentation unit 104 such as a liquid crystal display unit whose color changes depending on the temperature is provided in the tray portion on which the target article is placed, so that the temperature sensor (thermocouple) 108 </ b> A can detect. Based on the temperature of the target article, the current temperature of the target article is displayed by the color of the presentation unit 104 where the target article is placed to visually check whether the target article (a heated pan or the like) is hot. It is possible to know only by the fact that it is possible to ensure safety and to visually determine whether the cooked food is cold, so that it can be used for judgment such as reheating.

提示位置制御手段105は、位置検出部102で検出された対象物品の位置、及び物品情報取得手段103で得られた対象物品の形状・重心位置等を用いて、前記提示部104に対象物品の情報(たとえば、名称、現重量、食料品であればカロリーなど)を提示する位置を求め、提示部104に表示する。   The presentation position control unit 105 uses the position of the target article detected by the position detection unit 102 and the shape / gravity position of the target article obtained by the article information acquisition unit 103 to inform the presentation unit 104 of the target article. A position for presenting information (for example, name, current weight, and calories for food) is obtained and displayed on the presentation unit 104.

図6は提示位置制御手段105の動作を説明するためのフローチャートである。図5Aは提示位置制御手段105で物品情報を表示する位置を決定する方法を説明する図である。ここでは、人と情報提示装置101の位置関係は常に一定であり、人が常に情報提示装置101の手前(図5Aでは下の方向)に居るものとする。なお、ステップF01〜F05までは、情報提示装置101の提示部104とほぼ同じ大きさの画像を用意して、文字表示位置や文字の大きさを判断する。   FIG. 6 is a flowchart for explaining the operation of the presentation position control means 105. FIG. 5A is a diagram for explaining a method for determining a position for displaying article information by the presentation position control means 105. Here, the positional relationship between the person and the information presentation apparatus 101 is always constant, and it is assumed that the person is always in front of the information presentation apparatus 101 (downward in FIG. 5A). In steps F01 to F05, an image having the same size as that of the presentation unit 104 of the information presentation apparatus 101 is prepared, and the character display position and the character size are determined.

ステップF01:まず、対象物品A1の位置(位置検出部102で得られた位置)から人900が居る方向(図では下方向)へ直線(人方向線)L10を引く。   Step F01: First, a straight line (person direction line) L10 is drawn from the position of the target article A1 (position obtained by the position detection unit 102) in the direction in which the person 900 is present (downward in the figure).

ステップF02:次に、対象物品A1の位置から対象物品A1の形状及び重心位置G1を中心とし対象物品A1の形状を内包する外接円C1を描く。ここで、対象物品情報記憶手段106に記憶された対象物品A1の形状は、なるべく細かく記述されてるほうがよく、例えば、図3(a)のように概形状とそのサイズという方法で対象物品の上から見た大まかな外接形状を記述することができる。概形状が円ならば、その半径(サイズ1)を、概形状が長方形ならば、その縦(サイズ1)・横(サイズ2)の長さを記憶しておく。このような情報は、前にも述べたように、食器の電子タグの対象物品A1のIDなどを用いて、ネットワーク150を介して食器の製造者から取得することが可能である。   Step F02: Next, a circumscribed circle C1 including the shape of the target article A1 with the shape of the target article A1 and the center of gravity G1 as the center is drawn from the position of the target article A1. Here, the shape of the target article A1 stored in the target article information storage means 106 should be described as finely as possible. For example, as shown in FIG. A rough circumscribed shape as seen from the above can be described. If the approximate shape is a circle, the radius (size 1) is stored. If the approximate shape is a rectangle, the vertical (size 1) and horizontal (size 2) lengths are stored. Such information can be obtained from the manufacturer of the tableware via the network 150 using the ID of the target article A1 of the tableware electronic tag as described above.

ステップF03:そして、前記直線(人方向線)L10と外接円C1が交わる点より手前側(人900の側)に、文字の基準線L1が前記直線(人方向線)L10と直交するように表示位置を仮決めする。なお、前述したが、ここでは説明の為に、人方向線L10、外接円C1、文字基準線L1を図示したが、実際には提示部104に表示されるのは文字のみである。   Step F03: The character reference line L1 is orthogonal to the straight line (human direction line) L10 on the near side (the person 900 side) from the point where the straight line (human direction line) L10 and the circumscribed circle C1 intersect. Temporarily determine the display position. As described above, for the sake of explanation, the human direction line L10, the circumscribed circle C1, and the character reference line L1 are shown here, but only the characters are actually displayed on the presentation unit 104.

ステップF04:さらに、対象物品A1以外に他の物品も存在することを考慮して、対象物品A1の情報を他の物品に遮られないような場所に表示するため、対象物品A1の表示位置が他の物品に遮られるか否かを判断する。具体的には、対象物品A1の表示位置が手前の物品に重なって遮られるか否かを判断する。ステップF04で、対象物品A1の表示位置が手前の物品に重なって遮られると判断した場合には、ステップF05に進む。ステップF04で、対象物品A1の表示位置が手前の物品に重なって遮られないと判断した場合には、ステップF06に進む。   Step F04: Further, in consideration of the existence of other articles in addition to the target article A1, the display position of the target article A1 is displayed in order to display the information of the target article A1 in a place that is not obstructed by other articles. It is determined whether or not it is blocked by other articles. Specifically, it is determined whether or not the display position of the target article A1 overlaps the front article and is blocked. If it is determined in step F04 that the display position of the target article A1 overlaps the front article and is blocked, the process proceeds to step F05. If it is determined in step F04 that the display position of the target article A1 overlaps with the front article and is not blocked, the process proceeds to step F06.

ステップF05:図5Bは、一例として、注目する物品A1の手前に他の物品A2が存在する状況を示した図である。物品A1の(手前の人900から見て)手前左に物品A2が存在する。この場合も図5Bと同様の方法で文字の基準線L1を求めるところまでは同様であるが、物品A2に対象物品A1の表示が隠れないように、文字の基準線L1沿いの左右方向(図5Bの場合は右方向)へ対象物品A1の表示位置をシフトする。   Step F05: FIG. 5B is a diagram showing, as an example, a situation where another article A2 exists in front of the noticed article A1. The article A2 exists on the left side of the article A1 (as viewed from the person 900 in front). In this case as well, the process is the same until the character reference line L1 is obtained in the same manner as in FIG. 5B, but the left and right directions along the character reference line L1 (see FIG. In the case of 5B, the display position of the target article A1 is shifted to the right).

ステップF06:またさらに、シフトした表示位置に文字を表示した場合、さらにまた別の物品に遮られるか否かを判断する。別の物品に遮られると判断した場合には、ステップF07に進む。別の物品に遮られないと判断した場合には、ステップF08に進む。   Step F06: Furthermore, when a character is displayed at the shifted display position, it is determined whether or not it is blocked by another article. If it is determined that it is blocked by another article, the process proceeds to step F07. If it is determined that it is not blocked by another article, the process proceeds to step F08.

ステップF07:別の物品に遮られると判断した場合には、文字の大きさを小さくして、別の物品に隠れないようにする。ただし、文字の最小の大きさは決めておき、それ以上小さくならないようにするのが望ましい。最小の文字の大きさでも別の物品に遮られると判断した場合には、人方向線L10と提示部104の外周が交わる点を中心に文字の基準線L1を前記提示部104の外周線に一致させて表示する。このときの文字の大きさは予め定めた大きさとする。なお、いずれの場合においても、人の方向に近い物品から情報を提示する処理を行い、文字同士も重ならないようにするのが望ましい。あるいは文字が重なる場合は色を変えて提示するのが望ましい。   Step F07: When it is determined that the object is blocked by another article, the size of the character is reduced so as not to be hidden by another article. However, it is desirable to determine the minimum size of characters so that they do not become smaller. If it is determined that another item is obstructed even by the smallest character size, the character reference line L1 is used as the outer peripheral line of the presenting unit 104 around the point where the human direction line L10 and the outer periphery of the presenting unit 104 intersect. Match and display. The size of the character at this time is a predetermined size. In any case, it is desirable to perform a process of presenting information from an article close to the direction of a person so that characters do not overlap. Alternatively, when characters overlap, it is desirable to change the color and present it.

ステップF08:以上のようにして決められた表示位置及び文字の大きさで文字を表示することにより、情報提示を行う。この情報提示の詳細については次に説明する。   Step F08: Information is presented by displaying the character at the display position and the character size determined as described above. Details of this information presentation will be described next.

以上のような手順で、制御手段107により提示位置制御手段105などの各手段の動作を制御しながら、提示位置制御手段105の動作を行わせる。より具体的には、制御手段107は、二次記憶装置(ハードディスク等)101Cに記憶されたプログラムをロードし実行することで、情報提示装置101の動作を制御手段107により制御する。   The operation of the presentation position control means 105 is performed while the operation of each means such as the presentation position control means 105 is controlled by the control means 107 in the above procedure. More specifically, the control means 107 controls the operation of the information presentation apparatus 101 by the control means 107 by loading and executing a program stored in the secondary storage device (hard disk or the like) 101C.

図7Aは、本第1実施形態の動作を説明するフローチャートである。図7Aのフローチャートを用いて、制御手段107による制御の下で行われる情報提示装置101の情報提示動作を説明する。   FIG. 7A is a flowchart for explaining the operation of the first embodiment. The information presentation operation of the information presentation apparatus 101 performed under the control of the control unit 107 will be described using the flowchart of FIG. 7A.

ステップA01:対象物品情報記憶手段106に記憶された物品情報に基づき、提示位置制御手段105を用いて提示位置を求める。ここで、対象物品情報記憶手段106に物品情報が一つも記憶されていない場合は、何もしない。   Step A01: Based on the article information stored in the target article information storage means 106, the presentation position is obtained using the presentation position control means 105. If no item information is stored in the target item information storage unit 106, nothing is done.

ステップA02:対象物品情報記憶手段106に記憶された各物品情報に対して求めた提示位置に基づき、提示部104の情報提示を更新する。ステップA01で対象物品情報記憶手段106に物品情報が一つも記憶されていないために何もしなかった場合は、ここでも情報提示の更新はしない。なお、対象物品の追加又は削除を検出する前に、情報提示を更新するのは、以下の理由からである。図7Aのフローチャートは本情報提示装置が動作している間、常に処理を行っている場合について示したものである。電源ON時、初期状態では本情報提示装置の上には何も載せられていないので、情報提示は何も行われない。つまり、何も表示しない状態にリセットされる。あるいは、対象物品情報記憶手段106に情報が記憶されたまま、しかもその情報が本情報提示装置の上の物品の状態と一致していた場合は、その状態で電源をONしたら、物品が新たに追加・削除されなくても対象物品情報記憶手段106の情報が提示されることになる。ただ、単に「終了」としてしまうと、常に変化する状態を検知して提示するという処理ができなくなるので、無限ループ(電源OFFまで同じ処理を繰り返す)になっている。   Step A02: The information presentation of the presentation unit 104 is updated based on the presentation position obtained for each item information stored in the target item information storage unit 106. If nothing is done because no article information is stored in the target article information storage means 106 in step A01, the information presentation is not updated here either. The information presentation is updated before the addition or deletion of the target article is detected for the following reason. The flowchart of FIG. 7A shows a case where processing is always performed while the information presentation apparatus is operating. When the power is turned on, nothing is presented on the information presentation device in the initial state, so no information is presented. That is, it is reset to a state where nothing is displayed. Alternatively, if the information is stored in the target article information storage unit 106 and the information matches the state of the article on the information presentation device, the article is newly added when the power is turned on in that state. Even if it is not added or deleted, the information of the target article information storage means 106 is presented. However, if it is simply “terminated”, the process of detecting and presenting a constantly changing state cannot be performed, so an infinite loop (the same process is repeated until the power is turned off).

ステップA03:板状構造体110に対して対象物品の追加又は削除があったか否かを位置検出部102により検出する。ステップA01で対象物品情報記憶手段106に物品情報が一つも記憶されていないために何もしなかった場合でも、対象物品の追加又は削除があったか否かを検出して、以下のステップに進む。   Step A03: The position detection unit 102 detects whether or not the target article has been added to or deleted from the plate-like structure 110. Even if nothing is done because no article information is stored in the target article information storage means 106 in step A01, it is detected whether or not the target article has been added or deleted, and the process proceeds to the following steps.

ステップA04:もし、物品が追加又は削除された(物品の増減も含めた追加又は削除された)と位置検出部102で検出された場合には、ステップA05へ進み、物品が追加又は削除されたことが位置検出部102で検出されなかった場合はステップA03に処理を戻す。すなわち、物品が追加又は削除されたと位置検出部102で検出されるまで、次のステップA05へは進まない。   Step A04: If the position detection unit 102 detects that an article has been added or deleted (added or deleted including increase or decrease of articles), the process proceeds to Step A05, and the article has been added or deleted. Is not detected by the position detection unit 102, the process returns to step A03. That is, the process does not proceed to the next step A05 until the position detection unit 102 detects that an article has been added or deleted.

ステップA05:ステップA04において、物品が追加又は削除されたと位置検出部102で検出された場合は、位置検出部102で得られた物品の位置などの物品情報、センシング装置108で得られた物品の重量や温度などの物品情報、及び物品情報取得手段103で得られた物品の属性情報などの物品情報をそれぞれ検出し、対象物品情報記憶手段106の対応する物品の情報を書き換えて終了する。   Step A05: When the position detection unit 102 detects that an article has been added or deleted in step A04, the article information such as the position of the article obtained by the position detection unit 102, or the article obtained by the sensing device 108 Article information such as article information such as weight and temperature and article attribute information obtained by the article information acquisition unit 103 is detected, and the corresponding article information in the target article information storage unit 106 is rewritten, and the process ends.

なお、カロリーのように、その重量と食品の単位重量あたりのカロリーから計算するような場合、図AのステップA05の後に、そのような計算動作、すなわち総カロリー及び/又は料金計算をして所定の位置に提示する(ステップA06)が入る。このとき、対象物品情報記憶手段106に記憶されている食品毎に決められた単位重量あたりのカロリーに、その食品の重量を制御手段107により乗じたものをその食品のカロリーとし、全ての食品のカロリーを制御手段107により合計することにより総カロリー計算を行うことができる。また、対象物品情報記憶手段106に記憶されている食品毎に決められた金額を制御手段107により合計することにより料金計算を行うことができる。   In addition, when calculating from the weight and the calorie per unit weight of the food as in the case of the calorie, such a calculation operation, that is, the total calorie and / or the charge is calculated after step A05 in FIG. (Step A06) is entered at the position of. At this time, the calorie per unit weight determined for each food stored in the target article information storage means 106 is multiplied by the weight of the food by the control means 107 as the calories of the food, and all the foods Total calories can be calculated by summing the calories by the control means 107. Further, the amount calculated for each food stored in the target article information storage unit 106 is summed by the control unit 107, so that the charge can be calculated.

以上の動作を繰り返し行うことで、常に情報提示装置101の上に置かれた物品の最新情報を提示部104に表示することが可能である。   By repeatedly performing the above operation, the latest information on the article placed on the information presentation apparatus 101 can be displayed on the presentation unit 104 at all times.

制御手段107の制御に基づく、前記ステップA03〜A05(図7Aの点線の内部)の動作について図9のフローチャートを用いて詳しく説明する。既に、図1Cに示されるように、情報提示装置101の板状構造体110には複数の物品A1,A5が載せられているとする。この時の状況として、4個の各重量センサ111の出力m1(n),m2(n),m3(n),m4(n)が対象物品情報記憶手段106に記憶されている。そこへ、ある物品A20を板状構造体110に載せるような状況を考える。ここで、nは、物品が載置、あるいは取り去られた回数を示し、例えば、m(n)は出力mの時系列を表している。 The operation of steps A03 to A05 (inside the dotted line in FIG. 7A) based on the control of the control means 107 will be described in detail with reference to the flowchart of FIG. As shown in FIG. 1C, it is assumed that a plurality of articles A1 and A5 are already placed on the plate-like structure 110 of the information presentation apparatus 101. As the situation at this time, outputs m 1 (n) , m 2 (n) , m 3 (n) , and m 4 (n) of each of the four weight sensors 111 are stored in the target article information storage unit 106. . Consider a situation where an article A20 is placed on the plate-like structure 110. Here, n indicates the number of times an article has been placed or removed, and for example, m 1 (n) represents a time series of output m 1 .

ステップ601で、周期的に重量センサ111の出力値を読み取る。すなわち、所定時間毎に重量センサ111の出力値が制御手段107に入力される。ここで、周期的に重量センサ111の出力値を読み取る、とは、数秒、又は数十秒単位に、制御手段107に重量センサ111の出力値が入力されて、以下のステップを行うようにすることを意味する。   In step 601, the output value of the weight sensor 111 is periodically read. That is, the output value of the weight sensor 111 is input to the control means 107 every predetermined time. Here, periodically reading the output value of the weight sensor 111 means that the output value of the weight sensor 111 is input to the control means 107 in units of several seconds or several tens of seconds, and the following steps are performed. Means that.

ステップ602で、読み取られた重量センサ111の出力値が、対象物品情報記憶手段106に記憶されている重量センサ111の出力値と制御手段107により比較して、重量センサ111の出力が増加するかどうかを制御手段107が判断することで、物品が板状構造体110に載せられたか否かを制御手段107が判断する。もし、重量センサ111の出力が増加したと制御手段107が判断すれば、その値が安定した頃を見計らって(例えば、数秒程度の所定時間経過後に)重量センサ111の出力(m1(n+1),m2(n+1),m3(n+1),m4(n+1))を再度読み取る。そして、位置計算手段112で、再度読み取られた重量すなわち新たに置かれた対象物品A20の重量と位置を計算する。この時、
(数5)
=m1(n+1)−m1(n)
=m2(n+1)−m2(n)
=m3(n+1)−m3(n)
=m4(n+1)−m4(n)
として、前に示したように重量m(正値)は、
(数6)
m=m+m+m+m
となり、新たに置かれた対象物品A20の座標位置(x,y)は、
(数7)
(x,y)=(b・(m+m)/m,a・(m+m)/m)
となる。
In step 602, the output value of the weight sensor 111 is compared with the output value of the weight sensor 111 stored in the target article information storage unit 106 by the control unit 107, and the output value of the weight sensor 111 increases. The control means 107 determines whether or not the article has been placed on the plate-like structure 110 by determining whether or not the control means 107 has determined. If the control unit 107 determines that the output of the weight sensor 111 has increased, the output of the weight sensor 111 (m 1 (n + 1)) is estimated when the value is stabilized (for example, after a predetermined time of about several seconds ). , M 2 (n + 1) , m 3 (n + 1) , m 4 (n + 1) ) are read again. Then, the position calculation means 112 calculates the weight read again, that is, the weight and position of the newly placed target article A20. At this time,
(Equation 5)
m 1 = m 1 (n + 1) −m 1 (n)
m 2 = m 2 (n + 1) −m 2 (n)
m 3 = m 3 (n + 1) −m 3 (n)
m 4 = m 4 (n + 1) -m 4 (n)
As shown above, the weight m (positive value) is
(Equation 6)
m = m 1 + m 2 + m 3 + m 4
The coordinate position (x, y) of the newly placed target article A20 is
(Equation 7)
(X, y) = (b · (m 2 + m 4 ) / m, a · (m 1 + m 2 ) / m)
It becomes.

次に、ステップ603で、物品情報取得手段103の一例としてのタグリーダを制御手段107により動作させ、板状構造体110上の、すべての対象物品(新たに置かれた対象物品A20を含むすべての対象物品)A1,A5,A20のタグを読み取って、すべての対象物品A1,A5,A20のIDを物品情報取得手段103で取得する。   Next, in step 603, a tag reader as an example of the article information acquisition unit 103 is operated by the control unit 107, and all target articles (including the newly placed target article A20) on the plate-like structure 110 are operated. Target articles) The tags of A1, A5, A20 are read, and the IDs of all target articles A1, A5, A20 are acquired by the article information acquisition means 103.

そして、ステップ604では、板状構造体110上に載置されていた物品A1,A5のIDは対象物品情報記憶手段105にすべて蓄積されているので、制御手段107により、新たに対象物品A20が置かれた後に読み取られて物品情報取得手段103で取得された物品A1,A5,A20のIDと対象物品情報記憶手段105に蓄積されている物品A1,A5のIDとを制御手段107により比較して、対象物品情報記憶手段106に存在しない物品A20のIDを制御手段107により特定する。ここで、もし、追加された物品のIDが複数検出された場合には、それらの物品のIDをまとめて対象物品情報記憶手段106に記憶しておく。   In step 604, since all the IDs of the articles A1 and A5 placed on the plate-like structure 110 are accumulated in the target article information storage unit 105, the control unit 107 newly adds the target article A20. The control means 107 compares the IDs of the articles A1, A5 and A20 read after being placed and acquired by the article information acquisition means 103 with the IDs of the articles A1 and A5 stored in the target article information storage means 105. Thus, the control means 107 identifies the ID of the article A20 that does not exist in the target article information storage means 106. Here, if a plurality of IDs of added articles are detected, the IDs of these articles are collectively stored in the target article information storage unit 106.

そして、ステップ605で、取得された、重量m、座標位置(x,y)及び物品情報(少なくとも追加された物品A20のID)とを組にして、前記対象物品情報記憶手段106に蓄積する。   In step 605, the acquired weight m, coordinate position (x, y), and article information (at least the ID of the added article A20) are combined and stored in the target article information storage unit 106.

逆に、物品が情報提示装置101から取り除かれた場合について説明する。図9には物品を取り去るときのフローチャートも含まれている。物品を板状構造体110に載せる時と同様に、情報提示装置101の板状構造体110には複数の物品A1,A5が載せられているとする。この時の状況として、4個の各重量センサ111の出力m1(n),m2(n),m3(n),m4(n)が対象物品情報記憶手段106に記憶されている。そこから、ある物品A5を板状構造体110から取り去るような状況を考える。 Conversely, a case where an article is removed from the information presentation apparatus 101 will be described. FIG. 9 also includes a flowchart for removing the article. As in the case of placing an article on the plate-like structure 110, it is assumed that a plurality of articles A1, A5 are placed on the plate-like structure 110 of the information presentation apparatus 101. As the situation at this time, outputs m 1 (n) , m 2 (n) , m 3 (n) , and m 4 (n) of each of the four weight sensors 111 are stored in the target article information storage unit 106. . Then, consider a situation where an article A5 is removed from the plate-like structure 110.

ステップ601及びステップ602で重量が増加していないと制御手段107が判断すれば、ステップ606で、重量センサ111の出力が減るかどうかを制御手段107が判断し、重量センサ111の出力が減ったと制御手段107が判断することで物品A5が取り去られたことを知る。もし、重量センサ111の出力が減少したと制御手段107が判断すれば、その値が安定した頃を見計らって(例えば、数秒程度の所定時間経過後に)重量センサ111の出力(m1(n+1),m2(n+1),m3(n+1),m4(n+1))を再度読み取る。そして、位置計算手段112で、再度読み取られた重量すなわち取り去られた物品A5の重量と位置を計算する。この時、
(数8)
=m1(n+1)−m1(n)
=m2(n+1)−m2(n)
=m3(n+1)−m3(n)
=m4(n+1)−m4(n)
として、前に示したように重量m(負値)は、
(数9)
m=m+m+m+m
となり、取り去られた対象物品A5の座標位置(x,y)は、
(数10)
(x,y)=(b・(m+m)/m,a・(m+m)/m)
となる。
If the control means 107 determines that the weight has not increased in step 601 and step 602, the control means 107 determines whether or not the output of the weight sensor 111 decreases in step 606, and the output of the weight sensor 111 has decreased. The control means 107 knows that the article A5 has been removed. If the control unit 107 determines that the output of the weight sensor 111 has decreased, the output of the weight sensor 111 (m 1 (n + 1)) is estimated when the value becomes stable (for example, after a predetermined time of about several seconds ). , M 2 (n + 1) , m 3 (n + 1) , m 4 (n + 1) ) are read again. Then, the position calculation means 112 calculates the weight read again, that is, the weight and position of the removed article A5. At this time,
(Equation 8)
m 1 = m 1 (n + 1) −m 1 (n)
m 2 = m 2 (n + 1) −m 2 (n)
m 3 = m 3 (n + 1) −m 3 (n)
m 4 = m 4 (n + 1) -m 4 (n)
As shown above, the weight m (negative value) is
(Equation 9)
m = m 1 + m 2 + m 3 + m 4
The coordinate position (x, y) of the removed target article A5 is
(Equation 10)
(X, y) = (b · (m 2 + m 4 ) / m, a · (m 1 + m 2 ) / m)
It becomes.

次に、ステップ607で物品情報取得手段103の一例としてのタグリーダを制御手段107により動作させ、板状構造体110上の、すべての対象物品(取り去られた対象物品A5を除くすべての対象物品)A1のタグを読み取って、対象物品A20のIDを物品情報取得手段103で取得する。   Next, in step 607, a tag reader as an example of the article information acquisition unit 103 is operated by the control unit 107, and all target articles (all target articles except the removed target article A5) on the plate-like structure 110 are operated. ) The tag of A1 is read, and the ID of the target article A20 is acquired by the article information acquisition unit 103.

そして、ステップ608では、取り去る前の板状構造体110上の物品A5のIDは対象物品情報記憶手段105に蓄積されているので、物品A5が取り去られた後に読み取られて物品情報取得手段103で取得された物品A1のIDと対象物品情報記憶手段105に蓄積されている物品A1,A5のIDとを制御手段107により比較して、対象物品情報記憶手段106にしか存在しない物品A5のIDを制御手段107により特定する。ここで、もし、取り去られた物品のIDが複数検出された場合には、それらの物品のIDをまとめて対象物品情報記憶手段106に記憶しておく。   In step 608, since the ID of the article A5 on the plate-like structure 110 before being removed is stored in the target article information storage means 105, it is read after the article A5 is removed and read as the article information acquisition means 103. The control unit 107 compares the ID of the product A1 acquired in step S1 with the IDs of the products A1 and A5 stored in the target product information storage unit 105, and the ID of the product A5 that exists only in the target product information storage unit 106. Is specified by the control means 107. Here, if a plurality of IDs of the removed articles are detected, the IDs of these articles are collectively stored in the target article information storage unit 106.

そして、ステップ609で、取得された、重量(−m)、座標位置(x,、y)及び物品情報(少なくとも取り去られた物品A5のID)に対応する、前記対象物品情報記憶手段106内のエントリ(物品A5の記憶)を抹消する。この時、物品が追加されたときは複数の物品が同時に追加され、複数の物品の一部の物品を取り去る場合は、対象物品情報記憶手段106の複数の物品が組になっているエントリのうち、消滅した物品のIDのみを消し、重量(複数物品の合計)から消滅した物品の重量を差し引いておく。   Then, in step 609, in the target article information storage means 106 corresponding to the acquired weight (−m), coordinate position (x, y), and article information (at least the ID of the removed article A5). Is deleted (stored in the article A5). At this time, when an article is added, a plurality of articles are added at the same time, and when a part of the plurality of articles is removed, a plurality of articles in the target article information storage unit 106 are grouped. Only the ID of the disappeared article is erased, and the weight of the disappeared article is subtracted from the weight (total of a plurality of articles).

なお、重量センサ111の出力の増加・減少が安定するのを見計らうとしたが、具体的には一定時間(1秒など)待つ、と決めておくことで実現できる。計時機能は、通常、CPU101Aの動作クロックを計数することで得ることができる。   Although the increase / decrease in the output of the weight sensor 111 is expected to stabilize, it can be realized by deciding to wait for a certain time (such as 1 second). The clocking function can usually be obtained by counting the operation clock of the CPU 101A.

さらに、物品が追加されたか又は物品が取り去られたかの判断は、重量センサ111の出力の和(m)が正か負かで制御手段107により判断する。また、物品が取り去られたことを重量が減少したタイミングで制御手段107により判断してもよい。また、物品が取り去られた場合は、重量や座標位置を計測するまでもなく、物品情報取得手段103の一例としてのタグリーダで検出された物品と前記対象物品情報記憶手段106内に記憶されている物品との間で、前記対象物品情報記憶手段106内にしかない物品が取り去られたとしてもよい。   Further, whether the article has been added or removed has been determined by the control means 107 based on whether the sum (m) of the outputs of the weight sensor 111 is positive or negative. Further, the control means 107 may determine that the article has been removed at the timing when the weight is reduced. Further, when the article is removed, it is not necessary to measure the weight or the coordinate position, and the article detected by the tag reader as an example of the article information acquisition unit 103 and the target article information storage unit 106 are stored. An article that is only in the target article information storage unit 106 may be removed from the existing article.

また、これまでは物品が追加・削除された場合について述べたが、物品が、料理を載せた食器である場合のように、ユーザーが料理を食したり、コップに追加の飲み物を注いだ場合にも重量が増減するが、ステップ603やステップ607で物品情報取得手段103の一例としてのタグリーダを動作させても、物品の数は変化しない。この場合は、重量が増減した物品の位置情報に基づき、制御手段107により、対象物品情報記憶手段106内に記憶されている物品を特定し、どの物品の重量が増減したかを知ることができる。例えば、増減が発生した位置と、対象物品情報記憶手段106内の各物品の位置との距離を制御手段107により求め、その距離が所定の値(料理皿であれば、皿の半径の1/2等)以下であれば、同一物品の重量が増減したと制御手段107により判断できる。   In addition, the case where an article has been added or deleted has been described so far, but when the user eats a dish or pours an additional drink into the cup, such as when the article is a dish with dishes. However, even if the tag reader as an example of the article information acquisition unit 103 is operated in step 603 or step 607, the number of articles does not change. In this case, based on the position information of the article whose weight has increased or decreased, the control means 107 can identify the article stored in the target article information storage means 106 and know which article has the weight increased or decreased. . For example, the control means 107 obtains the distance between the position where the increase / decrease occurs and the position of each article in the target article information storage means 106, and the distance is a predetermined value (in the case of a dish, 1 / of the radius of the dish). 2 or the like), the control means 107 can determine that the weight of the same article has increased or decreased.

図4Bはこのような情報提示装置101を食卓、キッチン、トレー等に設置し、その上に置かれた食品の名称、重量、カロリー、温度を表示している例である。図4Bにおいて、A1はご飯、A2はみそ汁、A3はビール、A4は焼き魚、P1はお盆である。温度は、図4Bに示したようにその温度に応じた表示色を用いて提示してもよい。なお、カロリーのように、その重量と食品の単位重量あたりのカロリーから計算するような場合、図7AのステップA05の後にそのような計算動作(ステップA06)が入る。   FIG. 4B is an example in which such an information presentation apparatus 101 is installed on a dining table, kitchen, tray, or the like, and the name, weight, calories, and temperature of food placed thereon are displayed. In FIG. 4B, A1 is rice, A2 is miso soup, A3 is beer, A4 is grilled fish, and P1 is a tray. The temperature may be presented using a display color corresponding to the temperature as shown in FIG. 4B. In addition, when calculating from the weight and the calorie per unit weight of food like calories, such calculation operation (step A06) enters after step A05 of FIG. 7A.

図4Bのような情報提示装置101は、飲食店でのトレーとして用いることができる。図7Aのフローチャートにあるように、トレーの上の料理の重量を逐次計測し、料理の総カロリー・摂取カロリー・残カロリー及び料金を所定の場所に提示することができる。   The information presentation apparatus 101 as shown in FIG. 4B can be used as a tray in a restaurant. As shown in the flowchart of FIG. 7A, the weight of the dish on the tray can be sequentially measured, and the total calorie, intake calorie, remaining calorie, and fee of the dish can be presented in a predetermined place.

図3(b)にも示したように、総カロリーを計算するために、各料理(食器毎に管理)の最大重量も求めて対象物品情報記憶手段106に記憶しておく。この最大重量を求める方法は、対象物品情報記憶手段106に記憶された対象物品のID毎に逐次重量を計測し(現重量)、対象物品の重量が増加した場合、その増加量を対象物品情報記憶手段106に記憶された最大重量に加算する。なお、各対象物品のIDの最大重量は、最初にその物品が置かれた時(対象物品情報記憶手段106に前記物品が登録された時)の重量が、制御手段107により設定されるものとする。同じ食器でお変わり(ご飯やビール)をした場合でも、総カロリーや料金を正しく計算できるようにする必要がある。   As shown in FIG. 3B, in order to calculate the total calories, the maximum weight of each dish (managed for each tableware) is also obtained and stored in the target article information storage means 106. In this method of obtaining the maximum weight, the weight is sequentially measured for each ID of the target article stored in the target article information storage unit 106 (current weight), and when the weight of the target article increases, the increase amount is determined as the target article information. Add to the maximum weight stored in the storage means 106. Note that the maximum weight of the ID of each target article is set by the control means 107 when the article is first placed (when the article is registered in the target article information storage means 106). To do. Even if you change with the same tableware (rice or beer), you need to be able to calculate the total calories and charges correctly.

図7Bは図7AのフローチャートのステップA06をさらに詳細にしたフローチャートである。なお、図7AのステップA04では物品の増減も含めた追加又は削除(つまり、状態が変化したということ)を検出するため、図7Bのフローチャートに示す処理は、すでに、物品が増加又は減少も含めた追加又は削除された場合にのみ行われることになる。そして、物品が増加又は追加した場合にのみ、ステップA08が実行される。これは、上記したように最大重量を求めるためである。   FIG. 7B is a flowchart in which step A06 of the flowchart of FIG. 7A is further detailed. Note that in step A04 in FIG. 7A, addition or deletion including the increase / decrease of articles (that is, that the state has changed) is detected, so the processing shown in the flowchart of FIG. 7B already includes the increase or decrease in articles. It will be done only when added or deleted. And step A08 is performed only when goods increase or are added. This is for obtaining the maximum weight as described above.

ステップA07:ステップA05で取得した、位置検出部102で得られた物品の位置などの物品情報、センシング装置108で得られた物品の重量や温度などの物品情報、及び物品情報取得手段103で得られた物品の属性情報などの物品情報に基づき、物品の重量が増えたか否か、又は、物品が追加されたか否かを制御手段107により判断する。物品の重量が増えた場合か、又は、物品が追加された場合にはステップA08に進む。物品の重量が増えず、かつ、物品が追加されていない場合にはステップA09に進む。   Step A07: Article information such as the position of the article obtained by the position detection unit 102 obtained in Step A05, article information such as the weight and temperature of the article obtained by the sensing device 108, and obtained by the article information obtaining unit 103. Based on the article information such as the attribute information of the given article, the control unit 107 determines whether the weight of the article has increased or whether the article has been added. If the weight of the article has increased or if an article has been added, the process proceeds to step A08. If the weight of the article does not increase and no article is added, the process proceeds to step A09.

ステップA08:重量が増加した物品毎に、対象物品情報記憶手段106の現重量(対象物品情報記憶手段106に記憶されていた重量)からの増加量を制御手段107により求め、前記対象物品情報記憶手段106の対応する対象物品IDの最大重量にその増加量を制御手段107により加算して、対象物品情報記憶手段106に記憶更新させる。   Step A08: For each article whose weight has increased, the control means 107 obtains an increase from the current weight of the target article information storage means 106 (the weight stored in the target article information storage means 106), and the target article information storage The increase amount is added to the maximum weight of the corresponding target article ID of the means 106 by the control means 107, and the target article information storage means 106 is stored and updated.

ステップA09:各物品(料理)毎に対象物品情報記憶手段106に記憶更新された最大重量から、その物品に用いてる食器の重量を制御手段107により減じることで、料理単体の重量を得る。そして、対象物品情報記憶手段106に記憶されている各料理の単位重量あたりのカロリーを料理単体の重量に制御手段107により乗じる。この計算を全ての料理に対して制御手段107により求め、制御手段107により合計することで、総カロリーを計算できる。   Step A09: The weight of the dish alone is obtained by subtracting the weight of the tableware used for the article from the maximum weight stored and updated in the target article information storage means 106 for each article (dish) by the control means 107. Then, the control unit 107 multiplies the weight of each dish by the calorie per unit weight of each dish stored in the target article information storage unit 106. The total calorie can be calculated by obtaining this calculation for all dishes by the control means 107 and totaling by the control means 107.

ステップA10:料金は、対象物品情報記憶手段106に記憶されている料理毎に決められた金額を制御手段107により合計することで求める。お変わりをした場合は、重量が増加した量に応じて制御手段107により加算する。   Step A10: The fee is obtained by adding the amount determined for each dish stored in the target article information storage means 106 by the control means 107. If there is a change, the control means 107 adds the weight according to the increased amount.

ステップA11:摂取カロリーは、各物品(料理)毎に対象物品情報記憶手段106に記憶された最大重量から現重量を制御手段107により減じることで、摂取した重量が求められ、各料理の単位重量あたりのカロリーを制御手段107により乗じる。この計算を全ての料理に対して制御手段107により求め、制御手段107により合計することで、摂取カロリーを計算できる。   Step A11: The calorie intake is obtained by subtracting the current weight from the maximum weight stored in the target article information storage means 106 for each article (dish) by the control means 107, and the ingested weight is obtained, and the unit weight of each dish The control means 107 multiplies the per-calorie. The calorie intake can be calculated by obtaining this calculation for all dishes by the control means 107 and summing them by the control means 107.

ステップA12:残カロリーは、総カロリーから摂取カロリーを制御手段107により減じることで得られる。   Step A12: The remaining calories are obtained by subtracting the intake calories from the total calories by the control means 107.

ステップA13:そして、制御手段107により提示位置制御手段105を制御して、情報提示装置101に載せられた料理の総カロリー、摂取カロリー、残カロリー、及び料金を所定の場所に提示する。   Step A13: Then, the presentation position control means 105 is controlled by the control means 107, and the total calories, intake calories, remaining calories, and charges of the dish placed on the information presentation apparatus 101 are presented at a predetermined place.

図8は、本情報提示装置101Eを飲食店のお盆に用いて、料理の総カロリー・摂取カロリー・残カロリー及び料金を提示している例である。さらに、認証部(ICカードリーダ、指紋又は虹彩認証部など)130、及び操作ボタン131,132を具備し、使用者がそのICカードを、お盆である情報提示装置101Eの認証部130にかざすと、精算をしていいかの確認メッセージが提示部104に提示される。もし、精算をしてよければ、「OK」の操作ボタン131を使用者が押すことで、通信手段109及びを介してつながっているクレジット会社のサーバー151Aから料金が飲食店に支払われる。もし、誤りがあれば「NG」の操作ボタン132を使用者が押して、店内の精算場所で精算をするといったことができる。   FIG. 8 is an example in which the present information presentation device 101E is used for a restaurant tray to present the total calories, ingested calories, remaining calories, and charges of a dish. Further, when an authentication unit (IC card reader, fingerprint or iris authentication unit, etc.) 130 and operation buttons 131 and 132 are provided, the user holds the IC card over the authentication unit 130 of the information presentation apparatus 101E serving as a tray. A confirmation message asking whether payment is allowed is presented to the presentation unit 104. If payment is OK, the user presses the “OK” operation button 131, and a fee is paid to the restaurant from the credit company server 151 </ b> A connected via the communication means 109. If there is an error, the user can press the “NG” operation button 132 and pay at the checkout location in the store.

このように構成すれば、健康を管理している人がカロリーの取り過ぎを管理することを支援したり、飲食店での精算を簡素化することが可能となるシステムを提供することが可能となる。   If constituted in this way, it is possible to provide a system that can help a person who is managing health manage managing excessive intake of calories or simplify settlement at a restaurant. Become.

以上のように、物品の位置及びその形状に応じて物品の情報(名称、現重量、カロリー等)を他の物品で隠れないよう考慮しながら、その物品が存在する場所付近に提示できるので、人は特別な装置を装着したり、物品情報を見るために別の場所(たとえば秤)に移動しなくてもよい。また、秤などとは異なり、複数の物品の情報を一度に視認可能である。   As described above, the information (name, current weight, calories, etc.) of the article can be presented in the vicinity of the place where the article exists while considering that the article information (name, current weight, calories, etc.) is not hidden by other articles. A person may not wear a special device or move to another location (eg, a scale) to view article information. Further, unlike a scale or the like, information on a plurality of articles can be viewed at a time.

(第2実施形態)
本発明の第2実施形態にかかる情報提示装置701は、第1実施形態の情報提示装置101にさらに人位置検出部702を設け、提示位置制御手段703が、人位置検出部702で検出された人の位置に応じて提示位置を制御する例を示す。人位置検出部702及び提示位置制御手段703以外の構成に関しては第1実施形態と同等である。
(Second Embodiment)
The information presentation device 701 according to the second embodiment of the present invention further includes a human position detection unit 702 in the information presentation device 101 of the first embodiment, and the presentation position control unit 703 is detected by the human position detection unit 702. The example which controls a presentation position according to a person's position is shown. The configuration other than the human position detection unit 702 and the presentation position control unit 703 is the same as that of the first embodiment.

図10A,図10Bは、人位置検出部702を含む情報提示装置701の一実現例を示している。この例では、長方形板状の情報提示装置701のすべての周囲すなわちすべての側面に、人位置検出部702の一例として焦電センサ等が複数(より具体的には、それぞれ、長辺側の側面には3個、短辺側の側面には2個)設置されており、人の近くにある焦電センサの電気的出力が最も大きく変化するため、電気的出力が最も大きく変化する焦電センサが配置されている側面の近くに人が居ることになり、人の位置(方向)を知ることができる。図10Bの場合には、情報提示装置701の右側の側面に配置されている2つの焦電センサの電気的出力がそれぞれ、他の側面の焦電センサの電気的出力よりも、最も大きく変化するため、情報提示装置701の右側の側面に人が居ることを検出することができる。すなわち、図11A,図11Bは、本第2実施形態における情報提示装置701を上から見た図である。人900が右の方に立っていると、情報提示装置701の右側の側面に取り付けられた焦電センサ702の出力分布が得られ、人900が立っている方向に対応する部分に焦電センサ702の出力のピークが現れる。人位置検出部702の一例である焦電センサ702の出力ピーク位置を制御手段107により検出することで、人900の位置(方向)を制御手段107により検出することができる。   10A and 10B show an implementation example of the information presentation device 701 including the human position detection unit 702. In this example, a plurality of pyroelectric sensors or the like as an example of the human position detection unit 702 are provided on all the circumferences, that is, on all side surfaces of the rectangular information presentation device 701 (more specifically, each side surface on the long side). 3 on the short side and 2 on the side of the short side) The electrical output of the pyroelectric sensor near the person changes the most, so the pyroelectric sensor that changes the electrical output the most There will be a person near the side where is placed, and the position (direction) of the person can be known. In the case of FIG. 10B, the electrical outputs of the two pyroelectric sensors arranged on the right side surface of the information presentation device 701 change most greatly than the electrical outputs of the pyroelectric sensors on the other side surfaces. Therefore, it can be detected that there is a person on the right side surface of the information presentation device 701. That is, FIGS. 11A and 11B are views of the information presentation apparatus 701 in the second embodiment as viewed from above. When the person 900 stands on the right side, an output distribution of the pyroelectric sensor 702 attached to the right side surface of the information presentation device 701 is obtained, and a pyroelectric sensor is provided in a portion corresponding to the direction in which the person 900 stands. An output peak at 702 appears. The control means 107 can detect the position (direction) of the person 900 by detecting the output peak position of the pyroelectric sensor 702 which is an example of the person position detection unit 702 by the control means 107.

なお、人位置検出部702としては、この例では焦電センサを用いたが、その他にも超音波センサ又は光電センサなどの障害物センサを用いても構わない。この場合は、障害物までの距離分布が求められるため、距離が変化する(短くなった)所に人がいると判断することで、人位置検出部を実現することができる。   As the human position detection unit 702, a pyroelectric sensor is used in this example, but an obstacle sensor such as an ultrasonic sensor or a photoelectric sensor may also be used. In this case, since the distance distribution to the obstacle is obtained, it is possible to realize the human position detection unit by determining that there is a person where the distance changes (shortens).

この他にも、人位置検出部702としては、情報提示装置701の設置環境内(天井や壁など)にカメラを設置し、人の位置を検出する方法も数多く提案されている。この場合、情報提示装置701に対する、人の相対位置を計測するために、情報提示装置701の位置が既知とするか、又は、情報提示装置701自体の位置・姿勢を前記カメラで認識する必要がある。後者の情報提示装置701の位置・姿勢をカメラで認識する場合、認識しやすくするために、提示部104に特殊な非当方性の画像パターン(矢印など)を表示する方法が適している。   In addition to this, many methods for detecting the position of a person by installing a camera in the installation environment (ceiling, wall, etc.) of the information presentation device 701 have been proposed as the person position detection unit 702. In this case, in order to measure the relative position of the person with respect to the information presentation device 701, the position of the information presentation device 701 needs to be known, or the position / posture of the information presentation device 701 itself needs to be recognized by the camera. is there. When the position / posture of the latter information presentation device 701 is recognized by a camera, a method for displaying a special non-directional image pattern (such as an arrow) on the presentation unit 104 is suitable for easy recognition.

さらに、第1実施形態では、前述では物品形状を得るために、物品情報取得手段(物品に取り付けられたRFIDタグ利用)などから直接得るとしていたが、カメラがあればその形状を計測したり、その際形状の計測がやりやすいように、提示部104に、ある色(青など)を表示する等の工夫が可能となる。   Furthermore, in the first embodiment, in order to obtain the article shape, the article information is obtained directly from the article information acquisition means (using an RFID tag attached to the article) or the like. At that time, it is possible to devise such as displaying a certain color (such as blue) on the presentation unit 104 so that the shape can be easily measured.

提示位置制御手段703は、位置検出部102で得られた対象物品の位置、物品情報取得手段103で得られた物品の形状及び重心位置、前記人位置検出部702で得られた人900がいる方向に基づき、物品の情報を提示する位置及び姿勢(文字列の傾き)を決定し、提示部104に表示する。図11Aは提示位置制御手段703で物品情報を表示する位置及び姿勢を決定する方法を説明する図である。まず、対象物品の位置から人900がいる方向へ直線L10を引く。次に、物品の位置801から対象物品の形状及び重心位置G1を中心とし対象物品の形状を内包する外接(楕)円C1を描く。そして、直線L10と外接(楕)円C1が交わる点より人側に、人900から見て読めるように文字の基準線L2を人の方向線L10と直交するように表示する。   The presentation position control unit 703 includes the position of the target article obtained by the position detection unit 102, the shape and center of gravity of the article obtained by the article information acquisition unit 103, and the person 900 obtained by the person position detection unit 702. Based on the direction, the position and orientation (inclination of the character string) for presenting the article information is determined and displayed on the presentation unit 104. FIG. 11A is a diagram for explaining a method for determining the position and orientation at which article information is displayed by the presentation position control means 703. First, a straight line L10 is drawn from the position of the target article in the direction in which the person 900 is present. Next, a circumscribed (elliptical) circle C1 including the shape of the target article is drawn from the position 801 of the article around the shape of the target article and the center of gravity G1. Then, the character reference line L2 is displayed so as to be orthogonal to the human direction line L10 so that it can be read from the person 900 from the point where the straight line L10 and the circumscribed (elliptical) circle C1 intersect.

さらに、他の物品も存在することを考慮して、他の物品に遮られないような場所に表示する。図11Bは、注目する物品の手前に他の物品が存在する状況を示した図である。物品A1の(人900から見て)手前左に物品A11が存在する。この場合も図11Aと同様の方法で文字の基準線L2を求めるところまでは同様であるが、物品A11に表示が隠れないように図11Bの上方向へ表示位置をシフトする。   Further, in consideration of the existence of other articles, the display is made at a place where the other articles do not block. FIG. 11B is a diagram illustrating a situation in which another article exists before the article of interest. The article A11 exists on the left side of the article A1 (as viewed from the person 900). In this case as well, the process is the same until the character reference line L2 is obtained by the same method as in FIG. 11A, but the display position is shifted upward in FIG. 11B so that the display is not hidden by the article A11.

以上のような各手段を用いて、制御手段107は、先の実施形態と同様に、二次記憶装置(ハードディスク等)101Cに記憶されたプログラムをロードし実行することで、情報提示装置701の動作を制御する。   Using the above-described units, the control unit 107 loads and executes a program stored in the secondary storage device (hard disk or the like) 101C in the same manner as in the previous embodiment, so that the information presentation device 701 Control the behavior.

図12は本第2実施形態の動作を説明するフローチャートである。図12のフローチャートを用いて、制御手段107による制御の下で行われる情報提示装置701の動作を説明する。   FIG. 12 is a flowchart for explaining the operation of the second embodiment. The operation of the information presentation apparatus 701 performed under the control of the control unit 107 will be described using the flowchart of FIG.

ステップB01:人位置検出部702で人900の位置を求める。   Step B01: The position of the person 900 is obtained by the person position detecting unit 702.

ステップB02:対象物品情報記憶手段106に記憶された物品情報及び人位置検出部702で得られた人位置情報に基づき、提示位置制御手段703を用いて提示位置を求める。ここで、対象物品情報記憶手段106に物品情報が一つも記憶されていない場合は、何もしない。   Step B02: Based on the article information stored in the target article information storage means 106 and the person position information obtained by the person position detecting unit 702, the presentation position is obtained using the presentation position control means 703. If no item information is stored in the target item information storage unit 106, nothing is done.

ステップB03:対象物品情報記憶手段106に記憶された各物品情報に対して、求めた提示位置に基づき、提示部104の情報提示を更新する。ステップB02で対象物品情報記憶手段106に物品情報が一つも記憶されていないために何もしなかった場合は、ここでも情報提示の更新はしない。   Step B03: The information presentation of the presentation unit 104 is updated based on the obtained presentation position for each piece of article information stored in the target article information storage unit 106. If nothing is done because no article information is stored in the target article information storage means 106 in step B02, the information presentation is not updated here either.

ステップB04:板状構造体110に対して対象物品の追加又は削除があったか否かを位置検出部102により検出する。ステップB02で対象物品情報記憶手段106に物品情報が一つも記憶されていないために何もしなかった場合でも、対象物品の追加又は削除があったか否かを検出して、以下のステップに進む。   Step B04: The position detection unit 102 detects whether or not the target article has been added to or deleted from the plate-like structure 110. Even if nothing is done because no article information is stored in the target article information storage means 106 in step B02, it is detected whether or not the target article has been added or deleted, and the process proceeds to the following steps.

ステップB05:もし、物品が追加又は削除されたと位置検出部102で検出された場合には、ステップB06へ進み、物品が追加又は削除されたことが位置検出部102で検出されなかった場合はステップB01に処理を戻す。すなわち、物品が追加又は削除されたと位置検出部102で検出されるまで、次のステップB06へは進まない。   Step B05: If the position detection unit 102 detects that an article has been added or deleted, the process proceeds to step B06. If the position detection unit 102 has not detected that an article has been added or deleted, step B05 is performed. Return the process to B01. That is, the process does not proceed to the next step B06 until the position detection unit 102 detects that an article has been added or deleted.

ステップB06:ステップB05において、物品が追加又は削除されたと位置検出部102で検出された場合は、位置検出部102で得られた物品の位置などの物品情報、センシング装置108で得られた物品の重量や温度などの物品情報、及び物品情報取得手段103で得られた物品の属性情報などの物品情報をそれぞれ検出し、対象物品情報記憶手段106の対応する物品の情報を書き換えて終了する。   Step B06: If the position detection unit 102 detects that an article has been added or deleted in step B05, the article information such as the position of the article obtained by the position detection unit 102, or the article obtained by the sensing device 108 Article information such as article information such as weight and temperature and article attribute information obtained by the article information acquisition unit 103 is detected, and the corresponding article information in the target article information storage unit 106 is rewritten, and the process ends.

以上の動作を繰り返し行うことで、常に情報提示装置701の上に置かれた物品の最新情報を人の位置も加味しながら提示部104に表示することが可能である。   By repeatedly performing the above operation, it is possible to always display the latest information on the article placed on the information presentation device 701 on the presentation unit 104 while taking into account the position of the person.

以上のような構成によれば、人の立っている場所や、その他の物品の位置に応じて対象物品の情報を、その人が認識しやすいように前記対象物品の位置付近に表示することが可能となる。   According to the above configuration, the information on the target article can be displayed near the position of the target article so that the person can easily recognize the information according to the place where the person is standing or the position of the other article. It becomes possible.

(第3実施形態)
本発明の第3実施形態にかかる情報提示装置901は、第2実施形態にかかる情報提示装置701に、さらに認証部902、提示方法制御手段903を設け、その人が誰かに応じて提示する方法を制御するものである。認証部902及び提示方法制御手段903以外の構成に関しては第2実施形態と同等である。
(Third embodiment)
An information presentation apparatus 901 according to the third embodiment of the present invention is provided with an authentication unit 902 and a presentation method control unit 903 in addition to the information presentation apparatus 701 according to the second embodiment, and presents the person according to who the person is. Is to control. The configuration other than the authentication unit 902 and the presentation method control unit 903 is the same as that of the second embodiment.

図13A及び図13Bは、認証部902を有する情報提示装置901の一実現例を示している。この例では、情報提示装置901に認証部902として指紋認識技術が用いられており、人がそこに指で触れることでその人が誰であるかを認識し、その人に応じた表示の仕方を行うことができる。例えば、その人が子供であれば、表示する文字を平仮名でかつ大きな文字にするとか、老人であれば文字を大きくするとか、色盲の人であれば見やすい色で表示する等、である。   FIG. 13A and FIG. 13B show an implementation example of the information presentation device 901 having the authentication unit 902. In this example, fingerprint recognition technology is used as the authentication unit 902 in the information presentation device 901, and a person touches the finger with the finger to recognize who the person is and how to display according to the person It can be performed. For example, if the person is a child, the characters to be displayed are hiragana and large characters, the characters are enlarged if they are elderly people, or they are displayed in easy-to-see colors if they are color blind.

認証部902として、指紋認識技術を用いる場合、家庭内であれば家族全員の指紋を認証部902内の記憶部にあらかじめ登録しておき、使用時に指を置くことにより、認証部902により認証する。指紋認識技術はすでに実用化されており、詳細については省略する。また、家庭であれば、家族用にボタン(例えば6個のボタン)を認証部902として具備し、各ボタンに家族のそれぞれの人を割り当てておくことで、使用する前に、自身に割り当てられたボタンを押すことで利用者を特定することができる。さらに、年齢毎に割り当てられたボタンを用意することも可能である。例えば、「4〜8歳」用ボタン(ひらがなで20ポイント)、「9歳〜40歳」用ボタン(漢字で12ポイント)、「41歳〜」用ボタン(漢字で24ポイント)等である。利用者は自分に合ったボタンを押すことが可能である。もちろん、大きな字を見たい利用者は、「41歳〜」用ボタンを押すことも可能である。   When fingerprint recognition technology is used as the authentication unit 902, the fingerprints of all the family members are registered in advance in the storage unit in the authentication unit 902 in the home and are authenticated by the authentication unit 902 by placing a finger during use. . Fingerprint recognition technology has already been put into practical use, and details are omitted. In the case of a home, a button for a family (for example, six buttons) is provided as an authentication unit 902, and by assigning each person of the family to each button, it is assigned to itself before use. The user can be specified by pressing the button. Furthermore, it is possible to prepare buttons assigned for each age. For example, a button for “4 to 8 years old” (20 points in hiragana), a button for “9 to 40 years old” (12 points in kanji), a button for “41 years old and up” (24 points in kanji), and the like. The user can press the button that suits him. Of course, the user who wants to see a large letter can also press the button for “41 years old-”.

提示方法制御手段903は、位置検出部102で得られた対象物品の位置、物品情報取得手段103で得られた形状及び重心位置、前記認証部902で得られた結果に基づき、物品の情報を提示する方法を図13Cに示したようなテーブル例に基づき決定し、提示部104に表示する。例えば、祖父が情報提示装置901を使用する場合、物品の情報は通常の文字種類(漢字仮名交じり文)で文字の大きさを24ポイントと大きめに表示する。   The presentation method control unit 903 obtains information on the article based on the position of the target article obtained by the position detection unit 102, the shape and the center of gravity obtained by the article information acquisition unit 103, and the result obtained by the authentication unit 902. The presentation method is determined based on the table example as shown in FIG. 13C and displayed on the presentation unit 104. For example, when the grandfather uses the information presenting apparatus 901, the article information is displayed in a normal character type (kanji-kana mixed text) and the size of the characters is displayed as large as 24 points.

以上のような各手段を用いて、制御手段904は、先の実施形態と同様に、二次記憶装置(ハードディスク等)101Cに記憶されたプログラムをロードし実行することで、情報提示装置901の動作を制御する。   Using the above-described units, the control unit 904 loads and executes a program stored in the secondary storage device (hard disk or the like) 101C, as in the previous embodiment, so that the information presentation device 901 Control the behavior.

図14は本第3実施形態の動作を説明するフローチャートである。図14のフローチャートを用いて、制御手段904による制御の下で行われる情報提示装置901の動作を説明する。   FIG. 14 is a flowchart for explaining the operation of the third embodiment. The operation of the information presentation apparatus 901 performed under the control of the control unit 904 will be described using the flowchart of FIG.

ステップC01:対象物品情報記憶手段106に記憶された物品情報及び人位置検出部702で得られた人位置情報に基づき、提示位置制御手段703を用いて提示位置を求める。ここで、対象物品情報記憶手段に物品情報が一つも記憶されていない場合は、何もしない。   Step C01: Based on the article information stored in the target article information storage means 106 and the person position information obtained by the person position detection unit 702, a presentation position is obtained using the presentation position control means 703. If no item information is stored in the target item information storage unit, nothing is done.

ステップC02:認証部902でユーザーを特定する。   Step C02: The user is specified by the authentication unit 902.

ステップC03:特定されたユーザー情報に基づき提示方法制御手段903で提示方法を求める。   Step C03: The presentation method control means 903 obtains a presentation method based on the specified user information.

ステップC04:対象物品情報記憶手段106に記憶された各物品情報に対して、求めた提示位置に基づき、提示部104の情報提示を更新する。ステップC01で対象物品情報記憶手段106に物品情報が一つも記憶されていないために何もしなかった場合は、ここでも情報提示の更新はしない。   Step C04: The information presentation of the presentation unit 104 is updated based on the obtained presentation position for each piece of article information stored in the target article information storage unit 106. If nothing is done because no article information is stored in the target article information storage unit 106 in step C01, the information presentation is not updated here either.

ステップC05:板状構造体110に対して対象物品の追加又は削除があったか否かを位置検出部102により検出する。ステップC01で対象物品情報記憶手段106に物品情報が一つも記憶されていないために何もしなかった場合でも、対象物品の追加又は削除があったか否かを検出して、以下のステップに進む。   Step C05: The position detection unit 102 detects whether or not the target article has been added to or deleted from the plate-like structure 110. Even if nothing is done because no article information is stored in the target article information storage means 106 in step C01, it is detected whether or not the target article has been added or deleted, and the process proceeds to the following steps.

ステップC06:もし、物品が追加又は削除されたと位置検出部102で検出された場合には、ステップC07へ進み、物品が追加又は削除されたことが位置検出部102で検出されなかった場合はステップC01に処理を戻す。すなわち、物品が追加又は削除されたと位置検出部102で検出されるまで、次のステップC07へは進まない。   Step C06: If the position detection unit 102 detects that an article has been added or deleted, the process proceeds to step C07, and if the position detection unit 102 has not detected that an article has been added or deleted, the step Return processing to C01. That is, the process does not proceed to the next step C07 until the position detection unit 102 detects that an article has been added or deleted.

ステップC07:ステップC06において、物品が追加又は削除されたと位置検出部102で検出された場合は、位置検出部102で得られた物品の位置などの物品情報、センシング装置108で得られた物品の重量や温度などの物品情報、及び物品情報取得手段103で得られた物品の属性情報などの物品情報をそれぞれ検出し、対象物品情報記憶手段106の対応する物品の情報を書き換えて終了する。   Step C07: In step C06, when the position detection unit 102 detects that an article has been added or deleted, the article information such as the position of the article obtained by the position detection unit 102 or the article obtained by the sensing device 108 Article information such as article information such as weight and temperature and article attribute information obtained by the article information acquisition unit 103 is detected, and the corresponding article information in the target article information storage unit 106 is rewritten, and the process ends.

以上の動作を繰り返し行うことで、常に情報提示装置901の上に置かれた物品の情報を人が誰であるかに応じて提示部104に表示することが可能である。   By repeatedly performing the above operation, it is possible to always display the information of the article placed on the information presentation device 901 on the presentation unit 104 according to who the person is.

以上のように、その人が誰であるかや、その他の物品の位置に応じて対象物品の情報を、その人が認識しやすいように前記対象物品の位置付近に表示することが可能となる。   As described above, it is possible to display information on the target article in the vicinity of the position of the target article so that the person can easily recognize the information according to who the person is and the position of other articles. .

(第4実施形態)
本発明の第4実施形態は、第1実施形態〜第3実施形態のいずれかの情報提示装置を用いて、家庭内での作業支援の一例として調理支援を行うシステムに関するものである。ここでは、食材、食器、調理器具等の物品にはすべてRFIDタグが付されており、物品のIDより、食材、食器、調理器具等の使用の有無や位置を情報提示装置の位置検出部により検出できるとする。
(Fourth embodiment)
4th Embodiment of this invention is related with the system which performs cooking assistance as an example of work assistance in a home using the information presentation apparatus in any one of 1st Embodiment-3rd Embodiment. Here, RFID tags are attached to all items such as ingredients, tableware, and cooking utensils, and the presence / absence and position of the ingredients, tableware, and utensils are determined by the position detection unit of the information presentation device based on the ID of the item. It can be detected.

図15は、本情報提示装置を用いた調理支援システム1000の構成を示している。それぞれ第1〜第3実施形態のいずれか1つの情報提示装置である、一つ以上の情報提示装置1001及び1002を用いて、レシピの手順の提示及び管理を行うものであり、使用しようとする物品のIDが異なることにより調味料の使用間違いを制御手段107により指摘したり、重量センサ111からの出力により元々の重量から残量を引いて使用量を制御手段107により算出してその使用量の間違いを制御手段107により指摘したり、実際に使用したレシピを作業として第2制御手段1006によりレシピデータベース1003に記録することが可能である。そのため、情報提示装置1001及び1002には、それぞれ、さらに、インターネット150などを通じて外部の装置との通信を行う為の通信手段109と、外部からの提示指示に応じて所望の物品の情報表示を強調する強調提示制御手段1007を備えている。調理支援システム1000には、情報提示装置1001及び1002の他に、情報提示装置1001及び1002などと通信を行うための通信手段1009と、調理手順を示すレシピ情報を蓄えたレシピデータベース1003と、外部から制御できるコンロや電子レンジなどの調理機器1004と、マイク及びスピーカといった音声I/F1005と、そして、通信手段1009とレシピデータベース1003と調理機器1004と音声I/F1005とを動作制御する第2制御手段1006とを備えている。調理支援システム1000も、又、例えばコンピュータシステムを用いて実現できる。この場合、レシピデータベース1003は第2制御手段1006の記憶手段の中に構成したり、インターネット150を介してダウンロード可能である。また、指定した、あるレシピデータを用いて、情報提示装置1001及び1002、音声I/F1005、調理器具1004を制御し調理支援するプログラムも記憶装置に格納され、動作時にメモリ上に読み込まれ、CPUで実行される。   FIG. 15 shows a configuration of a cooking support system 1000 using the information presenting apparatus. Each of the information presentation devices 1001 and 1002, which is any one of the information presentation devices of the first to third embodiments, is used to present and manage the recipe procedure and is about to be used. The use of seasonings is pointed out by the control means 107 due to the difference in the ID of the article, or the amount used is calculated by the control means 107 by subtracting the remaining amount from the original weight by the output from the weight sensor 111. Can be pointed out by the control means 107, or the actually used recipe can be recorded as work in the recipe database 1003 by the second control means 1006. For this reason, the information presentation devices 1001 and 1002 further emphasize the communication means 109 for communicating with an external device through the Internet 150 or the like, and the information display of a desired article according to a presentation instruction from the outside. Emphasis presentation control means 1007 is provided. In addition to the information presentation devices 1001 and 1002, the cooking support system 1000 includes a communication unit 1009 for communicating with the information presentation devices 1001 and 1002, a recipe database 1003 storing recipe information indicating cooking procedures, and an external The second control for controlling the operation of the cooking device 1004 such as a stove or microwave oven, the voice I / F 1005 such as a microphone and a speaker, and the communication means 1009, the recipe database 1003, the cooking device 1004, and the voice I / F 1005. Means 1006. The cooking support system 1000 can also be realized using a computer system, for example. In this case, the recipe database 1003 can be configured in the storage means of the second control means 1006 or can be downloaded via the Internet 150. In addition, a program for controlling cooking by supporting the information presentation devices 1001 and 1002, the voice I / F 1005, and the cooking utensil 1004 using a specified recipe data is also stored in the storage device, and read into the memory during operation. Is executed.

図16は、前記調理支援システム1000が実際のキッチンに配置した図である。   FIG. 16 is a diagram in which the cooking support system 1000 is arranged in an actual kitchen.

以上のような構成において、第2制御手段1006が、先の実施形態の制御手段107と同様に、二次記憶装置(ハードディスク等)(図1Dの101C参照)に調理支援プログラムとして記憶されるように構成し、二次記憶装置(ハードディスク等)(図1Dの101C参照)に記憶された調理支援プログラムを主記憶装置(図1Dの101B参照)にロードしてCPU(図1Dの101A参照)が実行することで、調理支援システム1000の動作を制御するように構成している。図17は本第4実施形態の動作を説明するフローチャートである。図17のフローチャートを用いて調理支援システム1000の動作を説明する。   In the configuration as described above, the second control unit 1006 is stored as a cooking support program in the secondary storage device (hard disk or the like) (see 101C in FIG. 1D), similarly to the control unit 107 of the previous embodiment. The cooking support program stored in the secondary storage device (hard disk or the like) (see 101C in FIG. 1D) is loaded into the main storage device (see 101B in FIG. 1D) and the CPU (see 101A in FIG. 1D) By executing, the operation of the cooking support system 1000 is controlled. FIG. 17 is a flowchart for explaining the operation of the fourth embodiment. The operation of the cooking assistance system 1000 will be described using the flowchart of FIG.

まず、ステップ1101で、ユーザーが音声I/F1005等の入力部を用いて、今から作ろうとするメニュー(例えば「チャーハン」)を入力する。すると、レシピデータベース1003から料理「チャーハン」のレシピが主記憶装置(図1Dの101B参照)上に読み込まれる。レシピは、調理の手順が記述されており、具体的には、「肉を刻む:50g/人」、「ご飯を準備する:150g/人」、「ネギを刻む:30g/人」、・・・「中華鍋を用意する」、「油を熱する」、「卵を炒める:1個/人」、「ご飯を鍋に入れて炒める」、「塩を鍋に入れる:2g/人」・・・等の調理の手順が記述されている。レシピデータとしては、XMLベースの記述言語に基づいたものがいくつか提案されている。ステップ1102〜ステップ1106の間で、一つずつの手順を調理人に提示・作業待ち・作業記録を第2制御手段1006により行う。   First, in step 1101, the user inputs a menu (for example, “fried rice”) to be created from the input unit such as the voice I / F 1005. Then, the recipe of the dish “fried rice” is read from the recipe database 1003 onto the main memory (see 101B in FIG. 1D). The recipe describes the cooking procedure. Specifically, “cut meat: 50 g / person”, “prepared rice: 150 g / person”, “cut onion: 30 g / person”,...・ "Prepare Chinese wok", "Heat oil", "Fry eggs: 1 / person", "Fry rice in a pot", "Put salt in a pot: 2g / person"・ Cooking procedures such as are described. Several recipe data based on an XML-based description language have been proposed. Between step 1102 and step 1106, the second control means 1006 performs one-by-one procedures to the cook, waits for work, and records work.

まず、ステップ1103において、今、対象物品とする調理手順に関し、その作業内容を音声I/F1005から音声などで知らせる。また、作業内容に用いられる食材が置かれている場所も音声I/F1005から報知する。この際、調味料などは料理の味を大きく左右するものであるので、特に本情報提示装置1002の上に置いておき、使用する調味料及びその使用量を提示する。この場合、使用する調味料の情報のみを点滅表示など目立つように表示するのが望ましい。   First, in step 1103, regarding the cooking procedure to be the target article, the work content is notified from the voice I / F 1005 by voice or the like. In addition, the voice I / F 1005 notifies the location where the ingredients used for the work content are placed. At this time, since the seasoning and the like greatly affect the taste of the dish, it is particularly placed on the information presenting apparatus 1002 to present the seasoning to be used and its usage. In this case, it is desirable to display only the information on the seasoning to be used prominently such as blinking display.

ステップ1104では、その作業が終了したことを調理支援システム1000にユーザーが知らせるため、音声I/F1005等の入力部で、次に進む旨をユーザーが入力する。例えば、「つぎ」とユーザーが発声する等である。   In step 1104, in order for the user to notify the cooking support system 1000 that the work has been completed, the user inputs that the next step is to be performed at the input unit such as the voice I / F 1005. For example, the user utters “next”.

ステップ1105では、ユーザーである調理人が何の食材をどれだけどのように調理したかを、第2制御手段1006によりレシピデータベース1003に記録する。これは、レシピと少し異なった食材・分量を使用したときの記録のためであり、今後、家庭なりの味を出すために記録するものである。従って、このステップはなくても動作は可能である。   In step 1105, the second control means 1006 records in the recipe database 1003 what ingredients and how the ingredients are cooked by the cook who is the user. This is for recording when using ingredients / amount slightly different from the recipe, and will be recorded for a home-like taste in the future. Therefore, the operation is possible without this step.

ステップ1106では、次の手順を呼び出す。   In step 1106, the following procedure is called.

以上の動作を繰り返し、調理を進めてゆく。   Repeat the above operation to continue cooking.

以上のように、本情報提示装置を用い、実世界の物品の付近にその情報(例えば、調理に使用する調味料の分量)を表示することで、レシピ本やパソコンを見ながら調理をするのではなく、いつもと変わらない使い勝手のキッチンでより自然に情報(レシピの手順など)を提示でき、調理の手を休めることなく作業が可能となる。   As described above, by using this information presentation device and displaying the information (for example, the amount of seasoning used for cooking) in the vicinity of a real-world article, cooking while looking at a recipe book or PC In addition, information (recipe procedures, etc.) can be presented more naturally in a kitchen that is easy to use as usual, and work can be done without resting cooking.

なお、前記様々な実施形態のうちの任意の実施形態を適宜組み合わせることにより、それぞれの有する効果を奏するようにすることができる。   It is to be noted that, by appropriately combining any of the various embodiments, the effects possessed by them can be produced.

以上説明したように、本発明は、人に特別な装置を装着させるといった負担を負わせることなく、物品の情報を見やすく提示する情報提示装置について有用である。特に、本情報提示装置を用いて調理といった一連の作業手順を提示する調理支援システムに有用である。   As described above, the present invention is useful for an information presentation device that presents information on an article in an easy-to-see manner without burdening a person with a special device. In particular, the present information presentation apparatus is useful for a cooking support system that presents a series of work procedures such as cooking.

本発明の第1実施形態における情報提示装置の構成例を示すブロック図である。It is a block diagram which shows the structural example of the information presentation apparatus in 1st Embodiment of this invention. 本発明の第1実施形態における前記情報提示装置の一実現例の斜視図である。It is a perspective view of one example of realization of the information presenting device in a 1st embodiment of the present invention. 本発明の第1実施形態における前記情報提示装置の前記実現例の側面図である。It is a side view of the said implementation example of the said information presentation apparatus in 1st Embodiment of this invention. 本発明の第1実施形態における前記情報提示装置のより具体的な構成の図である。It is a figure of the more concrete structure of the said information presentation apparatus in 1st Embodiment of this invention. (a),(b)はそれぞれ前記第1実施形態の前記情報提示装置において位置計算手段の動作を具体的に説明するための補助図である。(A), (b) is an auxiliary figure for demonstrating concretely the operation | movement of a position calculation means in the said information presentation apparatus of the said 1st Embodiment, respectively. (a),(b)はそれぞれ前記第1実施形態の前記情報提示装置において対象物品情報記憶手段に記憶されたデータの一例を示す図である。(A), (b) is a figure which shows an example of the data each memorize | stored in the target article information storage means in the said information presentation apparatus of the said 1st Embodiment. 前記第1実施形態の前記情報提示装置においてセンシング装置として温度センサを用いる場合の情報提示装置の実現例を示す図である。It is a figure which shows the implementation example of the information presentation apparatus in the case of using a temperature sensor as a sensing apparatus in the said information presentation apparatus of the said 1st Embodiment. 前記第1実施形態の前記情報提示装置においてセンシング装置として温度センサを用いる場合の情報提示装置の応用例を示す図である。It is a figure which shows the application example of the information presentation apparatus in the case of using a temperature sensor as a sensing apparatus in the said information presentation apparatus of the said 1st Embodiment. 前記第1実施形態の前記情報提示装置において提示位置制御手段の動作を説明するための図である。It is a figure for demonstrating operation | movement of a presentation position control means in the said information presentation apparatus of the said 1st Embodiment. 前記第1実施形態の前記情報提示装置において前記提示位置制御手段の動作を説明するための図である。It is a figure for demonstrating operation | movement of the said presentation position control means in the said information presentation apparatus of the said 1st Embodiment. 前記第1実施形態の前記情報提示装置において提示位置制御手段の動作を示すフローチャートである。It is a flowchart which shows operation | movement of a presentation position control means in the said information presentation apparatus of the said 1st Embodiment. 本発明の第1実施形態における前記情報提示装置の動作を示すフローチャートである。It is a flowchart which shows operation | movement of the said information presentation apparatus in 1st Embodiment of this invention. 本発明の第1実施形態における前記情報提示装置の動作を示すフローチャートである。It is a flowchart which shows operation | movement of the said information presentation apparatus in 1st Embodiment of this invention. 本発明の第1実施形態における前記情報提示装置を料理を載せるお盆に適用した場合の図である。It is a figure at the time of applying the said information presentation apparatus in 1st Embodiment of this invention to the tray which mounts a dish. 本発明の第1実施形態における前記情報提示装置において、位置、物品情報の取得の動作を示すフローチャートである。5 is a flowchart showing an operation of acquiring position and article information in the information presentation device according to the first embodiment of the present invention. 本発明の第2実施形態において、人位置検出部を有する情報提示装置の構成例を示す概略ブロック図である。In 2nd Embodiment of this invention, it is a schematic block diagram which shows the structural example of the information presentation apparatus which has a person position detection part. 本発明の第2実施形態において、前記人位置検出部を有する前記情報提示装置の斜視図である。In 2nd Embodiment of this invention, it is a perspective view of the said information presentation apparatus which has the said person position detection part. 本発明の第2実施形態において、前記人位置検出部を有する前記情報提示装置の提示位置制御手段の動作を説明するための図である。In 2nd Embodiment of this invention, it is a figure for demonstrating operation | movement of the presentation position control means of the said information presentation apparatus which has the said person position detection part. 本発明の第2実施形態において、前記人位置検出部を有する前記情報提示装置の前記提示位置制御手段の動作を説明するための図である。In 2nd Embodiment of this invention, it is a figure for demonstrating operation | movement of the said presentation position control means of the said information presentation apparatus which has the said person position detection part. 本発明の第2実施形態の前記情報提示装置の動作を示すフローチャートである。It is a flowchart which shows operation | movement of the said information presentation apparatus of 2nd Embodiment of this invention. 本発明の第3実施形態において、認証手段を有する情報提示装置の構成例を示す概略ブロック図である。In 3rd Embodiment of this invention, it is a schematic block diagram which shows the structural example of the information presentation apparatus which has an authentication means. 本発明の第3実施形態において、前記認証手段を有する前記情報提示装置の斜視図である。In 3rd Embodiment of this invention, it is a perspective view of the said information presentation apparatus which has the said authentication means. 本発明の第3実施形態において、前記認証手段を有する前記情報提示装置の対象物品情報記憶手段に記憶されたデータの一例を示す図である。In 3rd Embodiment of this invention, it is a figure which shows an example of the data memorize | stored in the target article information storage means of the said information presentation apparatus which has the said authentication means. 本発明の第3実施形態の前記情報提示装置の動作を示すフローチャートである。It is a flowchart which shows operation | movement of the said information presentation apparatus of 3rd Embodiment of this invention. 本発明の第4実施形態による情報提示装置を用いた調理支援システムの構成例を示す概略ブロック図である。It is a schematic block diagram which shows the structural example of the cooking assistance system using the information presentation apparatus by 4th Embodiment of this invention. 本発明の第4実施形態による前記情報提示装置を用いた前記調理支援システムを備えるキッチンを示した図である。It is the figure which showed the kitchen provided with the said cooking assistance system using the said information presentation apparatus by 4th Embodiment of this invention. 本発明の第4実施形態における前記調理支援システムの動作を示すフローチャートである。It is a flowchart which shows operation | movement of the said cooking assistance system in 4th Embodiment of this invention.

符号の説明Explanation of symbols

101・・・情報提示装置
102・・・位置検出部
103・・・物品情報取得手段
104・・・提示部
105・・・提示位置制御手段
106・・・対象物品情報記憶手段
107・・・制御手段
108・・・センシング装置
109・・・通信手段
110・・・板状構造体
111・・・重量センサ
112・・・位置計算手段
130・・・認証部
131,132・・・操作ボタン
150・・・インターネット
151,151A・・・サーバー
701・・・情報提示装置
702・・・人位置検出部
703・・・提示位置制御手段
900・・・人
901・・・情報提示装置
902・・・認証部
903・・・提示方法制御手段
1000・・・調理支援システム
1001,1002・・・情報提示装置
1003・・・レシピデータベース
1004・・・調理機器
1005・・・音声I/F
1006・・・第2制御手段
1007・・・強調提示制御手段
DESCRIPTION OF SYMBOLS 101 ... Information presentation apparatus 102 ... Position detection part 103 ... Article information acquisition means 104 ... Presentation part 105 ... Presentation position control means 106 ... Target article information storage means 107 ... Control Means 108 ... Sensing device 109 ... Communication means 110 ... Plate-like structure 111 ... Weight sensor 112 ... Position calculation means 130 ... Authentication units 131 and 132 ... Operation buttons 150 ··· Internet 151, 151A ··· Server 701 · · · Information presentation device 702 · · · Human position detection unit 703 · · · Presentation position control means 900 · · · Person 901 · · · Information presentation device 902 · · · Authentication Unit 903 ... presentation method control means 1000 ... cooking support systems 1001, 1002 ... information presentation device 1003 ... recipe database 1004 ... cooking Vessel 1005 ... voice I / F
1006 ... second control means 1007 ... emphasis presentation control means

Claims (8)

複数の物品の位置を検出する位置検出部と、
前記物品の属性情報を取得する物品情報取得手段と、
前記物品情報取得手段で取得された前記物品の前記属性情報を提示する提示部と、
前記位置検出部により検出された前記物品の前記位置に応じて、前記提示部による前記物品の前記属性情報を提示する実空間位置を制御する提示位置制御手段と、を備えることを特徴とする情報提示装置。
A position detector for detecting the positions of a plurality of articles;
Article information acquisition means for acquiring attribute information of the article;
A presentation unit for presenting the attribute information of the article acquired by the article information acquisition unit;
And a presentation position control means for controlling a real space position for presenting the attribute information of the article by the presentation unit in accordance with the position of the article detected by the position detection unit. Presentation device.
複数の物品の位置を検出する位置検出部と、
前記物品の状態情報を取得するセンシング装置と、
前記センシング装置で取得された前記物品の前記状態情報を提示する提示部と、
前記位置検出部により検出された前記物品の前記位置に応じて、前記提示部による前記物品の前記状態情報を提示する実空間位置を制御する提示位置制御手段と、を備えることを特徴とする情報提示装置。
A position detector for detecting the positions of a plurality of articles;
A sensing device for obtaining state information of the article;
A presentation unit for presenting the state information of the article acquired by the sensing device;
And a presentation position control means for controlling a real space position for presenting the state information of the article by the presentation unit according to the position of the article detected by the position detection unit. Presentation device.
前記センシング装置は、前記物品の前記状態情報として重量及び温度のいずれか少なく一方を検出することを特徴とする請求項2に記載の情報提示装置。   The information presenting apparatus according to claim 2, wherein the sensing device detects at least one of weight and temperature as the state information of the article. 前記物品の前記属性情報は形状情報を有し、前記提示位置制御手段は、前記物品あるいは前記物品以外の物品により隠蔽されない位置に、前記物品の前記属性情報を提示することを特徴とする請求項1に記載の情報提示装置。   The attribute information of the article has shape information, and the presentation position control means presents the attribute information of the article at a position that is not concealed by the article or an article other than the article. 1. The information presentation device according to 1. 人の位置を検出する人位置検出部をさらに有し、
前記提示位置制御手段は、前記物品の前記位置及び前記人の前記位置に応じて前記物品の前記属性情報を提示する実空間位置を制御することを特徴とする請求項1に記載の情報提示装置。
A human position detecting unit for detecting the position of the person;
The information presentation apparatus according to claim 1, wherein the presentation position control unit controls a real space position for presenting the attribute information of the article according to the position of the article and the position of the person. .
前記物品の前記属性情報は前記物品の形状情報を有し、前記提示位置制御手段は、前記物品により隠蔽されない位置でかつ前記人が存在する方向に前記物品の前記属性情報を提示することを特徴とする請求項5に記載の情報提示装置。   The attribute information of the article has shape information of the article, and the presentation position control means presents the attribute information of the article in a position that is not concealed by the article and in the direction in which the person exists. The information presentation apparatus according to claim 5. 人を認証する認証手段と、
前記認証手段により認証された前記人に応じて、前記物品の前記属性情報を提示する提示方法を制御する前記提示方法制御手段を有することを特徴とする請求項1に記載の情報提示装置。
An authentication means for authenticating a person;
The information presentation apparatus according to claim 1, further comprising: a presentation method control unit that controls a presentation method of presenting the attribute information of the article according to the person authenticated by the authentication unit.
調理を行うために料理の調理手順を提示する調理支援システムにおいて、
前記調理手順で使用する物品が存在する位置に応じて前記物品の属性情報を前記物品が存在する実空間に提示する少なくとも一つの、請求項1〜7のいずれか1つに記載の情報提示装置と、
前記調理手順を示すレシピ情報を記憶するレシピデータベースと、
前記情報提示装置により提示された情報と、前記レシピデータベースに記憶されたレシピ情報とに基づいて、前記調理手順の呼び出し指示を行うためのインタフェースとを備えることを特徴とする調理支援システム。
In a cooking support system that presents cooking procedures for cooking to cook,
The information presentation apparatus according to any one of claims 1 to 7, wherein at least one of the attribute information of the article is presented in a real space where the article exists according to a position where the article used in the cooking procedure exists. When,
A recipe database for storing recipe information indicating the cooking procedure;
A cooking support system comprising: an interface for instructing to call the cooking procedure based on information presented by the information presentation device and recipe information stored in the recipe database.
JP2004299943A 2004-10-14 2004-10-14 Information presenting device and cooking support system Pending JP2006113254A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2004299943A JP2006113254A (en) 2004-10-14 2004-10-14 Information presenting device and cooking support system

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2004299943A JP2006113254A (en) 2004-10-14 2004-10-14 Information presenting device and cooking support system

Publications (1)

Publication Number Publication Date
JP2006113254A true JP2006113254A (en) 2006-04-27

Family

ID=36381830

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2004299943A Pending JP2006113254A (en) 2004-10-14 2004-10-14 Information presenting device and cooking support system

Country Status (1)

Country Link
JP (1) JP2006113254A (en)

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2009169951A (en) * 2008-01-10 2009-07-30 Internatl Business Mach Corp <Ibm> Method, computer program and system (system and method for identifying object arranged on surface by using sensor)
JP2011215669A (en) * 2010-03-31 2011-10-27 Dainippon Printing Co Ltd System for calculation of meal intake
CN103617577A (en) * 2013-12-11 2014-03-05 邵俊松 Intelligent health kitchen system
JP2017181975A (en) * 2016-03-31 2017-10-05 シャープ株式会社 Display device
CN110613314A (en) * 2018-06-20 2019-12-27 佛山市顺德区美的电热电器制造有限公司 Cooking prompting method and device and storage medium
WO2020196445A1 (en) * 2019-03-27 2020-10-01 日本たばこ産業株式会社 Information processing device, program, and information presentation system
EP3951619A4 (en) * 2019-03-27 2022-12-14 Japan Tobacco Inc. Information processing device, program, and information provision system

Cited By (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2009169951A (en) * 2008-01-10 2009-07-30 Internatl Business Mach Corp <Ibm> Method, computer program and system (system and method for identifying object arranged on surface by using sensor)
JP2011215669A (en) * 2010-03-31 2011-10-27 Dainippon Printing Co Ltd System for calculation of meal intake
CN103617577A (en) * 2013-12-11 2014-03-05 邵俊松 Intelligent health kitchen system
CN103617577B (en) * 2013-12-11 2016-08-17 邵俊松 A kind of intelligent health kitchen system
JP2017181975A (en) * 2016-03-31 2017-10-05 シャープ株式会社 Display device
CN110613314A (en) * 2018-06-20 2019-12-27 佛山市顺德区美的电热电器制造有限公司 Cooking prompting method and device and storage medium
WO2020196445A1 (en) * 2019-03-27 2020-10-01 日本たばこ産業株式会社 Information processing device, program, and information presentation system
EP3951619A4 (en) * 2019-03-27 2022-12-14 Japan Tobacco Inc. Information processing device, program, and information provision system
JP7483685B2 (en) 2019-03-27 2024-05-15 日本たばこ産業株式会社 Information processing device, program, and information providing system

Similar Documents

Publication Publication Date Title
US10417825B2 (en) Interactive cubicle and method for determining a body shape
JP6070512B2 (en) Information processing apparatus, information processing method, and program
US20060085265A1 (en) System and method for restaurant electronic menu
JP4928592B2 (en) Image processing apparatus and program
US20200327782A1 (en) Presentation apparatus (iot)
JP6412577B2 (en) Presentation device (ICS connection)
CN111222569A (en) Method, device, electronic equipment and medium for identifying food
CN109243112A (en) A kind of open environment shopping control method and device
JP2006113254A (en) Information presenting device and cooking support system
TWI529674B (en) Presentation apparatus
JP6590005B2 (en) Electronic device and program
JP6660276B2 (en) Information processing apparatus, information processing system, information processing method, and program
JP2014123214A (en) Electronic apparatus
JP7054811B1 (en) Information provision method
JP2022095704A (en) Control method, information terminal, program, and recording medium
JP2014123215A (en) Electronic apparatus
JP2014123837A (en) Electronic apparatus
US10032292B2 (en) Interpreting texture in support of mobile commerce and mobility
JP6951215B2 (en) Wait time output device, wait time output system, and program
JP2011170797A (en) Order support system and order support method
JP7038313B1 (en) Information provision method, control method, communication terminal, program, and recording medium
WO2022254958A1 (en) Management system, management method, and program for managing products in unattended store
US11983762B2 (en) Information providing method, control method, communication terminal, and recording medium
WO2021229849A1 (en) Information providing method, control method, communication terminal, program, and recording medium
KR20220015767A (en) Non-face-to-face order payment method using the untact order payment system

Legal Events

Date Code Title Description
RD03 Notification of appointment of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7423

Effective date: 20061206