JP6755747B2 - Remaining amount judgment system - Google Patents
Remaining amount judgment system Download PDFInfo
- Publication number
- JP6755747B2 JP6755747B2 JP2016158300A JP2016158300A JP6755747B2 JP 6755747 B2 JP6755747 B2 JP 6755747B2 JP 2016158300 A JP2016158300 A JP 2016158300A JP 2016158300 A JP2016158300 A JP 2016158300A JP 6755747 B2 JP6755747 B2 JP 6755747B2
- Authority
- JP
- Japan
- Prior art keywords
- remaining amount
- unit
- voice
- article
- level
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000013500 data storage Methods 0.000 claims description 13
- 238000007726 management method Methods 0.000 claims description 11
- 235000013336 milk Nutrition 0.000 description 18
- 239000008267 milk Substances 0.000 description 18
- 210000004080 milk Anatomy 0.000 description 18
- 239000000284 extract Substances 0.000 description 12
- 230000006870 function Effects 0.000 description 6
- 206010041308 Soliloquy Diseases 0.000 description 4
- 235000013305 food Nutrition 0.000 description 3
- 238000000034 method Methods 0.000 description 3
- 230000000694 effects Effects 0.000 description 2
- 235000013601 eggs Nutrition 0.000 description 2
- 239000000463 material Substances 0.000 description 2
- 238000012935 Averaging Methods 0.000 description 1
- 239000004278 EU approved seasoning Substances 0.000 description 1
- 239000003599 detergent Substances 0.000 description 1
- 238000010586 diagram Methods 0.000 description 1
- 235000011194 food seasoning agent Nutrition 0.000 description 1
- 238000003384 imaging method Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 235000013555 soy sauce Nutrition 0.000 description 1
Images
Landscapes
- Management, Administration, Business Operations System, And Electronic Commerce (AREA)
Description
本発明は、物品の残量判定システムの技術に関する。 The present invention relates to a technique for determining the remaining amount of an article.
従来、物品の残量判定システムの技術は公知となっている。例えば、特許文献１に記載の如くである。 Conventionally, the technique of the remaining amount determination system for articles has been known. For example, as described in Patent Document 1.
特許文献１には、家庭の冷蔵庫や収納棚に収納されている食品や日用品の在庫量（残量）を検出及び管理する在庫情報管理装置が記載されている。また、特許文献１には、当該在庫情報管理装置がマイク等の音声認識部を備え、音声により物品の在庫量の入力を受け付けることができることが記載されている。 Patent Document 1 describes an inventory information management device that detects and manages the inventory amount (remaining amount) of foods and daily necessities stored in a refrigerator or a storage shelf at home. Further, Patent Document 1 describes that the inventory information management device includes a voice recognition unit such as a microphone and can accept input of an inventory amount of an article by voice.
しかしながら、特許文献１に記載の技術においては、利用者は、物品の正確な在庫量を把握して、且つ、意識的に音声入力する必要があり、このため利用者の負担が大きいという問題があった。 However, in the technique described in Patent Document 1, the user needs to grasp the accurate inventory amount of the article and consciously input the voice, which causes a problem that the burden on the user is heavy. there were.
本発明は以上の如き状況に鑑みてなされたものであり、その解決しようとする課題は、利用者の負担を軽減することができる残量判定システムを提供するものである。 The present invention has been made in view of the above circumstances, and the problem to be solved is to provide a remaining amount determination system that can reduce the burden on the user.
本発明の解決しようとする課題は以上の如くであり、次にこの課題を解決するための手段を説明する。 The problem to be solved by the present invention is as described above, and next, the means for solving this problem will be described.
即ち、請求項１においては、音声を取得する音声取得部と、取得された前記音声を文字情報として認識する音声認識部と、所定のキーワードと物品の残量を段階的に示す残量レベルとが互いに紐付けされた判定基準データを記憶する判定基準データ記憶部と、前記音声認識部によって認識された前記文字情報から前記所定のキーワードを抽出し、抽出した前記所定のキーワードと前記判定基準データとを照合することにより、物品の前記残量レベルを判定する残量判定部と、を具備するものである。 That is, in claim 1, a voice acquisition unit that acquires voice, a voice recognition unit that recognizes the acquired voice as character information, and a remaining amount level that gradually indicates the remaining amount of a predetermined keyword and an article. The predetermined keyword is extracted from the judgment standard data storage unit that stores the judgment standard data associated with each other and the character information recognized by the voice recognition unit, and the extracted predetermined keyword and the judgment standard data. It is provided with a remaining amount determination unit for determining the remaining amount level of the article by collating with.
請求項２においては、利用者に物品の補充の必要性を通知可能な通知部を具備し、前記通知部は、前記残量判定部によって判定された前記残量レベルに応じた通知を行うものである。 The second aspect of the present invention includes a notification unit capable of notifying the user of the necessity of replenishment of goods, and the notification unit gives a notification according to the remaining amount level determined by the remaining amount determination unit. Is.
請求項３においては、取得された前記音声を発した個人を識別する個人識別部を具備し、前記残量判定部は、前記個人識別部の識別結果に基づいて抽出された、特定の１以上の個人が発した音声を用いて、前記残量レベルを判定するものである。
In
請求項４においては、取得された前記音声を発した個人を識別する個人識別部を具備し、前記判定基準データは、前記所定のキーワードと前記残量レベルとが個人ごとに互いに紐付けされており、前記残量判定部は、前記個人識別部によって識別された個人の前記判定基準データを抽出し、抽出した前記判定基準データを用いて前記残量レベルを判定するものである。 In claim 4, the personal identification unit for identifying the acquired individual who has emitted the voice is provided, and in the determination criterion data, the predetermined keyword and the remaining amount level are associated with each other for each individual. The remaining amount determination unit extracts the determination standard data of the individual identified by the personal identification unit, and determines the remaining amount level using the extracted determination standard data.
請求項５においては、物品の画像を取得する画像取得部と、取得された前記画像に基づいて物品の個数を判定し、判定された物品の前記個数と前記残量判定部によって判定された当該物品の前記残量レベルとを互いに紐付けて記憶する在庫管理部と、を具備するものである。
In
請求項６においては、物品の補充履歴を取得する補充履歴データ取得部と、取得された前記補充履歴に基づいて、物品の残量が閾値以下となる時期を予測する予測部と、を具備するものである。 Claim 6 includes a replenishment history data acquisition unit that acquires the replenishment history of the article, and a prediction unit that predicts the time when the remaining amount of the article becomes equal to or less than the threshold value based on the acquired replenishment history. It is a thing.
本発明の効果として、以下に示すような効果を奏する。 As the effect of the present invention, the following effects are exhibited.
請求項１においては、利用者の負担を軽減することができる。 In claim 1, the burden on the user can be reduced.
請求項２においては、利用者は、物品の補充が必要な時期の目安を把握することができる。 In claim 2, the user can grasp a guideline for when the goods need to be replenished.
請求項３においては、残量レベルを判定するための音声を特定の人の音声に限定することができる。
In
請求項４においては、人の残量に対するとらえ方の違いを考慮して物品の残量レベルを判定することができるので、残量レベルの判定の精度を向上させることができる。 In claim 4, since the remaining amount level of the article can be determined in consideration of the difference in how the remaining amount of the person is perceived, the accuracy of determining the remaining amount level can be improved.
請求項５においては、物品の個数と残量レベルの両方を把握することで、物品の在庫を精度良く管理することができる。
In
請求項６においては、物品の補充が必要な時期を自動的に予測することができるので、利用者により有用なものとすることができる。 In claim 6, since the time when the article needs to be replenished can be automatically predicted, it can be made more useful to the user.
まず、図１を用いて、本発明の一実施形態に係る残量判定システム１の構成の概要について説明する。 First, with reference to FIG. 1, the outline of the configuration of the remaining amount determination system 1 according to the embodiment of the present invention will be described.
残量判定システム１は、物品の残量を判定するためのシステムである。残量判定システム１は、主に家庭で使用される。なお、本実施形態及び後述する第二実施形態から第四実施形態においては、父親、母親及び子供から構成される家庭を想定し、このうち母親が残量判定システム１の利用者（残量の判定結果を利用する者）であるものとして説明を行う。「物品」には、日々の生活において消費される常備品が含まれ、例えば牛乳や卵、調味料などの食品、トイレットペーパーや洗剤などの日用品が含まれる。また、残量判定システム１は、物品の残量の判定結果に基づいて、物品の補充が必要である旨を利用者に通知する。残量判定システム１は、音声取得装置１０、利用者端末２０及びサーバー１００を具備する。
The remaining amount determination system 1 is a system for determining the remaining amount of articles. The remaining amount determination system 1 is mainly used at home. In this embodiment and the second to fourth embodiments described later, a household composed of a father, a mother and a child is assumed, and the mother is a user of the remaining amount determination system 1 (remaining amount). The explanation will be given assuming that the person uses the judgment result). “Articles” include regular items that are consumed in daily life, such as foods such as milk, eggs, and seasonings, and daily necessities such as toilet paper and detergents. In addition, the remaining amount determination system 1 notifies the user that the article needs to be replenished based on the determination result of the remaining amount of the article. The remaining amount determination system 1 includes a
音声取得装置１０は、音声を取得するものである。音声取得装置１０としては、例えばマイクロフォンが使用される。音声取得装置１０は、家族の会話や独り言の音声を取得可能な位置に配置され、例えば冷蔵庫の近傍や収納棚の近傍に配置される。音声取得装置１０の数は、１つであってもよいし、複数であってもよい。
The
利用者端末２０は、残量判定システム１の利用者が使用する端末である。利用者端末２０としては、データを送受信可能な端末が用いられ、例えばパーソナルコンピュータや高機能携帯電話端末が用いられる。
The
サーバー１００は、データの格納や分析等を行うものである。サーバー１００は、音声認識部１１０、判定基準データ記憶部１２０、制御部１３０及び通知部１４０を具備する。
The
音声認識部１１０は、音声取得装置１０によって取得された音声を文字情報として認識するものである。音声認識部１１０は、音声認識機能を用いて、音声取得装置１０によって取得された音声をテキスト化する。これにより、音声取得装置１０は、音声取得装置１０によって取得された音声の文字情報を作成する。以下では、音声取得装置１０によって取得された音声の文字情報を、「音声テキスト」ということもある。
The
判定基準データ記憶部１２０は、物品の残量を判定する基準となる判定基準データを記憶するものである。判定基準データは、所定のキーワード及び残量レベルを含んでおり、両者は互いに紐付けされている。ここで、所定のキーワードとは、物品の残量を推定する鍵となる、予め決められた語句のことをいう。所定のキーワードには、物品の残量に関連する種々の語句を含めることができる。残量レベルは、物品の残量を段階的に示すものである。残量レベルは、物品の残量の大小（補充の必要性）によって、複数の段階（レベル）に区分されている。
The determination standard
図２は、判定基準データを規定する判定基準データテーブルを示す図である。判定基準データテーブルには、残量レベルと所定のキーワードとが紐付けられて記憶されている。残量レベルは、「充分レベル」、「許容レベル」及び「必要レベル」に区分されている。「充分レベル」は、残量が多く、未だ補充する必要のないことを示すものである。「許容レベル」は、残量が少なく、そろそろ補充の必要があることを示すものである。「必要レベル」は、残量が０であって、すぐに補充の必要があることを示すものである。充分レベルに紐付けされたキーワードは、特に規定されていない。許容レベルに紐付けされたキーワードには、例えば「まだ少し」、「あと少し」、「ちょっとある」などのワードが含まれている。必要レベルに紐付けされたキーワードには、例えば「もう無い」、「無くなった」、「買いに行かないと」などのワードが含まれている。 FIG. 2 is a diagram showing a determination criterion data table that defines determination criterion data. In the judgment standard data table, the remaining amount level and a predetermined keyword are associated and stored. The remaining amount level is divided into "sufficient level", "allowable level" and "necessary level". "Sufficient level" indicates that the remaining amount is high and does not need to be replenished yet. The "tolerance level" indicates that the remaining amount is low and it is time to replenish. The "required level" indicates that the remaining amount is 0 and needs to be replenished immediately. Keywords linked to a sufficient level are not specified. The keywords associated with the permissible level include words such as "still a little", "a little more", and "a little more". Keywords associated with the required level include words such as "no more", "lost", and "must go buy".
制御部１３０は、サーバー１００の制御を行うものである。特に、制御部１３０は、物品の残量（残量レベル）を判定するものである。制御部１３０は、音声認識部１１０によって作成された文字情報（音声テキスト）、及び判定基準データ記憶部１２０に記憶された判定基準データに基づいて、物品の残量レベルを判定する。
The
具体的には、制御部１３０は、音声認識部１１０によって作成された音声テキストから、残量に関連するキーワードを抽出する。そして、制御部１３０は、判定基準データ記憶部１２０の判定基準データテーブルを参照して（抽出したキーワードと判定基準データとを照合して）、抽出したキーワードと一致する所定のキーワードを選択する。そして、制御部１３０は、選択したキーワードに紐付けされた残量レベルに基づいて、残量レベルを判定する。
Specifically, the
また、制御部１３０は、音声認識部１１０によって作成された音声テキストに基づいて、対象物品（判定した残量レベルがどの物品についてのものであるか）を判定する。具体的には、制御部１３０は、音声認識部１１０によって作成された音声テキスト（特に、残量に関連するキーワードの前後の部分）から物品に関連する単語を抽出し、所定のデータを参照して物品を判定する。
Further, the
通知部１４０は、利用者に物品の補充の必要性を通知するものである。通知部１４０は、制御部１３０による制御に基づいて、利用者端末２０に対する通知を実行する。通知部１４０は、制御部１３０によって判定された残量レベルに応じた通知を実行する。具体的には、通知部１４０は、判定結果（残量レベル）が「充分レベル」である場合には、通知を行わない。通知部１４０は、判定結果が「許容レベル」である場合には、そろそろ補充の必要がある旨の通知（「そろそろ○○が切れそうなので、次回の買い物で買いましょう。」などの通知）を行う。また、通知部１４０は、判定結果が「必要レベル」である場合には、すぐに補充の必要がある旨の通知（「○○が切れています。買い物に行きましょう。」などの通知）を行う。
The
以下、図３を参照して、残量判定システム１の制御について説明する。 Hereinafter, the control of the remaining amount determination system 1 will be described with reference to FIG.
ステップＳ１０において、音声取得装置１０は、音声取得を行う。このステップにおいて、音声取得装置１０は、家族の会話や独り言の音声を取得する。音声取得装置１０によって取得される音声としては、例えば「醤油が無くなったよ」、「卵がもう少ししかないわ」、「牛乳がもう無いよ」などの音声を例示することができる。ここでは、音声取得装置１０は、「牛乳がもう無いよ」との音声を取得したとする。
In step S10, the
ステップＳ１１において、音声認識部１１０は、音声認識を行う。このステップにおいて、音声認識部１１０は、音声取得装置１０によって取得された「牛乳がもう無いよ」との音声をテキスト化して、音声テキストを作成する。
In step S11, the
ステップＳ１２において、制御部１３０は、物品の残量レベルを判定する。このステップにおいて、制御部１３０は、音声認識部１１０によって作成された音声テキスト、及び判定基準データ記憶部１２０に記憶された判定基準データテーブルを用いて、物品の残量レベルを判定する。
In step S12, the
具体的には、制御部１３０は、判定基準データテーブルに規定された所定のキーワードに基づいて、音声認識部１１０によって作成された音声テキストから、残量に関連するキーワードを抽出する。ここでは、制御部１３０は、判定基準データテーブルを参照し、「牛乳がもう無いよ」との音声テキストから、残量に関連するキーワードとして「もう無い」とのワードを抽出する。また、制御部１３０は、「牛乳がもう無いよ」との音声テキストに基づいて、対象物品が牛乳であると判定する。
Specifically, the
そして、制御部１３０は、抽出したキーワードと判定基準データとを照合することにより、抽出したキーワードに紐付けられた残量レベルを抽出する。具体的には、制御部１３０は、判定基準データテーブルを参照し、「もう無い」とのキーワードに紐付けられた残量レベルから、残量レベルが「必要レベル」であると判定する。
Then, the
ステップＳ１３において、制御部１３０は、通知部１４０を介して、利用者に物品の購入（補充）の必要性を通知させる。具体的には、制御部１３０は、ステップＳ１２で判定された残量レベルに対応する通知を実行するための通知信号を通知部１４０に送信する。ここでは、制御部１３０は、ステップＳ１２で判定された残量レベルが「必要レベル」であるので、すぐに補充の必要がある旨の通知を実行するための通知信号を通知部１４０に送信する。通知部１４０には、各残量レベルに応じてメッセージが予め記憶されている。通知部１４０は、所定の時刻になると、制御部１３０から供給された通知信号に基づいて、「牛乳が切れています。買い物に行きましょう。」とのメッセージを、利用者端末２０に送信する。メッセージが送信される時刻は、適宜の時刻に設定することができ、例えば利用者が普段家を出る時刻や、普段買い物をする時刻に設定することができる。
In step S13, the
このように、本実施形態に係る残量判定システム１においては、自動的に物品の残量（残量レベル）が判定される。したがって、利用者は、自ら物品の残量を管理する手間を省くことができる。また、残量レベルに応じた通知が利用者に対してなされるので、利用者は、物品の購入（補充）が今すぐ必要である、或いは次回の買い物時に購入しておく必要がある等、物品の購入が必要となる時期を把握することができる。 As described above, in the remaining amount determination system 1 according to the present embodiment, the remaining amount (remaining amount level) of the article is automatically determined. Therefore, the user can save the trouble of managing the remaining amount of the article by himself / herself. In addition, since notifications are given to the user according to the remaining amount level, the user needs to purchase (replenish) the goods immediately, or purchase them at the next shopping, etc. It is possible to grasp when it is necessary to purchase goods.
また、残量判定システム１においては、日々の生活における会話や独り言から物品の残量レベルを判定することができるので、わざわざ残量の入力を意識的に行わなくてもよい。したがって、残量の入力作業などの手間を減らすことができ、ひいては利用者の負担を軽減することができる。 Further, in the remaining amount determination system 1, since the remaining amount level of the article can be determined from conversations and soliloquy in daily life, it is not necessary to bother to input the remaining amount. Therefore, it is possible to reduce the labor of inputting the remaining amount and, by extension, the burden on the user.
また、本実施形態に係る残量判定システム１においては、利用者（本実施形態においては母親）が例えば外出中に利用者以外の家族が発した音声（例えば、父親と子供との会話、父親又は子供の独り言）からも残量判定を行うことができる。したがって、利用者は、ある物品の残量が少なくなっていた、或いは０になっていたことを認識していなかった場合でも、その旨を知ることが可能となる。 Further, in the remaining amount determination system 1 according to the present embodiment, a voice (for example, a conversation between a father and a child, a father) emitted by a family member other than the user while the user (mother in the present embodiment) is out. Alternatively, the remaining amount can be determined from the child's soliloquy). Therefore, the user can know that even if he / she is not aware that the remaining amount of a certain article is low or has become zero.
また、本実施形態に係る残量判定システム１においては、利用者自身（母親）が発した音声からも残量判定を行うことができる。利用者は、冷蔵庫を開けたときに、ある物品（食品）の残量が少なくなっている（或いは、０になっている）ことを一旦確認したとしても、時間が経過するとそのことを忘れてしまいがちである。しかしながら、残量判定システム１においては、所定の時刻（例えば、普段家を出る時刻、普段買い物する時刻など）に、物品の購入に関する通知がなされるように設定しておけば、買い忘れを防止することができる。 Further, in the remaining amount determination system 1 according to the present embodiment, the remaining amount determination can be performed from the voice emitted by the user himself / herself (mother). Even if the user once confirms that the remaining amount of a certain item (food) is low (or zero) when opening the refrigerator, he forgets that over time. It tends to end up. However, if the remaining amount determination system 1 is set so that a notification regarding the purchase of goods is given at a predetermined time (for example, the time when the person usually leaves the house, the time when he / she usually shop, etc.), he / she can prevent forgetting to buy. can do.
以上の如く、本実施形態に係る残量判定システム１は、音声を取得する音声取得装置１０（音声取得部）と、取得された前記音声を文字情報として認識する音声認識部１１０と、所定のキーワードと物品の残量を段階的に示す残量レベルとが互いに紐付けされた判定基準データを記憶する判定基準データ記憶部１２０と、前記音声認識部１１０によって認識された前記文字情報から前記所定のキーワードを抽出し、抽出した前記所定のキーワードと前記判定基準データとを照合することにより、物品の前記残量レベルを判定する制御部１３０（残量判定部）と、を具備するものである。
このように構成することにより、利用者の負担を軽減することができる。
As described above, the remaining amount determination system 1 according to the present embodiment includes a voice acquisition device 10 (voice acquisition unit) for acquiring voice, a
With such a configuration, the burden on the user can be reduced.
また、本実施形態に係る残量判定システム１は、利用者に物品の補充の必要性を通知可能な通知部１４０を具備し、前記通知部１４０は、前記制御部１３０によって判定された前記残量レベルに応じた通知を行うものである。
このように構成することにより、利用者は、物品の補充が必要な時期の目安を把握することができる。
Further, the remaining amount determination system 1 according to the present embodiment includes a
With this configuration, the user can grasp a guideline for when the article needs to be replenished.
なお、本実施形態に係る音声取得装置１０は、音声取得部の実施の一形態である。
また、本実施形態に係る制御部１３０は、残量判定部の実施の一形態である。
The
Further, the
以上、本発明の実施形態を説明したが、本発明は上記構成に限定されるものではなく、特許請求の範囲に記載された発明の範囲内で種々の変更が可能である。 Although the embodiments of the present invention have been described above, the present invention is not limited to the above configuration, and various modifications can be made within the scope of the invention described in the claims.
例えば、本実施形態においては、通知部１４０は、利用者端末２０にメッセージを通知するものとしたが、通知の形態はこれに限定されるものではなく、購入する必要のある物品を載せた買い物リストを通知するようにしてもよい。また、残量判定システム１が例えば一般の通販アプリケーションと連携すると、通知部１４０が利用端末２０にメッセージと共に（又はメッセージの代わりに）購入する必要のある物品を載せた商品注文画面を表示させることもできる。このような構成により、利用者は、利用端末２０に表示された商品注文画面を用いて必要な物品を購入することができるため、必要な物品を買い忘れすることなく、適切なタイミングで購入することができる。
For example, in the present embodiment, the
また、本実施形態においては、通知部１４０は、所定の時刻になると、利用者端末２０に通知を行うものとしたが、通知の形態はこれに限定されるものではなく、通知内容が所定の場所にアップロードされ、利用者が必要なときにアクセスできるようにしてもよい。
Further, in the present embodiment, the
また、判定基準データのキーワードは、図２に示す判断基準データテーブルに記載したものに限定されるものではなく、他の様々なワードを含めることができる。また、音声認識部１１０で作成された音声テキストの履歴に基づいて、キーワードを追加及び修正することができるようにしてもよい。また、判定基準データ記憶部１２０は、他の家庭で使用される残量判定システム１と連動してキーワードを追加及び修正することができるようにしてもよい。また、本実施形態に係る残量判定システム１は、学習機能を備え、キーワードと実際の残量に相違があった場合は、補正をかけるようにしてもよい。
Further, the keywords of the judgment standard data are not limited to those described in the judgment standard data table shown in FIG. 2, and various other words can be included. Further, keywords may be added and modified based on the history of the voice text created by the
また、本実施形態においては、判定基準データの残量レベルは３段階としたが、残量レベルの段階数は、これに限定されるものではなく、適宜の数とすることができる。また、残量レベルの区分の基準も適宜のものとすることができる。 Further, in the present embodiment, the remaining amount level of the determination reference data is set to three levels, but the number of steps of the remaining amount level is not limited to this, and can be an appropriate number. In addition, the criteria for classifying the remaining amount level can be set as appropriate.
また、本実施形態においては、残量判定システム１は家庭で使用されるものとしたが、使用の形態はこれに限定されるものではなく、様々な場所（例えば、ホテルや飲食店）で使用可能である。 Further, in the present embodiment, the remaining amount determination system 1 is used at home, but the mode of use is not limited to this, and is used in various places (for example, hotels and restaurants). It is possible.
また、例えば「あれ」や「これ」などの代名詞が使われて（話されて）物品が不明確な場合は、利用者が残量判定システム１に物品名を入力するようにしてもよい。また、例えば制御部１３０が自然言語理解機能を有し、当該制御部１３０によって会話の意図に基づいて前記代名詞が指す物品が判定されてもよい。このような構成によれば、利用者が意識的に物品名を入力しなくとも、前記代名詞が指す物品の残量レベルを判定することができる。
Further, for example, when a pronoun such as "that" or "this" is used (spoken) and the article is unclear, the user may input the article name into the remaining amount determination system 1. Further, for example, the
また、本実施形態においては、家族の会話などの音声から残量を判定するものとしたが、もちろん、利用者が音声取得装置１０に向かって意識的に残量を音声入力してもよい。
Further, in the present embodiment, the remaining amount is determined from the voice of a family conversation or the like, but of course, the user may consciously input the remaining amount by voice toward the
また、図４に示すように、残量判定システム１は、音声認識による判定の補助として、さらに購入履歴データ取得部１５０を具備していてもよい。購入履歴データ取得部１５０は、利用者端末２０などを介して入力された購入履歴データ（物品の購入日の履歴を示すデータ）を取得及び蓄積する。そして、制御部１３０は、購入履歴データに基づいて、購入日から次回の購入日までの日数を算出する。制御部１３０は、算出した日数を平均化することで、物品の残量が閾値以下となる（例えば０となる）日（購入予定日）を予測する。これにより、音声認識による判定がなされない場合（例えば、物品の残量に関する会話がなされない場合）でも、購入の必要な日を知ることができる。なお、購入履歴データには、物品を購入した量（購入量）を含めることができ、購入量を考慮して購入予定日の予測が行われるようにしてもよい。
Further, as shown in FIG. 4, the remaining amount determination system 1 may further include a purchase history
また、利用者の属性（家族人数、地域、収入など）を活用して、購入履歴データを取得及び蓄積してもよい。具体的には、属性が近い他の利用者とのマッチングを行い、マッチングした利用者の購入履歴データを購入日の予測に用いてもよい。これにより、予測の精度を向上させることができ、或いは初期のデータ未収集時にも購入予定日の予測が可能となる。 In addition, purchase history data may be acquired and accumulated by utilizing the attributes of the user (number of family members, area, income, etc.). Specifically, matching with other users having similar attributes may be performed, and the purchase history data of the matched users may be used for predicting the purchase date. As a result, the accuracy of the prediction can be improved, or the estimated purchase date can be predicted even when the initial data is not collected.
また、ＲＦＩＤタグを併用して、物品の管理空間（タグリーダーを設置した保管空間）からの物品の持ち出し回数（使用回数）を計数し、この使用回数を考慮して購入日を予測するようにしてもよい。具体的には、購入日のデータに加えて、購入日間の使用回数のデータを蓄積し、蓄積した購入日及び使用回数のデータに基づいて購入予定日を予測するようにしてもよい。これにより、より精度良く購入予定日の予測をすることができる。 In addition, RFID tags are also used to count the number of times the item is taken out (number of times of use) from the item management space (storage space where the tag reader is installed), and the purchase date is predicted in consideration of this number of times of use. You may. Specifically, in addition to the purchase date data, data on the number of times of use during the purchase day may be accumulated, and the planned purchase date may be predicted based on the accumulated data on the purchase date and the number of times of use. As a result, the estimated purchase date can be predicted more accurately.
以上の如く、本実施形態に係る残量判定システム１は、物品の購入履歴（補充履歴）を取得する購入履歴データ取得部１５０（補充履歴データ取得部）と、取得された前記購入履歴に基づいて、物品の残量が閾値以下となる時期を予測する制御部１３０（予測部）と、を具備するものである。
このように構成することにより、物品の購入（補充）が必要な時期を自動的に予測することができるので、利用者により有用なものとすることができる。
As described above, the remaining amount determination system 1 according to the present embodiment is based on the purchase history data acquisition unit 150 (replenishment history data acquisition unit) that acquires the purchase history (replenishment history) of the article and the acquired purchase history. The control unit 130 (prediction unit) for predicting the time when the remaining amount of the article becomes equal to or less than the threshold value is provided.
With such a configuration, it is possible to automatically predict when the purchase (replenishment) of the article is required, which can be more useful to the user.
次に、図５を用いて、本発明の第二実施形態に係る残量判定システム２の構成の概要について説明する。 Next, the outline of the configuration of the remaining amount determination system 2 according to the second embodiment of the present invention will be described with reference to FIG.
第二実施形態に係る残量判定システム２が、第一実施形態に係る残量判定システム１と異なる主な点は、サーバー１００に代えてサーバー２００を具備する点である。また、第二実施形態に係るサーバー２００が、第一実施形態に係るサーバー１００と異なる主な点は、個人識別部２１０をさらに具備する点である。よって以下では、第二実施形態に係る残量判定システム２のうち第一実施形態に係る残量判定システム１と同一の構成については、同一の符号を付して説明を省略する。
The main difference between the remaining amount determination system 2 according to the second embodiment and the remaining amount determination system 1 according to the first embodiment is that the
図５に示す如く、第二実施形態に係る残量判定システム２は、音声取得装置１０、利用者端末２０及びサーバー２００を具備する。サーバー２００は、音声認識部１１０、判定基準データ記憶部１２０、制御部１３０及び通知部１４０に加えて、個人識別部２１０を具備する。
As shown in FIG. 5, the remaining amount determination system 2 according to the second embodiment includes a
個人識別部２１０は、音声取得装置１０によって取得された音声を発した個人を識別するものである。個人識別部２１０は、話者認識機能を用いて、音声取得装置１０によって取得された音声が誰の音声であるかを識別する。
The
次に、図６を参照して、本発明の第二実施形態に係る残量判定システム２の制御について説明する。 Next, the control of the remaining amount determination system 2 according to the second embodiment of the present invention will be described with reference to FIG.
ステップＳ２０において、音声取得装置１０は、音声取得を行う（第一実施形態のステップＳ１０と同様）。ここでは、音声取得装置１０は、父親が話した「牛乳がもう無い」との音声、及び子供が話した「牛乳がまだ少しある」との音声を取得したとする。
In step S20, the
ステップＳ２１において、音声認識部１１０は、音声認識を行う（第一実施形態のステップＳ１１と同様）。このステップにおいて、音声認識部１１０は、音声取得装置１０によって取得された「牛乳がもう無い」との音声及び「牛乳がまだ少しある」との音声をテキスト化して、それぞれ音声テキストを作成する。
In step S21, the
ステップＳ２２において、個人識別部２１０は、音声取得装置１０によって取得された音声を発した個人を識別する。このステップにおいて、個人識別部２１０は、話者認識機能により、音声取得装置１０によって取得された「牛乳がもう無い」との音声が父親により発せられたものであり、「牛乳がまだ少しある」との音声が子供により発せされたものであると認識する。
In step S22, the
ステップＳ２３において、制御部１３０は、ステップＳ２２の識別結果に基づいて、音声テキストを抽出する。このステップにおいて、制御部１３０は、音声認識部１１０によって作成された音声テキストの中から、特定の１以上の個人が発した音声の音声テキストを抽出する。ここでは、制御部１３０は、父親及び母親の音声テキストを抽出し、子供の音声テキストを抽出しないように設定されているとする。制御部１３０は、父親の「牛乳がもう無い」との音声テキストを抽出する。
In step S23, the
ステップＳ２４において、制御部１３０は、ステップＳ２３で抽出した音声テキストを用いて、物品の残量レベルを判定する。このステップにおいて、制御部１３０は、父親の音声テキスト、及び判定基準データ記憶部１２０に記憶された判定基準データテーブルを用いて、物品の残量レベルを判定する。制御部１３０は、第一実施形態のステップＳ１２と同様に、判定基準データテーブルを参照し、「もう無い」とのキーワードに紐付けられた残量レベルから、残量レベルが「必要レベル」であると判定する。
In step S24, the
ステップＳ２５において、制御部１３０は、通知部１４０を介して、利用者に物品の補充の必要性を通知させる（第一実施形態のステップＳ１３と同様）。通知部１４０は、所定の時刻になると、すぐに牛乳を購入する必要がある旨を伝えるメッセージを、利用者端末２０に送信する。
In step S25, the
このように、第二実施形態においては、特定の個人が発した音声の音声テキストを用いて残量レベルの判定を行うので、残量レベルの判定の信頼性を向上させることができる。具体的には、第二実施形態においては、父親（及び母親）の音声のみを判定の材料とし、子供の音声を判定の材料から除外することで、子供がいたずらで実際の残量と異なる残量を言った場合に、誤った判定がなされるのを防止することができる。また、子供がまだ幼い等により残量を正確に理解できない場合にも、誤った判定がなされるのを防止することができる。 As described above, in the second embodiment, since the remaining amount level is determined by using the voice text of the voice uttered by a specific individual, the reliability of the remaining amount level determination can be improved. Specifically, in the second embodiment, only the voice of the father (and mother) is used as the judgment material, and the voice of the child is excluded from the judgment material, so that the child is mischievous and the remaining amount differs from the actual remaining amount. When the amount is said, it is possible to prevent an erroneous judgment from being made. In addition, it is possible to prevent an erroneous determination from being made even when the remaining amount cannot be accurately understood because the child is still young.
以上の如く、第二実施形態に係る残量判定システム２は、取得された前記音声を発した個人を識別する個人識別部２１０を具備し、前記制御部１３０は、前記個人識別部２１０の識別結果に基づいて抽出された、特定の１以上の個人が発した音声を用いて、前記残量レベルを判定するものである。
このように構成することにより、残量レベルを判定するための音声を特定の人の音声に限定することができる。これにより、残量レベルの判定の信頼性を向上させることができる。
As described above, the remaining amount determination system 2 according to the second embodiment includes the
With this configuration, the voice for determining the remaining amount level can be limited to the voice of a specific person. Thereby, the reliability of the determination of the remaining amount level can be improved.
次に、図７及び図８を用いて、本発明の第三実施形態に係る残量判定システム２の制御について説明する。なお、第三実施形態に係る残量判定システム２の構成は、第二実施形態と同様である。また、第三実施形態に係る残量判定システム２の制御は、図７に示すＳ３０からＳ３５までにより構成されるが、ステップＳ３０からＳ３２及びＳ３５はそれぞれ、第二実施形態のステップＳ２０からＳ２２及びＳ２５と同様の内容であるので、ここでは説明を省略する。 Next, the control of the remaining amount determination system 2 according to the third embodiment of the present invention will be described with reference to FIGS. 7 and 8. The configuration of the remaining amount determination system 2 according to the third embodiment is the same as that of the second embodiment. Further, the control of the remaining amount determination system 2 according to the third embodiment is configured by S30 to S35 shown in FIG. 7, but steps S30 to S32 and S35 are steps S20 to S22 of the second embodiment, respectively. Since the content is the same as that of S25, the description thereof will be omitted here.
ステップＳ３３において、制御部１３０は、ステップＳ３２で識別された個人の判断基準データテーブルを抽出する。
In step S33, the
図８に示すように、第三実施形態において判定基準データ記憶部１２０は、個人別に判定基準データテーブルを有している。各判定基準データテーブルにおいては、残量レベルと所定のキーワードとの紐付けが異なっている。例えば、父親用判定基準データテーブルにおいては、「買ってきて」とのキーワードに対して紐付けられた残量レベルは、「必要レベル」である（図８（ｂ）参照）。一方、子供用判定基準データテーブルにおいては、「買ってきて」とのキーワードに対して紐付けられた残量レベルは、「許容レベル」である（図８（ｃ）参照）。
As shown in FIG. 8, in the third embodiment, the determination standard
また、各判定基準データテーブルにおいては、規定されるキーワードが異なっている。例えば、「買いに行かないと」とのキーワードは、母親用判定基準データテーブルには含まれているが、父親用判定基準データテーブル及び子供用判定基準データテーブルには含まれていない。一方、「買ってきて」とのキーワードは、父親用判定基準データテーブル及び子供用判定基準データテーブルには含まれているが、母親用判定基準データテーブルには含まれていない。 In addition, the defined keywords are different in each judgment standard data table. For example, the keyword "I have to go buy" is included in the criteria data table for mothers, but is not included in the criteria data table for fathers and the criteria data table for children. On the other hand, the keyword "buy it" is included in the judgment standard data table for fathers and the judgment standard data table for children, but is not included in the judgment standard data table for mothers.
制御部１３０は、例えば音声テキストが母親のものである場合は、母親用判断基準データテーブルを抽出する。
For example, when the voice text belongs to the mother, the
ステップＳ３４において、制御部１３０は、ステップＳ３３で抽出した判断基準データテーブルを用いて、物品の残量レベルを判定する。このステップにおいて、制御部１３０は、音声認識部１１０で作成された音声テキスト、及び抽出した判定基準データテーブルを用いて、物品の残量レベルを判定する。
In step S34, the
このように、第三実施形態においては、個人ごとに用意された、残量レベルとキーワードとの紐付けが異なる判断基準データテーブルを用いて、残量レベルの判定を行う。例えば、「買ってきて」という言葉について、父親は残量が０になったときに言う、子供は残量が半分になってから言う等、人によって残量に対するとらえ方は様々である。第三実施形態においては、このような人の残量に対するとらえ方の違いを考慮して物品の残量レベルを判定することができるので、残量レベルの判定の精度を向上させることができる。 As described above, in the third embodiment, the remaining amount level is determined by using the determination standard data table prepared for each individual and having different associations between the remaining amount level and the keyword. For example, there are various ways of thinking about the remaining amount depending on the person, such as when the father says when the remaining amount is 0 and when the child says when the remaining amount is halved. In the third embodiment, the remaining amount level of the article can be determined in consideration of such a difference in how the person perceives the remaining amount, so that the accuracy of determining the remaining amount level can be improved.
また、第三実施形態においては、各判断基準データテーブルごとに、規定するキーワードが異なっている。よって、個人の言い回しを考慮したキーワードや、家庭での役割に応じたキーワードを規定することができる。したがって、残量に関連するキーワードの漏れを減少させることができる。 Further, in the third embodiment, the keywords to be defined are different for each judgment standard data table. Therefore, it is possible to specify keywords that take into consideration individual wording and keywords that match the role at home. Therefore, it is possible to reduce the omission of keywords related to the remaining amount.
以上の如く、第三実施形態に係る残量判定システム２は、取得された前記音声を発した個人を識別する個人識別部２１０を具備し、前記判定基準データは、前記所定のキーワードと前記残量レベルとが個人ごとに互いに紐付けされており、前記制御部１３０は、前記個人識別部２１０によって識別された個人の前記判定基準データを抽出し、抽出した前記判定基準データを用いて前記残量レベルを判定するものである。
このように構成することにより、人の残量に対するとらえ方の違いを考慮して物品の残量レベルを判定することができるので、残量レベルの判定の精度を向上させることができる。
As described above, the remaining amount determination system 2 according to the third embodiment includes the
With this configuration, the remaining amount level of the article can be determined in consideration of the difference in how the remaining amount of the person is perceived, so that the accuracy of determining the remaining amount level can be improved.
次に、図９を用いて、本発明の第四実施形態に係る残量判定システム３の構成の概要について説明する。
Next, with reference to FIG. 9, the outline of the configuration of the remaining
第四実施形態に係る残量判定システム３が、第一実施形態に係る残量判定システム１と異なる主な点は、画像撮影装置３０をさらに具備する点である。よって以下では、第四実施形態に係る残量判定システム３のうち第一実施形態に係る残量判定システム１と同一の構成については、同一の符号を付して説明を省略する。
The main difference between the remaining
第四実施形態に係る残量判定システム３は、画像認識及び音声認識の両方を用いて物品の在庫を管理するシステムである。残量判定システム３は、音声取得装置１０、利用者端末２０、画像撮影装置３０及びサーバー１００を具備する。
The remaining
画像撮影装置３０は、物品の画像を取得するものである。画像撮影装置３０は、物品の画像を取得可能な位置に配置され、例えば冷蔵庫の中に配置される。
The
次に、図１０を参照して、本発明の第四実施形態に係る残量判定システム３の制御について説明する。なお、第四実施形態に係る残量判定システム３の制御は、図１０に示すＳ４０からＳ４４までにより構成されるが、ステップＳ４０からＳ４２はそれぞれ、第一実施形態のステップＳ１０からＳ１２と同様の内容であるので、ここでは説明を省略する。
Next, the control of the remaining
ステップＳ４３において、制御部１３０は、画像撮影装置３０によって取得された画像を画像データとして認識する。制御部１３０は、画像認識機能によって、画像に映っている物品及び物品の個数や在庫期間などを判定する。そして、制御部１３０は、判定された物品の個数（及び在庫期間）と、ステップＳ４２で判定された残量レベルとを、互いに紐付けて記憶する。
In step S43, the
ステップＳ４４において、制御部１３０は、物品の個数及び残量に応じた通知を、通知部１４０を介して、利用者端末２０に対して行う。
In step S44, the
例えば紙パックの牛乳の場合、従来の画像認識による在庫管理では、個数は判定できても紙パックの中の残量は判定できない。第四実施形態に係る残量判定システム３においては、画像認識による残量管理と音声認識による残量管理とを組み合せることにより、画像認識では把握できない物品の残量をも判定することができるので、より細やかな在庫管理を行うことができる。
For example, in the case of milk in a paper carton, the conventional inventory management by image recognition can determine the number of milk but not the remaining amount in the paper carton. In the remaining
以上の如く、第四実施形態に係る残量判定システム３は、物品の画像を取得する画像撮影装置３０（画像取得部）と、取得された前記画像に基づいて物品の個数を判定し、判定された物品の前記個数と前記残量判定部によって判定された当該物品の前記残量レベルとを互いに紐付けて記憶する制御部１３０（在庫管理部）と、を具備するものである。
このように構成することにより、物品の個数と残量レベルの両方を把握することで、物品の在庫を精度良く管理することができる。
As described above, the remaining
With this configuration, it is possible to accurately manage the inventory of articles by grasping both the number of articles and the remaining amount level.
なお、第四実施形態に係る画像撮影装置３０は、画像取得部の実施の一形態である。
また、第四実施形態に係る制御部１３０は、在庫管理部の実施の一形態である。
The
Further, the
１，２，３ 残量判定システム
１０ 音声取得装置
３０ 画像撮影装置
１１０ 音声認識部
１２０ 判定基準データ記憶部
１３０ 制御部
１４０ 通知部
１５０ 購入履歴データ取得部
２１０ 個人識別部
1, 2, 3 Remaining
Claims (6)
取得された前記音声を文字情報として認識する音声認識部と、
所定のキーワードと物品の残量を段階的に示す残量レベルとが互いに紐付けされた判定基準データを記憶する判定基準データ記憶部と、
前記音声認識部によって認識された前記文字情報から前記所定のキーワードを抽出し、抽出した前記所定のキーワードと前記判定基準データとを照合することにより、物品の前記残量レベルを判定する残量判定部と、
を具備する、
残量判定システム。 A voice acquisition unit that acquires voice, and
A voice recognition unit that recognizes the acquired voice as character information,
A judgment standard data storage unit that stores judgment standard data in which a predetermined keyword and a remaining amount level indicating the remaining amount of the article are linked to each other,
The remaining amount determination for determining the remaining amount level of the article by extracting the predetermined keyword from the character information recognized by the voice recognition unit and collating the extracted predetermined keyword with the determination reference data. Department and
Equipped with
Remaining amount judgment system.
前記通知部は、
前記残量判定部によって判定された前記残量レベルに応じた通知を行う、
請求項１に記載の残量判定システム。 Equipped with a notification unit that can notify the user of the need to replenish goods
The notification unit
Notify according to the remaining amount level determined by the remaining amount determination unit.
The remaining amount determination system according to claim 1.
前記残量判定部は、
前記個人識別部の識別結果に基づいて抽出された、特定の１以上の個人が発した音声を用いて、前記残量レベルを判定する、
請求項１又は請求項２に記載の残量判定システム。 It is equipped with a personal identification unit that identifies the individual who emitted the acquired voice.
The remaining amount determination unit
The remaining amount level is determined by using the voice uttered by one or more specific individuals extracted based on the identification result of the personal identification unit.
The remaining amount determination system according to claim 1 or 2.
前記判定基準データは、
前記所定のキーワードと前記残量レベルとが個人ごとに互いに紐付けされており、
前記残量判定部は、
前記個人識別部によって識別された個人の前記判定基準データを抽出し、抽出した前記判定基準データを用いて前記残量レベルを判定する、
請求項１から請求項３までのいずれか一項に記載の残量判定システム。 It is equipped with a personal identification unit that identifies the individual who emitted the acquired voice.
The criterion data is
The predetermined keyword and the remaining amount level are linked to each other for each individual.
The remaining amount determination unit
The determination standard data of the individual identified by the personal identification unit is extracted, and the remaining amount level is determined using the extracted determination reference data.
The remaining amount determination system according to any one of claims 1 to 3.
取得された前記画像に基づいて物品の個数を判定し、判定された物品の前記個数と前記残量判定部によって判定された当該物品の前記残量レベルとを互いに紐付けて記憶する在庫管理部と、
を具備する、
請求項１から請求項４までのいずれか一項に記載の残量判定システム。 An image acquisition unit that acquires an image of an article,
An inventory management unit that determines the number of articles based on the acquired image, and stores the determined number of articles and the remaining amount level of the article determined by the remaining amount determination unit in association with each other. When,
Equipped with
The remaining amount determination system according to any one of claims 1 to 4.
取得された前記補充履歴に基づいて、物品の残量が閾値以下となる時期を予測する予測部と、
を具備する、
請求項１から請求項５までのいずれか一項に記載の残量判定システム。 The replenishment history data acquisition unit that acquires the replenishment history of goods,
Based on the acquired replenishment history, a prediction unit that predicts when the remaining amount of the article will be below the threshold value, and
Equipped with
The remaining amount determination system according to any one of claims 1 to 5.
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2016158300A JP6755747B2 (en) | 2016-08-11 | 2016-08-11 | Remaining amount judgment system |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2016158300A JP6755747B2 (en) | 2016-08-11 | 2016-08-11 | Remaining amount judgment system |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2018026022A JP2018026022A (en) | 2018-02-15 |
| JP6755747B2 true JP6755747B2 (en) | 2020-09-16 |
Family
ID=61193872
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2016158300A Active JP6755747B2 (en) | 2016-08-11 | 2016-08-11 | Remaining amount judgment system |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP6755747B2 (en) |
Families Citing this family (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2020086364A (en) * | 2018-11-30 | 2020-06-04 | 株式会社Ｎｔｔぷらら | Information presentation system, information presentation device, information presentation method, and computer program |
Family Cites Families (7)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2005112499A (en) * | 2003-10-03 | 2005-04-28 | Hitachi Ltd | Residual/stock management and ordering system and objects ordering and order reception managing system using stock management and ordering system |
| JP2010231454A (en) * | 2009-03-26 | 2010-10-14 | Panasonic Electric Works Co Ltd | Residual amount management system |
| JP5177213B2 (en) * | 2010-12-16 | 2013-04-03 | コニカミノルタビジネステクノロジーズ株式会社 | Inventory management device, inventory management system, inventory management method, inventory management program |
| JP2013200755A (en) * | 2012-03-26 | 2013-10-03 | Seiko Epson Corp | Consumables purchase support system and consumables purchase support device |
| JP2013250698A (en) * | 2012-05-31 | 2013-12-12 | Nikon Corp | Purchase support device, purchase support method and purchase support system |
| JP5788371B2 (en) * | 2012-10-16 | 2015-09-30 | シャープ株式会社 | Statement processing device, statement processing method, control program, and recording medium |
| US20150269644A1 (en) * | 2014-03-19 | 2015-09-24 | Peter Morrison | Electronic concierge |
-
2016
- 2016-08-11 JP JP2016158300A patent/JP6755747B2/en active Active
Also Published As
| Publication number | Publication date |
|---|---|
| JP2018026022A (en) | 2018-02-15 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US20210027485A1 (en) | Status monitoring using machine learning and machine vision | |
| US11281971B2 (en) | Devices, systems, and methods that observe and classify real-world activity relating to an observed object, and track and disseminate state relating the observed object | |
| CN105934791B (en) | Voice input order | |
| US10734103B2 (en) | Stress management system and stress management method | |
| WO2018016068A1 (en) | Stock management system and stock management method for warehouse | |
| US20190340567A1 (en) | Computer-implemented method and system for tracking inventory | |
| US11875776B2 (en) | Response generating apparatus, response generating method, and response generating program | |
| US20180040046A1 (en) | Sales management device, sales management system, and sales management method | |
| US20130143185A1 (en) | Determining user emotional state | |
| US20200297264A1 (en) | Information processing device, information processing method, and program | |
| US20230336694A1 (en) | Tagging Characteristics of an Interpersonal Encounter Based on Vocal Features | |
| WO2019208327A1 (en) | Customer service assistance system | |
| Rossi et al. | Engaged by a bartender robot: Recommendation and personalisation in human-robot interaction | |
| JP6755747B2 (en) | Remaining amount judgment system | |
| KR20200111680A (en) | Information processing apparatus, information processing method, and recording medium | |
| Kumar et al. | Exploring antecedents impacting user satisfaction with voice assistant app: A text mining-based analysis on Alexa services | |
| JP6152853B2 (en) | Control method and program | |
| JP5834468B2 (en) | Information processing apparatus, information processing method, and program | |
| CN114358862A (en) | Information processing apparatus, information processing method, and storage medium | |
| CN110866175A (en) | Information recommendation method and device and electronic equipment | |
| JP6823413B2 (en) | Shopping support system | |
| WO2019171752A1 (en) | Information processing device, information processing method, and program | |
| WO2019176214A1 (en) | Information processing device, information processing method and program | |
| JP7476881B2 (en) | Information processing device, information processing method, and program | |
| JP2021152959A (en) | Information providing device and information providing method |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20190730 |
|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20200626 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20200804 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20200826 |
|
| R150 | Certificate of patent or registration of utility model |
Ref document number: 6755747 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |