JP2020190790A - Notification system - Google Patents

Notification system Download PDF

Info

Publication number
JP2020190790A
JP2020190790A JP2019094230A JP2019094230A JP2020190790A JP 2020190790 A JP2020190790 A JP 2020190790A JP 2019094230 A JP2019094230 A JP 2019094230A JP 2019094230 A JP2019094230 A JP 2019094230A JP 2020190790 A JP2020190790 A JP 2020190790A
Authority
JP
Japan
Prior art keywords
notification
content
unit
sound
function
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2019094230A
Other languages
Japanese (ja)
Other versions
JP7253975B2 (en
Inventor
洋助 出雲
Yosuke Izumo
洋助 出雲
関根 加津典
Katsunori Sekine
加津典 関根
龍一 竹村
Ryuichi Takemura
龍一 竹村
平井 正人
Masato Hirai
正人 平井
諒 吉田
Ryo Yoshida
諒 吉田
美穂 石川
Yoshio Ishikawa
美穂 石川
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Mitsubishi Electric Corp
Original Assignee
Mitsubishi Electric Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Mitsubishi Electric Corp filed Critical Mitsubishi Electric Corp
Priority to JP2019094230A priority Critical patent/JP7253975B2/en
Publication of JP2020190790A publication Critical patent/JP2020190790A/en
Application granted granted Critical
Publication of JP7253975B2 publication Critical patent/JP7253975B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • User Interface Of Digital Computer (AREA)
  • Telephonic Communication Services (AREA)

Abstract

To provide a notification system which can suitably perform correct notification even when a device with an incorrect notification function performs notification.SOLUTION: A notification system comprises: a first device which is provided with first notification means and has a detailed notification function; a second device which is provided with second notification means and has a simple notification function; and a centralized control device which is provided with third notification means and has a detailed notification function and which controls the first device and the second device. The second device comprises a notification information generation unit which, when performing a notification, generates notification information including a notification content. The centralized control device, when it is determined that the notification by the second device insufficiently shows the notification content shown by the notification information, controls either one of the centralized control device and the first device, whichever is nearer to a user, so that the either one performs the notification of the notification content shown by the notification information using the detailed notification function.SELECTED DRAWING: Figure 1

Description

本発明は、機器の動作に応じた通知を行う通知システムに関するものである。 The present invention relates to a notification system that gives notification according to the operation of a device.

従来、ユーザーの質問を契機に、質問に対する回答となる映像または音声等の再生情報をサーバーから取得し、取得した再生情報を再生するスマートディスプレイまたはスマートスピーカー等のスマートデバイスが知られている(例えば、特許文献1参照)。特許文献1に記載のスマートデバイスとしての音声処理装置は、ユーザーの質問に対する回答を音声処理装置から出力するだけでなく、音声処理装置に接続された他の機器から出力することもできる。 Conventionally, smart devices such as smart displays or smart speakers that acquire playback information such as video or audio that answers a question from a server and reproduce the acquired playback information are known (for example). , Patent Document 1). The voice processing device as a smart device described in Patent Document 1 can output not only an answer to a user's question from the voice processing device but also from another device connected to the voice processing device.

特開2018−182692号公報Japanese Unexamined Patent Publication No. 2018-182692 特開2015−18502号公報JP 2015-18502

ところで、スマートデバイスに接続された他の機器のうち、簡易的な通知機能しか有していない機器から通知が行われたときで、一般的な通知とは異なる通知が行われた場合、ユーザーは、通知を受けただけでは、通知内容を正確に理解することが困難である。 By the way, when a notification is sent from a device that has only a simple notification function among other devices connected to the smart device, and a notification different from the general notification is given, the user , It is difficult to understand the content of the notification accurately just by receiving the notification.

特許文献1に記載のスマートデバイスとしての音声処理装置は、当該装置への入力に対する出力を、音声処理装置ではなく、接続された他の機器から出力することはできるが、接続された他の機器からの出力を音声処理装置から出力することはできない。そのため、特許文献1に記載の音声処理装置は、簡易的な通知機能しか有していない機器から行われた通知の内容を正確に通知することができない。 The voice processing device as a smart device described in Patent Document 1 can output the output for the input to the device from another connected device instead of the voice processing device, but is another connected device. The output from is not output from the audio processing device. Therefore, the voice processing device described in Patent Document 1 cannot accurately notify the content of the notification made from the device having only a simple notification function.

本発明は、上記の課題に鑑みてなされたものであって、通知機能が正確でない機器が通知した場合でも、正確な通知を適切に行うことができる通知システムを提供することを目的とする。 The present invention has been made in view of the above problems, and an object of the present invention is to provide a notification system capable of appropriately performing accurate notification even when a device whose notification function is not accurate notifies.

本発明の通知システムは、第1通知手段を備え、通知を行う際に通知内容を詳細に通知する詳細通知機能を有する第1機器と、第2通知手段を備え、通知を行う際に通知内容を前記詳細通知機能よりも簡易的に通知する簡易通知機能を有する第2機器と、第3通知手段を備え、通知を行う際に通知内容を詳細に通知する詳細通知機能を有するとともに、前記第1機器および前記第2機器を制御する集中制御機器とを含んで構成され、前記第2機器は、前記通知を行う際に、前記通知内容を含む通知情報を生成する通知情報生成部を備え、前記集中制御機器は、前記第2機器による通知が、前記通知情報が示す前記通知内容を十分に示していないと判断された場合に、前記集中制御機器および前記第1機器のそれぞれの機器のうち、ユーザーに最も近い機器が、前記詳細通知機能を用いて、前記通知情報が示す前記通知内容の通知を行うように、それぞれの前記機器を制御するものである。 The notification system of the present invention includes a first device having a first notification means and having a detailed notification function for notifying the notification contents in detail at the time of notification, and a second notification means, and the notification contents at the time of notification. A second device having a simple notification function for notifying the details more simply than the detailed notification function, and a third notification means, and having a detailed notification function for notifying the notification contents in detail at the time of notification, and the above-mentioned first. It is configured to include one device and a centralized control device that controls the second device, and the second device includes a notification information generation unit that generates notification information including the notification content when the notification is performed. When it is determined that the notification by the second device does not sufficiently indicate the content of the notification indicated by the notification information, the centralized control device is among the devices of the centralized control device and the first device. The device closest to the user controls each device so as to notify the notification content indicated by the notification information by using the detailed notification function.

また、本発明の通知システムは、第1通知手段と、周囲の音声を収集する第1集音手段とを備え、通知を行う際に通知内容を詳細に通知する詳細通知機能を有する第1機器と、通知音による通知を行う第2通知手段を備え、通知を行う際に通知内容を前記詳細通知機能よりも簡易的に通知する簡易通知機能を有する第2機器と、前記第2機器からの前記通知音と、前記通知音が示す通知内容とが関連付けられたデータベースを保持するサーバーと、第3通知手段と、周囲の音声を収集する第2集音手段とを備え、通知を行う際に通知内容を詳細に通知する詳細通知機能を有するとともに、前記第1機器を制御する集中制御機器とを含んで構成され、前記第2機器は、前記通知を行う際に、前記通知内容を含む通知情報を生成する通知情報生成部を備え、前記集中制御機器は、前記集中制御機器および前記第1機器のそれぞれで収集された前記音声に含まれる前記通知音に基づき、前記データベースを参照するデータベース確認部と、前記データベースの参照結果に基づき、前記通知が前記通知内容を十分に示しているか否かを判断する通知判断部とを備え、前記第2機器による通知が前記通知内容を十分に示していないと判断された場合に、前記集中制御機器および前記第1機器のそれぞれの機器のうち、ユーザーに最も近い機器が、前記詳細通知機能を用いて、前記通知情報が示す前記通知内容の通知を行うように、それぞれの前記機器を制御するものである。 Further, the notification system of the present invention is a first device including a first notification means and a first sound collecting means for collecting surrounding voices, and having a detailed notification function for notifying the notification contents in detail when making a notification. A second device having a second notification means for notifying by a notification sound and having a simple notification function for notifying the notification content more simply than the detailed notification function when notifying, and the second device. When a notification is performed, the notification sound is provided with a server that holds a database associated with the notification sound and the notification content indicated by the notification sound, a third notification means, and a second sound collection means that collects surrounding sounds. It has a detailed notification function for notifying the notification content in detail, and is configured to include a centralized control device that controls the first device. The second device is a notification including the notification content when performing the notification. The centralized control device includes a notification information generation unit that generates information, and the centralized control device refers to the database based on the notification sound included in the voice collected by each of the centralized control device and the first device. A unit and a notification determination unit for determining whether or not the notification sufficiently indicates the notification content based on the reference result of the database, and the notification by the second device sufficiently indicates the notification content. If it is determined that there is no such device, the device closest to the user among the devices of the centralized control device and the first device uses the detailed notification function to notify the notification content indicated by the notification information. It controls each of the above-mentioned devices as it does.

本発明による通知システムは、簡易通知機能を有する第2機器から通知が行われた場合に、ユーザーに最も近い、詳細通知機能を有する機器が通知を行う。これにより、簡易通知機能を有する機器に代わり、詳細通知機能を有する機器によって通知が行われるため、通知機能が正確でない機器が通知した場合でも、正確な通知を適切に行うことができる。 In the notification system according to the present invention, when a notification is given from a second device having a simple notification function, the device having the detailed notification function closest to the user gives the notification. As a result, the notification is performed by the device having the detailed notification function instead of the device having the simple notification function. Therefore, even if the device having the inaccurate notification function notifies, the accurate notification can be appropriately performed.

実施の形態1に係る通知システムの構成の一例を示す概略図である。It is the schematic which shows an example of the structure of the notification system which concerns on Embodiment 1. FIG. 図1のスマートデバイスの構成の一例を示すブロック図である。It is a block diagram which shows an example of the structure of the smart device of FIG. 図2の制御装置の構成の一例を示す機能ブロック図である。It is a functional block diagram which shows an example of the structure of the control device of FIG. 図3の制御装置の構成の一例を示すハードウェア構成図である。It is a hardware block diagram which shows an example of the structure of the control device of FIG. 図3の制御装置の構成の他の例を示すハードウェア構成図である。It is a hardware block diagram which shows another example of the structure of the control device of FIG. 図1の第1機器の構成の一例を示すブロック図である。It is a block diagram which shows an example of the structure of the 1st apparatus of FIG. 図6の制御装置の構成の一例を示す機能ブロック図である。It is a functional block diagram which shows an example of the structure of the control device of FIG. 図1の第2機器の構成の一例を示すブロック図である。It is a block diagram which shows an example of the structure of the 2nd apparatus of FIG. 図8の制御装置の構成の一例を示す機能ブロック図である。It is a functional block diagram which shows an example of the structure of the control device of FIG. 実施の形態1に係る通知システムによる通知処理の流れの一例を示すフローチャートである。It is a flowchart which shows an example of the flow of the notification processing by the notification system which concerns on Embodiment 1. FIG. 詳細な通知を行う場合の第1機器の表示部の表示例について説明するための概略図である。It is the schematic for demonstrating the display example of the display part of the 1st apparatus at the time of giving a detailed notification. 実施の形態2に係るスマートデバイスの制御装置の構成の一例を示す機能ブロック図である。It is a functional block diagram which shows an example of the structure of the control device of the smart device which concerns on Embodiment 2. FIG. 実施の形態2に係る通知システムによる通知処理の流れの一例を示すフローチャートである。It is a flowchart which shows an example of the flow of the notification processing by the notification system which concerns on Embodiment 2. 実施の形態3に係る通知システムの構成の一例を示す概略図である。It is the schematic which shows an example of the structure of the notification system which concerns on Embodiment 3. 図14のスマートデバイスの構成の一例を示すブロック図である。It is a block diagram which shows an example of the structure of the smart device of FIG. 図15の制御装置の構成の一例を示す機能ブロック図である。It is a functional block diagram which shows an example of the structure of the control device of FIG. 図14の第1機器の構成の一例を示すブロック図である。It is a block diagram which shows an example of the structure of the 1st apparatus of FIG. 図17の制御装置の構成の一例を示す機能ブロック図である。It is a functional block diagram which shows an example of the structure of the control device of FIG. 図14の第2機器の構成の一例を示すブロック図である。It is a block diagram which shows an example of the structure of the 2nd apparatus of FIG. 図19の制御装置の構成の一例を示す機能ブロック図である。It is a functional block diagram which shows an example of the structure of the control device of FIG. 実施の形態3に係る通知システムによる通知処理の流れの一例を示すフローチャートである。It is a flowchart which shows an example of the flow of the notification processing by the notification system which concerns on Embodiment 3.

実施の形態1.
以下、本実施の形態1に係る通知システムについて説明する。本実施の形態1に係る通知システムは、スマートスピーカー等のスマートデバイスに複数の機器が接続され、スマートデバイスの制御に基づき、接続された複数の機器が制御されるものである。
Embodiment 1.
Hereinafter, the notification system according to the first embodiment will be described. In the notification system according to the first embodiment, a plurality of devices are connected to a smart device such as a smart speaker, and the plurality of connected devices are controlled based on the control of the smart device.

[通知システム100の構成]
図1は、本実施の形態1に係る通知システム100の構成の一例を示す概略図である。図1に示すように、通知システム100は、スマートデバイス1、第1機器2、第2機器3およびサーバー4で構成されている。通知システム100において、スマートデバイス1と、第1機器2および第2機器3とが、それぞれ有線または無線で接続されている。また、スマートデバイス1は、インターネット等のネットワーク5を介してサーバー4と有線または無線で接続されている。
[Configuration of notification system 100]
FIG. 1 is a schematic view showing an example of the configuration of the notification system 100 according to the first embodiment. As shown in FIG. 1, the notification system 100 is composed of a smart device 1, a first device 2, a second device 3, and a server 4. In the notification system 100, the smart device 1 and the first device 2 and the second device 3 are connected by wire or wirelessly, respectively. Further, the smart device 1 is connected to the server 4 by wire or wirelessly via a network 5 such as the Internet.

スマートデバイス1には、後述する通知手段13としての音声出力部13aが設けられている。第1機器2には、後述する通知手段22として、音声出力部22aおよび表示部22bの少なくとも一方が設けられている。第2機器3には、後述する通知手段32として、音声出力部32aおよび表示部32bの少なくとも一方が設けられている。 The smart device 1 is provided with a voice output unit 13a as a notification means 13 described later. The first device 2 is provided with at least one of an audio output unit 22a and a display unit 22b as a notification means 22 described later. The second device 3 is provided with at least one of an audio output unit 32a and a display unit 32b as a notification means 32 described later.

(スマートデバイス1)
スマートデバイス1は、例えば、スマートスピーカーまたはスマートディスプレイであり、接続された第1機器2および第2機器3を制御する集中制御機器である。また、スマートデバイス1は、図示しない集音手段を有し、ユーザーからの質問を収集して、ネットワーク5上のサーバー4から質問に対する回答を適切に導くAI(Artificial Intelligence)アシスタント機能を有している。さらに、スマートデバイス1は、周囲のユーザーを検出する人体検出機能を有している。
(Smart device 1)
The smart device 1 is, for example, a smart speaker or a smart display, and is a centralized control device that controls the connected first device 2 and second device 3. In addition, the smart device 1 has a sound collecting means (not shown), and has an AI (Artificial Intelligence) assistant function that collects questions from users and appropriately guides answers to the questions from the server 4 on the network 5. There is. Further, the smart device 1 has a human body detection function for detecting surrounding users.

図2は、図1のスマートデバイス1の構成の一例を示すブロック図である。図2に示すように、スマートデバイス1は、制御装置10、第1の通信手段11、第2の通信手段12および通知手段13を備えている。なお、スマートデバイス1は、さらに、ユーザーからの質問を収集するための図示しない入力部を有するが、本実施の形態1との関連が低いため、ここでは説明を省略する。 FIG. 2 is a block diagram showing an example of the configuration of the smart device 1 of FIG. As shown in FIG. 2, the smart device 1 includes a control device 10, a first communication means 11, a second communication means 12, and a notification means 13. The smart device 1 further has an input unit (not shown) for collecting questions from the user, but since the relationship with the first embodiment is low, the description thereof will be omitted here.

第1の通信手段11は、サーバー4との間で行われる通信を、制御装置10の命令に基づいて制御する。例えば、第1の通信手段11は、図示しない入力部から入力されたユーザーからの質問に対する回答を示す情報を、サーバー4から受信する。 The first communication means 11 controls the communication performed with the server 4 based on the instruction of the control device 10. For example, the first communication means 11 receives information from the server 4 indicating an answer to a question from a user input from an input unit (not shown).

第2の通信手段12は、WiFi(登録商標)、Bluetooth(登録商標)およびLAN等の通信方式を用いて、第1機器2および第2機器3との間で行われる通信を、制御装置10の命令に基づいて制御する。例えば、第2の通信手段12は、第1機器2および第2機器3との間で、通知情報の送受信を行う。通知情報は、第2機器3等の機器でユーザーに対して通知すべき内容を含む情報である。 The second communication means 12 uses a communication method such as WiFi (registered trademark), Bluetooth (registered trademark), and LAN to perform communication between the first device 2 and the second device 3 with the control device 10. Control based on the command of. For example, the second communication means 12 transmits / receives notification information between the first device 2 and the second device 3. The notification information is information including contents to be notified to the user by a device such as the second device 3.

通知手段13は、例えば、音声を出力するスピーカー等の音声出力部13a(図1参照)であり、通知情報が示す通知内容をユーザーに対して通知する。このときの通知手段13は、通知内容を詳細に通知することができる。例えば、通知手段13が音声出力部13aである場合、音声出力部13aは、例えば、人の声を模擬した合成音声等を出力することにより、詳細な通知を行う。 The notification means 13 is, for example, a voice output unit 13a (see FIG. 1) of a speaker or the like that outputs voice, and notifies the user of the notification content indicated by the notification information. The notification means 13 at this time can notify the content of the notification in detail. For example, when the notification means 13 is a voice output unit 13a, the voice output unit 13a provides detailed notification by outputting, for example, a synthetic voice simulating a human voice.

制御装置10は、通知手段13による通知の制御等、スマートデバイス1全体を制御する。特に、本実施の形態1において、制御装置10は、第2の通信手段12を介して第2機器3の通知状態を示す情報を取得し、取得した情報に基づき第2機器3による通知が正確であるか否かを判断する。そして、制御装置10は、判断結果に基づき、接続された第1機器2および第2機器3を制御するように、第1の通信手段11および第2の通信手段12の通信を制御する。 The control device 10 controls the entire smart device 1 such as control of notification by the notification means 13. In particular, in the first embodiment, the control device 10 acquires information indicating the notification state of the second device 3 via the second communication means 12, and the notification by the second device 3 is accurate based on the acquired information. Judge whether or not. Then, the control device 10 controls the communication of the first communication means 11 and the second communication means 12 so as to control the connected first device 2 and the second device 3 based on the determination result.

図3は、図2の制御装置10の構成の一例を示す機能ブロック図である。図3に示すように、制御装置10は、人体検出部101、ユーザー確認部102、通知制御部103、通信制御部104および接続機器制御部105を備えている。制御装置10は、ソフトウェアを実行することにより各種機能を実現するマイクロコンピュータなどの演算装置、もしくは各種機能に対応する回路デバイスなどのハードウェア等で構成されている。 FIG. 3 is a functional block diagram showing an example of the configuration of the control device 10 of FIG. As shown in FIG. 3, the control device 10 includes a human body detection unit 101, a user confirmation unit 102, a notification control unit 103, a communication control unit 104, and a connected device control unit 105. The control device 10 is composed of an arithmetic unit such as a microcomputer that realizes various functions by executing software, or hardware such as a circuit device corresponding to various functions.

人体検出部101は、スマートデバイス1に設けられた図示しないセンサ等に基づき、第1機器2の周囲に存在するユーザーを検出する。例えば、スマートデバイス1にカメラ等の撮像装置が設けられている場合、人体検出部101は、撮像装置による画像に基づき、ユーザーの位置を検出することができる。 The human body detection unit 101 detects a user existing around the first device 2 based on a sensor (not shown) provided on the smart device 1. For example, when the smart device 1 is provided with an image pickup device such as a camera, the human body detection unit 101 can detect the position of the user based on the image taken by the image pickup device.

ユーザー確認部102は、接続された第1機器2の周囲にユーザーが存在するか否かを確認する。具体的には、ユーザー確認部102は、接続された第1機器2から受信した、ユーザーの検出結果を示す情報に基づき、接続された第1機器2とスマートデバイス1とのうち、ユーザーに最も近い機器を特定する。 The user confirmation unit 102 confirms whether or not a user exists around the connected first device 2. Specifically, the user confirmation unit 102 is the most connected to the user among the connected first device 2 and the smart device 1 based on the information indicating the user's detection result received from the connected first device 2. Identify nearby devices.

通知制御部103は、スマートデバイス1で通知が必要となった場合に、通知手段13を用いて通知を行うように、通知手段13を制御する。通信制御部104は、第1の通信手段11および第2の通信手段12を制御する。具体的には、通信制御部104は、第1機器2に対する通知情報の送信、および、第2機器3からの通知情報等の受信を行うように、第2の通信手段12を制御する。 The notification control unit 103 controls the notification means 13 so that when the smart device 1 needs to notify, the notification means 13 is used to notify the notification. The communication control unit 104 controls the first communication means 11 and the second communication means 12. Specifically, the communication control unit 104 controls the second communication means 12 so as to transmit the notification information to the first device 2 and receive the notification information and the like from the second device 3.

接続機器制御部105は、スマートデバイス1に接続された第1機器2および第2機器3を制御する。具体的には、接続機器制御部105は、接続された第1機器2または第2機器3で通知を行うように、第1機器2および第2機器3を制御する。 The connected device control unit 105 controls the first device 2 and the second device 3 connected to the smart device 1. Specifically, the connected device control unit 105 controls the first device 2 and the second device 3 so that the connected first device 2 or the second device 3 gives a notification.

図4は、図3の制御装置10の構成の一例を示すハードウェア構成図である。制御装置10の各種機能がハードウェアで実行される場合、図3の制御装置10は、図4に示すように、処理回路41で構成される。図3の制御装置10において、人体検出部101、ユーザー確認部102、通知制御部103、通信制御部104および接続機器制御部105の各機能は、処理回路41により実現される。 FIG. 4 is a hardware configuration diagram showing an example of the configuration of the control device 10 of FIG. When various functions of the control device 10 are executed by hardware, the control device 10 of FIG. 3 is composed of a processing circuit 41 as shown in FIG. In the control device 10 of FIG. 3, each function of the human body detection unit 101, the user confirmation unit 102, the notification control unit 103, the communication control unit 104, and the connected device control unit 105 is realized by the processing circuit 41.

各機能がハードウェアで実行される場合、処理回路41は、例えば、単一回路、複合回路、プログラム化したプロセッサ、並列プログラム化したプロセッサ、ASIC(Application Specific Integrated Circuit)、FPGA(Field−Programmable Gate Array)、またはこれらを組み合わせたものが該当する。制御装置10は、人体検出部101、ユーザー確認部102、通知制御部103、通信制御部104および接続機器制御部105の各部の機能それぞれを処理回路41で実現してもよいし、各部の機能を1つの処理回路41で実現してもよい。 When each function is executed in hardware, the processing circuit 41 may be, for example, a single circuit, a composite circuit, a programmed processor, a parallel programmed processor, an ASIC (Application Specific Integrated Circuit), or an FPGA (Field-Programmable Gate). Array), or a combination of these. The control device 10 may realize the functions of the human body detection unit 101, the user confirmation unit 102, the notification control unit 103, the communication control unit 104, and the connected device control unit 105 by the processing circuit 41, or the functions of the respective units. May be realized by one processing circuit 41.

図5は、図3の制御装置10の構成の他の例を示すハードウェア構成図である。制御装置10の各種機能がソフトウェアで実行される場合、図3の制御装置10は、図5に示すように、プロセッサ51およびメモリ52で構成される。制御装置10において、人体検出部101、ユーザー確認部102、通知制御部103、通信制御部104および接続機器制御部105の各機能は、プロセッサ51およびメモリ52により実現される。 FIG. 5 is a hardware configuration diagram showing another example of the configuration of the control device 10 of FIG. When various functions of the control device 10 are executed by software, the control device 10 of FIG. 3 is composed of a processor 51 and a memory 52 as shown in FIG. In the control device 10, each function of the human body detection unit 101, the user confirmation unit 102, the notification control unit 103, the communication control unit 104, and the connected device control unit 105 is realized by the processor 51 and the memory 52.

各機能がソフトウェアで実行される場合、制御装置10において、人体検出部101、ユーザー確認部102、通知制御部103、通信制御部104および接続機器制御部105の機能は、ソフトウェア、ファームウェア、またはソフトウェアとファームウェアとの組み合わせにより実現される。ソフトウェアおよびファームウェアは、プログラムとして記述され、メモリ52に格納される。プロセッサ51は、メモリ52に記憶されたプログラムを読み出して実行することにより、各部の機能を実現する。 When each function is executed by software, in the control device 10, the functions of the human body detection unit 101, the user confirmation unit 102, the notification control unit 103, the communication control unit 104, and the connected device control unit 105 are software, firmware, or software. It is realized by the combination of and firmware. The software and firmware are written as a program and stored in the memory 52. The processor 51 realizes the functions of each part by reading and executing the program stored in the memory 52.

メモリ52として、例えば、RAM(Random Access Memory)、ROM(Read Only Memory)、フラッシュメモリ、EPROM(Erasable and Programmable ROM)およびEEPROM(Electrically Erasable and Programmable ROM)等の不揮発性または揮発性の半導体メモリ等が用いられる。また、メモリ52として、例えば、磁気ディスク、フレキシブルディスク、光ディスク、CD(Compact Disc)、MD(Mini Disc)およびDVD(Digital Versatile Disc)等の着脱可能な記録媒体が用いられてもよい。 Examples of the memory 52 include RAM (Random Access Memory), ROM (Read Only Memory), flash memory, EPROM (Erasable and Programmable ROM), and EEPROM (Electrically Erasable Memory, etc.) Is used. Further, as the memory 52, for example, a detachable recording medium such as a magnetic disk, a flexible disk, an optical disk, a CD (Compact Disc), an MD (Mini Disc), or a DVD (Digital Versaille Disc) may be used.

(第1機器2)
図1の第1機器2は、例えばIHクッキングヒータであり、詳細な情報を通知することができる詳細通知機能を有している。また、第1機器2は、周囲のユーザーを検出する人体検出機能を有している。図6は、図1の第1機器2の構成の一例を示すブロック図である。図6に示すように、第1機器2は、制御装置20、第3の通信手段21および通知手段22を備えている。なお、ここでいう「詳細な情報」とは、後述する第2機器3による通知情報が示す通知内容と一致する程度の情報を示す。
(1st device 2)
The first device 2 in FIG. 1 is, for example, an IH cooking heater, and has a detailed notification function capable of notifying detailed information. In addition, the first device 2 has a human body detection function for detecting surrounding users. FIG. 6 is a block diagram showing an example of the configuration of the first device 2 of FIG. As shown in FIG. 6, the first device 2 includes a control device 20, a third communication means 21, and a notification means 22. The "detailed information" referred to here means information to the extent that it matches the notification content indicated by the notification information by the second device 3 described later.

第3の通信手段21は、WiFi(登録商標)、Bluetooth(登録商標)およびLAN等の通信方式を用いて、スマートデバイス1との間で行われる通信を、制御装置20の命令に基づいて制御する。例えば、第3の通信手段21は、制御装置20による制御に基づき、スマートデバイス1から通知情報を受信する。 The third communication means 21 uses communication methods such as WiFi (registered trademark), Bluetooth (registered trademark), and LAN to control communication performed with the smart device 1 based on a command from the control device 20. To do. For example, the third communication means 21 receives the notification information from the smart device 1 based on the control by the control device 20.

通知手段22は、通知情報が示す通知の内容を詳細に通知する。通知手段22は、例えば、音声を出力するスピーカー等の音声出力部22a、あるいは、画像または文字等を表示する表示部22b(図1参照)であり、音声および画像の一方または両方により、ユーザーに対する通知を行う。 The notification means 22 notifies in detail the content of the notification indicated by the notification information. The notification means 22 is, for example, a voice output unit 22a such as a speaker that outputs voice, or a display unit 22b (see FIG. 1) that displays an image or characters, and the user is notified by one or both of the voice and the image. Make a notification.

通知手段22が音声出力部22aである場合、音声出力部22aは、例えば、人の声を模擬した合成音声等を出力することにより、詳細な通知を行う。通知手段22が表示部22bである場合、表示部22bは、LCD(Liquid Crystal Display)または有機EL(Electro Luminescence)ディスプレイ等で構成され、LCDまたは有機ELディスプレイに文字、静止画像または動画像等を表示することにより、詳細な通知を行う。 When the notification means 22 is a voice output unit 22a, the voice output unit 22a provides detailed notification by outputting, for example, a synthetic voice simulating a human voice. When the notification means 22 is a display unit 22b, the display unit 22b is composed of an LCD (Liquid Crystal Display), an organic EL (Electro Luminescence) display, or the like, and displays characters, still images, moving images, or the like on the LCD or the organic EL display. By displaying it, detailed notification is given.

制御装置20は、通知手段22による通知の制御、および、第3の通信手段21による通信の制御等、第1機器2全体を制御する。特に、本実施の形態1において、制御装置20は、第3の通信手段21を介してスマートデバイス1から通知情報を取得し、取得した通知情報に基づき、通知手段22を制御して、通知情報に含まれる情報を表示および音声出力する。 The control device 20 controls the entire first device 2 such as the control of the notification by the notification means 22 and the control of the communication by the third communication means 21. In particular, in the first embodiment, the control device 20 acquires notification information from the smart device 1 via the third communication means 21, and controls the notification means 22 based on the acquired notification information to notify the notification information. Display and audio output the information contained in.

図7は、図6の制御装置20の構成の一例を示す機能ブロック図である。図7に示すように、制御装置20は、通知情報生成部201、人体検出部202、通知制御部203および通信制御部204を備えている。制御装置20は、ソフトウェアを実行することにより各種機能を実現するマイクロコンピュータなどの演算装置、もしくは各種機能に対応する回路デバイスなどのハードウェア等で構成されている。 FIG. 7 is a functional block diagram showing an example of the configuration of the control device 20 of FIG. As shown in FIG. 7, the control device 20 includes a notification information generation unit 201, a human body detection unit 202, a notification control unit 203, and a communication control unit 204. The control device 20 is composed of an arithmetic unit such as a microcomputer that realizes various functions by executing software, or hardware such as a circuit device corresponding to various functions.

通知情報生成部201は、第1機器2が動作している際に、通知が必要な状態が発生した場合に、ユーザーに対して通知すべき内容を含む通知情報を生成する。このとき、通知情報生成部201は、例えば、第1機器2に設けられた図示しないセンサ等の検出結果に基づき、通知情報を生成する。 The notification information generation unit 201 generates notification information including contents to be notified to the user when a state requiring notification occurs while the first device 2 is operating. At this time, the notification information generation unit 201 generates notification information based on the detection result of, for example, a sensor (not shown) provided in the first device 2.

人体検出部202は、第1機器2に設けられた図示しないセンサ等に基づき、第1機器2の周囲に存在するユーザーを検出する。例えば、第1機器2に赤外線センサが設けられている場合、人体検出部202は、赤外線センサによる熱量の検出結果に基づき、ユーザーの位置を検出することができる。 The human body detection unit 202 detects a user existing around the first device 2 based on a sensor or the like (not shown) provided in the first device 2. For example, when the first device 2 is provided with an infrared sensor, the human body detection unit 202 can detect the position of the user based on the result of detecting the amount of heat by the infrared sensor.

通知制御部203は、通知手段22を制御する。具体的には、通知制御部203は、通知が必要となった場合に通知手段22を用いて通知を行うように、通知手段22を制御する。 The notification control unit 203 controls the notification means 22. Specifically, the notification control unit 203 controls the notification means 22 so that the notification means 22 is used to notify when a notification is required.

通信制御部204は、第3の通信手段21を制御する。具体的には、通信制御部204は、第1機器2の周囲のユーザーが検出された場合に、通知内容を含む通知情報とをスマートデバイス1から受信するように、第3の通信手段21を制御する。また、通信制御部204は、第1機器2の周囲のユーザーが検出された場合、ユーザーを検出したことを示す情報をスマートデバイス1に送信するように、第3の通信手段21を制御する。 The communication control unit 204 controls the third communication means 21. Specifically, the communication control unit 204 uses the third communication means 21 so that when a user around the first device 2 is detected, the notification information including the notification content is received from the smart device 1. Control. Further, when a user around the first device 2 is detected, the communication control unit 204 controls the third communication means 21 so as to transmit information indicating that the user has been detected to the smart device 1.

なお、第1機器2の制御装置20は、スマートデバイス1の制御装置10と同様に、図4および図5に示すようなハードウェア構成によって実現される。そのため、ここでは説明を省略する。 The control device 20 of the first device 2 is realized by the hardware configuration as shown in FIGS. 4 and 5, similarly to the control device 10 of the smart device 1. Therefore, the description thereof is omitted here.

(第2機器3)
図1の第2機器3は、例えば電子レンジであり、簡易な情報を通知することができる簡易通知機能を有している。図8は、図1の第2機器3の構成の一例を示すブロック図である。図8に示すように、第2機器3は、制御装置30、第4の通信手段31および通知手段32を備えている。
(Second device 3)
The second device 3 in FIG. 1 is, for example, a microwave oven, and has a simple notification function capable of notifying simple information. FIG. 8 is a block diagram showing an example of the configuration of the second device 3 of FIG. As shown in FIG. 8, the second device 3 includes a control device 30, a fourth communication means 31, and a notification means 32.

第4の通信手段31は、WiFi(登録商標)、Bluetooth(登録商標)およびLAN等の通信方式を用いて、スマートデバイス1との間で行われる通信を、制御装置30の命令に基づいて制御する。例えば、第4の通信手段31は、制御装置30による制御に基づき、通知情報をスマートデバイス1に送信する。 The fourth communication means 31 uses a communication method such as WiFi (registered trademark), Bluetooth (registered trademark), and LAN to control the communication performed with the smart device 1 based on the command of the control device 30. To do. For example, the fourth communication means 31 transmits the notification information to the smart device 1 based on the control by the control device 30.

通知手段32は、通知情報が示す通知の内容を簡易的に通知する。通知手段32は、例えば、音声を出力するスピーカー等の音声出力部32a、あるいは、文字等を表示する表示部32b(図1参照)であり、音声および画像の一方または両方により、ユーザーに対する通知を行う。 The notification means 32 simply notifies the content of the notification indicated by the notification information. The notification means 32 is, for example, a voice output unit 32a such as a speaker that outputs voice, or a display unit 32b (see FIG. 1) that displays characters or the like, and notifies the user by one or both of the voice and the image. Do.

通知手段32が音声出力部32aである場合、音声出力部32aは、一定の周波数の音声を連続的または断続的に出力することにより、数種類程度の通知を行う。 When the notification means 32 is a voice output unit 32a, the voice output unit 32a performs several types of notifications by continuously or intermittently outputting voice having a constant frequency.

通知手段32が表示部32bである場合、表示部32bは、例えば7セグメントLED(Light Emitting Diode)等で構成され、7セグメントLEDを用いた予め決められた数字の表示等によって通知を行う。また、表示部32bは、例えば1または複数のLEDで構成されてもよく、この場合には、LEDの点灯または点滅によって通知を行う。 When the notification means 32 is the display unit 32b, the display unit 32b is composed of, for example, a 7-segment LED (Light Emitting Diode) or the like, and notifies by displaying a predetermined number using the 7-segment LED or the like. Further, the display unit 32b may be composed of, for example, one or a plurality of LEDs. In this case, the notification is given by lighting or blinking the LEDs.

制御装置30は、通知手段32による通知の制御、および、第4の通信手段31による通信の制御等、第2機器3全体を制御する。特に、本実施の形態1において、制御装置30は、通知手段32を用いた通知により、通知すべき内容が正確に通知されているか否かを判断する処理等を行う。 The control device 30 controls the entire second device 3, such as control of notification by the notification means 32 and control of communication by the fourth communication means 31. In particular, in the first embodiment, the control device 30 performs a process of determining whether or not the content to be notified is accurately notified by the notification using the notification means 32.

図9は、図8の制御装置30の構成の一例を示す機能ブロック図である。図9に示すように、制御装置30は、通知情報生成部301、通知判断部302、通知制御部303および通信制御部304を備えている。制御装置30は、ソフトウェアを実行することにより各種機能を実現するマイクロコンピュータなどの演算装置、もしくは各種機能に対応する回路デバイスなどのハードウェア等で構成されている。 FIG. 9 is a functional block diagram showing an example of the configuration of the control device 30 of FIG. As shown in FIG. 9, the control device 30 includes a notification information generation unit 301, a notification determination unit 302, a notification control unit 303, and a communication control unit 304. The control device 30 is composed of an arithmetic unit such as a microcomputer that realizes various functions by executing software, or hardware such as a circuit device corresponding to various functions.

通知情報生成部301は、第2機器3が動作している際に、通知が必要な状態が発生した場合に、ユーザーに対して通知すべき内容を含む通知情報を生成する。このとき、通知情報生成部301は、例えば、第2機器3に設けられた図示しないセンサ等の検出結果に基づき、通知情報を生成する。 The notification information generation unit 301 generates notification information including contents to be notified to the user when a state requiring notification occurs while the second device 3 is operating. At this time, the notification information generation unit 301 generates notification information based on the detection result of, for example, a sensor (not shown) provided in the second device 3.

通知判断部302は、通知手段32により、通知情報生成部301で生成された通知情報が示す通知を第2機器3で正確に通知できるか否かを判断する。通知制御部303は、通知判断部302の判断結果に基づき、通知手段32を制御する。具体的には、通知制御部303は、第2機器3で正確に通知できると判断された場合に、通知手段32を用いて通知を行うように、通知手段32を制御する。 The notification determination unit 302 determines whether or not the notification means 32 can accurately notify the notification indicated by the notification information generated by the notification information generation unit 301 by the second device 3. The notification control unit 303 controls the notification means 32 based on the determination result of the notification determination unit 302. Specifically, the notification control unit 303 controls the notification means 32 so that the notification means 32 is used to notify when it is determined that the second device 3 can accurately notify.

通信制御部304は、通知判断部302の判断結果に基づき、第4の通信手段31を制御する。具体的には、通信制御部304は、第2機器3で正確に通知できないと判断された場合に、正確な通知を行うことができないことを示す情報と、通知内容を含む通知情報とをスマートデバイス1に対して送信するように、第4の通信手段31を制御する。 The communication control unit 304 controls the fourth communication means 31 based on the determination result of the notification determination unit 302. Specifically, when it is determined that the second device 3 cannot accurately notify, the communication control unit 304 smartly performs information indicating that accurate notification cannot be performed and notification information including the notification content. The fourth communication means 31 is controlled so as to transmit to the device 1.

なお、第2機器3の制御装置30は、スマートデバイス1の制御装置10および第1機器2の制御装置20と同様に、図4および図5に示すようなハードウェア構成によって実現される。そのため、ここでは説明を省略する。 The control device 30 of the second device 3 is realized by the hardware configuration as shown in FIGS. 4 and 5, similarly to the control device 10 of the smart device 1 and the control device 20 of the first device 2. Therefore, the description thereof is omitted here.

[通知システム100の動作]
次に、本実施の形態1に係る通知システム100の動作について説明する。簡易通知機能を有する第2機器3から通知が行われた場合において、異常発生時等の通常動作時以外の通知が行われると、ユーザーは、通知内容を判断することが困難である。
[Operation of notification system 100]
Next, the operation of the notification system 100 according to the first embodiment will be described. When a notification is given from the second device 3 having a simple notification function, it is difficult for the user to determine the content of the notification if the notification is given other than during normal operation such as when an abnormality occurs.

そこで、通知システム100では、簡易通知機能を有する第2機器3から通知が行われる場合において、第2機器3からの通知が正確でないとき、他の機器が代わりに通知を行う通知処理が行われる。本実施の形態1では、第2機器3から正確でない通知が行われた場合に、ユーザーに最も近い、詳細通知機能を有する第1機器2が第2機器3の代わりに通知を行うように、通知処理が行われる。 Therefore, in the notification system 100, when a notification is sent from the second device 3 having a simple notification function, when the notification from the second device 3 is not accurate, a notification process is performed in which another device gives a notification instead. .. In the first embodiment, when an inaccurate notification is given from the second device 3, the first device 2 having the detailed notification function closest to the user gives the notification instead of the second device 3. Notification processing is performed.

(通知処理)
図10は、本実施の形態1に係る通知システム100による通知処理の流れの一例を示すフローチャートである。まず、ステップS1において、第2機器3の通知情報生成部301は、図示しないセンサの検出結果等に基づき、ユーザーに対して通知すべき内容を含む通知情報を生成する。
(Notification processing)
FIG. 10 is a flowchart showing an example of the flow of notification processing by the notification system 100 according to the first embodiment. First, in step S1, the notification information generation unit 301 of the second device 3 generates notification information including the content to be notified to the user based on the detection result of a sensor (not shown) or the like.

ステップS2において、第2機器3の通知判断部302は、第2機器3の通知手段32を用いて、生成された通知情報が示す通知を正確に行うことができるか否かを判断する。通知を正確に行うことができると判断された場合(ステップS2:Yes)、第2機器3の通知制御部303は、ステップS3において、通知手段32を用いて、通知情報が示す通知を行う。一方、通知を正確に行うことができないと判断された場合(ステップS2:No)、第2機器3の通信制御部304は、ステップS4において、正確な通知を行うことができないことを示す情報を、通知内容を含む通知情報と共にスマートデバイス1に対して送信する。 In step S2, the notification determination unit 302 of the second device 3 uses the notification means 32 of the second device 3 to determine whether or not the notification indicated by the generated notification information can be accurately performed. When it is determined that the notification can be accurately performed (step S2: Yes), the notification control unit 303 of the second device 3 uses the notification means 32 to perform the notification indicated by the notification information in step S3. On the other hand, when it is determined that the notification cannot be accurately performed (step S2: No), the communication control unit 304 of the second device 3 provides information indicating that the accurate notification cannot be performed in step S4. , The notification information including the notification content is transmitted to the smart device 1.

ステップS5において、スマートデバイス1の制御装置10は、接続された詳細通知機能を有する第1機器2の周囲に、通知対象であるユーザーの周囲に第1機器2が存在するか否かを判断する。具体的には、スマートデバイス1の接続機器制御部105は、詳細通知機能を有する第1機器2の周囲に存在するユーザーを検出するように、接続された第1機器2を制御する。スマートデバイス1の通信制御部104は、接続された第1機器2からユーザーの検出結果を示す検出情報を受信する。そして、スマートデバイス1のユーザー確認部102は、受信した情報に基づき、ユーザーの周囲に第1機器2が存在するか否かを判断する。 In step S5, the control device 10 of the smart device 1 determines whether or not the first device 2 exists around the user who is the notification target, around the connected first device 2 having the detailed notification function. .. Specifically, the connected device control unit 105 of the smart device 1 controls the connected first device 2 so as to detect a user existing around the first device 2 having a detailed notification function. The communication control unit 104 of the smart device 1 receives the detection information indicating the detection result of the user from the connected first device 2. Then, the user confirmation unit 102 of the smart device 1 determines whether or not the first device 2 exists around the user based on the received information.

このとき、制御対象である第1機器2は、人体検出部202により周囲のユーザーを検出する。例えば、第1機器2に赤外線センサが設けられている場合、当該第1機器2の人体検出部202は、赤外線センサによる熱量の検出結果に基づき、ユーザーの位置を検出する。また、例えば、第1機器2にカメラが設けられている場合、当該第1機器2の人体検出部202は、カメラで撮像された撮像画像から、ユーザーを検出する。なお、スマートデバイス1の人体検出部101も同様に、周囲のユーザーを検出する。 At this time, the first device 2 to be controlled detects surrounding users by the human body detection unit 202. For example, when the first device 2 is provided with an infrared sensor, the human body detection unit 202 of the first device 2 detects the position of the user based on the result of detecting the amount of heat by the infrared sensor. Further, for example, when the camera is provided in the first device 2, the human body detection unit 202 of the first device 2 detects the user from the captured image captured by the camera. The human body detection unit 101 of the smart device 1 also detects surrounding users in the same manner.

ユーザーを検出した場合、第1機器2の通信制御部204は、ユーザーを検出したことを示す検出情報を、第3の通信手段21を介してスマートデバイス1に送信する。 When the user is detected, the communication control unit 204 of the first device 2 transmits the detection information indicating that the user has been detected to the smart device 1 via the third communication means 21.

ステップS5において、ユーザーの周囲に第1機器2が存在すると判断された場合(ステップS5:Yes)、スマートデバイス1の通信制御部104は、ステップS6において、該当する第1機器2に対して通知情報を送信する。ここで、複数の第1機器2およびスマートデバイス1によってユーザーが検出された場合、スマートデバイス1のユーザー確認部102は、それぞれから受信した検出結果に基づき、例えばユーザーとの距離が最も近い機器を、通知対象の機器として選択する。 When it is determined in step S5 that the first device 2 exists around the user (step S5: Yes), the communication control unit 104 of the smart device 1 notifies the corresponding first device 2 in step S6. Send information. Here, when a user is detected by the plurality of first devices 2 and the smart device 1, the user confirmation unit 102 of the smart device 1 selects, for example, the device closest to the user based on the detection results received from each. , Select as the device to be notified.

ステップS7において、通知対象機器としての第1機器2の通信制御部204は、スマートデバイス1から送信された通知情報を、第3の通信手段21を介して受信する。そして、第1機器2の通知制御部203は、通知手段22を用いて、受信した通知情報が示す通知を行う。 In step S7, the communication control unit 204 of the first device 2 as the notification target device receives the notification information transmitted from the smart device 1 via the third communication means 21. Then, the notification control unit 203 of the first device 2 uses the notification means 22 to perform the notification indicated by the received notification information.

一方、ステップS5において、ユーザーの周囲に第1機器2が存在しないと判断された場合(ステップS5:No)、スマートデバイス1の通知制御部103は、ステップS8において、通知手段13を用いて、通知情報が示す通知を行う。 On the other hand, when it is determined in step S5 that the first device 2 does not exist around the user (step S5: No), the notification control unit 103 of the smart device 1 uses the notification means 13 in step S8. Notify the notification indicated by the notification information.

ここで、ユーザーに対して詳細な通知を行う場合には、スマートデバイス1の通知手段13または第1機器2の通知手段22に対して、文字または画像による表示、あるいは、音声の出力が行われる。また、第1機器2の通知手段22として表示部22bが設けられている場合には、詳細な通知内容に関するQRコード(登録商標)を含む2次元コードまたはバーコード等のコード画像が表示されてもよい。 Here, when giving a detailed notification to the user, the notification means 13 of the smart device 1 or the notification means 22 of the first device 2 is displayed by characters or images, or is output by voice. .. Further, when the display unit 22b is provided as the notification means 22 of the first device 2, a code image such as a two-dimensional code or a bar code including a QR code (registered trademark) relating to the detailed notification content is displayed. May be good.

図11は、詳細な通知を行う場合の第1機器2の表示部22bの表示例について説明するための概略図である。図11に示すように、第1機器2の通知手段22としての表示部22bには、例えば二次元コード220が表示される。この二次元コード220は、詳細な通知内容が記載されたインターネット上のサイト等に導くためのものである。 FIG. 11 is a schematic view for explaining a display example of the display unit 22b of the first device 2 when performing detailed notification. As shown in FIG. 11, for example, a two-dimensional code 220 is displayed on the display unit 22b as the notification means 22 of the first device 2. The two-dimensional code 220 is for guiding to a site or the like on the Internet in which detailed notification contents are described.

このように表示部22bに表示された二次元コード220を、PC、スマートフォンまたはタブレット等の携帯端末等で読み取ることにより、ユーザーは、第2機器3からの通知に対する詳細な通知内容を知ることができる。 By reading the two-dimensional code 220 displayed on the display unit 22b in this way with a mobile terminal such as a PC, smartphone or tablet, the user can know the detailed notification content for the notification from the second device 3. it can.

このように、本実施の形態1では、簡易通知機能を有する第2機器3で通知がなされる場合に、通知情報がスマートデバイス1に送信される。そして、スマートデバイス1によって、スマートデバイス1に接続された第1機器2の周囲にユーザーが存在するか否かが判断される。第1機器2の周囲にユーザーが存在する場合には、スマートデバイス1から当該第1機器2に通知情報が送信され、第1機器2は、第2機器3に代わり、受信した通知情報が示す通知を行う。これにより、第2機器3による通知では詳細が不明であるような通知でも、ユーザーの周囲の第1機器2によって詳細な通知が行われるため、通知機能が正確でない機器が通知した場合でも、正確な通知を適切に行うことができる。 As described above, in the first embodiment, the notification information is transmitted to the smart device 1 when the notification is made by the second device 3 having the simple notification function. Then, the smart device 1 determines whether or not a user exists around the first device 2 connected to the smart device 1. When a user exists around the first device 2, notification information is transmitted from the smart device 1 to the first device 2, and the first device 2 is indicated by the received notification information in place of the second device 3. Make a notification. As a result, even if the details of the notification by the second device 3 are unknown, the detailed notification is performed by the first device 2 around the user, so that even if the notification function is not accurate, the notification is accurate. Can be notified appropriately.

以上のように、本実施の形態1に係る通知システム100では、簡易通知機能を有する第2機器3が、通知手段32による通知が通知内容を十分に示しているか否かを判断する。そして、当該通知が通知内容を十分に示していない場合に、詳細通知機能を有する、ユーザーに最も近いスマートデバイス1または第1機器2が通知を行う。これにより、詳細が不明であるような通知が行われる場合でも、詳細な通知を行うことができる機器によって通知が行われるため、正確な通知を適切に行うことができる。 As described above, in the notification system 100 according to the first embodiment, the second device 3 having the simple notification function determines whether or not the notification by the notification means 32 sufficiently indicates the notification content. Then, when the notification does not sufficiently indicate the content of the notification, the smart device 1 or the first device 2 closest to the user, which has a detailed notification function, performs the notification. As a result, even when a notification whose details are unknown is given, the notification is given by a device capable of giving the detailed notification, so that accurate notification can be appropriately performed.

なお、スマートデバイス1の通知手段13が表示部であり、第1機器2の通知手段22が表示部22bである場合には、二次元コード等のコード画像が表示されてもよい。これにより、ユーザーが携帯端末等を用いてコード画像を読み取ることで、通知の詳細を確認することができる。 When the notification means 13 of the smart device 1 is the display unit and the notification means 22 of the first device 2 is the display unit 22b, a code image such as a two-dimensional code may be displayed. As a result, the user can confirm the details of the notification by reading the code image using a mobile terminal or the like.

実施の形態2.
次に、本実施の形態2について説明する。本実施の形態2は、第2機器3により通知が発生した場合の通知の可否の確認方法が、実施の形態1と相違する。なお、以下の説明において、実施の形態1と共通する部分には同一の符号を付し、詳細な説明を省略する。
Embodiment 2.
Next, the second embodiment will be described. In the second embodiment, the method of confirming whether or not the notification is possible when the notification is generated by the second device 3 is different from that of the first embodiment. In the following description, the parts common to the first embodiment are designated by the same reference numerals, and detailed description thereof will be omitted.

[通知システム100の構成]
本実施の形態2に係る通知システム100は、図1に示す実施の形態1に係る通知システム100と同様に、スマートデバイス1、第1機器2、第2機器3およびサーバー4で構成されている。通知システム100において、スマートデバイス1と、第1機器2および第2機器3とが、それぞれ有線または無線で接続されている。また、スマートデバイス1は、ネットワーク5を介してサーバー4が有線または無線で接続されている。
[Configuration of notification system 100]
The notification system 100 according to the second embodiment is composed of a smart device 1, a first device 2, a second device 3, and a server 4, similarly to the notification system 100 according to the first embodiment shown in FIG. .. In the notification system 100, the smart device 1 and the first device 2 and the second device 3 are connected by wire or wirelessly, respectively. Further, in the smart device 1, the server 4 is connected by wire or wirelessly via the network 5.

(サーバー4)
本実施の形態2において、サーバー4には、スマートデバイス1によって参照されるデータベースが設けられている。このデータベースには、スマートデバイス1に接続された第1機器2および第2機器3と、それぞれの機器が有する通知機能とが関連付けられた情報が格納されている。すなわち、スマートデバイス1は、データベースを参照することにより、機器が有する通知機能と、各機器による通知の度合いとを確認することができる。
(Server 4)
In the second embodiment, the server 4 is provided with a database referenced by the smart device 1. In this database, information associated with the first device 2 and the second device 3 connected to the smart device 1 and the notification function of each device is stored. That is, the smart device 1 can confirm the notification function of the device and the degree of notification by each device by referring to the database.

(スマートデバイス1)
本実施の形態2に係るスマートデバイス1は、図2に示す実施の形態1に係るスマートデバイス1と同様に、制御装置10、第1の通信手段11、第2の通信手段12および通知手段13を備えている。
(Smart device 1)
The smart device 1 according to the second embodiment is the same as the smart device 1 according to the first embodiment shown in FIG. 2, the control device 10, the first communication means 11, the second communication means 12, and the notification means 13. It has.

制御装置10は、通知手段13による通知の制御等、スマートデバイス1全体を制御する。特に、本実施の形態2において、制御装置10は、第2の通信手段12を介して第2機器3の通知状態を示す情報を取得し、取得した情報に基づき、第1の通信手段11を介してサーバー4のデータベースを参照し、第2機器3の通知機能および通知の度合いを確認する。 The control device 10 controls the entire smart device 1 such as control of notification by the notification means 13. In particular, in the second embodiment, the control device 10 acquires information indicating the notification state of the second device 3 via the second communication means 12, and based on the acquired information, uses the first communication means 11. The database of the server 4 is referred to through the system, and the notification function and the degree of notification of the second device 3 are confirmed.

図12は、本実施の形態2に係るスマートデバイス1の制御装置10の構成の一例を示す機能ブロック図である。図12に示すように、制御装置10は、データベース確認部106、通知判断部107、人体検出部101、ユーザー確認部102、通知制御部103、通信制御部104および接続機器制御部105を備えている。制御装置10は、ソフトウェアを実行することにより各種機能を実現するマイクロコンピュータなどの演算装置、もしくは各種機能に対応する回路デバイスなどのハードウェア等で構成されている。 FIG. 12 is a functional block diagram showing an example of the configuration of the control device 10 of the smart device 1 according to the second embodiment. As shown in FIG. 12, the control device 10 includes a database confirmation unit 106, a notification determination unit 107, a human body detection unit 101, a user confirmation unit 102, a notification control unit 103, a communication control unit 104, and a connected device control unit 105. There is. The control device 10 is composed of an arithmetic unit such as a microcomputer that realizes various functions by executing software, or hardware such as a circuit device corresponding to various functions.

データベース確認部106は、通信制御部104の制御に基づき、第1の通信手段11を介してサーバー4のデータベースを参照する。具体的には、データベース確認部106は、サーバー4のデータベースを参照し、通知情報の送信元である機器の通知機能および通知の度合いを確認する。 The database confirmation unit 106 refers to the database of the server 4 via the first communication means 11 under the control of the communication control unit 104. Specifically, the database confirmation unit 106 refers to the database of the server 4 and confirms the notification function and the degree of notification of the device that is the source of the notification information.

通知判断部107は、サーバー4のデータベースの参照結果に基づき、第2機器3から受信した通知情報が示す通知を第2機器3で正確に通知できるか否かを判断する。 The notification determination unit 107 determines whether or not the notification indicated by the notification information received from the second device 3 can be accurately notified by the second device 3 based on the reference result of the database of the server 4.

通信制御部104は、第1の通信手段11および第2の通信手段12を制御する。具体的には、通信制御部104は、実施の形態1と同様に、第1機器2に対する通知情報の送信、および、第2機器3からの通知情報等の受信を行うように、第2の通信手段12を制御する。また、通信制御部104は、サーバー4のデータベースを参照するために、第1の通信手段11を介してサーバー4にアクセスする。 The communication control unit 104 controls the first communication means 11 and the second communication means 12. Specifically, the communication control unit 104 transmits the notification information to the first device 2 and receives the notification information and the like from the second device 3 as in the first embodiment. Controls the communication means 12. Further, the communication control unit 104 accesses the server 4 via the first communication means 11 in order to refer to the database of the server 4.

(第1機器2および第2機器3)
第1機器2は、図6および図7に示す実施形態1に係る第1機器2と同様の構成を備えている。また、第2機器3は、図8および図9に示す実施形態1に係る第2機器3と同様の構成を備えている。そのため、ここでは説明を省略する。
(1st device 2 and 2nd device 3)
The first device 2 has the same configuration as the first device 2 according to the first embodiment shown in FIGS. 6 and 7. Further, the second device 3 has the same configuration as the second device 3 according to the first embodiment shown in FIGS. 8 and 9. Therefore, the description thereof is omitted here.

[通知システム100の動作]
次に、本実施の形態2に係る通知システム100の動作について説明する。本実施の形態2では、簡易通知機能を有する第2機器3から通知が行われる場合において、通知処理を行う際に、第2機器3からの通知が正確であるか否かを、サーバー4上のデータを確認することによって判断する。
[Operation of notification system 100]
Next, the operation of the notification system 100 according to the second embodiment will be described. In the second embodiment, when the notification is sent from the second device 3 having the simple notification function, whether or not the notification from the second device 3 is accurate is checked on the server 4 when the notification process is performed. Judgment by checking the data of.

(通知処理)
図13は、本実施の形態2に係る通知システム100による通知処理の流れの一例を示すフローチャートである。まず、ステップS1において、第2機器3の通知情報生成部301は、実施の形態1と同様に、図示しないセンサの検出結果等に基づき、ユーザーに対して通知すべき内容を含む通知情報を生成する。
(Notification processing)
FIG. 13 is a flowchart showing an example of the flow of notification processing by the notification system 100 according to the second embodiment. First, in step S1, the notification information generation unit 301 of the second device 3 generates notification information including the content to be notified to the user based on the detection result of a sensor (not shown) or the like, as in the first embodiment. To do.

ステップS11において、第2機器3の通信制御部304は、ステップS1で生成された通知情報をスマートデバイス1に送信する。ステップS12において、スマートデバイス1の通信制御部104は、第2の通信手段12を介して通知情報を受信する。そして、スマートデバイス1のデータベース確認部106は、通信制御部104の制御に基づき、第1の通信手段11を介してサーバー4上のデータベースを参照し、第2機器3の通知機能を確認する。 In step S11, the communication control unit 304 of the second device 3 transmits the notification information generated in step S1 to the smart device 1. In step S12, the communication control unit 104 of the smart device 1 receives the notification information via the second communication means 12. Then, the database confirmation unit 106 of the smart device 1 refers to the database on the server 4 via the first communication means 11 based on the control of the communication control unit 104, and confirms the notification function of the second device 3.

ステップS13において、スマートデバイス1の通知判断部107は、第2機器3の通知手段32によって正確な通知を行うことができるか否かを判断する。通知を正確に行うことができると判断された場合(ステップS13:Yes)には、処理がステップS3に移行し、実施の形態1と同様に、第2機器3の通知制御部303の制御により、通知手段32を用いた通知が行われる。 In step S13, the notification determination unit 107 of the smart device 1 determines whether or not accurate notification can be performed by the notification means 32 of the second device 3. When it is determined that the notification can be performed accurately (step S13: Yes), the process shifts to step S3, and the notification control unit 303 of the second device 3 controls as in the first embodiment. , Notification is performed using the notification means 32.

一方、通知を正確に行うことができないと判断された場合(ステップS13:No)には、処理がステップS5に移行する。以下、実施の形態1で説明したステップS5〜ステップS8までの処理が行われ、ユーザーの周囲に存在する、詳細通知機能を有するスマートデバイス1または第1機器2による通知が行われる。 On the other hand, if it is determined that the notification cannot be performed accurately (step S13: No), the process proceeds to step S5. Hereinafter, the processes of steps S5 to S8 described in the first embodiment are performed, and the smart device 1 or the first device 2 having the detailed notification function existing around the user performs the notification.

このように、本実施の形態2では、簡易通知機能を有する第2機器3で通知がなされる場合に、通知情報がスマートデバイス1に送信される。そして、スマートデバイス1がサーバー4のデータベースにアクセスすることにより、第2機器3の通知機能の状態が判断され、実施の形態1と同様に、ユーザーの周囲に存在するスマートデバイス1および第1機器2のいずれかにより通知が行われる。これにより、第2機器3による通知では詳細が不明であるような通知でも、ユーザーの周囲の第1機器2によって詳細な通知が行われるため、実施の形態1と同様に、通知機能が正確でない機器が通知した場合でも、正確な通知を適切に行うことができる。 As described above, in the second embodiment, the notification information is transmitted to the smart device 1 when the notification is made by the second device 3 having the simple notification function. Then, when the smart device 1 accesses the database of the server 4, the state of the notification function of the second device 3 is determined, and the smart device 1 and the first device existing around the user are as in the first embodiment. Notification is given by either of 2. As a result, even if the details of the notification by the second device 3 are unknown, the detailed notification is performed by the first device 2 around the user, so that the notification function is not accurate as in the first embodiment. Even when the device notifies, accurate notification can be appropriately performed.

以上のように、本実施の形態2に係る通知システム100では、第2機器3が通知を行う場合に、スマートデバイス1が、サーバー4上のデータベースを参照し、当該通知が通知内容を十分に示しているか否かを判断する。そして、当該通知が通知内容を十分に示していない場合に、詳細通知機能を有する、ユーザーに最も近いスマートデバイス1または第1機器2が通知を行う。これにより、詳細が不明であるような通知が行われる場合でも、詳細な通知を行うことができる機器によって通知が行われるため、実施の形態1と同様に、正確な通知を適切に行うことができる。 As described above, in the notification system 100 according to the second embodiment, when the second device 3 gives a notification, the smart device 1 refers to the database on the server 4, and the notification sufficiently informs the content of the notification. Judge whether it is shown or not. Then, when the notification does not sufficiently indicate the content of the notification, the smart device 1 or the first device 2 closest to the user, which has a detailed notification function, performs the notification. As a result, even if a notification whose details are unknown is given, the notification is given by a device capable of giving the detailed notification. Therefore, as in the first embodiment, accurate notification can be appropriately performed. it can.

また、スマートデバイス1および第1機器2のそれぞれは、ユーザーを検出し、スマートデバイス1は、検出結果に基づき、ユーザーに最も近い機器を、通知を行う機器として選択する。これにより、ユーザーに最も近い機器から詳細な通知が行われるため、ユーザーに対して通知を適切に行うことができる。 Further, each of the smart device 1 and the first device 2 detects the user, and the smart device 1 selects the device closest to the user as the device to be notified based on the detection result. As a result, detailed notification is given from the device closest to the user, so that the user can be notified appropriately.

実施の形態3.
次に、本実施の形態3について説明する。本実施の形態3では、スマートデバイス1に接続されていない第2機器3が通知を行った場合に、第2機器3に代わって他の機器が通知を行う通知システムについて説明する。なお、以下の説明において、実施の形態1および2と共通する部分には同一の符号を付し、詳細な説明を省略する。
Embodiment 3.
Next, the third embodiment will be described. In the third embodiment, a notification system will be described in which, when the second device 3 not connected to the smart device 1 gives a notification, another device gives a notification in place of the second device 3. In the following description, the same reference numerals are given to the parts common to the first and second embodiments, and detailed description thereof will be omitted.

[通知システム100の構成]
図14は、本実施の形態3に係る通知システム100の構成の一例を示す概略図である。図14に示すように、本実施の形態3に係る通知システム100は、図1に示す実施の形態1および2に係る通知システム100と同様に、スマートデバイス1、第1機器2、第2機器3およびサーバー4で構成されている。ここで、本実施の形態3に係る通知システム100では、実施の形態1および2と同様に、スマートデバイス1と第1機器2とが、それぞれ有線または無線で接続されている。また、スマートデバイス1は、ネットワーク5を介してサーバー4が有線または無線で接続されている。一方、第2機器3は、スマートデバイス1と接続されていない。
[Configuration of notification system 100]
FIG. 14 is a schematic view showing an example of the configuration of the notification system 100 according to the third embodiment. As shown in FIG. 14, the notification system 100 according to the third embodiment is the smart device 1, the first device 2, and the second device, similarly to the notification system 100 according to the first and second embodiments shown in FIG. It is composed of 3 and a server 4. Here, in the notification system 100 according to the third embodiment, the smart device 1 and the first device 2 are connected by wire or wirelessly, respectively, as in the first and second embodiments. Further, in the smart device 1, the server 4 is connected by wire or wirelessly via the network 5. On the other hand, the second device 3 is not connected to the smart device 1.

(サーバー4)
本実施の形態3において、サーバー4には、スマートデバイス1によって参照されるデータベースが設けられている。このデータベースには、簡易通知機能を有する第2機器3からの通知音と、通知音が示す通知内容とが関連付けられた情報が格納されている。すなわち、スマートデバイス1は、データベースを参照することにより、収集した音声から得られる通知音に対応する通知内容を確認することができる。
(Server 4)
In the third embodiment, the server 4 is provided with a database referenced by the smart device 1. In this database, information associated with the notification sound from the second device 3 having the simple notification function and the notification content indicated by the notification sound is stored. That is, the smart device 1 can confirm the notification content corresponding to the notification sound obtained from the collected voice by referring to the database.

(スマートデバイス1)
本実施の形態3に係るスマートデバイス1は、通知手段13に加えて、AIアシスタント機能を用いてユーザーからの質問等を収集するための集音手段14を有している。この集音手段14は、本実施の形態3において、第2機器3によって通知が行われた際に出力される通知音を収集するために用いられる。
(Smart device 1)
The smart device 1 according to the third embodiment has, in addition to the notification means 13, a sound collecting means 14 for collecting questions and the like from users by using the AI assistant function. The sound collecting means 14 is used in the third embodiment to collect the notification sound output when the notification is given by the second device 3.

図15は、図14のスマートデバイス1の構成の一例を示すブロック図である。図15に示すように、スマートデバイス1は、制御装置10、第1の通信手段11、第2の通信手段12、通知手段13および集音手段14を備えている。集音手段14は、例えばマイクロフォンであり、周囲の音声を収集し、収集した音声を制御装置10に供給する。 FIG. 15 is a block diagram showing an example of the configuration of the smart device 1 of FIG. As shown in FIG. 15, the smart device 1 includes a control device 10, a first communication means 11, a second communication means 12, a notification means 13, and a sound collecting means 14. The sound collecting means 14 is, for example, a microphone, collects surrounding sounds, and supplies the collected sounds to the control device 10.

制御装置10は、通知手段13による通知の制御、および、集音手段14による音声の収集の制御等、スマートデバイス1全体を制御する。特に、本実施の形態3において、制御装置10は、第2の通信手段12を介して、接続された第1機器2で収集された第2機器3の通知音を取得する。そして、制御装置10は、取得した通知音に基づき、第1の通信手段11を介してサーバー4のデータベースを参照し、第2機器3の通知が十分であるか否かを判断する。 The control device 10 controls the entire smart device 1 such as control of notification by the notification means 13 and control of voice collection by the sound collecting means 14. In particular, in the third embodiment, the control device 10 acquires the notification sound of the second device 3 collected by the connected first device 2 via the second communication means 12. Then, the control device 10 refers to the database of the server 4 via the first communication means 11 based on the acquired notification sound, and determines whether or not the notification of the second device 3 is sufficient.

図16は、図15の制御装置10の構成の一例を示す機能ブロック図である。図16に示すように、制御装置10は、集音部108、音声解析部109、データベース確認部106、通知判断部107、ユーザー確認部102、通知制御部103、通信制御部104および接続機器制御部105を備えている。制御装置10は、ソフトウェアを実行することにより各種機能を実現するマイクロコンピュータなどの演算装置、もしくは各種機能に対応する回路デバイスなどのハードウェア等で構成されている。 FIG. 16 is a functional block diagram showing an example of the configuration of the control device 10 of FIG. As shown in FIG. 16, the control device 10 includes a sound collecting unit 108, a voice analysis unit 109, a database confirmation unit 106, a notification determination unit 107, a user confirmation unit 102, a notification control unit 103, a communication control unit 104, and connection device control. The unit 105 is provided. The control device 10 is composed of an arithmetic unit such as a microcomputer that realizes various functions by executing software, or hardware such as a circuit device corresponding to various functions.

集音部108は、集音手段14によって収集された周囲の音声を取得する。音声解析部109は、集音部108で取得された音声を解析し、音声の中から第2機器3からの通知音を抽出する。 The sound collecting unit 108 acquires the surrounding sound collected by the sound collecting means 14. The voice analysis unit 109 analyzes the voice acquired by the sound collection unit 108, and extracts the notification sound from the second device 3 from the voice.

本実施の形態3において、ユーザー確認部102は、後述するように、通知手段13に第2機器3からの通知音に対する詳細な通知の必要性の有無を判断する。また、データベース確認部106は、通信制御部104の制御に基づき、第1の通信手段11を介してサーバー4のデータベースを参照する。具体的には、データベース確認部106は、サーバー4のデータベースを参照し、収集された通知音に対応する通知内容を確認する。 In the third embodiment, the user confirmation unit 102 determines whether or not the notification means 13 needs detailed notification of the notification sound from the second device 3, as will be described later. Further, the database confirmation unit 106 refers to the database of the server 4 via the first communication means 11 under the control of the communication control unit 104. Specifically, the database confirmation unit 106 refers to the database of the server 4 and confirms the notification content corresponding to the collected notification sound.

本実施の形態3において、通知判断部107は、サーバー4のデータベースの参照結果に基づき、第2機器3からの通知音が通知内容を十分に示しているか否かを判断する。 In the third embodiment, the notification determination unit 107 determines whether or not the notification sound from the second device 3 sufficiently indicates the notification content based on the reference result of the database of the server 4.

(第1機器2)
本実施の形態3に係る図14の第1機器2は、通知手段22に加えて、周囲の音声を収集するための集音手段23を有している。この集音手段23は、本実施の形態3において、第2機器3によって通知が行われた際に出力される通知音を収集するために用いられる。
(1st device 2)
The first device 2 of FIG. 14 according to the third embodiment has, in addition to the notification means 22, a sound collecting means 23 for collecting surrounding sounds. The sound collecting means 23 is used in the third embodiment to collect the notification sound output when the notification is given by the second device 3.

図17は、図14の第1機器2の構成の一例を示すブロック図である。図17に示すように、第1機器2は、制御装置20、第3の通信手段21、通知手段22および集音手段23を備えている。集音手段23は、例えばマイクロフォンであり、周囲の音声を収集し、収集した音声を制御装置20に供給する。 FIG. 17 is a block diagram showing an example of the configuration of the first device 2 of FIG. As shown in FIG. 17, the first device 2 includes a control device 20, a third communication means 21, a notification means 22, and a sound collecting means 23. The sound collecting means 23 is, for example, a microphone, collects surrounding sounds, and supplies the collected sounds to the control device 20.

制御装置20は、通知手段22による通知の制御、および、集音手段23による音声の収集の制御等、第1機器2全体を制御する。特に、本実施の形態3において、制御装置20は、集音手段23により周囲の音声を収集する。そして、制御装置10は、収集した音声から特定の音声である通知音を抽出する。 The control device 20 controls the entire first device 2 such as control of notification by the notification means 22 and control of voice collection by the sound collecting means 23. In particular, in the third embodiment, the control device 20 collects ambient sounds by the sound collecting means 23. Then, the control device 10 extracts a notification sound, which is a specific voice, from the collected voice.

図18は、図17の制御装置20の構成の一例を示す機能ブロック図である。図18に示すように、制御装置20は、集音部205、音声解析部206、通知情報生成部201、通知制御部203および通信制御部204を備えている。制御装置20は、ソフトウェアを実行することにより各種機能を実現するマイクロコンピュータなどの演算装置、もしくは各種機能に対応する回路デバイスなどのハードウェア等で構成されている。 FIG. 18 is a functional block diagram showing an example of the configuration of the control device 20 of FIG. As shown in FIG. 18, the control device 20 includes a sound collecting unit 205, a voice analysis unit 206, a notification information generation unit 201, a notification control unit 203, and a communication control unit 204. The control device 20 is composed of an arithmetic unit such as a microcomputer that realizes various functions by executing software, or hardware such as a circuit device corresponding to various functions.

集音部205は、集音手段23によって収集された周囲の音声を取得する。音声解析部206は、集音部205で取得された音声を解析し、音声の中から第2機器3からの通知音を抽出する。 The sound collecting unit 205 acquires the surrounding sound collected by the sound collecting means 23. The voice analysis unit 206 analyzes the voice acquired by the sound collection unit 205 and extracts the notification sound from the second device 3 from the voice.

(第2機器3)
本実施の形態3に係る図14の第2機器3は、例えば電子レンジであり、簡易な情報を通知することができる簡易通知機能を有している。上述したように、本実施の形態3に係る第2機器3は、スマートデバイス1には接続されておらず、独立して設けられている。図19は、図14の第2機器3の構成の一例を示すブロック図である。図19に示すように、第2機器3は、制御装置30および通知手段32を備えている。制御装置30は、通知手段32による通知の制御等、第2機器3全体を制御する。
(Second device 3)
The second device 3 of FIG. 14 according to the third embodiment is, for example, a microwave oven, and has a simple notification function capable of notifying simple information. As described above, the second device 3 according to the third embodiment is not connected to the smart device 1 and is provided independently. FIG. 19 is a block diagram showing an example of the configuration of the second device 3 of FIG. As shown in FIG. 19, the second device 3 includes a control device 30 and a notification means 32. The control device 30 controls the entire second device 3 such as control of notification by the notification means 32.

図20は、図19の制御装置30の構成の一例を示す機能ブロック図である。図20に示すように、制御装置30は、通知情報生成部301および通知制御部303を備えている。制御装置30は、ソフトウェアを実行することにより各種機能を実現するマイクロコンピュータなどの演算装置、もしくは各種機能に対応する回路デバイスなどのハードウェア等で構成されている。 FIG. 20 is a functional block diagram showing an example of the configuration of the control device 30 of FIG. As shown in FIG. 20, the control device 30 includes a notification information generation unit 301 and a notification control unit 303. The control device 30 is composed of an arithmetic unit such as a microcomputer that realizes various functions by executing software, or hardware such as a circuit device corresponding to various functions.

[通知システム100の動作]
次に、本実施の形態3に係る通知システム100の動作について説明する。本実施の形態3では、簡易通知機能を有する第2機器3から通知が行われる場合において、通知処理を行う際に、第2機器3から出力される通知が、スマートデバイス1および第1機器2によって収集される。そして、収集された通知に基づき、第2機器3の代わりに通知を行う機器が選択され、選択された機器による通知が行われる。
[Operation of notification system 100]
Next, the operation of the notification system 100 according to the third embodiment will be described. In the third embodiment, when the notification is sent from the second device 3 having the simple notification function, the notification output from the second device 3 when the notification process is performed is the smart device 1 and the first device 2. Collected by. Then, based on the collected notification, a device to be notified is selected instead of the second device 3, and the selected device is used for the notification.

(通知処理)
図21は、本実施の形態3に係る通知システム100による通知処理の流れの一例を示すフローチャートである。なお、以下では、第2機器3の通知手段32が通知音を出力する音声出力部32aである場合について説明する。
(Notification processing)
FIG. 21 is a flowchart showing an example of the flow of notification processing by the notification system 100 according to the third embodiment. In the following, a case where the notification means 32 of the second device 3 is an audio output unit 32a that outputs a notification sound will be described.

まず、ステップS1において、第2機器3の通知情報生成部301は、実施の形態1および2と同様に、図示しないセンサの検出結果等に基づき、ユーザーに対して通知すべき内容を含む通知情報を生成する。ステップS21において、第2機器3の通知制御部303は、通知手段32としての音声出力部32aを用いて、通知音を出力する。 First, in step S1, the notification information generation unit 301 of the second device 3 similarly includes notification information including contents to be notified to the user based on the detection result of a sensor (not shown) or the like, as in the first and second embodiments. To generate. In step S21, the notification control unit 303 of the second device 3 outputs the notification sound by using the voice output unit 32a as the notification means 32.

ステップS22において、第2機器3から出力された通知音を集音できる機器が存在するか否かが判断される。この場合、集音手段14が設けられたスマートデバイス1と、集音手段23が設けられた第1機器2とが、第2機器3からの通知音を集音できる機器となる。通知音を集音できる機器が存在しない場合には(ステップS22:No)、第2機器3から通知音が出力されるのみで、一連の処理が終了する。 In step S22, it is determined whether or not there is a device capable of collecting the notification sound output from the second device 3. In this case, the smart device 1 provided with the sound collecting means 14 and the first device 2 provided with the sound collecting means 23 are devices capable of collecting the notification sound from the second device 3. If there is no device capable of collecting the notification sound (step S22: No), only the notification sound is output from the second device 3, and a series of processes is completed.

一方、通知音を集音できる機器が存在する場合(ステップS22:Yes)、対象機器(ここでは、第1機器2とする)の集音部205は、ステップS23において、集音手段23を用いて第2機器3からの通知音を含む周囲の音声を収集する。そして、周囲の音声を収集した第1機器2の音声解析部206は、収集した音声を解析し、通知音を抽出する。 On the other hand, when there is a device capable of collecting the notification sound (step S22: Yes), the sound collecting unit 205 of the target device (here, the first device 2) uses the sound collecting means 23 in step S23. The surrounding sound including the notification sound from the second device 3 is collected. Then, the voice analysis unit 206 of the first device 2 that collects the surrounding voice analyzes the collected voice and extracts the notification sound.

ステップS24において、第1機器2の通信制御部204は、第3の通信手段21を介して、抽出した通知音をスマートデバイス1に送信する。スマートデバイス1に送信された通知音は、スマートデバイス1の通信制御部104により、第2の通信手段12を介してスマートデバイス1に受信される。このとき、通信制御部104は、通知音を収集したすべての機器から通知音を受信する。 In step S24, the communication control unit 204 of the first device 2 transmits the extracted notification sound to the smart device 1 via the third communication means 21. The notification sound transmitted to the smart device 1 is received by the communication control unit 104 of the smart device 1 to the smart device 1 via the second communication means 12. At this time, the communication control unit 104 receives the notification sound from all the devices that have collected the notification sound.

ステップS25において、スマートデバイス1のデータベース確認部106は、通信制御部104の制御に基づき、第1の通信手段11を介してサーバー4上のデータベースを参照し、収集した通知音に対応する通知内容を確認する。そして、スマートデバイス1の通知判断部107は、データベースの確認結果に基づき、第2機器3からの通知音が通知内容を十分に示しているか否かを判断する。 In step S25, the database confirmation unit 106 of the smart device 1 refers to the database on the server 4 via the first communication means 11 based on the control of the communication control unit 104, and the notification content corresponding to the collected notification sound. To confirm. Then, the notification determination unit 107 of the smart device 1 determines whether or not the notification sound from the second device 3 sufficiently indicates the notification content based on the confirmation result of the database.

第2機器3からの通知音が通知内容を十分に示していると判断された場合(ステップS25:Yes)には、一連の処理が終了する。一方、第2機器3からの通知音が通知内容を十分に示していないと判断された場合(ステップS25:No)には、処理がステップS26に移行する。ステップS26において、スマートデバイス1の通知制御部103は、通知手段13を用いてユーザーに対して詳細な通知の必要性を確認するための通知を行う。 When it is determined that the notification sound from the second device 3 sufficiently indicates the content of the notification (step S25: Yes), a series of processes is completed. On the other hand, when it is determined that the notification sound from the second device 3 does not sufficiently indicate the notification content (step S25: No), the process proceeds to step S26. In step S26, the notification control unit 103 of the smart device 1 uses the notification means 13 to notify the user to confirm the necessity of detailed notification.

ステップS27において、スマートデバイス1のユーザー確認部102は、ユーザーからの応答に基づき、詳細な通知の必要性の有無を判断する。詳細な通知の必要性がないと判断された場合(ステップS27:No)には、一連の処理が終了する。 In step S27, the user confirmation unit 102 of the smart device 1 determines whether or not detailed notification is necessary based on the response from the user. When it is determined that there is no need for detailed notification (step S27: No), a series of processes ends.

一方、詳細な通知の必要性があると判断された場合(ステップS27:Yes)には、スマートデバイス1の接続機器制御部105は、ステップS28において、複数の機器から通知音を収集した場合に、複数の機器の中から、詳細な通知を行う機器を選択する。この場合、例えば、複数の機器によって収集された通知音の中から、音圧レベルが最も高い機器、あるいは、通知音を最初に検出した機器が選択される。これは、第2機器3から最も近い機器が選択されることになり、通知を行う第2機器3の近くにいると考えられるユーザーに対して詳細な通知を確実に通知することができるためである。 On the other hand, when it is determined that detailed notification is necessary (step S27: Yes), the connected device control unit 105 of the smart device 1 collects notification sounds from a plurality of devices in step S28. , Select the device that gives detailed notification from multiple devices. In this case, for example, the device having the highest sound pressure level or the device that first detects the notification sound is selected from the notification sounds collected by the plurality of devices. This is because the device closest to the second device 3 is selected, and detailed notification can be reliably notified to the user who is considered to be near the second device 3 that performs the notification. is there.

ステップS29において、スマートデバイス1の通信制御部104は、第2の通信手段12を介して、選択された機器に対して通知音に対応する通知内容を含む通知情報を送信する。ステップS30において、選択された機器(例えば、第1機器2)の通信制御部204は、スマートデバイス1から送信された通知情報を、第3の通信手段21を介して受信する。そして、第1機器2の通知制御部203は、通知手段22を用いて、受信した通知情報が示す通知、すなわち、第2機器3からの通知に対応する詳細な通知を行う。 In step S29, the communication control unit 104 of the smart device 1 transmits notification information including the notification content corresponding to the notification sound to the selected device via the second communication means 12. In step S30, the communication control unit 204 of the selected device (for example, the first device 2) receives the notification information transmitted from the smart device 1 via the third communication means 21. Then, the notification control unit 203 of the first device 2 uses the notification means 22 to perform the notification indicated by the received notification information, that is, the detailed notification corresponding to the notification from the second device 3.

このように、本実施の形態3では、スマートデバイス1に接続されていない第2機器3で通知がなされる場合に、第1機器2等の他の機器が第2機器3からの通知音を収集する。そして、スマートデバイス1がサーバー4にアクセスし、収集された通知音が通知内容を十分に示しているか否かが判断される。そして、通知音が通知内容を十分に示していない場合に、第2機器3に最も近い機器が第2機器3に代わって通知を行う。これにより、第2機器3がスマートデバイス1に接続されていない場合に、詳細が不明な通知が行われた場合でも、実施の形態1および2と同様に、正確な通知を適切に行うことができる。 As described above, in the third embodiment, when the notification is given by the second device 3 that is not connected to the smart device 1, another device such as the first device 2 emits the notification sound from the second device 3. collect. Then, the smart device 1 accesses the server 4, and it is determined whether or not the collected notification sound sufficiently indicates the notification content. Then, when the notification sound does not sufficiently indicate the content of the notification, the device closest to the second device 3 gives the notification on behalf of the second device 3. As a result, when the second device 3 is not connected to the smart device 1, even if a notification whose details are unknown is given, accurate notification can be appropriately performed as in the first and second embodiments. it can.

以上のように、本実施の形態3に係る通知システム100では、スマートデバイス1および第1機器2により、第2機器3からの通知音が収集される。スマートデバイス1は、収集された通知音に基づき、サーバー4上のデータベースを参照し、当該通知が通知内容を十分に示しているか否かを判断する。そして、当該通知が通知内容を十分に示していない場合に、詳細通知機能を有する、ユーザーに最も近いスマートデバイス1または第1機器2が通知を行う。これにより、詳細が不明であるような通知が行われる場合でも、詳細な通知を行うことができる機器によって通知が行われるため、実施の形態1および2と同様に、正確な通知を適切に行うことができる。 As described above, in the notification system 100 according to the third embodiment, the notification sound from the second device 3 is collected by the smart device 1 and the first device 2. Based on the collected notification sound, the smart device 1 refers to the database on the server 4 and determines whether or not the notification sufficiently indicates the content of the notification. Then, when the notification does not sufficiently indicate the content of the notification, the smart device 1 or the first device 2 closest to the user, which has a detailed notification function, performs the notification. As a result, even when a notification whose details are unknown is given, the notification is given by a device capable of giving the detailed notification. Therefore, as in the first and second embodiments, accurate notification is appropriately performed. be able to.

また、スマートデバイス1は、スマートデバイス1および第1機器2のそれぞれの機器のうち、通知音の音圧レベルが最も高い機器および通知音を最初に収集した機器のいずれかの機器を、通知内容の通知を行う機器として選択する。これにより、ユーザーに最も近い機器から詳細な通知が行われるため、ユーザーに対して通知を適切に行うことができる。 Further, the smart device 1 notifies the device having the highest sound pressure level of the notification sound and the device that first collects the notification sound among the devices of the smart device 1 and the first device 2. Select as the device to notify. As a result, detailed notification is given from the device closest to the user, so that the user can be notified appropriately.

以上、実施の形態1〜3について説明したが、通知システム100は、上述した実施の形態1〜3に限定されるものではなく、要旨を逸脱しない範囲内で様々な変形や応用が可能である。例えば、実施の形態1〜3では、スマートデバイス1を構成要件の一部として説明したが、これはこの例に限られない。例えば、第1機器2が、スマートデバイス1が有する機能と、サーバー4に接続する接続手段とを有していれば、スマートデバイス1を用いることなく実施の形態1〜3の通知システム100を構成することができる。 Although the first to third embodiments have been described above, the notification system 100 is not limited to the first to third embodiments described above, and various modifications and applications can be made within a range that does not deviate from the gist. .. For example, in the first to third embodiments, the smart device 1 has been described as a part of the configuration requirements, but this is not limited to this example. For example, if the first device 2 has the function of the smart device 1 and the connection means for connecting to the server 4, the notification system 100 of the first to third embodiments is configured without using the smart device 1. can do.

1 スマートデバイス、2 第1機器、3 第2機器、4 サーバー、5 ネットワーク、10 制御装置、11 第1の通信手段、12 第2の通信手段、13 通知手段、13a 音声出力部、14 集音手段、20 制御装置、21 第3の通信手段、22 通知手段、22a 音声出力部、22b 表示部、23 集音手段、30 制御装置、31 第4の通信手段、32 通知手段、32a 音声出力部、32b 表示部、41 処理回路、51 プロセッサ、52 メモリ、100 通知システム、101 人体検出部、102 ユーザー確認部、103 通知制御部、104 通信制御部、105 接続機器制御部、106 データベース確認部、107 通知判断部、108 集音部、109 音声解析部、201 通知情報生成部、202 人体検出部、203 通知制御部、204 通信制御部、205 集音部、206 音声解析部、220 二次元コード、301 通知情報生成部、302 通知判断部、303 通知制御部、304 通信制御部。 1 Smart device, 2 1st device, 3 2nd device, 4 server, 5 network, 10 control device, 11 1st communication means, 12 2nd communication means, 13 notification means, 13a sound output unit, 14 sound collection Means, 20 control device, 21 third communication means, 22 notification means, 22a voice output unit, 22b display unit, 23 sound collecting means, 30 control device, 31 fourth communication means, 32 notification means, 32a voice output unit , 32b display unit, 41 processing circuit, 51 processor, 52 memory, 100 notification system, 101 human body detection unit, 102 user confirmation unit, 103 notification control unit, 104 communication control unit, 105 connected device control unit, 106 database confirmation unit, 107 Notification judgment unit, 108 Sound collection unit, 109 Sound analysis unit, 201 Notification information generation unit, 202 Human body detection unit, 203 Notification control unit, 204 Communication control unit, 205 Sound collection unit, 206 Sound analysis unit, 220 Two-dimensional code , 301 Notification information generation unit, 302 Notification judgment unit, 303 Notification control unit, 304 Communication control unit.

Claims (7)

第1通知手段を備え、通知を行う際に通知内容を詳細に通知する詳細通知機能を有する第1機器と、
第2通知手段を備え、通知を行う際に通知内容を前記詳細通知機能よりも簡易的に通知する簡易通知機能を有する第2機器と、
第3通知手段を備え、通知を行う際に通知内容を詳細に通知する詳細通知機能を有するとともに、前記第1機器および前記第2機器を制御する集中制御機器と
を含んで構成され、
前記第2機器は、
前記通知を行う際に、前記通知内容を含む通知情報を生成する通知情報生成部を備え、
前記集中制御機器は、
前記第2機器による通知が、前記通知情報が示す前記通知内容を十分に示していないと判断された場合に、前記集中制御機器および前記第1機器のそれぞれの機器のうち、ユーザーに最も近い機器が、前記詳細通知機能を用いて、前記通知情報が示す前記通知内容の通知を行うように、それぞれの前記機器を制御する
通知システム。
A first device equipped with a first notification means and having a detailed notification function for notifying the content of notification in detail when making a notification.
A second device provided with a second notification means and having a simple notification function for notifying the content of the notification more simply than the detailed notification function when making a notification.
It is provided with a third notification means, has a detailed notification function for notifying the content of notification in detail when performing notification, and is configured to include a centralized control device that controls the first device and the second device.
The second device is
A notification information generation unit that generates notification information including the notification content when performing the notification is provided.
The centralized control device
When it is determined that the notification by the second device does not sufficiently indicate the notification content indicated by the notification information, the device closest to the user among the devices of the centralized control device and the first device. Is a notification system that controls each of the devices so as to notify the notification content indicated by the notification information by using the detailed notification function.
前記第2機器は、
前記通知が前記通知内容を十分に示しているか否かを判断する通知判断部を備える
請求項1に記載の通知システム。
The second device is
The notification system according to claim 1, further comprising a notification determination unit for determining whether or not the notification sufficiently indicates the content of the notification.
前記第1機器および前記第2機器と、それぞれの機器が有する通知機能とが関連付けられたデータベースを保持するサーバーをさらに含み、
前記集中制御機器は、
前記第2機器が前記通知を行う際に、前記データベースを参照し、前記通知が前記通知内容を十分に示しているか否かを判断する通知判断部を備える
請求項1に記載の通知システム。
It further includes a server that holds a database in which the first device and the second device are associated with the notification function of each device.
The centralized control device
The notification system according to claim 1, further comprising a notification determination unit that refers to the database when the second device makes the notification and determines whether or not the notification sufficiently indicates the content of the notification.
前記集中制御機器および前記第1機器のそれぞれは、
周囲に存在する前記ユーザーを検出する人体検出部を備え、
前記集中制御機器は、
前記通知が前記通知内容を十分に示していないと判断された場合に、前記人体検出部による検出結果に基づき、前記ユーザーに最も近い機器を選択する
請求項1〜3のいずれか一項に記載の通知システム。
Each of the centralized control device and the first device
It is equipped with a human body detection unit that detects the user in the vicinity.
The centralized control device
The invention according to any one of claims 1 to 3, wherein when it is determined that the notification does not sufficiently indicate the content of the notification, the device closest to the user is selected based on the detection result by the human body detection unit. Notification system.
第1通知手段と、周囲の音声を収集する第1集音手段とを備え、通知を行う際に通知内容を詳細に通知する詳細通知機能を有する第1機器と、
通知音による通知を行う第2通知手段を備え、通知を行う際に通知内容を前記詳細通知機能よりも簡易的に通知する簡易通知機能を有する第2機器と、
前記第2機器からの前記通知音と、前記通知音が示す通知内容とが関連付けられたデータベースを保持するサーバーと、
第3通知手段と、周囲の音声を収集する第2集音手段とを備え、通知を行う際に通知内容を詳細に通知する詳細通知機能を有するとともに、前記第1機器を制御する集中制御機器と
を含んで構成され、
前記第2機器は、
前記通知を行う際に、前記通知内容を含む通知情報を生成する通知情報生成部を備え、
前記集中制御機器は、
前記集中制御機器および前記第1機器のそれぞれで収集された前記音声に含まれる前記通知音に基づき、前記データベースを参照するデータベース確認部と、
前記データベースの参照結果に基づき、前記通知が前記通知内容を十分に示しているか否かを判断する通知判断部と
を備え、
前記第2機器による通知が前記通知内容を十分に示していないと判断された場合に、前記集中制御機器および前記第1機器のそれぞれの機器のうち、ユーザーに最も近い機器が、前記詳細通知機能を用いて、前記通知情報が示す前記通知内容の通知を行うように、それぞれの前記機器を制御する
通知システム。
A first device having a first notification means and a first sound collecting means for collecting surrounding sounds, and having a detailed notification function for notifying the notification contents in detail when making a notification.
A second device having a second notification means for notifying by a notification sound and having a simple notification function for notifying the notification content more simply than the detailed notification function when making a notification.
A server that holds a database in which the notification sound from the second device and the notification content indicated by the notification sound are associated with each other.
A centralized control device that includes a third notification means and a second sound collection means that collects surrounding sounds, has a detailed notification function that notifies the notification content in detail when making a notification, and controls the first device. Consists of including and
The second device is
A notification information generation unit that generates notification information including the notification content when performing the notification is provided.
The centralized control device
A database confirmation unit that refers to the database based on the notification sound included in the voice collected by the centralized control device and the first device, respectively.
A notification determination unit for determining whether or not the notification sufficiently indicates the content of the notification based on the reference result of the database is provided.
When it is determined that the notification by the second device does not sufficiently indicate the content of the notification, the device closest to the user among the centralized control device and the device of the first device is the detailed notification function. A notification system that controls each of the devices so as to notify the content of the notification indicated by the notification information.
前記集中制御機器は、
前記集中制御機器および前記第1機器のそれぞれの機器のうち、前記通知音の音圧レベルが最も高い機器および前記通知音を最初に収集した機器のいずれかの機器を、前記通知情報が示す前記通知内容の通知を行う機器として選択する接続機器制御部を備える
請求項5に記載の通知システム。
The centralized control device
Among the devices of the centralized control device and the first device, the device having the highest sound pressure level of the notification sound and the device that first collected the notification sound is indicated by the notification information. The notification system according to claim 5, further comprising a connected device control unit selected as a device for notifying the notification content.
前記第1通知手段および前記第3通知手段は、
画像を表示する表示部であり、
前記通知を行う場合に、前記通知内容に関するコード画像が表示される
請求項1〜6のいずれか一項に記載の通知システム。
The first notification means and the third notification means
It is a display unit that displays images.
The notification system according to any one of claims 1 to 6, wherein a code image relating to the content of the notification is displayed when the notification is performed.
JP2019094230A 2019-05-20 2019-05-20 Notification system Active JP7253975B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2019094230A JP7253975B2 (en) 2019-05-20 2019-05-20 Notification system

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2019094230A JP7253975B2 (en) 2019-05-20 2019-05-20 Notification system

Publications (2)

Publication Number Publication Date
JP2020190790A true JP2020190790A (en) 2020-11-26
JP7253975B2 JP7253975B2 (en) 2023-04-07

Family

ID=73454572

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2019094230A Active JP7253975B2 (en) 2019-05-20 2019-05-20 Notification system

Country Status (1)

Country Link
JP (1) JP7253975B2 (en)

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002297496A (en) * 2001-04-02 2002-10-11 Hitachi Ltd Media delivery system and multimedia conversion server
JP2013186573A (en) * 2012-03-06 2013-09-19 Sharp Corp Information processing device
JP2016004517A (en) * 2014-06-19 2016-01-12 ブラザー工業株式会社 Function execution device, display device and function execution program
JP2016057770A (en) * 2014-09-08 2016-04-21 シャープ株式会社 Notification device, output device, information notification system, control method of information device, and control program
JP2016076799A (en) * 2014-10-03 2016-05-12 シャープ株式会社 Consumer electronics administrative system, consumer electronics, remote-control device, and robot
US20170065757A1 (en) * 2015-09-08 2017-03-09 Fresenius Medical Care Holdings, Inc. Voice Interface for a Dialysis Machine
JP2017182116A (en) * 2016-03-28 2017-10-05 セイコーエプソン株式会社 Program for error notification, error notification method, electronic apparatus, and error notification system
JP2018036397A (en) * 2016-08-30 2018-03-08 シャープ株式会社 Response system and apparatus

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002297496A (en) * 2001-04-02 2002-10-11 Hitachi Ltd Media delivery system and multimedia conversion server
JP2013186573A (en) * 2012-03-06 2013-09-19 Sharp Corp Information processing device
JP2016004517A (en) * 2014-06-19 2016-01-12 ブラザー工業株式会社 Function execution device, display device and function execution program
JP2016057770A (en) * 2014-09-08 2016-04-21 シャープ株式会社 Notification device, output device, information notification system, control method of information device, and control program
JP2016076799A (en) * 2014-10-03 2016-05-12 シャープ株式会社 Consumer electronics administrative system, consumer electronics, remote-control device, and robot
US20170065757A1 (en) * 2015-09-08 2017-03-09 Fresenius Medical Care Holdings, Inc. Voice Interface for a Dialysis Machine
JP2017182116A (en) * 2016-03-28 2017-10-05 セイコーエプソン株式会社 Program for error notification, error notification method, electronic apparatus, and error notification system
JP2018036397A (en) * 2016-08-30 2018-03-08 シャープ株式会社 Response system and apparatus

Also Published As

Publication number Publication date
JP7253975B2 (en) 2023-04-07

Similar Documents

Publication Publication Date Title
US10890897B2 (en) Assembly of a modular structure
CN106961514B (en) Terminal device and information output method
JP2018525042A5 (en)
KR20170061635A (en) Interface display method and device
JP2022510350A (en) Interactive health assessment method and its system
CN109922419A (en) The earphone sound quality of customization
WO2020195821A1 (en) Information processing device, information processing method, and information processing program
JP6853615B2 (en) Server equipment, defect diagnosis system and programs
US11968484B2 (en) Information management system, and method for device registration of measuring device and information terminal
JP6719373B2 (en) Judgment system, judgment method, and judgment program
US20220071569A1 (en) Information management system, and method for device registration of measuring device and information terminal
US20210166803A1 (en) Recommending actions for avoidance of food intolerance symptoms
CN111400539B (en) Voice questionnaire processing method, device and system
EP3123355B1 (en) System comprising an audio device and a mobile device for displaying information concerning the audio device
JP7253975B2 (en) Notification system
CN104904191A (en) Mobile device and method for establishing a wireless link
JP2022174805A (en) Subject analysis apparatus
JP2010231084A (en) Learning support system, learning support method, and computer program
US20220246058A1 (en) Systems and methods for communicating dynamic augmented reality based instructions from a remote location on the basis of sensory feedback acquired from the target environment
EP3236402A1 (en) Method for the correct implementation of a planogram inside a point of sale
JP2019162207A (en) Information processing device and information processing program
JP7047357B2 (en) Information processing equipment, information processing methods and information processing programs
CN113454709A (en) Information processing apparatus, information processing method, and computer program
JP6648776B2 (en) Operation management device, operation management system, operation management method, program
KR102388735B1 (en) Method of detecting cheating for exams in meatverse environment based on image data processing

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20220428

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20230110

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20230228

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20230328

R150 Certificate of patent or registration of utility model

Ref document number: 7253975

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150