JP2018163887A - Heating cooker - Google Patents
Heating cooker Download PDFInfo
- Publication number
- JP2018163887A JP2018163887A JP2018119245A JP2018119245A JP2018163887A JP 2018163887 A JP2018163887 A JP 2018163887A JP 2018119245 A JP2018119245 A JP 2018119245A JP 2018119245 A JP2018119245 A JP 2018119245A JP 2018163887 A JP2018163887 A JP 2018163887A
- Authority
- JP
- Japan
- Prior art keywords
- cooking
- cooking utensil
- thermal image
- utensil
- region
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Landscapes
- Induction Heating Cooking Devices (AREA)
Abstract
Description
本発明は、加熱調理装置に関する。 The present invention relates to a cooking device.
鍋などの調理器具から内容物がふきこぼれたことを検知する方法が提案されている(例えば、特許文献1参照)。 There has been proposed a method for detecting that contents have been spilled from a cooking utensil such as a pot (for example, see Patent Document 1).
特許文献1では、ガスや火を使用せず、電力のみで動作するIH(Induction Heating)調理器とも呼ばれる電磁調理器に重量検出する手段を備え、電磁調理器より加熱される調理器具の重心位置および重量の変化から調理器具のふきこぼれを検知する方法が開示されている。 In Patent Document 1, the center of gravity position of a cooking utensil heated by an electromagnetic cooker is provided with means for detecting weight in an electromagnetic cooker called an IH (Induction Heating) cooker that uses only electric power and does not use gas or fire. And a method for detecting a spill of cooking utensils from a change in weight.
しかしながら、特許文献1に開示される技術では、調理器具のふきこぼれが実際に発生してからしか対処できないという問題がある。そのため、電磁調理器にふきこぼれた内容物等のふき掃除も煩雑である。 However, the technique disclosed in Patent Document 1 has a problem that it can be dealt with only after the spillage of the cooking utensils actually occurs. Therefore, wiping and cleaning the contents spilled on the electromagnetic cooker is also complicated.
本発明は、上記の問題点に着目したものであり、精度よくふきこぼれ判定を行うことができ、調理器具の材質によらずに、調理器具のふきこぼれが発生することを事前に検知することができる加熱調理装置を提供することを目的とする。 The present invention focuses on the above-mentioned problems, can accurately determine the spillage, and can detect in advance that the spillage of the cooking utensil occurs regardless of the material of the cooking utensil. An object is to provide a cooking device.
上記目的を達成するために、本発明の一形態に係る加熱調理装置は、加熱調理中の調理器具を含む領域の熱画像を斜め上方から撮影する撮像部と、前記撮像部から取得した熱画像に基づいて前記調理器具における内容物のふきこぼれが生じるおそれを検知するふきこぼれ検知部と、を備え、前記ふきこぼれ検知部は、加熱調理中の前記調理器具における前記内容物の水位の変化が所定の閾値以上であると判定した場合、前記内容物のふきこぼれが生じるおそれがあると判定する。 In order to achieve the above object, a heating cooking apparatus according to an aspect of the present invention includes an imaging unit that captures a thermal image of an area including a cooking utensil during cooking from an obliquely upward direction, and a thermal image acquired from the imaging unit. And a spill detector that detects the risk of spilling of the contents in the cooking utensil based on the spillage of the cooking spill detector, the change in the water level of the cooking utensils during cooking being a predetermined threshold When it determines with it being above, it determines with there exists a possibility that the spilling of the said content may arise.
また、上記目的を達成するために、本発明の一形態に係る調理支援システムは、加熱調理中の調理器具を含む領域の熱画像を撮影する熱画像カメラと、ユーザへ情報を通知可能な通知装置とにネットワークを介して接続し、ユーザの調理を支援する調理支援システムであって、前記ネットワークを介して、前記調理器具の斜め上方からの熱画像を撮影可能に取り付けられた前記熱画像カメラから、所定時間毎の前記調理器具を含む領域の熱画像を取得するデータ取得部と、取得した前記熱画像から、前記調理器具における内容物の水位の変化を示す値を算出する変化量算出部と、算出した前記水位の変化を示す値が所定の閾値以上であるか否かを判定し、算出した前記水位の変化を示す値が所定の閾値以上であると判定された場合、加熱調理中の前記調理器具において前記内容物のふきこぼれが生じるおそれがあると判定するふきこぼれ判定部と、前記ふきこぼれ判定部が前記内容物のふきこぼれが生じるおそれがあると判定した場合に、前記通知装置に対して、前記ふきこぼれが生じるおそれがある旨を前記ユーザへ通知する情報を示す通知情報を送信する通知部とを備える。 Moreover, in order to achieve the said objective, the cooking assistance system which concerns on one form of this invention is a notification which can notify a user of the thermal image camera which image | photographs the thermal image of the area | region containing the cooking utensil during cooking. A cooking support system for supporting cooking by a user connected to a device via a network, wherein the thermal imaging camera is mounted so as to be able to take a thermal image from obliquely above the cooking utensil via the network From the data acquisition unit that acquires a thermal image of a region including the cooking utensil every predetermined time, and a change amount calculation unit that calculates a value indicating a change in the water level of the content in the cooking utensil from the acquired thermal image And whether the calculated value indicating the change in the water level is equal to or greater than a predetermined threshold value, and if it is determined that the calculated value indicating the change in the water level is equal to or greater than the predetermined threshold value, When the cooking apparatus determines that there is a risk of spilling of the contents in the cooking utensil, and when the spilling determination part determines that the spilling of the contents may occur, the notification device And a notification unit that transmits notification information indicating information for notifying the user that the spill may occur.
なお、これらの全般的または具体的な態様は、システム、方法、集積回路、コンピュータプログラムまたはコンピュータで読み取り可能なCD−ROMなどの記録媒体で実現されてもよく、システム、方法、集積回路、コンピュータプログラムおよび記録媒体の任意な組み合わせで実現されてもよい。 These general or specific aspects may be realized by a system, a method, an integrated circuit, a computer program, or a computer-readable recording medium such as a CD-ROM. The system, method, integrated circuit, computer You may implement | achieve with arbitrary combinations of a program and a recording medium.
本発明によれば、調理器具の材質によらずに、調理器具からのふきこぼれが発生することを事前に検知して防止することができる調理支援方法および調理支援システムを提供することができる。 ADVANTAGE OF THE INVENTION According to this invention, the cooking assistance method and cooking assistance system which can detect and prevent beforehand that the spilling from a cooking appliance generate | occur | produces irrespective of the material of a cooking appliance can be provided.
(本発明の一態様を得るに至った経緯)
鍋などの調理器具から内容物がふきこぼれたことを検知する方法が提案されている(例えば、特許文献1参照)。
(Background to obtaining one embodiment of the present invention)
There has been proposed a method for detecting that contents have been spilled from a cooking utensil such as a pot (for example, see Patent Document 1).
特許文献1では、ガスや火を使用せず、電力のみで動作する電磁調理器に重量検出する手段を備え、電磁調理器より加熱される調理器具の重心位置および重量の変化から調理器具のふきこぼれを検知する方法が開示されている。 In Patent Document 1, a gas cooker that does not use gas or fire, has a means for detecting weight, and that operates from electric power alone. A method of detecting is disclosed.
しかしながら、特許文献1に開示される技術では、調理器具のふきこぼれが発生してからしか対処できないという問題がある。そのため、電磁調理器にふきこぼれた内容物等のふき掃除も煩雑である。 However, the technique disclosed in Patent Document 1 has a problem that it can only be dealt with after a cooking appliance has been spilled. Therefore, wiping and cleaning the contents spilled on the electromagnetic cooker is also complicated.
それに対して、例えば特許文献2では、調理器具の温度を検出する赤外線センサを用いて、電磁調理器により加熱される調理器具のふきこぼれを、発生前に検知する方法が開示されている。 On the other hand, for example, Patent Document 2 discloses a method for detecting a spillage of a cooking utensil heated by an electromagnetic cooker before occurrence using an infrared sensor that detects the temperature of the cooking utensil.
しかしながら、特許文献2に開示される技術では、赤外線センサの設置位置と調理器具が置かれる位置との位置関係から、調理器具の片側の表面の温度情報しか取得できないという問題がある。したがって、調理器具がステンレス製の鍋である場合、赤外線センサでは内容物の温度情報を取得できない。また、特許文献2に開示される技術では、調理器具を検知するセンサが調理器具の温度を検出する赤外線センサとは別に設置されているため、これらのセンサの設置および設定が難しく導入が現実的でないという問題もある。 However, the technology disclosed in Patent Document 2 has a problem that only temperature information on the surface of one side of the cooking utensil can be acquired from the positional relationship between the installation position of the infrared sensor and the position where the cooking utensil is placed. Therefore, when the cooking utensil is a stainless steel pan, the infrared sensor cannot acquire the temperature information of the contents. Further, in the technique disclosed in Patent Document 2, since the sensor for detecting the cooking utensil is installed separately from the infrared sensor for detecting the temperature of the cooking utensil, it is difficult to install and set up these sensors and it is practical to introduce the sensor. There is also a problem that is not.
以上の問題点を鑑み、本発明者らは、以下の発明の各態様を想到するに至った。 In view of the above problems, the present inventors have come up with the following aspects of the invention.
即ち、本発明の一態様に係る調理支援方法は、加熱調理中の調理器具を含む領域の熱画像を撮影する熱画像カメラと、ユーザへ情報を通知可能な通知装置とにネットワークを介して接続し、ユーザの調理を支援する調理支援システムにおける調理支援方法であって、前記ネットワークを介して、前記調理器具の斜め上方からの熱画像を撮影可能に取り付けられた前記熱画像カメラから、所定時間毎の前記調理器具を含む領域の熱画像を取得し、取得した前記熱画像から、前記調理器具における内容物の水位の変化を示す値を算出し、算出した前記水位の変化を示す値が所定の閾値以上であるか否かを判定し、算出した前記水位の変化を示す値が所定の閾値以上であると判定した場合、加熱調理中の前記調理器具において前記内容物のふきこぼれが生じるおそれがあると判定して、前記通知装置に対して、前記ふきこぼれが生じるおそれがある旨を前記ユーザへ通知する情報を示す通知情報を送信する。 That is, the cooking support method according to one aspect of the present invention is connected via a network to a thermal image camera that captures a thermal image of an area including cooking utensils being cooked and a notification device that can notify the user of information. A cooking support method in a cooking support system that supports user cooking, from the thermal image camera attached so as to be able to take a thermal image from obliquely above the cooking utensil via the network for a predetermined time A thermal image of a region including each cooking utensil is acquired, a value indicating a change in the water level of the content in the cooking utensil is calculated from the acquired thermal image, and a value indicating the calculated change in the water level is predetermined. If it is determined whether or not the calculated value indicating the change in the water level is equal to or greater than a predetermined threshold, the contents of the cooking utensils during cooking are heated. It is determined that there may occur, to the notification device transmits notification information indicating the information notifying that there is a risk that the boiling over occurs to the user.
この態様によれば、調理器具の材質によらずに、調理器具からのふきこぼれが発生することを事前に検知して防止することができる。 According to this aspect, regardless of the material of the cooking utensil, it is possible to detect and prevent the occurrence of spilling from the cooking utensil in advance.
ここで、例えば、前記調理支援システムは、さらに、前記ネットワークを介して、前記調理器具を用いた加熱調理が可能な加熱調理装置と接続しており、前記調理支援方法は、さらに、算出した前記水位の変化を示す値が所定の閾値以上であると判定した場合、前記加熱調理装置に対して、当該加熱調理装置の出力を弱める指示を示す制御信号を送信するとしてもよい。 Here, for example, the cooking assistance system is further connected to a cooking device capable of cooking using the cooking utensil via the network, and the cooking assistance method further includes the calculated When it determines with the value which shows the change of a water level being more than a predetermined threshold value, you may transmit the control signal which shows the instruction | indication which weakens the output of the said heating cooking apparatus with respect to the said heating cooking apparatus.
さらに、例えば、前記制御信号は、前記加熱調理装置の加熱動作を停止させる指示を示すとしてもよい。 Further, for example, the control signal may indicate an instruction to stop the heating operation of the cooking device.
また、例えば、前記調理支援方法は、前記水位の変化を示す値として、所定時間毎の前記調理器具の前記熱画像における所定温度以上の領域である所定温度領域の面積の変化を示す値を算出するとしてもよい。 In addition, for example, the cooking support method calculates a value indicating a change in the area of a predetermined temperature region that is a region equal to or higher than a predetermined temperature in the thermal image of the cooking utensil for each predetermined time as the value indicating the change in the water level. You may do that.
また、例えば、前記調理支援方法は、さらに、前記熱画像に基づいて、加熱調理中の前記調理器具にフタが取り付けられているか否かを判定し、前記フタが取り付けられていないと判定した場合には、前記水位の変化を示す値が所定の閾値以上であるか否かを判定し、前記フタが取り付けられていると判定した場合には、前記熱画像に基づいて前記調理器具の前記フタの縁端部を検出し、前記水位の変化を示す値として、前記縁端部の温度変化の値を算出し、前記縁端部の温度変化の値が所定の閾値以上であるか否かを判定するとしてもよい。 In addition, for example, the cooking support method further determines whether or not a lid is attached to the cooking utensil being cooked based on the thermal image, and determines that the lid is not attached. Determining whether the value indicating the change in the water level is equal to or greater than a predetermined threshold value, and determining that the lid is attached, the lid of the cooking utensil is determined based on the thermal image. And detecting a temperature change value of the edge portion as a value indicating the change in the water level, and whether the temperature change value of the edge portion is equal to or greater than a predetermined threshold value. It may be determined.
また、例えば、前記調理支援方法は、前記縁端部の温度変化の値として、所定時間毎の前記調理器具の前記熱画像における前記縁端部の近傍に存在する所定温度以上の領域の面積の変化を示す値を算出するとしてもよい。 In addition, for example, the cooking support method may include, as the value of the temperature change of the edge portion, an area of a region having a temperature equal to or higher than a predetermined temperature existing in the vicinity of the edge portion in the thermal image of the cooking utensil every predetermined time. A value indicating a change may be calculated.
また、例えば、前記調理支援方法は、さらに、取得した前記熱画像の前記領域のうち前記調理器具を含む所定領域である調理器具領域以外の背景領域に人を示す温度領域である人温度領域が存在するか否かを確認し、前記背景領域に前記人温度領域が存在すると確認した場合には、前記水位の変化を示す値を初期化するとしてもよい。 In addition, for example, the cooking support method may further include a human temperature region that is a temperature region indicating a person in a background region other than the cooking utensil region that is a predetermined region including the cooking utensil in the region of the acquired thermal image. If it is confirmed whether or not the human temperature region is present in the background region, a value indicating the change in the water level may be initialized.
また、例えば、前記通知装置は、前記ユーザが携行可能であり、前記ユーザが視認可能な表示部を備え、前記調理支援方法は、算出した前記水位の変化を示す値が所定の閾値以上であると判定した場合、前記通知装置に対して、電子メールで前記通知情報を送信するとしてもよい。 Further, for example, the notification device includes a display unit that can be carried by the user and visible to the user, and in the cooking support method, the value indicating the calculated change in the water level is a predetermined threshold value or more. If it is determined, the notification information may be transmitted to the notification device by e-mail.
また、本発明の一態様に係る調理支援システムは、加熱調理中の調理器具を含む領域の熱画像を撮影する熱画像カメラと、ユーザへ情報を通知可能な通知装置とにネットワークを介して接続し、ユーザの調理を支援する調理支援システムであって、前記ネットワークを介して、前記調理器具の斜め上方からの熱画像を撮影可能に取り付けられた前記熱画像カメラから、所定時間毎の前記調理器具を含む領域の熱画像を取得するデータ取得部と、取得した前記熱画像から、前記調理器具における内容物の水位の変化を示す値を算出する変化量算出部と、算出した前記水位の変化を示す値が所定の閾値以上であるか否かを判定し、算出した前記水位の変化を示す値が所定の閾値以上であると判定された場合、加熱調理中の前記調理器具において前記内容物のふきこぼれが生じるおそれがあると判定するふきこぼれ判定部と、前記ふきこぼれ判定部が前記内容物のふきこぼれが生じるおそれがあると判定した場合に、前記通知装置に対して、前記ふきこぼれが生じるおそれがある旨を前記ユーザへ通知する情報を示す通知情報を送信する通知部とを備える。 Moreover, the cooking assistance system which concerns on 1 aspect of this invention is connected via the network to the thermal image camera which image | photographs the thermal image of the area | region containing the cooking utensils during cooking, and the notification apparatus which can notify a user of information And a cooking support system for supporting cooking by the user, from the thermal image camera attached so as to be able to take a thermal image from obliquely above the cooking utensil via the network, the cooking at predetermined time intervals. A data acquisition unit that acquires a thermal image of a region including the appliance, a change amount calculation unit that calculates a value indicating a change in the water level of the contents in the cooking appliance from the acquired thermal image, and a change in the calculated water level If the value indicating the change in the water level is determined to be greater than or equal to a predetermined threshold value, it is determined whether the value indicating the change in water level is equal to or greater than the predetermined threshold value. A spillage determination unit that determines that there is a risk of spilling of the contents, and the spillage may occur to the notification device when the spillage determination unit determines that the spillage of the contents may occur And a notification unit for transmitting notification information indicating information for notifying the user that there is a message.
なお、これらの全般的または具体的な態様は、システム、方法、集積回路、コンピュータプログラムまたはコンピュータで読み取り可能なCD−ROM等の記録媒体で実現されてもよく、システム、方法、集積回路、コンピュータプログラムまたは記録媒体の任意な組み合わせで実現されてもよい。 These general or specific aspects may be realized by a system, a method, an integrated circuit, a computer program, or a computer-readable recording medium such as a CD-ROM. The system, method, integrated circuit, computer You may implement | achieve with arbitrary combinations of a program or a recording medium.
以下、本発明の一態様に係る調理支援方法等について、図面を参照しながら具体的に説明する。なお、以下で説明する実施の形態は、いずれも本発明の一具体例を示すものである。以下の実施の形態で示される数値、形状、材料、構成要素、構成要素の配置位置などは、一例であり、本発明を限定する主旨ではない。また、以下の実施の形態における構成要素のうち、最上位概念を示す独立請求項に記載されていない構成要素については、任意の構成要素として説明される。 Hereinafter, a cooking support method and the like according to one embodiment of the present invention will be specifically described with reference to the drawings. Note that each of the embodiments described below shows a specific example of the present invention. Numerical values, shapes, materials, constituent elements, arrangement positions of constituent elements, and the like shown in the following embodiments are merely examples, and are not intended to limit the present invention. In addition, among the constituent elements in the following embodiments, constituent elements that are not described in the independent claims indicating the highest concept are described as optional constituent elements.
(実施の形態1)
[全体構成]
以下、実施の形態1における調理支援システムについて、図面を参照しながら説明する。
(Embodiment 1)
[overall structure]
Hereinafter, the cooking assistance system in Embodiment 1 is demonstrated, referring drawings.
図1は、実施の形態1における全体構成の一例を示す概念図である。図2は、図1に示す熱画像カメラ2と調理器具5との位置関係を示す概念図である。 FIG. 1 is a conceptual diagram showing an example of the overall configuration in the first embodiment. FIG. 2 is a conceptual diagram showing the positional relationship between the thermal image camera 2 and the cooking utensil 5 shown in FIG.
調理支援システム1は、図1に示すようにネットワーク7を介して、熱画像カメラ2と、加熱調理装置3と通知装置6とに接続され、調理器具5を用いたユーザの調理を支援する。 As shown in FIG. 1, the cooking support system 1 is connected to the thermal image camera 2, the heating cooking device 3, and the notification device 6 via the network 7, and supports cooking by the user using the cooking utensil 5.
加熱調理装置3は、調理器具5を用いた加熱調理が可能な装置である。加熱調理装置3は、例えば、ガスや火を使用せず、電力のみで動作して調理器具5を加熱することで調理器具5の内容物の加熱調理を行うIH調理器である。なお、加熱調理装置3は、IH調理器に限らず、後述するが調理支援システム1からの制御信号に従って、加熱調理を停止できればガスや火を使用して調理器具5を用いた加熱調理を行う調理器であってもよい。 The heating cooking device 3 is a device capable of cooking using the cooking utensil 5. The cooking device 3 is, for example, an IH cooker that cooks the contents of the cooking utensil 5 by operating only with electric power and heating the cooking utensil 5 without using gas or fire. The cooking device 3 is not limited to the IH cooker, but performs cooking using the cooking utensil 5 using gas or fire if heating cooking can be stopped according to a control signal from the cooking support system 1 as will be described later. A cooker may be used.
調理器具5は、例えば鍋など、加熱調理装置3によりその内容物が加熱調理されるものである。 The cooking utensil 5 is the one whose contents are cooked by the cooking device 3 such as a pan.
熱画像カメラ2は、調理器具5の斜め上方からの熱画像を撮影可能に取り付けられ、内容物の加熱調理中の調理器具5を含む領域の熱画像を撮影する。本実施の形態では、熱画像カメラ2は、図2に示すように、加熱調理装置3の上方の例えばレンジフード4などに設置されることで調理器具5の斜め上方からの熱画像を撮影可能に取り付けられ、所定時間毎の調理器具5を含む領域の熱画像を撮影する。 The thermal image camera 2 is attached so as to be able to take a thermal image from obliquely above the cooking utensil 5, and takes a thermal image of an area including the cooking utensil 5 during cooking of the contents. In the present embodiment, as shown in FIG. 2, the thermal image camera 2 is capable of taking a thermal image from above the cooking utensil 5 by being installed, for example, in the range hood 4 above the cooking device 3. The thermal image of the area | region containing the cooking appliance 5 for every predetermined time is image | photographed.
通知装置6は、ユーザへ情報を通知可能な装置である。本実施の形態では、通知装置6は、例えばスマートホンや携帯電話など、ユーザが携行可能であり、ユーザが視認可能な表示部を備える装置である。なお、通知装置6は、ユーザが携行可能であり、ユーザが視認可能な表示部を備える装置に限らず、音を発することでユーザに警告などの情報を通知可能な音発生装置でもよい。 The notification device 6 is a device that can notify the user of information. In the present embodiment, the notification device 6 is a device that includes a display unit that can be carried by the user and visible to the user, such as a smart phone or a mobile phone. Note that the notification device 6 is not limited to a device that can be carried by the user and includes a display unit that can be visually recognized by the user, but may be a sound generation device that can notify the user of information such as a warning by emitting a sound.
ネットワーク7は、例えばbluetooth(登録商標)、wifiなどの無線通信ネットワークや、無線または有線のLAN等のネットワークである。 The network 7 is a wireless communication network such as bluetooth (registered trademark) or wifi, or a network such as a wireless or wired LAN.
[調理支援システム1の構成]
図3は、本実施の形態における調理支援システム1の構成の一例を示すブロック図である。
[Configuration of Cooking Support System 1]
FIG. 3 is a block diagram showing an example of the configuration of the cooking support system 1 in the present embodiment.
調理支援システム1は、図3に示すように、ふきこぼれ検知部10と、通知部20と、加熱制御部30とを備える。 As shown in FIG. 3, the cooking support system 1 includes a spill detector 10, a notification unit 20, and a heating control unit 30.
通知部20は、ふきこぼれ検知部10によりふきこぼれが生じる(ふきこぼれ発生の)おそれが検知された場合に、通知装置6に対して、ふきこぼれが生じるおそれがある旨をユーザへ通知する情報を示す通知情報を送信する。本実施の形態では、例えば、通知部20は、ふきこぼれが生じるおそれがある旨を通知装置6に対して、例えば電子メールで通知情報を送信する。 The notification unit 20 indicates information for notifying the user that there is a risk of spilling to the notification device 6 when the spillage detection unit 10 detects the possibility of spilling (occurrence of spilling). Send. In the present embodiment, for example, the notification unit 20 transmits notification information to the notification device 6 by e-mail, for example, indicating that there is a risk of spilling.
加熱制御部30は、ふきこぼれ検知部10によりふきこぼれ発生のおそれが検知された場合に、加熱調理装置3に対して、加熱調理装置3の出力を弱める指示を示す制御信号を送信する。ここで、制御信号は、例えば、加熱調理装置の加熱動作を停止させる指示を示すとしてもよい。 The heating control unit 30 transmits a control signal indicating an instruction to weaken the output of the heating cooking device 3 to the heating cooking device 3 when the risk of occurrence of the burning is detected by the burning detection unit 10. Here, the control signal may indicate an instruction to stop the heating operation of the cooking device, for example.
[ふきこぼれ検知部10の構成]
ふきこぼれ検知部10は、図3に示すように、データ取得部11と、高温部分検出部12と、調理器具検出部13と、記憶部14と、変化量算出部15と、ふきこぼれ判定部16とを備え、熱画像カメラ2から取得した熱画像に基づいて調理器具5における内容物のふきこぼれが生じるおそれを検知する。
[Configuration of the spill detector 10]
As shown in FIG. 3, the overflow detection unit 10 includes a data acquisition unit 11, a high temperature part detection unit 12, a cooking utensil detection unit 13, a storage unit 14, a change amount calculation unit 15, and a overflow detection unit 16. And detecting the possibility that the contents of the utensil 5 will be spilled on the basis of the thermal image acquired from the thermal image camera 2.
データ取得部11は、熱画像カメラ2から、所定時間毎の調理器具5を含む領域の熱画像を取得する。 The data acquisition unit 11 acquires a thermal image of a region including the cooking utensil 5 every predetermined time from the thermal image camera 2.
調理器具検出部13は、データ取得部11が取得した熱画像から、調理器具5が存在するか否かを検出する。本実施の形態では、調理器具検出部13は、データ取得部11が取得した熱画像を2値化し平滑化する画像処理を行い、画像処理を行った熱画像において、調理器具5のフチ(縁)の検出処理を行うことで、調理器具5が存在するか否かを検出する。調理器具検出部13は、検出処理が成功した場合、データ取得部11が取得した熱画像中の調理器具5の位置情報と、当該調理器具5に対応する熱画像から取得できる温度情報とを記憶部14に記憶する。 The cooking utensil detection unit 13 detects whether the cooking utensil 5 exists from the thermal image acquired by the data acquisition unit 11. In the present embodiment, the cooking utensil detection unit 13 performs image processing for binarizing and smoothing the thermal image acquired by the data acquisition unit 11, and the edge (edge) of the cooking utensil 5 in the thermal image subjected to the image processing. ) To detect whether the cooking utensil 5 is present. When the detection process is successful, the cooking utensil detection unit 13 stores position information of the cooking utensil 5 in the thermal image acquired by the data acquisition unit 11 and temperature information that can be acquired from the thermal image corresponding to the cooking utensil 5. Store in unit 14.
高温部分検出部12は、データ取得部11が取得した熱画像から、調理器具5の高温部分を検出する。本実施の形態では、高温部分検出部12は、データ取得部11が取得した熱画像における例えば70℃以上の高温領域を検出し、検出した高温領域を温度情報として記憶部14に記憶する。 The high temperature portion detection unit 12 detects the high temperature portion of the cooking utensil 5 from the thermal image acquired by the data acquisition unit 11. In the present embodiment, the high temperature portion detection unit 12 detects a high temperature region of, for example, 70 ° C. or higher in the thermal image acquired by the data acquisition unit 11 and stores the detected high temperature region in the storage unit 14 as temperature information.
記憶部14は、例えばSDカードやフラッシュメモリによって構成され、上述した温度情報(高温領域の熱画像)やデータ取得部11が取得した熱画像中の調理器具5の位置情報を記憶する。 The memory | storage part 14 is comprised by SD card and flash memory, for example, and memorize | stores the positional information on the cooking appliance 5 in the temperature information (thermal image of a high temperature area | region) mentioned above and the thermal image which the data acquisition part 11 acquired.
変化量算出部15は、データ取得部11が取得した熱画像から、調理器具5における内容物の水位の変化を示す値を算出する。ここで、変化量算出部15は、例えば、水位の変化を示す値として、所定時間毎の調理器具5の熱画像における所定温度以上の領域である所定温度領域の面積の変化を示す値を算出する。 The change amount calculation unit 15 calculates a value indicating a change in the water level of the contents in the cooking utensil 5 from the thermal image acquired by the data acquisition unit 11. Here, the change amount calculation unit 15 calculates, for example, a value indicating a change in the area of a predetermined temperature region, which is a region equal to or higher than a predetermined temperature, in the thermal image of the cooking utensil 5 every predetermined time as a value indicating a change in the water level. To do.
本実施の形態では、変化量算出部15は、調理器具検出部13により検出された熱画像中の調理器具5の中の例えば70℃以上の高温領域から調理器具51および調理器具5の内容物の水位を検出する。 In the present embodiment, the change amount calculation unit 15 includes the contents of the cooking utensil 51 and the cooking utensil 5 from a high temperature region of, for example, 70 ° C. or higher in the cooking utensil 5 in the thermal image detected by the cooking utensil detection unit 13. Detect the water level.
また、変化量算出部15は、検出した調理器具5の内容物の水位(高温領域の上縁)と、調理器具検出部13により検出された調理器具5のフチ(上縁)との間の差分距離を算出する。 Further, the change amount calculation unit 15 is between the detected water level of the contents of the cooking utensil 5 (upper edge of the high temperature region) and the edge (upper edge) of the cooking utensil 5 detected by the cooking utensil detection unit 13. The difference distance is calculated.
変化量算出部15は、検出した内容物の水位を示す情報(高温領域の上縁)と算出した差分距離とを記憶部14に記憶する。変化量算出部15は、記憶部14に所定時間前に検出した内容物の水位を示す情報が記憶されている場合には、検出した内容物の水位の増加率を算出する。ここで、変化量算出部15は、内容物の水位の増加率として、所定時間毎の調理器具5の熱画像における例えば70℃以上の領域である高温領域の面積の変化を示す増加率を算出する。 The change amount calculation unit 15 stores information indicating the water level of the detected content (upper edge of the high temperature region) and the calculated difference distance in the storage unit 14. When the storage unit 14 stores information indicating the water level of the content detected a predetermined time before, the change amount calculation unit 15 calculates the rate of increase in the detected water level of the content. Here, the change amount calculation unit 15 calculates, as the rate of increase in the water level of the contents, an increase rate indicating a change in the area of a high-temperature region that is, for example, a region of 70 ° C. or higher in the thermal image of the cooking utensil 5 every predetermined time. To do.
なお、変化量算出部15は、調理器具5における内容物の水位の変化を示す値として、調理器具5を示す熱画像の領域に対する調理器具5の内容物を示す熱画像の高温領域の割合を算出してもよい。 Note that the change amount calculation unit 15 uses the ratio of the high-temperature area of the thermal image indicating the contents of the cooking utensil 5 to the area of the thermal image indicating the cooking utensil 5 as a value indicating the change in the water level of the contents in the cooking utensil 5. It may be calculated.
ふきこぼれ判定部16は、変化量算出部15が算出した水位の変化を示す値が所定の閾値以上であるか否かを判定する。ふきこぼれ判定部16は、変化量算出部15が算出した水位の変化を示す値が所定の閾値以上であると判定した場合、加熱調理中の調理器具5において内容物のふきこぼれが生じるおそれがあると判定する。 The overflow determination unit 16 determines whether or not the value indicating the change in the water level calculated by the change amount calculation unit 15 is equal to or greater than a predetermined threshold value. When it is determined that the value indicating the change in the water level calculated by the change amount calculation unit 15 is equal to or greater than a predetermined threshold, the content determination unit 16 may cause the content to overflow in the cooking utensil 5 during cooking. judge.
本実施の形態では、ふきこぼれ判定部16は、変化量算出部15が算出した増加率が所定の閾値(以下、第1閾値と称する)以上にあるかどうかを判定する。ふきこぼれ判定部16は、変化量算出部15が算出した増加率が第1閾値以上であると判定したときには、加熱調理中の調理器具5において内容物のふきこぼれが生じるおそれがあると判定する。 In the present embodiment, the overflow determination unit 16 determines whether the increase rate calculated by the change amount calculation unit 15 is greater than or equal to a predetermined threshold (hereinafter referred to as a first threshold). When it is determined that the increase rate calculated by the change amount calculation unit 15 is equal to or greater than the first threshold, the boiling determination unit 16 determines that there is a risk that the content of the cooking utensil 5 during cooking is likely to overflow.
なお、ふきこぼれ判定部16は、変化量算出部15が算出した増加率が第1閾値以上であると判定したときには、さらに、算出した増加率が第2閾値以上であるか否かを判定してもよい。 In addition, when it is determined that the increase rate calculated by the change amount calculation unit 15 is greater than or equal to the first threshold, the overflow determination unit 16 further determines whether or not the calculated increase rate is greater than or equal to the second threshold. Also good.
ふきこぼれ判定部16は、算出した増加率が第2閾値以上であると判定した場合、例えば数秒以内に、加熱調理中の調理器具5において内容物のふきこぼれが実際に発生するというふきこぼれ発生を判定してもよい。また、ふきこぼれ判定部16は、算出した増加率が第2閾値より小さいと判定した場合、例えば数十秒ないし数分以内に、加熱調理中の調理器具5において内容物のふきこぼれが発生するおそれがあるというふきこぼれ予知を判定してもよい。 When it is determined that the calculated increase rate is equal to or greater than the second threshold value, the spillage determination unit 16 determines the occurrence of spillage that the spillage of the content actually occurs in the cooking utensil 5 during cooking, for example, within a few seconds. May be. In addition, when the overflow determination unit 16 determines that the calculated increase rate is smaller than the second threshold value, there is a possibility that the overflow of the contents may occur in the cooking utensil 5 during cooking, for example, within several tens of seconds to several minutes. You may determine the prediction that there is a spill.
また、上述したように、変化量算出部15が、調理器具5における内容物の水位の変化を示す値として、調理器具5を示す熱画像の領域に対する調理器具5の内容物を示す熱画像の高温領域の割合を算出してもよい。この場合、ふきこぼれ判定部16は、加熱調理中の調理器具5の内容物を示す熱画像の高温領域が、調理器具5を示す熱画像の領域の50%〜80%のときに、ふきこぼれ予知を判定してもよい。そして、ふきこぼれ判定部16は、加熱調理中の調理器具5の内容物を示す熱画像の高温領域が、調理器具5を示す熱画像の領域の80%を超えたときに、ふきこぼれ発生を判定してもよい。 Moreover, as above-mentioned, the variation | change_quantity calculation part 15 is the value of the thermal image which shows the content of the cooking utensil 5 with respect to the area | region of the thermal image which shows the cooking utensil 5 as a value which shows the change of the water level of the content in the cooking utensil 5. You may calculate the ratio of a high temperature area | region. In this case, the spillage determination unit 16 predicts spillage when the high-temperature area of the thermal image indicating the contents of the cooking utensil 5 during cooking is 50% to 80% of the thermal image area indicating the cooking utensil 5. You may judge. When the hot area of the thermal image indicating the contents of the cooking utensil 5 being cooked exceeds 80% of the thermal image area indicating the cooking utensil 5, the overflow determination unit 16 determines the occurrence of the overflowing. May be.
[調理支援システム1の動作]
次に、上記のように構成された調理支援システム1の動作について説明する。
[Operation of Cooking Support System 1]
Next, operation | movement of the cooking assistance system 1 comprised as mentioned above is demonstrated.
図4は、実施の形態1における調理支援システム1の動作の一例を示すフローチャートである。 FIG. 4 is a flowchart showing an example of the operation of the cooking assistance system 1 according to the first embodiment.
まず、調理支援システム1は、ネットワーク7を介して、熱画像カメラ2から、所定時間毎の調理器具5を含む領域の熱画像を取得する熱画像取得処理を行う(S1)。 First, the cooking assistance system 1 performs the thermal image acquisition process which acquires the thermal image of the area | region containing the cooking appliance 5 for every predetermined time from the thermal image camera 2 via the network 7 (S1).
次に、調理支援システム1は、S1で取得した熱画像に基づいて、調理器具5を検出する調理器具検出処理を行う(S3)。ここで、図5を用いて、調理器具検出処理の詳細について説明する。図5は、図4におけるS3の詳細動作の一例を示すフローチャートである。 Next, the cooking assistance system 1 performs the cooking appliance detection process which detects the cooking appliance 5 based on the thermal image acquired by S1 (S3). Here, details of the cooking utensil detection process will be described with reference to FIG. FIG. 5 is a flowchart showing an example of the detailed operation of S3 in FIG.
調理支援システム1は、図5に示すように、まず、取得した熱画像の2値化処理を行い(S32)、平滑化処理を行う(S33)。なお、2値化処理および平滑化処理の画像処理は既知であるためここでの説明は省略する。次いで、調理支援システム1は、S32およびS33で画像処理を行った熱画像において、調理器具5のフチ(縁)の検出処理を行う(S34)。ここで、調理器具5が例えば鍋ならそのフチは例えば円形である。すなわち、調理器具5のフチは、円形、楕円、直線など調理器具5エッジの特徴により検出できる。なお、調理器具5が複数あってもエッジの特徴によりそれぞれを検出できる。次いで、調理支援システム1は、調理器具5のフチの検出処理が成功した場合(S35でYes)、検出処理が成功した調理器具5(該当調理器具5)の取得した熱画像中の位置情報と、該当調理器具5に対応する熱画像から取得できる温度情報とを記憶部14に記憶する(S36)。ここで、記憶部14に記憶される温度情報は、該当調理器具5に対応する位置の熱画像であってもよい。なお、調理支援システム1は、調理器具5のフチの検出処理が失敗した場合(S35でNo)、S1に戻って熱画像取得処理からやり直す。 As shown in FIG. 5, the cooking assistance system 1 first performs binarization processing on the acquired thermal image (S32), and performs smoothing processing (S33). Since image processing of binarization processing and smoothing processing is already known, description here is omitted. Next, the cooking assistance system 1 performs a border (edge) detection process of the cooking utensil 5 in the thermal image subjected to the image processing in S32 and S33 (S34). Here, if the cooking utensil 5 is, for example, a pan, its border is, for example, circular. That is, the edge of the cooking utensil 5 can be detected by the feature of the edge of the cooking utensil 5 such as a circle, an ellipse, or a straight line. Even if there are a plurality of cooking utensils 5, each can be detected by the feature of the edge. Next, when the detection process of the edge of the cooking utensil 5 is successful (Yes in S35), the cooking assistance system 1 includes the position information in the thermal image acquired by the cooking utensil 5 (corresponding cooking utensil 5) that has been successfully detected. The temperature information that can be acquired from the thermal image corresponding to the cooking utensil 5 is stored in the storage unit 14 (S36). Here, the temperature information stored in the storage unit 14 may be a thermal image at a position corresponding to the corresponding cooking utensil 5. In addition, the cooking assistance system 1 returns to S1, and repeats from a thermal image acquisition process, when the detection process of the border of the cooking appliance 5 fails (it is No at S35).
次に、調理支援システム1は、ふきこぼれ判定処理を行う(S5)。ここで、図6を用いて、ふきこぼれ判定処理の詳細について説明する。図6は、図4におけるS5の詳細動作の一例を示すフローチャートである。図7は、実施の形態1における調理器具中の高温部分の一例を示す図である。図8Aおよび図8Bは、比較例における調理器具中の高温部分の一例を示す図である。図7〜図8Bにおいて、調理器具51および調理器具52は、調理器具5の一例であり、それぞれステンレス製の鍋およびホーロー製の鍋を示している。 Next, the cooking assistance system 1 performs a spillage determination process (S5). Here, the details of the overflow determination process will be described with reference to FIG. FIG. 6 is a flowchart showing an example of the detailed operation of S5 in FIG. FIG. 7 is a diagram showing an example of a high-temperature portion in the cooking utensil in the first embodiment. 8A and 8B are diagrams illustrating an example of a high-temperature portion in the cooking utensil in the comparative example. 7-8B, the cooking utensil 51 and the cooking utensil 52 are examples of the cooking utensil 5 and show a stainless steel pan and an enamel pan, respectively.
調理支援システム1は、図6に示すように、まず、S1で取得した熱画像に基づいて、調理器具5中の高温部分から内容物の水位を検出する(S51)。 As shown in FIG. 6, the cooking assistance system 1 first detects the water level of the contents from the high temperature portion in the cooking utensil 5 based on the thermal image acquired in S1 (S51).
本実施の形態では、調理支援システム1は、例えば図7に示すように、S3において検出した熱画像中の調理器具51および調理器具52の中(鍋の中)の例えば70℃以上の高温領域(図中のハッチング部分)から調理器具51および調理器具52の内容物の水位を検出することができる。これは、熱画像カメラ2が調理器具51、52の斜め上方からの熱画像を撮影可能に取り付けられ、加熱調理中の調理器具51および52を含む領域の熱画像を撮影することから、70℃以上の高温領域の周縁から調理器具51および調理器具52の内容物の水位を検出することができる。一方、例えば、図8Aに示すように、調理器具51および調理器具52を側面から撮影した比較例の熱画像では、ホーロー製の鍋である調理器具52から70℃以上の高温領域(図中のハッチング部分)を認識できるので内容物の水位を検出できる。しかし、ステンレス製の鍋である調理器具51から70℃以上の高温領域を認識できないので内容物の水位を検出できない。また、例えば、図8Bに示すように、調理器具51および調理器具52を上面から撮影した比較例の熱画像では、調理器具51および調理器具52から70℃以上の高温領域(図中のハッチング部分)を認識できる。しかし、高温領域の周縁と調理器具51および調理器具52のフチとの高さに差がないため、これらの内容物の水位を正確に検出することができない。 In the present embodiment, the cooking assistance system 1 is, for example, as shown in FIG. 7, a high temperature region of, for example, 70 ° C. or more in the cooking utensil 51 and the cooking utensil 52 (in the pan) in the thermal image detected in S3. The water level of the contents of the cooking utensil 51 and the cooking utensil 52 can be detected from the hatched portion in the figure. This is because the thermal image camera 2 is attached so as to be able to capture a thermal image from obliquely above the cooking utensils 51 and 52, and a thermal image of a region including the cooking utensils 51 and 52 during cooking is taken. The water level of the contents of the cooking utensil 51 and the cooking utensil 52 can be detected from the periphery of the above high temperature region. On the other hand, for example, as shown in FIG. 8A, in the thermal image of the comparative example in which the cooking utensil 51 and the cooking utensil 52 are photographed from the side surface, the cooking utensil 52 that is an enamel pan is a high temperature region of 70 ° C. or higher (in the drawing). Since the hatched portion can be recognized, the water level of the contents can be detected. However, the water level of the contents cannot be detected because the high temperature region of 70 ° C. or higher cannot be recognized from the cooking utensil 51 which is a stainless steel pan. Further, for example, as shown in FIG. 8B, in the thermal image of the comparative example in which the cooking utensil 51 and the cooking utensil 52 are photographed from the upper surface, a high temperature region (hatched portion in the drawing) of 70 ° C. or more from the cooking utensil 51 and the cooking utensil 52. ) Can be recognized. However, since there is no difference in the height between the peripheral edge of the high temperature region and the edge of the cooking utensil 51 and the cooking utensil 52, the water level of these contents cannot be detected accurately.
次いで、調理支援システム1は、S51で検出した調理器具5の内容物の水位と、調理器具5のフチ(上縁)との間の差分距離を算出する(S52)。本実施の形態では、調理支援システム1は、S51で検出した調理器具5の内容物の水位を示す70℃以上の高温領域の周縁と、S3で検出され記憶部14に記憶された調理器具5の位置情報に示される調理器具5のフチとの間の差分距離を算出する。 Next, the cooking assistance system 1 calculates the difference distance between the water level of the contents of the cooking utensil 5 detected in S51 and the edge (upper edge) of the cooking utensil 5 (S52). In the present embodiment, the cooking assistance system 1 includes the peripheral edge of the high temperature region of 70 ° C. or higher indicating the water level of the contents of the cooking utensil 5 detected in S51, and the cooking utensil 5 detected in S3 and stored in the storage unit 14. The difference distance between the edge of the cooking utensil 5 indicated by the position information is calculated.
次いで、調理支援システム1は、記憶部14に所定時間前に検出した内容物の水位を示す情報が記憶されているか否かを確認する(S53)。ここで、所定時間前に検出した内容物の水位を示す情報は、例えば70℃以上の高温領域の周縁を示す熱画像である。なお、調理支援システム1は、記憶部14に所定時間前に検出した内容物の水位を示す情報が記憶されていないことを確認した場合には(S53でNo)、S51で検出した内容物の水位を示す情報とS52で算出した差分距離とを記憶部14に記憶する(S55)。 Next, the cooking assistance system 1 checks whether or not information indicating the water level of the content detected a predetermined time ago is stored in the storage unit 14 (S53). Here, the information indicating the water level of the contents detected before a predetermined time is a thermal image indicating the periphery of a high temperature region of 70 ° C. or higher, for example. In addition, when the cooking assistance system 1 confirms that the information which shows the water level of the content detected for the predetermined time ago is not memorize | stored in the memory | storage part 14 (it is No at S53), it is the content of the content detected by S51. Information indicating the water level and the difference distance calculated in S52 are stored in the storage unit 14 (S55).
S53において、調理支援システム1は、記憶部14に所定時間前に検出した内容物の水位を示す情報が記憶されていることを確認した場合には(S53でYes)、S51で検出した内容物の水位の増加率を算出する(S54)。ここで、S51で検出した内容物の水位の増加率は、調理器具5における内容物の水位の変化を示す値に該当し、所定時間毎の調理器具5の熱画像における例えば70℃以上の高温領域の面積の変化を示す増加率から算出される。 In S53, when the cooking support system 1 confirms that information indicating the water level of the content detected a predetermined time ago is stored in the storage unit 14 (Yes in S53), the content detected in S51. The rate of increase of the water level is calculated (S54). Here, the increase rate of the water level of the content detected in S51 corresponds to a value indicating a change in the water level of the content in the cooking utensil 5, and is a high temperature of, for example, 70 ° C. or higher in the thermal image of the cooking utensil 5 every predetermined time. It is calculated from an increase rate indicating a change in the area of the region.
次いで、調理支援システム1は、S54で算出した増加率が第1閾値(所定の閾値)以上にあるかどうかを判定する(S56)。なお、S54で算出した増加率が第1閾値より小さいときには(S56でNo)、S55に進み、S51で検出した内容物の水位を示す情報とS52で算出した差分距離とを記憶部14に記憶する。 Next, the cooking assistance system 1 determines whether or not the increase rate calculated in S54 is greater than or equal to the first threshold (predetermined threshold) (S56). When the increase rate calculated in S54 is smaller than the first threshold (No in S56), the process proceeds to S55, and information indicating the water level of the content detected in S51 and the difference distance calculated in S52 are stored in the storage unit 14. To do.
次いで、S56において、調理支援システム1は、S54で算出した増加率が第1閾値以上であると判定したときには(S56でYes)、加熱調理中の調理器具5において内容物のふきこぼれが生じるおそれがあると判定して、さらに、S54で算出した増加率が第2閾値以上であるか否かを判定する(S57)。 Next, in S56, when the cooking assistance system 1 determines that the increase rate calculated in S54 is equal to or greater than the first threshold (Yes in S56), there is a possibility that the contents may be spilled in the cooking utensil 5 during cooking. It is determined that there is, and further, it is determined whether or not the increase rate calculated in S54 is greater than or equal to the second threshold (S57).
調理支援システム1は、S54で算出した増加率が第2閾値以上であると判定した場合(S57でYes)、ふきこぼれ発生を判定する(S58)。ここで、ふきこぼれ発生とは、上述したように、例えば数秒以内に、加熱調理中の調理器具5において内容物のふきこぼれが発生することを意味する。 When it is determined that the increase rate calculated in S54 is equal to or greater than the second threshold (Yes in S57), the cooking support system 1 determines occurrence of spillage (S58). Here, the occurrence of spilling means that spilling of the contents occurs in the cooking utensil 5 during cooking as described above, for example, within a few seconds.
一方、調理支援システム1は、S54で算出した増加率が第2閾値より小さいと判定した場合(S57でNo)、ふきこぼれ予知を判定する(S59)。なお、ふきこぼれ予知とは、上述したように、例えば数十秒ないし数分以内に、加熱調理中の調理器具5において内容物のふきこぼれが発生するおそれ(可能性)があることを意味する。 On the other hand, when it is determined that the increase rate calculated in S54 is smaller than the second threshold (No in S57), the cooking assistance system 1 determines the overflow prediction (S59). Note that the prediction of spilling means that there is a possibility (possibility) of spilling of the contents in the cooking utensil 5 during cooking as described above, for example, within several tens of seconds to several minutes.
以下、図4に戻って説明を続ける。 Hereinafter, the description will be continued returning to FIG.
次に、調理支援システム1は、S5において、ふきこぼれの生じるおそれがあることが判定された場合、通知装置6に対して、吹きこぼれが生じるおそれがある旨をユーザへ通知する情報を示す通知情報を送信する通知処理を行う(S7)。 Next, when it is determined in S5 that there is a risk of spilling in S5, the cooking support system 1 provides notification information indicating information for notifying the user that there is a risk of spilling. Notification processing to be transmitted is performed (S7).
次に、調理支援システム1は、S5において、ふきこぼれの生じるおそれがあることが判定された場合、加熱調理装置3に対して、加熱調理装置3の出力を弱める指示を示す制御信号を送信する加熱制御処理を行う(S9)。ここで、図9を用いて、加熱制御処理の詳細について説明する。図9は、図4におけるS9の詳細動作の一例を示すフローチャートである。 Next, when it is determined in S <b> 5 that there is a risk of spilling, the cooking support system 1 transmits a control signal indicating an instruction to weaken the output of the cooking device 3 to the cooking device 3. A control process is performed (S9). Here, details of the heating control process will be described with reference to FIG. 9. FIG. 9 is a flowchart showing an example of the detailed operation of S9 in FIG.
調理支援システム1は、図9に示すように、まず、S5のふきこぼれ判定処理において、ふきこぼれ発生が判定されたか否かを確認する(S91)。 As shown in FIG. 9, the cooking assistance system 1 first checks whether or not the occurrence of spillage is determined in the spillage determination process of S5 (S91).
S91において、調理支援システム1は、ふきこぼれ発生が判定されたことを確認した場合(S91でYes)、加熱調理装置3の加熱動作を停止させ(S92)、加熱調理装置3のユーザにふきこぼれが発生する旨を通知する(S93)。本実施の形態では、調理支援システム1は、加熱調理装置3に対して、加熱調理装置3の加熱動作を停止させる指示を示す制御信号を送信し、加熱調理装置3の加熱動作を停止させる。また、調理支援システム1は、通知装置6に対して、ふきこぼれが発生する旨をユーザへ通知する情報を示す通知情報を送信することで、ユーザにふきこぼれが発生する旨を通知する。なお、S92とS93とはどちらを先に行ってもよい。 In S91, when the cooking assistance system 1 confirms that the occurrence of spilling has been determined (Yes in S91), the heating operation of the cooking device 3 is stopped (S92), and the spilling occurs in the user of the cooking device 3 To that effect (S93). In this Embodiment, the cooking assistance system 1 transmits the control signal which shows the instruction | indication which stops the heating operation of the heating cooking apparatus 3 with respect to the heating cooking apparatus 3, and stops the heating operation of the heating cooking apparatus 3. FIG. Moreover, the cooking assistance system 1 notifies the user that the spilling occurs by transmitting notification information indicating information notifying the user that the spilling occurs to the notification device 6. Either S92 or S93 may be performed first.
S91において、調理支援システム1は、ふきこぼれ発生が判定されていないことを確認した場合(S91でNo)、S5のふきこぼれ判定処理においてふきこぼれ予知が判定されたか否かを確認する(S94)。S94において、調理支援システム1は、ふきこぼれ予知が判定されたことを確認した場合(S94でYes)、加熱調理装置3の火力を制御し(S95)、加熱調理装置3のユーザにふきこぼれ予知を通知する(S96)。本実施の形態では、調理支援システム1は、加熱調理装置3に対して、加熱調理装置3の出力を弱める指示を示す制御信号を送信し、加熱調理装置3の火力を制御する。また、調理支援システム1は、通知装置6に対して、ふきこぼれ予知をユーザへ通知する情報を示す通知情報を送信することで、ユーザにふきこぼれ予知を通知する。なお、S95とS96とはどちらを先に行ってもよい。また、S94において、調理支援システム1は、ふきこぼれ予知が判定されていないことを確認した場合(S94でNo)、S1に進み熱画像取得処理からやり直す。 In S91, when the cooking assistance system 1 confirms that the occurrence of spillage has not been determined (No in S91), the cooking support system 1 checks whether the spill prediction has been determined in the spill determination process of S5 (S94). In S94, when the cooking assistance system 1 confirms that the spill prediction has been determined (Yes in S94), the cooking support system 1 controls the heating power of the cooking device 3 (S95) and notifies the user of the cooking device 3 of the prediction of spilling. (S96). In this Embodiment, the cooking assistance system 1 transmits the control signal which shows the instruction | indication which weakens the output of the heating cooking apparatus 3 with respect to the heating cooking apparatus 3, and controls the thermal power of the heating cooking apparatus 3. FIG. Moreover, the cooking assistance system 1 notifies the user of the spill prediction by transmitting notification information indicating information for notifying the user of the spill prediction to the notification device 6. Note that either S95 or S96 may be performed first. In S94, when the cooking assistance system 1 confirms that the spill prediction has not been determined (No in S94), the process proceeds to S1 and starts again from the thermal image acquisition process.
[実施の形態1の効果等]
以上のように、本実施の形態の調理支援システムおよび調理支援方法によれば、調理器具5の斜め上方から撮影した熱画像を用いることにより、調理器具5の材質によらずに、調理器具5における内容物のふきこぼれが発生することを事前に検知して防止することができる。
[Effects of First Embodiment, etc.]
As described above, according to the cooking assistance system and the cooking assistance method of the present embodiment, the cooking utensil 5 is used regardless of the material of the cooking utensil 5 by using the thermal image taken from obliquely above the cooking utensil 5. It is possible to detect in advance and prevent the occurrence of spilling of the contents.
比較例として、例えば、調理器具5を側面から撮影した熱画像を用いる場合、調理器具5がステンレス製の鍋など熱伝導率が低いものであった場合、熱画像から温度情報が取得できないので、内容物の水位を検出できずふきこぼれ判定を行うことはできない。さらに、調理器具5がホーロー製の鍋など熱伝導率が高いものであったとしても、加熱調理装置3に複数の調理器具5が熱画像カメラ2からみて並列に並べられた場合、複数の調理器具5のそれぞれの温度情報を熱画像から取得できないので内容物の水位を検出できない。 As a comparative example, for example, when using a thermal image taken from the side of the cooking utensil 5, if the cooking utensil 5 has a low thermal conductivity such as a stainless steel pan, temperature information cannot be obtained from the thermal image. The water level of the contents cannot be detected, and it is not possible to make a spill judgment. Furthermore, even when the cooking utensil 5 has a high thermal conductivity, such as an enamel pan, when a plurality of cooking utensils 5 are arranged in parallel on the heating cooking device 3 as viewed from the thermal image camera 2, a plurality of cooking utensils are provided. Since the temperature information of each instrument 5 cannot be acquired from the thermal image, the water level of the contents cannot be detected.
また、例えば、調理器具5を真上(上方)から撮影した熱画像を用いる場合、調理器具5がステンレス製の鍋など熱伝導率が低いものであったとしても、内容物の温度情報を検出できる。しかし、内容物の温度が低い初期撮影時には、取得した熱画像における加熱調理装置3と調理器具5との区別が難しいため、調理器具5のフチの検出精度が悪くなり、正確に調理器具5の内容物の温度情報を取得できない。さらに、調理器具5を真上(上方)から撮影した熱画像を用いる場合、内容物の上縁と調理器具5のフチとの区別がつきにくいため、熱画像から精度よく内容物の水位を検出できない。そのため、調理器具5を真上(上方)から撮影した熱画像を用いる場合、精度よくふきこぼれ判定を行うことはできない。 Also, for example, when using a thermal image taken from directly above (above) the cooking utensil 5, even if the cooking utensil 5 has a low thermal conductivity, such as a stainless steel pan, the temperature information of the contents is detected. it can. However, at the time of initial photographing when the temperature of the contents is low, it is difficult to distinguish between the cooking device 3 and the cooking utensil 5 in the acquired thermal image, so the edge detection accuracy of the cooking utensil 5 is deteriorated, and the cooking utensil 5 is accurately detected. The temperature information of the contents cannot be obtained. Furthermore, when using a thermal image taken from directly above (above) the cooking utensil 5, it is difficult to distinguish between the upper edge of the contents and the edge of the cooking utensil 5, so the water level of the contents is accurately detected from the thermal image. Can not. Therefore, when using a thermal image taken from directly above (above) the cooking utensil 5, it is not possible to accurately determine the spillage.
それに対して、本実施の形態の調理支援システムおよび調理支援方法によれば、調理器具5を斜め上方(上ななめ角度)から撮影した熱画像を用いるので、調理器具5の材質によらずに、内容物の上縁と調理器具5のフチとの区別がつきやすい。そのため、内容物の水位をより正確に検出しやすく、内容物の水位の変化量(水位の動き)も算出しやすいので、精度よくふきこぼれ判定を行うことができる。それにより、調理器具5の材質によらずに、調理器具5における内容物のふきこぼれが発生することを事前に検知して防止することができる。 On the other hand, according to the cooking assistance system and the cooking assistance method of the present embodiment, since the thermal image obtained by photographing the cooking utensil 5 from obliquely above (upper lick angle) is used, regardless of the material of the cooking utensil 5, It is easy to distinguish the upper edge of the contents from the edge of the cooking utensil 5. For this reason, it is easy to detect the water level of the contents more accurately, and it is easy to calculate the amount of change in the water level of the contents (movement of water level). Thereby, regardless of the material of the cooking utensil 5, it is possible to detect in advance and prevent the occurrence of spilling of the contents in the cooking utensil 5.
(実施の形態2)
実施の形態1では、例えば鍋などの調理器具5にフタがされていない場合の調理支援方法および調理支援システムについて説明したが、これに限らない。実施の形態2では、調理器具5にフタがされる場合を考慮した調理支援方法および調理支援システムについて説明する。以下では、実施の形態1と同じ点は説明を省略し、異なる点を中心に説明する。
(Embodiment 2)
In the first embodiment, the cooking support method and the cooking support system when the cooking utensil 5 such as a pan is not covered are described, but the present invention is not limited to this. In the second embodiment, a cooking support method and a cooking support system considering the case where the cooking appliance 5 is capped will be described. In the following, description of the same points as in the first embodiment will be omitted, and different points will be mainly described.
[調理支援システム1Aの構成]
図10は、実施の形態2における調理支援システム1Aの構成の一例を示すブロック図である。図3と同様の要素には同一の符号を付しており、詳細な説明は省略する。
[Configuration of Cooking Support System 1A]
FIG. 10 is a block diagram showing an example of the configuration of the cooking assistance system 1A in the second embodiment. Elements similar to those in FIG. 3 are denoted by the same reference numerals, and detailed description thereof is omitted.
調理支援システム1Aは、図10に示すように、ふきこぼれ検知部10Aと、通知部20と、加熱制御部30とを備える。図10に示す調理支援システム1Aは、実施の形態1における調理支援システム1に対して、ふきこぼれ検知部10Aの構成が異なる。その他の構成については実施の形態1と同様のためここでの説明は省略する。 As shown in FIG. 10, the cooking assistance system 1 </ b> A includes a spill detector 10 </ b> A, a notification unit 20, and a heating control unit 30. The cooking assistance system 1A shown in FIG. 10 is different from the cooking assistance system 1 according to the first embodiment in the configuration of the overflow detection unit 10A. Since other configurations are the same as those of the first embodiment, description thereof is omitted here.
[ふきこぼれ検知部10Aの構成]
ふきこぼれ検知部10Aは、図10に示すように、データ取得部11と、高温部分検出部12と、調理器具検出部13と、記憶部14と、変化量算出部15Aと、ふきこぼれ判定部16Aと、フタ判定部17とを備え、熱画像カメラ2から取得した熱画像に基づいて調理器具5における内容物のふきこぼれが生じるおそれを検知する。より具体的には、図10に示すふきこぼれ検知部10Aは、実施の形態1におけるふきこぼれ検知部10に対して、フタ判定部17が追加され、変化量算出部15Aおよびふきこぼれ判定部16Aの構成が異なる。
[Configuration of the spill detector 10A]
As shown in FIG. 10, the spill detector 10A includes a data acquisition unit 11, a high temperature part detector 12, a cooking utensil detector 13, a storage unit 14, a variation calculator 15A, and a spill detector 16A. The lid determination unit 17 is provided to detect the possibility that the contents of the cooking utensil will be spilled based on the thermal image acquired from the thermal image camera 2. More specifically, the overflow detection unit 10A shown in FIG. 10 has a lid determination unit 17 added to the overflow detection unit 10 in the first embodiment, and the configuration of the change amount calculation unit 15A and the overflow detection unit 16A. Different.
フタ判定部17は、熱画像に基づいて、加熱調理中の調理器具5にフタが取り付けられているか否かを判定する。フタ判定部17は、加熱調理中の調理器具5にフタが取り付けられていると判定した場合には、さらに、熱画像に基づいて調理器具5のフタの縁端部を検出する。 The lid determination unit 17 determines whether or not a lid is attached to the cooking utensil 5 being cooked based on the thermal image. When the lid determination unit 17 determines that the lid is attached to the cooking utensil 5 during cooking, the lid determination unit 17 further detects the edge of the lid of the cooking utensil 5 based on the thermal image.
変化量算出部15Aは、フタ判定部17が加熱調理中の調理器具5にフタが取り付けられていると判定した場合には、調理器具5の内容物の水位の変化を示す値として、フタ判定部17により検出された縁端部の温度変化の値を算出する。ここで、変化量算出部15Aは、縁端部の温度変化の値として、所定時間毎の調理器具5の熱画像における縁端部の近傍に存在する所定温度以上の領域の面積の変化を示す値を算出する。 When the cover determination unit 17 determines that the lid is attached to the cooking utensil 5 being cooked, the change amount calculation unit 15A determines the lid as a value indicating the change in the water level of the contents of the cooking utensil 5 The value of the temperature change at the edge detected by the unit 17 is calculated. Here, the change amount calculation unit 15A indicates the change in the area of a region having a temperature equal to or higher than the predetermined temperature existing in the vicinity of the edge in the thermal image of the cooking utensil 5 at predetermined time intervals as the value of the temperature change at the edge. Calculate the value.
ふきこぼれ判定部16Aは、変化量算出部15が算出した水位の変化を示す値が所定の閾値以上であるか否かを判定する。より具体的には、ふきこぼれ判定部16Aは、フタ判定部17により加熱調理中の調理器具5にフタが取り付けられていないと判定された場合には、変化量算出部15Aにより算出された縁端部の温度変化の値が所定の閾値(第4閾値)以上であるか否かを判定する。ふきこぼれ判定部16Aは、変化量算出部15Aが算出した縁端部の温度変化の値が所定の閾値(第4閾値)以上であると判定した場合、加熱調理中の調理器具5において内容物のふきこぼれが生じるおそれがあると判定する。 The overflow determination unit 16A determines whether or not the value indicating the change in the water level calculated by the change amount calculation unit 15 is equal to or greater than a predetermined threshold value. More specifically, if the lid determining unit 17 determines that the lid is not attached to the cooking utensil 5 being cooked by the lid determining unit 17, the edge calculated by the change amount calculating unit 15A is used. It is determined whether or not the temperature change value of the part is equal to or greater than a predetermined threshold (fourth threshold). When the overflow determination unit 16A determines that the value of the temperature change at the edge calculated by the change amount calculation unit 15A is equal to or greater than a predetermined threshold (fourth threshold), the cooking utensil 5 during cooking is heated. Judge that there is a risk of spilling.
[調理支援システム1Aの動作]
次に、上記のように構成された調理支援システム1Aの動作について説明する。
[Operation of Cooking Support System 1A]
Next, operation | movement of 1 A of cooking assistance systems comprised as mentioned above is demonstrated.
図11は、実施の形態2における調理支援システム1Aの動作の一例を示すフローチャートである。図4と同様の要素には同一の符号を付しており、詳細な説明は省略する。 FIG. 11 is a flowchart illustrating an example of the operation of the cooking assistance system 1A according to the second embodiment. Elements similar to those in FIG. 4 are denoted by the same reference numerals, and detailed description thereof is omitted.
まず、調理支援システム1Aは、ネットワーク7を介して、熱画像カメラ2から、所定時間毎の調理器具5を含む領域の熱画像を取得する熱画像取得処理を行う(S1)。 First, the cooking support system 1A performs a thermal image acquisition process for acquiring a thermal image of a region including the cooking utensil 5 every predetermined time from the thermal image camera 2 via the network 7 (S1).
次に、調理支援システム1Aは、S1で取得した熱画像に基づいて、調理器具5を検出する調理器具検出処理を行う(S3)。 Next, the cooking assistance system 1A performs cooking appliance detection processing for detecting the cooking appliance 5 based on the thermal image acquired in S1 (S3).
次に、調理支援システム1Aは、S1で取得した熱画像に基づいて、調理器具5のフタ検出処理を行う(S4)。ここで、図12を用いて、フタ検出処理の詳細について説明する。図12は、図11におけるS4の詳細動作の一例を示すフローチャートである。 Next, cooking assistance system 1A performs lid detection processing of cooking utensil 5 based on the thermal image acquired at S1 (S4). Here, details of the lid detection processing will be described with reference to FIG. FIG. 12 is a flowchart showing an example of the detailed operation of S4 in FIG.
調理支援システム1Aは、図12に示すように、まず、記憶部14から、S3で記憶された調理器具5の位置情報と温度情報とを取得する(S41)。調理支援システム1Aは、所定時間経過後(S42でYes)、調理器具5の最新の温度情報を取得する(S43)。本実施の形態では、調理器具5の最新の温度情報は、高温部分検出部12が検出して記憶部14に記憶した最新の高温領域の熱画像である。次いで、調理支援システム1Aは、前回温度と最新温度との差分である変化量を算出する(S44)。より具体的には、調理支援システム1Aは、S41およびS43で取得した調理器具5の所定時間前の高温領域の熱画像(前回の温度情報)と、調理器具5の所定時間後の高温領域の熱画像(最新の温度情報)とから、前回の温度情報と、最新の温度情報との差分である変化量を算出する。次いで、調理支援システム1Aは、算出した変化量が閾値(第3閾値)以上にあるかどうかを判定する(S45)。S45において、調理支援システム1Aは、S44で算出した変化量が第3閾値以上であると判定したときには(S45でYes)、フタなし判定すなわち調理器具5にフタ(蓋)がされていないと判定する(S46)。一方、S44で算出した変化量が第3閾値よりも小さいと判定したときには(S45でNo)、フタあり判定すなわち調理器具5にフタ(蓋)がされていると判定する(S47)。最後に、調理支援システム1Aは、S45の判定結果すなわち調理器具5のフタ情報を記憶部14に記憶する(S48)。 As shown in FIG. 12, the cooking assistance system 1A first acquires the position information and temperature information of the cooking utensil 5 stored in S3 from the storage unit 14 (S41). The cooking support system 1A acquires the latest temperature information of the cooking utensil 5 after a predetermined time has elapsed (Yes in S42) (S43). In the present embodiment, the latest temperature information of the cooking utensil 5 is the latest high-temperature region thermal image detected by the high-temperature portion detection unit 12 and stored in the storage unit 14. Next, the cooking assistance system 1A calculates a change amount which is a difference between the previous temperature and the latest temperature (S44). More specifically, the cooking assistance system 1A is configured to obtain a thermal image (previous temperature information) of the high temperature region before the predetermined time of the cooking utensil 5 acquired in S41 and S43 and the high temperature region after the predetermined time of the cooking utensil 5. A change amount that is a difference between the previous temperature information and the latest temperature information is calculated from the thermal image (latest temperature information). Next, the cooking assistance system 1A determines whether or not the calculated change amount is equal to or greater than a threshold (third threshold) (S45). In S45, when the cooking assistance system 1A determines that the amount of change calculated in S44 is greater than or equal to the third threshold (Yes in S45), it determines that there is no lid, that is, the cooking utensil 5 is not covered (lid). (S46). On the other hand, when it is determined that the amount of change calculated in S44 is smaller than the third threshold value (No in S45), it is determined that there is a lid, that is, the cooking utensil 5 is covered (cover) (S47). Finally, the cooking assistance system 1A stores the determination result of S45, that is, the lid information of the cooking utensil 5 in the storage unit 14 (S48).
次に、調理支援システム1Aは、ふきこぼれ判定処理を行う(S5A)。ここで、図13を用いて、調理支援システム1Aが行うふきこぼれ判定処理の詳細について説明する。図13は、図11におけるS5Aの詳細動作の一例を示すフローチャートである。 Next, the cooking assistance system 1A performs a blowout determination process (S5A). Here, with reference to FIG. 13, the details of the spillage determination process performed by the cooking support system 1A will be described. FIG. 13 is a flowchart showing an example of the detailed operation of S5A in FIG.
調理支援システム1Aは、図13に示すように、まず、記憶部14から、S4で記憶された調理器具5のフタ情報を取得し(S501)、調理器具5にフタがされているか否かを判定する(S502)。 As shown in FIG. 13, the cooking assistance system 1A first acquires the lid information of the cooking utensil 5 stored in S4 from the storage unit 14 (S501), and determines whether or not the cooking utensil 5 is covered. Determination is made (S502).
S501において、調理支援システム1Aは、調理器具5にフタがされていないと判定した場合(S502でNo)、図6に示すS51に進み、図6に示すS51〜S59で説明したふきこぼれ判定処理を行う。 In S501, when it is determined that the cooking utensil 5 is not covered (No in S502), the cooking assistance system 1A proceeds to S51 illustrated in FIG. 6 and performs the overflow determination process described in S51 to S59 illustrated in FIG. Do.
一方、S501において、調理支援システム1Aは、調理器具5にフタがされてると判定した場合(S502でYes)、記憶部14に調理器具5のフチの温度情報を記憶する(S503)。本実施の形態では、調理支援システム1Aは、記憶部14から取得した調理器具5の位置情報に基づき、熱画像における調理器具5のフチ(縁端部)の位置を特定する。そして、調理支援システム1Aは、記憶部14から取得した温度情報(熱画像)から調理器具5の当該フチの位置での温度情報(熱画像)を抽出し、記憶部14に調理器具5のフチの温度情報(熱画像)として記憶する。なお、調理器具5の当該フチ(縁端部)の位置は、当該フチを含む当該フチ近傍の位置であればよく、当該フチを含む前記フチの外側、内側および前記フチから若干離れた外側でもよい。 On the other hand, in S501, when the cooking assistance system 1A determines that the cooking utensil 5 is covered (Yes in S502), the temperature information of the edge of the cooking utensil 5 is stored in the storage unit 14 (S503). In the present embodiment, cooking assistance system 1 </ b> A specifies the position of the edge (edge) of cooking utensil 5 in the thermal image based on the positional information of cooking utensil 5 acquired from storage unit 14. Then, the cooking support system 1A extracts temperature information (thermal image) at the position of the edge of the cooking utensil 5 from the temperature information (thermal image) acquired from the storage unit 14, and stores the edge of the cooking utensil 5 in the storage unit 14. Temperature information (thermal image). Note that the position of the edge (edge portion) of the cooking utensil 5 may be a position in the vicinity of the edge including the edge, and may be on the outer side, the inner side, or the outer side slightly away from the edge including the edge. Good.
次いで、調理支援システム1Aは、記憶部14に所定時間前の当該フチの温度情報が記憶されているか否かを確認する(S504)。なお、S504において、調理支援システム1Aは、記憶部14に所定時間前の当該フチの温度情報が記憶されていないことを確認した場合には(S504でNo)、図11に示すS1に進み、熱画像取得処理からやり直す。 Next, the cooking assistance system 1A checks whether or not the temperature information of the border of a predetermined time before is stored in the storage unit 14 (S504). In S504, the cooking assistance system 1A proceeds to S1 shown in FIG. 11 when it is confirmed that the temperature information of the border before the predetermined time is not stored in the storage unit 14 (No in S504). Start over from the thermal image acquisition process.
一方、S504において、調理支援システム1Aは、記憶部14に所定時間前の当該フチの温度情報が記憶されていることを確認した場合には(S504でYes)、当該フチの前回温度からの変化量を算出する(S505)。より具体的には、調理支援システム1Aは、所定時間前の当該フチの熱画像(前回温度)と、所定時間後の当該フチの熱画像(最新温度)とから、前回温度と最新温度との差分である変化量を算出する。 On the other hand, in S504, when the cooking assistance system 1A confirms that the temperature information of the edge before the predetermined time is stored in the storage unit 14 (Yes in S504), the change from the previous temperature of the edge is performed. The amount is calculated (S505). More specifically, the cooking support system 1 </ b> A calculates the previous temperature and the latest temperature from the thermal image (previous temperature) of the border before a predetermined time and the thermal image (latest temperature) of the border after a predetermined time. A change amount which is a difference is calculated.
次いで、調理支援システム1Aは、算出した変化量が閾値(第4閾値)以上にあるかどうかを判定する(S506)。S505で算出した変化量が第4閾値よりも小さいと判定したときには(S506でNo)、図11に示すS1に進み熱画像取得処理からやり直す。 Next, the cooking assistance system 1A determines whether or not the calculated change amount is greater than or equal to a threshold (fourth threshold) (S506). When it is determined that the amount of change calculated in S505 is smaller than the fourth threshold value (No in S506), the process proceeds to S1 illustrated in FIG.
一方、S506において、調理支援システム1Aは、S505で算出した変化量が第4閾値以上であると判定したときには(S506でYes)、ふきこぼれ発生を判定する(S507)。このふきこぼれ発生は、上述した通り、例えば数秒以内に、加熱調理中の調理器具5において内容物のふきこぼれが発生することを意味する。なお、調理支援システム1Aは、当該フチ(縁端部)の位置近傍の熱画像において75℃以上の温度領域が発現した場合に、S505で算出した変化量が第4閾値以上であると判定してもよい。また、調理器具5の材質によっては、当該フチ(縁端部)の位置近傍の熱画像において75℃以上の温度領域の形がくずれた(円形でなくなる)場合にS505で算出した変化量が第4閾値以上であると判定してもよい。 On the other hand, in S506, when the cooking assistance system 1A determines that the amount of change calculated in S505 is equal to or greater than the fourth threshold (Yes in S506), it determines the occurrence of overflowing (S507). This occurrence of spilling means that spilling of the contents occurs in the cooking utensil 5 during cooking as described above, for example, within a few seconds. The cooking assistance system 1A determines that the amount of change calculated in S505 is equal to or greater than the fourth threshold when a temperature region of 75 ° C. or higher appears in the thermal image near the position of the edge (edge). May be. In addition, depending on the material of the cooking utensil 5, when the shape of the temperature region of 75 ° C. or higher in the thermal image near the position of the edge (edge) is deformed (not circular), the amount of change calculated in S505 is the first. It may be determined that the threshold is 4 or more.
ここで、このように判定できる理由について、図14と図15を用いて説明する。 Here, the reason why such a determination can be made will be described with reference to FIGS. 14 and 15.
図14および図15は、実施の形態2における調理器具にフタがされてる場合にふきこぼれが発生するまでの様子の一例を示す熱画像図である。図14および図15において、調理器具51および調理器具52は、上述同様に、調理器具5の一例であり、それぞれステンレス製の鍋およびホーロー製の鍋を示している。また、調理器具51にはフタ51aがされており、調理器具52にはフタ52aがされている。 FIG. 14 and FIG. 15 are thermal image diagrams showing an example of a state until spilling occurs when the cooking utensil in Embodiment 2 is covered. 14 and 15, a cooking utensil 51 and a cooking utensil 52 are examples of the cooking utensil 5 as described above, and indicate a stainless steel pan and an enamel pan, respectively. The cooking utensil 51 has a lid 51a, and the cooking utensil 52 has a lid 52a.
例えば、図14の(a)に示すように、沸騰前には、調理器具51にフタ51aがされてると、熱画像中に70℃以上の高温領域が現われていない。一方、図14の(b)に示すように、ふきこぼれ発生のおそれがある時には、フタ51aのフチ(縁端部)の近傍の一部に70℃以上の高温領域(図中のハッチング部分)が現れている。なお、この高温領域は、調理器具51とフタ51aとの隙間からの泡こぼれに該当する。その後、図14の(c)(d)に示すように、フチの一部の70℃以上の高温領域(図中のハッチング部分)が大きくなっていき、泡こぼれの程度が大きくなりふきこぼれが実際に発生する。このように、ふきこぼれが発生して進行していくことから、フタ51aのフチの近傍に75℃以上の温度領域が発現した場合に、ふきこぼれ発生を判定することができる。 For example, as shown in FIG. 14 (a), if the cooking utensil 51 is covered with a lid 51a before boiling, a high temperature region of 70 ° C. or higher does not appear in the thermal image. On the other hand, as shown in FIG. 14B, when there is a risk of spilling, a high temperature region (hatched portion in the figure) of 70 ° C. or higher is formed in a part near the edge (edge) of the lid 51a. Appears. In addition, this high temperature area | region corresponds to the bubble spill from the clearance gap between the cooking utensil 51 and the lid | cover 51a. Thereafter, as shown in FIGS. 14 (c) and 14 (d), the high-temperature region of 70 ° C. or higher (the hatched portion in the figure) of a part of the edge increases, and the degree of bubble spillage increases and the spillage is actually Occurs. In this way, since the spilling occurs and proceeds, the occurrence of the spilling can be determined when a temperature region of 75 ° C. or higher appears in the vicinity of the edge of the lid 51a.
なお、同様のことは、図15に示すホーロー製の鍋であるフタ52aがされた調理器具52にも言える。しかし、ホーロー製の場合には、調理器具5の温度変化が熱画像からわかる。より具体的には、例えば図15の(a)に示すように、沸騰前には、調理器具52にフタ52aがされてると、熱画像中に70℃以上の高温領域が現われていない。一方、図15の(b)に示すように、蒸気発生時点では、調理器具52内の蒸気によりフタ52aの一部が加熱されて、フタ52aの一部に70℃以上の高温領域(図中のハッチング部分)が現われる。そして、図15の(c)に示すように、ふきこぼれ発生のおそれがある時には、フタ52aの全体に70℃以上の高温領域(図中のハッチング部分)が現れている。これは、調理器具52内の内容物の水位が、フタ52a近くまで上がっており、ふきこぼれが発生する直前であるからである。その後、図15の(d)に示すように、フタ52aの全体にわたる70℃以上の高温領域(図中のハッチング部分)の形がくずれて、ふきこぼれが実際に発生している。このような熱画像上での形のくずれは、調理器具52とフタ52aとの隙間からの泡こぼれの程度が大きくなり、フタ52aを押し上げて調理器具52から内容物の一部がふきこぼれているからである。このように、ふきこぼれが発生することから、フタ52aのフチの位置近傍に75℃以上の温度領域が発現した場合に限らず、当該フチの位置近傍の所定温度以上の領域の形がくずれた(円形でなくなる)場合に、ふきこぼれ発生を判定することができる。 The same can be said for the cooking utensil 52 provided with a lid 52a, which is an enamel pan shown in FIG. However, in the case of the product made from enamel, the temperature change of the cooking utensil 5 can be seen from the thermal image. More specifically, for example, as shown in FIG. 15A, when the cooking appliance 52 is covered with a lid 52a before boiling, a high temperature region of 70 ° C. or higher does not appear in the thermal image. On the other hand, as shown in FIG. 15B, when the steam is generated, a part of the lid 52a is heated by the steam in the cooking appliance 52, and a part of the lid 52a has a high temperature region of 70 ° C. or higher (in the figure). (Hatched part) appears. Then, as shown in FIG. 15C, when there is a risk of spilling, a high temperature region (hatched portion in the figure) of 70 ° C. or more appears on the entire lid 52a. This is because the water level of the contents in the cooking utensil 52 has risen to the vicinity of the lid 52a and is just before the spilling occurs. Thereafter, as shown in FIG. 15 (d), the shape of the high-temperature region (hatched portion in the drawing) of 70 ° C. or more over the entire lid 52a is deformed, and the spillage actually occurs. Such a deformation of the shape on the thermal image increases the degree of bubble spilling from the gap between the cooking utensil 52 and the lid 52a, and a part of the content is spilled from the cooking utensil 52 by pushing up the lid 52a. Because. As described above, since the spilling occurs, the shape of the region above the predetermined temperature in the vicinity of the border position is not limited to the case where a temperature region of 75 ° C. or more appears in the vicinity of the border position of the lid 52a. The occurrence of spilling can be determined when it is no longer circular.
[実施の形態2の効果等]
以上のように、例えばステンレス製の鍋などの熱伝導率が低い調理器具5では、蓋がされてしまうと、内容物の水位を熱画像から直接検出してふきこぼれ判定を行うことはできない。しかし、本実施の形態の調理支援システムおよび調理支援方法によれば、内容物の水位として、蓋のフチ(縁端部分)に出現する泡こぼれを示す熱画像の高温部分や蓋の全体に出現する熱画像の高温部分の形くずれを検出することで、ふきこぼれ判定を行うことができる。それにより、調理器具5の材質によらずに、調理器具5における内容物のふきこぼれが発生することを事前に検知して防止することができる。
[Effects of Second Embodiment, etc.]
As described above, in the cooking utensil 5 having a low thermal conductivity, such as a stainless steel pan, for example, if the lid is covered, the water level of the contents cannot be directly detected from the thermal image to determine the spillage. However, according to the cooking assistance system and the cooking assistance method of the present embodiment, the water level of the contents appears on the hot part of the thermal image showing the bubble spillage appearing on the edge (edge part) of the lid or on the entire lid. By detecting the deformation of the high-temperature portion of the thermal image to be detected, it is possible to determine the overflowing. Thereby, regardless of the material of the cooking utensil 5, it is possible to detect in advance and prevent the occurrence of spilling of the contents in the cooking utensil 5.
(実施の形態3)
実施の形態1および2では、調理器具5のふきこぼれが発生するまで、人が関与しない場合の調理支援方法および調理支援システムについて説明したが、これに限らない。実施の形態3では、ユーザ(人)が内容物をかき混ぜたり、フタを開けたりして調理器具5に関与する場合を考慮した調理支援方法および調理支援システムについて説明する。以下では、実施の形態1および2と同じ点は説明を省略し、異なる点を中心に説明する。
(Embodiment 3)
Although Embodiment 1 and 2 demonstrated the cooking assistance method and cooking assistance system in case a person does not participate until the spill of the cooking appliance 5 generate | occur | produced, it is not restricted to this. In the third embodiment, a cooking support method and a cooking support system will be described in consideration of a case where a user (person) is involved in the cooking utensil 5 by stirring contents or opening a lid. In the following, description of the same points as in the first and second embodiments will be omitted, and different points will be mainly described.
[調理支援システム1Bの構成]
図16は、実施の形態3における調理支援システム1Bの構成の一例を示すブロック図である。図3および図10と同様の要素には同一の符号を付しており、詳細な説明は省略する。
[Configuration of Cooking Support System 1B]
FIG. 16 is a block diagram illustrating an example of a configuration of the cooking support system 1B according to the third embodiment. Elements similar to those in FIGS. 3 and 10 are denoted by the same reference numerals, and detailed description thereof is omitted.
調理支援システム1Bは、図16に示すように、ふきこぼれ検知部10Bと、通知部20と、加熱制御部30とを備える。図16に示す調理支援システム1Bは、実施の形態2における調理支援システム1Aに対して、ふきこぼれ検知部10Bの構成が異なる。その他の構成については実施の形態2と同様のためここでの説明は省略する。 As shown in FIG. 16, the cooking support system 1 </ b> B includes a spill detector 10 </ b> B, a notification unit 20, and a heating control unit 30. The cooking assistance system 1B shown in FIG. 16 differs from the cooking assistance system 1A according to the second embodiment in the configuration of the overflow detection unit 10B. Since other configurations are the same as those of the second embodiment, description thereof is omitted here.
[ふきこぼれ検知部10Bの構成]
ふきこぼれ検知部10Bは、図16に示すように、データ取得部11と、高温部分検出部12と、調理器具検出部13と、記憶部14と、変化量算出部15Aと、ふきこぼれ判定部16Bと、フタ判定部17と、人有無検出部18とを備え、熱画像カメラ2から取得した熱画像に基づいて調理器具5における内容物のふきこぼれが生じるおそれを検知する。より具体的には、図16に示すふきこぼれ検知部10Bは、実施の形態2におけるふきこぼれ検知部10Aに対して、人有無検出部18が追加され、ふきこぼれ判定部16Bの構成が異なる。
[Configuration of the spill detector 10B]
As shown in FIG. 16, the spill detector 10B includes a data acquisition unit 11, a high temperature part detector 12, a cooking utensil detector 13, a storage unit 14, a change amount calculator 15A, and a spill detector 16B. The lid determining unit 17 and the human presence / absence detecting unit 18 are provided, and detect the possibility that the contents of the utensil 5 are spilled based on the thermal image acquired from the thermal image camera 2. More specifically, the overflow detection unit 10B shown in FIG. 16 is different from the overflow detection unit 10A in the second embodiment in that a person presence / absence detection unit 18 is added and the configuration of the overflow detection unit 16B is different.
人有無検出部18は、データ取得部11が取得した熱画像の当該領域のうち、調理器具5を含む所定領域である調理器具領域以外の背景領域に人を示す温度領域である人温度領域が存在するか否かを確認する。このようにして、人有無検出部18は、データ取得部11が取得した熱画像の背景領域における人の有無を検出する。 The human presence / absence detection unit 18 includes a human temperature region that is a temperature region indicating a person in the background region other than the cooking utensil region that is a predetermined region including the cooking utensil 5 in the region of the thermal image acquired by the data acquisition unit 11. Check if it exists. In this way, the person presence / absence detection unit 18 detects the presence / absence of a person in the background region of the thermal image acquired by the data acquisition unit 11.
ふきこぼれ判定部16Bは、変化量算出部15が算出した水位の変化を示す値が所定の閾値以上であるか否かを判定する。より具体的には、ふきこぼれ判定部16Bは、人有無検出部18が背景領域に人温度領域が存在すると確認した場合には、調理器具5における内容物の水位の温度変化を示す値を初期化する。なお、人有無検出部18が背景領域に人温度領域が存在すると確認できない場合、すなわち、背景領域に人がいないことを確認した場合のふきこぼれ判定部16Bの動作は、実施の形態2で説明したふきこぼれ判定部16Aと同様であるためここでの説明は省略する。 The overflow determination unit 16B determines whether or not the value indicating the change in the water level calculated by the change amount calculation unit 15 is equal to or greater than a predetermined threshold value. More specifically, when the presence / absence detection unit 18 confirms that the human temperature region exists in the background region, the overflow determination unit 16B initializes a value indicating the temperature change of the water level of the contents in the cooking utensil 5. To do. The operation of the spillage determination unit 16B when the human presence / absence detection unit 18 cannot confirm that the human temperature region exists in the background region, that is, when it is confirmed that there is no person in the background region, has been described in the second embodiment. Since it is the same as the spillage determination unit 16A, the description thereof is omitted here.
[調理支援システム1Bの動作]
次に、上記のように構成された調理支援システム1Bの動作について説明する。
[Operation of Cooking Support System 1B]
Next, operation | movement of the cooking assistance system 1B comprised as mentioned above is demonstrated.
図17は、実施の形態3における調理支援システム1Bの動作の一例を示すフローチャートである。図4および図11と同様の要素には同一の符号を付しており、詳細な説明は省略する。 FIG. 17 is a flowchart showing an example of the operation of the cooking assistance system 1B in the third embodiment. Elements similar to those in FIGS. 4 and 11 are denoted by the same reference numerals, and detailed description thereof is omitted.
まず、調理支援システム1Bは、熱画像取得処理を行う(S1B)。より具体的には、調理支援システム1Bは、ネットワーク7を介して、熱画像カメラ2から、所定時間毎の調理器具5を含む領域の熱画像を取得し(S11)、領域別熱画像生成処理を行う(S12)。ここで、図18および図19を用いて、領域別熱画像生成処理の詳細について説明する。図18は、図17におけるS12の詳細動作の一例を示すフローチャートである。図19は、図17におけるS12で生成する領域別熱画像を説明するための図である。調理支援システム1Bは、図18に示すように、まず、S11で取得した所定時間毎の調理器具5を含む領域の熱画像を、調理器具5を含む所定領域である調理器具領域と調理器具領域以外の背景領域とに分離する(S121)。図19に示す例では、調理支援システム1Bは、S11で取得した調理器具5(不図示)を含む領域の熱画像200を、調理器具領域201と背景領域202に分離する。次いで、調理支援システム1Bは、調理器具領域内と背景領域内の平均温度を算出する(S122)。次いで、調理支援システム1Bは、調理器具領域の熱画像と、背景領域の熱画像とを作成する(S123)。なお、S122とS123との処理の順番は逆でもよい。 First, the cooking assistance system 1B performs a thermal image acquisition process (S1B). More specifically, the cooking assistance system 1B acquires a thermal image of a region including the cooking utensil 5 every predetermined time from the thermal image camera 2 via the network 7 (S11), and generates a thermal image generation process for each region. (S12). Here, the details of the region-specific thermal image generation processing will be described with reference to FIGS. 18 and 19. FIG. 18 is a flowchart showing an example of the detailed operation of S12 in FIG. FIG. 19 is a diagram for explaining the region-specific thermal image generated in S12 in FIG. As shown in FIG. 18, the cooking support system 1 </ b> B first obtains a thermal image of an area including the cooking utensil 5 at predetermined time intervals acquired in S <b> 11, a cooking utensil area and a cooking utensil area that are predetermined areas including the cooking utensil 5. (S121). In the example shown in FIG. 19, the cooking assistance system 1B separates the thermal image 200 of the area including the cooking utensil 5 (not shown) acquired in S11 into a cooking utensil area 201 and a background area 202. Next, the cooking assistance system 1B calculates the average temperature in the cooking utensil area and the background area (S122). Next, the cooking assistance system 1B creates a thermal image of the cooking utensil area and a thermal image of the background area (S123). Note that the order of processing in S122 and S123 may be reversed.
次に、調理支援システム1Bは、S1Bで作成した背景領域の熱画像を用いて人検出処理を行う(S2B)。ここで、図20を用いて、人検出処理の詳細について説明する。図20は、図17におけるS2Bの詳細動作の一例を示すフローチャートである。調理支援システム1Bは、図20に示すように、まず、S12で作成した所定時間毎の背景領域の熱画像を取得する(S201)。次いで、調理支援システム1Bは、取得した背景領域の熱画像に、人の体温に近い温度領域であって人を示す温度領域があるか確認する(S202)。 Next, the cooking assistance system 1B performs a person detection process using the thermal image of the background area created in S1B (S2B). Here, details of the human detection process will be described with reference to FIG. FIG. 20 is a flowchart showing an example of detailed operation of S2B in FIG. As shown in FIG. 20, the cooking assistance system 1B first acquires a thermal image of the background area created at S12 for each predetermined time (S201). Next, the cooking assistance system 1B confirms whether or not the acquired thermal image of the background area includes a temperature area that is close to the human body temperature and that indicates the person (S202).
S202において、調理支援システム1Bは、取得した背景領域の熱画像に人を示す温度領域がなかった場合(S202でNo)、S3の処理に進む。一方、S202において、調理支援システム1Bは、取得した背景領域の熱画像に人を示す温度領域があることを確認した場合(S202でYes)、さらに、ふきこぼれ予知の判定後かを確認する(S203)。 In S202, the cooking assistance system 1B proceeds to the process of S3 when there is no temperature region indicating a person in the acquired thermal image of the background region (No in S202). On the other hand, in S202, when it is confirmed that there is a temperature region indicating a person in the acquired thermal image of the background region (Yes in S202), the cooking assistance system 1B further confirms whether or not the spill prediction is determined (S203). ).
S203において、調理支援システム1Bは、ふきこぼれ予知の判定後でないことを確認した場合(S203でNo)、S1Bに戻って熱画像取得処理を行う。一方、S203において、調理支援システム1Bは、ふきこぼれ予知の判定後であることを確認した場合(S203でYes)、ふきこぼれ判定に用いる情報を初期化し(S204)、S1Bに戻り、熱画像取得処理をやり直す。本実施の形態では、S204において、調理支援システム1Bは、記憶部14に記憶されている調理器具5における内容物の水位の温度変化を示す値を初期化する。所定時間前に検出した調理器具5における内容物の水位を示す情報として、例えば調理器具5における所定時間前の高温部分の熱画像が記憶部14に記憶されている場合には、当該所定時間前の高温部分の熱画像を削除してもよい。また、調理器具5における内容物の水位の温度変化を示す値として例えば調理器具5の内容物の水位の増加率が記憶部14に記憶されている場合には、当該増加率を0にするとしてもよい。また、調理器具5における内容物の水位の温度変化を示す値として記憶部14に所定時間前の当該フチの温度情報(熱画像)が記憶されている場合には、所定時間前の当該フチの温度情報を削除してもよい。 In S203, the cooking assistance system 1B returns to S1B and performs the thermal image acquisition process when it is confirmed that it is not after the determination of the spill prediction (No in S203). On the other hand, in S203, when the cooking assistance system 1B confirms that it is after the determination of the spilling (Yes in S203), the information used for the spilling determination is initialized (S204), and the process returns to S1B to perform the thermal image acquisition process. Try again. In the present embodiment, in S <b> 204, cooking assistance system 1 </ b> B initializes a value indicating the temperature change of the water level of the contents in cooking appliance 5 stored in storage unit 14. As information indicating the water level of the contents in the cooking utensil 5 detected before a predetermined time, for example, when a thermal image of a high-temperature portion before the predetermined time in the cooking utensil 5 is stored in the storage unit 14, the predetermined time before You may delete the thermal image of the high temperature part. Moreover, when the increase rate of the water level of the content of the cooking utensil 5 is stored in the storage unit 14 as a value indicating the temperature change of the water level of the cooking utensil 5, the increase rate is set to 0, for example. Also good. Moreover, when the temperature information (thermal image) of the said border before the predetermined time is memorize | stored in the memory | storage part 14 as a value which shows the temperature change of the water level of the content in the cooking utensil 5, the said border before the predetermined time is memorize | stored. The temperature information may be deleted.
以下、図17に戻って説明を続ける。 Hereinafter, returning to FIG. 17, the description will be continued.
次に、調理支援システム1Bは、S1Bで作成した背景領域の熱画像に基づいて、調理器具5を検出する調理器具検出処理を行う(S3B)。ここで、図21を用いて、S3Bの調理器具検出処理の詳細について説明する。図21は、図17におけるS3Bの詳細動作の一例を示すフローチャートである。調理支援システム1Bは、図21に示すように、まず、S1Bにおいて作成した調理器具領域の熱画像を取得する(S301)。次いで、S301で取得した調理器具領域の熱画像の2値化処理を行い(S301)、平滑化処理を行う(S302)。なお、S301とS302の処理は、実施の形態1で説明した図5のS31とS32と同様である。また、S303〜306の処理も実施の形態1で説明した図5のS33〜S36と同様であるので、ここでの説明は省略する。 Next, the cooking assistance system 1B performs cooking utensil detection processing for detecting the cooking utensil 5 based on the thermal image of the background area created in S1B (S3B). Here, the details of the cooking utensil detection process in S3B will be described with reference to FIG. FIG. 21 is a flowchart showing an example of detailed operation of S3B in FIG. As shown in FIG. 21, the cooking assistance system 1B first acquires a thermal image of the cooking utensil area created in S1B (S301). Subsequently, the binarization process of the thermal image of the cooking utensil area acquired in S301 is performed (S301), and the smoothing process is performed (S302). Note that the processing of S301 and S302 is the same as S31 and S32 of FIG. 5 described in the first embodiment. Also, the processing of S303 to 306 is the same as S33 to S36 of FIG. 5 described in the first embodiment, and thus description thereof is omitted here.
次に、調理支援システム1B、S1Bにおいて作成した調理器具領域の熱画像に基づいて、調理器具5のフタ検出処理を行う(S4)。S4〜S9の処理は実施の形態2で説明した通りであるので、以降の説明は省略する。 Next, the lid detection process of the cooking utensil 5 is performed based on the thermal image of the cooking utensil area created in the cooking support systems 1B and S1B (S4). Since the processing of S4 to S9 is as described in the second embodiment, the following description is omitted.
[実施の形態3の効果等]
以上のように、本実施の形態の調理支援システムおよび調理支援方法によれば、ユーザ(人)が内容物をかき混ぜたり、フタを開けたりして調理器具5に関与する場合を考慮した上で、調理器具5の材質によらずに、調理器具5における内容物のふきこぼれが発生することを事前に検知して防止することができる。
[Effects of Embodiment 3, etc.]
As described above, according to the cooking assistance system and the cooking assistance method of the present embodiment, the case where the user (person) is involved in the cooking utensil 5 by stirring the contents or opening the lid is considered. Regardless of the material of the cooking utensil 5, it is possible to detect and prevent the occurrence of spilling of the contents in the cooking utensil 5 in advance.
なお、上記の実施の形態では、熱画像カメラ2が撮影した熱画像中の調理器具5を含む所定領域を調理器具領域とし、調理器具領域以外の領域を背景領域として説明したが、これに限らない。背景領域は、熱画像中の加熱調理装置3を示す領域を調理器具領域とし、加熱調理装置3を示す領域以外の領域を背景領域としてもよい。 In the above-described embodiment, the predetermined area including the cooking utensil 5 in the thermal image captured by the thermal imaging camera 2 is described as the cooking utensil area, and the area other than the cooking utensil area is described as the background area. Absent. The background region may be a region indicating the cooking device 3 in the thermal image as a cooking utensil region and a region other than the region indicating the cooking device 3 as a background region.
以上、本発明の一つまたは複数の態様に係る調理支援方法および調理支援システムについて、実施の形態に基づいて説明したが、本発明は、この実施の形態に限定されるものではない。本発明の趣旨を逸脱しない限り、当業者が思いつく各種変形を本実施の形態に施したものや、異なる実施の形態における構成要素を組み合わせて構築される形態も、本発明の一つまたは複数の態様の範囲内に含まれてもよい。例えば、以下のような場合も本発明に含まれる。 As mentioned above, although the cooking assistance method and the cooking assistance system which concern on the one or some aspect of this invention were demonstrated based on embodiment, this invention is not limited to this embodiment. Unless it deviates from the gist of the present invention, one or more of the present invention may be applied to various modifications that can be conceived by those skilled in the art, or forms constructed by combining components in different embodiments. It may be included within the scope of the embodiments. For example, the present invention includes the following cases.
(1)上記の実施の形態1〜3では、調理支援システムおよび調理支援方法が、熱画像カメラ2から、所定時間毎の調理器具5を含む領域の熱画像を取得して、ふきこぼれが発生するおそれを判定するとして説明したが、これに限らない。 (1) In the above-described first to third embodiments, the cooking support system and the cooking support method acquire a thermal image of a region including the cooking utensil 5 every predetermined time from the thermal image camera 2, and the spilling occurs. Although described as determining a fear, it is not restricted to this.
例えば、調理器具5における内容物が沸騰しはじめたら、上記の所定時間よりも短い時間間隔で調理器具5を含む領域の熱画像を取得して、ふきこぼれが発生するおそれを判定してもよい。これにより、ふきこぼれ発生の判定精度をより向上させることができる。 For example, when the contents in the cooking utensil 5 start to boil, a thermal image of an area including the cooking utensil 5 may be acquired at a time interval shorter than the predetermined time to determine the risk of occurrence of spilling. Thereby, it is possible to further improve the determination accuracy of the occurrence of spillage.
(2)また、調理器具5の種類、材質により内容物の温度の変化や内容物の水位の変化のパターンが異なることも考えられる。そのため、調理器具5の内容物の温度や水位の変化のパターンと調理器具5の加熱状態との対応を、予め学習させた学習データを用いて、ふきこぼれが発生するおそれを判定するとしてもよい。特に、調理器具5にフタがされている場合には、ふきこぼれが発生する直前における、フタの縁端に付着する泡の大きさや動きは一様でない。そのため、調理器具5の内容物の温度や水位の変化のパターンと調理器具5の加熱状態との対応を予め学習するによりふきこぼれ発生の判定精度の向上が見込める。 (2) It is also conceivable that the pattern of changes in the temperature of the contents and the change in the water level of the contents differ depending on the type and material of the cooking utensil 5. Therefore, it is good also as determining the possibility that a spill might occur using the learning data learned beforehand about the correspondence between the temperature of the contents of the cooking utensil 5 and the change pattern of the water level and the heating state of the cooking utensil 5. In particular, when the cooking utensil 5 has a lid, the size and movement of bubbles adhering to the edge of the lid immediately before the spilling occurs are not uniform. Therefore, it is possible to improve the accuracy of determining the occurrence of spillage by learning in advance the correspondence between the temperature and water level change pattern of the contents of the cooking utensil 5 and the heating state of the cooking utensil 5.
なお、学習データは、ローカルすなわち調理支援システムに配置された特定の装置内に記憶されているとしてもよい。またローカルの装置と異なる場所に配置されているクラウドサーバなどから取得されるとしてもよい。 Note that the learning data may be stored locally, that is, in a specific device arranged in the cooking support system. Moreover, it is good also as acquiring from the cloud server etc. which are arrange | positioned in the place different from a local apparatus.
また、学習データを用いる場合には、熱画像に限らず通常の画像を用いてふきこぼれが発生するおそれを判定することもできると考えられる。調理器具5の内容物の温度や水位の変化のパターンと通常の画像における調理器具5の加熱状態との対応を予め学習することができるからである。 In addition, when learning data is used, it is considered that it is possible to determine the risk of spilling using not only a thermal image but also a normal image. This is because it is possible to learn in advance the correspondence between the temperature and water level change patterns of the contents of the cooking utensil 5 and the heating state of the cooking utensil 5 in a normal image.
(3)上記の各装置は、具体的には、マイクロプロセッサ、ROM、RAM、ハードディスクユニット、ディスプレイユニット、キーボード、マウスなどから構成されるコンピュータシステムである。前記RAMまたはハードディスクユニットには、コンピュータプログラムが記憶されている。前記マイクロプロセッサが、前記コンピュータプログラムにしたがって動作することにより、各装置は、その機能を達成する。ここでコンピュータプログラムは、所定の機能を達成するために、コンピュータに対する指令を示す命令コードが複数個組み合わされて構成されたものである。 (3) Specifically, each of the above devices is a computer system including a microprocessor, a ROM, a RAM, a hard disk unit, a display unit, a keyboard, a mouse, and the like. A computer program is stored in the RAM or hard disk unit. Each device achieves its functions by the microprocessor operating according to the computer program. Here, the computer program is configured by combining a plurality of instruction codes indicating instructions for the computer in order to achieve a predetermined function.
(4)上記の各装置を構成する構成要素の一部または全部は、1個のシステムLSI(Large Scale Integration:大規模集積回路)から構成されているとしてもよい。システムLSIは、複数の構成部を1個のチップ上に集積して製造された超多機能LSIであり、具体的には、マイクロプロセッサ、ROM、RAMなどを含んで構成されるコンピュータシステムである。前記RAMには、コンピュータプログラムが記憶されている。前記マイクロプロセッサが、前記コンピュータプログラムにしたがって動作することにより、システムLSIは、その機能を達成する。 (4) A part or all of the components constituting each of the above devices may be configured by one system LSI (Large Scale Integration). The system LSI is an ultra-multifunctional LSI manufactured by integrating a plurality of components on a single chip, and specifically, a computer system including a microprocessor, ROM, RAM, and the like. . A computer program is stored in the RAM. The system LSI achieves its functions by the microprocessor operating according to the computer program.
(5)上記の各装置を構成する構成要素の一部または全部は、各装置に脱着可能なICカードまたは単体のモジュールから構成されているとしてもよい。前記ICカードまたは前記モジュールは、マイクロプロセッサ、ROM、RAMなどから構成されるコンピュータシステムである。前記ICカードまたは前記モジュールは、上記の超多機能LSIを含むとしてもよい。マイクロプロセッサが、コンピュータプログラムにしたがって動作することにより、前記ICカードまたは前記モジュールは、その機能を達成する。このICカードまたはこのモジュールは、耐タンパ性を有するとしてもよい。 (5) A part or all of the constituent elements constituting each of the above devices may be constituted by an IC card that can be attached to and detached from each device or a single module. The IC card or the module is a computer system including a microprocessor, a ROM, a RAM, and the like. The IC card or the module may include the super multifunctional LSI described above. The IC card or the module achieves its function by the microprocessor operating according to the computer program. This IC card or this module may have tamper resistance.
(6)本発明は、上記に示す方法であるとしてもよい。また、これらの方法をコンピュータにより実現するコンピュータプログラムであるとしてもよいし、前記コンピュータプログラムからなるデジタル信号であるとしてもよい。 (6) The present invention may be the method described above. Further, the present invention may be a computer program that realizes these methods by a computer, or may be a digital signal composed of the computer program.
また、本発明は、前記コンピュータプログラムまたは前記デジタル信号をコンピュータで読み取り可能な記録媒体、例えば、フレキシブルディスク、ハードディスク、CD−ROM、MO、DVD、DVD−ROM、DVD−RAM、BD(Blu-ray(登録商標) Disc)、半導体メモリなどに記録したものとしてもよい。また、これらの記録媒体に記録されている前記デジタル信号であるとしてもよい。 The present invention also provides a computer readable recording medium such as a flexible disk, hard disk, CD-ROM, MO, DVD, DVD-ROM, DVD-RAM, BD (Blu-ray). (Registered trademark) Disc), or recorded in a semiconductor memory or the like. The digital signal may be recorded on these recording media.
また、本発明は、前記コンピュータプログラムまたは前記デジタル信号を、電気通信回線、無線または有線通信回線、インターネットを代表とするネットワーク、データ放送等を経由して伝送するものとしてもよい。 In the present invention, the computer program or the digital signal may be transmitted via an electric communication line, a wireless or wired communication line, a network represented by the Internet, a data broadcast, or the like.
また、本発明は、マイクロプロセッサとメモリを備えたコンピュータシステムであって、前記メモリは、上記コンピュータプログラムを記憶しており、前記マイクロプロセッサは、前記コンピュータプログラムにしたがって動作するとしてもよい。 The present invention may be a computer system including a microprocessor and a memory, wherein the memory stores the computer program, and the microprocessor operates according to the computer program.
また、前記プログラムまたは前記デジタル信号を前記記録媒体に記録して移送することにより、または前記プログラムまたは前記デジタル信号を、前記ネットワーク等を経由して移送することにより、独立した他のコンピュータシステムにより実施するとしてもよい。 In addition, the program or the digital signal is recorded on the recording medium and transferred, or the program or the digital signal is transferred via the network or the like and executed by another independent computer system. You may do that.
(7)上記実施の形態をそれぞれ組み合わせるとしてもよい。 (7) The above embodiments may be combined.
本発明は、鍋などの調理器具を用いて調理を行う際のふきこぼれを検知して防止するための調理支援方法および調理支援システムに利用でき、特に、IH調理器やガスや火を外部から制御可能なコンロなどの加熱調理装置に用いられる調理支援方法および調理支援システムに利用可能である。 INDUSTRIAL APPLICABILITY The present invention can be used for a cooking support method and a cooking support system for detecting and preventing spillage when cooking using a cooking appliance such as a pan, and in particular, controls an IH cooker, gas, and fire from the outside. The present invention can be used for a cooking support method and a cooking support system used in a heating cooking apparatus such as a stove.
1、1A、1B 調理支援システム
2 熱画像カメラ
3 加熱調理装置
4 レンジフード
5、51、52 調理器具
6 通知装置
7 ネットワーク
10、10A、10B ふきこぼれ検知部
11 データ取得部
12 高温部分検出部
13 調理器具検出部
14 記憶部
15、15A 変化量算出部
16、16A ふきこぼれ判定部
17 フタ判定部
18 人有無検出部
20 通知部
30 加熱制御部
51a、52a フタ
200 熱画像
201 調理器具領域
202 背景領域
DESCRIPTION OF SYMBOLS 1, 1A, 1B Cooking support system 2 Thermal imaging camera 3 Cooking apparatus 4 Range hood 5, 51, 52 Cooking utensil 6 Notification apparatus 7 Network 10, 10A, 10B Swelling detection part 11 Data acquisition part 12 High temperature part detection part 13 Cooking Appliance detection unit 14 Storage unit 15, 15 A Change amount calculation unit 16, 16 A Overflow determination unit 17 Cover determination unit 18 Person presence / absence detection unit 20 Notification unit 30 Heating control unit 51 a, 52 a Cover 200 Thermal image 201 Cooking appliance region 202 Background region
Claims (7)
前記撮像部から取得した熱画像に基づいて前記調理器具における内容物のふきこぼれが生じるおそれを検知するふきこぼれ検知部と、を備え、
前記ふきこぼれ検知部は、加熱調理中の前記調理器具における前記内容物の水位の変化が所定の閾値以上であると判定した場合、前記内容物のふきこぼれが生じるおそれがあると判定する、
加熱調理装置。 An imaging unit that captures a thermal image of an area including a cooking utensil being cooked from diagonally above;
A spill detector that detects the risk of spilling of contents in the cooking utensil based on the thermal image acquired from the imaging unit,
When it is determined that the change in the water level of the content in the cooking utensil during cooking is greater than or equal to a predetermined threshold, the flow detection unit determines that there is a risk that the content may overflow.
Cooking equipment.
請求項1に記載の加熱調理装置。 A heating control unit that performs control to weaken or stop the output of the heating cooking device when the risk of the occurrence of overflowing is detected by the boiling detection unit;
The cooking apparatus according to claim 1.
前記撮像部から所定時間毎の前記調理器具を含む領域の熱画像を取得する、データ取得部を備える、
請求項1または2に記載の加熱調理装置。 The spill detector is
A data acquisition unit is provided for acquiring a thermal image of an area including the cooking utensil every predetermined time from the imaging unit,
The cooking apparatus according to claim 1 or 2.
前記水位の変化を示す値として、所定時間毎の前記調理器具の前記熱画像における所定温度以上の領域である所定温度領域の面積の変化を示す値を算出する、
請求項3に記載の加熱調理装置。 The spill detector is
As a value indicating the change in the water level, a value indicating a change in the area of the predetermined temperature region, which is a region equal to or higher than the predetermined temperature in the thermal image of the cooking utensil every predetermined time,
The cooking apparatus according to claim 3.
取得した前記熱画像の前記領域のうち人を示す温度領域である人温度領域が存在するか否かを確認する人有無検知部を備える、
請求項1〜4のいずれか1項に記載の加熱調理装置。 The spillover detector further includes:
A human presence / absence detection unit that confirms whether or not a human temperature region that is a temperature region indicating a person among the regions of the acquired thermal image exists;
The heating cooking apparatus of any one of Claims 1-4.
前記調理器具を含む所定領域である調理器具領域以外の背景領域に人を示す温度領域である人温度領域が存在するか否かを確認する、
請求項5に記載の加熱調理装置。 The presence / absence detection unit is
Check whether there is a human temperature region that is a temperature region indicating a person in the background region other than the cooking utensil region that is a predetermined region including the cooking utensil,
The cooking device according to claim 5.
請求項6に記載の加熱調理装置。 When it is confirmed that the human temperature region exists in the background region, a value indicating the change in the water level is initialized.
The heating cooking apparatus of Claim 6.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2018119245A JP6793317B2 (en) | 2018-06-22 | 2018-06-22 | Cooking equipment |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2018119245A JP6793317B2 (en) | 2018-06-22 | 2018-06-22 | Cooking equipment |
Related Parent Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2016119305A Division JP6735513B2 (en) | 2016-06-15 | 2016-06-15 | Cooking support method and cooking support system |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2018163887A true JP2018163887A (en) | 2018-10-18 |
JP6793317B2 JP6793317B2 (en) | 2020-12-02 |
Family
ID=63859225
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2018119245A Active JP6793317B2 (en) | 2018-06-22 | 2018-06-22 | Cooking equipment |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP6793317B2 (en) |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2021034223A (en) * | 2019-08-23 | 2021-03-01 | パナソニックIpマネジメント株式会社 | Heating cooker |
JP2021055908A (en) * | 2019-09-30 | 2021-04-08 | 株式会社パロマ | Gas cooking stove system |
JP2021116973A (en) * | 2020-01-27 | 2021-08-10 | 株式会社パロマ | Cooking stove system |
Citations (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH09237677A (en) * | 1996-02-29 | 1997-09-09 | Sumitomo Electric Ind Ltd | Elecromagmetic induction heating composite material, and manufacture thereof |
WO2006070334A1 (en) * | 2004-12-28 | 2006-07-06 | Arcelik Anonim Sirketi | A cooking device |
JP2007303804A (en) * | 2006-04-10 | 2007-11-22 | Matsushita Electric Ind Co Ltd | Boil-over detector, boil-over detecting method and boil-over detection program |
KR20100010248A (en) * | 2008-07-22 | 2010-02-01 | 엘지전자 주식회사 | Cooker and method for controlling temperature |
US20110134413A1 (en) * | 2008-08-20 | 2011-06-09 | BSH Bosch und Siemens Hausgeräte GmbH | Cooking hob device |
JP2012073033A (en) * | 2010-09-27 | 2012-04-12 | Panasonic Electric Works Co Ltd | Water level detection device with infrared array sensor |
JP2015068542A (en) * | 2013-09-27 | 2015-04-13 | 三菱電機株式会社 | Heating cooker |
JP2016103083A (en) * | 2014-11-27 | 2016-06-02 | パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカPanasonic Intellectual Property Corporation of America | Watching system and notification control method |
JP2017224171A (en) * | 2016-06-15 | 2017-12-21 | パナソニックIpマネジメント株式会社 | Cooking support method and system |
-
2018
- 2018-06-22 JP JP2018119245A patent/JP6793317B2/en active Active
Patent Citations (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH09237677A (en) * | 1996-02-29 | 1997-09-09 | Sumitomo Electric Ind Ltd | Elecromagmetic induction heating composite material, and manufacture thereof |
WO2006070334A1 (en) * | 2004-12-28 | 2006-07-06 | Arcelik Anonim Sirketi | A cooking device |
JP2007303804A (en) * | 2006-04-10 | 2007-11-22 | Matsushita Electric Ind Co Ltd | Boil-over detector, boil-over detecting method and boil-over detection program |
KR20100010248A (en) * | 2008-07-22 | 2010-02-01 | 엘지전자 주식회사 | Cooker and method for controlling temperature |
US20110134413A1 (en) * | 2008-08-20 | 2011-06-09 | BSH Bosch und Siemens Hausgeräte GmbH | Cooking hob device |
JP2012073033A (en) * | 2010-09-27 | 2012-04-12 | Panasonic Electric Works Co Ltd | Water level detection device with infrared array sensor |
JP2015068542A (en) * | 2013-09-27 | 2015-04-13 | 三菱電機株式会社 | Heating cooker |
JP2016103083A (en) * | 2014-11-27 | 2016-06-02 | パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカPanasonic Intellectual Property Corporation of America | Watching system and notification control method |
JP2017224171A (en) * | 2016-06-15 | 2017-12-21 | パナソニックIpマネジメント株式会社 | Cooking support method and system |
Cited By (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2021034223A (en) * | 2019-08-23 | 2021-03-01 | パナソニックIpマネジメント株式会社 | Heating cooker |
JP7300648B2 (en) | 2019-08-23 | 2023-06-30 | パナソニックIpマネジメント株式会社 | heating cooker |
JP2021055908A (en) * | 2019-09-30 | 2021-04-08 | 株式会社パロマ | Gas cooking stove system |
JP7359423B2 (en) | 2019-09-30 | 2023-10-11 | 株式会社パロマ | gas stove system |
JP2021116973A (en) * | 2020-01-27 | 2021-08-10 | 株式会社パロマ | Cooking stove system |
JP7329842B2 (en) | 2020-01-27 | 2023-08-21 | 株式会社パロマ | stove system |
Also Published As
Publication number | Publication date |
---|---|
JP6793317B2 (en) | 2020-12-02 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6735513B2 (en) | Cooking support method and cooking support system | |
JP2018163887A (en) | Heating cooker | |
JP2018142558A (en) | Heating cooker | |
JP6704125B2 (en) | Cooker | |
US9803871B2 (en) | Heating power control device, heating power control method, and recording medium | |
EP3232733B1 (en) | System that emits light to overheated portion of cooking container | |
JP2007303804A (en) | Boil-over detector, boil-over detecting method and boil-over detection program | |
JP7065305B2 (en) | Cooker | |
CN107874586A (en) | Heating vessel and its method for heating and controlling | |
JP2017194449A (en) | Cooking support method and cooking support system | |
JP6119938B2 (en) | Image processing system, image processing apparatus, image processing method, and image processing program | |
JPWO2019059211A1 (en) | Cooker | |
JP6745928B2 (en) | Thermal power control system and thermal power control method | |
CN105865410A (en) | Altitude height detection method used for cooking utensils, apparatus thereof and cooking utensils | |
CN107361627B (en) | Cooking appliance and method for cooking by using same | |
JP5340451B2 (en) | Induction heating cooker | |
JP5052567B2 (en) | Induction heating cooker | |
JP5000686B2 (en) | Induction heating cooker | |
JP6906192B2 (en) | Cooker | |
JP7285394B2 (en) | Heating cooker and heating control method | |
JP2827784B2 (en) | kitchenware | |
CN113310549B (en) | Cookware liquid level monitoring method and system and computer storage medium | |
CN214841059U (en) | Overflow detection system of cooker and novel range hood | |
JP7026316B2 (en) | Induction heating cooker | |
US20240225352A9 (en) | Smart Cooktop System and Method of Using Same |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20190215 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20200212 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20200310 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20200507 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20201013 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20201022 |
|
R151 | Written notification of patent or utility model registration |
Ref document number: 6793317 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |