EP4237748A1

EP4237748A1 - Method for operating a cooking appliance, and cooking appliance

Info

Publication number: EP4237748A1
Application number: EP21794546.8A
Authority: EP
Inventors: Francisco Villoria Domingues; Timo BANGRAZI; Helge Nelson
Original assignee: Miele und Cie KG
Current assignee: Miele und Cie KG
Priority date: 2020-10-29
Filing date: 2021-10-18
Publication date: 2023-09-06
Also published as: BE1028761B1; BE1028761A1; WO2022089977A1

Abstract

The invention relates to a method for operating a cooking appliance (2), and a corresponding cooking appliance (2) having a cooking chamber (4) for receiving a product to be cooked (6), a treatment device for treating the product to be cooked (6) and a control unit (14) for controlling the treatment device depending on a treatment program. An image of the product to be cooked (6) is recorded and a feature of the image resulting from at least one colour space value of at least one pixel of the image is extracted. According to the invention, over a certain period, a development over time (20, 20') of at least one feature is recorded, the development over time (20, 20') of the at least one feature is monitored with regard to the existence of a development characteristic (22) and the treatment device is controlled depending on the existence of a development characteristic (22).

Description

Verfahren zum Betreiben eines Gargerätes und Gargerät Method for operating a cooking appliance and cooking appliance

Die vorliegende Erfindung betrifft ein Verfahren zum Betreiben eines Gargerätes sowie ein Gargerät mit einem Garraum zur Aufnahme eines Garguts, einer Behandlungseinrichtung zur Behandlung des Garguts und mit einer Steuereinrichtung zur Steuerung der Behandlungseinrichtung in Abhängigkeit eines Behandlungsprogramms. The present invention relates to a method for operating a cooking appliance and a cooking appliance with a cooking chamber for accommodating an item to be cooked, a treatment device for treating the item to be cooked and with a control device for controlling the treatment device as a function of a treatment program.

Zur Sicherstellung eines optimalen Garprozesses ist es insbesondere bei der Verwendung von automatischen Garprogrammen sachdienlich, während des Garvorgangs bestimmte Eigenschaften des Garguts zu ermitteln bzw. zu überwachen. Beispielsweise kann anhand von Informationen über den Garzustand des Garguts der optimale Zeitpunkt zum Abschalten der Behandlungseinrichtung eingestellt werden, so dass ein Übergaren oder Überbräunen des Garguts verhindert wird. In order to ensure an optimal cooking process, it is useful, particularly when using automatic cooking programs, to determine or monitor specific properties of the food to be cooked during the cooking process. For example, the optimal point in time for switching off the treatment device can be set based on information about the cooking state of the cooking product, so that the cooking product is prevented from overcooking or browning.

Eine Möglichkeit, den Garzustand von Gargütern zu überwachen, ist die Messung der Kerntemperatur mittels eines Speisethermometers. Diese Methode ist jedoch für bestimmte Gargüter wie z.B. Pizzen oder ähnliche flache Backgüter ungeeignet. Auch können mit dieser Methode keine Informationen über äußere Merkmale des Garguts wie den Bräunungsgrad ermittelt werden, so dass unter Umständen ein Überbräunen des Garguts auf diese Weise nicht verhindert werden kann. One way of monitoring the cooking status of food is to measure the core temperature using a food thermometer. However, this method is unsuitable for certain items to be cooked, such as pizzas or similar flat baked goods. Also, no information about external characteristics of the food to be cooked, such as the degree of browning, can be determined with this method, so that under certain circumstances over-browning of the food cannot be prevented in this way.

Eine weitere Möglichkeit besteht darin, die äußere Erscheinung des Garguts zu erfassen und daraus auf den Garzustand des Garguts zu schließen. Beispielsweise ist aus der EP 2 444 735 A2 ein Verfahren zum Betreiben eines Gargerätes bekannt, bei dem während des Garprozesses ein Bild des Gargut aufgenommen wird, wobei ein RGB-Farbraumwert des Bildes mit einem voreingestellten Referenzwert verglichen wird. Die Heizleistung wird dabei so geregelt, dass der erfasste RGB-Farbraumwert an den Referenzwert angeglichen wird. Liegt der RGB-Farbraumwert zu einem bestimmten Zeitpunkt unterhalb des Referenzwerts, wird die Heizleistung erhöht. Liegt der RGB-Farbraumwert zu einem bestimmten Zeitpunkt oberhalb des Referenzwerts, wird die Heizleistung verringert. Da das äußere Erscheinungsbild des Garguts typischerweise natürlichen Schwankungen unterliegt und auch nur kleine Unterschiede der Beleuchtung oder Zusammensetzung des Garguts dessen äußeres Erscheinungsbild stark beeinflussen können, ist liefert der Vergleich von ermittelten Farbraumwerte mit im Vorfeld aufgezeichneten Referenzwerten unzuverlässige Ergebnisse. A further possibility consists in detecting the external appearance of the food to be cooked and inferring the cooking state of the food from this. For example, a method for operating a cooking appliance is known from EP 2 444 735 A2, in which an image of the item to be cooked is recorded during the cooking process, with an RGB color space value of the image being compared with a preset reference value. The heating power is regulated in such a way that the recorded RGB color space value is adjusted to the reference value. If the RGB color space value is below the reference value at a certain point in time, the heating power is increased. If the RGB color space value is above the reference value at a certain point in time, the heating power is reduced. Since the external appearance of the food to be cooked is typically subject to natural fluctuations and even small differences in the lighting or composition of the food to be cooked can have a major impact on its external appearance, comparing determined color space values with previously recorded reference values delivers unreliable results.

Aus der EP 3 722 673 A1 ist ein Gargerät und ein Verfahren bekannt, bei dem mittels einer Lichtquelle eine Mehrzahl unterschiedlicher Lichtspektren erzeugt werden, mittels einer Sensoreinrichtung die durch das Gargut reflektierten Lichtspektren einzeln erfasst werden und dann die erfassten Werte ausgewertet werden um eine Garguteigenschaft zu bestimmen. Die Garguteigenschaft kann die Art des Garguts, aber auch der Garzustand oder die Bräunung des Garguts sein. Wesentlicher Gesichtspunkt des in diesem Dokument offenbarten Verfahrens ist, dass einzelne Bilder jeweils mit Referenzbildern verglichen werden. Dabei sind hohe Speicher- und Rechenkapazitäten notwendig, die in der Regel nicht in der Steuerung von Gargeräten vorhanden sind. Eine Cloudanbindung mit entsprechend langen Reaktionszeiten ist deshalb zwingend notwendig. EP 3 722 673 A1 discloses a cooking appliance and a method in which a plurality of different light spectra are generated by means of a light source, the light spectra reflected by the food to be cooked are recorded individually by means of a sensor device, and the values recorded are then evaluated in order to determine a property of the food to be cooked determine. the The property of the food to be cooked can be the type of food, but also the state of cooking or the browning of the food. An essential aspect of the method disclosed in this document is that individual images are each compared with reference images. This requires high storage and computing capacities, which are not usually present in the control of cooking appliances. A cloud connection with correspondingly long response times is therefore absolutely necessary.

Die EP 3 715 721 A1 beschreibt ein Verfahren zum Betreiben eines Gargeräts und ein Gargerät, bei dem mit einer Kamera Bilder eines Garbereichs erfasst werden. Die Bilder werden in einer Verarbeitungseinrichtung ausgewertet. Dabei werden sich über die Zeit verändernde Bildelemente identifiziert und als dem Gargut zugehörend zugeordnet, um sie von außerhalb des Garguts stammenden Bildelementen zu unterscheiden. Dabei können Farbkoordinaten im LAB-Farbraum dahingehend betrachtet werden, ob sie sich ändern oder nicht. Es kann auch eine Zunahme der Bräunung betrachtet und bei Erreichen einer bestimmten Bräunung der Backvorgang beendet werden. EP 3 715 721 A1 describes a method for operating a cooking appliance and a cooking appliance in which images of a cooking area are captured with a camera. The images are evaluated in a processing device. Image elements that change over time are identified and assigned as belonging to the item to be cooked in order to distinguish them from image elements originating outside of the item to be cooked. In doing so, color coordinates in the LAB color space can be viewed to determine whether they change or not. An increase in browning can also be observed and the baking process stopped when a certain level of browning is reached.

Aufgabe der vorliegenden Erfindung ist es, ein Verfahren zum Betreiben eines Gargerätes und ein Gargerät zur Verfügung zu stellen, das eine verbesserte Bestimmung von Eigenschaften des Garguts, insbesondere des Garzustands und/oder des Bräunungsgrades des Garguts, ermöglicht und insbesondere die Nachteile des Standes der Technik vermeidet.The object of the present invention is to provide a method for operating a cooking appliance and a cooking appliance that enable improved determination of the properties of the food, in particular the cooking state and/or the degree of browning of the food, and in particular the disadvantages of the prior art avoids.

Diese Aufgabe wird gelöst durch ein Verfahren mit den Merkmalen des Anspruchs 1 und durch ein Gargerät mit den Merkmalen des Anspruchs 11. This object is achieved by a method having the features of claim 1 and by a cooking appliance having the features of claim 11.

Bei dem erfindungsgemäßen Verfahren zum Betreiben eines Gargerätes, das einen Garraum zur Aufnahme eines Garguts, eine Behandlungseinrichtung zur Behandlung des Garguts und eine Steuereinrichtung zur Steuerung der Behandlungseinrichtung in Abhängigkeit eines Behandlungsprogramms aufweist, wird in einem Aufnahmeschritt ein Bild des Garguts mittels einer Bildaufnahmeeinrichtung aufgenommen und in einem Extraktionsschritt mindestens ein sich aus zumindest einem Farbraumwert wenigstens eines Pixels des Bildes ergebendes Merkmal des Bildes mittels einer Auswerteeinrichtung extrahiert. Durch Wiederholen des Aufnahmeschritts und des Extraktionsschritts über eine gewisse Zeitspanne wird ein zeitlicher Verlauf eines oder mehrerer Merkmale aufgezeichnet. Der zeitliche Verlauf der Merkmale wird auf das Vorliegen einer Verlaufscharakteristik hin überwacht. Die Behandlungseinrichtung wird in Abhängigkeit des Vorliegens einer Verlaufscharakteristik gesteuert. In the method according to the invention for operating a cooking appliance, which has a cooking chamber for accommodating an item to be cooked, a treatment device for treating the item to be cooked and a control device for controlling the treatment device as a function of a treatment program, in a recording step an image of the item to be cooked is recorded using an image recording device and an extraction step at least one feature of the image resulting from at least one color space value of at least one pixel of the image is extracted by means of an evaluation device. By repeating the recording step and the extraction step over a certain period of time, a time course of one or more features is recorded. The time profile of the features is monitored for the presence of a profile characteristic. The treatment device is controlled depending on the presence of a course characteristic.

Bei der vorliegenden Erfindung werden zu verschiedenen Zeitpunkten Daten über die äußere Erscheinungsform des Garguts erhoben und zueinander in Relation gesetzt. Hierbei wird der zeitliche Verlauf der Merkmale auf das Vorliegen zumindest einer Verlaufscharakteristik untersucht, die eine Eigenschaft des Garguts indiziert. So kann beispielsweise das Vorliegen eines Extrempunkts, Wendepunktes oder Nulldurchganges im zeitlichen Verlauf eines oder mehrerer Merkmale auf einen bestimmten Garzustand hinweisen. Diese Information kann z.B. zur Berechnung eines Fertigzeitpunkts herangezogen werden. Der Zusammenhang zwischen dem Vorliegen einer bestimmten Verlaufscharakteristik zu einer bestimmten Zeit und einer Eigenschaft eines bestimmten Garguts, wie z.B. dessen Garzustand, kann empirisch ermittelt und in dem Gargerät werksseitig hinterlegt werden. In the present invention, data on the external appearance of the food to be cooked is collected at different points in time and put in relation to one another. In this case, the time profile of the features is examined for the presence of at least one profile characteristic that indicates a property of the item to be cooked. For example, the presence an extreme point, turning point or zero crossing in the course of time of one or more characteristics point to a specific doneness. This information can be used, for example, to calculate a completion time. The relationship between the presence of a specific progression characteristic at a specific time and a property of a specific item to be cooked, such as its cooking state, can be determined empirically and stored in the cooking appliance at the factory.

Für viele Lebensmittel lässt sich das Garende und der optimale Entnahmezeitpunkt, unter der Voraussetzung, dass die Garparameter, vor allem die Temperatur, sinnvoll eingestellt sind, durch eine Beobachtung des Bräunungsverlaufes ermitteln. Dazu gehören viele Gebäcke wie Plätzchen und Kuchen, Brötchen aber auch Pizza, Quiche und Aufläufe. Im Laufe des Garprozesses wird die Oberfläche der Speisen getrocknet und es formt sich eine Kruste. Durch chemische Reaktionen verändern Lebensmittel wie Teige oder Käse in Abhängigkeit von der Temperatur auf immer gleiche Weise ihre Farbe, was durch die Maillard-Reaktion beschrieben ist. Neben dem zeitlichen Verlauf der Bräunung bzw. der Farbigkeit können weitere Merkmale aufgenommen und bewertet werden. Welches Merkmal besonders aussagekräftig ist hängt von der Speise ab und muss empirisch ermittelt und festgelegt werden. For many foods, the end of cooking and the optimal time to remove can be determined by observing the browning process, provided that the cooking parameters, especially the temperature, are set sensibly. This includes many pastries such as cookies and cakes, rolls but also pizza, quiche and casseroles. During the cooking process, the surface of the food dries and a crust forms. As a result of chemical reactions, foods such as dough or cheese always change their color in the same way depending on the temperature, which is described by the Maillard reaction. In addition to the course of the browning or the color over time, other features can be recorded and evaluated. Which feature is particularly meaningful depends on the food and must be determined and determined empirically.

Veränderliche Beleuchtungssituationen, natürliche Schwankungen im äußeren Erscheinungsbild des Garguts oder Unterschiede der Zusammensetzung des Garguts, die sich stark auf die absoluten Farbraumwerte und somit auf den sich daraus ergebenden Absolutwert des Merkmals auswirken, wirken sich nur in geringerem Maße auf die relativen Änderungen eines oder mehrerer Merkmale aus. Beispielsweise kann Licht aus der Küche durch die Tür des Gargerätes auf das im Garraum befindliche Gargut fallen. Je nach Helligkeit in der Küche verändert dieser Einfluss das aufgenommene Bild des Gargutes und seiner Farbraumwerte. Eine absolute Bewertung der Farbraumwerte ist nachteilig, da durch die veränderlichen äußerlichen Beleuchtungseinflüsse eine eindeutige Auswertung unmöglich machen bzw. diese mit erheblichem Aufwand auch bestimmt und in der Auswertung berücksichtigt werden müssten. Die Analyse des relativen Verlaufs eines oder mehrerer Merkmale über die Zeit ermöglicht daher eine besonders zuverlässige Ermittlung von Eigenschaften des Garguts. Besonders vorteilhaft ist ferner, dass ein auf ein bestimmtes Gargut einer bestimmten Art und Zusammensetzung zugeschnittener Algorithmus, der das erfindungsgemäße Verfahren realisiert, ohne oder nur mit wenig Modifikationen für eine Anzahl weiterer Gargüter anderer Art und/oder Zusammensetzung verwendet werden kann. Changing lighting situations, natural fluctuations in the external appearance of the food or differences in the composition of the food, which have a strong impact on the absolute color space values and thus on the resulting absolute value of the feature, only have a minor impact on the relative changes in one or more features out of. For example, light from the kitchen can fall through the door of the cooking appliance onto the food to be cooked in the cooking chamber. Depending on the brightness in the kitchen, this influence changes the recorded image of the food and its color space values. An absolute evaluation of the color space values is disadvantageous, since the changing external lighting influences make a clear evaluation impossible or they would also have to be determined with considerable effort and taken into account in the evaluation. The analysis of the relative progression of one or more features over time therefore enables properties of the food to be cooked to be determined particularly reliably. It is also particularly advantageous that an algorithm tailored to a specific item to be cooked of a specific type and composition, which implements the method according to the invention, can be used with little or no modification for a number of other items to be cooked of a different type and/or composition.

Insbesondere erfolgt die Extraktion des Merkmals des mindestens einen Pixels in einem Farbraum, in dem die Helligkeit und die Farbigkeit getrennt sind, insbesondere in einen LAB- o- der YUV-Farbraum. In Bräunungsprozessen folgt der Farbwert einer vom Lebensmittel ab- hängigen vordefinierten Kurve durch den Farbraum. So nimmt der Gelbanteil mit zunehmender Bräunung deutlich ab und der Rotanteil steigt stark an. Zusätzlich ist diese Geschwindigkeit der Farbänderung pro Lebensmittel charakteristisch und bietet ein weiteres Merkmal zur Bewertung des Garzustandes. Die Aufnahme der vollen Farbraumwerte ermöglicht, dass das Merkmal separat hinsichtlich der Helligkeit und/oder der Farbigkeit bewertet werden kann. Der Helligkeitswert ist dabei deutlich stärker von den äußeren Beleuchtungseinflüssen dominiert, wie z.B. der Helligkeit im Küchenraum, während die Farbigkeit im Vergleich deutlich stärker von den Garguteigenschaften bestimmt ist und weniger Störeinflüssen unterliegt. Sie ist daher für die Berechnung der Merkmale und der Bewertung des Bräunungsverlaufes bevorzugt auszuwerten. In particular, the feature of the at least one pixel is extracted in a color space in which the brightness and the color are separated, in particular in a LAB or YUV color space. In browning processes, the color value follows a food-dependent pending predefined curve through the color space. The yellow component decreases significantly with increasing tanning and the red component increases sharply. In addition, this rate of color change is characteristic for each food and offers another feature for evaluating the doneness. Recording the full color space values allows the feature to be evaluated separately with regard to brightness and/or color. The brightness value is much more strongly influenced by the external lighting influences, such as the brightness in the kitchen, while the colour, in comparison, is determined much more strongly by the properties of the food being cooked and is subject to fewer disruptive influences. It is therefore preferable to evaluate it for the calculation of the characteristics and the evaluation of the tanning process.

Vorzugsweise werden zuerst die Art und/oder die Zusammensetzung des zu garenden Garguts bestimmt und bei dem Verfahren berücksichtigt. Beispielsweise können diese Informationen vom Benutzer in das Gargerät eingegeben werden. Alternativ oder zusätzlich kann das Gargut insbesondere mittels eines aufgenommenen Bildes automatisch erkannt und charakterisiert werden. Diese so gewonnen Information über das Gargut kann dazu genutzt werden, die für diesen Garprozess aussagekräftigsten Merkmale auszuwerten. Somit müssen für eine erfolgreiche optische Überwachung des Garprozesses nur möglichst wenige Merkmale berücksichtigt werden und die Berechnung und Verarbeitung kann effizient stattfinden. Beispielhaft sind die Bräunungsprozesse von Gebäcken, Käse und Fleisch unterschiedlich, was für eine vorteilhafte Ausführung dann werkseitig in der Merkmalsberechnung berücksichtigt werden kann. The type and/or composition of the food to be cooked is preferably determined first and taken into account in the method. For example, this information can be entered into the cooking appliance by the user. Alternatively or additionally, the item to be cooked can be automatically recognized and characterized, in particular by means of a recorded image. The information obtained in this way about the food to be cooked can be used to evaluate the features that are most meaningful for this cooking process. Thus, for a successful optical monitoring of the cooking process, only as few features as possible have to be taken into account and the calculation and processing can take place efficiently. For example, the browning processes of baked goods, cheese and meat are different, which can then be taken into account at the factory in the feature calculation for an advantageous design.

Bei diesem beschriebenen Verfahren existieren deutliche Vorteile gegenüber zwar Gargutabhängigen aber zeitgesteuerten Garprozessen. Somit können bei zeitgesteuerten „Automatikprogrammen“ die mengenspezifischen Zeitunterschiede in der Regel nicht berücksichtigt werden, oder Zeitunterschiede durch unterschiedliche Starttemperaturen des Garguts oder Unterbrechungen im Garprozess resultieren in schlechteren Garergebnissen. In this described method, there are clear advantages over cooking processes that depend on the items to be cooked but are time-controlled. Thus, with time-controlled "automatic programs", the quantity-specific time differences cannot usually be taken into account, or time differences due to different starting temperatures of the food to be cooked or interruptions in the cooking process result in poorer cooking results.

Das echte Erkennen eines Garende-Zeitpunts bzw. optimalen Entnahmezeitpunkts durch live Überwachung überwindet diese Fehlerquellen und führt zu den robustesten und besten Garergebnissen. The real detection of a cooking end time or optimal removal time through live monitoring overcomes these sources of error and leads to the most robust and best cooking results.

Im Sinne dieser Erfindung kommen als Gargeräte Herde, Backöfen, Backofen-Kombigeräte mit Dampfgar- und/oder Mikrowellenfunktion, Backöfen mit Hochfrequenztechnik sowie Mikrowellenherde in Betracht. Vorzugsweise umfasst die Behandlungseinrichtung zumindest eine thermische Heizquelle zur thermischen Behandlung des Garguts und/oder zumindest einen Hochfrequenzerzeuger zur dielektrischen Erwärmung des Garguts. Die Behandlungseinrichtung kann dabei eine Unterhitze, eine Oberhitze und/oder einen mit einem Ringheizkörper ausgestatteten Umlüfter als thermische Heizquelle umfassen. Insbesondere umfasst die Behandlungseinrichtung einen Dampferzeuger. Als Bildaufnahmeeinrichtung ist insbesondere eine Kamera vorgesehen, die bevorzugt außerhalb einer Isolierung des Garraums angeordnet ist. Die Auswerteeinrichtung kann als Teil der Bildaufnahmeeinrichtung oder der Steuereinrichtung ausgebildet sein. Alternativ kann die Auswerteeinrichtung als eigenständige Einheit mit einem Prozessor, einem Speicher, Kommunikationsschnittstellen und/oder weiteren Komponenten zur elektronischen Datenverarbeitung ausgebildet und jeweils mit der Bildaufnahmeeinrichtung und der Steuereinrichtung des Gargerätes - drahtlos oder drahtgebunden - datenübertragend verbunden sein. For the purposes of this invention, cookers, ovens, combination ovens with steam cooking and/or microwave function, ovens with high-frequency technology and microwave ovens can be considered as cooking appliances. The treatment device preferably comprises at least one thermal heating source for the thermal treatment of the item to be cooked and/or at least one high-frequency generator for the dielectric heating of the item to be cooked. The treatment device can include a bottom heater, a top heater and/or a circulating fan equipped with a ring heater as the thermal heat source. In particular, the treatment device includes a steam generator. In particular, a camera is provided as the image recording device, which is preferably arranged outside an insulation of the cooking chamber. The evaluation device can be designed as part of the image recording device or the control device. Alternatively, the evaluation device can be designed as an independent unit with a processor, a memory, communication interfaces and/or other components for electronic data processing and can be connected to the image recording device and the control device of the cooking appliance - wirelessly or wired - for data transmission.

Das Merkmal des Bildes kann sich beispielsweise aus einem Farbraumwert des Farbvektors bzw. Farbortes eines oder mehrerer Pixel des Bildes ergeben. Beispielsweise kann sich das Merkmal aus den L-Werten der LAB-Farbvektoren bzw. LAB-Farborte mehrerer Pixel ergeben. Das Merkmal kann sich aber auch aus einer Kombination, insbesondere einer Linearkombination, mehrerer Farbraumwerte der Pixel des Bildes ergeben. Es ist ersichtlich, dass zur Überwachung des Garzustandes des Garguts nicht sämtliche Pixel des Bildes ausgewertet werden müssen. Beispielsweise genügt es, wenn jene Pixel des Bildes ausgewertet werden, die das Gargut abbilden. Es kann unter Umständen auch genügen, wenn nur ein Teil der das Gargut abbildenden Pixel des Bildes ausgewertet wird. Vorzugsweise wird das Merkmal eines aufgenommenen Bildes extrahiert, bevor das nächste Bild aufgenommen wird. Auf diese Weise kann das zuerst aufgenommene Bild gelöscht werden, bevor das nächste Bild aufgenommen wird, so dass insbesondere auch beim Aufzeichnen eines hochaufgelösten zeitlichen Verlaufs eines oder mehrerer Merkmale weniger Speicherplatz verbraucht wird.The feature of the image can result, for example, from a color space value of the color vector or color location of one or more pixels of the image. For example, the feature can result from the L values of the LAB color vectors or LAB color locations of a number of pixels. However, the feature can also result from a combination, in particular a linear combination, of several color space values of the pixels of the image. It can be seen that not all pixels of the image have to be evaluated in order to monitor the cooking state of the food. For example, it is sufficient if those pixels of the image that depict the food to be cooked are evaluated. Under certain circumstances, it may also be sufficient if only some of the pixels of the image depicting the item to be cooked are evaluated. Preferably, the feature of a captured image is extracted before the next image is captured. In this way, the image recorded first can be deleted before the next image is recorded, so that less storage space is used, in particular when recording a high-resolution time profile of one or more features.

Das Wiederholen des Aufnahmeschritts und des Extraktionsschritts kann periodisch oder in unregelmäßig definierten Zeitabständen durchgeführt werden. Das Aufzeichnen des zeitlichen Verlaufs eines oder mehrerer Merkmale kann im Wesentlichen über den gesamten Garvorgang erfolgen. Es kann je nach Zielsetzung auch ausreichen, den zeitlichen Verlauf eines oder mehrerer Merkmale nur in einem bestimmten Zeitfenster des Garvorgangs zu überwachen. The repeating of the recording step and the extraction step can be carried out periodically or at irregularly defined time intervals. The time profile of one or more features can be recorded essentially over the entire cooking process. Depending on the objective, it may also be sufficient to monitor the course of one or more characteristics over time only in a specific time window of the cooking process.

Eine besonders vorteilhafte Ausführung des beanspruchten Verfahrens wird durch die Berechnung von wenigen einfachen Merkmalen erreicht. So werden beispielsweise die Bräunungsinformationen aller Pixel zu einem einzigen berechneten Wert zusammengefasst. Das Abspeichern und Verrechnen dieser Merkmalswerte benötigt somit wenig Rechenleistung, so dass die Rechenleistung üblicher Haushaltsgeräte ausreichend ist, die Operation durchzuführen. Eine Vernetzung des Geräts und Berechnung auf externen Servern (Cloud) ist somit nicht notwendig, wodurch die notwendige Zeit für die Datenübertragung gespart wird und die Privatsphäre der Nutzer geschützt bleibt, da keine Daten übermittelt oder vom Gargerät auf externe Server kopiert werden müssen. Vorteilhaft ist außerdem, dass diese einfache Rechenvorschrift eine Wiederholung der Merkmalsextration und -Verrechnung in kurzen Zeitabständen ermöglicht, was die Genauigkeit des Verfahrens verbessert. So ist der zeitliche Fehler, der bei der Bestimmung des optimalen Entnahmezeitpunkts durch eine Live-Auswertung geringer, je mehr Bilder pro Zeiteinheit aufgenommen und verrechnet werden können. A particularly advantageous embodiment of the claimed method is achieved by calculating a few simple features. For example, the tanning information from all pixels is combined into a single calculated value. The storage and calculation of these feature values therefore requires little computing power, so that the computing power of standard household appliances is sufficient to carry out the operation. Networking of the device and calculation on external servers (cloud) is therefore not necessary, which saves the time required for data transmission and protects the privacy of the user, since no data has to be transmitted or copied from the cooking device to external servers. It is also advantageous that this simple calculation rule allows the feature extraction and calculation to be repeated at short time intervals, which improves the accuracy of the method. The time error that occurs when determining the optimum time for removal by means of a live evaluation is lower the more images can be recorded and calculated per unit of time.

Das Steuern der Behandlungseinrichtung erfolgt in Abhängigkeit des Vorliegens einer Verlaufscharakteristik. Beispielsweise kann das Vorliegen einer bestimmten Verlaufscharakteristik zu einem bestimmten Zeitpunkt auf einen bestimmten Garzustand des Garguts zu diesem Zeitpunkt hinweisen. So kann beispielsweise für ein bestimmtes Gargut das Auftreten eines Wendepunktes oder Minimums im Verlauf eines oder mehrerer Merkmale einen fortgeschrittenen Garzustand indizieren, aus dem die Restdauer der Gargutbehandlung ermittelt werden kann, so dass das Steuern (hier z.B. ein Abschalten) der Behandlungseinrichtung erst mit Ablauf der Restdauer erfolgt. Wenn beispielsweise das Vorliegen einer bestimmten Verlaufscharakteristik unmittelbar den Fertigzeitpunkt des Garguts anzeigt, kann das Steuern der Behandlungseinrichtung mit Auftreten dieser Verlaufscharakteristik erfolgen. The treatment device is controlled depending on the presence of a course characteristic. For example, the presence of a specific progression characteristic at a specific point in time can indicate a specific cooking state of the item to be cooked at this point in time. For example, for a specific item to be cooked, the occurrence of a turning point or minimum in the course of one or more characteristics can indicate an advanced state of cooking, from which the remaining duration of the treatment of the item to be cooked can be determined, so that the control (here e.g. a switch-off) of the treatment device only occurs once the remaining duration. If, for example, the presence of a specific progression characteristic directly indicates the point at which the item to be cooked is ready, the treatment device can be controlled when this progression characteristic occurs.

Das Steuern der Behandlungseinrichtung kann unter anderem Folgendes umfassen: An- bzw. Ausschalten der Behandlungseinrichtung, Einstellen der Betriebsart, Einstellen der Garraumtemperatur, Einstellen der Heizleistung zumindest einer Heizquelle, Einstellen der Leistung zumindest eines Hochfrequenzerzeugers, Einstellen der Drehzahl des zumindest einen Umlüfters, Einstellen der Garraumfeuchte, Starten/Anhalten/Beenden einer Garraumdurchspülung, Einstellen der Restdauer der Gargutbehandlung, Starten/Anhalten/Beenden/Modifi- zieren eines bestimmten Behandlungsprogramms oder eines Teils davon. Controlling the treatment device can include the following: switching the treatment device on and off, setting the operating mode, setting the cooking chamber temperature, setting the heating power of at least one heating source, setting the power of at least one high-frequency generator, setting the speed of the at least one circulating fan, setting the Cooking cabinet humidity, starting/stopping/ending a cooking cabinet rinsing, setting the remaining duration of the food treatment, starting/stopping/ending/modifying a certain treatment program or part of it.

In einer vorteilhaften Ausgestaltung der Erfindung ist die Verlaufscharakteristik ein Minimum, ein Maximum, ein Wendepunkt, ein Sattelpunkt, ein Flachpunkt und/oder ein anderer charakteristischer Datenpunkt des Verlaufs eines oder mehrerer Merkmale. Das Vorhandensein eines derartigen charakteristischen Datenpunkts steht in einem engen Zusammenhang mit dem Garzustand des Garguts und kann somit besonders vorteilhaft zur Bestimmung des Garzustands herangezogen werden. Beispielsweise kann das Vorliegen eines Extrempunkts auf einen bestimmten Garzustand hinweisen, z.B. dass das Gargut fertig gegart ist. Überdies können derartige charakteristische Datenpunkte mit einfachen technischen Mitteln besonders zuverlässig erfasst und charakterisiert werden. In an advantageous embodiment of the invention, the profile characteristic is a minimum, a maximum, an inflection point, a saddle point, a flat point and/or another characteristic data point of the profile of one or more features. The presence of such a characteristic data point is closely related to the cooking state of the food and can therefore be used particularly advantageously to determine the cooking state. For example, the presence of an extreme point can indicate a specific cooking state, e.g. that the food is cooked through. In addition, such characteristic data points can be recorded and characterized in a particularly reliable manner using simple technical means.

In einer weiteren vorteilhaften Ausgestaltung der Erfindung wird aus dem zeitlichen Verlauf eines oder mehrerer Merkmale zumindest ein zeitabhängiger Hilfsverlauf errechnet, wobei ein Kriterium für das Vorliegen der Verlaufscharakteristik ist, dass der Hilfsverlauf einen bestimmten Wert annimmt und/oder einen Schwellenwert überschreitet. Dadurch können notwendige Bedingungen für das Vorliegen einer bestimmten Verlaufscharakteristik definiert werden, die mit einem geringen technischen Aufwand erkannt und ausgewertet werden können. Bevorzugt beschreibt der Hilfsverlauf zumindest eine geometrische Eigenschaft des zeitlichen Verlaufs eines oder mehrerer Merkmale, wie z.B. dessen Steigung und/oder dessen Krümmung. Durch Informationen zu derartigen geometrischen Eigenschaften können Verlaufscharakteristika besonders zuverlässig erkannt werden. Beispielsweise ist eine notwendige Bedingung für das Vorliegen eines Minimums, dass die Krümmung des Verlaufs eines oder mehrerer Merkmale zu diesem Zeitpunkt positiv ist, d.h. den Schwellenwert "0" überschreitet. Vorzugsweise umfasst das Errechnen des Hilfsverlaufs das Bilden der 1. Ableitung und/oder der 2. Ableitung des zeitlichen Verlaufs eines oder mehrerer Merkmale. Insbesondere kann das Errechnen des Hilfsverlaufs die numerische Differentiation des zeitlichen Verlaufs eines oder mehrerer Merkmale umfassen. In a further advantageous embodiment of the invention, at least one time-dependent auxiliary curve is calculated from the time curve of one or more features, one criterion for the presence of the curve characteristic being that the auxiliary curve assumes a specific value and/or exceeds a threshold value. In this way, the necessary conditions for the existence of a specific progression characteristic can be defined, which can be recognized and evaluated with little technical effort. The auxiliary curve preferably describes at least one geometric property of the time curve of one or more features, such as its gradient and/or its curvature. Information about such geometric properties can be used to identify course characteristics in a particularly reliable manner. For example, a necessary condition for the existence of a minimum is that the curvature of the profile of one or more features is positive at this point in time, ie exceeds the threshold "0". The calculation of the auxiliary curve preferably includes the formation of the 1st derivation and/or the 2nd derivation of the time curve of one or more features. In particular, the calculation of the auxiliary curve can include the numerical differentiation of the time curve of one or more features.

Mit Vorteil wird der zeitliche Verlauf eines oder mehrerer Merkmale einer Glättung unterzogen, z.B. durch Bildung eines gleitenden Durchschnitts oder mittels Ausgleichsrechnung. Dadurch werden etwaige starke Schwankungen und/oder Ausreißer verringert, wodurch auftretende Verlaufscharakteristika besser erkannt werden können. Advantageously, the course of one or more characteristics over time is subjected to smoothing, e.g. by forming a moving average or by means of a compensation calculation. As a result, any strong fluctuations and/or outliers are reduced, as a result of which course characteristics that occur can be better recognized.

In einer weiteren vorteilhaften Ausgestaltung der Erfindung wird ein erster Hilfsverlauf errechnet, der eine geometrische Eigenschaft des Verlaufs eines oder mehrerer Merkmale beschreibt, und ein zweiter Hilfsverlauf errechnet wird, der die gleiche geometrische Eigenschaft des Verlaufs eines oder mehrerer Merkmale beschreibt, wobei der erste Hilfsverlauf und der zweite Hilfsverlauf jeweils unterschiedliche Grade der Glättung aufweisen. Beispielsweise wird der erste Hilfsverlauf einer Glättung unterzogen, z.B. durch Bildung eines gleitenden Durchschnitts oder mittels Ausgleichsrechnung, und der zweite Hilfsverlauf wird keiner Glättung unterzogen. Es hat sich überraschenderweise herausgestellt, dass das Vorliegen einer bestimmten Verlaufscharakteristik besonders zuverlässig erkannt werden kann, wenn sowohl der geglättete erste Hilfsverlauf als auch der ungeglättete oder weniger geglättete zweite Hilfsverlauf gemeinsam das Vorliegen der bestimmten Verlaufscharakteristik indizieren. In a further advantageous embodiment of the invention, a first auxiliary curve is calculated, which describes a geometric property of the curve of one or more features, and a second auxiliary curve is calculated, which describes the same geometric property of the curve of one or more features, with the first auxiliary curve and the second auxiliary course each have different degrees of smoothing. For example, the first auxiliary curve is subjected to smoothing, e.g. by forming a moving average or by means of a balancing calculation, and the second auxiliary curve is not subjected to smoothing. Surprisingly, it has been found that the presence of a specific progression characteristic can be detected particularly reliably if both the smoothed first auxiliary progression and the unsmoothed or less smoothed second auxiliary progression together indicate the presence of the specific progression characteristic.

In einer weiteren vorteilhaften Ausgestaltung der Erfindung umfasst der Extraktionsschritt ein Zusammenfassen der Farbraumwerte einzelner Pixel zu einem Tendenzwert, insbesondere zu einem Mittelwert, aus dem sich das Merkmal des Bildes ergibt. Vorzugsweise werden die Farbraumwerte der auszuwertenden Pixel des Bildes einzeln zu einem Farbraumwert-Tendenzwert, insbesondere zu einem Farbraumwert-Mittelwert, zusammengefasst und aus den Farbraum-Tendenzwerten das Merkmal des Bildes errechnet. Alternativ können zunächst auf Ebene der Pixel einzelne Merkmale der Pixel aus den jeweiligen Farbraumwerten gebildet werden und anschließend die einzelnen Merkmale der Pixel zum Merkmal des Bildes zusam- mengefasst werden. Auf diese Weise kann man die Informationen eines Bildes zu einem einzigen Wert zusammenfassen, wodurch die Auswertung erheblich erleichtert und insbesondere auch beim Aufzeichnen eines hochaufgelösten zeitlichen Verlaufs eines oder mehrerer Merkmale nur wenig Speicherplatz verbraucht wird. In a further advantageous embodiment of the invention, the extraction step includes a combination of the color space values of individual pixels to form a trend value, in particular a mean value, from which the feature of the image results. The color space values of the pixels of the image to be evaluated are preferably combined individually to form a color space value trend value, in particular a color space value mean value, and the feature of the image is calculated from the color space trend values. Alternatively, individual features of the pixels can first be formed at the level of the pixels from the respective color space values and then the individual features of the pixels can be combined to form the feature of the image. be quantified. In this way, the information of an image can be combined into a single value, which makes the evaluation considerably easier and, in particular, when recording a high-resolution time profile of one or more features, only a small amount of storage space is used.

In einer weiteren vorteilhaften Ausgestaltung der Erfindung wird die zumindest eine Verlaufscharakteristik, auf deren Vorliegen hin der Verlauf eines oder mehrerer Merkmale überwacht werden soll, in Abhängigkeit des zu garenden Garguts voreingestellt. Auf diese Weise kann die Eigenschaft des Garguts besonders präzise ermittelt werden. Vorzugsweise kann für ein bestimmtes Gargut empirisch ermittelt werden, welche Verlaufscharakteristik oder welche Kombination von Verlaufscharakteristiken sich zur Ermittlung welcher Eigenschaft des Garguts eignen und insbesondere welcher Zusammenhang zwischen dem Auftreten der Verlaufscharakteristik und der Eigenschaft des Garguts besteht. Diese Informationen können werksseitig in dem Gargerät hinterlegt werden. In a further advantageous embodiment of the invention, the at least one progression characteristic, for the presence of which the progression of one or more features is to be monitored, is preset as a function of the food to be cooked. In this way, the property of the food to be cooked can be determined particularly precisely. It can preferably be determined empirically for a specific cooking item which progression characteristic or which combination of progression characteristics are suitable for determining which property of the cooking item and in particular what relationship there is between the occurrence of the progression characteristic and the property of the cooking item. This information can be stored in the cooking appliance at the factory.

In einer weiteren vorteilhaften Ausgestaltung der Erfindung erfolgt das Steuern des Betriebsvorgangs des Gargerätes erst, wenn die bestimmte Verlaufscharakteristik zu einem Zeitpunkt vorliegt, der nach einer vom Beginn des Garvorgangs an laufenden Mindestgarzeit liegt. Insbesondere in Anwendungsbereichen, in denen als Eigenschaft des Garguts ein fortgeschrittener Garzustand oder der Fertigzeitpunkt ermittelt werden soll, kann die Überwachung aus Gründen der Effizienz auf ein Zeitfenster beschränkt werden, in denen auch der Garprozess bereits fortgeschritten ist. Dies erhöht zudem die Zuverlässigkeit des Verfahrens, da etwaige vor Ende der Mindestgarzeit auftretende Verlaufscharakteristika nicht ausgewertet werden, die unter Umständen zu Fehlinterpretationen führen könnten. Um das Verfahren für unterschiedliche Gargüter weiter zu verbessern, wird vorzugsweise die Mindestgarzeit in Abhängigkeit des zu garenden Garguts eingestellt. Bevorzugt wird die optimale Mindestgarzeit für ein bestimmtes Gargut empirisch ermittelt und insbesondere werksseitig in dem Gargerät hinterlegt. In a further advantageous embodiment of the invention, the operating process of the cooking appliance is only controlled when the specific course characteristic is present at a point in time which is after a minimum cooking time running from the start of the cooking process. In particular in areas of application in which an advanced state of cooking or the time of completion is to be determined as a property of the food to be cooked, for reasons of efficiency the monitoring can be limited to a time window in which the cooking process has already progressed. This also increases the reliability of the method, since any course characteristics that occur before the end of the minimum cooking time, which could possibly lead to misinterpretations, are not evaluated. In order to further improve the method for different items to be cooked, the minimum cooking time is preferably set as a function of the item to be cooked. The optimum minimum cooking time for a specific item to be cooked is preferably determined empirically and, in particular, stored in the cooking appliance at the factory.

Das erfindungsgemäße Gargerät umfasst einen Garraum zur Aufnahme eines Garguts, eine Behandlungseinrichtung zur Behandlung des Garguts, eine Steuereinrichtung zur Steuerung der Behandlungseinrichtung in Abhängigkeit eines Behandlungsprogramms, eine Bildaufnahmeeinrichtung zur Aufnahme zumindest eines Bildes des Garguts sowie eine Auswerteeinrichtung, die dazu geeignet und ausgebildet ist, ein sich aus zumindest einem Farbraumwert wenigstens eines Pixels des Bildes ergebendes Merkmal des Bildes zu extrahieren. Das erfindungsgemäße Gargerät zeichnet sich dadurch aus, dass es dazu geeignet und ausgebildet ist, das Verfahren nach einem der Ansprüche 1 bis 9 durchzuführen. Beispielsweise ist das Gargerät mittels der der Steuereinrichtung zur Durchführung eines Verfahrens nach einem der Ansprüche 1 bis 9 konfiguriert. Es wird ausdrücklich darauf hingewiesen, dass die vorstehend erläuterten Ausgestaltungen der Erfindung jeweils für sich oder in einer beliebigen technisch sinnvollen Kombination auch untereinander jeweils mit dem Gegenstand eines der unabhängigen Ansprüche kombinierbar sind. The cooking appliance according to the invention comprises a cooking chamber for accommodating an item to be cooked, a treatment device for treating the item to be cooked, a control device for controlling the treatment device as a function of a treatment program, an image recording device for recording at least one image of the item to be cooked, and an evaluation device that is suitable and designed for this purpose extract a feature of the image resulting from at least one color space value of at least one pixel of the image. The cooking appliance according to the invention is characterized in that it is suitable and designed to carry out the method according to one of claims 1 to 9. For example, the cooking appliance is configured by means of the control device to carry out a method according to one of claims 1 to 9. It is expressly pointed out that the configurations of the invention explained above can each be combined with the subject matter of one of the independent claims either individually or in any technically meaningful combination.

Abwandlungen und Ausgestaltungen der Erfindung sowie weitere Vorteile und Einzelheiten der Erfindung lassen sich der nachfolgenden gegenständlichen Beschreibung und den Zeichnungen entnehmen. In den schematischen Figuren zeigen: Modifications and configurations of the invention as well as further advantages and details of the invention can be found in the following specific description and the drawings. In the schematic figures show:

Fig. 1 ein erfindungsgemäßes Gargerät, 1 shows a cooking appliance according to the invention,

Fig. 2 einen zeitlichen Verlauf eines Merkmals in einem Ausführungsbeispiel der Erfindung. 2 shows a characteristic over time in an exemplary embodiment of the invention.

Einzelne technische Merkmale der nachbeschriebenen Ausführungsbeispiele können auch in Kombination mit vorbeschriebenen Ausführungsbeispielen sowie den Merkmalen der unabhängigen Ansprüche und etwaiger weiterer Ansprüche zu erfindungsgemäßen Gegenständen kombiniert werden. Individual technical features of the exemplary embodiments described below can also be combined with the exemplary embodiments described above and the features of the independent claims and any further claims to form objects according to the invention.

Fig. 1 zeigt ein erfindungsgemäßes Gargerät 2 mit einem Garraum 4 zur Aufnahme eines Garguts 6. Das Gargerät 2 umfasst eine Behandlungseinrichtung zur Behandlung des Garguts 6, die in dieser Ausführungsform als Heizquellen einen Oberhitze-Heizkörper 8, einen Unterhitze-Heizkörper 10 unterhalb des Garraumbodens sowie einen mit einer Ringheizung ausgestatteten Umlüfter 12 aufweist. Eine Steuereinrichtung 14 dient unter anderem zur Steuerung der Behandlungseinrichtung in Abhängigkeit eines Behandlungsprogramms. Das Gargerät 2 ist ferner mit einer Bildaufnahmeeinrichtung 16 in Form einer Kamera ausgestattet, die außerhalb einer Isolierung des Garraums 4 angeordnet ist und durch ein transparentes Fenster Bilder des Garguts 6 aufnehmen kann. In dieser Ausführungsform dient die Steuereinrichtung 14 zudem als Auswerteeinrichtung, die konfiguriert ist, ein sich aus zumindest einem Farbraumwert wenigstens eines Pixels eines von der Bildaufnahmeeinrichtung 16 aufgenommenen Bildes ergebendes Merkmal des Bildes zu extrahieren. Durch wiederholtes Aufnehmen eines Bildes und der Extraktion eines Merkmals des Bildes über eine gewisse Zeitspanne während eines Garvorgangs wird ein zeitlicher Verlauf 20 eines oder mehrerer Merkmale aufgezeichnet. Der zeitliche Verlauf eines oder mehrerer Merkmale wird auf das Vorliegen einer Verlaufscharakteristik 22 hin überwacht. In Abhängigkeit des Vorliegens einer Verlaufscharakteristik 22 wird die Behandlungseinrichtung gesteuert. Selbstverständlich wird der Garvorgang bei geschlossener Garraumtür durchgeführt. Fig. 1 shows a cooking appliance 2 according to the invention with a cooking chamber 4 for accommodating an item to be cooked 6. The cooking appliance 2 comprises a treatment device for treating the item to be cooked 6, which in this embodiment has an upper heating element 8 and a lower heating element 10 below the cooking chamber floor as heat sources and a circulating fan 12 equipped with a ring heater. A control device 14 serves, among other things, to control the treatment device as a function of a treatment program. The cooking appliance 2 is also equipped with an image recording device 16 in the form of a camera, which is arranged outside an insulation of the cooking chamber 4 and can record images of the item 6 to be cooked through a transparent window. In this embodiment, the control device 14 also serves as an evaluation device that is configured to extract a feature of the image resulting from at least one color space value of at least one pixel of an image recorded by the image recording device 16 . A time profile 20 of one or more features is recorded by repeatedly recording an image and extracting a feature of the image over a certain period of time during a cooking process. The time profile of one or more features is monitored for the presence of a profile characteristic 22 . The treatment device is controlled as a function of the presence of a course characteristic 22 . Of course, the cooking process is carried out with the cooking chamber door closed.

Fig. 2 zeigt im Diagramm a) einen zeitlichen Verlauf 20 eines Merkmals eines während eines ca. 35-minütigen Garvorgangs periodisch aufgenommenen Bildes eines Garguts 6. Das Merkmal ergibt sich dabei aus einem über alle Pixel des Bildes gemittelten Farbraumwert der Pixel. Ferner sind in den Diagrammen b) und c) aus dem zeitlichen Verlauf 20 eines oder mehrerer Merkmale errechnete Hilfsverläufe 30, 40, 50 dargestellt. Der im Diagramm b) dargestellte erste Hilfsverlauf 30 beschreibt die Steigung des zeitlichen Verlaufs 20 eines oder mehrerer Merkmale. Im Diagramm c) sind ein zweiter Hilfsverlauf 40 und ein dritter Hilfsverlauf 50 dargestellt, die beide die Krümmung des Verlaufs 20 eines oder mehrerer Merkmale beschreiben. Anhand der Hilfsverläufe 30, 40, 50 lassen sich mit einem geringen technischen Aufwand bestimmte Verlaufscharakteristika ermitteln, nämlich indem die Hilfsverläufe 30, 40, 50 auf das Einnehmen bestimmter Werte und/oder das Überschreiten bestimmter Schwellenwerte hin überwacht werden. Auf sämtlichen Abszissen ist die vergangene Zeit in Minuten aufgetragen. 2 shows in diagram a) a time profile 20 of a feature of an image of an item to be cooked 6 recorded periodically during a cooking process lasting approximately 35 minutes Feature results from a color space value of the pixels averaged over all pixels of the image. Diagrams b) and c) also show auxiliary curves 30, 40, 50 calculated from the time curve 20 of one or more characteristics. The first auxiliary profile 30 shown in diagram b) describes the slope of the time profile 20 of one or more features. Diagram c) shows a second auxiliary curve 40 and a third auxiliary curve 50, both of which describe the curvature of the curve 20 of one or more features. Using the auxiliary curves 30, 40, 50, certain curve characteristics can be determined with little technical effort, specifically by the auxiliary curves 30, 40, 50 being monitored for certain values and/or exceeding certain threshold values. The elapsed time in minutes is plotted on all abscissas.

Im Diagramm a) ist zusätzlich ein geglätteter Verlauf 20' eines oder mehrerer Merkmale dargestellt, der durch Bildung eines gleitenden Durchschnitts errechnet wurde und aus dem auftretende Verlaufscharakteristika besser erkannt werden können. Diagram a) also shows a smoothed profile 20' of one or more features, which was calculated by forming a moving average and from which the profile characteristics that occur can be better recognized.

Im vorliegenden Fall ist die Verlaufscharakteristik 22, auf dessen Vorliegen der Verlauf 20 eines oder mehrerer Merkmale hin untersucht werden soll, ein Minimum. Bedingungen für das Vorliegen eines Minimums sind, dass der erste Hilfsverlauf 30 zu diesem Zeitpunkt einen Nulldurchgang aufweist und dass der zweite Hilfsverlauf 40 und/oder der dritte Hilfsverlauf 50 einen positiven Wert einnehmen bzw. den Schwellenwert "0" überschreiten. Dies ist nach etwa 21 Minuten Garzeit der Fall (dargestellt im Diagramm a) durch vertikale gestrichelte Linie). In the present case, the progression characteristic 22, for the presence of which the progression 20 of one or more features is to be examined, is a minimum. Conditions for the presence of a minimum are that the first auxiliary curve 30 has a zero crossing at this point in time and that the second auxiliary curve 40 and/or the third auxiliary curve 50 assume a positive value or exceed the threshold value "0". This is the case after about 21 minutes of cooking time (represented in diagram a) by the vertical dashed line).

Es hat sich überraschenderweise herausgestellt, dass das Vorliegen einer Verlaufscharakteristik 22 zuverlässiger vorhergesagt werden kann, wenn zumindest zwei Hilfsverläufe 40, 50 ausgewertet werden, die die gleiche geometrische Eigenschaft des zeitlichen Verlaufs 20 eines oder mehrerer Merkmale beschreiben (hier: Krümmung), die sich jedoch in ihrem Grad der Glättung unterscheiden. Im vorliegenden Ausführungsbeispiel ist der zweite Hilfsverlauf 40 im Wesentlichen ungeglättet, während der der dritte Hilfsverlauf 50 einer Glättung durch Bildung eines gleitenden Durchschnitts unterzogen wurde. It has surprisingly turned out that the presence of a curve characteristic 22 can be predicted more reliably if at least two auxiliary curves 40, 50 are evaluated, which describe the same geometric property of the curve over time 20 of one or more features (here: curvature), but which differ in their degree of smoothing. In the present exemplary embodiment, the second auxiliary curve 40 is essentially unsmoothed, while the third auxiliary curve 50 was subjected to smoothing by forming a moving average.

Für das hierbei verwendete Gargut 6, einer Tiefkühlpizza, indiziert das Vorliegen bzw. Auftreten der Verlaufscharakteristik 22 den fertigen Garzustand, fällt also zeitlich mit dem Fertigzeitpunkt zusammen. Für diese Art von Gargut 6 ist eine Mindestgarzeit von 10 min vorgesehen, die in den Diagrammen a) bis c) durch gepunktete vertikale Linien markiert wird. Die Steuereinheit 14 des Gargeräts 2 reagiert hierbei auf das Vorliegen der Verlaufscharakteristik 22 erst nach der Mindestgarzeit, was im vorliegenden Fall den Vorteil hat, dass das kurz vor Minute 5 auftretende Minimum nicht berücksichtigt wird. Durch das Einstellen der beispiels- weise empirisch ermittelten Mindestgarzeit wird somit eine Plausibilitätsprüfung implementiert, die eine Fehlinterpretation des zeitlichen Verlaufs 20 eines oder mehrerer Merkmale verhindert. For the cooking product 6 used here, a frozen pizza, the presence or occurrence of the progression characteristic 22 indicates the finished cooking state, ie it coincides with the finished time. A minimum cooking time of 10 minutes is provided for this type of food 6, which is marked by dotted vertical lines in diagrams a) to c). The control unit 14 of the cooking appliance 2 only reacts to the presence of the progression characteristic 22 after the minimum cooking time, which in the present case has the advantage that the minimum occurring shortly before 5 minutes is not taken into account. By setting the example As empirically determined minimum cooking time, a plausibility check is implemented that prevents a misinterpretation of the time profile 20 of one or more features.

Claims

Patentansprüche patent claims

1. Verfahren zum Betreiben eines Gargerätes (2) mit einem Garraum (4) zur Aufnahme eines Garguts (6), einer Behandlungseinrichtung zur Behandlung des Garguts (6) und mit einer Steuereinrichtung (14) zur Steuerung der Behandlungseinrichtung in Abhängigkeit eines Behandlungsprogramms, wobei in einem Aufnahmeschritt ein Bild des Garguts (6) mittels einer Bildaufnahmeeinrichtung (16) aufgenommen wird und in einem Extraktionsschritt mindestens ein sich aus zumindest einem Farbraumwert wenigstens eines Pixels des Bildes ergebendes Merkmal des Bildes mittels einer Auswerteeinrichtung extrahiert wird, dadurch gekennzeichnet, dass durch Wiederholen des Aufnahmeschritts und des Extraktionsschritts über eine gewisse Zeitspanne ein zeitlicher Verlauf (20, 20') des mindestens eines Merkmals aufgezeichnet wird, der zeitliche Verlauf (20, 20') des mindestens eines Merkmals auf das Vorliegen einer Verlaufscharakteristik (22) hin überwacht wird und die Behandlungseinrichtung in Abhängigkeit des Vorliegens einer Verlaufscharakteristik (22) gesteuert wird. 1. A method for operating a cooking device (2) with a cooking chamber (4) for receiving an item to be cooked (6), a treatment device for treating the item to be cooked (6) and with a control device (14) for controlling the treatment device depending on a treatment program, wherein in a recording step, an image of the item to be cooked (6) is recorded by means of an image recording device (16) and in an extraction step, at least one feature of the image resulting from at least one color space value of at least one pixel of the image is extracted by means of an evaluation device, characterized in that by repeating the recording step and the extraction step over a certain period of time a time profile (20, 20') of the at least one feature is recorded, the time profile (20, 20') of the at least one feature is monitored for the presence of a profile characteristic (22) and the treatment facility depending on the present ens a course characteristic (22) is controlled.

2. Verfahren nach Anspruch 1 , dadurch gekennzeichnet, dass die Extraktion des mindestens eines Merkmals des mindestens eines Pixels in einem Farbraum erfolgt, in dem die Helligkeit und die Farbigkeit getrennt sind, insbesondere in einen LAB- oder YUV-Far- braum. 2. The method as claimed in claim 1, characterized in that the extraction of the at least one feature of the at least one pixel takes place in a color space in which the brightness and the color are separated, in particular in a LAB or YUV color space.

3. Verfahren nach Anspruch 1 , dadurch gekennzeichnet, dass die Verlaufscharakteristik (22) ein Minimum, ein Maximum, ein Wendepunkt, ein Sattelpunkt, ein Flachpunkt und/oder ein anderer charakteristischer Datenpunkt des Verlaufs (20, 20') des mindestens eines Merkmals ist. 3. The method according to claim 1, characterized in that the profile characteristic (22) is a minimum, a maximum, an inflection point, a saddle point, a flat point and/or another characteristic data point of the profile (20, 20') of the at least one feature .

4. Verfahren nach Anspruch 1 oder 2, dadurch gekennzeichnet, dass aus dem zeitlichen Verlauf (20, 20') des mindestens eines Merkmals zumindest ein zeitabhängiger Hilfsverlauf (30, 40, 50) errechnet wird, wobei ein Kriterium für das Vorliegen der Verlaufscharakteristik (22) ist, dass der Hilfsverlauf einen bestimmten Wert annimmt und/oder einen Schwellenwert überschreitet. 4. The method according to claim 1 or 2, characterized in that at least one time-dependent auxiliary curve (30, 40, 50) is calculated from the time curve (20, 20') of the at least one feature, a criterion for the presence of the curve characteristic ( 22) is that the auxiliary history assumes a certain value and/or exceeds a threshold value.

5. Verfahren nach Anspruch 3, dadurch gekennzeichnet, dass das Errechnen des Hilfsverlaufs (30, 40, 50) das Bilden der 1 . Ableitung und/oder der 2. Ableitung des zeitlichen Verlaufs (20, 20') des mindestens eines Merkmals umfasst. 5. The method according to claim 3, characterized in that the calculation of the auxiliary curve (30, 40, 50) includes the formation of the 1st Derivation and / or the 2nd derivative of the time course (20, 20 ') of the at least one feature.

6. Verfahren nach einem der Ansprüche 3 oder 4, dadurch gekennzeichnet, dass ein erster Hilfsverlauf (40) errechnet wird, der eine geometrische Eigenschaft des Verlaufs (20, 20') des mindestens eines Merkmals beschreibt, und ein zweiter Hilfsverlauf (50) errechnet wird, der die gleiche geometrische Eigenschaft des Verlaufs (20, 20') des mindestens eines Merkmals beschreibt, wobei der erste Hilfsverlauf (40) und der zweite Hilfsverlauf (50) jeweils unterschiedliche Grade der Glättung aufweisen. Verfahren nach einem der vorstehenden Ansprüche, dadurch gekennzeichnet, dass der Extraktionsschritt ein Zusammenfassen der Farbraumwerte einzelner Pixel zu einem Tendenzwert, insbesondere zu einem Mittelwert, umfasst, aus dem sich das Merkmal des Bildes ergibt. Verfahren nach einem der vorstehenden Ansprüche, dadurch gekennzeichnet, dass die Verlaufscharakteristik (22), auf deren Vorliegen hin der Verlauf (20, 20') des mindestens eines Merkmals überwacht werden soll, in Abhängigkeit des zu garenden Garguts (6) voreingestellt wird. Verfahren nach einem der vorstehenden Ansprüche, dadurch gekennzeichnet, dass das Steuern der Behandlungseinrichtung erst erfolgt, wenn die bestimmte Verlaufscharakteristik (22) zu einem Zeitpunkt vorliegt, der nach einer vom Beginn des Garvorgangs an laufenden Mindestgarzeit liegt. Verfahren nach Anspruch 8, dadurch gekennzeichnet, dass die Mindestgarzeit in Abhängigkeit des zu garenden Garguts (6) eingestellt wird. Gargerät (2) mit einem Garraum (4) zur Aufnahme eines Garguts (6), einer Behandlungseinrichtung zur Behandlung des Garguts (6), einer Steuereinrichtung (14) zur Steuerung der Behandlungseinrichtung in Abhängigkeit eines Behandlungsprogramms, einer Bildaufnahmeeinrichtung (16) zur Aufnahme zumindest eines Bildes des Garguts (6) sowie einer Auswerteeinrichtung, die dazu geeignet und ausgebildet ist, ein sich aus zumindest einem Farbraumwert wenigstens eines Pixels des Bildes ergebendes Merkmal des Bildes zu extrahieren, dadurch gekennzeichnet, dass das Gargerät (2) dazu geeignet und ausgebildet ist, das Verfahren nach einem der Ansprüche 1 bis 10 durchzuführen. 6. The method according to claim 3 or 4, characterized in that a first auxiliary curve (40) is calculated, which describes a geometric property of the curve (20, 20') of the at least one feature, and a second auxiliary curve (50) is calculated which describes the same geometric property of the profile (20, 20') of the at least one feature, the first auxiliary profile (40) and the second auxiliary profile (50) each having different degrees of smoothing. Method according to one of the preceding claims, characterized in that the extraction step comprises a combination of the color space values of individual pixels to form a trend value, in particular a mean value, from which the feature of the image results. Method according to one of the preceding claims, characterized in that the progression characteristic (22) for the presence of which the progression (20, 20') of the at least one feature is to be monitored is preset as a function of the food (6) to be cooked. Method according to one of the preceding claims, characterized in that the treatment device is only controlled if the specific course characteristic (22) is present at a point in time which is after a minimum cooking time running from the start of the cooking process. Method according to Claim 8, characterized in that the minimum cooking time is set as a function of the food (6) to be cooked. Cooking appliance (2) with a cooking chamber (4) for receiving an item to be cooked (6), a treatment device for treating the item to be cooked (6), a control device (14) for controlling the treatment device as a function of a treatment program, an image recording device (16) for recording at least an image of the item to be cooked (6) and an evaluation device which is suitable and designed to extract a feature of the image resulting from at least one color space value of at least one pixel of the image, characterized in that the cooking appliance (2) is suitable and designed for this , to carry out the method according to any one of claims 1 to 10.