Die Erfindung betrifft ein Verfahren zum Betreiben eines Haushalts-Gargeräts mit einem Garraum und mindestens einer Kamera, die zum Aufnehmen von bildpunktbasierten Bil dern aus dem Garraum eingerichtet ist, bei dem mittels der mindestens einen Kamera mindestens ein Bild aus dem Garraum aufgenommen wird und das Bild ausgewertet wird. Die Erfindung betrifft auch ein Haushalts-Gargerät, aufweisend einen Garraum und min destens eine Kamera zum Aufnehmen von bildpunktbasierten Bildern, wobei das Haus- halts-Gargerät zur Durchführung des Verfahrens ausgestaltet ist. Die Erfindung ist insbe sondere vorteilhaft anwendbar auf Backöfen, Mikrowellengeräte, Dampfbehandlungsgerä te oder beliebige Kombinationen davon.

DE 10 2016215 550 A1 offenbart ein Verfahren zum Feststellen eines Bräunungsgrads von Gargut in einem Garraum eines Haushalts-Gargeräts, welches Haushalts-Gargerät eine in den Garraum gerichtete Kamera und eine Lichtquelle zum Beleuchten des Gar raums aufweist, und wobei mittels der Kamera ein Referenzbild aufgenommen wird, ein erstes Messbild bei einer ersten Helligkeit der Lichtquelle aufgenommen wird, ein zweites Messbild bei einer zweiten Helligkeit der Lichtquelle aufgenommen wird, aus dem ersten Messbild und dem zweiten Messbild ein Differenzbild erzeugt wird und das Differenzbild mit dem Referenzbild verglichen wird. Ein Haushalts-Gargerät weist eine in einen Gar raum gerichtete Kamera, eine Lichtquelle zum Beleuchten des Garraums und eine mit der Kamera und der Lichtquelle gekoppelte Steuereinrichtung auf, wobei das Haushalts- Gargerät zum Durchführen des Verfahrens eingerichtet ist.

DE 10 2005 014 713 A1 offenbart s von einer Sensorvorrichtung mit einer Datenverarbei tungseinheit zum Bestimmen eines Bräunungsgrads eines in einem Garraum angeordne ten Garguts und mit wenigstens einem Sensor zum Erfassen einer vom Gargut reflektier ten Strahlungsintensität. Um eine Sensorvorrichtung für Gargeräte bereitzustellen, mittels der ein Bräunungsgrad eines Garguts sicher, zuverlässig und insbesondere unabhängig von einer Größe und Form des Garguts bestimmt werden kann, wird vorgeschlagen, dass die Datenverarbeitungseinheit zum Bestimmen eines Relevanzparameters für eine Kenn- große der erfassten Strahlungsintensität abhängig von dem zeitlichen Verlauf der erfass ten Strahlungsintensität vorgesehen ist.

WO 2014/053002 A2 stellt eine Vorrichtung zur Charakterisierung einer chromatischen Eigenschaft von Lebensmitteln bereit. Die Vorrichtung umfasst eine Lichtquelle, die ange ordnet ist, um Licht mit mindestens zwei Wellenlängen oder Wellenlängenbereichen zu emittieren. Die Lichtquelle ist ferner angeordnet, um das Licht auf eine Oberfläche min destens des Lebensmittels zu lenken. Die Vorrichtung umfasst auch einen Detektor, der positioniert ist, um mindestens einen Teil des reflektierten Lichts zu erfassen, und ange ordnet ist, um eine Ausgabe zu erzeugen, die eine Intensität des erfassten reflektierten Lichts angibt. Die Vorrichtung ist derart angeordnet, dass entsprechende Angaben für die mindestens zwei Wellenlängen oder Wellenlängenbereiche erzeugt werden. Eine Bezie hung zwischen der Angabe für eine der mindestens zwei Wellenlängen oder Wellenlän genbereiche und der Angabe für die andere oder eine andere der mindestens zwei Wel lenlängen oder Wellenlängenbereiche zeigt die chromatische Eigenschaft der Oberfläche des Lebensmittels an.

DE 10 2017206 056 A1 offenbart ein Verfahren zum Betreiben eines Gargeräts, bei dem ein Garraum mit Licht verschiedener Wellenlängenbereiche bestrahlt wird und aus dem Garraum stammendes Licht gemessen wird, wobei Messergebnisse spektroskopisch ausgewertet werden und ein Betrieb des Gargeräts abhängig von einem Ergebnis der spektroskopischen Auswertung geändert wird. Ein Gargerät ist zum Ablauf des Verfah rens eingerichtet und weist auf: einen Garraum, mindestens eine Lichtquelle zum Abstrah len von Licht in den Garraum und mindestens einen Lichtsensor zum Messen von in dem Garraum reflektierten Lichts, wobei das Gargerät ferner aufweist: eine Auswerteeinrich tung zur spektroskopischen Auswertung der von dem mindestens einen Lichtsensor ermit telten Messergebnisse und eine Steuereinrichtung zum Steuern eines Garablaufs abhän gig von einem Ergebnis der Auswertung.

EP 0 682 243 A1 offenbart eine Vorrichtung und ein Verfahren zur Messung des Bräu nungsgrades eines Gargutes, insbesondere eines Backgutes angegeben, mit mindestens einer Strahlungsquelle, die eine Messstrahlung und eine Referenzstrahlung unterschiedli cher Wellenlängenbereiche erzeugt, deren Reflektion und Rückstreuung unterschiedlich vom Bräunungsgrad des Gargutes beeinflusst wird, die beide über eine Optik auf das Gargut abgestrahlt werden, mit einem Messsensor zur Erfassung der vom Gargut emit tierten Strahlung, mit einem Referenzsensor zur Erfassung der Intensitäten der Mess strahlung und der Referenzstrahlung, und mit einer Einrichtung zur Ermittlung des Bräu nungsgrades aus der vom Messsensor detektierten Intensität der Messstrahlung, aus der vom Messsensor detektierten Intensität der Referenzstrahlung, aus der vom Referenz sensor detektierten Intensität der Messstrahlung und aus der vom Referenzsensor detek tierten Intensität der Referenzstrahlung.

JP 61265429 A offenbart ein Verfahren, bei dem eine Oberfläche eines Garguts unter Erhitzen mit zwei Arten von Licht mit jeweils unterschiedlichen Wellenlängen bestrahlt wird und das reflektierte Licht durch ein Photometer erfasst werden. Das Lebensmittel wird durch eine Heizeinrichtung erwärmt und mit Lichtquellen mit unterschiedlichen Emis sionswellenlängen bestrahlt, um die von dem Lebensmittel reflektierten Strahlen mittels des Photometers mit Empfindlichkeiten für diese beiden Emissionswellenlängen zu erfas sen. Die Emissionsstärke der ersten Lichtquelle hat ihr Maximum bei eine Wellenlänge von 300 W, 600 nm, während die Emissionsstärke der zweiten Lichtquelle ihr Maximum bei einer Wellenlänge von 700 W, 1200 nm hat. Der Oberflächenzustand des Garguts kann durch die Lichtstrahlen bestimmt werden. Dementsprechend kann ein Garen, das zu jeder zeit einen guten Endzustand zeigt, durch Voreinstellen des Erfassungspegels von reflektierten Strahlen, die für ein Garmenü geeignet sind, bewirkt werden.

Es ist die Aufgabe der vorliegenden Erfindung, die Nachteile des Standes der Technik zumindest teilweise zu überwinden und insbesondere eine verbesserte Möglichkeit zum Betreiben eines Haushalts-Gargeräts beruhend auf einer Bildauswertung eines Garraum inhalts bereitzustellen.

Diese Aufgabe wird gemäß den Merkmalen der unabhängigen Ansprüche gelöst. Vorteil hafte Ausführungsformen sind Gegenstand der abhängigen Ansprüche, der Beschreibung und der Zeichnungen.

Die Aufgabe wird gelöst durch ein Verfahren zum Betreiben eines Haushalts-Gargeräts mit einem Garraum und mindestens einer Kamera, die zum Aufnehmen von bildpunktba sierten Bildern aus dem Garraum eingerichtet ist, bei dem (a) mittels der mindestens ei- nen Kamera mindestens ein Bild aus dem Garraum aufgenommen wird und (b) das Bild unter Ausschluss der Helligkeitswerte seiner zugehörigen Bildpunkte ausgewertet wird.

Dieses Verfahren ergibt den Vorteil, dass aus dem Garraum aufgenommene Bilddaten weitgehend unabhängig von einer z.B. durch eine Garraumbeleuchtung und/oder einen Einfall von Umgebungslicht erzeugten Helligkeitsverteilung in dem Garraum ausgewertet werden können. In anderen Worten wird mittels des Verfahrens das Problem der typi scherweise inhomogenen Helligkeitsverteilung im Garraum zur Bildauswertung gelöst. Insbesondere ist die Auswertung vorteilhafterweise unabhängig von einer Einschubebene und Garguthöhe. Auch wird der Vorteil einer größeren Robustheit gegenüber lichtquellen bedingten Helligkeitsänderungen erreicht, die sich beispielsweise aufgrund einer Betriebs temperatur, eines Alters der Lichtquelle und/oder aufgrund eines sich verändernden Lichteinfalls durch eine Garraumtür ergeben. Das Verfahren ist zudem vorteilhafterweise weitgehend unabhängig gegenüber konstruktiven Änderungen der Beleuchtungsanord nung wie einer Zahl und/oder Anordnung von Lichtquellen zur Garraumausleuchtung. Darüber hinaus ergibt sich der Vorteil, dass die Bildauswertung einfacher und schneller ausführbar ist, insbesondere durch Reduktion der auszuwertenden Datenmenge.

Das Haushalts-Gargerät kann insbesondere ein Backofen, ein Mikrowellengerät, ein Dampfbehandlungsgerät oder beliebige Kombinationen davon sein, z.B. ein Backofen mit zusätzlicher Mikrowellen- und/oder Dampfbehandlungsfunktion. Der Garraum kann auch als Muffel oder Backrohr bezeichnet werden. Das Haushalts-Gargerät kann einen oder mehrere Garräume aufweisen, z.B. in Form eines Doppelstockofens mit zwei übereinan der angeordneten Garräumen.

Es ist eine Weiterbildung, dass der Garraum mehrere Einschubebenen zur Positionierung von Gargutträgers wie Gitterosten, Backblechen usw. aufweist. Der Garraum weist ein typischerweise eine frontseitig angeordnete Beschickungsöffnung auf, die mittels einer Garraumtür verschließbar ist.

Die mindestens eine Kamera nimmt bildpunktbasierte Bilder auf, wobei jedem Bildpunkt oder Pixel mehrere Farbraumkoordinaten bzw. deren zugehörige Werte zugeordnet sind. Dies kann auch so ausgedrückt werden, dass ein Bild mehrere Farbraumkanäle (im Fol- genden auch einfach als "Kanäle" bezeichnet) aufweist, welche die möglichen Farb- raumkoordinaten bezeichnen.

Es ist eine Weiterbildung, dass die Kamera eine Farbkamera ist. Den Bildpunkten eines aufgenommenen Farbbilds sind dabei mehrere Farben oder Farbraumkanäle zugeordnet, z.B. rot, grün und blau für den Fall eines RGB-Bilds.

Es ist eine Weiterbildung, dass die Kamera eine Schwarzweiß-Kamera ist, die in mög lichst kurzem Abstand eine Serie mit mehreren (1 -Kanal-) Bilder aufnimmt, wobei für die Beleuchtung der einzelnen Bilder unterschiedliche Lichtfarben verwendet werden, z.B. Rotlicht, Grünlicht und Blaulicht. Die einzelnen (1-Kanal-) Bilder der Serie könnten konka- teniert werden und dann als ein Farbbild angesehen werden.

Befindet sich in dem Garraum Gargut, zeigt das mindestens eine aufgenommene Bild typischerweise das Gargut (z.B. ein oder mehrere verteilte angeordnete Speisen) sowie häufig auch Bereiche des Garraums wie eine Garraumwandung. Zur Auswertung kann in einer Weiterbildung derjenige Bildbereich, der kein Gargut zeigt, unberücksichtigt bleiben. Dazu kann z.B. eine Objekterkennung auf Gargut durchgeführt werden. Die Identifizierung von Bildbereichen, die Gargut enthalten, und Bildbereichen, die kein Gargut, sondern z.B. eine Garraumwandung zeigen, ist grundsätzlich bekannt und wird deshalb hier nicht wei ter vertieft.

Die mindestens eine Garraumkamera ist in einer Weiterbildung in einer oberen Hälfte des Garraums angeordnet, um das Gargut besonders vollflächig aufnehmen zu können. Ins besondere kann die mindestens eine Garraumkamera im Bereich einer Decke, einer lin ken Seitenwand, einer rechten Seitenwand, einer Rückwand und/oder der Garraumtür angeordnet sein. Beispielhaft kann eine Garraumkamera im Bereich der Decke des Gar raums und eine weitere Garraumkamera im oberen Drittel oder Viertel der linken Seiten wand oder der rechten Seitenwand angeordnet sein.

Es ist eine Weiterbildung, dass das Haushalts-Gargerät mindestens eine Beleuchtungs einrichtung, z.B. umfassend ein oder mehrere Lichtquellen, insbesondere Lichtstrahler, zur Beleuchtung des Garraums aufweist. Die Lichtquellen können grundsätzlich beliebig in Bezug auf den Garraum angeordnet sein, z.B. in einer Decke, in einer oberen Hälfte seitlicher Garraumwandungen (linke Seitenwand, rechte Seitenwand, Rückwand), in der Garraumtür usw. Insbesondere kann mindestens eine Lichtquelle in der Nähe einer Ka mera angeordnet sein.

Die Bildauswertung, z.B. zur Bräunungsbestimmung eines oder mehrerer Speisen, kann dann unter Ausschluss der Helligkeitswerte der Bildpunkte mindestens eines aufgenom menen Bilds vorgenommen werden.

Es ist eine Weiterbildung, dass die Helligkeitswerte zur Auswertung nicht berücksichtigt werden und dadurch ausgeschlossen werden, aber in den Bilddaten des ausgewerteten Bilds weiterhin vorhanden sind. Dies kann z.B. vorteilhaft sein, wenn das Bild zusätzlich dazu vorgesehen ist, einem Nutzer auf einem Bildschirm angezeigt zu werden.

Auf der Basis der Auswertung bzw. beruhend auf dem Ergebnis der Auswertung kann das Haushalts-Gargerät mindestens eine Aktion auslösen, z.B. einen Garvorgang (z.B. eine Garraumtemperatur) an einen erkannten Gargrad anpassen, eine Restlaufdauer bestim men und ggf. anzeigen, den Garvorgang abbrechen, einen Hinweis an einen Nutzer aus geben und/oder in eine andere Garphase (z.B. eine Warmhaltephase) übergehen usw.

Es ist eine Ausgestaltung, dass in Schritt (b) die Teilschritte (b1), dass aus dem aufge nommenen Bild ein Bild (im Folgenden ohne Beschränkung der Allgemeinheit als "hellig keitsnormiertes" Bild bezeichnet) erzeugt wird, bei dem die Helligkeitswerte der zugehöri gen Bildpunkte abgetrennt worden sind, und (b2), dass das helligkeitsnormierte Bild aus gewertet wird, durchgeführt werden. Das helligkeitsnormierte Bild weist also keine Hellig keitsinformation mehr auf. Dadurch wird der Vorteil erzeugt, dass sich eine Datenmenge und damit auch eine Anforderungen an eine zur Auswertung benötigte Rechenleistung merklich reduzieren lässt.

Es ist eine Ausgestaltung, dass in Schritt (b1) das helligkeitsnormierte Bild aus einem Bild erzeugt wird, dessen Bildpunkte jeweils mehrere Farbraumkoordinaten einschließlich ei ner Helligkeitskoordinate aufweisen, indem die Helligkeitskoordinate abgetrennt wird. Dies ermöglicht einen besonders einfache Abtrennung oder Ausschluss der Helligkeitswerte durch einfaches Eliminieren der Helligkeitskoordinate(n). In anderen Worten ist in dem helligkeitsnormierten Bild der die Helligkeitskoordinate repräsentierende Kanal ("Heilig- keitskanal") eliminiert worden. Zur Umsetzung dieser Ausgestaltung wird das Bild, aus dem das helligkeitsnormierte Bild erzeugt wird, bzw. dessen Bildpunkte also durch einen Farbraum beschrieben, der die Helligkeit als eine eigene Farbraumkoordinate aufweist. Die verbleibenden Farbraumkoordinaten des helligkeitsnormierten Bild werden im Fol genden auch als "Farbkoordinaten" bezeichnet. Die Farbkoordinaten spannen dann einen helligkeitsnormierten Farbraum auf. Konkrete Wertetupel der Farbkoordinaten lassen sich dann auf einen Farbort des helligkeitsnormierten Farbraums abbilden.

Es ist eine Ausgestaltung, dass das helligkeitsnormierte Bild durch Elimination des Hellig keitskanal aus einem HSX-Bild erzeugt wird. Hierbei ergibt sich der Vorteil, dass ein HSX- Bild eine weitverbreitete Farbraumdarstellung nutzt, die sich zudem leicht auswerten lässt. Zudem lässt sich die Bilddatenmenge um die Datenmenge des Helligkeitskanals reduzie ren. Unter einem HSX-Bild wird insbesondere ein Bild verstanden, dessen Farbraumkoor dinaten einen Farbwert (engl "hue"), eine Farbsättigung (engl. "Saturation") und einen Helligkeitswert umfassen. Das helligkeitsnormierte Bild kann alternativ durch Elimination des Helligkeitskanal z.B. aus einem im YUV-Format, YIQ-Format usw. vorliegenden Bild erzeugt werden.

Der Farbwert kann als Farbwinkel auf dem Farbkreis (z.B. mit 0° für Rot, 120° für Grün, 240° für Blau) dargestellt oder angegeben werden. Die Farbsättigung kann als Prozent wert (z.B. mit 0% = Neutralgrau, 50% = wenig gesättigte Farbe, 100% = gesättigte, reine Farbe), entsprechend einem Intervall von Null bis Eins, dargestellt werden. Farbwert und Farbsättigung bilden die beiden Farbkoordinaten, die einen, z.B. kreisförmigen, hellig keitsnormierten (H, S)-Farbraum aufziehen.

Das HSX-Bild kann in mehreren Varianten (mitX = V, L, B oder I) vorliegen, die sich in der Darstellung des Helligkeitswerts unterscheiden, beispielsweise als

HSV-Bild, bei dem der Helligkeitswert (engl "value", auch Dunkelstufe genannt) als Prozentwert (0% = keine Helligkeit, 100% = volle Helligkeit), entsprechend einem In tervall von Null bis Eins, dargestellt wird;

HSL-Bild mit der relativen Helligkeit (engl "lightness") anstelle des Hellwerts; HSB-Bild mit der absoluten Helligkeit (engl "brightness") anstelle des Hellwerts; HSI-Bild mit der Lichtintensität (engl "intensity") anstelle des Hellwerts. Da der Helligkeitskanal X eliminiert wird, sind alle Varianten eines HSX-Bild gleichartig nutzbar.

Es ist eine Ausgestaltung, dass die Bildpunkte des in Schritt (a) aufgenommenen Bilds keine eigenständige Helligkeitskoordinate aufweisen und in Schritt (b1) das aufgenomme nen Bild in ein Bild umgewandelt wird, dessen Bildpunkte jeweils mehrere Farbraumkoor- dinaten einschließlich einer Helligkeitskoordinate aufweisen. So können die Helligkeits werte bzw. kann die Helligkeitsinformation vorteilhafterweise vergleichsweise einfach auch aus aufgenommenen Bildern ausgeschlossen oder eliminiert werden, die keinen eigenständigen Helligkeitskanal aufweisen.

Es ist eine Ausgestaltung, dass in Schritt (a) ein RGB-Bild oder CMYK-Bild aufgenommen wird und in Schritt (b1) zunächst das RGB-Bild oder CMYK-Bild in ein HSX-Bild umge wandelt wird und dann das helligkeitsnormierte ("HS"-)Bild aus dem HSX-Bild durch Ab trennung der Helligkeitswerte erzeugt wird. So wird der Vorteil erreicht, dass die häufig von einer Farbkamera im RGB-Format oder CMYK-Format erzeugten Farbbilder zur Durchführung des Verfahrens nutzbar sind. Die Transformation in ein HSX-Bild ist allge mein bekannt, für die RGB nach HSV-Transformation z.B. gemäß dem Formelsatz von Gonzalez und Woods, von Foley und Van Dam oder von Travis. Gegenüber einem RGB- Bild wird durch die Nutzung eines HSX-Bild eine Reduzierung der Datenmenge um ein Drittel, gegenüber einem CMYK-Bild sogar um die Hälfte erreicht.

Jedoch ist das Verfahren nicht auf die Verwendung von RGB-, CMYK-, HSX- usw. Bildern beschränkt.

Es ist eine Ausgestaltung, dass das Bild zur Bestimmung eines Gargrads von in dem Bild abgebildetem Gargut (d.h., ein oder mehreren unterschiedlichen Gargütern) anhand min destens einer verbliebenen Farbkoordinate ausgewertet wird, z.B. beruhend auf einer Auswertung des Farbwerts, der Farbsättigung oder eines aus dem Farbwert und der Farbsättigung bestimmten Farborts eines helligkeitsnormierten HSX-Bilds bzw. HS-Bilds.

Es ist eine Weiterbildung, dass der Gargrad eines Garguts durch Auswertung der einzel nen oder gruppenweise Bildpunkte dieses Garguts in dem helligkeitsnormierten Bild be- stimmt wird. Dadurch kann eine Ortsabhängigkeit oder räumliche Verteilung des Gargrads mitberücksichtigt werden.

Es ist eine Weiterbildung, dass der Gargrad eines Garguts durch Berechnung eines Ge- samtfarborts für das Garguts bestimmt wird. Dies kann z.B. durch - ggf. gewichtete - Wertemittelung der Werte mindestens einer Farbkoordinate der zu dem Gargut gehörigen Bildpunkte durchgeführt werden.

Unter einem Gargrad kann allgemein eine Messgröße verstanden werden, welche unter schiedliche Garzustände mit den Endpunkten "nicht gar" und "gar" abbildet oder reprä sentiert. Vorliegend wird eine Änderung eines Gargrads durch Feststellung eines Farb wechsels an der Oberfläche des Garguts erkannt. Die aktuelle Farbe und/oder ein Farb wechsel stellen also einen quantifizierbaren Hinweis auf den Gargrad dar.

Es ist eine Weiterbildung, dass der Gargrad ein Bräunungsgrad ist. Im Gegensatz zu ei ner bisher verwendeten Bestimmung des Bräunungsgrads anhand einer zunehmenden Verdunklung des Garguts lässt sich der Bräunungsgrad vorliegend beispielsweise aus einem Farbwechsel, z.B. von einer nicht-braunen Farbe wie grün zu braun, feststellen. Dies entspräche bei einem HS-Bild einer Änderung eines Farborts in einer (H, S)-Ebene, z.B. von grün (H = 120°; S = 100%) zu braun (H = 20°; S = 75%). Jedoch können auch andere Gargrade anstelle eines Bräunungsgrads bestimmt werden. So verlieren bestimm te Gargüter mit zunehmendem Gargrad ihre Farbe, oder es kann mit zunehmendem Gar grad zu einem anderen Farbwechsel als zu braun kommen. Dies kann beispielsweise berücksichtigt werden, wenn die Art des Garguts vorher bekannt ist, z.B. aufgrund einer Nutzereingabe oder einer automatisches Bestimmung.

Der Gargrad bzw. das Erreichen eines Ziel-Gargrads kann über die ganze Oberfläche eines Garguts ("global") bestimmt werden oder für verschiedene Teilbereiche des Garguts getrennt ("lokal") bestimmt werden. Speziell kann bei lokaler Bestimmung des Gargrads durch das Gargerät mindestens eine Aktion ausgelöst werden, wenn ein Ziel-Gargrad bereits in einem Teilbereich erreicht wird, für mehrere Teilbereiche erreicht wird oder für alle Teilbereiche erreicht wird. Es ist eine Ausgestaltung, dass ein Erreichen eines Ziel-Gargrads des betrachteten Gar guts anhand eines Erreichens eines durch die verbliebenen Farbkoordinaten definierten Ziel-Farbpunkts oder einer Umgebung davon (z.B. von Hziel ± 2° und Sziel ± 5%) be stimmt wird. Dies ermöglicht eine besonders einfache Bestimmung eines fertigen Garzu stands des betrachteten Garguts. Der Ziel-Gargrad kann in einer Weiterbildung vor oder mit Beginn eines Garvorgangs festgelegt werden. Wenn beispielsweise im Rahmen eines Garprogramms eine bestimmte Speise (z.B. Hähnchen, Pizza, Auflauf, usw.) und ein ge wünschter Bräunungsgrad (z.B. "knusprig") eingestellt werden, kann daraus der dem Ziel- Gargrad, insbesondere Ziel-Bräunungsgrad, entsprechende Ziel-Farbpunkt berechnet oder aus einem Datenspeicher abgerufen werden.

Es ist eine Ausgestaltung, dass die Schritte (a) und (b) zeitlich aufeinanderfolgend mehr fach durchgeführt werden. Dadurch können die Farbkoordinaten des Garguts bzw. der Gargutoberfläche vorteilhafterweise zu unterschiedlichen Zeiten ausgewertet werden und so auch dynamische Effekte mitberücksichtigt werden. Insbesondere können zeitlich auf einanderfolgend ermittelte Farbkoordinaten eines Garguts zur Bestimmung eines Ziel- Gargrads des Garguts und/oder einer Restgardauer ausgewertet werden.

Es ist eine Weiterbildung, dass die zeitlich aufeinanderfolgenden Farbkoordinaten bild punktweise ausgewertet werden, z.B. durch Bildvergleich. Beispielsweise können zur Be stimmung des Ziel-Gargrads und/oder der Restgardauer Differenzbilder erzeugt und aus gewertet werden. Ein Erreichen eines Ziel-Gargrads kann dann z.B. anhand dessen fest gestellt werden, dass eine zeitliche Änderung der Farbkoordinaten für mindestens 70% der Bildpunkte unterhalb eines bestimmten Schwellwerts liegt und ggf. diese Bildpunkte innerhalb eines bestimmten Abstands von einem Ziel-Gargrad liegen.

Es ist eine Ausgestaltung, dass zur Bestimmung des Ziel-Gargrads des Garguts und/oder der Restgardauer ein Kurvenverlauf mindestens einer Farbkoordinate ausgewertet wird. So lassen sich vorteilhafterweise Gargutzustände (z.B. ein Gargrad, speziell Bräunungs grad) besonders flexibel und zuverlässig auswerten. Zur Auswertung des zeitlichen Ver laufs lassen sich die bekannten Methoden zur Kurvenauswertung oder Kurvendiskussion verwenden, z.B. eine Bestimmung von Maximal- und/oder Minimalpunkten, Sattelpunkten, Punkten hoher Steigung usw. Der Kurvenverlauf kann im beispielhaften Fall eines HSX- Bilds z.B. eine zeitliche Änderung eines - normierten oder nicht normierten - Farbwinkels des Farbwerts und/oder eine - normierte oder nicht normierte - Änderung eines Sätti gungsgrads umfassen.

Die Aufgabe wird auch gelöst durch ein Haushalts-Gargerät, aufweisend einen Garraum und mindestens eine Kamera zum Aufnehmen von bildpunktbasierten Bildern, wobei das Haushalts-Gargerät zur Durchführung des Verfahrens wie oben beschrieben ausgestaltet ist. Das Haushalts-Gargerät kann analog zu dem Verfahren ausgebildet werden und weist die gleichen Vorteile auf.

Die Auswertung kann im Haushalts-Gargerät oder außerhalb des Haushalts-Gargeräts, z.B. in einer externen Datenverarbeitungseinrichtung wie einem Netzwerkserver oder ei nem Cloudrechner, erfolgen. Bei Auswertung im Haushalts-Gargerät weist dieses eine entsprechend Datenverarbeitungseinrichtung auf, bei externer Auswertung eine Kommu nikationsschnittstelle mit einer externen Datenverarbeitungseinrichtung. Auch kann das Verfahren grundsätzlich beliebig verteilt auf dem Haushalts-Gargerät und der externen Datenverarbeitungseinrichtung durchgeführt werden.

Die oben beschriebenen Eigenschaften, Merkmale und Vorteile dieser Erfindung sowie die Art und Weise, wie diese erreicht werden, werden klarer und deutlicher verständlich im Zusammenhang mit der folgenden schematischen Beschreibung eines Ausführungsbei spiels, das im Zusammenhang mit den Zeichnungen näher erläutert wird.

Fig.1 zeigt als Schnittdarstellung in Seitenansicht eine Skizze eines Haushalts- Gargeräts mit mindestens einer Kamera;

Fig.2 zeigt eine Auftragung eines Mittelwerts der verschiedenen Farbraumkoordina- ten eines HSV-Bilds einer Weißreferenz in Abhängigkeit von einer Einschub höhe;

Fig.3 zeigt eine Standardabweichung für die verschiedenen Farbkoordinaten eines HSV-Bilds einer Weißreferenz in Abhängigkeit von einer Einschubhöhe;

Fig.4 zeigt einen Kurvenverlauf normierter Farbkoordinaten eines HSV-Bilds eines Garguts über eine Dauer eines Garbetriebs; und Fig.5 zeigt einen Verfahrensablauf zum Vorbereiten einer Auswertung eines aufge nommenen Bilds zum Betreiben des Haushalts-Gargeräts. Fig.1 zeigt als Schnittdarstellung in Seitenansicht eine Skizze eines Haushalts-Gargeräts 1 mit einem Garraum 2, dessen frontseitige Beschickungsöffnung 3 mittels einer Gar raumtür 4 verschließbar ist. Der Garraum 2 weist mehrere Einschubebenen mit entspre chenden Einschubhöhen EH1 bis EH4 auf, wobei sich die Einschubhöhe EH1 nahe eines Bodens des Garraums 2 befindet und sich die Einschubhöhe EH4 nahe einer Decke des Garraums 2 befindet. Hier ist Gargut A, das selbst eine gewisse Höhe aufweist, auf der zweiten Einschubhöhe EH2 aufgelegt, z.B. auf einem in der zugehörigen Einschubebene eingesetzten Gitterrost oder Backblech (o. Abb.).

In der Decke des Garraums 2 ist eine Farbkamera 5 angebracht, es können aber auch noch andere Kameras (o. Abb.) vorhanden sein. Die Farbkamera 5 ist dazu eingerichtet (d.h., ausgebildet und angeordnet), bildpunktbasierte Farbbilder von oben oder von schräg oben aus dem Garraum 2 aufzunehmen.

Das Haushalts-Gargerät 1 weist ferner mindestens eine Beleuchtungseinrichtung zur Be leuchtung des Garraums 2 auf, z.B. aufweisend einen Strahler (z.B. LED-Strahler) 6 im Bereich der Decke und einen Strahler (z.B. LED-Strahler) 7 im Bereich der linken und/oder rechten Seitenwand des Garraums 2. Die sich bei Betrieb der Strahler 6, 7 auf grund deren Lichtkegel in dem Garraum 2 ergebende Helligkeitsverteilung ist in der hori zontalen Ebene inhomogen und auch von der gemessenen Höhe in dem Garraum 2 ab hängig. Insgesamt ergibt sich im Garraum eine in allen drei Raumrichtungen inhomogene Lichtverteilung.

Die Farbkamera 5 und die Strahler 6, 7 sind mit einer Steuereinrichtung 8 verbunden, die auch als Datenauswerteeinrichtung eingerichtet sein kann.

Die Steuereinrichtung 8 kann ferner mit einem Kommunikationsmodul 9 (z.B. einem Ethernet-Modul, einem WLAN-Modul usw.) verbunden sei, und über das Kommunikati onsmodul 9 z.B. über ein Netzwerk N mit einem geräteexternen Rechner C. Dadurch wird es ermöglicht, Datenverarbeitungsabläufe bzw. Rechenkapazität ganz oder teilweise aus dem Haushalts-Gargerät 1 auszulagern, z.B. in der sog. Cloud bereitzuhalten.

Fig.2 zeigt eine Auftragung eines Mittelwerts der bildpunktbezogenen Werte für die ver schiedenen Farbraumkoordinaten bzw. Kanäle H (Farbwert), S (Sättigung) und V (Heilig- keit) eines HSV-Bilds einer Weißreferenz in Abhängigkeit von den Einschubhöhen EH1 bis EH4. Die Farbraumkoordinaten H, S und V sind hier wie folgt auf einen Maximalwert "1" normiert: Der Farbwert H ist auf 360° normiert (ein normierter Farbwert H = 0 ent spricht somit einem Farbwinkel von 0° oder 360°, ein Farbwert von 0,5 einem Farbwinkel von 180°, usw.), während die Farbraumkoordinaten S und V auf 100% normiert sind (so entspricht ein normierter Wert von 0,5 einer Sättigung von 50% bzw. einer Helligkeit von 50%, usw.).

Das HSV-Bild kann direkt oder indirekt (z.B. über ein RGB-Bild) aufgenommen worden sein.

Die Mittelwerte über die Bildpunkte bzw. die Fläche der Weißreferenz der H- und S- Kanä le H, S sind für die Einschubhöhen EH1 bis EH4 nahezu konstant, während sich der V- Kanal V stark ändert.

Fig.3 zeigt eine Standardabweichung für die verschiedenen Farbkoordinaten bzw. Kanäle H, S, V des HSV-Bilds aus Fig.2 in Abhängigkeit von den Einschubhöhen EH1 bis EH4. Die Standardabweichung im V-Kanal V ist wesentlich Größer als im H- und S-Kanal H, S. Das bedeutet, dass die H- und S-Werte der einzelnen Bildpunkte nahezu konstant inner halb der Fläche der Weißreferenz auf der jeweiligen Einschubhöhen EH1 bis EH4 sind.

Eine Bräunungsbeurteilung der Garguts A unter Berücksichtigung der Helligkeit wird dadurch sehr fehlerbehaftet, insbesondere wenn die Einschubhöhe EH1 bis EH4 und Garguthöhe und -form nicht bekannt sind.

Fig.4 zeigt einen Kurvenverlauf der analog zu Fig.2 normierten Farbkoordinaten H und S eines HSV-Bilds einer Oberseite eines Garguts A in Form einer Pizza Mozzarella über eine Dauer t eines Ofengarbetriebs in Sekunden.

Ab ca. t = 800 s beginnen sich die Werte für H (untere Kurve) und V (obere Kurve) merk lich zu verändern, und zwar sinkt H ab und steigt S an. Die Kurven oder Kurvenverläufe gehen danach nach t ca. 1200 s in einen jeweiligen Plateauzustand über. Diese Änderung von H und S entspricht einer Bräunung der Oberfläche der Pizza, so dass die Bräunung auch ohne Berücksichtigung des Helligkeitswerts S zuverlässig erkennbar ist. Aus den Kurven oder Kurvenverläufen für H und S lässt sich ein Erreichen eines Ziel- Gargrads und/oder der Restgardauer bestimmen. Ist beispielsweise der Zeitpunkt bis zum Einsetzen und/oder bis zum Abschluss der Bräunung bekannt, kann dann durch bei spielsweise experimentell ermittelte Tabellen oder Kennlinien der Zeitpunkt bis zum Errei chen des Ziel-Gargrads und/oder der Restgardauer nachgeschlagen werden.

Fig.5 zeigt einen Verfahrensablauf zum Vorbereiten einer Auswertung eines in einem Schritt S1 durch die Kamera 5 aufgenommenen RGB-Bilds 10 zum Betreiben des Haus- halts-Gargeräts 1. Beispielsweise um die Fehlerbehaftung bei der Bräunungsbeurteilung zu verringern, wird die hochgradig fehlerbehaftete Helligkeitsinformation weggelassen bzw. zur weiteren Auswertung ausgeschlossen.

Dazu wird in einem Schritt S2 das aufgenommene RGB-Bild 10 mit seinen Kanälen R (rot), G (grün) und B (blau) in ein HSV-Bild 11 mit seinen Kanälen H, S und V umgewan delt oder transformiert.

In einem Schritt S3 wird der V-Kanal separiert, wodurch sich ein helligkeitsnormiertes HS- Bild 12 ergibt, dessen Datenmenge um ca. ein Drittel geringer ist als die des HSV-Bilds 11. Der V-Kanal V wird folglich in Schritt S4 nicht zu weiteren Auswertung verwendet, wie durch seine Durchstreichung angedeutet.

Die Schritte S3, S3 und/oder S4 können ganz oder teilweise auf der Steuereinrichtung 8 und/oder auf dem Rechner C ablaufen.

Selbstverständlich ist die vorliegende Erfindung nicht auf das gezeigte Ausführungsbei spiel beschränkt.

Allgemein kann unter "ein", "eine" usw. eine Einzahl oder eine Mehrzahl verstanden wer den, insbesondere im Sinne von "mindestens ein" oder "ein oder mehrere" usw., solange dies nicht explizit ausgeschlossen ist, z.B. durch den Ausdruck "genau ein" usw. Auch kann eine Zahlenangabe genau die angegebene Zahl als auch einen üblichen Toleranz bereich umfassen, solange dies nicht explizit ausgeschlossen ist. Bezugszeichenliste

1 Haushalts-Gargerät

2 Garraum

3 Beschickungsöffnung

4 Garraumtür

5 Farbkamera

6 Strahler

7 Strahler

8 Steuereinrichtung

9 Kommunikationsmodul

10 RGB-Bild 11 HSV-Bild 12 Helligkeitsnormiertes HS-Bild A Gargut B B-Kanal C Rechner

EH1-EH4 Einschubhöhe

G G-Kanal

H H-Kanal

N Netzwerk

R R-Kanal

S S-Kanal

V V-Kanal