DE102022203065A1 - Method for operating a monitoring device, computer program, storage medium and monitoring device - Google Patents

Method for operating a monitoring device, computer program, storage medium and monitoring device Download PDF

Info

Publication number
DE102022203065A1
DE102022203065A1 DE102022203065.6A DE102022203065A DE102022203065A1 DE 102022203065 A1 DE102022203065 A1 DE 102022203065A1 DE 102022203065 A DE102022203065 A DE 102022203065A DE 102022203065 A1 DE102022203065 A1 DE 102022203065A1
Authority
DE
Germany
Prior art keywords
objects
determined
image data
cameras
monitoring device
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
DE102022203065.6A
Other languages
German (de)
Inventor
Christoph Burger-Scheidlin
Justin Frints
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Robert Bosch GmbH
Original Assignee
Robert Bosch GmbH
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Robert Bosch GmbH filed Critical Robert Bosch GmbH
Priority to DE102022203065.6A priority Critical patent/DE102022203065A1/en
Priority to PCT/EP2023/057300 priority patent/WO2023186652A1/en
Publication of DE102022203065A1 publication Critical patent/DE102022203065A1/en
Pending legal-status Critical Current

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • H04N7/181—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a plurality of remote sources
    • G—PHYSICS
    • G08—SIGNALLING
    • G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B13/00—Burglar, theft or intruder alarms
    • G08B13/18—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength
    • G08B13/189—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems
    • G08B13/194—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems
    • G08B13/196—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems using television cameras
    • G08B13/19639—Details of the system layout
    • G08B13/19641—Multiple cameras having overlapping views on a single scene

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Image Processing (AREA)
  • Image Analysis (AREA)

Abstract

Verfahren zum Betreiben einer Überwachungsvorrichtung, wobei die Überwachungsvorrichtung eine Mehrzahl an Kameras 1 umfasst und ausgebildet ist den Überwachungsbereich 2 zu überwachen, wobei die Kameras 1 jeweils einen Erfassungsbereich aufweisen und für den Erfassungsbereich Bilddaten 3 aufnehmen, wobei die Erfassungsbereiche Teilbereiche des Überwachungsbereichs 2 bilden, wobei die Bilddaten 3 zur Bestimmung von Objekten 5 und/oder Objektmerkmalen 6 in einem Auswerteschritt 200 ausgewertet und/oder analysiert werden, wobei in dem Auswerteschritt 200 basierend auf den Bilddaten 3 teilweise bestimmte, unsicher bestimmte und/oder fehlerhafte bestimmte Objekte und/oder Objektmerkmale 6 als potentielle Objekte 8 bestimmt werden.Method for operating a monitoring device, wherein the monitoring device comprises a plurality of cameras 1 and is designed to monitor the monitoring area 2, the cameras 1 each having a detection area and recording image data 3 for the detection area, the detection areas forming partial areas of the monitoring area 2, whereby the image data 3 for determining objects 5 and/or object features 6 are evaluated and/or analyzed in an evaluation step 200, wherein in the evaluation step 200 based on the image data 3, partially determined, uncertainly determined and/or incorrectly determined objects and/or object features 6 be determined as potential objects 8.

Description

Stand der TechnikState of the art

Die Erfindung betrifft ein Verfahren zum Betreiben einer Überwachungsvorrichtung, wobei die Überwachungsvorrichtung eine Mehrzahl an Kameras umfasst und ausgebildet ist, den Überwachungsbereich zu überwachen und Bilddaten aufzunehmen und/oder auszuwerten.The invention relates to a method for operating a monitoring device, wherein the monitoring device comprises a plurality of cameras and is designed to monitor the monitoring area and record and/or evaluate image data.

Die bildtechnische und/oder videotechnische Überwachung von Überwachungsbereichen findet in privaten und gewerblichen Anwendungen Einsatz. Beispielsweise werden bestimmte öffentliche Gebäude, insbesondere Flughäfen und Bahnhöfe, mittels Videokameras überwacht, sodass basierend auf den so aufgenommenen Videos und/oder Bilddaten Personen und/oder Objekte detektiert werden können, im Speziellen können diese Objekte und/oder Personen auch verfolgt werden.The image and/or video surveillance of surveillance areas is used in private and commercial applications. For example, certain public buildings, in particular airports and train stations, are monitored using video cameras, so that people and/or objects can be detected based on the videos and/or image data recorded in this way; in particular, these objects and/or people can also be tracked.

Damit derartige Überwachungen und/oder Anwendungen zuverlässig angewendet werden können, ist eine vollständige und/oder sichere Aufnahme des Überwachungsbereichs durch die Kameras nötig. Hierzu müssen die Kameras entsprechend platziert und verteilt werden. Diese Auswahl von Positionen und/oder Anordnungen erfolgt regelmäßig durch fachkundiges Personal, das basierend auf seiner Erfahrung versucht die entsprechende Umgebung aufzunehmen. Dabei kommt es immer wieder zu einer Überbelegung oder Unterbelegung der Kameraabdeckung des Überwachungsbereichs, sodass für manche Bereiche nicht immer die entsprechende Überwachung gewährleistet werden kann.In order for such monitoring and/or applications to be used reliably, a complete and/or secure recording of the surveillance area by the cameras is necessary. To do this, the cameras must be positioned and distributed accordingly. This selection of positions and/or arrangements is regularly carried out by expert personnel who try to accommodate the relevant environment based on their experience. This often results in overcrowding or undercrowding of the camera coverage in the surveillance area, so that appropriate monitoring cannot always be guaranteed for some areas.

Die Druckschrift KR 102024695 A1 beschreibt ein Verfahren und eine Vorrichtung zum Modellieren einer Kameraverteilung. Die Druckschrift beschäftigt sich insbesondere mit der Kalibrierung der Kameras. Die Modellierung basiert auf Kartendaten einer Kartierung des Überwachungsbereichs, wobei die Kartendaten beispielsweise topografische Informationen und/oder Informationen über Objekte in Kartenabschnitten umfassen.The publication KR 102024695 A1 describes a method and apparatus for modeling a camera distribution. The publication deals in particular with the calibration of the cameras. The modeling is based on map data from a mapping of the surveillance area, the map data comprising, for example, topographical information and/or information about objects in map sections.

Offenbarung der ErfindungDisclosure of the invention

Die Erfindung betrifft ein Verfahren zum Betreiben einer Überwachungsvorrichtung mit den Merkmalen des Anspruchs 1. Ferner betrifft die Erfindung ein Computerprogramm, ein Speichermedium mit dem Computerprogramm und eine Überwachungsvorrichtung. Bevorzugte und/oder vorteilhafte Ausführungen ergeben sich aus den Unteransprüchen, der Beschreibung und den beigefügten Figuren.The invention relates to a method for operating a monitoring device with the features of claim 1. The invention further relates to a computer program, a storage medium with the computer program and a monitoring device. Preferred and/or advantageous embodiments result from the subclaims, the description and the attached figures.

Die Erfindung betrifft ein Verfahren zum Betreiben einer Überwachungsvorrichtung. Die Überwachungsvorrichtung umfasst eine Mehrzahl an Kameras, insbesondere mindestens 10 oder mindestens 100 Kameras. Die Kameras können gleichartig oder verschieden ausgebildet und/oder eingerichtet sein, beispielsweise schwenkbare, stationäre, PTZ-Kameras und/oder mobile Kameras umfassen. Die Überwachungsvorrichtung ist zur Überwachung eines Überwachungsbereichs ausgebildet, wobei der Überwachungsbereich beispielsweise ein Innenbereich und/oder ein Außenbereich ist und/oder umfasst. Die Kameras sind beispielsweise über den Überwachungsbereich verteilt angeordnet. Beispielsweise dient die Überwachungsvorrichtung zur Objekt- und/oder Personendetektion, im Speziellen zur Objekt- und/oder Personenverfolgung. Die Überwachungsvorrichtung ist insbesondere eine bild- und/oder videobasierte Überwachungsvorrichtung, wobei vorzugsweise Algorithmen und/oder Verfahrensschritte der Bildauswertung, Objektdetektion und/oder Klassifizierung Anwendung finden. Das Verfahren ist insbesondere computer- und/oder softwareimplementiert ausführbar und/oder anwendbar. Als Betreiben der Überwachungsvorrichtung wird insbesondere das Anwenden und/oder Überwachen des Überwachungsbereichs verstanden. Insbesondere dient das Verfahren der Feststellung von Problembereichen, insbesondere Bereichen und/oder Positionen, die ungenügend und/oder weniger stark aufgenommen werden und/oder durch Kameras abgedeckt sind. Insbesondere ist das Verfahren zum Bestimmen von Positionen und/oder Bereichen, die durch eine zusätzliche Kamera überwacht werden sollen und/oder müssen.The invention relates to a method for operating a monitoring device. The monitoring device comprises a plurality of cameras, in particular at least 10 or at least 100 cameras. The cameras can be designed and/or set up in the same or different ways, for example include pivoting, stationary, PTZ cameras and/or mobile cameras. The monitoring device is designed to monitor a monitoring area, the monitoring area being and/or comprising, for example, an indoor area and/or an outdoor area. The cameras are, for example, arranged distributed over the surveillance area. For example, the monitoring device is used for object and/or person detection, in particular for object and/or person tracking. The monitoring device is in particular an image and/or video-based monitoring device, with algorithms and/or method steps for image evaluation, object detection and/or classification preferably being used. The method can be carried out and/or used in particular in computer and/or software implementation. Operating the monitoring device is understood to mean, in particular, the application and/or monitoring of the monitoring area. In particular, the method is used to determine problem areas, in particular areas and/or positions that are insufficiently and/or less well recorded and/or are covered by cameras. In particular, the method is for determining positions and/or areas that should and/or must be monitored by an additional camera.

Die Kamera und/oder die Kameras weisen jeweils einen Erfassungsbereich auf. Der Erfassungsbereich ist insbesondere der Bereich der Kamera, der aufgenommen wird und/oder für den Bild- oder Videodaten erfasst werden. Die Kameras nehmen den Erfassungsbereich auf und stellen für den Erfassungsbereich die Bilddaten bereit. Die Bilddaten sind beispielsweise Videodaten, alternativ umfassen diese eine Bildsequenz und/oder Einzelbilder. Der Erfassungsbereich und/oder die Erfassungsbereiche sind insbesondere Teilbereiche und/oder Abschnitte des Überwachungsbereichs. Vorzugsweise sind die Erfassungsbereiche mindestens teilweise überlappend. Besonders bevorzugt ist es, dass die Kameras und/oder eine Teilmenge der Kameras bewegbar, schwenkbar und/oder zoombar ausgebildet sind, sodass der Erfassungsbereich im Überwachungsbereich verändert werden kann, beispielsweise bewegt, verfahren und/oder durch Zoomen vergrößert und/oder verkleinert.The camera and/or the cameras each have a detection area. The detection area is in particular the area of the camera that is recorded and/or for which image or video data is recorded. The cameras record the detection area and provide the image data for the detection area. The image data is, for example, video data; alternatively, it includes an image sequence and/or individual images. The detection area and/or the detection areas are in particular partial areas and/or sections of the monitoring area. The detection areas are preferably at least partially overlapping. It is particularly preferred that the cameras and/or a subset of the cameras are designed to be movable, pivotable and/or zoomable, so that the detection area in the monitoring area can be changed, for example moved, moved and/or enlarged and/or reduced by zooming.

Das Verfahren sieht einen Auswerteschritt vor. Der Auswerteschritt umfasst ein Auswerten und/oder Analysieren der Bilddaten im Auswerteschritt wird basierend auf der Auswertung und/oder Analyse der Bilddaten eine Detektion und/oder Erkennung von Objekten und/oder Objektmerkmalen ausgeführt. Insbesondere werden die Objekte und/oder die Objektdatenmerkmalen durch die Auswertung der Bilddaten und/oder die Analyse der Bilddaten im Auswerteschritt bestimmt und/oder ermittelt. Beispielsweise umfasst und/oder bildet der Auswerteschritt eine Objektdetektion und/oder eine Detektion von Objektmerkmalen. Im Speziellen umfasst der Auswerteschritt die Klassifikation der Objekte und/oder der Objektmerkmale. Insbesondere ist der Auswerteschritt ausgebildet, unterschiedliche Objekte und/oder Objektmerkmale zu bestimmen und/oder zu detektieren. Beispielsweise kann der Auswerteschritt die Detektion von Personen, Identitäten, Objekten, Objektgruppen, Bewegungen und/oder Ereignissen umfassen und/oder bilden. Objektmerkmale sind beispielsweise Abschnitte von Objekten und/oder Objektarten, beispielsweise von Tieren. Objektmerkmale können ferner beispielsweise Gesichter, Fahrzeuge, Tiere und/oder statische Objekte beschreiben, umfassen und/oder bilden.The procedure provides for an evaluation step. The evaluation step includes evaluating and/or analyzing the image data in the evaluation step, detection and/or recognition of objects and/or object features is carried out based on the evaluation and/or analysis of the image data. In particular, the objects and/or the object data features are determined and/or determined through the evaluation of the image data and/or the analysis of the image data in the evaluation step. For example, the evaluation step includes and/or forms an object detection and/or a detection of object features. In particular, the evaluation step includes the classification of the objects and/or the object features. In particular, the evaluation step is designed to determine and/or detect different objects and/or object features. For example, the evaluation step can include and/or form the detection of people, identities, objects, groups of objects, movements and/or events. Object features are, for example, sections of objects and/or object types, for example animals. Object features can also describe, include and/or form, for example, faces, vehicles, animals and/or static objects.

In dem Auswerteschritt und/oder durch die Anwendung des Auswerteschrittes werden potentielle Objekte bestimmt und/oder ermittelt. Potentielle Objekte sind beispielsweise teilweise, insbesondere nicht vollständig bestimmte Objekte und/oder Objektmerkmale, unsicher bestimmte Objekte und/oder Objektmerkmale. Beispielsweise bilden Objekte mit einer Detektionswahrscheinlichkeit von weniger als 95 % fehlerhafte bestimmte Objekte und/oder fehlerhafte bestimmte Objektmerkmale. Beispielsweise ist der Auswerteschritt so ausgebildet und/oder eingerichtet, dass zur Bestimmung vorgesehene Objekte und/oder Objektmerkmale als potentielle Objekte bestimmt und/oder detektiert werden, wenn diese Objekte und/oder Objektmerkmale nur teilweise bestimmt und/oder detektiert werden konnten, unsicher bestimmt und/oder detektiert werden konnten und/oder fehlerhaft bestimmt und/oder detektiert werden konnten.Potential objects are determined and/or determined in the evaluation step and/or through the application of the evaluation step. Potential objects are, for example, partially, in particular not completely, certain objects and/or object features, uncertainly certain objects and/or object features. For example, objects with a detection probability of less than 95% form defective certain objects and/or defective certain object features. For example, the evaluation step is designed and/or set up in such a way that objects and/or object features intended for determination are determined and/or detected as potential objects if these objects and/or object features could only be partially determined and/or detected, determined uncertainly /or could be detected and/or could be incorrectly determined and/or detected.

Die Erfindung basiert auf der Überlegung, dass statt der ausschließlichen Bestimmung von sicher detektierten Objekten und/oder Objektmerkmalen, für die also eine sichere Analyse und/oder Überwachung gewährleistet ist, auch die nur teilweise, unvollständig, unsicher und/oder fehlerhaft bestimmten Objekte und/oder Objektmerkmale bestimmt und/oder erfasst werden, sodass basierend auf diesen fehlerhaften, unvollständigen, unsicheren, insbesondere potentiellen Objekten, eine gezielte Verbesserung der Überwachung, Analyse und/oder Kameraabdeckung erfolgen kann. Insbesondere basiert dies auf der Erkenntnis, dass bei einer häufigen Detektion von potentiellen Objekten es ratsam ist, diesen entsprechenden Bereich durch zusätzliche Kameras aufzunehmen und/oder zu überwachen, damit zukünftig die den potentiellen Objekten zu Grunde liegenden tatsächlichen Objekten oder Objektmerkmale sicher und vollständig erfasst oder detektiert werden können. Insbesondere kann so der bisher auf seiner reinen Intuition arbeitende Fachmann der Kamerainstallation an den entsprechenden Stellen Kameras vorsehen oder gar Kameras mit Überabdeckung abbauen und/oder an eine andere Stelle platzieren.The invention is based on the idea that instead of exclusively determining reliably detected objects and/or object features, for which secure analysis and/or monitoring is guaranteed, the only partially, incompletely, uncertainly and/or incorrectly determined objects and/or or object features are determined and/or recorded, so that a targeted improvement in monitoring, analysis and/or camera coverage can be made based on these incorrect, incomplete, unsafe, in particular potential objects. In particular, this is based on the knowledge that if potential objects are frequently detected, it is advisable to record and/or monitor this corresponding area using additional cameras so that the actual objects or object features underlying the potential objects can be reliably and completely recorded in the future can be detected. In particular, the camera installation expert, who has previously worked purely on his intuition, can provide cameras at the appropriate locations or even remove cameras with excess coverage and/or place them in another location.

Optional ist es vorgesehen, dass für die potentiellen Objekte eine Position, Lage und/oder Orientierung ermittelt und/oder bestimmt wird. Die Position, Lage und/oder Orientierung ist insbesondere im dreidimensionalen Raum bestimmt, alternativ im zweidimensionalen, beispielsweise einem Lage- und/oder Flurplan des Überwachungsbereichs. Beispielsweise ist die Position und/oder Lage des potentiellen Objekts die Position und/oder Lage im Überwachungsbereich, alternativ der Abschnitt des Erfassungsbereichs, in dem und/oder für den das potentielle Objekt ermittelt wurde. Die Position und/oder Lage wird beispielsweise basierend auf Kameradaten bestimmt und/oder ermittelt, wobei die Kameradaten beispielsweise eine Position, Lage, Orientierung, Blickrichtung und/oder Aufnahmeparameter der Kamera umfassen.Optionally, it is provided that a position, location and/or orientation is determined and/or determined for the potential objects. The position, location and/or orientation is determined in particular in three-dimensional space, alternatively in two-dimensional space, for example a location and/or corridor plan of the surveillance area. For example, the position and/or location of the potential object is the position and/or location in the monitoring area, alternatively the section of the detection area in which and/or for which the potential object was determined. The position and/or location is determined and/or determined, for example, based on camera data, the camera data comprising, for example, a position, location, orientation, viewing direction and/or recording parameters of the camera.

Im Speziellen sieht das Verfahren vor, dass eine Kartierung und/oder eine Karte ermittelt wird, weil die Kartierung und/oder die Karte insbesondere auf dem Überwachungsbereich basiert und/oder den Überwachungsbereich zeigt und/oder beschreibt, wobei vorzugsweise in dieser Karte und/oder der Kartierung die Positionen und/oder Lagen der potentiellen Objekte gezeigt und/oder umfasst sind. Im Speziellen wird die Lage, die Position und/oder die Orientierung der potentiellen Objekte basierend auf den Bilddaten, einer Kameraposition, einer Kameraorientierung und/oder einem Kamerablickwinkel ermittelt und/oder bestimmt. Insbesondere sind die Kameraposition, Kameraorientierung und/oder der Kamerablickwinkel Teil der Kameradaten.In particular, the method provides that a mapping and/or a map is determined because the mapping and/or the map is based in particular on the surveillance area and/or shows and/or describes the surveillance area, preferably in this map and/or the positions and/or locations of the potential objects are shown and/or included in the mapping. In particular, the location, position and/or orientation of the potential objects is determined and/or determined based on the image data, a camera position, a camera orientation and/or a camera viewing angle. In particular, the camera position, camera orientation and/or the camera viewing angle are part of the camera data.

Besonders bevorzugt ist es, dass die Kamera den Auswerteschritt zur Analyse und/oder Auswertung ihrer Bilddaten anwendet und/oder ausführt, insbesondere dass die Kamera hierzu eine Computingeinheit und/oder Auswertemodul umfasst. Insbesondere sind die Kameras jeweils ausgebildet, den Auswerteschritt zur Ausführung ihrer Bilddaten auszuführen und/oder anzuwenden, sodass die Analyse der Bilddaten und/oder die Auswertung der Bilddaten dezentral, insbesondere auf der jeweiligen Kamera erfolgt. Insbesondere sind die Kameras ausgebildet und/oder eingerichtet, Auswerteapplikationen auszuführen, anzuwenden, insbesondere von extern zu beziehen und/oder zu installieren. Die Auswerteapplikationen sind beispielsweise ausgebildet und/oder eingerichtet, die Bilddaten auszuwerten und/oder zu analysieren, insbesondere die Bilddaten auf das Vorliegen der Objekte und/oder Objektmerkmale zu untersuchen.It is particularly preferred that the camera uses and/or carries out the evaluation step for analyzing and/or evaluating its image data, in particular that the camera comprises a computing unit and/or evaluation module for this purpose. In particular, the cameras are each designed to carry out and/or apply the evaluation step for executing their image data, so that the analysis of the image data and/or the evaluation of the image data takes place decentrally, in particular on the respective camera. In particular, the cameras are designed and/or set up to execute and use evaluation applications, in particular to obtain and/or install them externally. The evaluation ap For example, plications are designed and/or set up to evaluate and/or analyze the image data, in particular to examine the image data for the presence of the objects and/or object features.

Im Speziellen ist es vorgesehen, dass die Kameras ausgebildet und/oder eingerichtet sind, die im Auswerteschritt vorgesehene und/oder umfasste Bestimmung der potentiellen Objekte auszuführen und/oder anzuwenden. Insbesondere bestimmt die Kamera hierbei jeweils die potentiellen Objekte für ihre Bilddaten und/oder ihren Erfassungsbereich.In particular, it is provided that the cameras are designed and/or set up to carry out and/or apply the determination of the potential objects provided and/or included in the evaluation step. In particular, the camera determines the potential objects for its image data and/or its detection area.

Alternativ und/oder ergänzend ist es vorgesehen, dass die Überwachungsvorrichtung ein Managementsystem umfasst. Das Managementsystem ist beispielsweise als eine Rechnereinheit und/oder als eine Cloud ausgebildet. Dem Managementsystem sind die Bilddaten bereitgestellt, insbesondere die Bilddaten aller Kameras der Überwachungsvorrichtung. Das Managementsystem ist ausgebildet und/oder eingerichtet, die Bilddaten bereitgestellt von der Kamera und/oder den Kameras auszuwerten und/oder zu analysieren, insbesondere den Auswerteschritt anzuwenden und/oder auszuführen. Insbesondere ist es hierbei vorgesehen, dass die im Auswerteschritt durchgeführte Bestimmung der potentiellen Objekte bei dieser Ausgestaltung auf dem Managementsystem erfolgt.Alternatively and/or additionally, it is provided that the monitoring device comprises a management system. The management system is designed, for example, as a computer unit and/or as a cloud. The image data is provided to the management system, in particular the image data of all cameras of the monitoring device. The management system is designed and/or set up to evaluate and/or analyze the image data provided by the camera and/or the cameras, in particular to apply and/or carry out the evaluation step. In particular, it is provided here that the determination of the potential objects carried out in the evaluation step takes place on the management system in this embodiment.

Besonders bevorzugt ist es, dass das Bestimmen der potentiellen Objekte auf einer Rohklassifikation und/oder ein Detektionswahrscheinlichkeit basiert. Beispielsweise wird im Auswerteschritt für die Objekte und/oder Objektmerkmale eine Wahrscheinlichkeit bestimmt, dass das jeweilige Objekt und/oder Objektmerkmal detektiert wurde. Die Rohklassifikation beschreibt beispielsweise mit welcher Wahrscheinlichkeit das entsprechende Objekt und/oder Objektmerkmalen einer Klasse angehört. Beispielsweise wird im Auswerteschritt für ein Objekt ermittelt und/oder bestimmt, dass es sich zu 90 % um eine Person handelt. Wird beispielsweise als Bedingung verwendet, dass im Auswerteschritt bestimmte und/oder der detektierten Objekte mit einer Detektionswahrscheinlichkeit und/oder Klassifikation von weniger als 95 % als unsicher bestimmt gelten und/oder ein potentielles Objekt bildet, würde für das Beispiel die zu 90 % vorliegende Person als potentielles Objekt bestimmt und/oder festgelegt.It is particularly preferred that the determination of the potential objects is based on a raw classification and/or a detection probability. For example, in the evaluation step for the objects and/or object features, a probability is determined that the respective object and/or object feature was detected. The raw classification describes, for example, the probability with which the corresponding object and/or object characteristics belong to a class. For example, in the evaluation step for an object it is determined and/or determined that 90% of it is a person. For example, if it is used as a condition that in the evaluation step certain and/or detected objects with a detection probability and/or classification of less than 95% are considered to be unsafe and/or form a potential object, the 90% person would be present for the example determined and/or determined as a potential object.

Eine Ausgestaltung der Erfindung sieht vor, dass der Auswerteschritt zur Bestimmung der Objekte und/oder der Objektmerkmale eine kaskadierte Auswertung und/oder eine kaskadierte Bestimmung bildet und/oder umfasst. Die kaskadierte Auswertung und/oder Bestimmung umfasst Teilauswerteschritte. Beispielsweise bietet die kaskadierte Auswerte und Bestimmung eine Bestimmung und/oder Detektion, insbesondere Klassifizierung, eines Objektes und/oder eines Objektmerkmale von allgemein und/oder grob zu detailliert und/oder fein. Beispielsweise wird ein Objekt basierend auf den Bilddaten erst als Person bestimmt und/oder detektiert, insbesondere in einem ersten Teilauswerteschritt, wobei anschließend ein weiterer Teilauswerteschritt vorsieht, dass die bestimmte und/oder detektierte Person auf ein Gesicht, Mimik und/oder mitgeführte Gegenstände untersucht wird. Insbesondere ist es hierbei vorgesehen, dass in der kaskadierten Auswertung bei erfolgreicher Anwendung eines Teilauswerteschrittes, insbesondere der Bestimmung oder Detektion eines Objekts und/oder Objektmerkmale, für das bestimmte und/oder detektierte Objekt und/oder Objektmerkmalen spezifische und/oder vorgesehene weitere Teilauswerteschritte angewendet und/oder ausgeführt werden, sodass weitere Objekte und/oder Objektmerkmale ermittelt werden. Dies basiert auf der Überlegung, dass so nicht für alle Objekte und/oder Objektmerkmale immer alle Teilauswerteschritte anzuwenden sind, sodass spezifische Auswertungen erst bei Detektion und/oder Bestimmung eines mindestbenötigten Objektes und/oder Objektmerkmals angewendet und/oder ausgeführt werden.One embodiment of the invention provides that the evaluation step for determining the objects and/or the object features forms and/or comprises a cascaded evaluation and/or a cascaded determination. The cascaded evaluation and/or determination includes partial evaluation steps. For example, the cascaded evaluation and determination offers a determination and/or detection, in particular classification, of an object and/or an object feature from general and/or coarse to detailed and/or fine. For example, an object is first determined and/or detected as a person based on the image data, in particular in a first partial evaluation step, with a further partial evaluation step then providing that the determined and/or detected person is examined for a face, facial expressions and/or objects carried . In particular, it is provided here that in the cascaded evaluation, upon successful application of a partial evaluation step, in particular the determination or detection of an object and/or object features, further partial evaluation steps specific and/or provided for the specific and/or detected object and/or object features are applied and /or executed so that further objects and/or object characteristics are determined. This is based on the consideration that not all partial evaluation steps always have to be applied for all objects and/or object features, so that specific evaluations are only applied and/or carried out when a minimum required object and/or object feature is detected and/or determined.

Das Verfahren sieht insbesondere vor, dass potentielle Objekte als bestimmt gelten und/oder potentielle Objekte als detektiert gelten, wenn die Anwendung eines weiteren Teilauswerteschrittes für ein, in einem vorhergehenden Teilauswerteschritt bestimmten und/oder detektierten Objekts erfolglos ist und/oder unanwendbar ist, wobei die Anwendung für das entsprechende Objekt und/oder Objektmerkmalen erfolgreich sein müsste und/oder anwendbar sein müsste. Beispielsweise wird in einem Teilauswerteschritt als ein Objekt eine Person bestimmt, sodass in einem nachfolgenden Teilauswerteschritt die Bestimmung und/oder Detektion eines Gesichtes erfolgreich sein müsste, da alle Personen über Gesichter verfügen. Kann jedoch für diese Person und/oder dieses Objekt der Teilauswerteschritt zur Bestimmung des Gesichts nicht angewendet werden und/oder nur erfolglos angewendet werden, so wird es als potentielles Objekt definiert und/oder festgelegt. Basierend auf so festgelegten und/oder bestimmten potentiellen Objekten kann gezielt die Installation weiterer Kameras veranlasst werden, dass zukünftig auch die weiteren Teilauswerteschritte erfolgreich angewendet werden können.The method provides in particular that potential objects are considered to be determined and/or potential objects are considered to be detected if the application of a further partial evaluation step for an object determined and/or detected in a previous partial evaluation step is unsuccessful and/or inapplicable, whereby the Application would have to be successful and/or applicable for the corresponding object and/or object characteristics. For example, in a partial evaluation step, a person is determined as an object, so that in a subsequent partial evaluation step, the determination and/or detection of a face would have to be successful, since all people have faces. However, if the partial evaluation step for determining the face cannot be used for this person and/or this object and/or can only be used unsuccessfully, then it is defined and/or determined as a potential object. Based on such defined and/or certain potential objects, the installation of additional cameras can be specifically initiated so that the further partial evaluation steps can also be successfully applied in the future.

Eine Ausgestaltung der Erfindung sieht vor, dass basierend auf den potentiellen Objekten, insbesondere den Positionen und/oder Lagen der potentiellen Objekte, den bestimmten Objekten und/oder den bestimmten Objektmerkmale Problembereiche ermittelt und/oder bestimmt werden. Problembereiche sind hierbei insbesondere Abschnitte des Überwachungsbereichs, die durch eine der Kameras und/oder eine weitere Kamera erfasst und/oder aufgenommen werden sollen oder dies ratsam ist. Problembereiche sind insbesondere solche Bereiche, in denen verstärkt potentielle Objekte detektiert, bestimmt und/oder ermittelt werden, da davon auszugehen ist, dass durch eine zusätzliche Erfassung und/oder Aufnahme durch eine weitere Kamera auch die potentiellen Objekte besser ausgewertet, detektiert und/oder bestimmt werden können.One embodiment of the invention provides that problem areas are identified and/or determined based on the potential objects, in particular the positions and/or locations of the potential objects, the specific objects and/or the specific object features. problem area These are, in particular, sections of the surveillance area that are to be captured and/or recorded by one of the cameras and/or another camera, or that this is advisable. Problem areas are in particular those areas in which potential objects are increasingly detected, determined and/or determined, since it can be assumed that additional detection and/or recording by another camera will also better evaluate, detect and/or determine the potential objects can be.

Beispielsweise werden als Problembereiche solche Abschnitte und/oder Bereiche des Überwachungsbereichs definiert und/oder bestimmt, für die mehr potentielle Objekte bestimmt und/oder detektiert werden und/oder wurden als ein erster Schwellwert. Beispielsweise ist der erste Schwellwert von einem Benutzer festgelegt war oder basiert auf einer statistischen Auswertung, beispielsweise einem Mittelwert von bestimmten potentiellen Objekten pro Kamera oder pro m2. Alternativ und/oder ergänzend werden als Problembereiche solche Abschnitte und/oder Bereiche des Überwachungsbereichs bestimmt und/oder festgelegt, für die ein Verhältnis von bestimmten potentiellen Objekten zu bestimmten Objekten und/oder zu bestimmten Objektmerkmalen einen zweiten Schwellwert überschreitet. Diese Ausgestaltung basiert auf der Überlegung, dass Bereiche und/oder Abschnitte für die eine Vielzahl an Objekten und/oder Objektmerkmalen bestimmt werden, insbesondere sicher bestimmt werden, aber auch eine größere Anzahl an potentiellen Objekten aufweist nicht als Problembereich bestimmt wird, da das Verhältnis von potentiellen Objekten zu bestimmten Objekten den zweiten Schwellwert unterschreitet.For example, those sections and/or areas of the monitoring area are defined and/or determined as problem areas for which more potential objects are and/or were determined and/or detected than a first threshold value. For example, the first threshold value was set by a user or is based on a statistical evaluation, for example an average of certain potential objects per camera or per m 2 . Alternatively and/or additionally, those sections and/or areas of the surveillance area are determined and/or defined as problem areas for which a ratio of certain potential objects to certain objects and/or to certain object features exceeds a second threshold value. This embodiment is based on the consideration that areas and/or sections for which a large number of objects and/or object features are determined are, in particular, reliably determined, but also have a larger number of potential objects are not determined as problem areas, since the ratio of potential objects to certain objects falls below the second threshold value.

Insbesondere sieht das Verfahren vor, dass eine Karte generiert und/oder bestimmt wird. Die Karte basiert und/oder beschreibt insbesondere den Überwachungsbereich. Die Karte basiert und/oder umfasst die bestimmten potentiellen Objekte, die bestimmten Objekte, die bestimmten Objektmerkmale, die Erfassungsbereiche und/oder die Problembereiche. Die Karte fasst mit anderen Worten die wesentlichen Ergebnisse des Verfahrens und/oder der Überwachung zusammen.In particular, the method provides that a map is generated and/or determined. The map is based on and/or describes in particular the surveillance area. The map is based on and/or includes the particular potential objects, the particular objects, the particular object features, the coverage areas and/or the problem areas. In other words, the card summarizes the main results of the procedure and/or monitoring.

Besonders bevorzugt ist es, dass die Karte einem Benutzer angezeigt und/oder ausgegeben wird. Beispielsweise umfasst die Überwachungsvorrichtung eine Anzeigeeinheit, wobei dem Benutzer die Karte auf der Anzeigeeinheit angezeigt wird. Der Benutzer, beispielsweise der Fachmann zur Bestimmung der Kameraanordnung oder Kameraverteilung, kann basierend auf der Karte die entsprechenden Problembereiche und/oder potentiellen Objekte zur Veränderung der Kameraanordnung und/oder Ergänzung durch weitere Kameras heranziehen. Besonders bevorzugt ist es, dass die Bestimmung der Karte auf dem Managementsystem erfolgt. Dies ist insbesondere daher vorgesehen, dass das Managementsystem so alle Informationen der Kameras des der Überwachungsvorrichtung zur Generierung der Karte heranziehen kann.It is particularly preferred that the card is displayed and/or issued to a user. For example, the monitoring device comprises a display unit, with the map being displayed to the user on the display unit. The user, for example the expert in determining the camera arrangement or camera distribution, can use the corresponding problem areas and/or potential objects to change the camera arrangement and/or supplement it with additional cameras based on the map. It is particularly preferred that the card is determined on the management system. This is particularly intended so that the management system can use all information from the cameras of the monitoring device to generate the map.

Insbesondere ist es vorgesehen, dass potentielle Objekte, die basierend auf Bilddaten einer der Kameras bestimmt und/oder ermittelt wurden als potentielles Objekt verworfen und/oder aufgegeben wird, wenn das zu dem potentiellen Objekt gehörige Objekt, insbesondere Position und/oder Lage, von einer anderen der Kameras der Überwachungsvorrichtung erfasst, detektiert und/oder aufgenommen wird. Wird beispielsweise das Gesicht einer Person basierend auf den Bilddaten einer Kamera nicht detektiert, da die Person von hinten aufgenommen wird, wird dieses nicht als potentielles Objekt verwendet und/oder weiterverwendet, wenn eine andere Kamera eine Frontansicht aufnimmt und so das Gesicht bestimmbar istIn particular, it is provided that potential objects that have been determined and/or determined based on image data from one of the cameras are discarded and/or abandoned as potential objects if the object belonging to the potential object, in particular position and/or location, is determined by one other of the cameras of the monitoring device is captured, detected and / or recorded. For example, if a person's face is not detected based on the image data from a camera because the person is photographed from behind, this is not used as a potential object and/or further used when another camera records a front view and the face can thus be determined

Einen weiteren Gegenstand der Erfindung bildet ein Computerprogramm zur Ausführung auf einem Computer, der Kamera und/oder der Überwachungsvorrichtung, wobei bei Ausführung des Computerprogramms das Verfahren zum Betreiben der Überwachungsvorrichtung angewendet und/oder implementiert wird.A further subject of the invention is a computer program for execution on a computer, the camera and/or the monitoring device, wherein when the computer program is executed, the method for operating the monitoring device is applied and/or implemented.

Einen weiteren Gegenstand der Erfindung bildet ein Speichermedium, insbesondere ein nicht flüchtiges Speichermedium und/oder ein maschinenlesbares Speichermedium, wobei auf dem Speichermedium das Computerprogramm gespeichert ist.A further subject of the invention is a storage medium, in particular a non-volatile storage medium and/or a machine-readable storage medium, the computer program being stored on the storage medium.

Einen weiteren Gegenstand der Erfindung bildet eine Überwachungsvorrichtung, wobei die Überwachungsvorrichtung insbesondere das Verfahren gemäß der Erfindung anwendet und/oder ausführt. Die Überwachungsvorrichtung umfasst eine Mehrzahl an Kameras, wobei die Kameras jeweils einen Erfassungsbereich aufweisen und Bilddaten aufnehmen. In einem Auswerteschritt werden die Bilddaten ausgewertet und/oder analysiert, wobei in dem Auswerteschritt basierend auf der Analyse und/oder Auswertung Objekte und/oder Objektmerkmale bestimmt und/oder detektiert werden. Ferner erfolgt in der Anwendung des Auswerteschrittes die Bestimmung der potentiellen Objekte basieren auf den Bilddaten. Insbesondere ist es vorgesehen, dass der Auswerteschritt von der Kamera ausgeführt und/oder angewendet wird. Alternativ und/oder ergänzend umfasst die Überwachungsvorrichtung ein Managementsystem, wobei das Managementsystem beispielsweise als eine Cloud ausgebildet ist. Die Managementsysteme sind die Bilddaten und/oder die Analysedaten von den Kameras bereitgestellt. Insbesondere ist es hier vorgesehen, dass das Managementsystem ausgebildet und/oder eingerichtet ist, den Auswerteschritt auszuführen und/oder anzuwenden.A further subject of the invention is a monitoring device, the monitoring device in particular applying and/or executing the method according to the invention. The monitoring device comprises a plurality of cameras, the cameras each having a detection area and recording image data. In an evaluation step, the image data is evaluated and/or analyzed, with objects and/or object features being determined and/or detected in the evaluation step based on the analysis and/or evaluation. Furthermore, when using the evaluation step, the potential objects are determined based on the image data. In particular, it is provided that the evaluation step is carried out and/or applied by the camera. Alternatively and/or additionally, the monitoring device comprises a management system, the management system being designed, for example, as a cloud. The management systems are the image data and/or the analysis data provided by the cameras. In particular, it is provided here that the management system is designed and/or set up to carry out and/or apply the evaluation step.

Weitere Wirkungen Ausgestaltungen und Vorteile ergeben sich aus den beigefügten Figuren und deren Beschreibung. Dabei zeigen:

  • 1 ein Ausführungsbeispiel einer Kamera als Teil einer Überwachungsvorrichtung;
  • 2 einen schematischen Ablauf eines Ausführungsbeispiels des Verfahrens.
Further effects, refinements and advantages result from the attached figures and their description. Show:
  • 1 an embodiment of a camera as part of a monitoring device;
  • 2 a schematic sequence of an exemplary embodiment of the method.

1 zeigt eine Kamera 1 als ein Ausführungsbeispiel. Die Kamera 1 ist Teil einer Überwachungsvorrichtung zur Überwachung eines Überwachungsbereichs 2. Hierzu sind eine Mehrzahl an Kameras 1 verteilt angeordnet und erfassen jeweils einen Erfassungsbereich, für den sie Bilddaten 3 bereitstellen. Die Bilddaten 3 umfassen beispielsweise Videodaten. Die Bilddaten 3 zeigen Objekte und/oder Personen des jeweiligen Abschnitts des Überwachungsbereichs 2. Den Bilddaten 3 werden in einem Auswertemodul 4, welches von der Kamera 1 umfasst ist, ausgewertet und/oder analysiert. Beispielsweise werden hierzu Algorithmen und/oder Verfahren der Bildauswertung, Objektdetektion und/oder Objektklassifizierung ausgeführt und/oder angewendet. Durch Anwendung des Auswerteschritts 200 durch das Auswertemodul 4 werden die Bilddaten 3 auf das Vorhandensein von Objekten 5, beispielsweise einer Person, analysiert und/oder untersucht. 1 shows a camera 1 as an exemplary embodiment. The camera 1 is part of a monitoring device for monitoring a monitoring area 2. For this purpose, a plurality of cameras 1 are arranged in a distributed manner and each capture a detection area for which they provide image data 3. The image data 3 includes, for example, video data. The image data 3 show objects and/or people of the respective section of the surveillance area 2. The image data 3 is evaluated and/or analyzed in an evaluation module 4, which is included in the camera 1. For example, algorithms and/or methods of image evaluation, object detection and/or object classification are carried out and/or applied. By using the evaluation step 200 by the evaluation module 4, the image data 3 is analyzed and/or examined for the presence of objects 5, for example a person.

Erkannte und/oder der detektierten Objekte und/oder Objektmerkmale werden als bestimmte Objekte und/oder bestimmte Objektmerkmale 6 von einem Ergebnismodul 7 gesammelt, gespeichert und/oder ausgegeben. Beispielsweise ist das Ergebnismodul 7 ausgebildet, die bestimmten Objekte und/oder Objektmerkmale 6 einem Benutzer zu visualisieren und/oder anzuzeigen, beispielsweise in Form einer Karte und/oder durch Ausgabe der Auswerteergebnisse. Beispielsweise wird so einem Benutzer angezeigt, dass in den Bilddaten 3 eine Person bestimmt wurde, wobei beispielsweise auch die Identität der Person ermittelt wurde und dem Benutzer ausgegeben wird.Recognized and/or detected objects and/or object features are collected, stored and/or output as specific objects and/or specific object features 6 by a results module 7. For example, the results module 7 is designed to visualize and/or display the specific objects and/or object features 6 to a user, for example in the form of a map and/or by outputting the evaluation results. For example, it is displayed to a user that a person has been identified in the image data 3, whereby, for example, the identity of the person has also been determined and is output to the user.

Das Auswertemodul 4 ist ausgebildet, durch Anwendung des Auswerteschritt 200 basierend auf den Bilddaten 3 potentielle Objekte 8 zu ermitteln. Potentielle Objekte 8 sind beispielsweise Objekte und Objektmerkmale in den Bilddaten 3, die nicht vollständig, nicht fehlerfrei und/oder unvollständig bestimmt und/oder ermittelt werden konnten. Beispielsweise wurde das zum potentiellen Objekt 8 gehörige Objekt 5 nur mit einer Wahrscheinlichkeit von 80 % als Person erkannt und/oder das Gesicht nur mit einer Wahrscheinlichkeit von 40 %, sodass die Detektion und/oder Bestimmung als unsicher gilt. Ein Speichermodul 9 ist ausgebildet die bestimmten potentiellen Objekte 8 zu sammeln und/oder zu speichern. Ein Ergänzungsvorschlagsmodul 10 ist ausgebildet, basierend auf den gesammelten und/oder gespeicherten bestimmten potentiellen Objekten 8, insbesondere den Bilddaten 3, Platzierungsvorschläge zu bestimmen, wobei den Platzierungsvorschlägen beispielsweise Positionen und/oder Lagen im Überwachungsbereich 2 sind, für die die Installation einer zusätzlichen Kamera 1 und Aufnahme weiterer Bilddaten 3 basierend auf den ermittelten potentiellen Objekten 8 sinnvoll erscheint, beispielsweise bei für diesen Bereich eine Vielzahl an potentiellen Objekten ermittelt wird, sodass du die Installation der zusätzlichen Kamera zukünftig weniger potentielle Objekte 8 detektiert werden.The evaluation module 4 is designed to determine potential objects 8 based on the image data 3 by using the evaluation step 200. Potential objects 8 are, for example, objects and object features in the image data 3 that could not be completely, not error-free and/or incompletely determined and/or determined. For example, the object 5 belonging to the potential object 8 was only recognized as a person with a probability of 80% and/or the face was only recognized as a person with a probability of 40%, so that the detection and/or determination is considered uncertain. A storage module 9 is designed to collect and/or store the specific potential objects 8. A supplementary suggestion module 10 is designed to determine placement suggestions based on the collected and/or stored specific potential objects 8, in particular the image data 3, the placement suggestions being, for example, positions and/or locations in the surveillance area 2 for which the installation of an additional camera 1 and recording further image data 3 based on the identified potential objects 8 seems sensible, for example if a large number of potential objects are identified for this area, so that fewer potential objects 8 will be detected in the future if the additional camera is installed.

2 zeigt einen schematischen Verfahrensablauf zum Betreiben der Überwachungsvorrichtung. In einem Verfahrensschritt 100 werden von der Kamera 1 die Bilddaten 3 aufgenommen. Die Bilddaten 3 werden dem Auswerteschritt 200 übergeben und/oder bereitgestellt. Der Auswerteschritt 200 umfasst einen Teilschritt 200a und einen Teilschritt 200b. Im Teilschritt 200a werden für die Bilddaten 3 die Objekte und/oder Objektmerkmale 6 bestimmt und/oder ermittelt. Im Teilschritt 200b erfolgt die Bestimmung der potentiellen Objekte 8. Die Ergebnisse des Auswerteschritts 200 werden einem Verfahrensschritt 300 bereitgestellt. Im Verfahrensschritt 300 werden basierend auf den potentiellen Objekten 8 Problembereiche ermittelt. Die Problembereiche sind beispielsweise Bereiche und/oder Abschnitte des Überwachungsbereichs 2, für die besonders häufig potentielle Objekte 8 detektiert und/oder bestimmt werden und/oder für die das Verhältnis von potenziell bestimmten Objekten 8 zu bestimmten Objekten 6 einen Schwellenwert überschreitet. 2 shows a schematic process flow for operating the monitoring device. In a method step 100, the image data 3 is recorded by the camera 1. The image data 3 is transferred and/or provided to the evaluation step 200. The evaluation step 200 includes a sub-step 200a and a sub-step 200b. In substep 200a, the objects and/or object features 6 are determined and/or determined for the image data 3. In sub-step 200b, the potential objects 8 are determined. The results of the evaluation step 200 are provided to a method step 300. In method step 300, 8 problem areas are determined based on the potential objects. The problem areas are, for example, areas and/or sections of the monitoring area 2 for which potential objects 8 are detected and/or determined particularly frequently and/or for which the ratio of potentially specific objects 8 to specific objects 6 exceeds a threshold value.

Basierend auf den Problembereichen, den potentiellen Objekten 6 und den bestimmten Objekten und/oder Objektmerkmalen 6 wird in einem Kartierungsschritt 400 eine Karte des Überwachungsbereichs 2 ermittelt. Diese Karte ist beispielsweise ein Lageplan des Überwachungsbereichs 2, in dem die Positionen und/oder Lagen der Kameras gezeigt und/oder angetragen sind. Insbesondere sind in der Karte die Problembereiche und/oder Platzierungsvorschläge gezeigt und/oder angetragen.Based on the problem areas, the potential objects 6 and the specific objects and/or object features 6, a map of the monitoring area 2 is determined in a mapping step 400. This map is, for example, a location plan of the surveillance area 2, in which the positions and/or positions of the cameras are shown and/or plotted. In particular, the problem areas and/or placement suggestions are shown and/or indicated on the map.

ZITATE ENTHALTEN IN DER BESCHREIBUNGQUOTES INCLUDED IN THE DESCRIPTION

Diese Liste der vom Anmelder aufgeführten Dokumente wurde automatisiert erzeugt und ist ausschließlich zur besseren Information des Lesers aufgenommen. Die Liste ist nicht Bestandteil der deutschen Patent- bzw. Gebrauchsmusteranmeldung. Das DPMA übernimmt keinerlei Haftung für etwaige Fehler oder Auslassungen.This list of documents listed by the applicant was generated automatically and is included solely for the better information of the reader. The list is not part of the German patent or utility model application. The DPMA assumes no liability for any errors or omissions.

Zitierte PatentliteraturCited patent literature

  • KR 102024695 A1 [0004]KR 102024695 A1 [0004]

Claims (15)

Verfahren zum Betreiben einer Überwachungsvorrichtung, wobei die Überwachungsvorrichtung eine Mehrzahl an Kameras (1) umfasst und ausgebildet ist einen Überwachungsbereich (2) zu überwachen, wobei die Kameras (1) jeweils einen Erfassungsbereich aufweisen und für den Erfassungsbereich Bilddaten (3) aufnehmen, wobei die Erfassungsbereiche Teilbereiche des Überwachungsbereichs (2) bilden, wobei die Bilddaten (3) zur Bestimmung von Objekten (5) und/oder Objektmerkmalen (6) in einem Auswerteschritt (200) ausgewertet und/oder analysiert werden, wobei in dem Auswerteschritt (200) basierend auf den Bilddaten (3) teilweise bestimmte, unsicher bestimmte und/oder fehlerhaft bestimmte Objekte (5) und/oder Objektmerkmale (6) als potentielle Objekte (8) bestimmt werden.Method for operating a monitoring device, wherein the monitoring device comprises a plurality of cameras (1) and is designed to monitor a monitoring area (2), wherein the cameras (1) each have a detection area and record image data (3) for the detection area, the detection areas forming partial areas of the monitoring area (2), wherein the image data (3) for determining objects (5) and/or object features (6) are evaluated and/or analyzed in an evaluation step (200), wherein in the evaluation step (200) based on the image data (3), certain, uncertainly determined and/or incorrectly determined objects (5) and/or object features (6) are determined as potential objects (8). Verfahren nach Anspruch 1, dadurch gekennzeichnet, dass für die potentiellen Objekte (8) eine Position und/oder Lage ermittelt wird,Procedure according to Claim 1 , characterized in that a position and/or location is determined for the potential objects (8), Verfahren nach Anspruch 2, dadurch gekennzeichnet, dass die Position und/oder Lage basierend auf den Bilddaten (3), einer Kameraposition, einer Kameraorientierung und/oder einem Kamerablickwinkel ermittelt wird.Procedure according to Claim 2 , characterized in that the position and/or location is determined based on the image data (3), a camera position, a camera orientation and/or a camera viewing angle. Verfahren nach einem der vorherigen Ansprüche, dadurch gekennzeichnet, dass die Kameras (1) den Auswerteschritt (200) ausführen und/oder auf ihre Bilddaten (3) anwenden.Method according to one of the preceding claims, characterized in that the cameras (1) carry out the evaluation step (200) and/or apply it to their image data (3). Verfahren nach einem der vorherigen Ansprüche, dadurch gekennzeichnet, dass die potentiellen Objekte (5) basierend auf und/oder als eine Rohklassifikation und/oder eine Detektionswahrscheinlichkeit bestimmt werden.Method according to one of the preceding claims, characterized in that the potential objects (5) are determined based on and/or as a raw classification and/or a detection probability. Verfahren nach einem der vorherigen Ansprüche, dadurch gekennzeichnet, dass der Auswerteschritt (200) zur Bestimmung der Objekte (5,8) und/oder der Objektmerkmale (6) eine kaskadierte Auswertung und/oder Bestimmung bildet und Teilauswertungsschritte umfasst, wobei in der kaskadierten Auswertung für ein durch einen Teilauswerteschritt bestimmtes Objekt (5) und/oder Objektmerkmal (6) durch die Anwendung weiterer Teilauswerteschritte weitere Objekte (8) und/oder Objektmerkmale (6) detektiert werden.Method according to one of the preceding claims, characterized in that the evaluation step (200) for determining the objects (5, 8) and/or the object features (6) forms a cascaded evaluation and/or determination and comprises partial evaluation steps, wherein in the cascaded evaluation For an object (5) and/or object feature (6) determined by a partial evaluation step, further objects (8) and/or object features (6) are detected by using further partial evaluation steps. Verfahren nach Anspruch 6, dadurch gekennzeichnet, dass eine Unanwendbarkeit und/oder erfolglose Anwendung der weiteren Teilauswerteschritte einer kaskadierten Auswertung potentielle Objekte (8) liefert und/oder definiert.Procedure according to Claim 6 , characterized in that an inapplicability and/or unsuccessful application of the further partial evaluation steps of a cascaded evaluation delivers and/or defines potential objects (8). Verfahren nach einem der vorherigen Ansprüche, dadurch gekennzeichnet, dass basierend auf den bestimmten potentiellen Objekten (8), den bestimmten Objekten (5) und/oder den bestimmten Objektmerkmalen (6) Problembereiche bestimmt werden, wobei die Problembereiche Abschnitte des Überwachungsbereichs (2) bilden und/oder Bereiche bilden, die einer Erfassung und/oder Aufnahme durch eine weitere Kamera (1) bedürfen.Method according to one of the preceding claims, characterized in that problem areas are determined based on the specific potential objects (8), the specific objects (5) and/or the specific object features (6), the problem areas forming sections of the monitoring area (2). and/or form areas that require detection and/or recording by another camera (1). Verfahren nach Anspruch 8, dadurch gekennzeichnet, dass als Problembereiche Abschnitte des Überwachungsbereichs (2) mit mehr bestimmten potentiellen Objekten (8) als ein erster Schwellwert bestimmt werden und/oder mit einem größeren Verhältnis von bestimmten potentiellen Objekten (8) zu bestimmten Objekten (5) und/oder zu bestimmten Objektmerkmalen als ein zweiter Schwellwert festgelegt werden.Procedure according to Claim 8 , characterized in that sections of the monitoring area (2) with more specific potential objects (8) than a first threshold value are determined as problem areas and/or with a larger ratio of specific potential objects (8) to specific objects (5) and/or for certain object characteristics can be set as a second threshold value. Verfahren nach einem der vorherigen Ansprüche, dadurch gekennzeichnet, dass für den Überwachungsbereich (2) basierend auf den bestimmten potentiellen Objekten (8), den bestimmten Objekten (5), den bestimmten Objektmerkmalen und/oder den Problembereichen eine Karte generiert, bestimmt und/oder ermittelt wird.Method according to one of the preceding claims, characterized in that a map is generated, determined and/or for the monitoring area (2) based on the specific potential objects (8), the specific objects (5), the specific object features and/or the problem areas is determined. Verfahren nach Anspruch 10, dadurch gekennzeichnet, dass die Karte auf einer Anzeigeeinheit einem Benutzer angezeigt wird.Procedure according to Claim 10 , characterized in that the map is displayed to a user on a display unit. Verfahren nach einem der vorherigen Ansprüche, dadurch gekennzeichnet, dass die Überwachungsvorrichtung ein Managementmodul umfasst, wobei die Kameras (1) dem Managementmodul die Bilddaten (3) und/oder Analysedaten bereitstellen, wobei die Analysedaten die bestimmten potentiellen Objekte (8), Objekte (5) und/oder Objektmerkmale umfassen, wobei die potentiellen Objekte (8) und/oder die Karte auf dem Managementmodul bestimmt werden.Method according to one of the preceding claims, characterized in that the monitoring device comprises a management module, wherein the cameras (1) provide the management module with the image data (3) and/or analysis data, the analysis data identifying the specific potential objects (8), objects (5 ) and/or object features, wherein the potential objects (8) and/or the map are determined on the management module. Verfahren nach einem der vorherigen Ansprüche, dadurch gekennzeichnet, dass auf Bilddaten (3) einer der Kameras (1) basierende potentielle Objekte (8) verworfen werden und/oder nicht weiter als potentielle Objekte (8) gehandhabt werden, wenn eine andere der Kameras (1) das zum potentiellen Objekt (8) gehörende Objekt (5) und/oder Objektmerkmal (6) erfasst und/oder aufnimmt.Method according to one of the preceding claims, characterized in that potential objects (8) based on image data (3) of one of the cameras (1) are discarded and/or are no longer handled as potential objects (8) if another of the cameras ( 1) detects and/or records the object (5) and/or object feature (6) belonging to the potential object (8). Computerprogramm zur Ausführung auf einem Computer, einer Kamera (1) und/oder der Überwachungsvorrichtung ausgebildet und/oder eingerichtet, wenigstens einen der Schritte des Verfahrens nach einem der vorherigen Ansprüche auszuführen und/oder zu implementieren.Computer program designed and/or set up for execution on a computer, a camera (1) and/or the monitoring device, to carry out and/or implement at least one of the steps of the method according to one of the preceding claims. Überwachungsvorrichtung mit einer Mehrzahl an Kameras (1), wobei die Überwachungsvorrichtung ausgebildet und/oder eingerichtet ist, das Verfahren nach einem der Ansprüche 1 bis 13 anzuwenden und/oder zu implementieren.Monitoring device with a plurality of cameras (1), wherein the monitoring device is designed and / or set up to use the method according to one of Claims 1 until 13 to apply and/or implement.
DE102022203065.6A 2022-03-29 2022-03-29 Method for operating a monitoring device, computer program, storage medium and monitoring device Pending DE102022203065A1 (en)

Priority Applications (2)

Application Number Priority Date Filing Date Title
DE102022203065.6A DE102022203065A1 (en) 2022-03-29 2022-03-29 Method for operating a monitoring device, computer program, storage medium and monitoring device
PCT/EP2023/057300 WO2023186652A1 (en) 2022-03-29 2023-03-22 Method for operating a monitoring device, computer program, storage medium, and monitoring device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
DE102022203065.6A DE102022203065A1 (en) 2022-03-29 2022-03-29 Method for operating a monitoring device, computer program, storage medium and monitoring device

Publications (1)

Publication Number Publication Date
DE102022203065A1 true DE102022203065A1 (en) 2023-10-05

Family

ID=85873709

Family Applications (1)

Application Number Title Priority Date Filing Date
DE102022203065.6A Pending DE102022203065A1 (en) 2022-03-29 2022-03-29 Method for operating a monitoring device, computer program, storage medium and monitoring device

Country Status (2)

Country Link
DE (1) DE102022203065A1 (en)
WO (1) WO2023186652A1 (en)

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102024695B1 (en) 2017-11-20 2019-09-25 (주)포스트미디어 System and method for modeling surveillance camera layout
US20200380306A1 (en) 2019-06-03 2020-12-03 Wipro Limited System and method for implementing neural network models on edge devices in iot networks
US20210337133A1 (en) 2020-04-27 2021-10-28 Canon Kabushiki Kaisha Method, apparatus and computer program for generating and displaying a heatmap based on video surveillance data

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8781293B2 (en) * 2012-08-20 2014-07-15 Gorilla Technology Inc. Correction method for object linking across video sequences in a multiple camera video surveillance system
GB2570138B (en) * 2018-01-12 2020-07-08 Spotta Ltd System and methods

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102024695B1 (en) 2017-11-20 2019-09-25 (주)포스트미디어 System and method for modeling surveillance camera layout
US20200380306A1 (en) 2019-06-03 2020-12-03 Wipro Limited System and method for implementing neural network models on edge devices in iot networks
US20210337133A1 (en) 2020-04-27 2021-10-28 Canon Kabushiki Kaisha Method, apparatus and computer program for generating and displaying a heatmap based on video surveillance data

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
PÉREZ-HERNÁNDEZ, Francisco [et al.]: Object detection binary classifiers methodology based on deep learning to identify small objects handled similarly: Application in video surveillance. Knowledge-Based Systems, 2020, 194. Jg., S. 105590

Also Published As

Publication number Publication date
WO2023186652A1 (en) 2023-10-05

Similar Documents

Publication Publication Date Title
DE60307967T2 (en) IMAGE PROCESSING FOR THE STUDY OF THE APPEARANCE
AT506928A1 (en) METHOD OF VIDEO ANALYSIS
DE112017005640T5 (en) Information processing apparatus and information processing method
WO2009003793A2 (en) Device for identifying and/or classifying movement patterns in an image sequence of a surveillance scene, method and computer program
DE102009044083A1 (en) System and method for counting the number of persons
DE112017006891T5 (en) MOTOR MESSAGE DEVICE, SKILL DISTORTION DEVICE AND SKILL DISTORTION SYSTEM
WO2001065470A1 (en) Method for analysing fingerprint images
DE102007034010A1 (en) Method and device for processing video data
DE19633693C1 (en) Method of detecting target pattern in static or dynamic systems
DE102020203475A1 (en) Anonymization device, monitoring device, method, computer program and storage medium
WO2013037357A1 (en) Automatic learning method for the automatic learning of forms of appearance of objects in images
DE102020203473A1 (en) Anonymization device, monitoring device, method, computer program and storage medium
DE112017006976T5 (en) OVERLAY POSITION CORRECTION DEVICE AND OVERLAY POSITION CORRECTION
DE102022203065A1 (en) Method for operating a monitoring device, computer program, storage medium and monitoring device
DE102009048117A1 (en) Method and device for detecting a misdetection of an object in an image
EP1273007A1 (en) Method for determining a characteristic data record for a data signal
DE112018007522T5 (en) WORK ANALYSIS DEVICE
EP3663976B1 (en) Method for detecting fingerprints
DE102022203062A1 (en) Method for determining camera addition suggestions for a monitoring device, computer program, storage medium and monitoring device
DE102020108972A1 (en) SYSTEM AND METHOD OF TRACKING THE MOVING OBJECTS
DE102006027120A1 (en) Image processing method, video surveillance system and computer program
DE102022202668A1 (en) Method for monitoring a surveillance area, computer program, storage medium and device
DE102007001273A1 (en) Method for the automatic analysis of object movements
DE102022203061A1 (en) Method for operating a monitoring device, computer program, storage medium and monitoring device
DE102011075335A1 (en) Method for the computer-aided estimation of an object

Legal Events

Date Code Title Description
R163 Identified publications notified