DE102012201929A1 - Verfahren und Vorrichtung zum Erkennen einer Gefahrensituation für ein Fahrzeugteil eines Fahrzeugs - Google Patents

Verfahren und Vorrichtung zum Erkennen einer Gefahrensituation für ein Fahrzeugteil eines Fahrzeugs Download PDF

Info

Publication number
DE102012201929A1
DE102012201929A1 DE201210201929 DE102012201929A DE102012201929A1 DE 102012201929 A1 DE102012201929 A1 DE 102012201929A1 DE 201210201929 DE201210201929 DE 201210201929 DE 102012201929 A DE102012201929 A DE 102012201929A DE 102012201929 A1 DE102012201929 A1 DE 102012201929A1
Authority
DE
Germany
Prior art keywords
vehicle
foreign object
dangerous situation
detected
situation
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
DE201210201929
Other languages
English (en)
Inventor
Guenter Bauer
Thomas Reicher
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Bayerische Motoren Werke AG
Original Assignee
Bayerische Motoren Werke AG
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Bayerische Motoren Werke AG filed Critical Bayerische Motoren Werke AG
Priority to DE201210201929 priority Critical patent/DE102012201929A1/de
Publication of DE102012201929A1 publication Critical patent/DE102012201929A1/de
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G08SIGNALLING
    • G08GTRAFFIC CONTROL SYSTEMS
    • G08G1/00Traffic control systems for road vehicles
    • G08G1/16Anti-collision systems
    • G08G1/165Anti-collision systems for passive traffic, e.g. including static obstacles, trees

Landscapes

  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Traffic Control Systems (AREA)
  • Image Analysis (AREA)

Abstract

Ein Fahrzeug weist zumindest eine Kamera auf, die dazu ausgebildet und angeordnet ist, zumindest einen Teil einer Fahrzeugoberfläche des Fahrzeugs zu erfassen. Es werden Bilddaten zumindest eines durch die Kamera erfassten Bildes (PIC) dahingehend überprüft, ob in einem vorgegebenen Bildbereich (BB), der den erfassten Teil der Fahrzeugoberfläche repräsentiert ohne ein Fremdobjekt, ein Teilbereich (TB_i) durch das Fremdobjekt überdeckt ist. Abhängig davon wird die Gefahrensituation (GFS) erkannt.

Description

  • Die Erfindung betrifft ein Verfahren und eine Vorrichtung zum Erkennen einer Gefahrensituation für ein Fahrzeugteil eines Fahrzeugs.
  • Fahrzeuge werden zunehmend mit einer oder mehreren Kameras ausgestattet, die außen, also an der Peripherie des Fahrzeugs, angebracht sind. So kann eine derartige Kamera beispielsweise an einem Außenspiegel des Fahrzeugs angeordnet sein. Derartige Kameras können den Fahrzeugführer unterstützen in der Wahrnehmung des Außenbereichs des Fahrzeugs.
  • Aus Sicht des Fahrzeugführers ist es wünschenswert eine Gefahrensituation für ein Fahrzeugteil zu erkennen, insbesondere möglichst frühzeitig zu erkennen, und um gegebenenfalls Maßnahmen einleiten zu können, die einer Abwehr der Gefahrensituation dienen. Eine derartige Gefahrensituation kann beispielsweise eine drohende Beschädigung des Fahrzeugteils durch ein Fremdobjekt sein. Ein derartiges Fremdobjekt kann beispielsweise ein Bordstein sein.
  • Die Aufgabe, die der Erfindung zugrunde liegt, ist es ein Verfahren und eine Vorrichtung zum Erkennen einer Gefahrensituation für ein Fahrzeugteil eines Fahrzeugs zu schaffen, das bzw. die zu einem einfachen Erkennen der Gefahrensituation zuverlässig beiträgt.
  • Die Aufgabe wird gelöst durch die Merkmale der unabhängigen Patentansprüche. Vorteilhafte Ausgestaltungen sind in den Unteransprüchen gekennzeichnet.
  • Die Erfindung zeichnet sich aus durch ein Verfahren und eine korrespondierende Vorrichtung zum Erkennen einer Gefahrensituation für ein Fahrzeugteil eines Fahrzeugs mit zumindest einer Kamera, die dazu ausgebildet und angeordnet ist zumindest einen Teil einer Fahrzeugoberfläche des Fahrzeugs zu erfassen. Bilddaten zumindest eines durch die Kamera erfassten Bildes werden dahingehend überprüft, ob in einem vorgegebenen Bildbereich, der den erfassten Teil der Fahrzeugoberfläche repräsentiert ohne ein Fremdobjekt, ein Teilbereich durch das Fremdobjekt überdeckt ist und abhängig davon wird auf eine Gefahrensituation erkannt.
  • Auf diese Weise kann besonders einfach die Gefahrensituation erkannt werden und so beispielsweise die Kamera genutzt werden, die für anderweitige Zwecke bereits ohnehin vorgesehen sein kann. Der vorgegebene Bildbereich kann beispielsweise in einem Datenspeicher hinterlegt sein, insbesondere durch entsprechende vorgegebene Referenzwerte der zugehörigen Bilddaten. Der vorgegebene Bildbereich und die Referenzwerte können beispielsweise abhängig von einem unter einer vorgegebenen Referenzbedingung durch die Kamera aufgenommenen Bild ermittelt sein. Die Referenzbedingung ist insbesondere so vorgegeben, dass sichergestellt ist, dass der erfasste Teil der Fahrzeugoberfläche ohne das Fremdobjekt erfasst wird.
  • Im Falle eines Erkennens der Gefahrensituation kann eine Maßnahme ergriffen werden, beispielsweise in Form einer Warnung, die beispielsweise akustisch und/oder optisch erfolgen kann.
  • Gemäß einer vorteilhaften Ausgestaltung wird zum Erkennen der Gefahrensituation eine Sequenz von Bildern durch die zumindest eine Kamera erfasst und abhängig von einer Veränderung des durch das Fremdobjekt überdeckten Teilbereichs auf die Gefahrensituationen erkannt. Auf diese Weise kann besonders präzise die Gefahrensituation erkannt werden. Es könnnen so ferner gegebenenfalls auch Rückschlüsse gezogen werden auf eine Annäherungsgeschwindigkeit des Fremdobjekts auf das jeweilige Fahrzeugteil.
  • Ausführungsbeispiele der Erfindung sind in den schematischen Zeichnungen näher erläutert. Es zeigen:
  • 1 ein Fahrzeug mit einer Steuervorrichtung und
  • 2 ein Ablaufdiagramm eines Programms, das in der Steuervorrichtung abgearbeitet wird.
  • Ein Fahrzeug 1 weist ein Fahrzeugteil 3 auf, das grundsätzlich ein beliebiges Teil des Fahrzeugs sein kann. Beispielsweise kann das Fahrzeugteil ein Rad 3 des Fahrzeugs sein. Es kann jedoch beispielsweise auch ein Kotflügel oder ein beliebiges anderes Karosserieelement sein.
  • Ferner weist das Fahrzeug 1 zumindest eine Kamera 5 auf. Die Kamera 5 ist dazu ausgebildet und angeordnet zumindest einen Teil einer Fahrzeugoberfläche des Fahrzeugs 1 zu erfassen. Sie kann dazu beispielsweise in einem Außenspiegel 7 des Fahrzeugs 1 angeordnet sein. Sie kann jedoch beispielsweise auch im Heckbereich des Fahrzeugs angeordnet sein oder auch beispielsweise im Frontbereich, so zum Beispiel im Bereich des Kühlergrills angeordnet sein. Bevorzugt weist sie beispielsweise sogenannte Fish-Eye-Linsen auf, mit denen ein besonders großer Blickwinkel, von beispielsweise bis zu 190° möglich ist.
  • Bei geeigneter Anordnung insbesondere mehrerer derartiger Kameras 5 kann gegebenenfalls ein Großteil der Fahrzeugoberfläche des Fahrzeugs erfasst werden oder zumindest diejenigen Teile der Fahrzeugoberfläche erkannt werden die grundsätzlich kollisionsgefährdet sind mit einem Fremdobjekt 9.
  • Das Fremdobjekt 9 kann beispielsweise ein Randstein sein, der beispielsweise bei zu starker Annäherung eine Felge eines Rades beschädigen kann oder auch einen Teil der Karosserie beschädigen kann. Das Fremdobjekt kann aber auch grundsätzlich ein beliebiges anderes Objekt sein.
  • Das Fahrzeug weist ferner eine Steuervorrichtung 13 auf, die mit der zumindest einen Kamera 5 derart signaltechnisch gekoppelt ist, dass sie Bilddaten von durch die Kamera 5 erfassten Bildern PIC empfangen kann. Darüber hinaus kann die Steuervorrichtung 13 auch noch mit weiteren Sensoren, die dem Fahrzeug 1 zugeordnet sind, signaltechnisch gekoppelt sein.
  • Die Steuervorrichtung 13 weist einen Daten- und Programmspeicher auf und weist ferner eine Recheneinheit auf, in der Programme während des Betriebs des Fahrzeugs 1 abgearbeitet werden, die insbesondere in dem Daten- und Programmspeicher gespeichert sind. Darüber hinaus weist die Steuervorrichtung 13 bevorzugt eine Ausgabeschnittstelle auf, über die sie signaltechnisch gekoppelt ist beispielsweise mit einer optischen oder akustischen Ausgabeeinheit. Auf diese Weise können insbesondere erkannte Gefahrensituationen GFS dem Fahrzeugführer geeignet signalisiert werden.
  • Die Steuervorrichtung 13 kann auch als Vorrichtung zum Erkennen einer Gefahrensituation für ein Fahrzeugteil des Fahrzeugs 1 bezeichnet werden. Sie ist dazu ausgebildet Bilddaten zumindest eines durch die Kamera 5 erfassten Bildes PIC dahingehend zu überprüfen, ob in einem vorgegebenen Bildbereich BB, der den erfassten Teil der Fahrzeugoberfläche repräsentiert ohne ein Fremdobjekt, ein Teilbereich TB_i durch das Fremdobjekt 9 überdeckt ist und abhängig davon auf die Gefahrensituation GFS zu erkennen.
  • Zu diesem Zweck wird in der Steuervorrichtung 13 ein Programm abgearbeitet, das im Folgenden anhand des Ablaufdiagramms der 2 näher erläutert ist. Das Programm wird in einem Schritt S1 gestartet, in dem gegebenenfalls Variablen initialisiert werden können. In einem Schritt S3 werden Bilddaten eines erfassten Bildes PIC eingelesen.
  • Nachfolgend wird in einem Schritt S5 überprüft, ob in dem vorgegebenen Bildbereich BB, der den erfassten Teil der Fahrzeugoberfläche repräsentiert ohne das Fremdobjekt 9, ein Teilbereich TB_i durch das Fremdobjekt FO überdeckt ist. Dies kann beispielsweise dadurch erfolgen, dass der vorgegebene Bildbereich BB mit Referenzbilddaten überprüft wird, die in dem Daten- und Programmspeicher abgelegt sind und beispielsweise unter Referenzbedingungen mittels eines durch die Kamera 5 erfassten Bildes PIC ermittelt worden sind, unter denen sich kein Fremdobjekt FO in dem erfassten Teil der Fahrzeugoberfläche befand.
  • In diesem Zusammenhang wird die Erkenntnis genutzt, dass bei gleicher Ausrichtung der Kamera 5 ohne das Vorhandensein eines Fremdobjekts 9 immer in dem vorgegebenen Bildbereich BB der gleiche erfasste Teil der Fahrzeugoberfläche repräsentiert ist. Abhängig von einer Abweichung der Referenzwerte und der Werte der Bilddaten bei dem aktuell erfassten Bild PIC in dem vorgegebenen Bildbereich BB kann so einfach auf die Gefahrensituation GFS ausgelöst durch das Fremdobjekt 9 erkannt werden.
  • In der 1 ist eine beispielhafte Situation dargestellt, in der ein Sichtstrahl 11 von der Kamera 5 hin zu einem erfassten Teil der Fahrzeugoberfläche durch das Fremdobjekt 9, das in diesem Fall beispielsweise der Randstein ist, unterbrochen ist.
  • Falls in dem Schritt S5 erkannt wurde, dass der vorgegebene Bildbereich des erfassten Bildes PIC zumindest in einem Teilbereich TB_i durch das Fremdobjekt FO überdeckt ist, wird abhängig davon auf eine Gefahrensituation GFS in einem Schritt S7 erkannt.
  • Grundsätzlich muss nicht zwingenderweise direkt bei erstmaliger Erkennung der Überdeckung eines Teilbereichs TB_i durch das Fremdobjekt 9 unmittelbar auf die Gefahrensituation GFS erkannt werden. Vielmehr kann beispielsweise auch eine Sequenz von Bildern PIC erfasst werden und dahingehend ausgewertet werden und beispielsweise erst nach einer vorgegebenen Anzahl an Erkennungen des Fremdobjekts 9 bei verschiedenen erfassten Bildern PIC auf die Gefahrensituation GFS erkannt werden.
  • Falls in dem Schritt S5 nicht erkannt wurde, dass ein Teilbereich TB_i des erfassten Bildes PIC durch das Fremdobjekt 9 überdeckt ist, wird die Bearbeitung, bevorzugt nach einer vorgegebenen Wartezeitdauer, erneut in dem Schritt S3 fortgesetzt.
  • Alternativ oder zusätzlich kann die Bearbeitung im Falle des Erkennens einer Überlagerung eines Teilbereichs TB_i durch das Fremdobjekt 9 in dem Schritt S5 die Bearbeitung in einem Schritt S9 fortgesetzt werden und der jeweilige Teilbereich TB_i, in dem das Fremdobjekt FO erfasst wurde, entsprechend zwischengespeichert werden. Bei nachfolgenden Durchläufen durch den Schritt S9 wird dann der jeweils ermittelte Teilbereich TB_I zusätzlich zwischengespeichert.
  • In einem nachfolgenden Schritt S11 können die den jeweiligen erfassten Bildern PIC zugeordneten Teilbereiche TB_i eingesetzt werden um durch Ermitteln der Veränderung des durch das Fremdobjekt FO überdeckten Teilbereichs TB_i auf die Gefahrensituation zu erkennen. Auf diese Weise kann beispielsweise einfach ermittelt werden, ob sich das Fremdobjekt 9 dem jeweiligen Fahrzeugteil annähert oder nicht. Auch kann so grundsätzlich unter Berücksichtigung des zeitlichen Zusammenhangs der ausgewerteten erfassten Bilder PIC auf eine Annäherungsgeschwindigkeit des Fremdobjekts 9 auf das jeweilige Fahrzeugteil 3 rückgeschlossen werden. Auf diese Weise kann in dem Schritt S11 die Gefahrensituation GSF erkannt werden oder erkannt werden, dass keine Gefahrensituation GFS vorliegt. Im Anschluss an die Bearbeitung des Schrittes S11 wird die Bearbeitung bevorzugt nach der vorgegebenen Wartezeitdauer erneut in dem Schritt S3 fortgesetzt.
  • Bezugszeichenliste
  • PIC
    erfasstes Bild
    BB
    vorgegebener Bildbereich
    FO
    Fremdobjekt
    TB_i
    Teilbereich
    GFS
    Gefahrensituation
    1
    Fahrzeug
    3
    Fahrzeugteil
    5
    Kamera
    7
    Außenspiegel
    9
    Fremdobjekt
    11
    Sichtstrahl
    13
    Steuervorrichtung

Claims (3)

  1. Verfahren zum Erkennen einer Gefahrensituation (GFS) für ein Fahrzeugteil eines Fahrzeugs (1) mit zumindest einer Kamera (5), die dazu ausgebildet und angeordnet ist zumindest einen Teil einer Fahrzeugoberfläche des Fahrzeugs (1) zu erfassen, wobei Bilddaten zumindest eines durch die Kamera (5) erfassten Bildes (PIC) dahingehend überprüft werden, ob in einem vorgegebenen Bildbereich (BB), der den erfassten Teil der Fahrzeugoberfläche repräsentiert ohne ein Fremdobjekt (9), ein Teilbereich (TB_i) durch das Fremdobjekt (FO) überdeckt ist und abhängig davon auf die Gefahrensituation (GFS) erkannt wird.
  2. Verfahren nach Anspruch 1, bei dem zum Erkennen der Gefahrensituation (GFS) eine Sequenz von Bildern (PIC) erfasst wird und abhängig von einer Veränderung des durch das Fremdobjekt (9) überdeckten Teilbereichs (TB_i) auf die Gefahrensituation (GFS) erkannt wird.
  3. Vorrichtung zum Erkennen einer Gefahrensituation (GFS) für ein Fahrzeugteil eines Fahrzeugs (1) mit zumindest einer Kamera (5), die dazu ausgebildet und angeordnet ist zumindest einen Teil einer Fahrzeugoberfläche des Fahrzeugs (1) zu erfassen, wobei die Vorrichtung dazu ausgebildet ist, Bilddaten zumindest eines durch die Kamera (5) erfassten Bildes (PIC) dahingehend zu überprüfen, ob in einem vorgegebenen Bildbereich (BB), der den erfassten Teil der Fahrzeugoberfläche repräsentiert ohne ein Fremdobjekt (9), ein Teilbereich (TB_i) durch das Fremdobjekt (9) überdeckt ist und abhängig davon auf die Gefahrensituation (GFS) erkannt wird.
DE201210201929 2012-02-09 2012-02-09 Verfahren und Vorrichtung zum Erkennen einer Gefahrensituation für ein Fahrzeugteil eines Fahrzeugs Pending DE102012201929A1 (de)

Priority Applications (1)

Application Number Priority Date Filing Date Title
DE201210201929 DE102012201929A1 (de) 2012-02-09 2012-02-09 Verfahren und Vorrichtung zum Erkennen einer Gefahrensituation für ein Fahrzeugteil eines Fahrzeugs

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
DE201210201929 DE102012201929A1 (de) 2012-02-09 2012-02-09 Verfahren und Vorrichtung zum Erkennen einer Gefahrensituation für ein Fahrzeugteil eines Fahrzeugs

Publications (1)

Publication Number Publication Date
DE102012201929A1 true DE102012201929A1 (de) 2013-08-14

Family

ID=48868284

Family Applications (1)

Application Number Title Priority Date Filing Date
DE201210201929 Pending DE102012201929A1 (de) 2012-02-09 2012-02-09 Verfahren und Vorrichtung zum Erkennen einer Gefahrensituation für ein Fahrzeugteil eines Fahrzeugs

Country Status (1)

Country Link
DE (1) DE102012201929A1 (de)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9359009B2 (en) 2014-03-22 2016-06-07 Ford Global Technologies, Llc Object detection during vehicle parking

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE19932779A1 (de) * 1999-07-14 2001-01-25 Daimler Chrysler Ag Rückfahrhilfe
DE202005006903U1 (de) * 2005-04-25 2006-08-31 Brose Fahrzeugteile Gmbh & Co. Kommanditgesellschaft, Coburg Kollisionsschutzvorrichtung für einen Außenspiegel

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE19932779A1 (de) * 1999-07-14 2001-01-25 Daimler Chrysler Ag Rückfahrhilfe
DE202005006903U1 (de) * 2005-04-25 2006-08-31 Brose Fahrzeugteile Gmbh & Co. Kommanditgesellschaft, Coburg Kollisionsschutzvorrichtung für einen Außenspiegel

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9359009B2 (en) 2014-03-22 2016-06-07 Ford Global Technologies, Llc Object detection during vehicle parking

Similar Documents

Publication Publication Date Title
EP3727936B1 (de) Verfahren zum erkennen von zumindest einem an einem kraftfahrzeug anliegenden objekt sowie steuervorrichtung und kraftfahrzeug
DE102014109062A1 (de) Verfahren zum Verfolgen eines sich einem Kraftfahrzeug nähernden Zielfahrzeugs mittels eines Kamerasystems des Kraftfahrzeugs, Kamerasystem und Kraftfahrzeug
DE102014107917A1 (de) Verfahren und Vorrichtung zum Vermeiden einer Kollision eines ein Kraftfahrzeug und einen Anhänger umfassenden Gespanns mit einem Hindernis
DE102009029439A1 (de) Verfahren und Vorrichtung zur Darstellung von Hindernissen in einem Einparkhilfesystem von Kraftfahrzeugen
EP3409551B1 (de) Verfahren und vorrichtung zur unterstützung eines in einem fahrzeug befindlichen fahrzeuginsassen
DE102010055583A1 (de) Kraftfahrzeug mit einer Kamera und Verfahren zum Betreiben eines Kamerasystems in einem Kraftfahrzeug
DE212017000196U1 (de) Kraftfahrzeug mit einer Vorrichtung zum Messen eines Abstands zwischen einem ersten Fahrzeug und einem zweiten, dem ersten Fahrzeug unmittelbar vorausfahrenden, Fahrzeug
DE102013022076A1 (de) Verfahren zum Bestimmen einer Breite eines Zielfahrzeugs mittels eines Kamerasystems eines Kraftfahrzeugs, Kamerasystem und Kraftfahrzeug
DE102011016217A1 (de) Verfahren und Kamerasystem zum Warnen eines Fahrers eines Kraftfahrzeugs vor einer Kollisionsgefahr und Kraftfahrzeug mit einem Kamerasystem
DE102009040674A1 (de) Verfahren und Vorrichtung zur Unterstützung eines Fahrers eines Fahrzeugs bei der Durchführung eines Überholmanövers
DE102012220191A1 (de) Verfahren zur Unterstützung eines Fahrers bei der Querführung eines Fahrzeugs
DE102012204541A1 (de) Verfahren und Vorrichtung zur Bildverarbeitung von Bilddaten
DE102012201929A1 (de) Verfahren und Vorrichtung zum Erkennen einer Gefahrensituation für ein Fahrzeugteil eines Fahrzeugs
DE102017211887A1 (de) Verfahren und Vorrichtung zum Lokalisieren und automatisierten Betreiben eines Fahrzeugs
DE102020112549A1 (de) Verfahren zum Vermessen eines an einem Fahrzeug angeordneten Anbauteils auf Grundlage von Bildern eines mobilen Endgeräts, Recheneinrichtung sowie Fahrerassistenzsystem
DE102016003574A1 (de) Verfahren zur Überwachung einer unmittelbaren Fahrzeugumgebung
DE102015211079A1 (de) Anzeige der Radspur eines Fahrzeugs
DE102018008683A1 (de) Verfahren zum Ermöglichen der Identifizierung eines rücksichtslosen Fahrers eines Straßenfahrzeugs, System, Computerprogramm, computerlesbares Medium und Fahrzeug
WO2018065325A1 (de) Ermittlung von identifizierungsmerkmalen eines unfallteilnehmers bei einem unfall des unfallteilnehmers mit einem kraftfahrzeug
DE102011100820A1 (de) Verfahren zum Detektieren eines Hindernisses in der Umgebung eines Kraftfahrzeugs, Fahrerassistenzeinrichtung und Kraftfahrzeug
DE102012222598A1 (de) Verfahren und Vorrichtung zum Felgen- und/oder Reifenschutz bei einem Einparkvorgang eines Fahrzeugs
DE102016224574A1 (de) Verfahren und Vorrichtung zum Erkennen eines unzulässigen Parkraums und Einparksystem
DE102016009022A1 (de) Verfahren zur Erkennung von Nässe auf einer Fahrbahn
DE102016109858A1 (de) Verfahren zum Erfassen einer Kollision zwischen einem Kraftfahrzeug und einem Objekt anhand von Objektdaten einer digitalen Umgebungskarte, Vorrichtung, Fahrerassistenzsystem sowie Kraftfahrzeug
WO2021004886A1 (de) Vorrichtung und verfahren zur objekterkennung im unterbodenbereich eines kraftfahrzeuges

Legal Events

Date Code Title Description
R163 Identified publications notified
R012 Request for examination validly filed
R016 Response to examination communication