EP1563497A1 - Sprachsteuerung von audio- und videogeräten - Google Patents

Sprachsteuerung von audio- und videogeräten

Info

Publication number
EP1563497A1
EP1563497A1 EP04766487A EP04766487A EP1563497A1 EP 1563497 A1 EP1563497 A1 EP 1563497A1 EP 04766487 A EP04766487 A EP 04766487A EP 04766487 A EP04766487 A EP 04766487A EP 1563497 A1 EP1563497 A1 EP 1563497A1
Authority
EP
European Patent Office
Prior art keywords
data
text
text data
multimedia
audio
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Withdrawn
Application number
EP04766487A
Other languages
English (en)
French (fr)
Inventor
Klaus Lukas
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Siemens AG
Original Assignee
Siemens AG
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Siemens AG filed Critical Siemens AG
Publication of EP1563497A1 publication Critical patent/EP1563497A1/de
Withdrawn legal-status Critical Current

Links

Classifications

    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B19/00—Driving, starting, stopping record carriers not specifically of filamentary or web form, or of supports therefor; Control thereof; Control of operating function ; Driving both disc and head
    • G11B19/02—Control of operating function, e.g. switching from recording to reproducing

Definitions

  • voice control of CD devices is carried out using commands for the basic commands such as "stop”, “play”, “pause” etc.
  • the selection of the tracks to be played is entered using the number of the track, for example by "Play 5".
  • the recognizer can limit himself to recognizing the command word in connection with a number. However, since the user often does not know the assignment of the titles to the number on the CD, this procedure is uncomfortable.
  • the object of the invention is to make the operation of audio and video devices easier, more comfortable and more secure.
  • multimedia data is stored on a storage medium.
  • Text data is assigned to the multimedia data.
  • the text data are assigned as grapheme phonemes. Then the text data with their associated phonemes can be used as the vocabulary of a speech recognizer.
  • Multimedia data can be audio, video or image data.
  • the storage medium can be an audio CD, a video CD, a DVD, an mp3 player, a hard disk video recorder, a
  • Hard disk a photo CD, a floppy disk, a USB stick, a mini disc or any other permanently installed or exchangeable or portable storage medium.
  • the multimedia data is audio data and the storage medium is a CD.
  • the text data assigned to the audio data is stored on the CD as CD-Text. These can then be used directly for the grapheme-to-phoneme conversion.
  • the multimedia data can be, for example, MP3 data.
  • the text data are preferably stored in a playlist.
  • the text data assigned to the multimedia data can also be generally stored in a table of contents of the storage medium which contains the multimedia data.
  • the multimedia data is video data.
  • the storage medium can be a DVD, for example.
  • the text data assigned to the multimedia data can be called up from a central database, in particular via the Internet from an Internet database.
  • the text data preferably contain the name of the artist or interpreters and / or the title of the multimedia data to which they are assigned.
  • a multimedia device is controlled via the method with the aid of the speech recognizer.
  • the multimedia device can be a CD player, an MP3 player, a CD changer, a mini
  • Disc player a video recorder, a DVD player or a comparable device.
  • the text data can be output acoustically via a text-to-speech conversion, so that the user's options, in particular with regard to title and artist, are read out.
  • An arrangement which is set up to carry out one of the methods described can be implemented, for example, by programming and setting up a data processing system using means associated with the method steps mentioned.
  • the arrangement can be, for example, a car radio, in particular integrated with a navigation system, a CD player and / or a DVD player. Further features and advantages of the invention result from the description of exemplary embodiments.
  • grapheme-to-phoneme technology is used in an embedded speech recognizer to convert the title names of songs into phoneme sequences and to be used as a recognizer vocabulary for the speech control of CD, DVD and / or MP3 players , This allows the user to directly select the
  • the title can be recognized when the voice is entered and assigned to a specific CD.
  • the changer can insert the desired CD and play the selected song.
  • the vocabulary size in a 5-way changer, each with 20 players per CD, is therefore about 100 entries. This is a vocabulary size that can be covered with common speech recognition technology.
  • the song titles are in text form on CD-text-compatible CDs.
  • the title list can be made available by download.
  • Text data from audio and / or video media are therefore used as the vocabulary base for the speech recognizer.
  • the direct voice selection of song titles allows a comfortable and for The driver's method of operating the CD and MP3 equipment in vehicles is not distracting.
  • this direct language selection can be realized and made available to the user in the context of his voice user interface.
  • the method presented is easy to detect due to its visibility on the user interface. Due to the significant increase in comfort, the added value by the user is large and recognizable. Since speaker-independent systems will also prevail in the automotive sector in the long term, voice CD and / or DVD control is an ideal addition.
  • the method can be used, for example, directly for CDs in CD-Text format.
  • additional data are stored on an audio CD, so-called "sub-channels”.
  • the q-sub-channel contains, for example, information about the current position.
  • the Leadin area holds a special position.
  • the lead-in area is an area before the normal music data and contains the "Table of Contents" (TOC) of the CD in the q-sub-channels, ie the table of contents of the CD.
  • TOC Table of Contents
  • the starting positions of the individual tracks are stored in the TOC.
  • the CD-Text information is now stored in the sub-channels r-w of the Leadins, for example the name of the CD, the names of the tracks and the artists.
  • a vocabulary can be generated dynamically for the speech recognizer. Thanks to grapheme-to-phoneme conversion, the text data can be converted into recognizable phoneme chains. The vocabulary or parts thereof can then be used to control the audio and / or video device for operation.

Landscapes

  • Signal Processing For Digital Recording And Reproducing (AREA)

Abstract

Zu Audio- und/oder Videodaten vorliegende Textinformationen werden in einer Graphem-zu-Phonem-Konvertierung Phonemen zugeordnet und als Vokabular für einen Spracherkenner verwendet.

Description

Beschreibung
Sprachsteuerung von Audio- und Videogeräten
Durch die Gesetzgebung und zur Erhöhung der Sicherheit wird die Benutzung von Spracherkennung bei Applikationen im Automotive-Bereich in Zukunft verstärkt Anwendung finden. Neben Telephonieanwendungen werden Sprachsteuerungen mittlerweile auch für Telematiksysteme, Infotainment-Systeme und In-Car- Systeme wie Klimaanlagen eingesetzt. Das verwendete Vokabular ist durch die aktuellen Erkenner bedingt einfach strukturiert und in der Regel kommandobasiert.
Die Sprachsteuerung von CD-Geräten erfolgt dabei in derzeiti- gen Produkten mittels Kommandos für die Grundbefehle wie etwa "Stopp", "Play", "Pause" etc. Die Auswahl der zu spielenden Titel wird mittels der Nummer des Titels eingegeben, also beispielsweise durch "Play 5". Der Erkenner kann sich dabei auf das Erkennen des Kommandowortes in Verbindung mit einer Zahl beschränken. Da der Benutzer jedoch die Zuordnung der Titel zur Nummer auf der CD oftmals nicht kennt, ist dies Vorgehensweise unkomfortabel.
Davon ausgehend liegt der Erfindung die Aufgabe zugrunde, die Bedienung von Audio- und Videogeräten einfacher, komfortabler und sicherer zu machen.
Diese Aufgabe wird durch die in den unabhängigen Patentansprüchen angegebenen Erfindungen gelöst. Vorteilhafte Ausges- taltungen ergeben sich aus den abhängigen Ansprüchen.
Dementsprechend sind in einem Verfahren zur Spracherkennung Multimediadaten auf einem Speichermedium gespeichert. Den Multimediadaten sind Textdaten zugeordnet. In einer Graphem- zu-Phonem-Konvertierung werden die Textdaten als Grapheme Phonemen zugeordnet. Sodann können die Textdaten mit ihren zugehörigen Phonemen als Vokabular eines Spracherkenners verwendet werden .
Dadurch ergibt sich ein sehr reduziertes und auf die jeweilige Audio- und/oder Videoanwendung spezifiziertes Erkennervokabular, das auch von einem Spracherkenner mit sehr geringen Ressourcen verarbeitet werden kann, wie er üblicherweise bei eingebetteten Spracherkennungslösungen im Auto oder in anderen Video- und/oder Audiogeräten vorliegt.
Durch diese Vorgehensweise wird es ermöglicht, einen Titel beispielsweise durch "Play Waterloo" oder nur "Waterloo" direkt einzugeben, ohne dass der Benutzer sich während der Autofahrt nebenbei noch die richtige Titelnummer überlegen muss. Speziell bei Audiosystemen mit CD-Wechslern ist ein direkter Zugriff wünschenswert.
Multimediadaten können Audio-, Video- oder Bilddaten sein. Das Speichermedium kann eine Audio-CD, eine Video-CD, eine DVD, ein mp3~Player, ein Festplatten-Videorekorder, eine
Festplatte, eine Photo-CD, eine Diskette, ein USB-Stick, eine Mini-Disc oder jedes andere fest eingebaute oder wechselbare bzw. portable Speichermedium ein.
Gemäß einer Ausführungsform sind die Multimediadaten Audiodaten und das Speichermedium eine CD.
Soweit die CD CD-Text aufweist, sind die den Audiodaten zugeordneten Textdaten auf der CD als CD-Text gespeichert. Diese können dann direkt für die Graphem-zu-Phonem-Konvertierung herangezogen werden.
Die Multimediadaten können beispielsweise MP3-Daten sein. Dann sind die Textdaten vorzugsweise in einer Playlist ge- speichert. Die den Multimediadaten zugeordneten Textdaten können auch allgemein in einem Inhaltsverzeichnis des Speichermediums gespeichert sein, das die Multimediadaten enthält.
Gemäß einer Ausführungsform sind die Multimediadaten Videodaten. Das Speichermedium kann dabei zum Beispiel eine DVD sein .
Alternativ oder ergänzend können die den Multimediadaten zu- geordneten Textdaten von einer zentralen Datenbank abgerufen werden, insbesondere über das Internet aus einer Internet- Datenbank.
Die Textdaten enthalten vorzugsweise den Namen des oder der Interpreten und/oder den Titel der Multimediadaten, denen sie zugeordnet sind.
Insbesondere wird über das Verfahren ein Mutlimediagerät mit Hilfe des Spracherkenners gesteuert. Das Multimediagerät kann ein CD-Player, ein mp3-Player, ein CD-Wechsler, ein Mini-
Disc-Player, ein Videorekorder, ein DVD-Player oder ein vergleichbares Gerät sein.
In einem weiteren Schritt können die Textdaten über eine Text-zu-Sprache-Konvertierung akustisch ausgegeben werden, so dass dem Benutzer seine Wahlmöglichkeiten, insbesondere hinsichtlich Titel und Interpreten, vorgelesen werden.
Eine Anordnung, die eingerichtet ist, eines der geschilderten Verfahren auszuführen, lässt sich zum Beispiel durch Programmieren und Einrichtung einer Datenverarbeitungsanlage mit zu den genannten Verfahrensschritten gehörigen Mitteln realisieren.
Die Anordnung kann beispielsweise ein Autoradio, insbesondere integriert mit Navigationssystem, ein CD-Spieler und/oder ein DVD-Spieler sein. Weitere Merkmale und Vorteile der Erfindung ergeben sich aus der Beschreibung von Ausführungsbeispielen.
In einem Verfahren zur Spracherkennung wird eine Graphem-zuPhonem-Technologie bei einem eingebetteten Spracherkenner dazu verwendet, dass die Titelnamen von Songs in Phonem-Folgen konvertiert werden und als Erkennervokabular zur sprachlichen Ansteuerung von CD-, DVD- und/oder MP3-Playern eingesetzt werden. Dies erlaubt dem Benutzer eine direkte Anwahl der
Songs über Titel, Interpreten oder alternativ konventionell über die gewohnte Nummern-Nomenklatur.
Werden zu den als Vokabular aufbereiteten Titeln verschiede- ner CDs die zugeordneten Positionen im CD-Wechsler vermerkt, kann bei der sprachlichen Eingabe der Titel erkannt und einer bestimmten CD zugeordnet werden. Der Wechsler kann die gewünschte CD einlegen und den gewählten Song abspielen. Die Vokabulargröße in einem 5-fach-Wechsler mit jeweils 20 Lie- dern pro CD beträgt demnach ca. 100 Einträge. Dies stellt eine Vokabulargröße dar, die mit gängiger Technologie von eingebetteten Spracherkennern abgedeckt werden kann.
Da Song-Titel in unterschiedlichen Sprachen vorliegen können, ist vor der Konvertierung der Titel in Phonem-Folgen eine
Sprachidentifikation durchzuführen, die den geeigneten Phonem-Set und die korrekten sprachspezifischen Konvertierungsregeln festlegt.
Bei Audio-CDs liegen die Song-Titel in Textform auf CD-Textkompatiblen CDs vor. Als alternative Lösung in vernetzten Fahrzeugen kann die Titelliste per Download zur Verfügung gestellt werden.
Es werden also Textdaten von Audio- und/oder Videomedien als Vokabularbasis für den Spracherkenner verwendet. Die direkte Sprachanwahl von Songtiteln erlaubt eine komfortable und für den Fahrer wenig ablenkende Methode zur Bedienung des CD- und MP3-Equipments in Fahrzeugen. Durch die Nutzung der Graphem- zu-Phonem-Technologie kann diese direkte Sprachanwahl realisiert werden und dem Benutzer im Rahmen seiner Sprach- Bedienoberfläche zur Verfügung gestellt werden.
Das vorgestellte Verfahren ist aufgrund seiner Sichtbarkeit an der Benutzeroberfläche leicht nachweisbar. Durch die deutliche Komforterhöhung ist der Mehrwert durch den Benutzer groß und erkennbar. Da sich sprecherunabhängige Systeme auf längere Frist auch im Automotive-Bereich durchsetzen werden, bietet sich eine sprachliche CD- und/oder DVD-Ansteuerung als ideale Ergänzung an.
Das Verfahren kann beispielsweise direkt für CDs im CD-Text- Format verwendet werden. Auf einer Audio-CD sind neben den eigentlichen Musikdaten noch Zusatzdaten gespeichert, so genannte "Sub-Channels". Es gibt dabei acht Sub-Channels (p, q, r, s, t, u, v und w) . Der q-Sub-Channel enthält beispielswei- se Informationen über die momentane Position. Eine besondere Stellung nimmt der Leadin-Bereich ein. Der Leadin-Bereich ist ein Bereich vor den normalen Musikdaten und enthält in den q-Sub-Channels die "Table of Contents" (TOC) der CD, also das Inhaltsverzeichnis der CD. In der TOC sind die Anfangspositi- onen der einzelnen Tracks gespeichert. In den Sub-Channels r-w des Leadins werden nun die CD-Text-Informationen gespeichert, beispielsweise der Name der CD, die Namen der Tracks sowie die Interpreten.
Mit dieser Information kann für den Spracherkenner ein Vokabular dynamisch erzeugt werden. Dank Graphem-zu-Phonem- Konvertierung können dabei die Textdaten in Erkennerverständliche Phonemketten umgesetzt werden. Zur Bedienung kann dann das Vokabular oder Teile davon zur Steuerung des Audio- und/oder Videogeräts verwendet werden.

Claims

Patentansprüche
1. Verfahren zur Spracherkennung,
- bei dem Multimediadaten auf einem Speichermedium gespei- chert sind,
- bei dem den Multimediadaten jeweils Textdaten zugeordnet sind,
- bei dem Grapheme der Textdaten Phonemen zugeordnet werden,
- bei dem die Textdaten mit ihren zugehörigen Phonemen als Vokabular eines Spracherkenners verwendet werden.
2. Verfahren nach Anspruch 1, bei dem die Multimediadaten Audiodaten sind und das Speichermedium eine CD ist.
3. Verfahren nach Anspruch 2, bei dem die den Audiodaten zugeordneten Textdaten auf der CD als CD-Text gespeichert sind.
4. Verfahren nach einem der vorhergehenden Ansprüche, bei dem die Multimediadaten MP3-Audiodaten sind.
5. Verfahren nach Anspruch 4, bei dem die Textdaten in einer Playlist gespeichert sind.
6. Verfahren nach Anspruch 1, bei dem die Multimediadaten Videodaten sind.
7. Verfahren nach Anspruch 1, bei dem das Speichermedium eine DVD ist.
8. Verfahren nach einem der vorhergehenden Ansprüche, bei dem die Textdaten in einem Inhaltsverzeichnis auf dem Speichermedium gespeichert sind.
9. Verfahren nach einem der vorhergehenden Ansprüche, bei dem die Textdaten von einer zentralen Datenbank abgerufen werden, insbesondere über das Internet.
10. Verfahren nach einem der vorhergehenden Ansprüche, bei dem die Textdaten den Namen des Interpreten und/oder den Titel der Multimediadaten enthalten, denen sie zugeordnet sind.
11. Verfahren nach einem der vorhergehenden Ansprüche, bei dem ein Multimediagerät über den Spracherkenner gesteuert wird.
12. Verfahren nach einem der vorhergehenden Ansprüche, bei dem die Textdaten zumindest teilweise in einer Text-zu¬ Sprache-Konvertierung konvertiert und akustisch ausgegeben werden.
13. Anordnung, die eingerichtet ist, ein Verfahren nach zu- mindest einem der vorstehenden Ansprüche auszuführen.
14. Anordnung nach Anspruch 13, dadurch gekennzeichnet, dass die Anordnung ein Auto, ein Autoradio, ein CD-Spieler und/oder ein DVD-Spieler ist.
EP04766487A 2003-08-18 2004-08-12 Sprachsteuerung von audio- und videogeräten Withdrawn EP1563497A1 (de)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
DE10337823A DE10337823A1 (de) 2003-08-18 2003-08-18 Sprachsteuerung von Audio- und Videogeräten
DE10337823 2003-08-18
PCT/EP2004/051784 WO2005017891A1 (de) 2003-08-18 2004-08-12 Sprachsteuerung von audio- und videogeräten

Publications (1)

Publication Number Publication Date
EP1563497A1 true EP1563497A1 (de) 2005-08-17

Family

ID=34177661

Family Applications (1)

Application Number Title Priority Date Filing Date
EP04766487A Withdrawn EP1563497A1 (de) 2003-08-18 2004-08-12 Sprachsteuerung von audio- und videogeräten

Country Status (5)

Country Link
US (1) US20060206328A1 (de)
EP (1) EP1563497A1 (de)
CN (1) CN1836282A (de)
DE (1) DE10337823A1 (de)
WO (1) WO2005017891A1 (de)

Families Citing this family (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
TWI258087B (en) * 2004-12-31 2006-07-11 Delta Electronics Inc Voice input method and system for portable device
TWI298592B (en) * 2005-11-18 2008-07-01 Primax Electronics Ltd Menu-browsing method and auxiliary-operating system of handheld electronic device
US20100217410A1 (en) * 2009-02-22 2010-08-26 Yang Pan User interface for home media system
DE102009024570A1 (de) * 2009-06-08 2010-12-16 Bayerische Motoren Werke Aktiengesellschaft Verfahren zum Organisieren der Wiedergabe von Medienstücken
US20120260167A1 (en) * 2011-04-07 2012-10-11 Sony Corporation User interface for audio video display device such as tv
CN103187056B (zh) * 2011-12-28 2018-01-12 上海博泰悦臻电子设备制造有限公司 基于车载应用的语音处理***
CN103187061A (zh) * 2011-12-28 2013-07-03 上海博泰悦臻电子设备制造有限公司 车内语音对话***
DE102012202407B4 (de) * 2012-02-16 2018-10-11 Continental Automotive Gmbh Verfahren zum Phonetisieren einer Datenliste und sprachgesteuerte Benutzerschnittstelle
US20180190257A1 (en) * 2016-12-29 2018-07-05 Shadecraft, Inc. Intelligent Umbrellas and/or Robotic Shading Systems Including Noise Cancellation or Reduction
US11145306B1 (en) 2018-10-31 2021-10-12 Ossum Technology Inc. Interactive media system using audio inputs

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE3931638A1 (de) * 1989-09-22 1991-04-04 Standard Elektrik Lorenz Ag Verfahren zur sprecheradaptiven erkennung von sprache
US5617407A (en) * 1995-06-21 1997-04-01 Bareis; Monica M. Optical disk having speech recognition templates for information access
DE59700536D1 (de) * 1996-04-02 1999-11-11 Siemens Ag Anordnung zur erstellung eines digitalen wörterbuchs und verfahren zum aufbau eines digitalen wörterbuchs mit hilfe eines rechners
JP4827274B2 (ja) * 1997-12-30 2011-11-30 ニュアンス コミュニケーションズ オーストリア ゲーエムベーハー コマンド辞書を使用する音声認識方法
US20020048224A1 (en) * 1999-01-05 2002-04-25 Dygert Timothy W. Playback device having text display and communication with remote database of titles
US20030158737A1 (en) * 2002-02-15 2003-08-21 Csicsatka Tibor George Method and apparatus for incorporating additional audio information into audio data file identifying information

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
See references of WO2005017891A1 *

Also Published As

Publication number Publication date
CN1836282A (zh) 2006-09-20
WO2005017891A1 (de) 2005-02-24
DE10337823A1 (de) 2005-03-17
US20060206328A1 (en) 2006-09-14

Similar Documents

Publication Publication Date Title
EP1693829B1 (de) Sprachgesteuertes Datensystem
US7599610B2 (en) Interface for audio visual device
US20070271530A1 (en) Method and apparatus for the menu-controlled selection of menu items which have associated files containing audio and/or video data
EP1563497A1 (de) Sprachsteuerung von audio- und videogeräten
DE112013002037T5 (de) Systeme und Verfahren zum Durchsuchen einer mobilen Vorrichtung mit einer fahrzeugseitigen Nutzerschnittstelle
EP0920021B9 (de) Audioinformationsaufzeichnungsmedium und -wiedergabegerät
DE112012001593T5 (de) Gerät und Verfahren zur Medienpräsentation
JP2005284574A (ja) 車載用情報機器、車載用情報機器の制御方法、制御プログラムおよび記録媒体
CN110955798A (zh) 基于车载多媒体***的控制方法、装置、设备及车辆
DE102009032735A1 (de) Vorrichtung und Verfahren zur Wiedergabe von Musik in Fahrzeugen, die nach Aktivierungsgraden kategorisiert ist
DE10218226A1 (de) Verfahren und Einrichtung zur sprachgesteuerten Ansteuerung einer Multimediaeinrichtung, insbesondere in Kraftfahrzeugen
WO2005071684A1 (en) Playback device for information data sets
US7187627B2 (en) System for controlling recording and reproducing data using management information on the medium
EP1788571A1 (de) Audioanlage mit einer Vorrichtung zur Einstellung eines persönlichen Musikprofils
DE19831567A1 (de) Aufzeichnungsvorrichtung und Aufzeichnungsverfahren
DE102013009569B4 (de) Verfahren zum Betreiben eines Infotainmentsystems zum Beschaffen einer Wiedergabeliste für eine Audiowiedergabe in einem Kraftfahrzeug, Infotainmentsystem sowie Kraftwagen umfassend ein Infotainmentsystem
EP1342240A1 (de) Verfahren zum abspeichern von akustischen informationen und verfahren zum auswählen einer nach diesem verfahren abgespeicherten information
WO2010142361A1 (de) Verfahren zum organisieren der wiedergabe von medienstücken
EP2058799B1 (de) Verfahren zur Vorbereitung von Daten zur Spracherkennung und Spracherkennungssystem
DE102006058214A1 (de) Kraftfahrzeug
EP3511932A1 (de) Informationsverarbeitungsvorrichtung, -verfahren und -programm
JP2006114148A (ja) 音声記録媒体、音声再生装置、音声記録媒体作成装置、及び、プログラム
US6456577B1 (en) Preparing method for audio disc wherein a specific TOC is first written in a LIA
DE10226356A1 (de) Multimedia-Datei-Abspieleinrichtung und Autoradio
DE102016204183A1 (de) Verfahren zur Musikauswahl mittels Gesten- und Sprachsteuerung

Legal Events

Date Code Title Description
PUAI Public reference made under article 153(3) epc to a published international application that has entered the european phase

Free format text: ORIGINAL CODE: 0009012

17P Request for examination filed

Effective date: 20050617

AK Designated contracting states

Kind code of ref document: A1

Designated state(s): AT BE BG CH CY CZ DE DK EE ES FI FR GB GR HU IE IT LI LU MC NL PL PT RO SE SI SK TR

RBV Designated contracting states (corrected)

Designated state(s): DE ES FR GB IT

17Q First examination report despatched

Effective date: 20070404

STAA Information on the status of an ep patent application or granted ep patent

Free format text: STATUS: THE APPLICATION IS DEEMED TO BE WITHDRAWN

18D Application deemed to be withdrawn

Effective date: 20080708