WO2023025358A1 - Intelligentes kommunikationssystem zum steuern der ausgabe von informationen an einen fahrzeuginsassen - Google Patents

Intelligentes kommunikationssystem zum steuern der ausgabe von informationen an einen fahrzeuginsassen Download PDF

Info

Publication number
WO2023025358A1
WO2023025358A1 PCT/DE2022/200165 DE2022200165W WO2023025358A1 WO 2023025358 A1 WO2023025358 A1 WO 2023025358A1 DE 2022200165 W DE2022200165 W DE 2022200165W WO 2023025358 A1 WO2023025358 A1 WO 2023025358A1
Authority
WO
WIPO (PCT)
Prior art keywords
output
information
vehicle
driver
communication system
Prior art date
Application number
PCT/DE2022/200165
Other languages
English (en)
French (fr)
Inventor
Daniel Bär
Original Assignee
Continental Automotive Technologies GmbH
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Continental Automotive Technologies GmbH filed Critical Continental Automotive Technologies GmbH
Publication of WO2023025358A1 publication Critical patent/WO2023025358A1/de

Links

Classifications

    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/10—Input arrangements, i.e. from user to vehicle, associated with vehicle functions or specially adapted therefor
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K28/00—Safety devices for propulsion-unit control, specially adapted for, or arranged in, vehicles, e.g. preventing fuel supply or ignition in the event of potentially dangerous conditions
    • B60K28/02—Safety devices for propulsion-unit control, specially adapted for, or arranged in, vehicles, e.g. preventing fuel supply or ignition in the event of potentially dangerous conditions responsive to conditions relating to the driver
    • B60K28/06—Safety devices for propulsion-unit control, specially adapted for, or arranged in, vehicles, e.g. preventing fuel supply or ignition in the event of potentially dangerous conditions responsive to conditions relating to the driver responsive to incapacity of driver
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K28/00—Safety devices for propulsion-unit control, specially adapted for, or arranged in, vehicles, e.g. preventing fuel supply or ignition in the event of potentially dangerous conditions
    • B60K28/10—Safety devices for propulsion-unit control, specially adapted for, or arranged in, vehicles, e.g. preventing fuel supply or ignition in the event of potentially dangerous conditions responsive to conditions relating to the vehicle 
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/20—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/20—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor
    • B60K35/21—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor using visual output, e.g. blinking lights or matrix displays
    • B60K35/22—Display screens
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/20—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor
    • B60K35/26—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor using acoustic output
    • B60K35/265—Voice
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/20—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor
    • B60K35/28—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor characterised by the type of the output information, e.g. video entertainment or vehicle dynamics information; characterised by the purpose of the output information, e.g. for attracting the attention of the driver
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/20—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor
    • B60K35/29—Instruments characterised by the way in which information is handled, e.g. showing information on plural displays or prioritising information according to driving conditions
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/65—Instruments specially adapted for specific vehicle types or users, e.g. for left- or right-hand drive
    • B60K35/654—Instruments specially adapted for specific vehicle types or users, e.g. for left- or right-hand drive the user being the driver
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/85—Arrangements for transferring vehicle- or driver-related data
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00—Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/151—Instrument output devices for configurable output
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00—Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/1523—Matrix displays
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00—Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/16—Type of output information
    • B60K2360/178—Warnings
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00—Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/18—Information management
    • B60K2360/186—Displaying information according to relevancy
    • B60K2360/1868—Displaying information according to relevancy according to driving situations
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00—Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/18—Information management
    • B60K2360/186—Displaying information according to relevancy
    • B60K2360/1876—Displaying information according to relevancy according to vehicle situations
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00—Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/18—Information management
    • B60K2360/195—Blocking or enabling display functions
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00—Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/18—Information management
    • B60K2360/197—Blocking or enabling of input functions
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00—Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/592—Data transfer involving external databases
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2422/00—Indexing codes relating to the special location or mounting of sensors
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2540/00—Input parameters relating to occupants
    • B60W2540/22—Psychological state; Stress level or workload
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2540/00—Input parameters relating to occupants
    • B60W2540/225—Direction of gaze
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2540/00—Input parameters relating to occupants
    • B60W2540/229—Attention level, e.g. attentive to driving, reading or sleeping
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2540/00—Input parameters relating to occupants
    • B60W2540/26—Incapacity
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2540/00—Input parameters relating to occupants
    • B60W2540/30—Driving style
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2552/00—Input parameters relating to infrastructure
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2555/00—Input parameters relating to exterior conditions, not covered by groups B60W2552/00, B60W2554/00

Definitions

  • Intelligent communication system for controlling the delivery of information to a vehicle occupant
  • the invention relates to an intelligent communication system for controlling the output of information to a vehicle occupant and to a method.
  • information is communicated to the vehicle occupant as voice output via a microphone, for example.
  • a communication system in a vehicle is configured to respond to interactions initiated by the driver or vehicle. This also includes the issuance of information; for example a traffic jam message.
  • Modern digital assistant development tools typically follow a voice-first (for smart speakers and other voice command scenarios) or text-first (typically for chatbots) interaction paradigm.
  • US 2017 190 337A1 discloses a communication system for controlling the delivery of messages to a vehicle occupant.
  • the communication system includes a processor configured to output a first message to the vehicle occupant.
  • a signal is received by one or more sensors monitoring the vehicle occupant when the first message is issued.
  • the signal from the one or more sensors is analyzed to determine one or more parameters determine related to the vehicle occupant's response to the first message.
  • the communication system controls the subsequent output of at least the first message depending on the one or more specific parameters.
  • an intelligent communication system for controlling an output of information to a vehicle occupant, comprising a state determination unit for determining a driver state using a plurality of vehicle sensors that at least partially detect the driver, and an environment determination unit for determining the vehicle environment using a plurality of vehicle sensors, and a determination unit for determining of the vehicle condition using a number of vehicle sensors, an evaluation unit for evaluating and dividing the information to be output into various critical categories, and a multimodal output system which is connected to various output devices for outputting the information, at least two of which communicate with the driver in different ways, and wherein the multimodal output system is designed to use the detected driver condition and the detected vehicle environment and the detected vehicle condition and the B evaluating the information, selecting one or more output devices and effecting an output of the information to be output via the one or more selected output devices.
  • a multimodal output system is understood to mean a system which uses various output channels to output the information to the various output devices. An output device with an output channel describes the way in which information is passed on to the driver.
  • a multi-modal output system has multiple modes to provide output to a driver.
  • Such output devices can be, for example, a speaker, acoustic sensors or a connected headset to create a voice output, a display, light sensors or the windshield to create a visual output, vibration actuators in seats or in the steering wheel to create a haptic output.
  • the condition of the driver can be understood as an assessment of, for example, how the driver is currently feeling, what actions the driver is currently carrying out, how attentive the driver is in the given situation, how much stress he is under, etc. This can be done, for example, with the help of behavioral observation via cameras and voice along with gaze recognition algorithms.
  • the current actions can also be estimated with the help of cameras. For example, attention can be assessed using a combination of gaze and eye movement detection, as well as cameras and voice.
  • sensors for measuring body temperature, blood pressure, oxygen saturation, etc. can be used for the stress level.
  • the driver's cognitive load can also be estimated, for example, with action/conversation tracking.
  • the cognitive load on the driver can be determined using the above data together with the number of passengers, for example.
  • the assessment of how many passengers are sitting in the vehicle can be derived from the information provided by seat sensors and camera surveillance.
  • Vehicle sensors for determining the environment can be GPS sensors, for example, together with navigation and traffic data.
  • an external environment can also be recorded via camera and lidar sensors.
  • the vehicle status can be easily obtained from the internal data representations of all sensors and systems of the vehicle. This can also include the operating mode of the vehicle, for example whether the vehicle is in an automated driving mode or not, or for example what the current technical condition of the vehicle is, for example with regard to tire pressure, fuel level, etc.
  • the evaluation unit can be integrated into the multimodal output system.
  • Such an evaluation can receive a very critical high evaluation as information, for example in the case of a warning of a rear-end collision, while for example the information about a workshop visit can receive a very uncritical low evaluation.
  • Such an evaluation can be attached to the information to be output as metadata.
  • communication systems usually communicate via voice first, i.e. by means of voice output.
  • voice output i.e. by means of voice output.
  • output channels and output devices connected to them in a vehicle, which communicate with the driver in a wide variety of ways.
  • An intelligent communication system uses the available output channels for the output of information, which in particular eliminates the first voice output of information for all given interaction scenarios.
  • the invention dynamically and automatically forwards the information to be output to the most suitable output channel and thus outputs the most suitable output device, depending on the state of the driver and depending on the environment and the current conversation context, ie the information content.
  • the criticality of the information/messages to be output can be taken into account. This prevents safety-critical information or system messages from being forwarded in the same way as comfort-related ones.
  • the environmental conditions are also taken into account by the intelligent communication system according to the invention.
  • non-critical system information may be more likely to be conveyed in an unobtrusive, non-invasive manner, e.g. B. via a visual signal or a text message, since a spoken message can be difficult to understand under such conditions.
  • the current state of the driver is also taken into account by the intelligent communication system according to the invention.
  • non-critical information can be withheld or output inconspicuously so as not to put additional cognitive strain on the driver.
  • the multimodal output system is also designed to produce a visual or haptic or acoustic output as a different type of communication with the driver, depending on the output device. This allows communication with the driver in different ways.
  • the evaluation unit has a trained learning system for evaluating the information to be output.
  • the training data can easily be generated using real or simulated traffic scenes. Additionally or alternatively, for example, a catalog of critical and non-critical assessments can be defined and used for specific situations. In this way, a catalog of ratings for specific information can be defined and applied. In the event of an action on the part of the driver, for example in the case of a response, the content of the response can be further analyzed with regard to content and voice, so that a two-stage categorization mechanism can be used.
  • the evaluation unit is designed to classify the information to be output into a time-critical and/or security-critical category.
  • the category can be attached as metadata to the information to be output in order to display the category. This makes it easy to implement.
  • the multimodal output system can have a trained machine learning method, which is trained to output the information via a specific or multiple output devices, taking into account the detected driver condition and the detected vehicle environment and the detected vehicle condition and the evaluation of the information, and the multimodal Output system is also designed to provide the information to the selected output device or devices.
  • the training data for training the machine learning process can be easily obtained from real traffic scenes or simulations. Furthermore, the machine learning method can be trained by the driver by reacting to the output on the selected output device.
  • a database can be provided from which the multimodal output system can be read by comparing the detected driver condition and the detected vehicle environment and the detected vehicle condition and the evaluation of the information with a specified driver condition and a specified vehicle environment and a specified vehicle condition and a specified evaluation of the information which selects the output device(s).
  • the multimodal output system can have a storage unit for temporarily storing and subsequently outputting the information to be output. The multimodal output system can thus place all information to be output in a queue until the driver has left a stressful traffic situation, for example, and then output it accordingly via a selected output device.
  • All information to be output can thus be stored in the queue, which is managed by the multimodal output system and it is decided by the multimodal output system when and how the information is output.
  • the multimodal issuing system thus functions as a sort of central hub.
  • the multimodal output system can be designed to output different stored information at least in one order, the order being determined by the multimodal output system based on the evaluation of the stored information. This means, for example, that highly critical information can be output immediately; comfort-related information later.
  • the stored information is deleted after it has been issued. This frees up the storage space and can be used for new information.
  • the multimodal output system is preferably designed to transmit a previously determined detected driver status and a previously determined detected vehicle environment and a previously determined detected vehicle status and a previously determined evaluation of the information to a control unit.
  • a warning can be transmitted to other vehicles by means of the control unit, for example if the driver is in a stressed state in a situation with high traffic volume, if they are in the vicinity are or will be around shortly so that they are more vigilant in that particular situation.
  • the control unit can take appropriate measures in critical situations, for example when a critical driver status is transmitted. For example, in a near-crash scenario, instead of or in addition to the information to be output, such as "Attention end of traffic jam", which is output to the driver, the control unit itself can carry out necessary actions based on the data transmitted by the output system - in this case a slowdown. After the deceleration, the original information can then also be output as information including the actions taken, for example “Attention end of traffic jam, braking process has been initiated”.
  • the multimodal output system is designed to generate the information to be output using the detected driver condition and the detected vehicle environment as well as the detected vehicle condition.
  • the multimodal output system is designed at least for unidirectional communication with an external data source, for receiving the information to be output.
  • the information to be output can be generated by the vehicle itself (e.g. in the form of “Attention end of traffic jam” based on the surrounding data) and evaluated by it or, for example, received and evaluated by other vehicles.
  • the intelligent communication system can be designed to receive and process driver inputs that are entered via the various output devices. This can result in communication between the driver and the intelligent communication system, which is also evaluated. In the event of panic calls, for example, corresponding information can be transmitted to the control unit in order to initiate appropriate actions.
  • the environment determination unit is designed to determine both the vehicle environment and the vehicle interior using the multiple vehicle sensors.
  • the intelligent communication system can be designed to receive user inputs that are entered via the various output devices, and the evaluation unit is also designed to evaluate information to be output, taking into account the user inputs. This can ensure improved communication with the driver.
  • the output devices are designed as light sensors or a display, for example for a visual display and/or a microphone, for example for a voice output and/or actuators and/or sensors, for example for a haptic output such as via shaking actuators in seats or in the steering wheel .
  • the object is achieved by a method for controlling an output of information to a vehicle occupant in a vehicle using an intelligent communication system as described above, comprising the steps
  • Providing a multimodal output system which is connected to various output devices for outputting the information, at least two of which communicate with the driver in different ways, - Selection of one or more output devices based on the detected driver condition and the detected vehicle environment and based on the vehicle condition and based on the evaluation of the information, and effecting an output of the information to be output via the one or more selected output devices by the multimodal output system.
  • FIG 1 an intelligent communication system
  • FIG 2 another intelligent communication system.
  • the 1 shows an intelligent communication system 1 in a vehicle (not shown). This is connected to several vehicle sensors 2 to receive the recorded raw sensor signals or sensor signals that have already been evaluated as sensor data.
  • vehicle sensors 2 can, for example, be sensors/cameras for recording the driver/the vehicle interior or the surroundings.
  • the vehicle sensors 2 can also be lidar/radar sensors or other image sensors. Furthermore, the vehicle sensors 2 can also be seat sensors, for example for detecting the number of people in the vehicle. The vehicle can also be connected to external sources such as GPS or traffic jam detectors via appropriate means in order to better record the current traffic situation.
  • the intelligent communication system 1 has a status determination unit 3 . This can be designed, for example, as a processor with appropriate software.
  • the state determination unit 3 uses the raw sensor data or already evaluated sensor data to determine the driver's state. For example, attention can be estimated from a combination of gaze and eye movement detection from camera data using appropriate algorithms.
  • a load stress
  • the cognitive load on the driver can also be determined, for example, taking into account the number of passengers who are detected, for example, via the seat sensors, or using a voice analysis.
  • the intelligent communication system 1 has an environment determination unit 4 for determining the vehicle environment.
  • the environment in which the vehicle is currently located can be determined and evaluated by GPS sensors, for example, together with navigation and traffic data. For example, a traffic jam or high volume of traffic can be recognized, as well as driving on the freeway and driving in town.
  • Surroundings determination unit 4 can be embodied, for example, as a processor with appropriate software. The assessment of the environment can be determined taking into account the driver's current cognitive load.
  • the intelligent communication system 1 has a determination unit 5 for determining the vehicle status.
  • the vehicle condition can be easily obtained from the internal data representations of all the vehicle's sensors and systems.
  • the vehicle status also includes the operating status, for example whether the vehicle is in an automated driving mode or not, what the current status of the vehicle is, which can be determined, for example, by tire pressure, fuel level, etc.
  • the Determination unit 5 can be embodied, for example, as a processor with appropriate software.
  • An evaluation unit 6 is also provided for evaluating and dividing the information to be output into various critical categories.
  • the information can also relate to the driver's condition itself, the vehicle environment itself and the vehicle condition itself, for example "low tire pressure" or "warning end of traffic jam".
  • the information to be output can also be answers to a question asked by the driver.
  • the output device is also designed as an input device.
  • the evaluation unit 6 can be designed, for example, as a processor with appropriate software.
  • This assessment can include, for example, whether and to what extent the information is security-critical, time-critical or critical in other respects.
  • the evaluation of the information to be output can be attached in the form of metadata.
  • a trained machine learning method can also be used for the evaluation, which classifies the information to be output into a time-critical and/or safety-critical category.
  • a catalog of critical information can also be defined and applied to specific situations.
  • a multimodal output system 7 is also provided.
  • the status determination unit 3, the environment determination unit 4, the determination unit 5 and the evaluation unit 6 can be integrated into this, for example.
  • the multimodal output system 7 is connected via corresponding output channels 8 to various output devices 9 for outputting the information.
  • An output device 9 with an output channel 8 designates the manner in which information is passed on to the driver.
  • the output devices 9 can be displays or light sensors for visual output, microphones or loudspeakers or other acoustic sensors or connected headsets for voice output, or actuators such as vibration actuators in seats or in the steering wheel, for example for haptic output.
  • the multimodal output system 7 has a storage unit 10 .
  • the information to be output is stored in the memory unit 10 by the multimodal output system 7 .
  • the multimodal output system 7 acts as a queue, which manages the output of the information to the driver.
  • the multimodal output system 7 can decide when and how the information is implemented.
  • the multimodal output system 7 thus acts as a central hub.
  • the multimodal output system 7 can have a trained learning process in order to select one or more output devices for outputting the information and to make the decision as to when the outputs are to be implemented. In this case, the multimodal output system 7 determines this output of the information, taking into account the detected driver condition and the detected vehicle environment and the detected vehicle condition and the evaluation of the information.
  • the environment is also taken into account when selecting the output device 9 .
  • a non-critical system response is more likely to be delivered in an unobtrusive, non-invasive manner, e.g. B. via a visual signal or a text message, since a voice output can be difficult to understand under such conditions.
  • the current state of the driver is taken into account when selecting the output device 9 .
  • additional cognitive stress on the driver can be prevented, for example in a stressful situation when driving a car, such as navigating through heavy traffic through an unknown, densely populated area, by deferring the information or by intelligently selecting the output device 9 .
  • the intelligent communication system 1 can, for. B. Queuing all reports until the driver has left the stressful situation and then forwarding them accordingly.
  • the evaluation of the information or the category is also taken into account when selecting the output device 9 .
  • the intelligent communication system 1 thus contributes to a more pleasant and significantly safer driving experience, e.g. B. by considering the current cognitive load, stress level and actions of a driver. Furthermore, between different groups of information, e.g. B. those that are safety-critical or relate more to comfort features.
  • the intelligent communication system 1 can be used to output the information dynamically and automatically through the most suitable output channel 8 and thus via the most suitable output device 9 .
  • the information can also be an answer to a question from the driver or an interaction between the driver and the vehicle.
  • FIG. 2 shows a further embodiment of an intelligent communication system 1a.
  • the intelligent communication system 1a has a control unit 11 or is connected to it for communication, for the transmission of a predetermined detected driver condition and a predetermined detected vehicle environment and a predetermined detected vehicle condition and a predetermined evaluation of the information.
  • the control unit 11 can, for example, act on the basis of the evaluation of the information for all vehicles, for example warning drivers of other vehicles that are in the vicinity if a driver is in a stressed state in a situation with high traffic volume.
  • the control unit 11 can take appropriate measures in the event of a critical evaluation. For example, a braking process can be initiated to prevent an accident.

Landscapes

  • Engineering & Computer Science (AREA)
  • Chemical & Material Sciences (AREA)
  • Combustion & Propulsion (AREA)
  • Transportation (AREA)
  • Mechanical Engineering (AREA)
  • Traffic Control Systems (AREA)

Abstract

Die Erfindung betrifft Intelligentes Kommunikationssystem (1, 1a) zum Steuern einer Ausgabe von Informationen an einen Fahrzeuginsassen in einem Fahrzeug umfassend eine Zustandsermittlungseinheit (3) zum Bestimmen eines Fahrerzustandes anhand mehrerer, zumindest teilweise den Fahrer erfassender Fahrzeugsensoren (2), und eine Umfeldermittlungseinheit (4) zum Bestimmen des Fahrzeugumfelds anhand mehrerer Fahrzeugsensoren (2), und eine Ermittlungseinheit (5) zum Ermitteln des Fahrzeugzustandes anhand mehrerer Fahrzeugsensoren (2), eine Bewertungseinheit (6) zum Bewerten und Einteilen der auszugebenden Informationen in verschiedene kritische Kategorien, und ein multimodales Ausgabesystem (7), welches zur Ausgabe der Informationen mit verschiedenen Ausgabegeräten (9), von denen zumindest zwei mit dem Fahrer auf unterschiedliche Art kommunizieren, verbunden ist, und wobei das multimodale Ausgabesystem (7) dazu ausgebildet ist, anhand des erfassten Fahrerzustandes und anhand des erfassten Fahrzeugumfelds sowie anhand des erfassten Fahrzeugzustandes sowie anhand der Bewertung der Informationen, ein oder mehrere Ausgabegeräte (9) auszuwählen und eine Ausgabe der auszugebenden Informationen über die eine oder mehreren ausgewählten Ausgabegeräte (9) zu bewerkstelligen. Ferner betrifft die Erfindung ein Verfahren.

Description

Beschreibung
Intelligentes Kommunikationssystem zum Steuern der Ausgabe von Informationen an einen Fahrzeuginsassen
Die Erfindung betrifft ein intelligentes Kommunikationssystem zum Steuern einer Ausgabe von Informationen an einen Fahrzeuginsassen sowie ein Verfahren.
Sprachgesteuerte Benutzererfahrungen sind heute mit beliebten Diensten auf jedem modernen Telefon zu finden, haben aber auch mit dem Aufkommen von physischen Geräten Einzug in die Haushalte gehalten.
Typischerweise werden Informationen als Sprachausgabe über beispielsweise ein Mikrofon an den Fahrzeuginsassen kommuniziert.
Vor allem in Fahrzeugen sind solche Kommunikationssysteme mittlerweile tief integriert.
Ein Kommunikationssystem in einem Fahrzeug ist konfiguriert, um auf Interaktionen zu reagieren, die vom Fahrer oder Fahrzeug, initiiert werden. Hierunter fällt auch die Ausgabe von Informationen; beispielsweise eine Staumeldung.
Moderne Tools zur Entwicklung digitaler Assistenten verfolgen in der Regel ein Voice-First- (für Smart Speaker und andere Sprachbefehlsszenarien) oder Text-First- (typischerweise für Chatbots) Interaktionsparadigma.
Die US 2017 190 337A1 offenbart ein Kommunikationssystem zum Steuern der Ausgabe von Nachrichten an einen Fahrzeuginsassen. Das Kommunikationssystem weist einen Prozessor auf, der dazu konfiguriert ist, eine erste Nachricht an den Fahrzeuginsassen auszugeben. Ein Signal wird von einem oder mehreren Sensoren empfangen, die den Fahrzeuginsassen überwachen, wenn die erste Nachricht ausgegeben wird. Das Signal von dem einen oder den mehreren Sensoren wird analysiert, um einen oder mehrere Parameter zu bestimmen, die sich auf die Reaktion des Fahrzeuginsassen auf die erste Nachricht beziehen. Das Kommunikationssystem steuert die nachfolgende Ausgabe mindestens der ersten Nachricht in Abhängigkeit von dem einen oder den mehreren bestimmten Parametern.
Es ist daher eine Aufgabe ein verbessertes Kommunikationssystem und Verfahren zum Steuern einer Ausgabe von Informationen an einen Fahrzeuginsassen in einem Fahrzeug anzugeben.
Die Aufgabe wird gelöst durch ein intelligentes Kommunikationssystem mit den Merkmalen des Anspruchs 1 und ein Verfahren mit den Merkmalen des Anspruchs 13. Weitere vorteilhafte Ausgestaltungen der vorliegenden Erfindung sind in den abhängigen Ansprüchen angegeben.
Die Aufgabe wird gelöst durch ein intelligentes Kommunikationssystem zum Steuern einer Ausgabe von Informationen an einen Fahrzeuginsassen umfassend eine Zustandsermittlungseinheit zum Bestimmen eines Fahrerzustandes anhand mehrerer, zumindest teilweise den Fahrer erfassender Fahrzeugsensoren, und eine Umfeldermittlungseinheit zum Bestimmen des Fahrzeugumfelds anhand mehrerer Fahrzeugsensoren, und eine Ermittlungseinheit zum Ermitteln des Fahrzeugzustandes anhand mehrerer Fahrzeugsensoren, eine Bewertungseinheit zum Bewerten und Einteilen der auszugebenden Informationen in verschiedene kritische Kategorien, und ein multimodales Ausgabesystem, welches zur Ausgabe der Informationen mit verschiedenen Ausgabegeräten, von denen zumindest zwei mit dem Fahrer auf unterschiedliche Art kommunizieren, verbunden ist, und wobei das multimodale Ausgabesystem dazu ausgebildet ist, anhand des erfassten Fahrerzustandes und des erfassten Fahrzeugumfelds sowie des erfassten Fahrzeugzustandes sowie der Bewertung der Informationen, ein oder mehrere Ausgabegeräte auszuwählen und eine Ausgabe der auszugebenden Informationen über die eine oder mehreren ausgewählten Ausgabegeräte zu bewerkstelligen. Dabei versteht man unter einem multimodalen Ausgabesystem ein System, welches anhand verschiedener Ausgangskanäle eine Ausgabe der Informationen auf den verschiedenen Ausgabegeräten bewerkstelligt. Ein Ausgabegerät mit Ausgabekanal bezeichnet dabei die Art und Weise, wie Informationen an den Fahrer weitergegeben werden.
Insbesondere verfügt ein multimodales Ausgabesystem über mehrere Modi, um einem Fahrer eine Ausgabe zu liefern. Solche Ausgabegeräte können beispielsweise ein Lautsprecher, akustische Sensoren oder ein angeschlossenes Headset sein, um eine Sprachausgabe zu bewerkstelligen, ein Display, Lichtsensoren oder die Windschutzscheibe, um eine visuelle Ausgabe zu bewerkstelligen, Rüttelaktoren in Sitzen oder im Lenkrad um eine haptische Ausgabe zu bewerkstelligen.
Unter dem Zustand des Fahrers kann eine Einschätzung verstanden werden, wie sich beispielsweise der Fahrer aktuell fühlt, welche Handlungen der Fahrer gerade ausführt, wie aufmerksam der Fahrer in der gegebenen Situation ist, wie viel Stress er hat etc. Dies kann beispielsweise mit Hilfe von Verhaltensbeobachtung über Kameras und Stimme zusammen mit Algorithmen zur Blickerkennung geschätzt werden. Die aktuellen Aktionen können ebenfalls mit Hilfe von Kameras geschätzt werden. Die Aufmerksamkeit kann beispielsweise mit einer Kombination aus Blick- und Augenbewegungserfassung sowie Kameras und Stimme eingeschätzt werden.
Für den Stresslevel können beispielsweise Sensoren zur Messung der Körpertemperatur, Blutdruck, Sauerstoffsättigung etc. eingesetzt werden. Die kognitive Belastung des Fahrers kann beispielsweise zudem mit einer Aktions-ZKonversationsverfolgung geschätzt werden. Die Bestimmung der kognitiven Belastung des Fahrers kann anhand der oben genannten Daten zusammen beispielsweise mit der Anzahl der Fahrinsassen erfolgen. Die Einschätzung, wie viele Fahrinsassen in dem Fahrzeug sitzen, kann aus den Informationen vorhandener Sitzsensoren und einer Kameraüberwachung abgeleitet werden. Fahrzeugsensoren zum Ermitteln des Umfelds können beispielsweise GPS-Sensoren zusammen mit Navigations- und Verkehrsdaten sein. Ferner kann ein Außenumfeld auch über Kamera- und Lidar-Sensoren erfasst werden.
Der Fahrzeugzustand kann leicht aus den internen Datendarstellungen aller Sensoren und Systeme des Fahrzeugs entnommen werden. Dabei kann dies auch den Betriebsmodus des Fahrzeugs umfassen, beispielsweise, ob sich das Fahrzeug in einem automatisierten Fahrmodus befindet oder nicht, oder beispielsweise wie der aktuelle technische Zustand des Fahrzeugs ist, beispielsweise hinsichtlich des Reifendrucks, Kraftstoffstands etc.
Die Bewertungseinheit kann in das multimodale Ausgabesystem integriert sein. Eine solche Bewertung kann beispielsweise bei einer Warnung vor einem Auffahrunfall als Information eine sehr kritische hohe Bewertung erhalten, während beispielsweise die Information über einen Werkstattbesuch eine sehr unkritische niedrige Bewertung erhalten kann. Eine solche Bewertung kann als Metadaten an die auszugebenden Informationen angehängt sein.
Erfindungsgemäß wurde erkannt, dass Kommunikationssysteme in der Regel über Voice-First d.h. mittels Sprachausgabe kommunizieren. Erfindungsgemäß wurde weiter erkannt, dass es in einem Fahrzeug mehrere Ausgabekanäle und daran angeschlossene Ausgabegeräte gibt, die mit dem Fahrer auf unterschiedlichste Art kommunizieren.
Durch ein erfindungsgemäßes intelligentes Kommunikationssystem werden die verfügbaren Ausgabekanäle für die Ausgabe von Informationen verwendet, wodurch, insbesondere die First-Voice-Ausgabe von Informationen für alle gegebenen Interaktionsszenarien aufgehoben wird. Durch die Erfindung wird abhängig vom Zustand des Fahrers und abhängig vom Umfeld und des aktuellen Konversationskontexts, d.h. des Informationsinhalts die auszugebende Information dynamisch und automatisch an den am besten geeigneten Ausgabekanal weitergeleitet und somit über das am besten geeignete Ausgabegerät ausgegeben. Durch die Erfindung kann die Kritikal ität der auszugebenden Informationen / Nachrichten berücksichtigt werden. Dadurch wird verhindert, dass sicherheitskritische Informationen bzw. System nachrichten auf die gleiche Weise weitergeleitet werden wie komfortbezogene.
Ferner werden zudem durch das erfindungsgemäße intelligente Kommunikationssystem die Umfeldbedingungen berücksichtigt. In einer lauten Umgebung kann eine nicht-kritische System information beispielsweise eher auf unauffällige, nicht-invasive Weise übermittelt werden, z. B. über ein visuelles Signal oder eine Textnachricht, da eine gesprochene Nachricht unter solchen Bedingungen schwer zu verstehen sein kann.
Ferner wird zudem durch das erfindungsgemäße intelligente Kommunikationssystem der aktuelle Zustand des Fahrers berücksichtigt. So kann beispielsweise in einer stressigen Situation beim Autofahren wie beispielsweise bei der Navigation im dichten Verkehr durch ein unbekanntes, dicht besiedeltes Gebiet eine nicht kritische Information zurückgehalten oder unauffällig ausgegeben werden, um den Fahrer nicht zusätzlich kognitiv zu belasten.
In einer Ausbildung ist das multimodale Ausgabesystem ferner dazu ausgebildet, je nach Ausgabegerät eine visuelle oder haptische oder akustische Ausgabe als unterschiedliche Kommunikationsart mit dem Fahrer zu bewerkstelligen. Dadurch kann jeweils mit dem Fahrer auf unterschiedliche Art kommuniziert werden.
In einer weiteren Ausgestaltung weist die Bewertungseinheit ein trainiertes Lernsystem zum Bewerten der auszugebenden Informationen auf.
Die Trainingsdaten können einfach anhand realer oder simulierter Verkehrsszenen erzeugt werden. Zudem oder alternativ kann beispielsweise ein Katalog von kritischen und unkritischen Bewertungen für bestimmte Situationen definiert und angewendet werden. So kann ein Katalog von Bewertungen für bestimmte Informationen definiert und angewendet werden. Auch kann bei Aktion seitens des Fahrers beispielsweise bei einer Rückantwort der Inhalt der Rückantwort weiter hinsichtlich Inhalt und Stimme analysiert werden, so dass ein zweistufiger Kategorisierungsmechanismus eingesetzt werden kann.
In weiterer Ausgestaltung ist die Bewertungseinheit dazu ausgebildet, eine Einteilung der auszugebenden Information in eine zeitkritische und/oder sicherheitskritische Kategorie vorzunehmen.
Die Kategorie kann beispielsweise als Metadaten an die auszugebende Information angehängt werden um die Kategorie anzuzeigen. Dadurch ist eine einfache Umsetzung möglich.
Ferner kann das multimodale Ausgabesystem ein trainiertes maschinelles Lernverfahren aufweisen, welches dazu trainiert ist, unter Berücksichtigung des erfassten Fahrerzustandes und des erfassten Fahrzeugumfelds sowie des erfassten Fahrzeugzustandes sowie der Bewertung der Information eine Ausgabe der Information über ein bestimmtes oder mehrere Ausgabegeräte zu bewerkstelligen und wobei das multimodale Ausgabesystem ferner dazu ausgebildet ist, die Information dem oder den ausgewählten Ausgabegeräten bereitzustellen.
Die Trainingsdaten zum Antrainieren des maschinellen Lernverfahrens können dabei aus realen Verkehrsszenen oder Simulationen leicht gewonnen werden. Ferner kann das maschinelle Lernverfahren durch eine Reaktion auf die Ausgabe auf dem gewählten Ausgabegerät durch den Fahrer trainiert werden.
Alternativ oder zusätzlich kann eine Datenbank bereitgestellt werden, aus welchem das multimodale Ausgabesystem durch Vergleich des erfassten Fahrerzustandes und des erfassten Fahrzeugumfelds sowie des erfassten Fahrzeugzustandes sowie der Bewertung der Information mit einem vorgegebenen Fahrerzustand und einem vorgegebenen Fahrzeugumfeld und einem vorgegebenen Fahrzeugzustand und einer vorgegebenen Bewertung der Information das bzw. die Ausgabegeräte auswählt. Ferner kann das multimodale Ausgabesystem eine Speichereinheit aufweisen zum Zwischenspeichern und nachträglichen Ausgeben der auszugebenden Informationen. Das multimodale Ausgabesystem kann somit alle auszugebenden Informationen in eine Warteschlange stellen, bis der Fahrer beispielsweise eine stressige Verkehrssituation verlassen hat, und sie dann entsprechend über ein gewähltes Ausgabegerät ausgeben.
Alle auszugebenden Informationen können somit in der Warteschlange gespeichert werden, welche vom multimodalen Ausgabesystem verwaltet wird und wobei vom multimodalen Ausgabesystem entschieden wird, wann und wie die Informationen ausgegeben werden.
Damit fungiert das multimodale Ausgabesystem quasi als zentraler Knotenpunkt. Ferner kann das multimodale Ausgabesystem dazu ausgebildet sein, verschiedene gespeicherte Informationen zumindest in einer Reihenfolge auszugeben, wobei die Reihenfolge durch das multimodale Ausgabesystem anhand der Bewertung der gespeicherten Informationen festgelegt ist. Dadurch können beispielsweise hochkritische Informationen sofort ausgegeben werden; komfortbezogene Informationen später.
In weiterer Ausgestaltung werden die gespeicherten Informationen nach ihrer Ausgabe gelöscht. Dadurch wird der Speicherplatz wieder frei und kann für neue Informationen genutzt werden.
Vorzugsweise ist das multimodale Ausgabesystem zur Übermittlung von einem vorab festgelegten erfassten Fahrerzustand und einem vorab festgelegten erfassten Fahrzeugumfeld sowie einem vorab festgelegten erfassten Fahrzeugzustand sowie einer vorab festgelegten Bewertung der Information an eine Steuereinheit ausgebildet.
Dadurch kann mittels der Steuereinheit, beispielsweise wenn der Fahrer in einer Situation mit hohem Verkehrsaufkommen in einem gestressten Zustand ist, an anderer Fahrzeuge eine Warnung übermittelt werden, wenn sie sich in der Nähe befinden oder in Kürze in der Nähe sein werden, so dass sie in dieser bestimmten Situation aufmerksamer sind. Ferner kann die Steuereinheit in kritischen Situationen beispielsweise bei Übermittlung eines kritischen Fahrerzustandes entsprechende Maßnahmen ergreifen. So können beispielsweise in einem Beinahe-Crash-Szenario anstatt oder zusätzlich zu den auszugebenden Informationen wie beispielsweise „Achtung Stauende“, welche an den Fahrer ausgegeben werden, von der Steuereinheit notwendige Aktionen selbst durchgeführt werden basierend auf den übermittelten Daten des Ausgabesystems - in diesem Fall eine Verlangsamung. Die ursprüngliche Information kann anschließend zudem nach der Verlangsamung als Information einschließlich der durchgeführten Aktionen, beispielsweise“ Achtung Stauende, Bremsvorgang ist eingeleitet“ ausgegeben werden.
Ferner ist das multimodale Ausgabesystem zur Generierung der auszugebenden Information anhand des erfassten Fahrerzustandes und des erfassten Fahrzeugumfelds sowie des erfassten Fahrzeugzustandes ausgebildet. Alternativ oder zusätzlich ist das multimodale Ausgabesystem zumindest zur unidirektionalen Kommunikation mit einer externen Datenquelle ausgebildet, zum Empfang der auszugebenden Information.
Dabei können die auszugebenden Informationen vom Fahrzeug selbst generiert (beispielsweise in Form von „Achtung Stauende“ anhand der Umfelddaten) und von diesem bewertet werden oder beispielsweise von anderen Fahrzeugen empfangen und bewertet werden.
Ferner kann das intelligente Kommunikationssystem dazu ausgebildet sein, Fahrereingaben, welche über die verschiedenen Ausgabegeräte eingegeben werden zu empfangen und zu verarbeiten. Dadurch kann zwischen dem Fahrer und dem intelligenten Kommunikationssystem eine Kommunikation entstehen, welche ebenfalls bewertet wird. So können bei panischen Rufen beispielsweise entsprechende Informationen an die Steuereinheit übermittelt werden, zur Einleitung entsprechender Aktionen. In weiterer Ausgestaltung ist die Umfeldermittlungseinheit dazu ausgebildet, sowohl die Fahrzeugumgebung als auch den Fahrzeuginnenraum anhand der mehreren Fahrzeugsensoren, zu bestimmen.
Ferner kann das intelligente Kommunikationssystem dazu ausgebildet sein, Benutzereingaben, welche über die verschiedenen Ausgabegeräte eingegeben werden zu empfangen und wobei die Bewertungseinheit ferner dazu ausgebildet ist, eine auszugebende Information unter Berücksichtigung der Benutzereingaben zu bewerten. Dadurch kann eine verbesserte Kommunikation mit dem Fahrer gewährleistet werden.
In weiterer Ausgestaltung sind die Ausgabegeräte als Lichtsensoren oder ein Display, beispielsweise für eine visuelle Anzeige und/oder ein Mikrofon beispielsweise für eine Sprachausgabe und/oder Aktoren und/oder Sensoren, beispielsweise für eine haptische Ausgabe wie über Rüttelaktoren in Sitzen oder im Lenkrad, ausgebildet.
Ferner wird die Aufgabe gelöst durch ein Verfahren zum Steuern einer Ausgabe von Informationen an einen Fahrzeuginsassen in einem Fahrzeug mittels eines wie oben beschriebenen intelligenten Kommunikationssystems umfassend der Schritte
- Bestimmen eines Fahrerzustandes anhand mehrerer, zumindest teilweise den Fahrer erfassender Fahrzeugsensoren durch eine Zustandsermittlungseinheit und
- Bestimmen des Fahrzeugumfelds anhand mehrerer Fahrzeugsensoren durch eine Umfeldermittlungseinheit und
- Ermitteln des Fahrzeugzustandes anhand mehrerer Fahrzeugsensoren durch eine Ermittlungseinheit,
- Bewerten und Einteilen der auszugebenden Informationen in verschiedene kritische Kategorien durch eine Bewertungseinheit,
- Bereitstellen eines multimodalen Ausgabesystems, welches zur Ausgabe der Informationen mit verschiedenen Ausgabegeräten, von denen zumindest zwei mit dem Fahrer auf unterschiedliche Art kommunizieren, verbunden ist, - Auswahlen ein oder mehrere Ausgabegeräte anhand des erfassten Fahrerzustandes und des erfassten Fahrzeugumfelds sowie anhand des Fahrzeugzustandes sowie anhand der Bewertung der Informationen, und Bewerkstelligen einer Ausgabe der auszugebenden Informationen über die eine oder mehreren ausgewählten Ausgabegeräte durch das multimodale Ausgabesystem.
Die Vorteile des Kommunikationssystems können auch auf das Verfahren angewendet werden.
Weitere Eigenschaften und Vorteile der vorliegenden Erfindung ergeben sich aus der nachfolgenden Beschreibung unter Bezugnahme auf die beiliegenden Figuren. Darin zeigen schematisch:
FIG 1 : ein intelligentes Kommunikationssystem,
FIG 2: ein weiteres intelligentes Kommunikationssystem.
FIG 1 zeigt ein intelligentes Kommunikationssystem 1 in einem Fahrzeug (nicht gezeigt). Dieses ist mit mehreren Fahrzeugsensoren 2 verbunden zum Empfang der aufgenommenen rohen Sensorsignale oder bereits ausgewerteter Sensorsignale als Sensordaten. Die Fahrzeugsensoren 2 können beispielsweise Sensoren/Kameras zur Aufnahme des Fahrers/des Fahrzeuginnenraums oder des Umfelds sein.
Ferner können die Fahrzeugsensoren 2 auch Lidar-/Radarsensoren oder andere Bildsensoren sein. Ferner können die Fahrzeugsensoren 2 auch Sitzsensoren sein, beispielsweise zum Erfassen der Anzahl der Personen im Fahrzeug. Auch kann das Fahrzeug über entsprechende Mittel an externe Quellen wie GPS oder Staumelder angebunden sein, zum besseren Erfassen der aktuellen Verkehrssituation. Das intelligente Kommunikationssystem 1 weist eine Zustandsermittlungseinheit 3 auf. Diese kann beispielsweise als Prozessor mit entsprechender Software ausgebildet sein.
Die Zustandsermittlungseinheit 3 ermittelt anhand der Roh-Sensordaten oder bereits ausgewerteten Sensordaten den Fahrerzustand. So kann die Aufmerksamkeit beispielsweise aus einer Kombination aus Blick- und Augenbewegungserfassung aus Kameradaten mithilfe entsprechender Algorithmen geschätzt werden. Eine Belastung (stress) kann beispielsweise aus gemessener Körpertemperatur, Blutdruck, Sauerstoffsättigung und oder der Fahrweise, welche zusammen mit den oben erwähnten visuellen Kameras als starker Indikator dienen können, geschätzt werden. Die kognitive Belastung des Fahrers kann beispielsweise auch unter Berücksichtigung der Anzahl der Fahrinsassen, welche beispielsweise über die Sitzsensoren erfasst werden, ermittelt werden oder anhand einer Stimmanalyse.
Ferner weist das intelligente Kommunikationssystem 1 eine Umfeldermittlungseinheit 4 zum Bestimmen des Fahrzeugumfelds auf. Das Umfeld, in der sich das Fahrzeug gerade befindet, kann von beispielsweise GPS-Sensoren zusammen mit Navigations- und Verkehrsdaten ermittelt und bewertet werden. So kann beispielsweise ein Stau oder hohes Verkehrsaufkommen erkannt werden, ebenso wie eine Autobahnfahrt und eine Stadtfahrt. Die Umfeldermittlungseinheit 4 kann beispielsweise als Prozessor mit entsprechender Software ausgebildet sein. Die Einschätzung des Umfeldes kann unter Berücksichtigung der aktuellen kognitiven Belastung des Fahrers bestimmt werden.
Ferner weist das intelligente Kommunikationssystem 1 eine Ermittlungseinheit 5 zum Ermitteln des Fahrzeugzustandes auf. Der Fahrzeugzustand kann leicht den internen Datendarstellungen aller Sensoren und Systeme des Fahrzeugs entnommen werden. Der Fahrzeugzustand umfasst ferner den Betriebszustand, beispielsweise, ob sich das Fahrzeug in einem automatisierten Fahrmodus befindet oder nicht, wie der aktuelle Zustand des Fahrzeugs ist, welcher beispielsweise durch Reifendruck, Kraftstoffstand etc. ermittelt werden kann. Die Ermittlungseinheit 5 kann beispielsweise als Prozessor mit entsprechender Software ausgebildet sein.
Ferner ist eine Bewertungseinheit 6 zum Bewerten und Einteilen der auszugebenden Informationen in verschiedene kritische Kategorien vorgesehen. Dabei können die Informationen auch den Fahrerzustand selbst, das Fahrzeugumfeld selbst und den Fahrzeugzustand selbst beispielsweise wie „Reifendruck niedrig“, oder „Achtung Stauende“ betreffen. Auch können die auszugebenden Informationen Antworten auf eine vom Fahrer gestellte Frage sein. In diesem Fall ist das Ausgabegerät auch als Eingabegerät ausgebildet. Die Bewertungseinheit 6 kann beispielsweise als Prozessor mit entsprechender Software ausgebildet sein.
Diese Bewertung kann beispielsweise beinhalten, ob und in welchem Maße die Information sicherheitskritisch, zeitkritisch oder in anderer Hinsicht kritisch ist. Dabei kann die Bewertung der auszugebenden Informationen in Form von Metadaten beigefügt werden.
Für die Bewertung kann ferner zudem ein trainiertes maschinelles Lernverfahren Einsatz finden, welches eine Einteilung der auszugebenden Informationen in eine zeitkritische und/oder sicherheitskritische Kategorie vornimmt. Auch kann ein Katalog von kritischen Informationen für bestimmte Situationen definiert und angewendet werden.
Ferner ist ein multimodales Ausgabesystem 7 vorgesehen. In dieses kann beispielsweise die Zustandsermittlungseinheit 3, die Umfeldermittlungseinheit 4, die Ermittlungseinheit 5 und die Bewertungseinheit 6 integriert sein.
Das multimodale Ausgabesystem 7 ist über entsprechende Ausgabekanäle 8 an verschiedene Ausgabegeräte 9 zur Ausgabe der Informationen verbunden. Ein Ausgabegerät 9 mit einem Ausgabekanal 8 bezeichnet dabei die Art und Weise, wie Informationen an den Fahrer weitergegeben werden. Dabei können die Ausgabegeräte 9 beispielsweise Displays oder Lichtsensoren zur visuellen Ausgabe, Mikrofone oder Lautsprecher oder andere akustische Sensoren oder angeschlossene Headsets für eine Sprachausgabe, oder Aktoren wie Rüttelaktoren in Sitzen oder im Lenkrad, für beispielsweise eine haptische Ausgabe sein.
Ferner weist das multimodale Ausgabesystem 7 eine Speichereinheit 10 auf. Die auszugebenden Informationen werden vom multimodalen Ausgabesystem 7 in die Speichereinheit 10 gespeichert. Dadurch fungiert das multimodale Ausgabesystem 7 als Warteschlange, welches die Ausgabe der Informationen an den Fahrer verwaltet.
Abhängig von beispielsweise der Bewertung der Informationen oder dem Fahrerzustand oder anderen Kriterien kann das multimodale Ausgabesystem 7 entscheiden, wann und wie die Informationen realisiert werden. Das multimodale Ausgabesystem 7 fungiert somit als zentraler Knotenpunkt.
Ferner kann das multimodale Ausgabesystem 7 ein trainiertes Lernverfahren aufweisen um ein oder mehrere Ausgabegeräte zur Ausgabe der Informationen auszuwählen und um die Entscheidung zu treffen, wann die Ausgaben realisiert werden. Dabei bestimmt das multimodale Ausgabesystem 7 diese Ausgabe der Informationen unter Berücksichtigung des erfassten Fahrerzustandes und des erfassten Fahrzeugumfelds sowie des erfassten Fahrzeugzustandes sowie der Bewertung der Informationen.
Dadurch wird verhindert, dass sicherheitskritische System Informationen auf die gleiche Weise weitergeleitet werden wie komfortbezogene.
Ebenso wird bei der Wahl des Ausgabegerätes 9 das Umfeld berücksichtigt. So wird beispielsweise in einer lauten Umgebung eine nicht-kritische Systemantwort beispielsweise eher auf unauffällige, nicht-invasive Weise übermittelt, z. B. über ein visuelles Signal oder eine Textnachricht, da eine Sprachausgabe unter solchen Bedingungen schwer zu verstehen sein kann. Ferner wird bei der Wahl des Ausgabegerätes 9 der aktuelle Zustand des Fahrers berücksichtigt. Dadurch kann zum Beispiel in einer stressigen Situation beim Autofahren wie bei der Navigation im dichten Verkehr durch ein unbekanntes, dicht besiedeltes Gebiet, durch ein Zurückstellen der Information oder durch eine intelligente Wahl des Ausgabegerätes 9 eine zusätzlich kognitive Belastung des Fahrers verhindert werden.
Das intelligente Kommunikationssystem 1 kann z. B. alle Meldungen in eine Warteschlange stellen, bis der Fahrer die stressige Situation verlassen hat, und sie dann entsprechend weiterleiten.
Ebenso wird bei der Wahl des Ausgabegerätes 9 die Bewertung der Information bzw. die Kategorie in Betracht gezogen.
Das intelligente Kommunikationssystem 1 trägt somit zu einem angenehmeren und deutlich sichereren Fahrerlebnis bei, z. B. durch die Berücksichtigung der aktuellen kognitiven Belastung, des Stresslevels und der Handlungen eines Fahrers. Ferner kann zwischen verschiedenen Gruppen von Informationen, z. B. solchen, die sicherheitskritisch sind oder eher Komfortmerkmale betreffen, unterschieden werden.
Ferner kann durch das erfindungsgemäße intelligente Kommunikationssystem 1 die Informationen dynamisch und automatisch durch den am besten geeigneten Ausgabekanal 8 und somit über das am besten geeignete Ausgabegerät 9 ausgegeben werden.
Dabei kann die Information auch eine Antwort auf eine Frage des Fahrers sein oder eine Interaktion des Fahrers mit dem Fahrzeug.
FIG 2 zeigt eine weitere Ausgestaltung eines intelligenten Kommunikationssystems 1 a.
Dieses weist- wie das intelligente Kommunikationssystem 1- die
Zustandsermittlungseinheit 3, die Umfeldermittlungseinheit 4 und die Ermittlungseinheit 5, und die Bewertungseinheit 6 als auch das multimodale Ausgabesystem 7 auf.
Ferner weist das intelligente Kommunikationssystem 1 a eine Steuereinheit 11 auf oder ist zur Kommunikation mit dieser verbunden, zur Übermittlung von einem vorab festgelegten erfassten Fahrerzustand und einem vorab festgelegten erfassten Fahrzeugumfeld sowie einem vorab festgelegten erfassten Fahrzeugzustand sowie einer vorab festgelegten Bewertung der Informationen. Die Steuereinheit 11 kann beispielsweise anhand der Bewertung der Information fahrzeugübergreifend tätig werden, beispielsweise Fahrer anderer Fahrzeuge, welche sich in der Nähe befinden, warnen, wenn ein Fahrer in einer Situation mit hohem Verkehrsaufkommen in einem gestressten Zustand ist. Ferner kann beispielsweise die Steuereinheit 11 bei kritischer Bewertung entsprechende Maßnahmen ergreifen. So kann beispielsweise ein Bremsvorgang eingeleitet werden, um einen Unfall zu verhindern.
Bezugszeichenliste
1 Kommunikationssystem
2 Fahrzeugsensoren
3 Zustandsermittlungseinheit
4 Umfeldermittlungseinheit
5 Ermittlungseinheit
6 Bewertungseinheit
7 multimodales Ausgabesystem
8 Ausgabekanäle
9 Ausgabegeräte
10 Speichereinheit
11 Steuereinheit

Claims

Patentansprüche
1. Intelligentes Kommunikationssystem (1 ,1 a) zum Steuern einer Ausgabe von Informationen an einen Fahrzeuginsassen in einem Fahrzeug umfassend eine Zustandsermittlungseinheit (3) zum Bestimmen eines Fahrerzustandes anhand mehrerer, zumindest teilweise den Fahrer erfassender Fahrzeugsensoren (2), und eine Umfeldermittlungseinheit (4) zum Bestimmen des Fahrzeugumfelds anhand mehrerer Fahrzeugsensoren (2), und eine Ermittlungseinheit (5) zum Ermitteln des Fahrzeugzustandes anhand mehrerer Fahrzeugsensoren (2), eine Bewertungseinheit (6) zum Bewerten und Einteilen der auszugebenden Informationen in verschiedene kritische Kategorien, und ein multimodales Ausgabesystem (7), welches zur Ausgabe der Informationen mit verschiedenen Ausgabegeräten (9), von denen zumindest zwei mit dem Fahrer auf unterschiedliche Art kommunizieren, verbunden ist, und wobei das multimodale Ausgabesystem (7) dazu ausgebildet ist, anhand des erfassten Fahrerzustandes und anhand des erfassten Fahrzeugumfelds sowie anhand des erfassten Fahrzeugzustandes sowie anhand der Bewertung der Informationen, ein oder mehrere Ausgabegeräte (9) auszuwählen und eine Ausgabe der auszugebenden Informationen über die eine oder mehreren ausgewählten Ausgabegeräte (9) zu bewerkstelligen.
2. Intelligentes Kommunikationssystem (1 ,1 a) nach Anspruch 1 , dadurch gekennzeichnet, dass das multimodale Ausgabesystem (7) dazu ausgebildet ist, je nach Ausgabegerät (9) eine visuelle oder haptische oder akustische Ausgabe als unterschiedliche Kommunikationsart mit dem Fahrer zu bewerkstelligen.
3. Intelligentes Kommunikationssystem (1 ,1 a) nach einem der vorhergehenden Ansprüche, dadurch gekennzeichnet, dass die Bewertungseinheit (6) dazu ausgebildet ist, eine Einteilung der auszugebenden Information in eine zeitkritische und/oder sicherheitskritische Kategorie vorzunehmen.
4. Intelligentes Kommunikationssystem (1 ,1 a) nach einem der vorhergehenden Ansprüche, dadurch gekennzeichnet, dass das multimodale Ausgabesystem (7) ein trainiertes maschinelles Lernverfahren aufweist, welches dazu trainiert ist, unter Berücksichtigung des erfassten Fahrerzustandes und des erfassten Fahrzeugumfelds sowie des erfassten Fahrzeugzustandes sowie der Bewertung der Information eine Ausgabe der Information über ein bestimmtes oder mehrere Ausgabegeräte (9) zu bewerkstelligen und wobei das multimodale Ausgabesystem (7) ferner dazu ausgebildet ist, die Information dem oder den ausgewählten Ausgabegeräten (9) bereitzustellen.
5. Intelligentes Kommunikationssystem (1 ,1 a), nach einem der vorhergehenden Ansprüche, dadurch gekennzeichnet, dass das multimodale Ausgabesystem (7) eine Speichereinheit (10) aufweist zum Zwischenspeichern und nachträglichen Ausgeben der auszugebenden Informationen.
6. Intelligentes Kommunikationssystem (1 ,1 a) nach Anspruch 5, dadurch gekennzeichnet, dass das multimodale Ausgabesystem (7) dazu ausgebildet ist, verschiedene gespeicherte Informationen zumindest in einer Reihenfolge auszugeben, wobei die Reihenfolge durch das multimodale Ausgabesystem (7) anhand der Bewertung der gespeicherten Informationen festgelegt ist.
7. Intelligentes Kommunikationssystem (1 ,1 a) nach Anspruch 5 oder 6, dadurch gekennzeichnet, dass das multimodale Ausgabesystem (7) dazu ausgebildet ist, die gespeicherten Informationen nach ihrer Ausgabe zu löschen.
8. Intelligentes Kommunikationssystem (1 ,1 a) nach einem der vorhergehenden Ansprüche, dadurch gekennzeichnet, dass das multimodale Ausgabesystem (7) zur Übermittlung von einem vorab festgelegten erfassten Fahrerzustand und einem vorab festgelegten erfassten Fahrzeugumfeld sowie einem vorab festgelegten erfassten Fahrzeugzustand sowie einer vorab festgelegten Bewertung der Information an eine Steuereinheit (11 ) ausgebildet ist. 19
9. Intelligentes Kommunikationssystem (1 ,1 a) nach einem der vorhergehenden Ansprüche, dadurch gekennzeichnet, dass das multimodale Ausgabesystem (7) zur Generierung der auszugebenden Information anhand des erfassten Fahrerzustandes und des erfassten Fahrzeugumfelds sowie des erfassten Fahrzeugzustandes ausgebildet ist.
10. Intelligentes Kommunikationssystem (1 ,1a) nach einem der vorhergehenden Ansprüche, dadurch gekennzeichnet, dass das multimodale Ausgabesystem (7) zumindest zur unidirektionalen Kommunikation mit einer externen Datenquelle, zum Empfang der auszugebenden Information ausgebildet ist.
11. Intelligentes Kommunikationssystem (1 ,1 a) nach einem der vorhergehenden Ansprüche, dadurch gekennzeichnet, dass das intelligente Kommunikationssystem (1 ,1 a) dazu ausgebildet ist, Fahrereingaben, welche über die verschiedenen Ausgabegeräte (9) eingegeben werden, zu empfangen und zu verarbeiten.
12. Intelligentes Kommunikationssystem (1 ,1 a) nach einem der vorhergehenden Ansprüche, dadurch gekennzeichnet, dass das intelligente Kommunikationssystem (1 ,1 a) dazu ausgebildet ist, Benutzereingaben, welche über die verschiedenen Ausgabegeräte (9) eingegeben werden zu empfangen und wobei die Bewertungseinheit (6) ferner dazu ausgebildet ist, eine auszugebende Information unter Berücksichtigung der Benutzereingaben zu bewerten.
13. Verfahren zum Steuern einer Ausgabe von Informationen an einen Fahrzeuginsassen in einem Fahrzeug mittels eines intelligenten Kommunikationssystems (1 ,1 a) nach einem der vorhergehenden Ansprüche umfassend der Schritte
- Bestimmen eines Fahrerzustandes anhand mehrerer, zumindest teilweise den Fahrer erfassender Fahrzeugsensoren (2) durch eine Zustandsermittlungseinheit (3) und
- Bestimmen des Fahrzeugumfelds anhand mehrerer Fahrzeugsensoren (2) durch eine Umfeldermittlungseinheit (4) und 20
- Ermitteln des Fahrzeugzustandes anhand mehrerer Fahrzeugsensoren (2) durch eine Ermittlungseinheit (5),
- Bewerten und Einteilen der auszugebenden Informationen in verschiedene kritische Kategorien durch eine Bewertungseinheit (6),
- Bereitstellen eines multimodalen Ausgabesystems (7), welches zur Ausgabe der Informationen mit verschiedenen Ausgabegeräten (9), von denen zumindest zwei mit dem Fahrer auf unterschiedliche Art kommunizieren, verbunden ist,
- Auswahlen ein oder mehrere Ausgabegeräte (9) anhand des erfassten Fahrerzustandes und des erfassten Fahrzeugumfelds sowie anhand des Fahrzeugzustandes sowie anhand der Bewertung der Informationen, und Bewerkstelligen einer Ausgabe der auszugebenden Informationen über die eine oder mehreren ausgewählten Ausgabegeräte (9) durch das multimodale Ausgabesystem (7).
PCT/DE2022/200165 2021-08-23 2022-07-22 Intelligentes kommunikationssystem zum steuern der ausgabe von informationen an einen fahrzeuginsassen WO2023025358A1 (de)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
DE102021209205.5A DE102021209205A1 (de) 2021-08-23 2021-08-23 Intelligentes Kommunikationssystem zum Steuern der Ausgabe von Informationen an einen Fahrzeuginsassen
DE102021209205.5 2021-08-23

Publications (1)

Publication Number Publication Date
WO2023025358A1 true WO2023025358A1 (de) 2023-03-02

Family

ID=82786344

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/DE2022/200165 WO2023025358A1 (de) 2021-08-23 2022-07-22 Intelligentes kommunikationssystem zum steuern der ausgabe von informationen an einen fahrzeuginsassen

Country Status (2)

Country Link
DE (1) DE102021209205A1 (de)
WO (1) WO2023025358A1 (de)

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE10338566A1 (de) * 2003-08-22 2005-03-17 Daimlerchrysler Ag Informationsausgabesystem eines Fahrzeugs und zugehöriges Informationsausgabeverfahren
DE102007025404A1 (de) * 2006-06-01 2007-12-06 Denso Corp., Kariya Unterrichtungs-Steuervorrichtung, Unterrichtungs-Steuerverfahren und Unterrichtungsinformationssender
US20170190337A1 (en) 2014-05-01 2017-07-06 Jaguar Land Rover Limited Communication system and related method
DE102017130414A1 (de) * 2016-12-20 2018-06-21 GM Global Technology Operations LLC Fahrzeug-systeme zur kontextabhängigen beurteilung
DE102019118183A1 (de) * 2019-07-05 2021-01-07 Bayerische Motoren Werke Aktiengesellschaft System und Verfahren zur Information

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE19961871A1 (de) 1999-12-22 2001-07-12 Audi Ag Fahrerinformationssystem eines Kraftfahrzeuges und eine hierfür bestimmte Fahrerinformationseinrichtung
DE102015220237A1 (de) 2015-10-16 2017-04-20 Zf Friedrichshafen Ag Fahrzeugsystem und Verfahren zur Aktivierung einer Selbstfahreinheit zum autonomen Fahren

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE10338566A1 (de) * 2003-08-22 2005-03-17 Daimlerchrysler Ag Informationsausgabesystem eines Fahrzeugs und zugehöriges Informationsausgabeverfahren
DE102007025404A1 (de) * 2006-06-01 2007-12-06 Denso Corp., Kariya Unterrichtungs-Steuervorrichtung, Unterrichtungs-Steuerverfahren und Unterrichtungsinformationssender
US20170190337A1 (en) 2014-05-01 2017-07-06 Jaguar Land Rover Limited Communication system and related method
DE102017130414A1 (de) * 2016-12-20 2018-06-21 GM Global Technology Operations LLC Fahrzeug-systeme zur kontextabhängigen beurteilung
DE102019118183A1 (de) * 2019-07-05 2021-01-07 Bayerische Motoren Werke Aktiengesellschaft System und Verfahren zur Information

Also Published As

Publication number Publication date
DE102021209205A1 (de) 2023-02-23

Similar Documents

Publication Publication Date Title
DE102016209501B4 (de) Verfahren zum Generieren einer Warnung an einen oder mehrere Insassen eines Fahrzeugs
DE112016004391B4 (de) Dialogvorrichtung und Dialogverfahren
DE60124937T2 (de) Verfahren und gerät zur verbesserung des fahrerverhaltens in einem fahrzeug
DE102017113447A1 (de) Fahrverhaltensanalyse basierend auf einer Fahrzeugbremsung
DE102018127443A1 (de) Bordeigenes System zum Kommunizieren mit den Insassen
DE102005058227A1 (de) Emotions-basierter Softwareroboter für Automobile
DE102019118184A1 (de) System und Verfahren zur nutzerindividuellen Anpassung von Fahrzeugparametern
DE102012105285A1 (de) Verfahren und ein System zum Assistieren eines Fahrers eines Kraftfahrzeugs
DE10008226C2 (de) Vorrichtung zur Sprachsteuerung und Verfahren zur Sprachsteuerung
DE102018202394A1 (de) Verfahren zum Betreiben einer Schallausgabeeinrichtung eines Kraftfahrzeugs, Steuereinrichtung, und Kraftfahrzeug
WO2020064281A1 (de) Bereitstellen eines interaktiven feedbacks zu einer sprachansage für fahrzeuginsassen
DE102012004601A1 (de) Fahrerassistenzsystem und Verfahren zum Anbieten und/oder Signalisieren von Informationen an einen Insassen eines Kraftfahrzeugs, sowie Kraftfahrzeug mit dem Fahrerassistenzsystem
DE102019105590B3 (de) Cross-Platform Messaging in Fahrzeugen
DE102019118183A1 (de) System und Verfahren zur Information
WO2023025358A1 (de) Intelligentes kommunikationssystem zum steuern der ausgabe von informationen an einen fahrzeuginsassen
DE102021101805A1 (de) Fahrerüberwachungssystem für kraftfahrzeug
DE102019116498A1 (de) Vorrichtung, Fortbewegungsmittel und Verfahren zur Anpassung einer Fahrerassistenzfunktion
DE102013013869B4 (de) Verfahren zum Betrieb eines Fahrerassistenzsystems zur Warnung vor zu großer Ablenkung und Kraftfahrzeug
DE112015007052T5 (de) Verbesserte nachrichtenzustellung
DE102019210928A1 (de) Überwachungseinrichtung für ein Fahrzeug, Verfahren und Computerprogramm
EP3895162A1 (de) Verfahren zum betreiben eines interaktiven informationssystems für ein fahrzeug, sowie ein fahrzeug
DE102018220491A1 (de) Verfahren zum Betrieb eines Kraftfahrzeugs
DE102019204849A1 (de) Erkennung eines durch Personen ausgehenden Gefahrenpotentials
DE102019135409A1 (de) Verfahren sowie Überwachungssystem zum Überwachen eines Wohlbefindens eines Mitfahrers eines Kraftwagens
DE102019112412A1 (de) System und verfahren zur unterstützung des fahrers eines fahrzeugs sowie fahrzeug, insbesondere kraftfahrzeug

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 22750760

Country of ref document: EP

Kind code of ref document: A1