JP2022513521A - 自動運転車両の運転者情報の出力を制御し、運転者の注意を維持するための装置および方法 - Google Patents

自動運転車両の運転者情報の出力を制御し、運転者の注意を維持するための装置および方法 Download PDF

Info

Publication number
JP2022513521A
JP2022513521A JP2021535561A JP2021535561A JP2022513521A JP 2022513521 A JP2022513521 A JP 2022513521A JP 2021535561 A JP2021535561 A JP 2021535561A JP 2021535561 A JP2021535561 A JP 2021535561A JP 2022513521 A JP2022513521 A JP 2022513521A
Authority
JP
Japan
Prior art keywords
driver
information
vehicle
interest
data
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2021535561A
Other languages
English (en)
Inventor
シュルツ，ミヒャエル
ミラモ，ジハド
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Robert Bosch GmbH
Original Assignee
Robert Bosch GmbH
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Robert Bosch GmbH filed Critical Robert Bosch GmbH
Publication of JP2022513521A publication Critical patent/JP2022513521A/ja
Pending legal-status Critical Current

Links

Images

Classifications

    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00—Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/08—Interaction between the driver and the control system
    • B60W50/14—Means for informing the driver, warning the driver or prompting a driver intervention
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K28/00—Safety devices for propulsion-unit control, specially adapted for, or arranged in, vehicles, e.g. preventing fuel supply or ignition in the event of potentially dangerous conditions
    • B60K28/02—Safety devices for propulsion-unit control, specially adapted for, or arranged in, vehicles, e.g. preventing fuel supply or ignition in the event of potentially dangerous conditions responsive to conditions relating to the driver
    • B60K28/06—Safety devices for propulsion-unit control, specially adapted for, or arranged in, vehicles, e.g. preventing fuel supply or ignition in the event of potentially dangerous conditions responsive to conditions relating to the driver responsive to incapacity of driver
    • B60K28/066—Safety devices for propulsion-unit control, specially adapted for, or arranged in, vehicles, e.g. preventing fuel supply or ignition in the event of potentially dangerous conditions responsive to conditions relating to the driver responsive to incapacity of driver actuating a signalling device
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/20—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor
    • B60K35/21—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor using visual output, e.g. blinking lights or matrix displays
    • B60K35/22—Display screens
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/20—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor
    • B60K35/26—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor using acoustic output
    • B60K35/265—Voice
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/20—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor
    • B60K35/28—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor characterised by the type of the output information, e.g. video entertainment or vehicle dynamics information; characterised by the purpose of the output information, e.g. for attracting the attention of the driver
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/20—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor
    • B60K35/28—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor characterised by the type of the output information, e.g. video entertainment or vehicle dynamics information; characterised by the purpose of the output information, e.g. for attracting the attention of the driver
    • B60K35/285—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor characterised by the type of the output information, e.g. video entertainment or vehicle dynamics information; characterised by the purpose of the output information, e.g. for attracting the attention of the driver for improving awareness by directing driver's gaze direction or eye points
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/80—Arrangements for controlling instruments
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/85—Arrangements for transferring vehicle- or driver-related data
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R16/00—Electric or fluid circuits specially adapted for vehicles and not otherwise provided for; Arrangement of elements of electric or fluid circuits specially adapted for vehicles and not otherwise provided for
    • B60R16/02—Electric or fluid circuits specially adapted for vehicles and not otherwise provided for; Arrangement of elements of electric or fluid circuits specially adapted for vehicles and not otherwise provided for electric constitutive elements
    • B60R16/037—Electric or fluid circuits specially adapted for vehicles and not otherwise provided for; Arrangement of elements of electric or fluid circuits specially adapted for vehicles and not otherwise provided for electric constitutive elements for occupant comfort, e.g. for automatic adjustment of appliances according to personal settings, e.g. seats, mirrors, steering wheel
    • B60R16/0373—Voice control
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W30/00—Purposes of road vehicle drive control systems not related to the control of a particular sub-unit, e.g. of systems using conjoint control of vehicle sub-units
    • B60W30/18—Propelling the vehicle
    • B60W30/18009—Propelling the vehicle related to particular drive situations
    • B60W30/181—Preparing for stopping
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W40/00—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
    • B60W40/02—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to ambient conditions
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W40/00—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
    • B60W40/08—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to drivers or passengers
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W60/00—Drive control systems specially adapted for autonomous road vehicles
    • B60W60/001—Planning or execution of driving tasks
    • B60W60/0013—Planning or execution of driving tasks specially adapted for occupant comfort
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01C—MEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
    • G01C21/00—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
    • G01C21/26—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
    • G01C21/34—Route searching; Route guidance
    • G01C21/3453—Special cost functions, i.e. other than distance or default speed limit of road segments
    • G01C21/3476—Special cost functions, i.e. other than distance or default speed limit of road segments using point of interest [POI] information, e.g. a route passing visible POIs
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00—Pattern recognition
    • G06F18/20—Analysing
    • G06F18/25—Fusion techniques
    • G06F18/251—Fusion techniques of input or preprocessed data
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00—Arrangements for image or video recognition or understanding
    • G06V10/70—Arrangements for image or video recognition or understanding using pattern recognition or machine learning
    • G06V10/77—Processing image or video features in feature spaces; using data integration or data reduction, e.g. principal component analysis [PCA] or independent component analysis [ICA] or self-organising maps [SOM]; Blind source separation
    • G06V10/80—Fusion, i.e. combining data from various sources at the sensor level, preprocessing level, feature extraction level or classification level
    • G06V10/803—Fusion, i.e. combining data from various sources at the sensor level, preprocessing level, feature extraction level or classification level of input or preprocessed data
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/50—Context or environment of the image
    • G06V20/59—Context or environment of the image inside of a vehicle, e.g. relating to seat occupancy, driver state or inner lighting conditions
    • G06V20/597—Recognising the driver's state or behaviour, e.g. attention or drowsiness
    • G—PHYSICS
    • G08—SIGNALLING
    • G08G—TRAFFIC CONTROL SYSTEMS
    • G08G1/00—Traffic control systems for road vehicles
    • G08G1/09—Arrangements for giving variable traffic instructions
    • G08G1/0962—Arrangements for giving variable traffic instructions having an indicator mounted inside the vehicle, e.g. giving voice messages
    • G—PHYSICS
    • G08—SIGNALLING
    • G08G—TRAFFIC CONTROL SYSTEMS
    • G08G1/00—Traffic control systems for road vehicles
    • G08G1/09—Arrangements for giving variable traffic instructions
    • G08G1/0962—Arrangements for giving variable traffic instructions having an indicator mounted inside the vehicle, e.g. giving voice messages
    • G08G1/09626—Arrangements for giving variable traffic instructions having an indicator mounted inside the vehicle, e.g. giving voice messages where the origin of the information is within the own vehicle, e.g. a local storage device, digital map
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04W—WIRELESS COMMUNICATION NETWORKS
    • H04W4/00—Services specially adapted for wireless communication networks; Facilities therefor
    • H04W4/02—Services making use of location information
    • H04W4/021—Services related to particular areas, e.g. point of interest [POI] services, venue services or geofences
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04W—WIRELESS COMMUNICATION NETWORKS
    • H04W4/00—Services specially adapted for wireless communication networks; Facilities therefor
    • H04W4/02—Services making use of location information
    • H04W4/029—Location-based management or tracking services
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00—Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/148—Instrument input by voice
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00—Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/16—Type of output information
    • B60K2360/164—Infotainment
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00—Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/16—Type of output information
    • B60K2360/165—Videos and animations
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00—Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/16—Type of output information
    • B60K2360/166—Navigation
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00—Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/55—Remote control arrangements
    • B60K2360/56—Remote control arrangements using mobile devices
    • B60K2360/566—Mobile devices displaying vehicle information
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00—Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/595—Data transfer involving internal databases
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/10—Input arrangements, i.e. from user to vehicle, associated with vehicle functions or specially adapted therefor
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W40/00—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
    • B60W40/08—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to drivers or passengers
    • B60W2040/089—Driver voice
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00—Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/08—Interaction between the driver and the control system
    • B60W50/14—Means for informing the driver, warning the driver or prompting a driver intervention
    • B60W2050/143—Alarm means
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00—Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/08—Interaction between the driver and the control system
    • B60W50/14—Means for informing the driver, warning the driver or prompting a driver intervention
    • B60W2050/146—Display means
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2420/00—Indexing codes relating to the type of sensors based on the principle of their operation
    • B60W2420/40—Photo, light or radio wave sensitive means, e.g. infrared sensors
    • B60W2420/403—Image sensing, e.g. optical camera
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2520/00—Input parameters relating to overall vehicle dynamics
    • B60W2520/04—Vehicle stop
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2540/00—Input parameters relating to occupants
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2540/00—Input parameters relating to occupants
    • B60W2540/223—Posture, e.g. hand, foot, or seat position, turned or inclined
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2540/00—Input parameters relating to occupants
    • B60W2540/225—Direction of gaze
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2540/00—Input parameters relating to occupants
    • B60W2540/229—Attention level, e.g. attentive to driving, reading or sleeping
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2552/00—Input parameters relating to infrastructure
    • B60W2552/20—Road profile, i.e. the change in elevation or curvature of a plurality of continuous road segments
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2555/00—Input parameters relating to exterior conditions, not covered by groups B60W2552/00, B60W2554/00
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2556/00—Input parameters relating to data
    • B60W2556/45—External transmission of data to or from the vehicle
    • B60W2556/50—External transmission of data to or from the vehicle of positioning data, e.g. GPS [Global Positioning System] data
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/013—Eye tracking input arrangements
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/017—Gesture based interaction, e.g. based on a set of recognized hand gestures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/16—Sound input; Sound output
    • G06F3/167—Audio in a user interface, e.g. using voice commands for navigating, audio feedback

Landscapes

  • Engineering & Computer Science (AREA)
  • Mechanical Engineering (AREA)
  • Transportation (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Combustion & Propulsion (AREA)
  • Chemical & Material Sciences (AREA)
  • Theoretical Computer Science (AREA)
  • Automation & Control Theory (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Multimedia (AREA)
  • Artificial Intelligence (AREA)
  • Evolutionary Computation (AREA)
  • Human Computer Interaction (AREA)
  • Data Mining & Analysis (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Remote Sensing (AREA)
  • Computing Systems (AREA)
  • Software Systems (AREA)
  • Medical Informatics (AREA)
  • General Health & Medical Sciences (AREA)
  • Databases & Information Systems (AREA)
  • Health & Medical Sciences (AREA)
  • Signal Processing (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Mathematical Physics (AREA)
  • General Engineering & Computer Science (AREA)
  • Evolutionary Biology (AREA)
  • Bioinformatics & Computational Biology (AREA)
  • Bioinformatics & Cheminformatics (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Traffic Control Systems (AREA)
  • Navigation (AREA)
  • Control Of Driving Devices And Active Controlling Of Vehicle (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

運転者および／または車両の乗員を楽しませること、および／または運転者の運転者注意力を高めることを目的とした、車両の運転者への運転者情報の出力を制御するための装置および方法である。このために、名所または一般的興味対象物のデータベースが設けられ、地理情報のデータベースが設けられ、車両の所在地を確定する装置が設けられ、この情報が提供される評価装置が設けられている。この評価装置は、車両の現在の所在地および地理情報から、どの名所または一般的興味対象物が運転者の視野内にあるかを特定し、評価装置によって運転者の視野内にあると特定された名所または一般的興味対象物に対する運転者情報を、出力装置を介して出力する。【選択図】図１

Description

本発明は、運転者および／または車両の乗員を楽しませること、および／または運転者の運転者注意力を高めることを目的とした、車両の運転者への運転者情報の出力を制御するための装置および方法に関する。このために、名所または一般的興味対象物のデータベースが設けられ、地理情報のデータベースが設けられ、車両の所在地を確定する装置が設けられ、この情報が提供される評価装置が設けられている。この評価装置は、車両の現在の所在地および地理情報から、どの名所または一般的興味対象物が運転者の視野内にあるかを特定し、評価装置によって運転者の視野内にあると特定された名所または一般的興味対象物に対する運転者情報を、出力装置を介して出力する。
独国特許出願公開第１０２０１３２１２１８６号明細書より、車両外にある少なくとも１つの対象物の少なくとも１つの画像をカメラで撮影するための車両内装置であって、少なくとも１つの撮影対象物の位置情報と、カメラの中間位置の風景モデルと、対象物が位置する風景の風景モデルとを含む地形モデルを含んだメモリを有する、カメラの位置を確定するための位置確定装置と、カメラと撮影対象物との間の視線をカメラの位置、撮影対象物の位置情報および風景モデルから確定するための確定方向装置と、カメラと撮影対象物との間の視線の存在が確定方向装置によって確認された場合に、画像または一連の画像を撮影するようにカメラを制御するように構成された制御装置とを備える車両内装置ならびに画像撮影方法が公知であって、この車両内装置ならびに画像撮影方法によると、車両の走行する範囲においていわゆるＰＯＩを通過した場合にそのＰＯＩの画像を自動的に撮影することが可能となる。
本発明の本質は、運転者の視野内の名所または一般的興味対象物に関する情報を出力することにより、必要に応じて運転者を楽しませ、または必要に応じて運転者の運転者注意力を高める運転者情報の出力を制御するための装置および方法を設けることである。これは、要求信号の出力により行うことができる。
本発明によれば、これは、独立請求項の特徴によって解決される。有利な改善形態および実施形態は、従属請求項から明らかである。
要求信号は、例えば、運転者の視線や運転者のジェスチャーが長時間持続するなどの運転者主導の行動を検出することで出力してもよいし、または要求信号は、例えば、運転者監視システムが運転者の疲労を検知して要求信号を出力するなど、特定の状況でトリガ条件が満たされたと検知する監視システムによって出力してもよい。
有利には、運転者監視装置が追加してけられ、運転者監視装置により、運転者の現在の視線方向および／または運転者の顔の表情および／または運転者のジェスチャーおよび／または運転者の指または手または腕の指し示す方向および／または音声認識装置および／または運転者による操作装置の操作が検出され、運転者の現在の視野が確定されることができる。ここで、視野とは、運転者が現在観察している領域である。また、視野は、この場合興味領域として、すなわち、所定の空間範囲を有する興味点周囲の領域として定義できる。これに加え、運転者監視カメラ、例えば車内カメラを使用することが特に有利であり、このカメラは、現在の運転事象に関する運転者の注意を撮影することができ、ジェスチャーまたは表情、および運転者の視線方向を検知して評価装置に提供することができる。
さらに、本発明にかかる方法の範囲において有利なのは、評価装置には、運転者監視装置のデータが追加して供給され、特に、運転者の視線方向検知のデータおよび／または運転者の表情検知のデータおよび／または運転者のジェスチャー検知のデータおよび／または運転者の指の指し示す方向検知のデータおよび／または音声認識装置のデータおよび／または運転者操作型の操作装置のデータが評価装置に供給され、評価装置から運転者の現在の視野が確定されることである。
さらに有利なのは、環境センサが車両に設けられ、および／または車両方向確定装置が設けられ、車両方向確定装置によって運転者の現在の視野が確定されることである。この車両方向確定装置または車両前方の車両環境を検出するための環境センサによって、運転者の現在の大まかな視線方向が確定され、ここから、地理情報のデータベースと、名所または一般的興味対象物を有するデータベースとに関連付けて、運転者の視野内で現在どの名所または一般的興味対象物が視認されているかを確定できる。特に、車両上の環境センサは、進行方向に向けられた運転支援カメラであってもよく、通常は、車両のフロントガラスの領域に取り付けられ、車両の進行方向の車両環境を検出する。
現在の運転者視線方向を知り、現在車両環境で視認されている名所または一般的興味対象物を知ることで、運転者が現在名所を見ているか、あるいは名所または公共の興味対象物を指しているかを判断し、ひいては、この対象物に関連付けられた情報を再生すべきかどうかを判断することができる。さらに、運転者が疲労していることや眠り始めていることを検知した場合に、現在視認可能な公共の興味対象物や現在視認可能な名所に関する情報を再生することができる。これにより、運転者の疲労を軽減し、交通安全性を向上することができる。
さらに有利なのは、出力装置が、画像および／または映像を出力するための表示装置であり、および／または音楽および／または音声情報が出力されるオーディオシステムであることである。ここで、名所や公共の興味対象物に関連する情報は、歴史事実、建築物、都市計画、スポーツ、文化、自然や景観の名所についてのビデオやテキスト、画像であってよい。この場合、対象物ごとに異なる種類の複数の情報を記憶することができる。
さらに有利なのは、評価装置が、出力装置を用いて、運転者が指で差し示した、運転者が視線を向けた、または運転者が音声制御によって口頭で情報システムに情報を要求した、名所または一般的興味対象物に関する運転者情報を出力することである。この場合、有利なのは、運転者が視線または指差しを極めて短い時間一般的興味対象物または名所に固定することで、これに関連する情報の再生が望まれていることを検知することを実施できることである。さらに、代替的にまたは組み合わせて、スイッチまたは画面入力装置（タッチスクリーン）のような運転者操作型の操作要素によって、情報の出力を手動で要求することが可能である。
さらに有利なのは、運転者監視装置によって検知された、運転者の視線方向または運転者の指差し方向を車両座標系からワールド座標系に変換し、特定された現在の車両位置を考慮し、かつ特定された現在の車両方向を考慮して、運転者の現在の視野（７）を特定することである。車内センサシステムは車両に固定されており、車両に固定された座標に対してのみ運転者の視線方向または指差し方向を確定できるため、特定された現在の車両位置と、特定された現在の車両方向とを用いて、この視線方向または指差し方向が車両座標系からワールド座標系に変換される場合に特に有利である。運転者の視線または指差し方向がワールド座標系、すなわち、車両や他の移動体と共に移動しない静止座標系にあれば、指差し方向または視線が、名所または一般的興味対象物の地理座標系と同じ座標系にあるため、どの名所またはどの一般的興味対象物が運転者の視線内に位置しているのかを比較的容易に特定できる。
さらに有利なのは、運転者監視装置が、運転者が疲労の兆候を有していること、退屈の兆候を示していること、運転現象にもはや注意を払わなくなったこと、または運転経路が単調であることを検知すると、最も近い名所または最も近い一般的興味対象物の情報の出力を自動的に開始することである。これにより、システム主導で情報、特に運転者が興味のある情報を再生することで、運転者の運転者注意力を高め、ひいては交通安全に寄与することができる。運転者の疲労や運転者の不注意を、例えば運転者および運転者の顔の規則性を撮影した車内カメラを用いて検出することができる。疲労が出現している、または注意が欠陥している運転者は特徴的な操縦動作や操縦パターンを有するため、代替的にまたは組み合わせて、操縦角を評価することもできる。退屈の兆候は、例えば、運転現象から逸脱した視線の頻度および持続時間に基づいて特定することができる。走行経路の単調さの兆候は、ガードレールのような反復パターンの規則性および持続時間を検知することによって、例えば映像に基づく、またはレーダに基づく環境センサを用いて検出することができる。
さらに有利なのは、特に、歴史、文化、建築、スポーツ、経済、または景観や自然などの異なる情報分野に関して、各名所または各一般的興味対象物について、複数の情報がデータベースに記憶されていることであり、繰り返しを避け、運転者の好みに応じて情報を再生するために、どの情報が以前の時点で既に再生されているかが格納されることである。これにより、同一経路を複数回走行する場合には、同じ名所や同じ一般的興味対象物を通過するたびに毎回異なる情報を出力でき、したがって、同じ場所を通過するたびに同じ情報が繰り返されることがないため、運転者は同じ場所を複数回通過しても新たな情報、ひいては興味のある情報を得ることができる。さらに有利なのは、運転者によって、名所または一般的興味対象物に対してどの情報が出力装置によって再生されるか、または、名所または一般的興味対象物に対する情報がどの順序で再生されるかの好みを設定できることである。名所または一般的興味対象物に対して、分野ごとに異なる情報が記憶されており、例えば、歴史情報、建築情報、スポーツ情報、自然や風景に関する情報、国や人々に関する情報などの分野が格納されているため、運転者は、自分の好みの情報分野を指定したり、情報分野のリストを興味の順に並べ替えたりすることができるため、情報の再生中に、運転者の興味のある分野の情報のみが再生されたり、複数回通過する場合には、様々な情報が興味の順に再生されたりする。
本発明にかかる方法は、例えば、ソフトウェアまたはハードウェアで、またはソフトウェアとハードウェアの混合形態で、例えば制御装置に実装することができる。
また、本明細書に提示されたアプローチは、対応する装置において、本明細書に提示された方法の変形例のステップを実行、制御、または実施するように構成された運転者情報および運転者注意システムを生成する。
運転者情報の再生を制御するための制御システムまたは運転者注意力を高めるための制御システムは、信号またはデータを処理するための少なくとも１つの演算装置と、信号またはデータを記憶するための少なくとも１つの記憶ユニットと、通信プロトコルに埋め込まれたデータを読み取り、また出力するための少なくとも１つのインターフェースおよび／または通信インターフェースとを備える電気装置であってよい。演算装置は、例えば、センサ信号を処理し、センサ信号に依存してデータ信号を出力するための信号プロセッサ、いわゆるシステムＡＳＩＣやマイクロコントローラであってよい。記憶ユニットは、例えば、フラッシュメモリ、ＥＰＲＯＭ、または磁気記憶ユニットであってよい。インターフェースは、センサからのセンサ信号を読み取るためのセンサインターフェース、および／または、データ信号および／または制御信号をアクチュエータに出力するためのアクチュエータインターフェースとして構成することができる。通信インターフェースは、無線および／または有線でデータを読み込んだり、出力したりするように構成することができる。また、インターフェースは、他のソフトウェアモジュールに加えて、例えばマイクロコントローラ上に存在するソフトウェアモジュールであってもよい。
半導体メモリ、ハードディスクメモリまたは光メモリなどの機械読み取り可能な媒体または記憶媒体に記憶されることができ、上述のいずれかの実施形態にかかる方法のステップを実行、実施および／または制御するために使用されるプログラムコードを有するコンピュータプログラム製品またはコンピュータプログラムが、特にプログラム製品またはプログラムがコンピュータ、プログラム可能な制御装置、または同様の装置で実施される場合に有利である。
本発明のいくつかの考えられる特徴および利点は、運転者情報装置の制御方法として、様々な実施形態に関連して本明細書に説明されていることに留意されたい。当業者は、本発明のさらなる実施形態に到達するために、特徴を適宜組み合わせたり、適応させたり、または相互に交換したりできることを認識している。
以下に、本発明の実施例を、図面を参照して説明する。
本発明の一実施形態を説明するための概略的な走行状況である。 本発明にかかる装置の一実施形態の概略ブロック図である。 本発明にかかる方法の一実施形態を説明するための概略ブロック図である。
図１は、道路１が描かれた例示的な走行状況を示す。本発明にかかるシステムを有する車両２は、この道路１を走行する。また、道路１はカーブを有し、車両２の運転者は近い領域でのみ道路１を見ることができる。ここで、車両２は、自動運転モード、またはそれも自律運転モードさえ有する車両であるため、運転者は、手動での車両操作に加えて、車両を独立して運転させることができ、自動運転の場合には、監視タスクのみを行うか、または全く運転責任を負う必要がない。車両２には、例えば環境センサが設置されており、このセンサは例示的に、車両のフロントウィンドウの領域にカメラとして設置されている。あるいは、グローバル衛星ナビゲーションシステムのセンサ、例えばＧＰＳセンサを使用してもよく、ＧＰＳセンサはジャイロセンサやデジタルマップと共に評価され、車両方向を確定することができる。
車両２の運転者は、車両２が道路１を走行する間、一定の地形区間を概観することができる。このために、運転者の視野７の限界を図１に記入する。なお、車両に設置された環境センサは、例えば車両のフロントガラスの領域にフロントカメラとして設置されていてもよく、この時ほぼ同じ視野７を有する。本発明によれば、運転者の視野７内にどの名所３、４、５があるかが特定される。例示的に、村として示されている名所３は、ここで運転者の視野７内に位置する。図１に例示的に風景の名所または自然の名所として示されている公共の興味対象物４は、この場合運転者の視野４の外側に位置しており、運転者が首を回すか、または、この名所４が運転者の視野７に入るように、運転者が道路１のさらなるコースで車両２の車両方向を変更した場合にのみ、運転者に視認できるようになる。さらなる名所５は、例示的に城の形態で歴史的または建築的な名所として示されており、例示的に図１において山として示されている***地形６の背後に位置している。名所５の形態であるこの一般的興味対象物も、村として示されている名所３と全く同様に、運転者の視野７内に位置しているであろうが、城５は***地形６の後方にあるため、名所５は運転者には視認できない。車両２が***地形を部分的に迂回した時に、道路１のさらなるコースにおいてのみ、描かれた城の形態の名所５が視認可能となる。図１の例示的に示されているこの運転状況においては、車両２の運転者にとっては、村３の形態の一般的興味対象物のみが、瞬間的に運転者の視野７で視認されることが認識される。一般的興味を有する風景対象物の形態の名所４は、視野角が原因で視野７の外側にあるため視野内に位置しておらず、建築上の興味や歴史上の興味を有する、城５の形態の名所５は、***地形６によって隠されているため、運転者は視野７で視認できない。本発明によれば、一般的興味対象物のデータベースにおける名所３、４、５の位置を用いて、現在視野７内にある対象物の位置が確定される。同じデータベースから、またはさらなるデータベースから、周囲の地形の地理情報が提供され、これにより高さデータが特定され、これらのデータにより、どの一般的興味対象物３、４、５が車両２の運転者の視線方向に位置するかだけでなく、地形の地理により現在実際に運転者に視認可能かが確定される。村３は、車両２の運転者の視野７内にある唯一の一般的興味対象物であり、運転者にも現在視認可能であるため、この対象物に対する情報が保持される。ここで、対象物３、４、５のそれぞれについて、例えば歴史的背景に関する情報、景観の特性、スポーツ情報、文化情報、またはさらなる情報分野に関する情報など、複数の情報を保持できる。要求信号があって初めて、現在視野７内にある名所３に対するこの情報が出力され、情報出力の際には、どの情報分野を出力するべきか、またはどの分野を優先的に出力するべきかの好みを運転者によって予め設定できる。この要求は、例えば、運転者の視野７内に位置する名所３のうち１つに対し、運転者の視線を長時間持続させることであってもよく、例えば、車内カメラを用いて検知できる。代替的に、または組み合わせて、この要求は、運転者が、視認できる名所３、４のうち１つを長時間指差しているか、またはこれを音声入力を介して口頭で要求することによって検知することもできる。さらに、車両２のステアリングコラムの操縦角監視や車両２の運転者の顔認識などの運転者監視装置が、疲労閾値の超過を確認し、ついで運転者注意力を高めるために、運転者の視野７内の視界３についての情報を自動的に再生することで、要求信号を自動的に生成することが可能である。
図２には、本発明にかかる装置の一実施形態の例示的なブロック図が示されており、この装置は例示的に車両２に設置できる。入力回路１１を有し、この入力回路を介して入力信号１２を評価装置１０に提供できる評価装置１０が見られる。入力信号１２としては、名所または一般的興味対象物３、４、５に関する情報を含むデータベース１３のデータが考えられる。ここで、名所に加えて、その地理的位置、特にその地理的経度と緯度、および所期の情報分野に関連する興味のある情報が記憶される。さらに、評価装置１０の入力回路１１には、地理情報を有するデータベース１４の入力信号１２が供給される。ここで、地理情報を有するデータベース１４は、車両２の周辺領域の地形プロファイルに関するデータを含み、有利には、運転者の目に見える水平線までの広範囲の情報を含む。この地理情報に関するデータベース１４は、周辺の建造物に関する情報をさらに含んでもよいため、例えば大都市内では、周辺の高層建造物が同様に地理情報として利用できる。さらなる入力信号１２として、評価装置１０の入力回路１１には、車両２の現在の地理的位置を表す位置確定装置１５の情報が供給される。この位置確定装置１５の位置データには、例えば、風景中の車両２の向きも含まれていてもよい。代替的に、または組み合わせて、例えば車両２のフロントガラスの領域にあるフロントカメラなどの環境センサであり得る、さらなる車両方向確定装置１６を用いて、その環境における車両２の方向情報からこれを特定することがさらに可能である。この環境カメラを用いて、車両２の視野７を確定し、データベースやデータクラウドに格納されている画像データと比較し、これにより、環境中の車両方向を検知することができる。この環境センサ１６からのデータは、位置確定装置１５の方向情報に代えて、あるいはそれに加えて、入力信号１２として入力回路１１に供給される。現在の車両位置、現在の車両方向、および一般的興味対象物３、４、５の位置を知ることで、現在の運転者視野７を特定できる。データベース１４の地理情報を追加することにより、例えば図１の名所５について説明したように、運転者の視野７内に位置しているが、地形の地理や建造物のために現在運転者が視認できない一般的興味対象物３、４、５を抽出できる。運転者監視装置９を用いて、運転者が長時間にわたって視線を名所３、４、５に固定しているか、または長時間にわたって指や手で名所３、４、５を差しているか、または注意力低下の兆候を有しているかを検知できる。さらに、回転式プッシュスイッチやタッチセンサ式の表示入力装置（タッチスクリーン入力装置）などの運転者操作型の制御要素を介して、運転者が手動で情報を要求することも可能である。また、運転者監視装置９の要求信号は、同様に入力回路１１の入力信号１２として評価装置１０に供給される。入力信号１１が、有利にはバスシステムとして実施できるデータ交換装置１７を介して、例えばマイクロプロセッサまたはマイクロコントローラとして実施できるコンピューティング装置１８に供給された後、運転者の視野７内にあり、***地形により運転者にも実際に視認できる名所３、４、５がコンピューティング装置１８において確定される。さらに、運転者監視装置９により要求信号が検知されると、車両２の運転者が現在視認可能である名所３に関する情報が出力される。ここで、運転者は、例えばスポーツ情報のみなど、どの情報を出力するかについて予め好みを挿入してもよく、または一般的興味対象物３である可視対象物に関して提供される情報分野が再生する順番を確定してもよい。演算装置１８で要求信号が検知されると、データ交換装置１７を介して評価装置１０の出力回路１９に出力情報が出力され、出力信号２０が出力される。ここで、出力信号２０は、少なくとも１つの出力装置２０を介して出力される画像、映像、音楽またはテキストの形態の再生情報であってもよい。ここで、例えば光学再生情報を含む出力信号２０は、例えば車両のセンターコンソール内の表示装置や前席のヘッドレスト内の表示装置などであり得る映像装置２２を用いてテキストや映像として再生できる。出力信号２０として出力される音響再生情報は、これらの情報をオーディオシステム２３に供給することによって、出力装置２１において例えばテキストや音楽として出力することができる。追加的に、または代替的に、出力信号２０を、例えばＷＬＡＮアダプタやブルートゥース（登録商標）アダプタなどのデータ通信用の無線インターフェースとして実施できる無線インターフェース２４を有することができる再生装置２１に供給して、車両２の乗員がスマートフォンやタブレット装置などの携帯端末でこの情報を見るおよび／または聞くことができるようにすることも可能である。
図３に、本発明にかかる方法のフローチャートを例示的に示す。このフローチャートは、例えば車両のイグニッションをオンにしたり、車両に設置されたアシスタンスシステムやインフォテイメントシステムを起動したりすることによって、ステップ２７で開始される。
続くステップ２８では、位置確定装置１５を用いて自車両２の地理的位置が確定され、演算装置１８に供給される。
続くステップ２９では、例えば、位置確定装置１５が車両方向に関する情報を提供でき、または環境センサ１６とそれによって確定された地形マークを介して車両２の方向を特定することにより、車両２の方向が確定される。
続くステップ３０では、演算装置１８において、現在の車両位置および現在の車両方向から、運転者の走行方向および視野方向を確定することにより、運転者の視野７が確定される。そのために、車内センサシステムを用いて運転者を監視し、運転者の視線方向または運転者の指差し方向が特定される。ここで、車内センサシステムが車両に取り付けられているため、この運転者の視線方向または運転者の指差し方向は、車両に固定された座標系にある。車両座標系にあるこれらの座標は、特定された現在の車両位置と、特定された現在の車両方向とを用いて、車両と共に移動せずに静止しているワールド座標系に変換される。これにより、運転者の現在の視野（７）が特定され、これにより、運転者の視線方向に位置する名所３、４、５または一般的興味対象物３、４、５が確定される。
続いて、ステップ３１では、運転者の視線方向にあり、さらに運転者が視認できる名所または一般的興味対象物３、４、５が特定される。このために、地理情報１４を含むデータベースの情報が追加的に演算装置１８に供給され、演算装置１８では、地形特性を加えることにより、どの名所または一般的興味対象物が、運転者の視線方向に位置するかだけでなく、運転者の視野７内で視認可能であるかが特定される。例えば、図１では、運転者の視野７内には村３のみが視認でき、運転者の視線方向にあるが現在は見えていない城５は視認できない。これに対し自然名所４は、運転者の視野７にも運転者の視線方向にも入っていない。
続くステップ３２では、演算装置１８は、例えば運転者の疲労を確認したり、運転者が長時間にわたって視線を１つの名所３、４、５で保持したり、例えば指や手や腕を使った指差しジェスチャーで長時間にわたって名所３、４、５を指差したりすることで、運転者監視装置９から要求信号が出力されたかどうかが検査される。運転者監視装置９からの要求がないと判断された場合には、ステップ３２はＮｏに分岐し、自車両の位置を新たに確定してステップ２８に進む。ステップ３２において、要求があったために情報出力が必要であると判断された場合には、ステップ３２はＹｅｓに分岐し、次のステップ３３において、それに関する情報を再生すべき一般的興味対象物または選択された名所３が確定される。
続くステップ３４では、ステップ３３で選択された名所または一般的興味対象物に関する視聴覚情報を再生することで、運転者情報が出力される。ここで、ステップ３４の出力は、任意選択的に、運転者が予め設定できる好みリスト３５の情報に供給されてもよい。この好みリストにより、どの順番で情報を再生するべきか、またはどの情報分野を排他的に再生するべきか、あるいは全く再生するべきでないかが設定される。この好みリスト３５により、運転者は、例えば、経路１上に位置するサッカースタジアムに関連するスポーツ情報を出力しないことや、同一の名所３や一般的興味対象物３を複数回通過する際に、各種情報分野をどの順番で再生するべきかを設定できる。また、車両が経路を複数回走行して、名所３、４、５に関する運転者情報が複数回要求された場合には、通過順に分野情報を再生することができるため、同じ情報の再生の繰り返しを極力避けることができる。
ステップ３４で運転者情報の出力がトリガされた場合、続くステップ３６では、同じ情報の再生が繰り返されないように、どの情報が既に再生されたかをデータベース１３に格納する。続いて、ステップ３６の後、自車両の位置を確定することにより再び方法をステップ２８で継続し、方法を再び最初から行う。

Claims (11)

  1. 車両（２）の運転者への運転者情報（２０、２１）の出力を制御するための装置、特に、エンターテイメントのため、および／または運転者の運転者注意力を高めるための装置であって、
    － 名所または一般的興味対象物（３、４、５）を有するデータベース（１３）と、
    － 地理情報（６）のデータベース（１４）と、
    － 前記車両の所在地確定装置（１５）と、が設けられており、
    － 前記車両の現在の所在地および前記地理情報（６、１４）から、どの名所または一般的興味対象物（３、４、５）が前記運転者の視野（７）内にあるかを確定する評価装置（１０）が設けられており、
    － 出力装置（２１、２２、２３、２４）が、前記評価装置（１０）によって前記運転者の視野（７）内にあると特定された前記名所または前記一般的興味対象物（３、４、５）のうち１つに対する運転者情報を出力する、ことを特徴とする装置。
  2. 運転者監視装置（９）が追加して設けられ、前記転者監視装置（９）により、
    － 前記運転者の現在の視線方向および／または、
    － 前記運転者の表情および／または、
    － 前記運転者のジェスチャーおよび／または、
    － 前記運転者の指または手または腕の指し示す方向および／または、
    － 音声認識装置および／または、
    － 前記運転者による操作装置の操作、が検出され、前記運転者の現在の視野（７）が確定されることを特徴とする、請求項１に記載の装置。
  3. － 環境センサ（１６）が車両に設けられ、前記環境センサ（１６）は特に進行方向に向けられた運転支援カメラであり、および／または
    － 車両方向確定装置（１５）が設けられ、前記車両方向確定装置（１５）により前記運転者の現在の視野（７）が確定されることを特徴とする、請求項１または２に記載の装置。
  4. 前記出力装置（２１）は、画像（２２）および／または映像（２２）を出力するための表示装置であり、および／または音楽および／または音声情報が出力されるオーディオシステム（２３）であることを特徴とする、請求項１から３のいずれか一項に記載の装置。
  5. 車両（２）の運転者への運転者情報（２０、２１）の出力を制御するための方法、特に、エンターテイメントのため、および／または運転者の運転者注意力を高めるための方法であって、評価装置が設けられており、前記評価装置に入力信号（１２）として、
    － 名所または一般的興味対象物に関するデータ（１３）と、
    － 地理情報、特に車両周辺に関するデータ（１４）と、
    － 前記車両（２）の所在地に関するデータ（１５）と、が供給され、
    － 前記評価装置（１０）は、前記車両（２）の現在の所在地（１５）および前記地理情報（１４）から、どの名所または一般的興味対象物（３、４、５）が前記運転者の視野（７）内にあるかを確定し、
    － 出力装置（２１、２２、２３、２４）が、前記評価装置（１０）によって前記運転者の視野（７）内にあると特定された前記名所または前記一般的興味対象物（３、４、５）に対する運転者情報を出力する、ことを特徴とする方法。
  6. 前記評価装置（１０）には、運転者監視装置（９）のデータ（１２）が追加して供給可能であり、特に、
    － 前記運転者の視線方向検知のデータおよび／または、
    － 前記運転者の表情検知のデータおよび／または、
    － 前記運転者のジェスチャー検知のデータおよび／または、
    － 前記運転者の指または手または腕の指し示し方向検知のデータおよび／または、
    － 音声認識装置のデータおよび／または、
    － 運転者操作型の操作装置のデータ、
    － 運転者頭部位置検知装置のデータ、が前記評価装置（１０）に供給され、前記評価装置（１０）から前記運転者の現在の視野（７）が確定されることを特徴とする、請求項５に記載の方法。
  7. 前記評価装置（７）は、前記出力装置（２１、２２、２３、２４）を用いて、
    － 前記運転者が指または手または腕で差し示した、
    － 前記運転者が視線を向けた、
    － 前記運転者が音声制御によって口頭で情報システムに情報を要求した、
    名所または一般的興味対象物（３、４、５）に関する運転者情報を出力することを特徴とする、請求項５または６に記載の方法。
  8. 前記運転者監視装置によって検知された、前記運転者の視線方向または前記運転者の指差し方向を、車両座標系からワールド座標系に変換し、
    特定された現在の車両位置を考慮し、かつ
    特定された現在の車両方向を考慮して、前記運転者の現在の視野（７）を特定することを特徴とする、請求項５から７のいずれか一項に記載の方法。
  9. 前記運転者監視装置が、前記運転者が、
    － 疲労の兆候を有していること、
    － 退屈の兆候を有していること、
    － 運転現象にもはや注意を払わなくなったこと、または
    － 単調の兆候を有していること、
    を検知すると、最も近い名所または最も近い一般的興味対象物（３、４、５）の情報（２０）の出力が自動的に開始されることを特徴とする、請求項５から８のいずれか一項に記載の方法。
  10. 前記データベース（１３）には、各名所または各公共の興味対象物（３、４、５）について、複数の情報が記憶されており、繰り返しを避ける（３６）ために、どの情報が以前の時点で既に再生されているかが格納されることを特徴とする、請求項５から９のいずれか一項に記載の方法。
  11. 前記運転者によって、名所または一般的興味対象物（３、４、５）に対してどの情報が前記出力装置（２１、２２、２３、２４）によって再生されるか、または、名所または一般的興味対象物（３、４、５）に対する情報がどの順序で再生されるかの好み（３５）を設定できることを特徴とする、請求項５から１０のいずれか一項に記載の方法。
JP2021535561A 2018-12-20 2019-10-01 自動運転車両の運転者情報の出力を制御し、運転者の注意を維持するための装置および方法 Pending JP2022513521A (ja)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
DE102018222378.5A DE102018222378A1 (de) 2018-12-20 2018-12-20 Vorrichtung und Verfahren Steuerung der Ausgabe von Fahrerinformation und zur Aufrechterhaltung der Aufmerksamkeit eines Fahrers eines automatisierten Fahrzeugs
DE102018222378.5 2018-12-20
PCT/EP2019/076581 WO2020126143A1 (de) 2018-12-20 2019-10-01 Vorrichtung und verfahren steuerung der ausgabe von fahrerinformation und zur aufrechterhaltung der aufmerksamkeit eines fahrers eines automatisierten fahrzeugs

Publications (1)

Publication Number Publication Date
JP2022513521A true JP2022513521A (ja) 2022-02-08

Family

ID=68165527

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2021535561A Pending JP2022513521A (ja) 2018-12-20 2019-10-01 自動運転車両の運転者情報の出力を制御し、運転者の注意を維持するための装置および方法

Country Status (7)

Country Link
US (1) US11423778B2 (ja)
EP (1) EP3898369A1 (ja)
JP (1) JP2022513521A (ja)
KR (1) KR20210100187A (ja)
CN (1) CN113226883A (ja)
DE (1) DE102018222378A1 (ja)
WO (1) WO2020126143A1 (ja)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE102021103242A1 (de) * 2021-02-11 2022-08-11 Bayerische Motoren Werke Aktiengesellschaft Automatisiertes kraftfahrzeug und verfahren zum steuern des automatisierten kraftfahrzeuges
DE102021130155A1 (de) 2021-11-18 2023-05-25 Cariad Se Verfahren und System zum Bereitstellen einer in einem Kraftfahrzeug angefragten Information zu einem Objekt in der Umgebung des Kraftfahrzeugs

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001330450A (ja) * 2000-03-13 2001-11-30 Alpine Electronics Inc ナビゲーション装置
JP2004086189A (ja) * 2002-07-02 2004-03-18 Matsushita Electric Ind Co Ltd 楽曲検索システム
JP2005098912A (ja) * 2003-09-26 2005-04-14 Mazda Motor Corp 車両用情報提供装置
JP2006267249A (ja) * 2005-03-22 2006-10-05 Denso Corp 車両用情報表示システム
JP2014215265A (ja) * 2013-04-30 2014-11-17 株式会社デンソー 運転状態改善装置
DE102015015510A1 (de) * 2015-11-30 2017-06-01 Audi Ag Verfahren zum Erkennen eines Objekts anhand einer Lage des Objekts in einem Bild, Vorrichtung und Kraftfahrzeug

Family Cites Families (20)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6587782B1 (en) * 2000-03-14 2003-07-01 Navigation Technologies Corp. Method and system for providing reminders about points of interests while traveling
US7133775B2 (en) * 2004-02-17 2006-11-07 Delphi Technologies, Inc. Previewing points of interest in navigation system
US7982620B2 (en) 2007-05-23 2011-07-19 Toyota Motor Engineering & Manufacturing North America, Inc. System and method for reducing boredom while driving
DE102007030243A1 (de) 2007-06-29 2009-01-08 Robert Bosch Gmbh Verfahren und Vorrichtung zur Übermittlung von Informationen an Fahrzeuginsassen
US8269652B2 (en) * 2009-04-02 2012-09-18 GM Global Technology Operations LLC Vehicle-to-vehicle communicator on full-windshield head-up display
DE102010038454A1 (de) * 2010-07-27 2012-02-02 Bayerische Motoren Werke Aktiengesellschaft Ansteuerung einer Anzeigeeinheit eines Fahrzeugs
US9421866B2 (en) * 2011-09-23 2016-08-23 Visteon Global Technologies, Inc. Vehicle system and method for providing information regarding an external item a driver is focusing on
DE102012221305A1 (de) * 2012-11-22 2014-05-22 Bayerische Motoren Werke Aktiengesellschaft Navigationssystem und Navigationsverfahren
US9256615B2 (en) * 2013-03-12 2016-02-09 Verizon Patent And Licensing Inc. Personalized navigation information based on user behavior
DE102013212186A1 (de) 2013-06-26 2014-12-31 Robert Bosch Gmbh Fahrerinformationseinrichtung
DE102013213236A1 (de) * 2013-07-05 2015-01-08 Robert Bosch Gmbh Verfahren zum Ermitteln eines Aufmerksamkeitsgrads eines Fahrzeugführers
WO2015062750A1 (de) 2013-11-04 2015-05-07 Johnson Controls Gmbh Infotainmentsystem für ein fahrzeug
DE102014225383A1 (de) * 2014-12-10 2016-06-16 Robert Bosch Gmbh Verfahren zum Betreiben eines Kraftfahrzeugs, Kraftfahrzeug
US9505413B2 (en) * 2015-03-20 2016-11-29 Harman International Industries, Incorporated Systems and methods for prioritized driver alerts
JP6515764B2 (ja) * 2015-09-28 2019-05-22 株式会社デンソー 対話装置及び対話方法
DE102016208405A1 (de) 2015-12-16 2017-06-22 Robert Bosch Gmbh Verfahren und Vorrichtung zum Betreiben eines Fahrerassistenzsystems, Fahrerassistenzsystem
US10366290B2 (en) * 2016-05-11 2019-07-30 Baidu Usa Llc System and method for providing augmented virtual reality content in autonomous vehicles
DE102017206485A1 (de) * 2017-04-18 2018-10-18 Robert Bosch Gmbh Vorrichtung und Verfahren zur Steuerung eines Fahrzeugs
US10783558B2 (en) * 2017-08-07 2020-09-22 Harman International Industries, Incorporated System and method for motion onset consumer focus suggestion
DE102018004121A1 (de) * 2018-05-23 2018-11-22 Daimler Ag Verfahren zum autonomen Fahren eines Fahrzeugs, Fahrzeugsystem zum Ausführen eines solchen Verfahrens, sowie Fahrzeug mit einem solchen Fahrzeugsystem

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001330450A (ja) * 2000-03-13 2001-11-30 Alpine Electronics Inc ナビゲーション装置
JP2004086189A (ja) * 2002-07-02 2004-03-18 Matsushita Electric Ind Co Ltd 楽曲検索システム
JP2005098912A (ja) * 2003-09-26 2005-04-14 Mazda Motor Corp 車両用情報提供装置
JP2006267249A (ja) * 2005-03-22 2006-10-05 Denso Corp 車両用情報表示システム
JP2014215265A (ja) * 2013-04-30 2014-11-17 株式会社デンソー 運転状態改善装置
DE102015015510A1 (de) * 2015-11-30 2017-06-01 Audi Ag Verfahren zum Erkennen eines Objekts anhand einer Lage des Objekts in einem Bild, Vorrichtung und Kraftfahrzeug

Also Published As

Publication number Publication date
US11423778B2 (en) 2022-08-23
KR20210100187A (ko) 2021-08-13
US20220005349A1 (en) 2022-01-06
CN113226883A (zh) 2021-08-06
EP3898369A1 (de) 2021-10-27
WO2020126143A1 (de) 2020-06-25
DE102018222378A1 (de) 2020-06-25

Similar Documents

Publication Publication Date Title
US20210286838A1 (en) Infotainment based on vehicle navigation data
CN108205830B (zh) 识别对于无人驾驶车辆的个人驾驶偏好的方法和***
KR102043588B1 (ko) 자율 주행 차량 내에서 미디어 콘텐츠를 표시하기 위한 시스템 및 방법
KR102521834B1 (ko) 차량으로 영상을 제공하는 방법 및 이를 위한 전자 장치
JP4201758B2 (ja) Ｇｐｓ探索装置
EP3333821A2 (en) Method and system to manage vehicle groups for autonomous vehicles
US8170795B2 (en) Navigation system with animated intersection view
US8798903B2 (en) Method and apparatus for detecting arrival at new city and producing information on new city
JP6456516B2 (ja) 運転支援装置
CN113302621A (zh) 将运载工具中捕获的乘客关注数据用于定位和基于地点的服务
WO2019124158A1 (ja) 情報処理装置、情報処理方法、プログラム、表示システム、及び移動体
JP2008039596A (ja) 情報提供装置、情報提供方法、情報提供プログラム、および記録媒体
KR102516674B1 (ko) 내비게이션 기동과 연계할 관심지점(poi)을 선택하기 위한 시스템 및 방법
JP2022513521A (ja) 自動運転車両の運転者情報の出力を制御し、運転者の注意を維持するための装置および方法
JP2013032949A (ja) 車両用表示処理システムおよび車両用表示処理方法並びにプログラム
JP2014211373A (ja) 情報提供装置及び情報提供方法
JP2002031539A (ja) ナビゲーション装置
JP2009090927A (ja) 情報管理サーバ、駐車支援装置、駐車支援装置を備えたナビゲーション装置、情報管理方法、駐車支援方法、情報管理プログラム、駐車支援プログラム、および記録媒体
WO2020246089A1 (ja) 情報提示制御装置
JP4207317B2 (ja) 目的地特定支援装置、当該装置を備えたナビゲーションシステム
US20180372505A1 (en) Electronically provided guided tours
JP2019082856A (ja) 表示装置、表示制御方法、及びプログラム
WO2021053843A1 (ja) 画像表示システム、画像表示方法、および、コンピュータプログラム
WO2023204076A1 (ja) 音響制御方法及び音響制御装置
CN117930967A (zh) 车载dlp灯应用方法、装置、计算机设备和存储介质

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20210817

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20220831

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20220920

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20221220

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20230410