WO2020202379A1 - 表示制御装置、表示制御方法及びプログラム - Google Patents

表示制御装置、表示制御方法及びプログラム Download PDF

Info

Publication number
WO2020202379A1
WO2020202379A1 PCT/JP2019/014308 JP2019014308W WO2020202379A1 WO 2020202379 A1 WO2020202379 A1 WO 2020202379A1 JP 2019014308 W JP2019014308 W JP 2019014308W WO 2020202379 A1 WO2020202379 A1 WO 2020202379A1
Authority
WO
WIPO (PCT)
Prior art keywords
communication
vehicle
display control
control device
communication state
Prior art date
Application number
PCT/JP2019/014308
Other languages
English (en)
French (fr)
Inventor
松永 英樹
Original Assignee
本田技研工業株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 本田技研工業株式会社 filed Critical 本田技研工業株式会社
Priority to DE112019007110.6T priority Critical patent/DE112019007110T5/de
Priority to JP2021511753A priority patent/JP7359843B2/ja
Priority to CN201980094107.8A priority patent/CN113574575B/zh
Priority to PCT/JP2019/014308 priority patent/WO2020202379A1/ja
Publication of WO2020202379A1 publication Critical patent/WO2020202379A1/ja
Priority to US17/477,803 priority patent/US11960280B2/en

Links

Images

Classifications

    • GPHYSICS
    • G05CONTROLLING; REGULATING
    • G05DSYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
    • G05D1/00Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
    • G05D1/0011Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots associated with a remote control arrangement
    • G05D1/0022Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots associated with a remote control arrangement characterised by the communication link
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/04Monitoring the functioning of the control system
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/20Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor
    • B60K35/28Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor characterised by the type of the output information, e.g. video entertainment or vehicle dynamics information; characterised by the purpose of the output information, e.g. for attracting the attention of the driver
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/80Arrangements for controlling instruments
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/85Arrangements for transferring vehicle- or driver-related data
    • GPHYSICS
    • G05CONTROLLING; REGULATING
    • G05DSYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
    • G05D1/00Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
    • G05D1/0011Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots associated with a remote control arrangement
    • G05D1/0027Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots associated with a remote control arrangement involving a plurality of vehicles, e.g. fleet or convoy travelling
    • GPHYSICS
    • G05CONTROLLING; REGULATING
    • G05DSYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
    • G05D1/00Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
    • G05D1/0011Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots associated with a remote control arrangement
    • G05D1/0044Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots associated with a remote control arrangement by providing the operator with a computer generated representation of the environment of the vehicle, e.g. virtual reality, maps
    • GPHYSICS
    • G05CONTROLLING; REGULATING
    • G05DSYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
    • G05D1/00Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
    • G05D1/02Control of position or course in two dimensions
    • G05D1/021Control of position or course in two dimensions specially adapted to land vehicles
    • G05D1/0287Control of position or course in two dimensions specially adapted to land vehicles involving a plurality of land vehicles, e.g. fleet or convoy travelling
    • GPHYSICS
    • G05CONTROLLING; REGULATING
    • G05DSYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
    • G05D1/00Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
    • G05D1/20Control system inputs
    • G05D1/22Command input arrangements
    • G05D1/221Remote-control arrangements
    • G05D1/225Remote-control arrangements operated by off-board computers
    • GPHYSICS
    • G05CONTROLLING; REGULATING
    • G05DSYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
    • G05D1/00Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
    • G05D1/20Control system inputs
    • G05D1/22Command input arrangements
    • G05D1/221Remote-control arrangements
    • G05D1/226Communication links with the remote-control arrangements
    • GPHYSICS
    • G05CONTROLLING; REGULATING
    • G05DSYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
    • G05D1/00Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
    • G05D1/60Intended control result
    • G05D1/69Coordinated control of the position or course of two or more vehicles
    • GPHYSICS
    • G05CONTROLLING; REGULATING
    • G05DSYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
    • G05D1/00Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
    • G05D1/60Intended control result
    • G05D1/69Coordinated control of the position or course of two or more vehicles
    • G05D1/692Coordinated control of the position or course of two or more vehicles involving a plurality of disparate vehicles
    • GPHYSICS
    • G08SIGNALLING
    • G08GTRAFFIC CONTROL SYSTEMS
    • G08G1/00Traffic control systems for road vehicles
    • G08G1/01Detecting movement of traffic to be counted or controlled
    • GPHYSICS
    • G08SIGNALLING
    • G08GTRAFFIC CONTROL SYSTEMS
    • G08G1/00Traffic control systems for road vehicles
    • G08G1/09Arrangements for giving variable traffic instructions
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04BTRANSMISSION
    • H04B17/00Monitoring; Testing
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/16Type of output information
    • B60K2360/167Vehicle dynamics information
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/16Type of output information
    • B60K2360/176Camera images
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/16Type of output information
    • B60K2360/178Warnings
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/55Remote control arrangements
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/589Wireless data transfers
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/08Interaction between the driver and the control system
    • B60W50/14Means for informing the driver, warning the driver or prompting a driver intervention
    • B60W2050/146Display means

Definitions

  • the present invention relates to a display control device, a display control method, and a program.
  • Patent Document 1 displays the communication quality value of the communication device to the user. In this way, we aim to avoid unnecessary processing due to insufficient communication quality.
  • Patent Document 1 With the technique described in Patent Document 1, only the user of the communication device can grasp the communication state of the communication device. However, the communication state is also useful for people other than the user. A part of the present invention is aimed at providing a technique for a person other than the user of the communication device to grasp the communication state of the communication device.
  • the display control device is a control that acquires the communication status of each of the plurality of communication devices and displays the communication status of each of the plurality of communication devices in association with each communication device.
  • a display control device comprising means and means is provided.
  • the communication status of the communication device can be grasped by a person other than the user of the communication device.
  • the accompanying drawings are included in the specification, which form a part thereof, show an embodiment of the present invention, and are used together with the description to explain the principle of the present invention.
  • the vehicle 1 includes a vehicle control device 2 (hereinafter, simply referred to as a control device 2) that controls the vehicle 1.
  • the control device 2 includes a plurality of ECUs 20 to 29 that are communicably connected by an in-vehicle network.
  • Each ECU includes a processor typified by a CPU, a memory such as a semiconductor memory, an interface with an external device, and the like.
  • the memory stores programs executed by the processor and data used by the processor for processing.
  • Each ECU may include a plurality of processors, memories, interfaces, and the like.
  • the ECU 20 includes a processor 20a and a memory 20b. When the processor 20a executes an instruction included in the program stored in the memory 20b, the processing by the ECU 20 is executed.
  • the ECU 20 may be provided with a dedicated integrated circuit such as an ASIC for executing the process by the ECU 20. The same applies to other ECUs.
  • each ECU 20 to 29 will be described.
  • the number of ECUs and the functions in charge can be appropriately designed, and can be subdivided or integrated from the present embodiment.
  • the ECU 20 executes driving control related to the automatic driving function and the remote driving function of the vehicle 1.
  • the ECU 20 automatically controls the steering and / or acceleration / deceleration of the vehicle 1.
  • the automatic driving function is a function in which the ECU 20 plans a traveling path of the vehicle 1 and controls steering and / or acceleration / deceleration of the vehicle 1 based on the traveling path.
  • the remote control function is a function in which the ECU 20 controls steering and / or acceleration / deceleration of the vehicle 1 according to an instruction from an operator outside the vehicle 1.
  • the external operator may be a human or AI (artificial intelligence).
  • the ECU 20 can also execute the automatic operation function and the remote operation function in combination.
  • the ECU 20 may plan a travel route and perform travel control while there is no instruction from the operator, and may perform travel control according to the instruction when the operator gives an instruction.
  • the ECU 21 controls the electric power steering device 3.
  • the electric power steering device 3 includes a mechanism for steering the front wheels in response to a driver's driving operation (steering operation) with respect to the steering wheel 31. Further, the electric power steering device 3 includes a motor that exerts a driving force for assisting the steering operation and automatically steering the front wheels, a sensor for detecting the steering angle, and the like.
  • the ECU 21 automatically controls the electric power steering device 3 in response to an instruction from the ECU 20 to control the traveling direction of the vehicle 1.
  • the ECUs 22 and 23 control the detection units 41 to 43 for detecting the state of the outside world of the vehicle and process the information processing of the detection results.
  • the detection unit 41 is a camera that photographs the front of the vehicle 1 (hereinafter, may be referred to as a camera 41), and in the case of the present embodiment, it is attached to the vehicle interior side of the front window at the front of the roof of the vehicle 1. Be done. By analyzing the image taken by the camera 41, it is possible to extract the outline of the target and the lane marking line (white line or the like) on the road.
  • the detection unit 42 is a lidar (Light Detection and Ringing) (hereinafter, may be referred to as a lidar 42), detects a target around the vehicle 1, and measures a distance from the target. ..
  • a lidar 42 Light Detection and Ringing
  • five riders 42 are provided, one in each corner of the front portion of the vehicle 1, one in the center of the rear portion, and one on each side of the rear portion.
  • the detection unit 43 is a millimeter-wave radar (hereinafter, may be referred to as a radar 43), detects a target around the vehicle 1, and measures a distance from the target.
  • five radars 43 are provided, one in the center of the front portion of the vehicle 1, one in each corner of the front portion, and one in each corner of the rear portion.
  • the ECU 22 controls one of the cameras 41 and each rider 42 and processes the detection result.
  • the ECU 23 controls the other camera 41 and each radar 43, and processes information processing of the detection result.
  • the ECU 24 controls the gyro sensor 5, the GPS sensor 24b, and the communication device 24c, and processes the detection result or the communication result.
  • the gyro sensor 5 detects the rotational movement of the vehicle 1. The course of the vehicle 1 can be determined based on the detection result of the gyro sensor 5, the wheel speed, and the like.
  • the GPS sensor 24b detects the current position of the vehicle 1.
  • the communication device 24c wirelessly communicates with a server that provides map information and traffic information, and acquires such information.
  • the ECU 24 can access the map information database 24a built in the memory, and the ECU 24 searches for a route from the current location to the destination.
  • the ECU 24, the map database 24a, and the GPS sensor 24b constitute a so-called navigation device.
  • the ECU 25 includes a communication device 25a for vehicle-to-vehicle communication.
  • the communication device 25a wirelessly communicates with other vehicles in the vicinity and exchanges information between the vehicles.
  • the communication device 25a is also used for communication with an operator outside the vehicle 1.
  • the ECU 26 controls the power plant 6.
  • the power plant 6 is a mechanism that outputs a driving force for rotating the driving wheels of the vehicle 1, and includes, for example, an engine and a transmission.
  • the ECU 26 controls the engine output in response to the driver's driving operation (accelerator operation or acceleration operation) detected by the operation detection sensor 7a provided on the accelerator pedal 7A, or the vehicle speed detected by the vehicle speed sensor 7c.
  • the shift stage of the transmission is switched based on the information in.
  • the ECU 26 automatically controls the power plant 6 in response to an instruction from the ECU 20 to control acceleration / deceleration of the vehicle 1.
  • the ECU 27 controls a lighting device 8 (lighting device such as a head light and a tail light) including a direction indicator (winker).
  • the lighting device 8 is provided at the front portion, the door mirror, and the rear portion of the vehicle 1.
  • the ECU 27 further controls the sound device 11 directed to the outside of the vehicle, including the horn of the horn.
  • the lighting device 8, the sound device 11, or a combination thereof has a function of providing information to the outside world of the vehicle 1.
  • the ECU 28 controls the input / output device 9.
  • the input / output device 9 outputs information to the driver and accepts input of information from the driver.
  • the sound output device 91 notifies the driver of information by voice.
  • the display device 92 notifies the driver of information by displaying an image.
  • the display device 92 is arranged on the surface of the driver's seat, for example, and constitutes an instrument panel or the like.
  • voice and display are illustrated here, information may be notified by vibration or light.
  • information may be transmitted by combining a plurality of voices, displays, vibrations, and lights. Further, the combination may be different or the notification mode may be different depending on the level of information to be notified (for example, the degree of urgency).
  • the input device 93 is a group of switches that are arranged at a position that can be operated by the driver and give an instruction to the vehicle 1, but a sound input device may also be included.
  • the ECU 28 can provide guidance regarding the traveling control of the ECU 20. The details of the guidance will be described later.
  • the input device 93 may include a switch used to control the operation of travel control by the ECU 20.
  • the input device 93 may include a camera for detecting the direction of the driver's line of sight.
  • the ECU 29 controls the braking device 10 and the parking brake (not shown).
  • the brake device 10 is, for example, a disc brake device, which is provided on each wheel of the vehicle 1 and decelerates or stops the vehicle 1 by applying resistance to the rotation of the wheels.
  • the ECU 29 controls the operation of the brake device 10 in response to the driver's driving operation (brake operation) detected by the operation detection sensor 7b provided on the brake pedal 7B, for example.
  • the driving state of the vehicle 1 is the automatic driving state
  • the ECU 29 automatically controls the brake device 10 in response to an instruction from the ECU 20 to control deceleration and stop of the vehicle 1.
  • the braking device 10 and the parking brake can also be operated to maintain the stopped state of the vehicle 1. Further, when the transmission of the power plant 6 is provided with a parking lock mechanism, this can be operated to maintain the stopped state of the vehicle 1.
  • the remote driving device 200 is a device for providing a remote driving service to a vehicle having a remote driving function.
  • the remote driving device 200 is located remotely from the vehicle to be serviced.
  • the remote control device 200 may be able to provide a remote control service in a plurality of operation modes.
  • the plurality of operation modes of the remote driving service may include a lead mode and an assist mode.
  • the driven mode is an operation mode in which the operator of the remote driving device 200 specifies a control amount of the vehicle (for example, steering angle, accelerator pedal opening, brake pedal opening, blinker lever position, light on / off, etc.). That is.
  • the support mode is an operation mode in which the vehicle (specifically, the ECU 20) determines the control amount of the vehicle according to the route plan specified by the operator of the remote driving device 200. In the support mode, the operator of the remote driving device 200 may generate and specify the route plan by himself / herself, or may specify the route plan by adopting the route plan proposed by the vehicle.
  • the remote control device 200 has each component shown in FIG.
  • the processor 201 controls the operation of the entire remote control device 200.
  • the processor 201 functions as, for example, a CPU.
  • the memory 202 stores programs, temporary data, and the like used for operating the remote control device 200.
  • the memory 202 is realized by, for example, a ROM or a RAM.
  • the input unit 203 is used for the user of the remote control device 200 to input to the remote control device 200.
  • the user of the remote driving device 200 is a human being when the human being is the operating subject, and a human being (monitorer) who monitors the operation of the AI when the AI is the operating subject.
  • the output unit 204 is used to output information from the remote control device 200 to the user.
  • the storage unit 205 stores data used for the operation of the remote control device 200.
  • the storage unit 205 is realized by a storage device such as a disk drive (for example, HDD or SDD).
  • the communication unit 206 provides a function in which the remote control device 200 communicates with another device (for example, a vehicle to be remotely controlled), and is realized by, for example, a network card or an antenna.
  • the output unit 204 is configured by the display device 310 and the sound device 320
  • the input unit 203 is configured by the steering wheel 330, the accelerator pedal 340, the brake pedal 350, the microphone 360, and the plurality of switches 370.
  • the display device 310 is a device that outputs visual information for providing a remote control service.
  • the sound device 320 is a device that outputs auditory information for providing a remote driving service.
  • the screen displayed on the display device 310 includes one main area 311 and a plurality of sub areas 312.
  • the main area 311 information on the controlled vehicle among the plurality of vehicles for which the remote driving service is provided is displayed.
  • the controlled vehicle is a vehicle to which an instruction from the remote driving device 200 is transmitted.
  • information about a vehicle other than the controlled vehicle among the plurality of vehicles for which the remote driving service is provided is displayed. Vehicles other than the controlled vehicle may also be referred to as a monitored vehicle.
  • the operator When the remote driving service is provided to a plurality of vehicles by one remote driving device 200, the operator appropriately switches the vehicles displayed in the main area 311 (that is, the controlled vehicle).
  • the information displayed in the main area 311 and the sub area 312 includes the traffic conditions around the vehicle, the speed of the vehicle, and the like.
  • the steering wheel 330 is used to control the steering amount of the controlled vehicle in the driven mode.
  • the accelerator pedal 340 is used to control the accelerator pedal opening degree of the vehicle to be controlled in the driven mode.
  • the brake pedal 350 is used to control the brake pedal opening degree of the vehicle to be controlled in the driven mode.
  • the microphone 360 is used to input voice information. The voice information input to the microphone 360 may be transmitted to the controlled vehicle and reproduced in the vehicle.
  • the plurality of switches 370 are used to perform various inputs for providing a remote operation service.
  • the plurality of switches 370 include a switch for switching a controlled vehicle, a switch for instructing an operator's determination result in a support mode, a switch for switching a plurality of operation modes, and the like.
  • the remote control device 200 described with reference to FIGS. 2 and 3 can provide both a lead mode and a support mode.
  • the remote control device 200 may be able to provide only one of the lead mode and the support mode.
  • the steering wheel 330, accelerator pedal 340 and brake pedal 350 may be omitted if the lead mode is not provided.
  • a plurality of remote control devices 200 may cooperate to provide a remote control service. In this case, the remote control device 200 may be able to take over the vehicle to be serviced to another remote control device 200.
  • the display control method executed by the remote control device 200 will be described with reference to FIG.
  • the remote control device 200 functions as a display control device.
  • This control method may be performed by the processor of the remote control device 200 executing a program stored in the memory.
  • some or all steps of the method may be performed in a dedicated circuit such as an ASIC (application specific integrated circuit).
  • ASIC application specific integrated circuit
  • the processor becomes a component for a specific operation
  • a dedicated circuit becomes a component for a specific operation.
  • the control method of FIG. 4 is repeatedly executed while the remote control device 200 is providing the remote control service.
  • the remote driving device 200 acquires information used for providing the remote driving service from each of the plurality of vehicles 1 to be serviced.
  • this information is acquired by receiving information transmitted from the vehicle 1 via a communication network.
  • This information may include information about the vehicle 1, such as the current position, communication status, current speed, surrounding traffic conditions, difficulty of automatic driving control, route to be moved, and the like.
  • the communication state of the vehicle 1 may include, for example, the current communication quality (for example, communication delay), the communication standard of the connected communication network (3G, 4G, 5G, etc.), and the like.
  • the remote driving device 200 acquires information used for providing the remote driving service from a plurality of vehicles 1 other than the service target.
  • This information includes, for example, communication quality at each point, map information, and the like. This information may be acquired by receiving it from an external device that provides this information, or it may be acquired by reading information stored in advance in the memory 202 of the remote control device 200.
  • step S403 the remote control device 200 displays the information used by the operator to provide the remote control service on the display device of the output unit 204.
  • This displayed information includes the information acquired in steps S401 and S402 and / or the information derived from this information.
  • step S403 An example of the information displayed in step S403 will be described with reference to FIG.
  • information about the vehicle for which the remote driving service is provided is displayed in the plurality of sub-regions 312.
  • the plurality of sub-regions 312 are included in the display device 301 for the user of the remote driving device 200 that provides the remote driving service to the vehicle 1 to visually recognize.
  • attention is paid to three of the plurality of sub-regions 312, and these are referred to as sub-regions 312a to 312c.
  • Information about the separate vehicle 1 is displayed in each of the sub-regions 312a to 312c.
  • the sub-region 312a displays information about the vehicle 1 whose vehicle ID is "002”
  • the sub-region 312b displays information about the vehicle 1 whose vehicle ID is "003”
  • the sub-region 312c displays information about the vehicle 1. Displays information about the vehicle 1 whose vehicle ID is "004".
  • the information displayed in the sub-area 312 includes the vehicle ID, the vehicle speed, the difficulty level, the communication quality, and the current position.
  • the "vehicle ID” is an identifier for uniquely identifying the vehicle 1 to be provided with the service.
  • Vehicle speed is the current speed of vehicle 1.
  • the “difficulty level” is the difficulty level of the current automatic driving control of the vehicle 1. As an example, the difficulty level is ranked and displayed in three stages of "A", "B", and “C” (A is the most difficult). This difficulty level may be a value determined by the vehicle 1 or a value determined by the remote driving device 200 based on the information received from the vehicle 1.
  • the "communication quality” is the current quality of communication of the communication device provided in the vehicle 1.
  • the communication quality is an example of the communication state of the vehicle 1.
  • Other information on the communication status may be displayed in place of or in addition to the communication quality.
  • Communication quality is ranked and displayed in three stages (A is the best) of "A", "B", and "C”.
  • the "current position” is the current geographical position of the vehicle 1.
  • the current position is indicated by a circle on a map displayed in, for example, the area 500.
  • the remote control device 200 displays information including the communication status (communication quality in the above example) of each of the plurality of vehicles on the display device in association with each vehicle.
  • the remote driving device 200 displays information including the communication state of the vehicle on a screen displaying the road (for example, on a map) in association with the geographical position of the vehicle.
  • the remote control device 200 may highlight the communication status when the communication status satisfies a predetermined condition (for example, when the communication quality is "C" in the above example). .. In the example of FIG. 5, the communication status is highlighted by blinking the letter "C" indicating the communication status.
  • the highlighting method is not limited to this.
  • the communication quality may be displayed in a different color than usual, or the entire sub-region 312 may be highlighted.
  • the remote control device 200 ranks the communication state in three stages and highlights the communication state having a predetermined rank (“C” in the above example). By highlighting the communication state in this way, it becomes easier for the operator of the remote driving device 200 to determine which vehicle should be watched.
  • the remote control device 200 displays the current communication state of the vehicle 1 in association with the vehicle 1.
  • the remote driving device 200 may display the communication state at the destination of the vehicle 1 in association with the vehicle 1.
  • the image 600 is an image displayed by the remote control device 200, for example, in the main area 311.
  • the image 600 may be always displayed in the main area 311 or may be displayed in response to an instruction from the operator.
  • the main area 311 displays information about the vehicle 1 currently being controlled. That is, the image 600 is displayed in association with the vehicle 1 currently being controlled.
  • the image 600 may be displayed in each sub-region 312.
  • Image 600 includes a communication state at the destination of the vehicle 1. Specifically, the image 600 includes an estimated result of a communication state corresponding to a position where the vehicle 1 is expected to be located after a predetermined time has elapsed (for example, after 10 minutes). For example, in the example of FIG. 6, the predicted position of the vehicle 1 after 10 minutes is indicated by a circle, and the predicted result of the communication state (communication quality) there is indicated as “C”. When the communication state satisfies a predetermined condition (for example, the communication quality is "C”), the remote control device 200 may highlight the expected result of the communication state.
  • a predetermined condition for example, the communication quality is "C”
  • the remote control device 200 obtains the communication state at the predicted position of the vehicle 1 after 10 minutes from, for example, another communication device currently located at this position, or a wireless base station that provides a communication service at this position. You may make a prediction based on the information from. By displaying the communication status at the position of the movement destination (specifically, after a lapse of a predetermined time) in this way, how the operator of the remote driving device 200 changes the communication status at the movement destination of the vehicle 1. Can be judged in advance.
  • an image 701 that collectively displays position information, a communication state (communication quality in the example), and a difficulty level of a plurality of vehicles 1 in the same display area will be described.
  • the image 701 may be always displayed on the display device 310, or may be displayed on the display device 310 in response to a request from the user of the remote control device 200. Further, the image 701 may be displayed in the main area 311 or may be displayed in an area other than the main area 311 and the sub area 312.
  • image 701 the positions of each of the plurality of vehicles are indicated by circles on the map. Further, in the image 701, the vehicle ID, the communication quality, and the difficulty level of each vehicle are shown in association with the position of each vehicle represented by the circle. Also in this image, a vehicle having a difficulty level higher than the threshold value (for example, a vehicle having a vehicle ID of "001") and a vehicle having a communication quality lower than the threshold value (for example, a vehicle having a vehicle ID of "003”) It may be highlighted.
  • the threshold value for example, a vehicle having a vehicle ID of "001
  • a vehicle having a communication quality lower than the threshold value for example, a vehicle having a vehicle ID of "003
  • the present invention has been described by taking vehicle 1 as an example.
  • the present invention may be applied to moving objects other than vehicles.
  • the communication device provided in the vehicle was dealt with.
  • the communication device for which the communication status is displayed may include a communication device that is not provided in the vehicle, such as an IoT device, a telephone, or a mobile computer. These may be mobiles or devices that are used in a fixed location.
  • ⁇ Summary of Embodiment> It is a display control device (200). Acquisition means (201, S401) for acquiring the communication status of each of the plurality of communication devices (1), and Control means (201, S403) for displaying the communication status of each of the plurality of communication devices in association with each communication device, and A display control device comprising. According to this configuration, a person other than the user of the communication device can grasp the communication state of the communication device.
  • ⁇ Structure 5> The display control device according to any one of configurations 1 to 4, wherein the control means ranks the communication state of each of the plurality of communication devices and highlights the communication state having a predetermined rank (312b). .. According to this configuration, it becomes easier to grasp the communication state.
  • ⁇ Structure 6> The display control device according to any one of configurations 1 to 4, wherein the control means highlights a communication state that satisfies a predetermined condition among the communication states of the plurality of communication devices (312b). According to this configuration, it becomes easier to grasp the communication state.
  • ⁇ Structure 7> The display control device according to any one of configurations 1 to 6, wherein the control means displays the communication status of the communication device in association with the position (500) of the communication device.
  • the communication status can be grasped together with the position.
  • ⁇ Structure 8> The display according to any one of configurations 1 to 6, wherein the control means displays the communication status of the plurality of communication devices in the same display area (701) in association with the positions of the plurality of communication devices. Control device. According to this configuration, the position of the communication device and the communication state can be grasped in association with each other.
  • ⁇ Structure 9> The moving body is a vehicle
  • the acquisition means acquires the difficulty level of the automatic driving control of the vehicle, and obtains the difficulty level.
  • the display control device according to any one of configurations 1 to 8, wherein the control means displays the communication state of the communication device provided in the vehicle in association with the difficulty level of automatic driving control of the vehicle. ..
  • the control means is a display device (310) for the user of the remote control device (200) that provides a remote control service to the mobile body (1) from which the acquisition means acquires a communication state.
  • the display control device according to any one of configurations 1 to 9, wherein the communication state is displayed in association with the moving body. According to this configuration, the user of the remote control device can grasp the communication state of the mobile body.
  • ⁇ Structure 11> A program for operating a computer as each means of the display control device according to any one of the configurations 1 to 10. According to this configuration, the above configuration can be realized in the form of a program.
  • ⁇ Structure 12> It is a display control method
  • a person other than the user of the communication device can grasp the communication state of the communication device.

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Automation & Control Theory (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Remote Sensing (AREA)
  • Aviation & Aerospace Engineering (AREA)
  • Transportation (AREA)
  • Mechanical Engineering (AREA)
  • Combustion & Propulsion (AREA)
  • Chemical & Material Sciences (AREA)
  • General Engineering & Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Electromagnetism (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Traffic Control Systems (AREA)
  • Navigation (AREA)

Abstract

表示制御装置は、複数の通信装置のそれぞれの通信状態を取得する取得部と、複数の通信装置のそれぞれの通信状態を各通信装置に対応付けて表示する制御部とを備える。

Description

表示制御装置、表示制御方法及びプログラム
 本発明は、表示制御装置、表示制御方法及びプログラムに関する。
 無線通信機能を有する携帯端末では、通信環境に応じて高速なデータ転送が困難になったり、無線通信自体が不可能になったりすることがある。特許文献1に記載された通信装置は、ユーザに向けてこの通信装置の通信品質値を表示する。これにより、通信品質が不十分であることによる無駄な処理を回避することを目指す。
特開2012-147500号公報
 特許文献1に記載された技術では、通信装置のユーザのみがこの通信装置の通信状態を把握可能である。しかし、通信状態は、ユーザ以外の人にとっても利用価値がある。本発明の一部の側面は、通信装置の通信状態を通信装置のユーザ以外の人が把握するための技術を提供することを目的とする。
 上記課題に鑑みて、表示制御装置であって、複数の通信装置のそれぞれの通信状態を取得する取得手段と、前記複数の通信装置のそれぞれの通信状態を各通信装置に対応付けて表示する制御手段と、を備える表示制御装置が提供される。
 上記手段により、通信装置の通信状態を通信装置のユーザ以外の人が把握できる。
 本発明のその他の特徴及び利点は、添付図面を参照とした以下の説明により明らかになるであろう。なお、添付図面においては、同じ若しくは同様の構成には、同じ参照番号を付す。
 添付図面は明細書に含まれ、その一部を構成し、本発明の実施の形態を示し、その記述と共に本発明の原理を説明するために用いられる。
実施形態に係る車両の構成例を説明するブロック図。 実施形態に係る遠隔運転装置の構成例を説明するブロック図。 実施形態に係る遠隔運転のコンソール例を説明する模式図。 実施形態に係る表示制御方法の例を説明するフロー図。 実施形態に係る表示例を説明する模式図。 実施形態に係る表示例を説明する模式図。 実施形態に係る画面の表示例を説明する模式図。
 以下、添付図面を参照して実施形態を詳しく説明する。尚、以下の実施形態は特許請求の範囲に係る発明を限定するものでなく、また実施形態で説明されている特徴の組み合わせの全てが発明に必須のものとは限らない。実施形態で説明されている複数の特徴うち二つ以上の特徴が任意に組み合わされてもよい。また、同一若しくは同様の構成には同一の参照番号を付し、重複した説明は省略する。
 車両1は、車両1を制御する車両用制御装置2(以下、単に制御装置2と呼ぶ)を含む。制御装置2は車内ネットワークにより通信可能に接続された複数のECU20~29を含む。各ECUは、CPUに代表されるプロセッサ、半導体メモリ等のメモリ、外部デバイスとのインタフェース等を含む。メモリにはプロセッサが実行するプログラムやプロセッサが処理に使用するデータ等が格納される。各ECUはプロセッサ、メモリおよびインタフェース等を複数備えていてもよい。例えば、ECU20は、プロセッサ20aとメモリ20bとを備える。メモリ20bに格納されたプログラムが含む命令をプロセッサ20aが実行することによって、ECU20による処理が実行される。これに代えて、ECU20は、ECU20による処理を実行するためのASIC等の専用の集積回路を備えてもよい。他のECUについても同様である。
 以下、各ECU20~29が担当する機能等について説明する。なお、ECUの数や、担当する機能については適宜設計可能であり、本実施形態よりも細分化したり、統合したりすることが可能である。
 ECU20は、車両1の自動運転機能及び遠隔運転機能に関わる走行制御を実行する。この走行制御において、ECU20は、車両1の操舵及び/又は加減速を自動制御する。自動運転機能とは、ECU20が車両1の走行経路を計画し、この走行経路に基づいて車両1の操舵及び/又は加減速を制御する機能のことである。遠隔運転機能とは、ECU20が車両1の外部のオペレータからの指示に従って車両1の操舵及び/又は加減速を制御する機能のことである。外部のオペレータは人間であってもよいし、AI(人工知能)であってもよい。ECU20は、自動運転機能と遠隔運転機能とを組み合わせて実行することも可能である。例えば、ECU20は、オペレータからの指示がない間に走行経路を計画して走行制御を行い、オペレータからの指示があった場合にその指示に従って走行制御を行ってもよい。
 ECU21は、電動パワーステアリング装置3を制御する。電動パワーステアリング装置3は、ステアリングホイール31に対する運転者の運転操作(操舵操作)に応じて前輪を操舵する機構を含む。また、電動パワーステアリング装置3は操舵操作をアシストしたり、前輪を自動操舵したりするための駆動力を発揮するモータや、操舵角を検知するセンサ等を含む。車両1の運転状態が自動運転状態の場合、ECU21は、ECU20からの指示に対応して電動パワーステアリング装置3を自動制御し、車両1の進行方向を制御する。
 ECU22および23は、車両の外界の状況を検知する検知ユニット41~43の制御および検知結果の情報処理を行う。検知ユニット41は、車両1の前方を撮影するカメラであり(以下、カメラ41と表記する場合がある。)、本実施形態の場合、車両1のルーフ前部でフロントウィンドウの車室内側に取り付けられる。カメラ41が撮影した画像の解析により、物標の輪郭抽出や、道路上の車線の区画線(白線等)を抽出可能である。
 検知ユニット42は、ライダ(Light Detection and Ranging)であり(以下、ライダ42と表記する場合がある)、車両1の周囲の物標を検知したり、物標との距離を測距したりする。本実施形態の場合、ライダ42は5つ設けられており、車両1の前部の各隅部に1つずつ、後部中央に1つ、後部各側方に1つずつ設けられている。検知ユニット43は、ミリ波レーダであり(以下、レーダ43と表記する場合がある)、車両1の周囲の物標を検知したり、物標との距離を測距したりする。本実施形態の場合、レーダ43は5つ設けられており、車両1の前部中央に1つ、前部各隅部に1つずつ、後部各隅部に一つずつ設けられている。
 ECU22は、一方のカメラ41と、各ライダ42の制御および検知結果の情報処理を行う。ECU23は、他方のカメラ41と、各レーダ43の制御および検知結果の情報処理を行う。車両の周囲状況を検知する装置を二組備えたことで、検知結果の信頼性を向上でき、また、カメラ、ライダ、レーダといった種類の異なる検知ユニットを備えたことで、車両の周辺環境の解析を多面的に行うことができる。
 ECU24は、ジャイロセンサ5、GPSセンサ24b、通信装置24cの制御および検知結果あるいは通信結果の情報処理を行う。ジャイロセンサ5は車両1の回転運動を検知する。ジャイロセンサ5の検知結果や、車輪速等により車両1の進路を判定することができる。GPSセンサ24bは、車両1の現在位置を検知する。通信装置24cは、地図情報や交通情報を提供するサーバと無線通信を行い、これらの情報を取得する。ECU24は、メモリに構築された地図情報のデータベース24aにアクセス可能であり、ECU24は現在地から目的地へのルート探索等を行う。ECU24、地図データベース24a、GPSセンサ24bは、いわゆるナビゲーション装置を構成している。
 ECU25は、車車間通信用の通信装置25aを備える。通信装置25aは、周辺の他車両と無線通信を行い、車両間での情報交換を行う。通信装置25aは、車両1の外部のオペレータとの通信にも使用される。
 ECU26は、パワープラント6を制御する。パワープラント6は車両1の駆動輪を回転させる駆動力を出力する機構であり、例えば、エンジンと変速機とを含む。ECU26は、例えば、アクセルペダル7Aに設けた操作検知センサ7aにより検知した運転者の運転操作(アクセル操作あるいは加速操作)に対応してエンジンの出力を制御したり、車速センサ7cが検知した車速等の情報に基づいて変速機の変速段を切り替えたりする。車両1の運転状態が自動運転状態の場合、ECU26は、ECU20からの指示に対応してパワープラント6を自動制御し、車両1の加減速を制御する。
 ECU27は、方向指示器(ウィンカー)を含む照明装置8(ヘッドライト、テールライト等の灯火器)を制御する。図1の例の場合、照明装置8は車両1の前部、ドアミラーおよび後部に設けられている。ECU27はさらに、クラクションのホーンを含む、車外に向けた音響装置11を制御する。照明装置8、音響装置11又はその組み合わせは、車両1の外界に対して情報を提供する機能を有する。
 ECU28は、入出力装置9の制御を行う。入出力装置9は運転者に対する情報の出力と、運転者からの情報の入力の受け付けを行う。音出力装置91は運転者に対して音声により情報を報知する。表示装置92は運転者に対して画像の表示により情報を報知する。表示装置92は例えば運転席表面に配置され、インストルメントパネル等を構成する。なお、ここでは、音声と表示を例示したが振動や光により情報を報知してもよい。また、音声、表示、振動または光のうちの複数を組み合わせて情報を報知してもよい。更に、報知すべき情報のレベル(例えば緊急度)に応じて、組み合わせを異ならせたり、報知態様を異ならせたりしてもよい。入力装置93は運転者が操作可能な位置に配置され、車両1に対する指示を行うスイッチ群であるが、音入力装置も含まれてもよい。ECU28は、ECU20の走行制御に関する案内を実施可能である。案内の詳細については後述する。入力装置93は、ECU20による走行制御の動作を制御するために用いられるスイッチを含んでもよい。入力装置93は、運転者の視線方向を検知するためのカメラを含んでもよい。
 ECU29は、ブレーキ装置10やパーキングブレーキ(不図示)を制御する。ブレーキ装置10は例えばディスクブレーキ装置であり、車両1の各車輪に設けられ、車輪の回転に抵抗を加えることで車両1を減速あるいは停止させる。ECU29は、例えば、ブレーキペダル7Bに設けた操作検知センサ7bにより検知した運転者の運転操作(ブレーキ操作)に対応してブレーキ装置10の作動を制御する。車両1の運転状態が自動運転状態の場合、ECU29は、ECU20からの指示に対応してブレーキ装置10を自動制御し、車両1の減速および停止を制御する。ブレーキ装置10やパーキングブレーキは車両1の停止状態を維持するために作動することもできる。また、パワープラント6の変速機がパーキングロック機構を備える場合、これを車両1の停止状態を維持するために作動することもできる。
 図2のブロック図を参照して、本発明の一部の実施形態に係る遠隔運転装置200の構成について説明する。遠隔運転装置200は、遠隔運転機能を有する車両に対して遠隔運転サービスを提供するための装置である。遠隔運転装置200は、サービス提供対象の車両から遠隔に位置する。
 遠隔運転装置200は、複数の動作モードで遠隔運転サービスを提供可能であってもよい。遠隔運転サービスの複数の動作モードは、主導モードと支援モードとを含んでもよい。主導モードとは、遠隔運転装置200のオペレータが車両の制御量(例えば、操舵角やアクセルペダル開度、ブレーキペダル開度、ウィンカーレバーの位置、ライトのオン・オフなど)を指定する動作モードのことである。支援モードとは、遠隔運転装置200のオペレータが指定した経路計画に従って車両(具体的にはECU20)が車両の制御量を決定する動作モードのことである。支援モードにおいて、遠隔運転装置200のオペレータは、自ら経路計画を生成して指定してもよいし、車両から提案された経路計画を採用することによって経路計画を指定してもよい。
 遠隔運転装置200は、図2に示す各構成要素を有する。プロセッサ201は、遠隔運転装置200全体の動作を制御する。プロセッサ201は、例えばCPUとして機能する。メモリ202は、遠隔運転装置200の動作に用いられるプログラムや一時データなどを記憶する。メモリ202は、例えばROMやRAMなどにより実現される。入力部203は、遠隔運転装置200の使用者が遠隔運転装置200への入力を行うために用いられる。遠隔運転装置200の使用者とは、人間が操作主体である場合にこの人間であり、AIが操作主体である場合にAIの動作を監視する人間(監視者)である。出力部204は、遠隔運転装置200から使用者に向けて情報を出力するために用いられる。記憶部205は、遠隔運転装置200の動作に用いられるデータを記憶する。記憶部205は、ディスクドライブ(例えば、HDDやSDD)などの記憶装置で実現される。通信部206は、遠隔運転装置200が他の装置(例えば、遠隔運転対象の車両)と通信する機能を提供し、例えばネットワークカードやアンテナなどで実現される。
 図3の概略図を参照して、遠隔運転装置200の入力部203及び出力部204の構成例について説明する。この構成例では、表示装置310及び音響装置320によって出力部204が構成され、ステアリングホイール330、アクセルペダル340、ブレーキペダル350、マイク360及び複数のスイッチ370によって入力部203が構成される。
 表示装置310は、遠隔運転サービスを提供するための視覚情報を出力する装置である。音響装置320は、遠隔運転サービスを提供するための聴覚情報を出力する装置である。表示装置310に表示される画面は、1つのメイン領域311と、複数のサブ領域312とを含む。メイン領域311には、遠隔運転サービスの提供対象の複数の車両のうちの制御対象車両に関する情報が表示される。制御対象車両とは、遠隔運転装置200からの指示が送信される車両のことである。各サブ領域312には、遠隔運転サービスの提供対象の複数の車両のうちの制御対象車両以外の車両に関する情報が表示される。制御対象車両以外の車両は、監視対象車両と呼ばれることもある。1台の遠隔運転装置200によって複数台の車両に遠隔運転サービスを提供する場合に、オペレータは、メイン領域311に表示する車両(すなわち、制御対象車両)を適宜切り替える。メイン領域311及びサブ領域312に表示される情報は、車両の周囲の交通状況、車両の速度などを含む。
 ステアリングホイール330は、主導モードにおいて制御対象車両の操舵量を制御するために用いられる。アクセルペダル340は、主導モードにおいて制御対象車両のアクセルペダル開度を制御するために用いられる。ブレーキペダル350は、主導モードにおいて制御対象車両のブレーキペダル開度を制御するために用いられる。マイク360は、音声情報を入力するために用いられる。マイク360に入力された音声情報は、制御対象車両へ送信され、その車内で再生されてもよい。
 複数のスイッチ370は、遠隔運転サービスを提供するための様々な入力を行うために用いられる。例えば、複数のスイッチ370は、制御対象車両を切り替えるためのスイッチ、支援モードにおけるオペレータの判断結果を指示するためのスイッチ、複数の動作モードを切り替えるためのスイッチなどを含む。
 図2及び図3で説明した遠隔運転装置200は、主導モードと支援モードとの両方を提供可能である。これに代えて、遠隔運転装置200は、主導モードと支援モードと一方のみを提供可能であってもよい。主導モードを提供しない場合に、ステアリングホイール330、アクセルペダル340及びブレーキペダル350は省略可能である。また、複数の遠隔運転装置200が協働して遠隔運転サービスを提供してもよい。この場合に、遠隔運転装置200は、サービス提供対象の車両を別の遠隔運転装置200に引継ぎ可能であってもよい。
 図4を参照して、遠隔運転装置200が実行する表示制御方法について説明する。この制御方法において、遠隔運転装置200は表示制御装置として機能する。この制御方法は、遠隔運転装置200のプロセッサがメモリに格納されたプログラムを実行することによって行われてもよい。これに代えて、方法の一部又は全部の工程が、ASIC(特定用途向け集積回路)のような専用回路で実行されてもよい。前者の場合に、プロセッサが特定の動作のための構成要素となり、後者の場合に、専用回路が特定の動作のための構成要素となる。図4の制御方法は、遠隔運転装置200が遠隔運転サービスを提供中に反復して実行される。
 ステップS401で、遠隔運転装置200は、サービス対象の複数の車両1のそれぞれから遠隔運転サービスの提供に使用する情報を取得する。例えば、この情報は、通信ネットワークを介して車両1から送信された情報を受信することによって取得される。この情報は、車両1に関する情報、例えば現在位置、通信状態、現在の速度、周囲の交通状況、自動走行制御の難易度、移動予定の経路などを含んでもよい。車両1の通信状態は、例えば現在の通信品質(例えば通信遅延)、接続中の通信ネットワークの通信規格(3G、4G、5Gなど)などを含んでもよい。
 ステップS402で、遠隔運転装置200は、サービス対象の複数の車両1以外から遠隔運転サービスの提供に使用する情報を取得する。この情報は、例えば各地点における通信品質、地図情報などを含む。この情報は、この情報を提供する外部の装置から受信することによって取得されてもよいし、遠隔運転装置200のメモリ202に事前に格納された情報を読み出すことによって取得されてもよい。
 ステップS403で、遠隔運転装置200は、オペレータが遠隔運転サービスを提供するために使用する情報を出力部204の表示装置に表示する。この表示される情報は、ステップS401及びS402で取得した情報及び/又はこの情報から導出される情報を含む。
 図5を参照して、ステップS403で表示される情報の例について説明する。上述のように、複数のサブ領域312に遠隔運転サービスの提供対象の車両に関する情報が表示される。上述のように、複数のサブ領域312は、車両1に遠隔運転サービスを提供する遠隔運転装置200の使用者が視認するための表示装置301に含まれる。図5では、複数のサブ領域312のうち3つについて着目し、これらをサブ領域312a~312cと呼ぶ。サブ領域312a~312cのそれぞれに、別個の車両1に関する情報が表示される。具体的に、サブ領域312aには車両IDが「002」である車両1に関する情報が表示され、サブ領域312bには車両IDが「003」である車両1に関する情報が表示され、サブ領域312cには車両IDが「004」である車両1に関する情報が表示される。
 サブ領域312に表示される情報は、車両IDと、車速と、難易度と、通信品質と、現在位置とを含む。「車両ID」は、サービス提供対象の車両1を一意に識別するための識別子である。「車速」は、車両1の現在の速度である。「難易度」は、車両1の現在の自動走行制御の難易度である。一例で、難易度は「A」、「B」、「C」の3段階(Aが最も難しい)にランク付けされて表示される。この難易度は、車両1が決定した値であってもよいし、車両1から受信した情報に基づいて遠隔運転装置200が決定した値であってもよい。「通信品質」は、車両1に設けられた通信装置の通信の現在の品質である。以下、車両1に設けられた通信装置の通信を、単に車両1の通信と呼ぶ。通信品質は、車両1の通信状態の一例である。通信品質に代えて又はこれに加えて、通信状態の他の情報が表示されてもよい。通信品質は「A」、「B」、「C」の3段階(Aが最もよい)にランク付けされて表示される。「現在位置」は、車両1の現在の地理的位置である。現在位置は、例えば領域500内に表示された地図上に丸印によって示される。このように、遠隔運転装置200は、複数の車両のそれぞれの通信状態(上記の例では通信品質)を含む情報を各車両に対応付けて表示装置に表示する。また、遠隔運転装置200は、車両の通信状態を含む情報を、道路を表示する画面上(例えば地図上)に車両の地理的位置に対応付けて表示する。
 遠隔運転装置200は、サブ領域312bに示すように、通信状態が所定の条件を満たす場合(例えば、上記の例では通信品質が「C」の場合)に、通信状態を強調表示してもよい。図5の例では通信状態を表す文字「C」を点滅することによって通信状態を強調表示する。強調表示の方法はこれに限られない。例えば、通信品質を通常とは別の色で表示したり、サブ領域312全体を強調し表示たりしてもよい。また、遠隔運転装置200は、通信状態を3段階にランク付けし、所定のランク(上記の例では「C」)を有する通信状態を強調表示する。このように通信状態を強調表示することによって、遠隔運転装置200のオペレータはどの車両を注視すべきかを判断しやすくなる。
 図5の例で、遠隔運転装置200は、車両1の現在の通信状態を車両1に対応付けて表示した。これに加えて又はこれに代えて、遠隔運転装置200は、車両1の移動先での通信状態を車両1に対応付けて表示してもよい。
 図6を参照して、車両1の移動先での通信状態を車両1に対応付けて表示する例について説明する。画像600は、遠隔運転装置200が例えばメイン領域311に表示する画像である。画像600は、メイン領域311に常に表示されていてもよいし、オペレータからの指示に応じて表示されてもよい。上述のように、メイン領域311には、現在制御中の車両1に関する情報が表示される。すなわち、画像600は、現在制御中の車両1に対応付けて表示される。画像600は、各サブ領域312に表示されてもよい。
 画像600では、地図上に車両1の現在位置と、車両1の移動予定の経路601とが表示される。移動予定の経路601は、例えば図4のS401で車両から受信される。画像600は、車両1の移動先での通信状態を含む。具体的に、画像600は、車両1が所定時間経過後(例えば、10分後)に位置すると予想される位置に対応した通信状態の予想結果を含む。例えば、図6の例では、10分後の車両1の予想位置が丸印で示され、そこでの通信状態(通信品質)の予測結果が「C」であることが示される。通信状態が所定の条件を満たす(例えば、通信品質が「C」)の場合に、遠隔運転装置200は、通信状態の予想結果を強調表示してもよい。
 遠隔運転装置200は、10分後の車両1の予想位置での通信状態を、例えばこの位置に現在位置する他の通信装置から取得した通信状態や、この位置に通信サービスを提供する無線基地局からの情報に基づいて予測してもよい。このように移動先(具体的には、所定時間経過後)の位置における通信状態を表示することによって、遠隔運転装置200のオペレータは、車両1の移動先でどのように通信状態が変化するかを事前に判断できる。
 図7を参照して、複数の車両1について位置情報と、通信状態(例では通信品質)と、難易度とを一括して同一の表示領域に表示する画像701について説明する。画像701は、表示装置310に常に表示されていてもよいし、遠隔運転装置200の利用者からの要求に応じて表示装置310に表示されてもよい。また、画像701は、メイン領域311に表示されてもよいし、メイン領域311及びサブ領域312以外の領域に表示されてもよい。
 画像701では、地図上に丸印で複数の車両のそれぞれの位置が示される。また、画像701では、丸印で表される各車両の位置に対応付けて、各車両の車両IDと通信品質と難易度とが示される。この画像でも、閾値よりも高い難易度を有する車両(例では、車両IDが「001」の車両)及び閾値よりも低い通信品質(例では、車両IDが「003」の車両)を有する車両が強調表示されてもよい。
 上述の実施形態では、車両1を例として本発明が説明された。これに代えて、本発明は、車両以外の移動体に適用されてもよい。また、通信装置の例として、車両に設けられた通信装置を扱った。通信状態が表示される通信装置は、車両に設けられていない通信装置、例えばIoTデバイスや電話機、モバイル・コンピュータなどを含んでもよい。これらは移動体であってもよいし、特定の場所に固定された状態で使用される装置であってもよい。
 <実施形態のまとめ>
<構成1>
 表示制御装置(200)であって、
  複数の通信装置(1)のそれぞれの通信状態を取得する取得手段(201、S401)と、
  前記複数の通信装置のそれぞれの通信状態を各通信装置に対応付けて表示する制御手段(201、S403)と、
を備える表示制御装置。
 この構成によれば、通信装置の通信状態を通信装置のユーザ以外の人が把握できる。
<構成2>
 前記複数の通信装置は、移動体に設けられた通信装置を含む、構成1に記載の表示制御装置。
 この構成によれば、移動体の通信装置の通信状態を把握できる。
<構成3>
 前記移動体の通信状態は、前記移動体の移動先での通信状態を含む、構成2に記載の表示制御装置。
 この構成によれば、移動体の移動先での通信状態を把握でき、これによって将来の動作に備えることができる。
<構成4>
 前記移動体の通信状態は、所定時間経過後の前記移動体の位置に対応した通信状態の予測結果を含む、構成2又は3に記載の表示制御装置。
 この構成によれば、所定時間経過後の通信状態を把握でき、これによって将来の動作に備えることができる。
<構成5>
 前記制御手段は、前記複数の通信装置のそれぞれの通信状態をランク付けし、所定のランクを有する通信状態を強調表示する(312b)、構成1乃至4の何れか1つに記載の表示制御装置。
 この構成によれば、通信状態を一層把握しやすくなる。
<構成6>
 前記制御手段は、前記複数の通信装置の通信状態のうち所定の条件を満たす通信状態を強調表示する(312b)、構成1乃至4の何れか1つに記載の表示制御装置。
 この構成によれば、通信状態を一層把握しやすくなる。
<構成7>
 前記制御手段は、通信装置の通信状態を、当該通信装置の位置(500)に対応付けて表示する、構成1乃至6の何れか1つに記載の表示制御装置。
 この構成によれば、位置と合わせて通信状態を把握できる。
<構成8>
 前記制御手段は、複数の通信装置の通信状態を、同一の表示領域(701)に、前記複数の通信装置の位置に対応付けて表示する、構成1乃至6の何れか1つに記載の表示制御装置。
 この構成によれば、通信装置の位置と通信状態とを対応付けて把握できる。
<構成9>
 前記移動体は車両であり、
 前記取得手段は、前記車両の自動走行制御の難易度を取得し、
 前記制御手段は、前記車両に設けられた前記通信装置の通信状態と前記車両の自動走行制御の難易度とを対応付けて表示する、構成1乃至8の何れか1つに記載の表示制御装置。
 この構成によれば、車両の位置と通信状態と難易度とを対応付けて把握できる。
<構成10>
 前記制御手段は、前記取得手段が通信状態を取得する移動体(1)に遠隔運転サービスを提供する遠隔運転装置(200)の使用者が視認するための表示装置(310)に前記移動体の通信状態を前記移動体に対応付けて表示することを特徴とする構成1乃至9の何れか1つに記載の表示制御装置。
 この構成によれば、遠隔運転装置の使用者が移動体の通信状態を把握できる。
<構成11>
 コンピュータを構成1乃至10の何れか1つに記載の表示制御装置の各手段として機能させるためのプログラム。
 この構成によれば、プログラムの形態で上記構成を実現できる。
<構成12>
 表示制御方法であって、
  複数の通信装置のそれぞれの通信状態を取得する取得工程(S401)と、
  前記複数の通信装置のそれぞれの通信状態を各通信装置に対応付けて表示する制御工程(S403)と、
を有する表示制御方法。
 この構成によれば、通信装置の通信状態を通信装置のユーザ以外の人が把握できる。
 本発明は上記実施の形態に制限されるものではなく、本発明の精神及び範囲から離脱することなく、様々な変更及び変形が可能である。従って、本発明の範囲を公にするために、以下の請求項を添付する。

Claims (12)

  1.  表示制御装置であって、
      複数の通信装置のそれぞれの通信状態を取得する取得手段と、
      前記複数の通信装置のそれぞれの通信状態を各通信装置に対応付けて表示する制御手段と、
    を備える表示制御装置。
  2.  前記複数の通信装置は、移動体に設けられた通信装置を含む、請求項1に記載の表示制御装置。
  3.  前記移動体の通信状態は、前記移動体の移動先での通信状態を含む、請求項2に記載の表示制御装置。
  4.  前記移動体の通信状態は、所定時間経過後の前記移動体の位置に対応した通信状態の予測結果を含む、請求項2又は3に記載の表示制御装置。
  5.  前記制御手段は、前記複数の通信装置のそれぞれの通信状態をランク付けし、所定のランクを有する通信状態を強調表示する、請求項1乃至4の何れか1項に記載の表示制御装置。
  6.  前記制御手段は、前記複数の通信装置の通信状態のうち所定の条件を満たす通信状態を強調表示する、請求項1乃至4の何れか1項に記載の表示制御装置。
  7.  前記制御手段は、通信装置の通信状態を、当該通信装置の位置に対応付けて表示する、請求項1乃至6の何れか1項に記載の表示制御装置。
  8.  前記制御手段は、複数の通信装置の通信状態を、同一の表示領域に、前記複数の通信装置の位置に対応付けて表示する、請求項1乃至6の何れか1項に記載の表示制御装置。
  9.  前記移動体は車両であり、
     前記取得手段は、前記車両の自動走行制御の難易度を取得し、
     前記制御手段は、前記車両に設けられた前記通信装置の通信状態と前記車両の自動走行制御の難易度とを対応付けて表示する、請求項1乃至8の何れか1項に記載の表示制御装置。
  10.  前記制御手段は、前記取得手段が通信状態を取得する移動体に遠隔運転サービスを提供する遠隔運転装置の使用者が視認するための表示装置に前記移動体の通信状態を前記移動体に対応付けて表示することを特徴とする請求項1乃至9の何れか1項に記載の表示制御装置。
  11.  コンピュータを請求項1乃至10の何れか1項に記載の表示制御装置の各手段として機能させるためのプログラム。
  12.  表示制御方法であって、
      複数の通信装置のそれぞれの通信状態を取得する取得工程と、
      前記複数の通信装置のそれぞれの通信状態を各通信装置に対応付けて表示する制御工程と、
    を有する表示制御方法。
PCT/JP2019/014308 2019-03-29 2019-03-29 表示制御装置、表示制御方法及びプログラム WO2020202379A1 (ja)

Priority Applications (5)

Application Number Priority Date Filing Date Title
DE112019007110.6T DE112019007110T5 (de) 2019-03-29 2019-03-29 Anzeige-Steuervorrichtung, Anzeige-Steuerverfahren und Programm
JP2021511753A JP7359843B2 (ja) 2019-03-29 2019-03-29 表示制御装置、表示制御方法及びプログラム
CN201980094107.8A CN113574575B (zh) 2019-03-29 2019-03-29 显示控制装置、显示控制方法以及存储介质
PCT/JP2019/014308 WO2020202379A1 (ja) 2019-03-29 2019-03-29 表示制御装置、表示制御方法及びプログラム
US17/477,803 US11960280B2 (en) 2019-03-29 2021-09-17 Display control device and display control method

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/JP2019/014308 WO2020202379A1 (ja) 2019-03-29 2019-03-29 表示制御装置、表示制御方法及びプログラム

Related Child Applications (1)

Application Number Title Priority Date Filing Date
US17/477,803 Continuation US11960280B2 (en) 2019-03-29 2021-09-17 Display control device and display control method

Publications (1)

Publication Number Publication Date
WO2020202379A1 true WO2020202379A1 (ja) 2020-10-08

Family

ID=72666703

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2019/014308 WO2020202379A1 (ja) 2019-03-29 2019-03-29 表示制御装置、表示制御方法及びプログラム

Country Status (5)

Country Link
US (1) US11960280B2 (ja)
JP (1) JP7359843B2 (ja)
CN (1) CN113574575B (ja)
DE (1) DE112019007110T5 (ja)
WO (1) WO2020202379A1 (ja)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20210027625A1 (en) * 2019-07-23 2021-01-28 Toyota Jidosha Kabushiki Kaisha Image display device
US11960280B2 (en) 2019-03-29 2024-04-16 Honda Motor Co., Ltd. Display control device and display control method

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2015190945A (ja) * 2014-03-28 2015-11-02 パイオニア株式会社 情報生成装置、通信装置、情報生成方法、通信方法およびプログラム
WO2016121254A1 (ja) * 2015-01-29 2016-08-04 古野電気株式会社 無線通信用表示装置、無線通信方法、及び無線通信システム
JP2018180771A (ja) * 2017-04-07 2018-11-15 トヨタ自動車株式会社 遠隔操作装置

Family Cites Families (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH09244745A (ja) * 1996-03-05 1997-09-19 Cap Top Eng:Kk 無人車両制御方法および装置
JP2004206218A (ja) * 2002-12-24 2004-07-22 Koyo Seiko Co Ltd 車両遠隔操作システム、遠隔操作装置、車両用制御装置、および車両遠隔操作方法
JP4558753B2 (ja) * 2007-03-01 2010-10-06 株式会社デンソー 表示装置
JP5550676B2 (ja) * 2012-04-24 2014-07-16 京セラ株式会社 電力充電装置、携帯端末、および電力線通信方法
DE102012016868A1 (de) * 2012-08-25 2014-02-27 Audi Ag Verfahren und System zum Betreiben eines Fahrzeugs unter Überwachung der Fortbewegung des Fahrzeugs mit Hilfe einer Kameraeinrichtung einer mobilen Bedieneinrichtung
US10620635B2 (en) * 2015-11-05 2020-04-14 Hitachi, Ltd. Moving object movement system and movement path selection method
JP2018056936A (ja) 2016-09-30 2018-04-05 Kddi株式会社 通信状態情報生成装置及び通信状態情報生成プログラム
JP6812733B2 (ja) * 2016-10-07 2021-01-13 日産自動車株式会社 無人運転システムの車外操作方法と車外操作装置
CN107589745B (zh) * 2017-09-22 2021-04-16 京东方科技集团股份有限公司 驾驶方法、车载驾驶端、远程驾驶端、设备和存储介质
WO2020202379A1 (ja) 2019-03-29 2020-10-08 本田技研工業株式会社 表示制御装置、表示制御方法及びプログラム

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2015190945A (ja) * 2014-03-28 2015-11-02 パイオニア株式会社 情報生成装置、通信装置、情報生成方法、通信方法およびプログラム
WO2016121254A1 (ja) * 2015-01-29 2016-08-04 古野電気株式会社 無線通信用表示装置、無線通信方法、及び無線通信システム
JP2018180771A (ja) * 2017-04-07 2018-11-15 トヨタ自動車株式会社 遠隔操作装置

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11960280B2 (en) 2019-03-29 2024-04-16 Honda Motor Co., Ltd. Display control device and display control method
US20210027625A1 (en) * 2019-07-23 2021-01-28 Toyota Jidosha Kabushiki Kaisha Image display device
US11636762B2 (en) * 2019-07-23 2023-04-25 Toyota Jidosha Kabushiki Kaisha Image display device

Also Published As

Publication number Publication date
DE112019007110T5 (de) 2022-02-24
JPWO2020202379A1 (ja) 2020-10-08
CN113574575A (zh) 2021-10-29
CN113574575B (zh) 2023-07-25
US20220004187A1 (en) 2022-01-06
US11960280B2 (en) 2024-04-16
JP7359843B2 (ja) 2023-10-11

Similar Documents

Publication Publication Date Title
JP7154177B2 (ja) 制御装置、制御方法及びプログラム
CN111830961B (zh) 路径设定装置、路径设定方法以及存储介质
JP7055043B2 (ja) 車両用制御装置及び車両
US11960280B2 (en) Display control device and display control method
US11829134B2 (en) Display control device and display control method
CN114194105B (zh) 自动驾驶车用信息提示装置
JP2019155957A (ja) 車両用制御装置及び車両
JP7339332B2 (ja) 遠隔操作装置、遠隔操作方法及びプログラム
CN112937566A (zh) 自动驾驶车辆用信息提示装置
JP7311295B2 (ja) 制御装置、制御方法及びプログラム
US11924652B2 (en) Control device and control method
US20210171060A1 (en) Autonomous driving vehicle information presentation apparatus
US20200310409A1 (en) Communication apparatus, communication method, and storage medium
JP7369767B2 (ja) 制御装置、制御方法及びプログラム
CN111216631B (zh) 行驶控制装置、控制方法以及存储程序的存储介质
CN113615256B (zh) 控制装置、控制方法以及存储介质

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 19923612

Country of ref document: EP

Kind code of ref document: A1

ENP Entry into the national phase

Ref document number: 2021511753

Country of ref document: JP

Kind code of ref document: A

122 Ep: pct application non-entry in european phase

Ref document number: 19923612

Country of ref document: EP

Kind code of ref document: A1