WO2020045350A1 - ヘッドアップディスプレイ、ヘッドアップディスプレイシステム、および移動体 - Google Patents
ヘッドアップディスプレイ、ヘッドアップディスプレイシステム、および移動体 Download PDFInfo
- Publication number
- WO2020045350A1 WO2020045350A1 PCT/JP2019/033324 JP2019033324W WO2020045350A1 WO 2020045350 A1 WO2020045350 A1 WO 2020045350A1 JP 2019033324 W JP2019033324 W JP 2019033324W WO 2020045350 A1 WO2020045350 A1 WO 2020045350A1
- Authority
- WO
- WIPO (PCT)
- Prior art keywords
- eye
- display
- user
- information
- image
- Prior art date
Links
- 238000003384 imaging method Methods 0.000 claims abstract description 99
- 230000003287 optical effect Effects 0.000 claims abstract description 72
- 238000006243 chemical reaction Methods 0.000 claims description 47
- 230000008859 change Effects 0.000 claims description 27
- 230000004888 barrier function Effects 0.000 description 39
- 238000010586 diagram Methods 0.000 description 12
- 238000000034 method Methods 0.000 description 7
- 239000004973 liquid crystal related substance Substances 0.000 description 6
- 238000009792 diffusion process Methods 0.000 description 4
- 238000002834 transmittance Methods 0.000 description 4
- 101500019086 Ustilago maydis P6 virus KP6 killer toxin subunit alpha Proteins 0.000 description 3
- 238000012937 correction Methods 0.000 description 3
- 238000012986 modification Methods 0.000 description 3
- 230000004048 modification Effects 0.000 description 3
- 238000004364 calculation method Methods 0.000 description 2
- 239000000470 constituent Substances 0.000 description 2
- 238000010276 construction Methods 0.000 description 2
- 238000001514 detection method Methods 0.000 description 2
- 230000006870 function Effects 0.000 description 2
- 210000001747 pupil Anatomy 0.000 description 2
- 239000004065 semiconductor Substances 0.000 description 2
- 239000011230 binding agent Substances 0.000 description 1
- 239000003086 colorant Substances 0.000 description 1
- 238000004891 communication Methods 0.000 description 1
- 230000000295 complement effect Effects 0.000 description 1
- 238000002474 experimental method Methods 0.000 description 1
- 210000003128 head Anatomy 0.000 description 1
- 239000011159 matrix material Substances 0.000 description 1
- 229910044991 metal oxide Inorganic materials 0.000 description 1
- 150000004706 metal oxides Chemical class 0.000 description 1
- 238000005192 partition Methods 0.000 description 1
- 230000008569 process Effects 0.000 description 1
- 238000012545 processing Methods 0.000 description 1
- 238000004088 simulation Methods 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
Images
Classifications
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
- B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
- B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
- B60K35/10—Input arrangements, i.e. from user to vehicle, associated with vehicle functions or specially adapted therefor
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
- B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
- B60K35/20—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor
- B60K35/21—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor using visual output, e.g. blinking lights or matrix displays
- B60K35/211—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor using visual output, e.g. blinking lights or matrix displays producing three-dimensional [3D] effects, e.g. stereoscopic images
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
- B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
- B60K35/20—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor
- B60K35/21—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor using visual output, e.g. blinking lights or matrix displays
- B60K35/23—Head-up displays [HUD]
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
- B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
- B60K35/65—Instruments specially adapted for specific vehicle types or users, e.g. for left- or right-hand drive
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
- B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
- B60K35/85—Arrangements for transferring vehicle- or driver-related data
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
- B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
- B60K35/90—Calibration of instruments, e.g. setting initial or reference parameters; Testing of instruments, e.g. detecting malfunction
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
- B60R1/00—Optical viewing arrangements; Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
- B60R1/02—Rear-view mirror arrangements
- B60R1/025—Rear-view mirror arrangements comprising special mechanical means for correcting the field of view in relation to particular driving conditions, e.g. change of lane; scanning mirrors
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
- G02B27/0101—Head-up displays characterised by optical features
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B30/00—Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images
- G02B30/20—Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images by providing first and second parallax images to an observer's left and right eyes
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
- G06F3/147—Digital output to display device ; Cooperation and interconnection of the display device with other functional units using display panels
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
- G09G5/36—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators characterised by the display of a graphic pattern, e.g. using an all-points-addressable [APA] memory
- G09G5/38—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators characterised by the display of a graphic pattern, e.g. using an all-points-addressable [APA] memory with means for controlling the display position
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/30—Image reproducers
- H04N13/302—Image reproducers for viewing without the aid of special glasses, i.e. using autostereoscopic displays
- H04N13/31—Image reproducers for viewing without the aid of special glasses, i.e. using autostereoscopic displays using parallax barriers
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/30—Image reproducers
- H04N13/327—Calibration thereof
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/30—Image reproducers
- H04N13/332—Displays for viewing with the aid of special glasses or head-mounted displays [HMD]
- H04N13/344—Displays for viewing with the aid of special glasses or head-mounted displays [HMD] with head-mounted left-right displays
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/30—Image reproducers
- H04N13/363—Image reproducers using image projection screens
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/30—Image reproducers
- H04N13/366—Image reproducers using viewer tracking
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
- B60K2360/00—Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
- B60K2360/149—Instrument input by detecting viewing direction not otherwise provided for
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
- B60K2360/00—Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
- B60K2360/20—Optical features of instruments
- B60K2360/21—Optical features of instruments using cameras
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
- B60K2360/00—Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
- B60K2360/20—Optical features of instruments
- B60K2360/31—Virtual images
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
- B60K2360/00—Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
- B60K2360/595—Data transfer involving internal databases
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
- B60K2360/00—Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
- B60K2360/741—Instruments adapted for user detection
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
- G02B27/0101—Head-up displays characterised by optical features
- G02B2027/0132—Head-up displays characterised by optical features comprising binocular systems
- G02B2027/0136—Head-up displays characterised by optical features comprising binocular systems with a single image source for both eyes
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
- G02B27/0101—Head-up displays characterised by optical features
- G02B2027/0138—Head-up displays characterised by optical features comprising image capture systems, e.g. camera
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
- G02B27/0179—Display position adjusting means not related to the information to be displayed
- G02B2027/0187—Display position adjusting means not related to the information to be displayed slaved to motion of at least a part of the body of the user, e.g. head, eye
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G2320/00—Control of display operating conditions
- G09G2320/02—Improving the quality of display appearance
- G09G2320/0261—Improving the quality of display appearance in the context of movement of objects on the screen or movement of the observer relative to the screen
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G2320/00—Control of display operating conditions
- G09G2320/06—Adjustment of display parameters
- G09G2320/0693—Calibration of display systems
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G2380/00—Specific applications
- G09G2380/10—Automotive applications
Definitions
- the present disclosure relates to a head-up display, a head-up display system, and a moving object.
- the head-up display of the present disclosure includes a display device and an optical system.
- the display device includes a display panel, an input unit, a memory, and a controller.
- the display panel is configured to display an image.
- the input unit is configured to receive calibration information indicating the position of the calibration object and first position information indicating the position of the user's eye with respect to the imaging device.
- the memory is configured to store the calibration information.
- the optical system causes the user to visually recognize a virtual image plane, which is a virtual image of the image, by reflecting the image light emitted corresponding to the image displayed on the display panel toward the user's eyes. Be composed.
- the controller is configured to use the calibration information to convert the first position information into second position information indicating a position of the eye with respect to the virtual image plane.
- the head-up display system of the present disclosure includes an imaging device and a head-up display.
- the head-up display includes a display device and an optical system.
- the display device includes a display panel, an input unit, a memory, and a controller.
- the display panel is configured to display an image.
- the input unit is configured to receive calibration information indicating a position of a calibration object, based on the imaging device, and first position information indicating a position of a user's eye.
- the memory stores the calibration information.
- the optical system causes the user to visually recognize a virtual image plane, which is a virtual image of the image, by reflecting the image light emitted corresponding to the image displayed on the display panel toward the user's eyes. Be composed.
- the controller is configured to use the calibration information to convert the first position information into second position information indicating a position of the eye with respect to the virtual image plane.
- the moving object of the present disclosure includes a head-up display.
- the head-up display includes a display device and an optical system.
- the display device includes a display panel, an input unit, a memory, and a controller.
- the display panel is configured to display an image.
- the input unit is configured to receive calibration information indicating the position of the calibration object and first position information indicating the position of the user's eye with respect to the imaging device.
- the memory is configured to store the calibration information.
- the optical system causes the user to visually recognize a virtual image plane, which is a virtual image of the image, by reflecting the image light emitted corresponding to the image displayed on the display panel toward the user's eyes. Be composed.
- the controller is configured to use the calibration information to convert the first position information into second position information indicating a position of the eye with respect to the virtual image plane.
- FIG. 2 is a diagram illustrating an example of a moving object equipped with a head-up display system.
- FIG. 2 is a diagram illustrating a schematic configuration of a display device illustrated in FIG. 1.
- FIG. 3 is a diagram illustrating an example in which the display panel illustrated in FIG. 2 is viewed from a depth direction.
- FIG. 3 is a diagram illustrating an example in which the parallax barrier illustrated in FIG. 2 is viewed from a depth direction.
- FIG. 2 is a diagram for explaining a relationship between a virtual image shown in FIG. 1 and a user's eye.
- FIG. 6 is a diagram for describing a left visible area on the virtual image plane illustrated in FIG. 5.
- FIG. 6 is a diagram for explaining a right visible region on the virtual image plane shown in FIG. 5.
- FIG. 3 is a diagram illustrating an example of a positional relationship between a virtual image plane and an imaging device viewed from a horizontal direction.
- FIG. 4 is a diagram illustrating an example of a positional relationship between a virtual image plane and an imaging device viewed from a vertical direction.
- FIG. 9 is a diagram for explaining conversion parameters for converting first position information in the y-axis direction into second position information.
- FIG. 9 is a diagram for explaining conversion parameters for converting first position information in the x-axis direction into second position information.
- FIG. 4 is a diagram illustrating a modification of the display panel illustrated in FIG. 3 when viewed from a depth direction. It is the figure which looked at the modification of the parallax barrier shown in FIG. 4 from the depth direction.
- the imaging device accurately detect the position of the user's eye without hindering the user from visually recognizing the virtual image of the image projected by the head-up display.
- the present disclosure provides a head-up display, a head-up display system, and a moving object that allow a user to visually recognize an appropriate virtual image.
- the head-up display system 100 includes an imaging device 1 and a head-up display (HUD: Head Up Display) 2, as shown in FIG.
- the head-up display system 100 may be mounted on the moving body 20.
- ⁇ “ Moving object ”in the present disclosure includes vehicles, ships, and aircraft.
- the “vehicle” in the present disclosure includes an automobile and an industrial vehicle, but is not limited thereto, and may include a railway vehicle, a living vehicle, and a fixed-wing aircraft traveling on a runway.
- Automobiles include, but are not limited to, passenger cars, trucks, buses, motorcycles, trolley buses, and the like, and may include other vehicles traveling on roads.
- Industrial vehicles include industrial vehicles for agriculture and construction.
- Industrial vehicles include, but are not limited to, forklifts and golf carts.
- Industrial vehicles for agriculture include, but are not limited to, tractors, tillers, transplanters, binders, combines, and lawnmowers.
- Industrial vehicles for construction include, but are not limited to, bulldozers, scrapers, excavators, crane trucks, dump trucks, and road rollers. Vehicles include those that run manually.
- the classification of the vehicle is not limited to the above.
- an automobile may include an industrial vehicle that can travel on a road, and a plurality of classifications may include the same vehicle.
- the ship in the present disclosure includes a marine jet, a boat, and a tanker.
- the aircraft according to the present disclosure includes a fixed wing aircraft and a rotary wing aircraft.
- the imaging device 1 may include, for example, a CCD (Charge Coupled Device) imaging device or a CMOS (Complementary Metal Oxide Semiconductor) imaging device.
- CCD Charge Coupled Device
- CMOS Complementary Metal Oxide Semiconductor
- the imaging device 1 is arranged so that the user's face is located on the subject side of the imaging device 1.
- the imaging device 1 may be arranged at a position shifted from the front of the user's face such that the imaging range includes the user's face.
- the imaging device 1 may be mounted on a room mirror.
- the imaging device 1 may be attached to, for example, a cluster in the instrument panel.
- the imaging device 1 may be attached to a center panel.
- the imaging device 1 may be attached to a support portion of the steering wheel, which is arranged at the center of the steering wheel and is fixedly mounted on the moving body 20 so as to be adjustable.
- the imaging device 1 is configured to detect a position of an object.
- the imaging device 1 is configured to detect at least one of the left eye (first eye) and the right eye (second eye) of the user in the first coordinate system.
- the first coordinate system is a coordinate system based on the imaging device 1.
- the direction of the optical axis OX of the imaging device 1 is defined as a Z direction.
- a predetermined position of the imaging device 1 may be set as the origin.
- the predetermined position of the imaging device 1 may be, for example, the center of the imaging surface perpendicular to the optical axis OX.
- the imaging device 1 is configured to detect a position of the calibration object.
- the calibration object may be the eye of a calibration operator.
- the imaging device 1 is configured to output first position information indicating the position of the user's eye in the first coordinate system to the display device 4.
- the imaging device 1 is configured to output calibration position information indicating the position of the calibration object in the first coordinate system to the display device 4.
- the imaging device 1 may be configured to output the first position information and the calibration position information to the display device 4 via a communication network such as a wired, wireless, and CAN (Controller Area Network).
- the imaging device 1 may be configured to detect at least one position of the left eye and the right eye from a captured image including an image of a camera user's face. Specifically, the imaging device 1 associates a combination of the position, face direction, and face size of the user's face on the captured image with the position of the user's eye in the first coordinate system.
- the correspondence information is stored in advance. The correspondence information can be determined by, for example, an experiment or a simulation. The correspondence information may be stored, for example, as a look-up table.
- the imaging device 1 is configured to be able to detect the position, orientation, and size of a user's face on a captured image.
- the imaging device 1 maps the positions of the user's eyes in the first coordinate system, which can correspond to a combination of the position of the user's face on the detected captured image, the direction of the face, and the size of the face. It is configured so that it can be extracted from information.
- the imaging device 1 is configured to be able to detect the extracted position as the position of both eyes of the user in the first coordinate system.
- the imaging device 1 is configured to be able to detect the position of the user's eye in the direction of the optical axis OX by a known method.
- the imaging device 1 is configured to be able to detect the distance to the user's eye in the direction of the optical axis OX based on the focal length and the blur on the image.
- the imaging device 1 detects the position of the user's face in the direction of the optical axis OX by a ToF (Time @ of @ Flight) method using infrared light, and based on the position of the face, detects the position of the eye as described above. Is configured to be detected.
- the imaging apparatus 1 is configured to calculate the distance by comparing the size of the camera angle of view with the size of the object.
- HUD 2 includes optical system 3 and display device 4.
- the optical system 3 may include one or more optical elements 31 and an optical member 32.
- the one or more optical elements 31 are configured to reflect the image light emitted from the display device 4 toward a predetermined area of the optical member 32.
- the predetermined area is an area where the image light reflected on the predetermined area is directed toward the user's eyes.
- the predetermined area can be determined by the direction of the user's eyes with respect to the optical member 32 and the direction in which image light is incident on the optical member 32.
- Each of the one or more optical elements 31 may be a mirror or a lens. When the optical element 31 is a mirror, for example, the mirror may be a concave mirror.
- one or more optical elements 31 are configured to display as one mirror. However, the present invention is not limited to this, and one or more optical elements 31 may be configured by combining one or more mirrors, lenses, and other optical elements.
- the optical member 32 is configured to reflect the image light emitted from the display device 4 and reflected by the one or more optical elements 31 toward the left eye and the right eye of the user.
- the windshield of the moving body 20 may also be used as the optical member 32. Therefore, the HUD 2 is configured to cause the light emitted from the display device 4 to travel along the optical path L to the left and right eyes of the user. The user can visually recognize the light that has arrived along the optical path L as a virtual image V.
- the display device 4 can include an input unit 5, an irradiator 6, a display panel 7, a parallax barrier 8 as an optical element, a controller 9, and a memory 10.
- the display device 4 When the display device 4 is mounted on the moving body 20, the display device 4 may be attached to a cluster of the moving body 20.
- the input unit 5 is configured to receive first position information indicating the position of the user's eye in the first coordinate system detected by the imaging device 1.
- the input unit 5 is configured to receive calibration position information indicating the position of the calibration object in the first coordinate system detected by the imaging device 1.
- the input unit 5 may be configured to receive at least one of first arrangement information, second arrangement information, and third arrangement information described below.
- the irradiator 6 is configured to irradiate the display panel 7 in a planar manner.
- the irradiator 6 may include a light source, a light guide plate, a diffusion plate, a diffusion sheet, and the like.
- the irradiator 6 is configured to emit irradiation light from a light source and to make the irradiation light uniform in the surface direction of the display panel 7 using a light guide plate, a diffusion plate, a diffusion sheet, or the like.
- the irradiator 6 is configured to emit the uniformed light toward the display panel 7.
- the display panel 7 may employ a display panel such as a transmissive liquid crystal display panel.
- the display panel 7 is not limited to a transmissive liquid crystal panel, and other display panels such as an organic EL can be used.
- a self-luminous display panel is used as the display panel 7, the display device 4 does not need to include the irradiator 6.
- the display panel 7 will be described as a liquid crystal panel.
- the display panel 7 is configured to have a plurality of partitioned areas on an active area 71 formed in a planar shape.
- the active area 71 is configured to display a parallax image.
- the parallax image includes a later-described left-eye image (first image) and a right-eye image (second image) having parallax with the left-eye image.
- the division area is an area divided by a lattice-like black matrix.
- the partition region is a region partitioned in a first direction and a second direction orthogonal to the first direction. A direction orthogonal to the first direction and the second direction is referred to as a third direction.
- the first direction may be referred to as a horizontal direction.
- the second direction may be referred to as a vertical direction.
- the third direction may be referred to as a depth direction.
- the first direction, the second direction, and the third direction are not limited to these. 3, 4, 6, and 7, the first direction is represented as a u-axis direction, the second direction is represented as a v-axis direction, and the third direction is represented as a w-axis direction.
- the active area 71 includes a plurality of sub-pixels arranged in a grid along the horizontal direction and the vertical direction.
- Each sub-pixel corresponds to, for example, one of R (Red), G (Green), and B (Blue) colors.
- the three sub-pixels of R, G, and B constitute one pixel as a set.
- One pixel may be referred to as one pixel.
- the horizontal direction is, for example, a direction in which a plurality of sub-pixels constituting one pixel are arranged.
- the vertical direction is, for example, a direction in which sub-pixels of the same color are arranged.
- the plurality of sub-pixels arranged in the active area 71 as described above constitute a sub-pixel group Pg.
- the sub-pixel groups Pg are repeatedly arranged in the horizontal direction.
- the sub-pixel groups Pg are arranged repeatedly in the vertical direction.
- the sub-pixel group Pg includes sub-pixels of a predetermined row and column.
- the sub-pixel group Pg is composed of (2 ⁇ n ⁇ b) sub-pixels P1 to P (2 ⁇ n ⁇ b) arranged continuously in b rows in the vertical direction and 2 ⁇ n columns in the horizontal direction.
- a sub-pixel group Pg including ten sub-pixels P1 to P10 arranged continuously in one row in the vertical direction and ten columns in the horizontal direction is arranged.
- some sub-pixel groups Pg are denoted by reference numerals.
- the sub-pixel group Pg is a minimum unit for performing control for displaying an image by the controller 9 described later.
- the sub-pixels P1 to P (2 ⁇ n ⁇ b) having the same identification information of all the sub-pixel groups Pg are simultaneously controlled by the controller 9. For example, when switching the image displayed on the sub-pixel P1 from the left-eye image to the right-eye image, the controller 9 simultaneously changes the image displayed on the sub-pixel P1 in all the sub-pixel groups Pg from the left-eye image to the right-eye image. Can be switched to
- the parallax barrier 8 extends along the active area 71 as shown in FIG.
- the parallax barrier 8 is located away from the active area 71 by a predetermined distance (gap) g.
- the parallax barrier 8 may be located on the opposite side of the illuminator 6 with respect to the display panel 7.
- the parallax barrier 8 may be located on the illuminator 6 side of the display panel 7.
- the parallax barrier 8 is configured to define a light ray direction that is a propagation direction of image light emitted from the sub-pixel.
- the parallax barrier 8 has a plurality of light transmitting regions 81 and a plurality of light reducing regions 82.
- the light transmitting region 81 is a portion that transmits light incident on the parallax barrier 8.
- the light transmitting region 81 may be configured to transmit light with a transmittance equal to or higher than a first predetermined value.
- the first predetermined value is higher than a second predetermined value described later.
- the dimming region 82 may transmit light with a transmittance equal to or less than a second predetermined value.
- the dimming region 82 extends in a predetermined direction, and defines a light-transmitting region 81 extending in a predetermined direction between the dimming regions 82 adjacent to each other.
- the predetermined direction may be, for example, a vertical direction.
- the light transmitting areas 81 and the light reducing areas 82 are repeatedly arranged alternately in a direction orthogonal to a predetermined direction.
- the dimming area 82 may be constituted by a light shielding surface.
- the light transmitting region 81 may be constituted by an opening defined by a light shielding surface.
- the first predetermined value may be, for example, 100% or a value close to 100%.
- the second predetermined value may be, for example, 0% or a value close to 0%.
- the first predetermined value can be defined as a relative ratio to the second predetermined value.
- the parallax barrier 8 may be constituted by a liquid crystal shutter.
- the liquid crystal shutter can control the light transmittance according to the applied voltage.
- the liquid crystal shutter may include a plurality of pixels, and may control the light transmittance of each pixel. In such a configuration, the lower the ratio of the second predetermined value to the first predetermined value, the better. In one example, the ratio of the second predetermined value to the first predetermined value can be 1/100. In another example, the ratio of the second predetermined value to the first predetermined value can be 1/1000.
- the image light emitted from the active area 71 of the display panel 7 is transmitted through the light transmitting area 81 and reaches the optical member 32 via one or more optical elements 31. Further, the image light reaching the optical member 32 is reflected by the optical member 32 and reaches the user's eyes.
- the user's eyes recognize the first virtual image V7, which is a virtual image of the image displayed in the active area 71 in front of the optical member 32.
- the front is the direction of the optical member 32 as viewed from the user.
- the front is the direction in which the moving body 20 normally moves. Therefore, as shown in FIG. 5, the user apparently defines the direction of image light from the first virtual image V7 via the second virtual image V8, which is a virtual image of the parallax barrier 8, Recognize the image.
- the user apparently recognizes the image as if visually recognizing the first virtual image V7 via the second virtual image V8, and in fact, the second virtual image V8 which is a virtual image of the parallax barrier 8 Does not exist.
- the second virtual image V8 is described as being apparently located at a position where the virtual image of the parallax barrier 8 is formed and defining image light from the first virtual image V7.
- the parallax barrier 8 is configured to transmit the image light emitted from some of the sub-pixels of the active area 71 through the light-transmitting region 81 and propagate the light to the left eye of the user. .
- the parallax barrier 8 is configured to transmit image light emitted from some of the other sub-pixels through the light-transmitting region 81 and propagate the light to the right eye of the user.
- An image visually recognized by the user's eye by transmitting the image light to each of the left eye and the right eye of the user will be described in detail with reference to FIGS. 6 and 7.
- a sub-pixel for displaying a left-eye image is denoted by “L”
- a sub-pixel for displaying a right-eye image is denoted by “R”.
- the left visible region (first visible region) VaL illustrated in FIG. 6 is, as described above, the image light transmitted through the light-transmitting region 81 of the parallax barrier 8 reaches the left eye of the user, and thus the user can see the left visible region VaL.
- This is the area of the virtual image plane V71 visually recognized by the left eye.
- the left light-blocking region VbL is a region where the left eye of the user is difficult to visually recognize because the image light is dimmed by the dimming region 82 of the parallax barrier 8.
- the left visible area VaL includes virtual image sub-pixels VP1 to VP5.
- the left light shielding region VbL includes virtual image sub-pixels VP6 to VP10.
- the virtual image sub-pixels VP1 to VP10 are virtual images of images displayed on the sub-pixels P1 to P10 arranged in the active area 71, respectively.
- the left visible area VaL and the left light-shielding area VbL are the optimum viewing distance d, the distance E between the eyes of the user, the pitch Bpv of the second virtual image V8, the virtual image gap gv, and the image pitch kv of the first virtual image V7 shown in FIG. It can be determined by the relationship.
- the virtual image gap gV is a distance gv between the second virtual image V8 and the first virtual image V7.
- the suitable viewing distance d is a distance between the second virtual image V8 and the eyes of the user.
- the image pitch kv of the first virtual image V7 is a length corresponding to the image pitch k on the virtual image plane V71.
- the right visible region (second visible region) VaR shown in FIG. 7 is obtained when image light from some other sub-pixels transmitted through the light transmitting region 81 of the parallax barrier 8 reaches the user's right eye.
- the right light-blocking region VbR is a region where the right light of the user is difficult to visually recognize because the image light is reduced by the dimming region 82 of the parallax barrier 8.
- the right visible region VaR includes virtual image sub-pixels VP6 to VP10.
- the right light shielding region VbR includes virtual image sub-pixels VP1 to VP5.
- the right visible region VaR and the right light shielding region VbR are the same as the left visible region VaL and the left light shielding region VbL, as shown in FIG. gv and the image pitch kv of the first virtual image V7.
- the left eye of the user visually recognizes the virtual image of the left eye image in the left visible area VaL
- the right eye visually recognizes the virtual image of the right eye image in the right visible area VaR.
- the right-eye image and the left-eye image are parallax images having parallax with each other, the user visually recognizes a virtual image of a three-dimensional image.
- the controller 9 is connected to each component of the head-up display system 100 and is configured to control each component.
- the components controlled by the controller 9 include the imaging device 1 and the display panel 7.
- the controller 9 is configured as, for example, a processor.
- Controller 9 may include one or more processors.
- the processor may include a general-purpose processor that reads a specific program and executes a specific function, and a dedicated processor specialized for a specific process.
- the dedicated processor may include an application specific integrated circuit (ASIC: Application Specific Integrated Circuit).
- the processor may include a programmable logic device (PLD: Programmable Logic Device).
- the PLD may include an FPGA (Field-Programmable ⁇ Gate ⁇ Array).
- the controller 9 may be any of an SoC (System-on-a-Chip) in which one or more processors cooperate, and a SiP (System @ In @ aPackage).
- the controller 9 may include a storage unit, and may be configured to store various information, a program for operating each component of the head-up display system 100, and the like in the storage unit.
- the storage unit may be composed of, for example, a semiconductor memory or the like.
- the storage unit may function as a work memory of the controller 9.
- the memory 10 is constituted by an arbitrary storage device such as a random access memory (RAM) and a read only memory (ROM).
- the memory 10 is configured to store information received by the input unit 5 and information converted by the controller 9.
- the memory 10 is configured to store calibration position information described below, which is received by the input unit 5.
- the memory 10 may be configured to store conversion parameters, which will be described later, converted by the controller 9 as calibration information.
- the memory 10 may be configured to store at least one of the first arrangement information, the second arrangement information, and the third arrangement information received by the input unit 5.
- the HUD 2 displays the virtual image of the left eye image and the virtual image of the right eye image on the left visible area VaL and the right visible area VaR on the virtual image plane V71, respectively. It is necessary to make the virtual image visible to the user.
- the left visible area VaL and the right visible area VaR can be determined based on the suitable viewing distance d.
- the suitable viewing distance d can be calculated based on the virtual image gap gV and the distance from the virtual image plane V71 to the position of the eye.
- the virtual image gap gV is a distance between the first virtual image V7 and the second virtual image V8, and can be calculated based on the relationship between the display panel 7, the parallax barrier 8, and the optical system 3. Therefore, in order to calculate the optimal viewing distance d, it is necessary to calculate the distance from the virtual image plane V71 to the position of the eye. Therefore, the controller 9 is configured to calculate the distance from the virtual image plane V71 to the eye position based on the eye position detected by the imaging device 1.
- the imaging device 1 is arranged away from the light beam to the first virtual image V7 so as not to overlap with the field of view of the user.
- the direction of the optical axis OX of the imaging device 1 is not necessarily the same as the normal direction of the virtual image plane V71 because the imaging device 1 arranged away from the light beam to the first virtual image V7 detects the face of the user.
- the direction of the optical axis OX of the imaging device 1 may be shifted in the tilt direction from the normal direction of the virtual image plane V71.
- the direction of the optical axis OX of the imaging device 1 may be shifted in the pan direction from the normal direction of the virtual image plane V71.
- the controller 9 is configured to calculate the coordinates of the second coordinate system based on the virtual image plane V71 based on the position of the eye in the first coordinate system based on the imaging device 1.
- the second coordinate system is an orthogonal coordinate system based on the virtual image plane V71.
- the second coordinate system is an orthogonal coordinate system in which a predetermined position on the virtual image plane V71 is the origin and the normal direction of the imaging device 1 is the z-axis.
- the predetermined position may be, for example, the center of the virtual image plane V71.
- one direction in the virtual image plane V71 is defined as an x direction.
- the x direction may be a direction along a straight line passing through the right eye and the left eye of the user.
- the direction orthogonal to the x direction in the virtual image plane V71 is defined as the y direction.
- the y coordinate y eye of the eye position in the second coordinate system is It does not change.
- the position of the eye at the position A in the first coordinate system with respect to the imaging device 1 is determined.
- the Y coordinate YA is different from the Y coordinate YB of the position of the eye at the position B.
- the difference between the Y coordinate of the eye position in the first coordinate system and the y coordinate y eye in the second coordinate system is larger. Is big.
- the x coordinate x eye of the eye position in the second coordinate system is It does not change.
- the X coordinate X C of the position of the eye at the position C in the first coordinate system and the position It is different from the X coordinate XD of the position of the eye at D.
- the difference between the X coordinate of the eye position in the first coordinate system and the x coordinate x eye of the second coordinate system is larger. Is big.
- the controller 9 converts the first position information into the second position information using the first calibration point CP1 and the second calibration point CP2 detected by the imaging device 1 in the initial setting mode. Configured to determine a conversion parameter to perform.
- the first position information is information indicating the position of the eye detected by the imaging device 1 in a first coordinate system.
- the second position information is information indicating the position of the eye in the second coordinate system.
- the controller 9 changes the conversion parameters determined in the initial setting mode based on at least one arrangement (at least one of the position and the posture) of the display panel 7, the imaging device 1, and the optical system 3. May be configured to be determined.
- the controller 9 is configured to convert the first position information indicating the position of the eye detected by the imaging device 1 into the second position information in the normal mode using the conversion parameter determined in the initial setting mode or the calibration mode. Is done.
- the imaging device 1 is configured to detect the positions of the first calibration point CP1 and the second calibration point CP2 in the first coordinate system.
- the first calibration point CP1 is an arbitrary point on the z-axis in the second coordinate system.
- the Y coordinate Y1 of the first calibration point CP1 is zero.
- the second calibration point CP2 is different from the first calibration point CP1 on the z-axis in the second coordinate system.
- the imaging device 1 can detect the Z coordinate and the Y coordinate indicating the position of the first calibration point CP1 in the first coordinate system by detecting the calibration object arranged at the first calibration point CP1 by the calibration operator. It is configured as follows. For example, the imaging apparatus 1 detects the calibration object placed at the second calibration point CP2 by the calibration operator, and thereby changes the Z coordinate and the Y coordinate indicating the position of the second calibration point CP2 in the first coordinate system. It is configured to be detectable. The imaging device 1 is configured to output, to the display device 4, calibration position information indicating positions of the detected first calibration point CP1 and the detected second calibration point CP2 in the first coordinate system.
- the input unit 5 is configured to receive the calibration position information output from the imaging device 1.
- the controller 9 is configured to calculate an expression indicating the z-axis of the second coordinate system in the first coordinate system. Specifically, the controller 9 is configured to calculate an equation of a straight line in the first coordinate system passing through the first calibration point CP1 and the second calibration point CP2 received by the input unit 5. For example, if the coordinates of the first calibration point CP1 are (Z1, Y1) and the coordinates of the second calibration point CP2 are (Z2, Y2), the z-axis of the second coordinate system is represented by the following equation (1).
- the Y coordinate in the first coordinate system detected by the imaging device 1 is a length from the Z axis in a direction perpendicular to the Z axis direction of the first coordinate system.
- the Y coordinate of each of the first calibration point CP1 and the second calibration point CP2 in the first coordinate system is the Z coordinate in the y axis direction. It can be approximated by distances Y1 and Y2 from the axis.
- the y coordinate y eye of the eye position in the first coordinate system is expressed by the following equation (2) using the Y coordinate Y detect and the Z coordinate Z detect of the eye position detected by the imaging device 1.
- y eye -Dy + Y detect (2)
- the position of the eye is determined from the y coordinate y eye of the second coordinate system in the Y coordinate Y detect of the first coordinate system.
- the difference Dy becomes larger.
- the difference Dy is expressed by the following equation (3) using the equation (1) of a straight line indicating the Z axis of the first coordinate system.
- the controller 9 is configured to determine that the y coordinate y eye of the position of the eye in the first coordinate system is represented by the following equation (4) based on equations (2) and (3). That is, the controller 9 is configured to determine a conversion parameter for converting the first position information indicated by the Y coordinate Y detect and the Z coordinate Z detect into the second position information indicated by the y coordinate y eye . As shown in FIG. 10, when a point located on the Z-axis of the first coordinate system is used as the first calibration point CP1, the offset Y1 in equation (4) can be set to zero.
- the imaging device 1 detects the coordinates of each of the first calibration point CP1 and the second calibration point CP2 in the second coordinate system.
- the imaging apparatus 1 is configured to be able to detect the Z coordinate Z1 and the X coordinate X1 of the first calibration point CP1 by detecting the calibration object placed at the first calibration point CP1 by the calibration operator.
- the X coordinate X1 of the first calibration point CP1 is 0.
- the imaging apparatus 1 is configured to be able to detect the Z coordinate Z2 and the X coordinate X2 of the second calibration point CP2 by detecting the calibration object placed at the second calibration point CP2 by the calibration operator.
- the imaging device 1 is configured to output calibration position information indicating the coordinates of the detected first calibration point CP1 and the detected second calibration point CP2 to the display device 4.
- the input unit 5 is configured to receive the calibration position information output from the imaging device 1.
- the controller 9 is configured to calculate an expression indicating the z-axis of the first coordinate system in the second coordinate system. Specifically, the controller 9 determines the first calibration point CP1 and the second calibration point CP1 in the first coordinate system based on the coordinates of the first calibration point CP1 and the second calibration point CP2 indicated by the calibration position information received by the input unit 5. It is configured to calculate an equation of a straight line passing through the calibration point CP2. For example, when the coordinates of the first calibration point CP1 are (Z1, X1) and the coordinates of the second calibration point CP2 are (Z2, X2), the following equation (5) is used.
- the X coordinate in the first coordinate system detected by the imaging device 1 is a length from the Z axis in a direction perpendicular to the Z axis direction of the first coordinate system.
- the X coordinate of each of the first calibration point CP1 and the second calibration point CP2 in the first coordinate system is Z axis in the x axis direction. It can be approximated by distances X1 and X2 from the axis.
- the x coordinate x eye of the position of the eye in the first coordinate system is expressed by the following equation (6) using the X coordinate X detect and the Z coordinate Z detect of the second coordinate system detected by the imaging device 1.
- the X coordinate X detect of the eye position in the first coordinate system and the x coordinate x eye of the second coordinate system are larger. Is larger.
- the difference Dx is expressed by the following equation (7) using the equation (5) of a straight line indicating the z-axis of the first coordinate system.
- the controller 9 determines that the y coordinate y eye of the position of the eye in the first coordinate system is represented by the following equation (8) based on equations (6) and (7). That is, the controller 9 determines a conversion parameter for converting the first position information indicated by the X coordinate X detect and the Z coordinate Z detect into the x coordinate x eye second position information.
- a point located on the Z-axis of the first coordinate system is used as the first calibration point CP1, X1 serving as an offset when calculating the y coordinate y eye can be set to zero.
- the imaging device 1 may be attached to the rearview mirror of the moving body 20 in some cases.
- at least one of the position and the posture of the room mirror changes at least one of the position and the posture of the imaging device 1 attached to the room mirror changes.
- the first coordinate system changes.
- the relative relationship between the first coordinate system and the second coordinate system changes.
- the input unit 5 may be configured to receive the first arrangement information transmitted from the control device that controls at least one of the position and the posture of the imaging device 1 at the time of initial setting or calibration.
- the first arrangement information is information indicating at least one of the position and the posture of the imaging device 1.
- the memory 10 stores the first arrangement information received by the input unit 5.
- the input unit 5 transmits the changed position and orientation of the imaging device 1 transmitted from a control device that controls at least one of the position and orientation of the imaging device 1. May be configured to receive first arrangement information indicating at least one of the following.
- the controller 9 may be configured to determine a conversion parameter based on a change in the first arrangement information. Specifically, the controller 9 determines the conversion parameter based on a change in the first arrangement information received by the input unit 5 from the first arrangement information previously received by the input unit 5 and stored in the memory 10. May be configured. For example, the controller 9 may be configured to determine a conversion parameter using a relationship between a change in the first arrangement information and a correction amount of the conversion parameter, which is stored in the memory 10 in advance. The controller 9 may be configured to determine a conversion parameter using a predetermined conversion rule based on a change in the first arrangement information.
- the controller 9 may be configured to determine the conversion parameter based on the newly received first arrangement information. Specifically, when the first arrangement information received by the input unit 5 is different from the first arrangement information stored in the memory 10, the controller 9 changes the conversion parameter based on the newly received first arrangement information. It may be configured to determine.
- the controller 9 may be configured to determine the conversion parameters.
- the display panel 7 that emits image light and the optical system 3 that reflects the image light are arranged so that the image light reaches the eyes of the user.
- the position of the user's eyes may change according to the user's sitting height.
- at least one of the position and the posture of the optical system 3 may be changed in order to appropriately reach the image light to the user's eyes.
- at least one of the position and the posture of the optical system 3 changes at least one of the position and the posture of the virtual image plane V71 changes, and the first coordinate system changes.
- the relative relationship between the first coordinate system and the second coordinate system changes.
- the input unit 5 may be configured to receive the second arrangement information transmitted from the control device that changes at least one of the position and the posture of the optical system 3 at the time of initial setting or calibration.
- the second arrangement information is information indicating at least one of the position and the posture of the optical system 3.
- the position and orientation of the optical system 3 refer to the position and orientation of the optical element 31 included in the optical system 3.
- the memory 10 is configured to store the second arrangement information received by the input unit 5.
- the input unit 5 transmits the changed position and the posture of the optical system 3 transmitted from the control device that controls at least one of the position and the posture of the optical system 3. May be configured to receive the second arrangement information indicating at least one of the following.
- the controller 9 may be configured to determine a conversion parameter based on a change in the second arrangement information. Specifically, the controller 9 determines the conversion parameter based on a change in the second arrangement information received by the input unit 5 from the second arrangement information previously received by the input unit 5 and stored in the memory 10. May be configured. For example, the controller 9 may be configured to determine a conversion parameter using a relationship between a change in the second arrangement information and a correction amount of the conversion parameter, which is stored in a memory in advance. The controller 9 may be configured to determine a conversion parameter using a predetermined conversion rule based on a change in the second arrangement information.
- the controller 9 may be configured to determine the conversion parameter based on the newly received second arrangement information. Specifically, when the second arrangement information received by the input unit 5 is different from the second arrangement information stored in the memory 10, the controller 9 changes the conversion parameter based on the newly received second arrangement information. It may be configured to determine.
- the position of the user's eye changes according to the sitting height of the user
- at least one of the position and the posture of the display panel 7 is changed in order to allow the image light to reach the user's eye.
- the position and the posture of the display panel 7 change, and the second coordinate system changes.
- the relative relationship between the first coordinate system and the second coordinate system changes.
- the input unit 5 may be configured to receive third arrangement information transmitted from a control device that controls at least one of the position and the attitude of the display panel 7 at the time of initial setting or calibration.
- the third arrangement information is information indicating at least one of the position and the posture of the display panel 7.
- the memory 10 is configured to store the third arrangement information received by the input unit 5.
- the input unit 5 transmits the position and the posture after the change of the display panel 7 transmitted from the control device that controls at least one of the position and the posture of the display panel 7. May be configured to receive third arrangement information indicating at least one of the following.
- the controller 9 may be configured to determine a conversion parameter based on a change in the third arrangement information. Specifically, the controller 9 determines the conversion parameter based on a change in the third arrangement information received by the input unit 5 from the third arrangement information previously received by the input unit 5 and stored in the memory 10. May be configured. For example, the controller 9 may be configured to determine a conversion parameter using a relationship between a change in the third arrangement information and a correction amount of the conversion parameter, which is stored in a memory in advance. The controller 9 may be configured to determine a conversion parameter using a predetermined conversion rule based on a change in the third arrangement information.
- the controller 9 may be configured to determine the conversion parameter based on the newly received third arrangement information. Specifically, when the third arrangement information received by the input unit 5 is different from the third arrangement information stored in the memory 10, the controller 9 converts the conversion parameter based on the newly received third arrangement information. It may be configured to determine.
- the imaging device 1 is configured to detect the position of the user's eye by a known method. Specifically, the imaging device 1 is configured to detect a Y coordinate Y detect and a Z coordinate Z detect indicating the position of the user's eye in the first coordinate system. The imaging device 1 is configured to output first position information including a Y coordinate, a Y detect, and a Z coordinate Z detect to the display device 4.
- the controller 9 uses the Y coordinate y detect and the Z coordinate Z detect included in the first position information to calculate the y coordinate y using the equation (4). It is configured to convert the first position information into the second position information by calculating eye .
- the imaging device 1 is configured to detect the position of the user's eye by a known method. Specifically, the imaging device 1 is configured to detect an X coordinate X detect and a Z coordinate Z detect indicating the position of the eye in the first coordinate system. The imaging device 1 is configured to output first position information including an X coordinate, X detect, and a Z coordinate Z detect to the display device 4.
- the controller 9 uses the expression (8) to calculate the x coordinate x based on the X coordinate X detect and the Z coordinate Z detect included in the first position information. It is configured to convert the first position information into the second position information by calculating eye .
- the HUD 2 is configured to convert the first position information into the second position information using the calibration position information. Therefore, the display device 4 can control an image to be displayed on the display panel 7 based on the position of the eye with respect to the virtual image plane V71. Therefore, HUD2 can make a user visually recognize a virtual image appropriately.
- the HUD 2 is configured to determine a conversion parameter based on at least one change in the position and orientation of the imaging device 1. For this reason, even if the relationship between the first coordinate system and the second coordinate system changes due to a change in at least one of the position and the posture of the imaging device 1, the conversion parameters can be appropriately determined. Therefore, the HUD 2 can control an image displayed on the display panel 7 based on the position of the eye with respect to the virtual image plane V71. Therefore, HUD2 can make a user visually recognize a virtual image appropriately.
- the HUD 2 is configured to determine a conversion parameter based on at least one change in the position and orientation of the optical system 3. For this reason, even if the relationship between the first coordinate system and the second coordinate system changes due to a change in at least one of the position and the posture of the optical system 3, the conversion parameters can be appropriately determined. Therefore, the HUD 2 can appropriately acquire the position of the eye with reference to the virtual image plane V71, and can control the image displayed on the display panel 7 based on the position of the eye. Therefore, HUD2 can make a user visually recognize a virtual image appropriately.
- the HUD 2 is configured to determine a conversion parameter based on at least one change in the position and orientation of the display panel 7. For this reason, even if at least one of the position and orientation of the display panel 7 changes and at least one of the position and orientation of the virtual image plane V71 changes, the relationship between the first coordinate system and the second coordinate system changes. , The conversion parameters can be determined appropriately. Therefore, the HUD 2 can appropriately acquire the position of the eye with reference to the virtual image plane V71, and can control the image displayed on the display panel 7 based on the position of the eye. Therefore, HUD2 can make a user visually recognize a virtual image appropriately.
- the display device 4 includes the display panel 7 in which the sub-pixel groups Pg are repeatedly arranged in the horizontal direction and are also repeatedly arranged in the vertical direction.
- the sub-pixel groups Pg are repeatedly arranged in the horizontal direction, and in the vertical direction, are repeatedly arranged adjacent to a position shifted by one sub-pixel in the horizontal direction. May be provided.
- the display device 4 includes a parallax barrier 80 instead of the parallax barrier 8.
- the parallax barrier 80 includes a plurality of barrier region groups sg.
- the barrier region groups sg are repeatedly arranged in the horizontal direction.
- the barrier region group sg is configured to be repeatedly arranged adjacent to a position shifted by one barrier region in the horizontal direction in the vertical direction.
- the barrier region group sg corresponds to the arrangement of the sub-pixels of the sub-pixel group Pg, and has b (vertical direction), 2 ⁇ n (horizontal direction), (2 ⁇ n ⁇ b) barriers continuously arranged. Includes regions s1 to s (2 ⁇ n ⁇ b).
- barrier region groups sg are denoted by reference numerals.
- the number of barrier region groups sg is b ′ (b ′) b) in the vertical direction, 2 ⁇ n ′ (n ′ ⁇ n) in the horizontal direction, and (2 ⁇ n ′ ⁇ b ′) in a row. May be configured to include the barrier regions s1 to s (2 ⁇ n ′ ⁇ b ′).
- Part of the plurality of barrier regions s included in the barrier region group sg constitutes the light-transmitting region 801, and the other part constitutes the light-reducing region 802.
- the translucent area 801 and the dimming area 802 are configured such that image light from sub-pixels at corresponding positions in the plurality of sub-pixel groups Pg of the display panel 70 is simultaneously transmitted or dimmed.
- the parallax barrier 80 is configured to define the light beam direction that is the propagation direction of the image light emitted from the sub-pixel.
- Image light emitted from some of the sub-pixels in the active area A is transmitted through the light transmitting region 801 and propagates to the pupil of the left eye of the user.
- Image light emitted from some other sub-pixels of the active area A is transmitted through the light-transmitting region 801 and propagates to the pupil of the right eye of the user.
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- Mechanical Engineering (AREA)
- Multimedia (AREA)
- Combustion & Propulsion (AREA)
- Chemical & Material Sciences (AREA)
- Transportation (AREA)
- General Physics & Mathematics (AREA)
- Signal Processing (AREA)
- Optics & Photonics (AREA)
- Theoretical Computer Science (AREA)
- Computer Hardware Design (AREA)
- General Engineering & Computer Science (AREA)
- Human Computer Interaction (AREA)
- Controls And Circuits For Display Device (AREA)
- Length Measuring Devices By Optical Means (AREA)
- Instrument Panels (AREA)
Abstract
ヘッドアップディスプレイは、表示装置と、光学系とを備える。表示装置は、表示パネルと、入力部と、メモリと、コントローラとを備える。表示パネルは、画像を表示するよう構成される。入力部は、撮像装置を基準とした、較正用オブジェクトの位置を示す較正用情報、および利用者の眼の位置を示す第1位置情報を受け付けるよう構成される。メモリは、較正用情報を記憶するよう構成される。光学系は、表示パネルに表示された画像に対応して射出された画像光を利用者の眼に向けて反射させることによって利用者に画像の虚像である虚像面を視認させるよう構成される。コントローラは、較正用情報を用いて、第1位置情報を、虚像面を基準とした眼の位置を示す第2位置情報に変換するよう構成される。
Description
本出願は、2018年8月29日出願の日本国特許出願第2018-160685号の優先権を主張するものであり、当該出願の開示全体を、ここに参照のために取り込む。
本開示は、ヘッドアップディスプレイ、ヘッドアップディスプレイシステム、および移動体に関する。
従来、撮像装置における車両の進行方向からの光軸のずれを検出することによって、対象物の位置を正確に算出する位置検出装置が知られている(特許文献1参照)。車両に搭乗する利用者の眼の位置に向けて画像光を投影するヘッドアップディスプレイにおいては、利用者の眼の位置を正確に検出することが必要である。
本開示のヘッドアップディスプレイは、表示装置と、光学系とを備える。前記表示装置は、表示パネルと、入力部と、メモリと、コントローラとを備える。前記表示パネルは、画像を表示するよう構成される。前記入力部は、撮像装置を基準とした、較正用オブジェクトの位置を示す較正用情報、および利用者の眼の位置を示す第1位置情報を受け付けるよう構成される。前記メモリは、前記較正用情報を記憶するよう構成される。前記光学系は、前記表示パネルに表示された画像に対応して射出された画像光を利用者の眼に向けて反射させることによって前記利用者に前記画像の虚像である虚像面を視認させるよう構成される。前記コントローラは、前記較正用情報を用いて、前記第1位置情報を、前記虚像面を基準とした前記眼の位置を示す第2位置情報に変換するよう構成される。
本開示のヘッドアップディスプレイシステムは、撮像装置と、ヘッドアップディスプレイとを備える。ヘッドアップディスプレイは、表示装置と、光学系とを備える。前記表示装置は、表示パネルと、入力部と、メモリと、コントローラとを備える。前記表示パネルは、画像を表示するよう構成される。前記入力部は、前記撮像装置を基準とした、較正用オブジェクトの位置を示す較正用情報、および利用者の眼の位置を示す第1位置情報を受け付けるよう構成される。前記メモリは、前記較正用情報を記憶する。前記光学系は、前記表示パネルに表示された画像に対応して射出された画像光を利用者の眼に向けて反射させることによって前記利用者に前記画像の虚像である虚像面を視認させるよう構成される。前記コントローラは、前記較正用情報を用いて、前記第1位置情報を、前記虚像面を基準とした前記眼の位置を示す第2位置情報に変換するよう構成される。
本開示の移動体は、ヘッドアップディスプレイを備える。ヘッドアップディスプレイは、表示装置と、光学系とを備える。前記表示装置は、表示パネルと、入力部と、メモリと、コントローラとを備える。前記表示パネルは、画像を表示するよう構成される。前記入力部は、撮像装置を基準とした、較正用オブジェクトの位置を示す較正用情報、および利用者の眼の位置を示す第1位置情報を受け付けるよう構成される。前記メモリは、前記較正用情報を記憶するよう構成される。前記光学系は、前記表示パネルに表示された画像に対応して射出された画像光を利用者の眼に向けて反射させることによって前記利用者に前記画像の虚像である虚像面を視認させるよう構成される。前記コントローラは、前記較正用情報を用いて、前記第1位置情報を、前記虚像面を基準とした前記眼の位置を示す第2位置情報に変換するよう構成される。
利用者がヘッドアップディスプレイによって投影された画像の虚像を視認することが妨げられることなく、撮像装置が利用者の眼の位置を正確に検出することが望まれている。
本開示は、利用者に適切な虚像を視認させることができるヘッドアップディスプレイ、ヘッドアップディスプレイシステム、および移動体を提供する。
以下、本開示の一実施形態について、図面を参照して説明する。なお、以下の説明で用いられる図は模式的なものであり、図面上の寸法比率等は現実のものとは必ずしも一致していない。
本開示の一実施形態にかかるヘッドアップディスプレイシステム100は、図1に示すように、撮像装置1と、ヘッドアップディスプレイ(HUD:Head Up Display)2とを含む。ヘッドアップディスプレイシステム100は、移動体20に搭載されてよい。
本開示における「移動体」には、車両、船舶、航空機を含む。本開示における「車両」には、自動車および産業車両を含むが、これに限られず、鉄道車両および生活車両、滑走路を走行する固定翼機を含めてよい。自動車は、乗用車、トラック、バス、二輪車、およびトロリーバス等を含むがこれに限られず、道路上を走行する他の車両を含んでよい。産業車両は、農業および建設向けの産業車両を含む。産業車両には、フォークリフト、およびゴルフカートを含むがこれに限られない。農業向けの産業車両には、トラクター、耕耘機、移植機、バインダー、コンバイン、および芝刈り機を含むが、これに限られない。建設向けの産業車両には、ブルドーザー、スクレーバー、ショベルカー、クレーン車、ダンプカー、およびロードローラを含むが、これに限られない。車両は、人力で走行するものを含む。なお、車両の分類は、上述に限られない。例えば、自動車には、道路を走行可能な産業車両を含んでよく、複数の分類に同じ車両が含まれてよい。本開示における船舶には、マリンジェット、ボート、タンカーを含む。本開示における航空機には、固定翼機、回転翼機を含む。
撮像装置1は、例えばCCD(Charge Coupled Device)撮像素子またはCMOS(Complementary Metal Oxide Semiconductor)撮像素子を含んでよい。
撮像装置1は、該撮像装置1の被写体側に利用者の顔が位置するように配置される。撮像装置1は、撮像範囲に利用者の顔が含まれるように、利用者の顔の正面からずれた位置に配置されてよい。ヘッドアップディスプレイシステム100が移動体20に搭載される場合、撮像装置1は、ルームミラーに取り付けられてよい。撮像装置1は、インスツルメントパネル内の、例えばクラスターに取り付けられてよい。撮像装置1は、センターパネルに取り付けられてよい。撮像装置1は、ステアリングホイールの中心に配置された、移動体20に調整可能に固定して搭載されている、該ステアリングホイールの支持部に取り付けられてよい。
撮像装置1は、物体の位置を検出するよう構成される。例えば、撮像装置1は、第1座標系における利用者の左眼(第1眼)および右眼(第2眼)の少なくとも一方の位置を検出するよう構成される。第1座標系は、撮像装置1を基準とした座標系である。第1座標系において、撮像装置1の光軸OXの方向をZ方向とする。第1座標系は、例えば、撮像装置1の所定の位置を原点としてよい。撮像装置1の所定の位置は、例えば、光軸OXに垂直な撮像面の中心であってよい。撮像装置1は、較正用オブジェクトの位置を検出するよう構成される。較正用オブジェクトは、較正作業者の眼であってよい。
撮像装置1は、利用者の眼の第1座標系における位置を示す第1位置情報を表示装置4に出力するよう構成される。撮像装置1は、較正用オブジェクトの第1座標系における位置を示す較正位置情報を表示装置4に出力するよう構成される。撮像装置1は、第1位置情報および較正位置情報を、有線、無線、およびCAN(Controller Area Network)等の通信ネットワークを介して表示装置4に出力するよう構成されてよい。
撮像装置1は、カメラの利用者の顔の像を含む撮影画像から左眼および右眼の少なくとも一方の位置を検出するよう構成されてよい。具体的には、撮像装置1は、撮像画像上の利用者の顔の位置、顔の向き、および顔の大きさの組み合わせと、第1座標系における利用者の眼の位置と、を対応付けた対応情報を予め記憶できるよう構成される。対応情報は、例えば実験またはシミュレーションによって決定可能である。対応情報は、例えばルックアップテーブルとして記憶されてよい。撮像装置1は、撮像画像上の利用者の顔の位置、顔の向き、および顔の大きさを検出できるよう構成される。顔および眼の検出には、例えばパターンマッチングを用いる手法、または撮像画像上の利用者の特徴点を抽出する手法等が採用可能である。撮像装置1は、検出された撮像画像上の利用者の顔の位置、顔の向き、および顔の大きさの組み合わせに対応しうる、第1座標系における利用者の両眼の位置を、対応情報から抽出できるよう構成される。撮像装置1は、抽出された位置を、第1座標系における利用者の両眼の位置として検出できるよう構成される。
撮像装置1は、光軸OXの方向における利用者の眼の位置を公知の方法により検出できるよう構成される。例えば、撮像装置1は、合焦点距離と画像上のぼけとに基づいて、光軸OXの方向における利用者の眼までの距離を検出できるよう構成される。例えば、撮像装置1は、赤外線を用いたToF(Time of Flight)方式により光軸OXの方向における利用者の顔の位置を検出し、該顔の位置に基づいて、上述したように眼の位置を検出できよう構成される。例えば、撮像装置1は、カメラ画角と対象物とのサイズ比較により距離の算出を行うよう構成される。
HUD2は、光学系3と、表示装置4とを含む。光学系3は、1つ以上の光学素子31と、光学部材32とを含みうる。
1つ以上の光学素子31は、表示装置4から射出された画像光を、光学部材32の所定領域に向けて反射させるよう構成される。所定領域は、該所定領域で反射した画像光が利用者の眼の方に向かう領域である。所定領域は、光学部材32に対する利用者の眼の方向、および光学部材32への画像光の入射方向によって定まりうる。1つ以上の光学素子31のそれぞれは、ミラー又はレンズであってよい。光学素子31がミラーである場合、例えば、ミラーは凹面鏡としてよい。図1において、1つ以上の光学素子31は、1つのミラーとして表示するよう構成されている。しかし、これに限られず、1つ以上の光学素子31は、1つ以上のミラー、レンズ、およびその他の光学素子を組み合わせて構成されてよい。
光学部材32は、表示装置4から射出され、1つ以上の光学素子31によって反射された画像光を、利用者の左眼および右眼に向けて反射させるよう構成される。例えば、移動体20のウインドシールドは、光学部材32として兼用されてよい。したがって、HUD2は、光路Lに沿って、表示装置4から射出された光を、利用者の左眼および右眼まで進行させるよう構成される。利用者は、光路Lに沿って到達した光を虚像Vとして視認しうる。
図2に示すように、表示装置4は、入力部5と、照射器6と、表示パネル7と、光学素子としてのパララックスバリア8と、コントローラ9と、メモリ10とを含むことができる。表示装置4が移動体20に搭載される場合、表示装置4は、移動体20のクラスターに取り付けられてよい。
入力部5は、撮像装置1によって検出された第1座標系における利用者の眼の位置を示す第1位置情報を受け付けるよう構成される。入力部5は、撮像装置1によって検出された第1座標系における較正用オブジェクトの位置を示す較正位置情報を受け付けるよう構成される。入力部5は、後述する第1配置情報、第2配置情報、および第3配置情報の少なくとも1つを受け付けるよう構成されてよい。
照射器6は、表示パネル7を面的に照射できるよう構成される。照射器6は、光源、導光板、拡散板、拡散シート等を含んでよい。照射器6は、光源により照射光を出射し、導光板、拡散板、拡散シート等により照射光を表示パネル7の面方向に均一化するよう構成される。そして、照射器6は均一化された光を表示パネル7の方に出射できるよう構成される。
表示パネル7は、例えば透過型の液晶表示パネルなどの表示パネルを採用しうる。表示パネル7としては、透過型の液晶パネルに限られず、有機EL等他の表示パネルを使用しうる。表示パネル7として、自発光型の表示パネルを使用した場合、表示装置4は照射器6を備えなくてよい。表示パネル7を液晶パネルとして説明する。
図3に示すように、表示パネル7は、面状に形成されたアクティブエリア71上に複数の区画領域を有するよう構成される。アクティブエリア71は、視差画像を表示するよう構成される。視差画像は、後述する左眼画像(第1画像)と左眼画像に対して視差を有する右眼画像(第2画像)とを含む。区画領域は、格子状のブラックマトリックスにより区画された領域である。区画領域は、第1方向および第1方向に直交する第2方向に区画された領域である。第1方向および第2方向に直交する方向は第3方向と称される。第1方向は水平方向と称されてよい。第2方向は鉛直方向と称されてよい。第3方向は奥行方向と称されてよい。しかし、第1方向、第2方向、および第3方向はそれぞれこれらに限られない。図3、4、6および7において、第1方向はu軸方向として表され、第2方向はv軸方向として表され、第3方向はw軸方向として表される。
区画領域の各々には、1つのサブピクセルが対応する。したがって、アクティブエリア71は、水平方向および鉛直方向に沿って格子状に配列された複数のサブピクセルを備える。
各サブピクセルは、例えば、R(Red),G(Green),B(Blue)のいずれかの色に対応する。R,G,Bの3つのサブピクセルは、一組として1ピクセルを構成する。1ピクセルは、1画素と称されうる。水平方向は、例えば、1ピクセルを構成する複数のサブピクセルが並ぶ方向である。鉛直方向は、例えば、同じ色のサブピクセルが並ぶ方向である。
上述のようにアクティブエリア71に配列された複数のサブピクセルは、サブピクセル群Pgを構成する。サブピクセル群Pgは、水平方向に繰り返して配列される。サブピクセル群Pgは、鉛直方向にも繰り返して配列される。サブピクセル群Pgは、所定の行および列のサブピクセルを含む。具体的には、サブピクセル群Pgは、鉛直方向にb行、水平方向に2×n列、連続して配列された(2×n×b)個のサブピクセルP1~P(2×
n×b)を含む。図3に示す例では、n=5、b=1である。アクティブエリア71には、鉛直方向に1行、水平方向に10列、連続して配列された10個のサブピクセルP1~P10を含むサブピクセル群Pgが配置される。図3に示す例では、一部のサブピクセル群Pgに符号を付している。サブピクセル群Pgの水平方向の長さである画像ピッチkは、1つのサブピクセルの水平方向の長さをHpとすると、k=2×n×Hpと表される。
n×b)を含む。図3に示す例では、n=5、b=1である。アクティブエリア71には、鉛直方向に1行、水平方向に10列、連続して配列された10個のサブピクセルP1~P10を含むサブピクセル群Pgが配置される。図3に示す例では、一部のサブピクセル群Pgに符号を付している。サブピクセル群Pgの水平方向の長さである画像ピッチkは、1つのサブピクセルの水平方向の長さをHpとすると、k=2×n×Hpと表される。
サブピクセル群Pgは、後述するコントローラ9が画像を表示するための制御を行う最小単位である。全てのサブピクセル群Pgの同じ識別情報を有するサブピクセルP1~P(2×n×b)は、コントローラ9によって同時に制御される。例えば、コントローラ9は、サブピクセルP1に表示させる画像を左眼画像から右眼画像に切り替える場合、全てのサブピクセル群PgにおけるサブピクセルP1に表示させる画像を左眼画像から右眼画像に同時的に切り替えられる。
パララックスバリア8は、図2に示したように、アクティブエリア71に沿って広がる。パララックスバリア8は、アクティブエリア71から所定距離(ギャップ)g、離れて位置する。パララックスバリア8は、表示パネル7に対して照射器6の反対側に位置してよい。パララックスバリア8は、表示パネル7の照射器6側に位置してよい。
パララックスバリア8は、図4に示すように、サブピクセルから射出される画像光の伝播方向である光線方向を規定するよう構成される。具体的には、図4に示したように、パララックスバリア8は、複数の透光領域81および複数の減光領域82を有する。透光領域81は、パララックスバリア8に入射する光を透過させる部分である。透光領域81は、第1所定値以上の透過率で光を透過させるよう構成されてよい。第1所定値は、後述する第2所定値より高い。減光領域82は、第2所定値以下の透過率で光を透過させてよい。減光領域82は、所定方向に延び、互いに隣接する該減光領域82の間の、所定方向に延びる透光領域81を画定する。所定方向は、例えば、鉛直方向であってよい。透光領域81と減光領域82とは、所定方向と直交する方向に繰り返し交互に配列される。
例えば、減光領域82は、遮光面によって構成されてよい。透光領域81は、遮光面によって画定される開口によって構成されてよい。このような構成において、第1所定値は、例えば100%であってよいし、100%に近い値であってよい。第2所定値は、例えば0%であってよいし、0%に近い値であってよい。第1所定値は、第2所定値との相対的な比率として規定されうる。
パララックスバリア8は、液晶シャッタで構成されてよい。液晶シャッタは、印加する電圧に応じて光の透過率を制御しうる。液晶シャッタは、複数の画素で構成され、各画素における光の透過率を制御してよい。このような構成において、第1所定値に対する第2所定値の比率は低いほどよい。第1所定値に対する第2所定値の比率は、一例では、1/100とすることできる。第1所定値に対する第2所定値の比率は、他の例では、1/1000とすることができる。
表示パネル7のアクティブエリア71から射出された画像光の一部は、透光領域81を透過し、1つ以上の光学素子31を介して光学部材32に到達する。さらに光学部材32に到達した画像光は光学部材32に反射されて利用者の眼に到達する。これにより、利用者の眼は光学部材32の前方にアクティブエリア71に表示された画像の虚像である第1虚像V7を認識する。本願において前方は、利用者からみて光学部材32の方向である。前方は、移動体20の通常移動する方向である。したがって、図5に示したように、利用者は、見かけ上、パララックスバリア8の虚像である第2虚像V8を介して第1虚像V7からの画像光の方向を規定しているかのごとく、画像を認識する。
このように、利用者は、見かけ上、第2虚像V8を介して第1虚像V7を視認するかのごとく画像を認識しており、実際にはパララックスバリア8の虚像である第2虚像V8は存在しない。しかし、以降においては、第2虚像V8は、見かけ上、パララックスバリア8の虚像が形成される位置にあり、第1虚像V7からの画像光を規定するとみなされるものとして説明される。
このように構成されることによって、パララックスバリア8は、アクティブエリア71の一部のサブピクセルから出射した画像光を、透光領域81を透過させ利用者の左眼に伝播させるよう構成される。パララックスバリア8は、他の一部のサブピクセルから出射した画像光を、透光領域81を透過させ利用者の右眼に伝播させるよう構成される。画像光が利用者の左眼および右眼のそれぞれに伝播されることによって、利用者の眼に視認される画像について、図6および図7を参照して詳細に説明する。図6および図7において、左眼画像を表示するサブピクセルには符号「L」が付され、右眼画像を表示するサブピクセルには符号「R」が付されている。
図6に示す左可視領域(第1可視領域)VaLは、上述のように、パララックスバリア8の透光領域81を透過した画像光が利用者の左眼に到達することによって、利用者の左眼が視認する虚像面V71の領域である。左遮光領域VbLは、パララックスバリア8の減光領域82によって画像光が減光されることによって、利用者の左眼が視認しにくい領域である。図6に示す例では、左可視領域VaLには、虚像サブピクセルVP1からVP5が含まれる。左遮光領域VbLには、虚像サブピクセルVP6からVP10が含まれる。虚像サブピクセルVP1からVP10は、それぞれアクティブエリア71に配列されたサブピクセルP1からP10に表示される画像の虚像である。左可視領域VaLおよび左遮光領域VbLは、図5に示す適視距離d、利用者の眼間距離E、第2虚像V8のピッチBpv、虚像ギャップgv、および第1虚像V7の画像ピッチkvとの関係で定まりうる。虚像ギャップgVは、第2虚像V8と第1虚像V7との間の距離gvである。適視距離dは、第2虚像V8と利用者の眼との間の距離である。第1虚像V7の画像ピッチkvは、虚像面V71において画像ピッチkに対応する長さである。
図7に示す右可視領域(第2可視領域)VaRは、パララックスバリア8の透光領域81を透過した他の一部のサブピクセルからの画像光が利用者の右眼に到達することによって、利用者の右眼が視認する虚像面V71の領域である。右遮光領域VbRは、パララックスバリア8の減光領域82によって画像光が減光されることによって、利用者の右眼が視認しにくい領域である。図7に示す例では、右可視領域VaRには、虚像サブピクセルVP6からVP10が含まれる。右遮光領域VbRには、虚像サブピクセルVP1からVP5が含まれる。右可視領域VaRおよび右遮光領域VbRは、左可視領域VaLおよび左遮光領域VbLと同じく、図5に示す適視距離d、利用者の眼間距離E、第2虚像V8のピッチBpv、虚像ギャップgv、および第1虚像V7の画像ピッチkvとの関係で定まりうる。
このように、利用者の左眼が左可視領域VaLの左眼画像の虚像を視認し、右眼が右可視領域VaRに右眼画像の虚像を視認する。上述したように、右眼画像および左眼画像は互いに視差を有する視差画像であるため、利用者は3次元画像の虚像を視認する。
コントローラ9は、ヘッドアップディスプレイシステム100の各構成要素に接続され、各構成要素を制御できるよう構成される。コントローラ9によって制御される構成要素は、撮像装置1および表示パネル7を含む。コントローラ9は、例えばプロセッサとして構成される。コントローラ9は、1以上のプロセッサを含んでよい。プロセッサは、特定のプログラムを読み込ませて特定の機能を実行する汎用のプロセッサ、および特定の処理に特化した専用のプロセッサを含んでよい。専用のプロセッサは、特定用途向けIC(ASIC:Application Specific Integrated Circuit)を含んでよい。プロセッサは、プログラマブルロジックデバイス(PLD:Programmable Logic Device)を含んでよい。PLDは、FPGA(Field-Programmable Gate Array)を含んでよい。コントローラ9は、1つまたは複数のプロセッサが協働するSoC(System-on-a-Chip)、およびSiP(System In aPackage)のいずれかであってよい。コントローラ9は、記憶部を備え、記憶部に各種情報、またはヘッドアップディスプレイシステム100の各構成要素を動作させるためのプログラム等を格納するよう構成されてよい。記憶部は、例えば半導体メモリ等で構成されてよい。記憶部は、コントローラ9のワークメモリとして機能してよい。
メモリ10は、例えばRAM(Random Access Memory)およびROM(Read Only Memory)など、任意の記憶デバイスにより構成される。メモリ10は、入力部5によって受け付けられた情報、およびコントローラ9によって変換された情報を記憶するよう構成される。例えば、メモリ10は、入力部5によって受け付けられた、後述する較正位置情報を記憶するよう構成される。例えば、メモリ10は、コントローラ9によって変換された、後述する変換パラメータを較正用情報として記憶するよう構成されてよい。例えば、メモリ10は、入力部5によって受け付けられた、第1配置情報、第2配置情報、および第3配置情報の少なくとも1つを記憶するよう構成されてよい。
上述したように、利用者が適切に3次元画像の虚像を視認するためには、HUD2は、虚像面V71における左可視領域VaLおよび右可視領域VaRにそれぞれ左眼画像の虚像および右眼画像の虚像を利用者に視認させる必要がある。上述したように、左可視領域VaLおよび右可視領域VaRは適視距離dに基づいて定まりうる。適視距離dは、虚像ギャップgVと、虚像面V71から眼の位置までの距離とに基づいて算出されうる。虚像ギャップgVは、第1虚像V7と第2虚像V8との間の距離であり、表示パネル7、パララックスバリア8、および光学系3の関係により算出されうる。したがって、適視距離dを算出するためには、虚像面V71から眼の位置までの距離を算出することが必要である。そこで、コントローラ9は、撮像装置1によって検出された眼の位置に基づいて、虚像面V71から眼の位置までの距離を算出するよう構成される。
撮像装置1は、利用者の視野と重ならないよう、第1虚像V7への光線から離れて配置される。第1虚像V7への光線から離れて配置された撮像装置1が利用者の顔を検出するために、撮像装置1の光軸OXの方向は虚像面V71の法線方向と必ずしも同一ではない。例えば、図8に示すように、撮像装置1の光軸OXの方向は、虚像面V71の法線方向からチルト方向にずれていてよい。例えば、図9に示すように、撮像装置1の光軸OXの方向は、虚像面V71の法線方向からパン方向にずれていてよい。
そのため、コントローラ9は、撮像装置1を基準とした第1座標系における眼の位置に基いて、虚像面V71を基準とした第2座標系の座標を算出するよう構成される。図8および図9に示したように、第2座標系は、虚像面V71を基準とした直交座標系である。具体的には、第2座標系は、虚像面V71における所定の位置を原点とし、撮像装置1の法線方向をz軸とした直交座標系である。所定の位置は、例えば、虚像面V71の中心であってよい。第2座標系において、虚像面V71内の一方向をx方向とする。x方向は、利用者の右眼と左眼とを通る直線に沿う方向であってよい。虚像面V71内でx方向に直交する方向をy方向とする。
図8に示したように、利用者の眼が位置Aにある場合と、位置Aからz方向に変位した位置Bにある場合とでは、第2座標系における眼の位置のy座標yeyeは変化しない。一方、撮像装置1の光軸OXの方向が第2座標系のz軸からチルト方向にずれている構成において、撮像装置1を基準とした第1座標系における、位置Aにある眼の位置のY座標YAと、位置Bにある眼の位置のY座標YBとは異なる。具体的には、眼の位置が光軸OXとz軸との交点からz方向に離れるほど、第1座標系における眼の位置のY座標の、第2座標系のy座標yeyeからの差異は大きい。
図9に示したように、利用者の眼が位置Cにある場合と、位置Cからz方向に変位した位置Dにある場合とでは、第2座標系における眼の位置のx座標xeyeは変化しない。一方、撮像装置1の光軸OXの方向が第2座標系のz軸からパン方向にずれている構成において、第1座標系における、位置Cにある眼の位置のX座標XCと、位置Dにある眼の位置のX座標XDとは異なる。具体的には、眼の位置が光軸OXとz軸との交点からz方向に離れるほど、第1座標系における眼の位置のX座標の、第2座標系のx座標xeyeからの差異は大きい。
この差異を補正するために、コントローラ9は、初期設定モードにおいて、撮像装置1によって検出された第1較正点CP1および第2較正点CP2を用いて、第1位置情報を第2位置情報に変換するための変換パラメータを決定するよう構成される。第1位置情報は、撮像装置1によって検出された眼の位置を第1座標系で示した情報である。第2位置情報は、眼の位置を第2座標系で示した情報である。コントローラ9は、較正モードにおいて、初期設定モードで決定された変換パラメータを、表示パネル7、撮像装置1、および光学系3の少なくとも1つの配置(位置および姿勢の少なくとも1つ)に基づいて変更することによって決定するよう構成されてよい。コントローラ9は、通常モードにおいて、初期設定モードまたは較正モードで決定された変換パラメータを用いて、撮像装置1によって検出された眼の位置を示す第1位置情報を第2位置情報に変換するよう構成される。
以降において、初期設定モード、通常モード、および較正モードのそれぞれで撮像装置1および表示装置4が実行する処理について詳細に説明する。
<<初期設定モード>>
<y軸方向についての変換パラメータの決定>
図10に示したように、撮像装置1は、第1座標系における第1較正点CP1および第2較正点CP2それぞれの位置を検出するよう構成される。第1較正点CP1は、第2座標系におけるz軸上にある任意の点である。図10に示す例では、第1較正点CP1のY座標Y1は0である。第2較正点CP2は、第2座標系におけるz軸上にある、第1較正点CP1とは異なる点である。例えば、撮像装置1は、較正作業者によって第1較正点CP1に配置された較正用オブジェクトを検出することによって第1較正点CP1の第1座標系における位置を示すZ座標およびY座標を検出できるよう構成される。例えば、撮像装置1は、較正作業者によって第2較正点CP2に配置された較正用オブジェクトを検出することによって、第2較正点CP2の、第1座標系における位置を示すZ座標およびY座標を検出できるよう構成される。撮像装置1は、検出された第1較正点CP1および第2較正点CP2それぞれの、第1座標系における位置を示す較正位置情報を表示装置4に出力するよう構成される。
<y軸方向についての変換パラメータの決定>
図10に示したように、撮像装置1は、第1座標系における第1較正点CP1および第2較正点CP2それぞれの位置を検出するよう構成される。第1較正点CP1は、第2座標系におけるz軸上にある任意の点である。図10に示す例では、第1較正点CP1のY座標Y1は0である。第2較正点CP2は、第2座標系におけるz軸上にある、第1較正点CP1とは異なる点である。例えば、撮像装置1は、較正作業者によって第1較正点CP1に配置された較正用オブジェクトを検出することによって第1較正点CP1の第1座標系における位置を示すZ座標およびY座標を検出できるよう構成される。例えば、撮像装置1は、較正作業者によって第2較正点CP2に配置された較正用オブジェクトを検出することによって、第2較正点CP2の、第1座標系における位置を示すZ座標およびY座標を検出できるよう構成される。撮像装置1は、検出された第1較正点CP1および第2較正点CP2それぞれの、第1座標系における位置を示す較正位置情報を表示装置4に出力するよう構成される。
入力部5は、撮像装置1から出力された較正位置情報を受け付けるよう構成される。
コントローラ9は、第1座標系における第2座標系のz軸を示す式を算出するよう構成される。具体的には、コントローラ9は、入力部5によって受け付けた第1較正点CP1および第2較正点CP2を通る第1座標系での直線の式を算出するよう構成される。例えば、第1較正点CP1の座標を(Z1、Y1)、第2較正点CP2の座標を(Z2、Y2)とすると、第2座標系のz軸は、次の式(1)で表される。撮像装置1によって検出される、第1座標系におけるY座標は、第1座標系のZ軸方向に垂直な方向におけるZ軸からの長さである。第1座標系のZ軸と第2座標系のz軸とのなす角が小さい場合、第1座標系における第1較正点CP1および第2較正点CP2のそれぞれY座標は、y軸方向におけるZ軸からの距離Y1およびY2に近似されうる。
第1座標系における眼の位置のy座標yeyeは、撮像装置1によって検出された眼の位置のY座標YdetectおよびZ座標Zdetectを用いて次の式(2)で示される。
yeye=-Dy+Ydetect (2)
yeye=-Dy+Ydetect (2)
上述したように、眼の位置が光軸OXとz軸との交点からz方向に離れるほど、眼の位置の第1座標系におけるY座標Ydetectにおける、第2座標系のy座標yeyeからの差異Dyは大きくなる。差異Dyは、第1座標系のZ軸を示す直線の式(1)を用いて次の式(3)で表される。
したがって、コントローラ9は、第1座標系における眼の位置のy座標yeyeが、式(2)および(3)に基づく次の式(4)で表されると決定するよう構成される。すなわち、コントローラ9は、Y座標YdetectおよびZ座標Zdetectで示される第1位置情報を、y座標yeyeで示される第2位置情報に変換するための変換パラメータを決定するよう構成される。なお、図10に示すように、第1較正点CP1として第1座標系のZ軸上に位置する点が用いられる場合、(4)式においてオフセットとなるY1を0にすることができる。
<x軸方向についての変換パラメータの決定>
図11に示したように、撮像装置1は、第2座標系における第1較正点CP1および第2較正点CP2それぞれの座標を検出する。例えば、撮像装置1は、較正作業者によって第1較正点CP1に配置された較正用オブジェクトを検出することによって第1較正点CP1のZ座標Z1およびX座標X1を検出できるよう構成される。図11に示す例では、第1較正点CP1のX座標X1は0である。例えば、撮像装置1は、較正作業者によって第2較正点CP2に配置された較正用オブジェクトを検出することによって第2較正点CP2のZ座標Z2およびX座標X2を検出できるよう構成される。撮像装置1は、検出された第1較正点CP1および第2較正点CP2それぞれの座標を示す較正位置情報を表示装置4に出力するよう構成される。
図11に示したように、撮像装置1は、第2座標系における第1較正点CP1および第2較正点CP2それぞれの座標を検出する。例えば、撮像装置1は、較正作業者によって第1較正点CP1に配置された較正用オブジェクトを検出することによって第1較正点CP1のZ座標Z1およびX座標X1を検出できるよう構成される。図11に示す例では、第1較正点CP1のX座標X1は0である。例えば、撮像装置1は、較正作業者によって第2較正点CP2に配置された較正用オブジェクトを検出することによって第2較正点CP2のZ座標Z2およびX座標X2を検出できるよう構成される。撮像装置1は、検出された第1較正点CP1および第2較正点CP2それぞれの座標を示す較正位置情報を表示装置4に出力するよう構成される。
入力部5は、撮像装置1から出力された較正位置情報を受け付けるよう構成される。
コントローラ9は、第2座標系における第1座標系のz軸を示す式を算出するよう構成される。具体的には、コントローラ9は、入力部5によって受け付けた較正位置情報が示す第1較正点CP1および第2較正点CP2の座標に基づいて、第1座標系における第1較正点CP1および第2較正点CP2を通る直線の式を算出するよう構成される。例えば、第1較正点CP1の座標を(Z1、X1)、第2較正点CP2の座標を(Z2、X2)とすると、次の式(5)で表される。撮像装置1によって検出される、第1座標系におけるX座標は、第1座標系のZ軸方向に垂直な方向におけるZ軸からの長さである。第1座標系のZ軸と第2座標系のz軸とのなす角が小さい場合、第1座標系における第1較正点CP1および第2較正点CP2のそれぞれX座標は、x軸方向におけるZ軸からの距離X1およびX2に近似されうる。
第1座標系における眼の位置のx座標xeyeは、撮像装置1によって検出された第2座標系のX座標XdetectおよびZ座標Zdetectを用いて次の式(6)で示される。
xeye=-Dx+Xdetect (6)
上述したように、眼の位置が光軸OXとz軸との交点からz方向に離れるほど、眼の位置の第1座標系におけるX座標Xdetectの、第2座標系のx座標xeyeからの差異Dxは大きくなる。差異Dxは、第1座標系のz軸を示す直線の式(5)を用いて次の式(7)で表される。
したがって、コントローラ9は、第1座標系における眼の位置のy座標yeyeが、式(6)および(7)に基づく次の式(8)で表されることを決定する。すなわち、コントローラ9は、X座標XdetectおよびZ座標Zdetectで示される第1位置情報を、x座標xeye第2位置情報に変換するための変換パラメータを決定する。なお、第1較正点CP1として第1座標系のZ軸上に位置する点が用いられる場合、y座標yeyeの算出にあたってオフセットとなるX1を0にすることができる。
<<較正モード>>
上述したように、撮像装置1は、移動体20のルームミラーに取り付けられることがある。このような構成において、ルームミラーの位置および姿勢の少なくとも一方が変化すると、ルームミラーに取り付けられた撮像装置1の位置および姿勢の少なくとも一方が変化する。撮像装置1の位置および姿勢の少なくとも一方が変化することにより、第1座標系が変化する。この結果、第1座標系と第2座標系との相対的な関係が変化する。
上述したように、撮像装置1は、移動体20のルームミラーに取り付けられることがある。このような構成において、ルームミラーの位置および姿勢の少なくとも一方が変化すると、ルームミラーに取り付けられた撮像装置1の位置および姿勢の少なくとも一方が変化する。撮像装置1の位置および姿勢の少なくとも一方が変化することにより、第1座標系が変化する。この結果、第1座標系と第2座標系との相対的な関係が変化する。
そこで、入力部5は、初期設定又は較正の際に、撮像装置1の位置および姿勢の少なくとも一方を制御する制御装置から送信された第1配置情報を受け付けるよう構成されてよい。第1配置情報は、撮像装置1の位置および姿勢の少なくとも一方を示す情報である。メモリ10は、入力部5によって受け付けられた第1配置情報を記憶する。入力部5は、撮像装置1の位置および姿勢の少なくとも一方が変化したとき、撮像装置1の位置および姿勢の少なくとも一方を制御する制御装置から送信された、撮像装置1の変化後の位置および姿勢の少なくとも一方を示す第1配置情報を受け付けるよう構成されてよい。
コントローラ9は、第1配置情報の変化に基づいて変換パラメータを決定するよう構成されてよい。具体的には、コントローラ9は、入力部5によって受け付けられた第1配置情報の、前回に入力部5によって受け付けられてメモリ10に記憶されている第1配置情報からの変化に基づいて変換パラメータを決定するよう構成されてよい。例えば、コントローラ9は、予めメモリ10に予め記憶されている、第1配置情報の変化と変換パラメータの補正量との関係を用いて、変換パラメータを決定するよう構成されてよい。コントローラ9は、第1配置情報の変化に基づいて、所定の変換ルールを用いて変換パラメータを決定するよう構成されてよい。
コントローラ9は、新たに受け付けた第1配置情報に基づいて変換パラメータを決定するよう構成されてよい。具体的には、コントローラ9は、入力部5によって受け付けられた第1配置情報がメモリ10に記憶されている第1配置情報と異なる場合、新たに受け付けた第1配置情報に基づいて変換パラメータを決定するよう構成されてよい。
撮像装置1が移動体20におけるクラスター、センターパネル、又はステアリングホイールの支持部に取り付けられる構成においても、コントローラ9は、同じく変換パラメータを決定するよう構成されてよい。
上述したように、画像光を射出する表示パネル7、および該画像光を反射する光学系3は利用者の眼に画像光が到達するように配置される。利用者の眼の位置は該利用者の座高に応じて変化することがある。この場合、適切に画像光を利用者の眼に到達させるために、光学系3の位置および姿勢の少なくとも一方が変化されることがある。光学系3の位置および姿勢の少なくとも一方が変化することにより虚像面V71の位置および姿勢の少なくとも一方が変化し、第1座標系が変化する。この結果、第1座標系と第2座標系との相対的な関係が変化する。
そこで、入力部5は、初期設定又は較正の際に、光学系3の位置および姿勢の少なくとも一方を変化させる制御装置から送信された第2配置情報を受け付けるよう構成されてよい。第2配置情報は、光学系3の位置および姿勢の少なくとも一方を示す情報である。光学系3の位置および姿勢とは、光学系3に含まれる光学素子31の位置及び姿勢を意味する。メモリ10は、入力部5によって受け付けられた第2配置情報を記憶するよう構成される。入力部5は、光学系3の位置および姿勢の少なくとも一方が変化したとき、光学系3の位置および姿勢の少なくとも一方を制御する制御装置から送信された、光学系3の変化後の位置および姿勢の少なくとも一方を示す第2配置情報を受け付けるよう構成されてよい。
コントローラ9は、第2配置情報の変化に基づいて変換パラメータを決定するよう構成されてよい。具体的には、コントローラ9は、入力部5によって受け付けられた第2配置情報の、前回に入力部5によって受け付けられてメモリ10に記憶されている第2配置情報からの変化に基づいて変換パラメータを決定するよう構成されてよい。例えば、コントローラ9は、予めメモリに予め記憶されている、第2配置情報の変化と変換パラメータの補正量との関係を用いて、変換パラメータを決定するよう構成されてよい。コントローラ9は、第2配置情報の変化に基づいて、所定の変換ルールを用いて変換パラメータを決定するよう構成されてよい。
コントローラ9は、新たに受け付けた第2配置情報に基づいて変換パラメータを決定するよう構成されてよい。具体的には、コントローラ9は、入力部5によって受け付けられた第2配置情報がメモリ10に記憶されている第2配置情報と異なる場合、新たに受け付けた第2配置情報に基づいて変換パラメータを決定するよう構成されてよい。
上述したように、利用者の眼の位置が該利用者の座高に応じて変化した場合、画像光を利用者の眼に到達させるために、表示パネル7の位置および姿勢の少なくとも一方が変化されることがある。表示パネル7の位置および姿勢の少なくとも一方が変化することにより虚像面V71の位置および姿勢が変化し、第2座標系が変化する。この結果、第1座標系と第2座標系との相対的な関係は変化する。
そこで、入力部5は、初期設定又は較正の際に、表示パネル7の位置および姿勢の少なくとも一方を制御する制御装置から送信された第3配置情報を受け付けるよう構成されてよい。第3配置情報は、表示パネル7の位置および姿勢の少なくとも一方を示す情報である。メモリ10は、入力部5によって受け付けられた第3配置情報を記憶するよう構成される。入力部5は、表示パネル7の位置および姿勢の少なくとも一方が変化したとき、表示パネル7の位置および姿勢の少なくとも一方を制御する制御装置から送信された、表示パネル7の変化後の位置および姿勢の少なくとも一方を示す第3配置情報を受け付けるよう構成されてよい。
コントローラ9は、第3配置情報の変化に基づいて変換パラメータを決定するよう構成されてよい。具体的には、コントローラ9は、入力部5によって受け付けられた第3配置情報の、前回に入力部5によって受け付けられてメモリ10に記憶されている第3配置情報からの変化に基づいて変換パラメータを決定するよう構成されてよい。例えば、コントローラ9は、予めメモリに予め記憶されている、第3配置情報の変化と変換パラメータの補正量との関係を用いて、変換パラメータを決定するよう構成されてよい。コントローラ9は、第3配置情報の変化に基づいて、所定の変換ルールを用いて変換パラメータを決定するよう構成されてよい。
コントローラ9は、新たに受け付けた第3配置情報に基づいて変換パラメータを決定するよう構成されてよい。具体的には、コントローラ9は、入力部5によって受け付けられた第3配置情報がメモリ10に記憶されている第3配置情報と異なる場合、新たに受け付けた第3配置情報に基づいて変換パラメータを決定するよう構成されてよい。
<<通常モード>>
<y軸方向の眼の位置の算出>
通常モードにおいて、撮像装置1は、公知の方法により利用者の眼の位置を検出するよう構成される。具体的には、撮像装置1は、第1座標系における利用者の眼の位置を示すY座標YdetectおよびZ座標Zdetectを検出するよう構成される。撮像装置1は、Y座標とYdetectおよびZ座標Zdetectを含む第1位置情報を表示装置4に出力するよう構成される。表示装置4の入力部5が第1位置情報を受け付けると、コントローラ9は、第1位置情報に含まれるY座標YdetectおよびZ座標Zdetectに基づいて、式(4)を用いてy座標yeyeを算出することによって第1位置情報を第2位置情報に変換するよう構成される。
<y軸方向の眼の位置の算出>
通常モードにおいて、撮像装置1は、公知の方法により利用者の眼の位置を検出するよう構成される。具体的には、撮像装置1は、第1座標系における利用者の眼の位置を示すY座標YdetectおよびZ座標Zdetectを検出するよう構成される。撮像装置1は、Y座標とYdetectおよびZ座標Zdetectを含む第1位置情報を表示装置4に出力するよう構成される。表示装置4の入力部5が第1位置情報を受け付けると、コントローラ9は、第1位置情報に含まれるY座標YdetectおよびZ座標Zdetectに基づいて、式(4)を用いてy座標yeyeを算出することによって第1位置情報を第2位置情報に変換するよう構成される。
<x軸方向の眼の位置の算出>
通常モードにおいて、撮像装置1は、公知の方法により利用者の眼の位置を検出するよう構成される。具体的には、撮像装置1は、第1座標系において眼の位置を示すX座標XdetectおよびZ座標Zdetectを検出するよう構成される。撮像装置1は、X座標とXdetectおよびZ座標Zdetectを含む第1位置情報を表示装置4に出力するよう構成される。表示装置4の入力部5が第1位置情報を受け付けると、コントローラ9は、第1位置情報に含まれるX座標XdetectおよびZ座標Zdetectに基づいて、式(8)を用いてx座標xeyeを算出することによって第1位置情報を第2位置情報に変換するよう構成される。
通常モードにおいて、撮像装置1は、公知の方法により利用者の眼の位置を検出するよう構成される。具体的には、撮像装置1は、第1座標系において眼の位置を示すX座標XdetectおよびZ座標Zdetectを検出するよう構成される。撮像装置1は、X座標とXdetectおよびZ座標Zdetectを含む第1位置情報を表示装置4に出力するよう構成される。表示装置4の入力部5が第1位置情報を受け付けると、コントローラ9は、第1位置情報に含まれるX座標XdetectおよびZ座標Zdetectに基づいて、式(8)を用いてx座標xeyeを算出することによって第1位置情報を第2位置情報に変換するよう構成される。
以上説明したように、本実施形態では、HUD2は、較正位置情報を用いて第1位置情報を第2位置情報に変換するよう構成される。このため、表示装置4は、虚像面V71を基準とした眼の位置に基づいて表示パネル7に表示させる画像を制御することができる。したがって、HUD2は、利用者に適切に虚像を視認させることができる。
本実施形態では、HUD2は、撮像装置1の位置および姿勢の少なくとも1つの変化に基づいて変換パラメータを決定するよう構成される。このため、撮像装置1の位置および姿勢の少なくとも1つが変化することによって第1座標系と第2座標系との関係が変化しても、適切に変換パラメータを決定することができる。このため、HUD2は、虚像面V71を基準とした眼の位置に基づいて表示パネル7に表示させる画像を制御することができる。したがって、HUD2は、利用者に適切に虚像を視認させることができる。
本実施形態では、HUD2は、光学系3の位置および姿勢の少なくとも1つの変化に基づいて変換パラメータを決定するよう構成される。このため、光学系3の位置および姿勢の少なくとも1つが変化することによって第1座標系と第2座標系との関係が変化しても、適切に変換パラメータを決定することができる。このため、HUD2は、虚像面V71を基準とした眼の位置を適切に取得し、該眼の位置に基づいて表示パネル7に表示させる画像を制御することができる。したがって、HUD2は、利用者に適切に虚像を視認させることができる。
本実施形態では、HUD2は、表示パネル7の位置および姿勢の少なくとも1つの変化に基づいて変換パラメータを決定するよう構成される。このため、表示パネル7の位置および姿勢の少なくとも1つが変化することによって虚像面V71の位置および姿勢の少なくとも1つが変化して、第1座標系と第2座標系との関係が変化しても、適切に変換パラメータを決定することができる。このため、HUD2は、虚像面V71を基準とした眼の位置を適切に取得し、該眼の位置に基づいて表示パネル7に表示させる画像を制御することができる。したがって、HUD2は、利用者に適切に虚像を視認させることができる。
上述の実施形態では、表示装置4は、サブピクセル群Pgが、水平方向に繰り返して配列され、鉛直方向にも繰り返して配列された表示パネル7を備える。表示装置4は、例えば、図12に示すような、サブピクセル群Pgが、水平方向に繰り返して配列され、鉛直方向においては、水平方向に1サブピクセル分ずれた位置に隣接して繰り返して配列された表示パネル70を備えてもよい。
表示装置4が表示パネル70を備える構成において、表示装置4は、パララックスバリア8の代わりに、パララックスバリア80を備える。図13に示すように、パララックスバリア80は、複数のバリア領域群sgから構成される。バリア領域群sgは、水平方向に繰り返して配列されている。バリア領域群sgは、鉛直方向においては、水平方向に1バリア領域分ずれた位置に隣接して繰り返して配列されるよう構成されている。バリア領域群sgは、サブピクセル群Pgのサブピクセルの配列に対応して、鉛直方向にb個、水平方向に2×n個、連続して配列された(2×n×b)個のバリア領域s1~s(2×n×b)を含む。図13では、n=5、b=1であり、一部のバリア領域群sgに符号を付している。バリア領域群sgは、鉛直方向にb’個(b’≠b)、水平方向に2×n’個(n’≠n)、連続して配列された(2×n’×b’)個のバリア領域s1~s(2×n’×b’)を含むよう構成されてもよい。
バリア領域群sgに含まれる複数のバリア領域sの一部は透光領域801を構成し、残りの一部は減光領域802を構成する。透光領域801及び減光領域802は、表示パネル70の複数のサブピクセル群Pgそれぞれにおいて対応する位置にあるサブピクセルからの画像光が同時に透光または減光されるように構成される。
このように構成されることによって、パララックスバリア80は、サブピクセルから出射される画像光の伝播方向である光線方向を規定するよう構成される。アクティブエリアAの一部のサブピクセルから出射した画像光は、透光領域801を透過して利用者の左眼の瞳に伝搬する。アクティブエリアAの他の一部のサブピクセルから出射した画像光は、透光領域801を透過して利用者の右眼の瞳に伝搬する。
上述の実施形態は代表的な例として説明したが、本発明の趣旨および範囲内で、多くの変更および置換ができることは当業者に明らかである。したがって、本発明は、上述の実施形態によって制限するものと解するべきではなく、特許請求の範囲から逸脱することなく、種々の変形および変更が可能である。例えば、実施形態および実施例に記載の複数の構成ブロックを1つに組合せたり、あるいは1つの構成ブロックを分割したりすることが可能である。
1 撮像装置
2 ヘッドアップディスプレイ
3 光学系
4 表示装置
5 入力部
6 照射器
7、70 表示パネル
8、80 パララックスバリア
9 コントローラ
10 移動体
31 光学素子
32 光学部材
71 アクティブエリア
V7 第1虚像
V8 第2虚像
V71 虚像面
VaL 左可視領域
VaR 右可視領域
VbL 左遮光領域
VbR 右遮光領域
81、801 透光領域
82、802 減光領域
100 ヘッドアップディスプレイシステム
s、s1~s10 バリア領域
sg バリア領域群
2 ヘッドアップディスプレイ
3 光学系
4 表示装置
5 入力部
6 照射器
7、70 表示パネル
8、80 パララックスバリア
9 コントローラ
10 移動体
31 光学素子
32 光学部材
71 アクティブエリア
V7 第1虚像
V8 第2虚像
V71 虚像面
VaL 左可視領域
VaR 右可視領域
VbL 左遮光領域
VbR 右遮光領域
81、801 透光領域
82、802 減光領域
100 ヘッドアップディスプレイシステム
s、s1~s10 バリア領域
sg バリア領域群
Claims (7)
- 画像を表示するよう構成される表示パネルと、撮像装置を基準とした利用者の眼の位置を示す第1位置情報を受け付けるよう構成される入力部と、較正用情報を記憶するよう構成されるメモリと、コントローラとを含む表示装置と、
前記表示パネルに表示された画像に対応して射出された画像光を利用者の眼に向けて反射させることによって前記利用者に前記画像の虚像である虚像面を視認させるよう構成される光学系と、を備え、
前記コントローラは、前記較正用情報を用いて、前記第1位置情報を、前記虚像面を基準とした前記眼の位置を示す第2位置情報に変換するよう構成されるヘッドアップディスプレイ。 - 前記コントローラは、
前記較正用情報として前記第1位置情報を前記第2位置情報に変換するための変換パラメータを算出して前記メモリに記憶するよう構成され、
前記変換パラメータを用いて、前記第1位置情報を前記第2位置情報に変換するよう構成される請求項1に記載のヘッドアップディスプレイ。 - 前記メモリは、第1配置情報を記憶し、該第1配置情報は前記撮像装置の位置および姿勢の少なくとも1つを示すよう構成され、
前記入力部は、前記撮像装置の位置および姿勢の少なくとも1つが変化したとき、前記撮像装置の変化後の位置および姿勢の少なくとも1つを示す変化後の前記第1配置情報を受け付けるよう構成され、
前記コントローラは、前記入力部によって受け付けられた前記変化後の前記第1配置情報の、前記メモリに記憶されている前記第1配置情報からの変化に基づいて前記変換パラメータを決定するよう構成される請求項2に記載のヘッドアップディスプレイ。 - 前記メモリは、第2配置情報を記憶し、該第2配置情報は前記光学系の位置および姿勢の少なくとも1つを示すよう構成され、
前記入力部は、前記光学系の位置および姿勢の少なくとも1つが変化したとき、前記光学系の変化後の位置および姿勢の少なくとも1つを示す変化後の前記第2配置情報を受け付けるよう構成される、
前記コントローラは、前記入力部によって受け付けられた前記変化後の前記第2配置情報の、前記メモリに記憶されている前記第2配置情報からの変化に基づいて前記変換パラメータを決定するよう構成される請求項2又は3に記載のヘッドアップディスプレイ。 - 前記メモリは、第3配置情報を記憶し、該第3配置情報は、前記表示パネルの位置および姿勢の少なくとも1つを示すよう構成され、
前記入力部は、前記表示パネルの位置および姿勢の少なくとも1つが変化したとき、前記表示パネルの変化後の位置および姿勢の少なくとも1つを示す変化後の前記第3配置情報を受け付けるよう構成され、
前記コントローラは、前記入力部によって受け付けられた前記変化後の前記第3配置情報の、前記メモリに記憶されている前記第3配置情報からの変化に基づいて前記変換パラメータを決定するよう構成される請求項2から4のいずれか一項に記載のヘッドアップディスプレイ。 - 較正用オブジェクトの位置、および利用者の眼の位置を検出するよう構成される撮像装置と、
画像を表示するよう構成される表示パネルと、前記撮像装置を基準とした利用者の眼の位置を示す第1位置情報を受け付けるよう構成される入力部と、較正用情報を記憶するよう構成されるメモリと、コントローラとを含む表示装置と、前記表示パネルに表示された画像に対応して射出された画像光を利用者の眼に向けて反射させることによって前記利用者に前記画像の虚像である虚像面を視認させるよう構成される光学系と、を含み、前記コントローラは、前記較正用情報を用いて、前記第1位置情報を、前記虚像面を基準とした前記眼の位置を示す第2位置情報に変換するよう構成されるヘッドアップディスプレイと、
を備えるヘッドアップディスプレイシステム。 - 画像を表示するよう構成される表示パネルと、撮像装置を基準とした利用者の眼の位置を示す第1位置情報を受け付けるよう構成される入力部と、較正用情報を記憶するよう構成されるメモリと、コントローラとを含むよう構成される表示装置と、前記表示パネルに表示された画像に対応して射出された画像光を利用者の眼に向けて反射させることによって前記利用者に前記画像の虚像である虚像面を視認させるよう構成される光学系と、を含み、前記コントローラは、前記較正用情報を用いて、前記第1位置情報を、前記虚像面を基準とした前記眼の位置を示す第2位置情報に変換するよう構成されるヘッドアップディスプレイ
を備える移動体。
Priority Applications (4)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2019568115A JP6668564B1 (ja) | 2018-08-29 | 2019-08-26 | ヘッドアップディスプレイ、ヘッドアップディスプレイシステム、および移動体 |
US17/269,584 US11782270B2 (en) | 2018-08-29 | 2019-08-26 | Head-up display, head-up display system, and mobile body |
EP19855883.5A EP3845932A4 (en) | 2018-08-29 | 2019-08-26 | HEAD-UP DISPLAY, HEAD-UP DISPLAY SYSTEM AND MOBILE BODY |
CN201980054317.4A CN112585025A (zh) | 2018-08-29 | 2019-08-26 | 头戴式显示器、头戴式显示器***以及移动体 |
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2018160685 | 2018-08-29 | ||
JP2018-160685 | 2018-08-29 |
Publications (1)
Publication Number | Publication Date |
---|---|
WO2020045350A1 true WO2020045350A1 (ja) | 2020-03-05 |
Family
ID=69645266
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
PCT/JP2019/033324 WO2020045350A1 (ja) | 2018-08-29 | 2019-08-26 | ヘッドアップディスプレイ、ヘッドアップディスプレイシステム、および移動体 |
Country Status (5)
Country | Link |
---|---|
US (1) | US11782270B2 (ja) |
EP (1) | EP3845932A4 (ja) |
JP (1) | JP6668564B1 (ja) |
CN (1) | CN112585025A (ja) |
WO (1) | WO2020045350A1 (ja) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2021173980A (ja) * | 2020-04-30 | 2021-11-01 | 京セラ株式会社 | 画像表示システム |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2002005656A (ja) | 2000-06-27 | 2002-01-09 | Honda Motor Co Ltd | 位置検出装置 |
JP2009269551A (ja) * | 2008-05-09 | 2009-11-19 | Calsonic Kansei Corp | 車両用表示装置 |
JP2014199385A (ja) * | 2013-03-15 | 2014-10-23 | 日本精機株式会社 | 表示装置及びその表示方法 |
WO2018105534A1 (ja) * | 2016-12-07 | 2018-06-14 | 京セラ株式会社 | 光源装置、ディスプレイ装置、移動体、3次元投影装置、3次元投影システム、画像投影装置、および画像表示装置 |
JP2018160685A (ja) | 2018-06-15 | 2018-10-11 | 株式会社東芝 | センサ |
Family Cites Families (12)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN100429559C (zh) * | 2003-08-22 | 2008-10-29 | 株式会社电装 | 虚像显示设备 |
JP2010256878A (ja) * | 2009-03-30 | 2010-11-11 | Equos Research Co Ltd | 情報表示装置 |
JP2016503741A (ja) * | 2012-12-21 | 2016-02-08 | ハーマン ベッカー オートモーティブ システムズ ゲーエムベーハー | 自動車用の入力装置 |
KR102071693B1 (ko) * | 2014-02-07 | 2020-01-30 | 엘지전자 주식회사 | 헤드 업 디스플레이 장치 |
JP2017521970A (ja) * | 2014-04-30 | 2017-08-03 | ビステオン グローバル テクノロジーズ インコーポレイテッド | 車両内の立体ディスプレイの位置合わせを較正するシステム及び方法 |
US10067561B2 (en) * | 2014-09-22 | 2018-09-04 | Facebook, Inc. | Display visibility based on eye convergence |
WO2016162928A1 (ja) * | 2015-04-06 | 2016-10-13 | 日立マクセル株式会社 | 投影光学系およびそれを用いたヘッドアップディスプレイ装置 |
US11119315B2 (en) * | 2015-10-15 | 2021-09-14 | Maxell, Ltd. | Information display apparatus |
DE102016210288A1 (de) * | 2016-06-10 | 2017-12-14 | Volkswagen Aktiengesellschaft | Bedienvorrichtung mit Eyetrackereinheit und Verfahren zum Kalibrieren einer Eyetrackereinheit einer Bedienvorrichtung |
US11221481B2 (en) | 2016-12-07 | 2022-01-11 | Kyocera Corporation | Image projection apparatus, image display apparatus, and vehicle |
US11215820B2 (en) * | 2017-01-27 | 2022-01-04 | Osaka City University | Three-dimensional display apparatus, three-dimensional display system, head up display, head up display system, three-dimensional display apparatus design method, and mobile object |
US10820795B1 (en) * | 2017-09-28 | 2020-11-03 | Apple Inc. | Method and device for improved interpupillary distance measurement |
-
2019
- 2019-08-26 WO PCT/JP2019/033324 patent/WO2020045350A1/ja unknown
- 2019-08-26 JP JP2019568115A patent/JP6668564B1/ja active Active
- 2019-08-26 CN CN201980054317.4A patent/CN112585025A/zh active Pending
- 2019-08-26 EP EP19855883.5A patent/EP3845932A4/en not_active Withdrawn
- 2019-08-26 US US17/269,584 patent/US11782270B2/en active Active
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2002005656A (ja) | 2000-06-27 | 2002-01-09 | Honda Motor Co Ltd | 位置検出装置 |
JP2009269551A (ja) * | 2008-05-09 | 2009-11-19 | Calsonic Kansei Corp | 車両用表示装置 |
JP2014199385A (ja) * | 2013-03-15 | 2014-10-23 | 日本精機株式会社 | 表示装置及びその表示方法 |
WO2018105534A1 (ja) * | 2016-12-07 | 2018-06-14 | 京セラ株式会社 | 光源装置、ディスプレイ装置、移動体、3次元投影装置、3次元投影システム、画像投影装置、および画像表示装置 |
JP2018160685A (ja) | 2018-06-15 | 2018-10-11 | 株式会社東芝 | センサ |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2021173980A (ja) * | 2020-04-30 | 2021-11-01 | 京セラ株式会社 | 画像表示システム |
WO2021220833A1 (ja) * | 2020-04-30 | 2021-11-04 | 京セラ株式会社 | 画像表示システム |
JP7337023B2 (ja) | 2020-04-30 | 2023-09-01 | 京セラ株式会社 | 画像表示システム |
Also Published As
Publication number | Publication date |
---|---|
US11782270B2 (en) | 2023-10-10 |
EP3845932A1 (en) | 2021-07-07 |
EP3845932A4 (en) | 2022-04-27 |
JP6668564B1 (ja) | 2020-03-18 |
US20210311306A1 (en) | 2021-10-07 |
CN112585025A (zh) | 2021-03-30 |
JPWO2020045350A1 (ja) | 2020-09-10 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6924637B2 (ja) | 3次元表示装置、3次元表示システム、移動体、および3次元表示方法 | |
WO2019160160A1 (ja) | ヘッドアップディスプレイ、ヘッドアップディスプレイシステム、および移動体 | |
WO2020095801A1 (ja) | 3次元表示装置、ヘッドアップディスプレイシステム、移動体、およびプログラム | |
EP3882064A1 (en) | Three-dimensional display device, three-dimensional display system, head-up display, and mobile object | |
JP6668564B1 (ja) | ヘッドアップディスプレイ、ヘッドアップディスプレイシステム、および移動体 | |
WO2019225400A1 (ja) | 画像表示装置、画像表示システム、ヘッドアップディスプレイおよび移動体 | |
WO2020130048A1 (ja) | 3次元表示装置、ヘッドアップディスプレイシステム、及び移動体 | |
WO2020004275A1 (ja) | 3次元表示装置、制御コントローラ、3次元表示方法、3次元表示システム、および移動体 | |
WO2020022288A1 (ja) | 表示装置および移動体 | |
EP3988990B1 (en) | Head-up display, head-up display system, mobile object, and design method for head-up display | |
JP7346587B2 (ja) | ヘッドアップディスプレイ、ヘッドアップディスプレイシステム及び移動体 | |
WO2022019154A1 (ja) | 3次元表示装置 | |
JP2020102772A (ja) | 3次元表示装置、ヘッドアップディスプレイシステム、及び移動体 | |
JP2019148638A (ja) | 画像表示装置、ヘッドアップディスプレイシステム、および移動体 | |
WO2021065427A1 (ja) | カメラ、ヘッドアップディスプレイシステム、及び移動体 | |
JP7336782B2 (ja) | 3次元表示装置、3次元表示システム、ヘッドアップディスプレイ、及び移動体 | |
WO2023120603A1 (ja) | 撮像装置および画像処理方法 | |
WO2022149599A1 (ja) | 3次元表示装置 | |
WO2020256154A1 (ja) | 3次元表示装置、3次元表示システム、および移動体 | |
WO2023228887A1 (ja) | 3次元表示装置、ヘッドアップディスプレイシステム、及び移動体 | |
WO2022019215A1 (ja) | 3次元表示装置、ヘッドアップディスプレイおよび移動体 | |
JP2021056255A (ja) | パララックスバリア、3次元表示装置、3次元表示システム、ヘッドアップディスプレイ、および移動体 | |
JP2021173933A (ja) | 眼間距離測定方法および較正方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
ENP | Entry into the national phase |
Ref document number: 2019568115 Country of ref document: JP Kind code of ref document: A |
|
121 | Ep: the epo has been informed by wipo that ep was designated in this application |
Ref document number: 19855883 Country of ref document: EP Kind code of ref document: A1 |
|
NENP | Non-entry into the national phase |
Ref country code: DE |
|
ENP | Entry into the national phase |
Ref document number: 2019855883 Country of ref document: EP Effective date: 20210329 |