CN109889807A - 车载投射调节方法、装置、设备和存储介质 - Google Patents

车载投射调节方法、装置、设备和存储介质 Download PDF

Info

Publication number
CN109889807A
CN109889807A CN201910194154.1A CN201910194154A CN109889807A CN 109889807 A CN109889807 A CN 109889807A CN 201910194154 A CN201910194154 A CN 201910194154A CN 109889807 A CN109889807 A CN 109889807A
Authority
CN
China
Prior art keywords
vehicle
driver
projecting
image
face
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201910194154.1A
Other languages
English (en)
Inventor
刘毅
周志鹏
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Baidu Online Network Technology Beijing Co Ltd
Beijing Baidu Netcom Science and Technology Co Ltd
Original Assignee
Beijing Baidu Netcom Science and Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Baidu Netcom Science and Technology Co Ltd filed Critical Beijing Baidu Netcom Science and Technology Co Ltd
Priority to CN201910194154.1A priority Critical patent/CN109889807A/zh
Publication of CN109889807A publication Critical patent/CN109889807A/zh
Priority to US16/817,512 priority patent/US11460709B2/en
Pending legal-status Critical Current

Links

Classifications

    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/10—Input arrangements, i.e. from user to vehicle, associated with vehicle functions or specially adapted therefor
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/20—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor
    • B60K35/21—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor using visual output, e.g. blinking lights or matrix displays
    • B60K35/22—Display screens
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/20—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor
    • B60K35/21—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor using visual output, e.g. blinking lights or matrix displays
    • B60K35/23—Head-up displays [HUD]
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/50—Instruments characterised by their means of attachment to or integration in the vehicle
    • B60K35/53—Movable instruments, e.g. slidable
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/0179—Display position adjusting means not related to the information to be displayed
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/012—Head tracking input arrangements
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/013—Eye tracking input arrangements
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T11/00—2D [Two Dimensional] image generation
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/70—Determining position or orientation of objects or cameras
    • G06T7/73—Determining position or orientation of objects or cameras using feature-based methods
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/50—Context or environment of the image
    • G06V20/59—Context or environment of the image inside of a vehicle, e.g. relating to seat occupancy, driver state or inner lighting conditions
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16—Human faces, e.g. facial parts, sketches or expressions
    • G06V40/161—Detection; Localisation; Normalisation
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/18—Eye characteristics, e.g. of the iris
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00—Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/149—Instrument input by detecting viewing direction not otherwise provided for
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00—Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/16—Type of output information
    • B60K2360/177—Augmented reality
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/20—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor
    • B60K35/28—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor characterised by the type of the output information, e.g. video entertainment or vehicle dynamics information; characterised by the purpose of the output information, e.g. for attracting the attention of the driver
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/65—Instruments specially adapted for specific vehicle types or users, e.g. for left- or right-hand drive
    • B60K35/654—Instruments specially adapted for specific vehicle types or users, e.g. for left- or right-hand drive the user being the driver
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/0179—Display position adjusting means not related to the information to be displayed
    • G02B2027/0187—Display position adjusting means not related to the information to be displayed slaved to motion of at least a part of the body of the user, e.g. head, eye
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/30—Subject of image; Context of image processing
    • G06T2207/30196—Human being; Person
    • G06T2207/30201—Face
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/30—Subject of image; Context of image processing
    • G06T2207/30248—Vehicle exterior or interior
    • G06T2207/30268—Vehicle interior

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Mechanical Engineering (AREA)
  • Chemical & Material Sciences (AREA)
  • Transportation (AREA)
  • Combustion & Propulsion (AREA)
  • Multimedia (AREA)
  • Optics & Photonics (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Ophthalmology & Optometry (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Instrument Panels (AREA)
  • Fittings On The Vehicle Exterior For Carrying Loads, And Devices For Holding Or Mounting Articles (AREA)

Abstract

本发明实施例公开了一种车载投射调节方法、装置、设备和存储介质。所述方法包括：获取所述车载图像采集器采集的驾驶员面部图像；根据所述驾驶员面部图像、所述车载图像采集器的参数，以及车载投射设备的安装位置，确定车载投射设备的投射位置。本发明实施例通过获取驾驶员面部头像，并根据所述面部头像以及车载图像采集器的参数和车载投射设备安装位置，最终确定投射设备的投射位置，实现了自动适配驾驶员视野进行平视显示器(Head Up Display)投射调节，使得平视显示器投射落在驾驶员最佳视角中。

Description

车载投射调节方法、装置、设备和存储介质
技术领域
本发明实施例涉及平视显示器技术领域，尤其涉及一种车载投射调节方法、装置、设备和存储介质。
背景技术
随着平视显示器技术的成熟以及其成本的降低，平视显示器已经从航空领域(战斗机，民航飞机)的高科技配置走向了汽车行业，并有望在近几年内成为车载标配。平视显示器的主要功能把汽车仪表盘和行驶数据投影到前挡风玻璃上，让投影的虚像和驾驶场景交叠产生增强现实(AR)效果。
不同驾驶员，尤其是身高不同驾驶员的最佳视角范围不同。目前，主要通过如下两种方式进行投射：1)硬件设计模式，根据大多数驾驶员的头部范围或眼睛范围，进行平视显示器硬件设计和固定投射参数；2)手动适配模式，驾驶员在使用之前手动地调整光机到自己满意的观察位置，在下一次手动调节之前维持不变。
但是硬件设计模式存在如下缺陷：只能保证驾驶员的正常观察，无法实现最佳观察体验；并且无法调整AR虚像投射位置。手动适配模式存在如下缺陷：在停车状态下通常没有路面信息，比如在停车场，更没有导航指引信息，即使在手动调节下，驾驶员也难以确定最佳投影虚像位置；并且影响驾驶体验。
发明内容
本发明实施例提供一种车载投射调节方法、装置、设备和存储介质，可以实现自动适配驾驶员视野进行平视显示器投射调节，使得平视显示器投射落在驾驶员最佳视角中。
第一方面，本发明实施例提供了一种车载投射调节方法，所述方法包括：
获取所述车载图像采集器采集的驾驶员面部图像；
根据所述驾驶员面部图像、所述车载图像采集器的参数，以及车载投射设备的安装位置，确定车载投射设备的投射位置。
第二方面，本发明实施例提供了一种车载投射调节装置，所述装置包括：
面部图像获取模块，用于获取所述车载图像采集器采集的驾驶员面部图像；
投射调节模块，用于根据所述驾驶员面部图像、所述车载图像采集器的参数，以及车载投射设备的安装位置，确定车载投射设备的投射位置。
第三方面，本发明实施例提供了一种设备，所述设备包括：
一个或多个处理器；
存储装置，用于存储一个或多个程序，
当所述一个或多个程序被所述一个或多个处理器执行，使得所述一个或多个处理器实现如本发明实施例中任一所述的车载投射调节方法。
第四方面，本发明实施例提供了一种计算机可读存储介质，其上存储有计算机程序，该程序被处理器执行时实现如本发明实施例中任一所述的车载投射调节方法。
本发明实施例通过获取驾驶员面部头像，并根据面部头像以及车载图像采集器的参数和车载投射设备安装位置，确定投射设备的投射位置，实现了自动适配驾驶员视野进行平视显示器投射调节，使得平视显示器投射落在驾驶员最佳视角中。
附图说明
为了更清楚地说明本发明实施例的技术方案，下面将对实施例中所需要使用的附图作简单地介绍，应当理解，以下附图仅示出了本发明的某些实施例，因此不应被看作是对范围的限定，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他相关的附图。
图1为本发明实施例一提供的一种车载投射调节方法的流程图；
图2是本发明实施例二提供的一种车载投射调节方法的流程图；
图3为本发明实施例三提供的一种车载投射调节装置的结构示意图；
图4为本发明实施例四提供的一种设备的结构示意图。
具体实施方式
下面结合附图和实施例对本发明实施例作进一步的详细说明。可以理解的是，此处所描述的具体实施例仅仅用于解释本发明实施例，而非对本发明的限定。另外还需要说明的是，为了便于描述，附图中仅示出了与本发明实施例相关的部分而非全部结构。
实施例一
图1为本发明实施例一提供的一种车载投射调节方法的流程图，本实施例适用于通过平视显示器技术为驾驶员投射汽车仪表盘和行驶数据的情况，该方法可以由设置有车载图像采集器的车辆来执行，所述车载图像采集器的采集方向朝向驾驶位，具体可以包括如下：
S101、获取所述车载图像采集器采集的驾驶员面部图像。
其中，所述图像采集器包括录像机、照相机和摄像头等设备，设置于驾驶位前方，用于采集驾驶员的面部图像，图像采集器相对于车头前进水平方向的旋转角度和平移量在安装时已知固定。所述驾驶员面部图像格式包括但不限于JEPG格式、BMP格式和PNG格式。
具体的，可以在车体行驶过程中，实时获取所述车载图像采集器采集的驾驶员面部图像。也可以在监测到视野调节请求之后，采集驾驶员面部图像。通过获取驾驶员面部图像，为后续确定车载投射设备的投射参数奠定了数据基础。
S102、根据所述驾驶员面部图像、所述车载图像采集器的参数，以及车载投射设备的安装位置，确定车载投射设备的投射位置。
其中，车载图像采集器的参数包括内参数和外参数，内参数和外参数可以通过包括线性标定方法、非线性优化标定方法和两步标定方法获得。具体的，内参数可以包括焦距、主点、偏斜系数和畸变等参量；所述外参数用于描述摄像机坐标系与世界坐标系的关系，外参数可以包括旋转参变量和平移参变量。车载投射设备的安装位置可以包括车体内部顶部或者车体内部中控位置，车载投射设备在量程范围内可以以任意高度和角度向车体前挡风玻璃投射影像。
具体的，根据驾驶员面部特征点的图像坐标和所述车载图像采集器的参数，确定驾驶员面部特征点的三维坐标和驾驶员头部姿态的三维方向向量；确定以驾驶员的眼睛位置为起点的所述头部姿态方向，与车载前挡风玻璃的目标交点位置；根据所述目标交点位置，确定车载投射设备的投射位置。其中投射位置包括投射高度和/或投射角度。
在根据驾驶员面部图像确定车载投射设备的投射参数过程中，不仅可以利用车机***的算力，还可以结合服务器的算力通过根据驾驶员面部图像，确定车载投射设备的投射参数，相比于驾驶员手动调节确定车载设备的投射参数，提高了投射参数的调节效率，实现了针对不同的驾驶员的自动平视显示器投射调节，使得平视显示器投射落在驾驶员最佳视角中。
本实施例提供的技术方案，通过获取驾驶员面部头像，并根据所述面部头像以及车载图像采集器的参数和车载投射设备安装位置，确定投射设备的投射位置，因此无需驾驶员手动调节，并且针对不同的驾驶员实现了自动适配驾驶员视野进行平视显示器投射调节，使得平视显示器投射落在驾驶员最佳视角中。
实施例二
图2是本发明实施例二提供的一种车载投射调节方法的流程图，本实施例是在上述实施例一的基础上，提供了一种具体实施方式。该方法可以由设置有车载图像采集器的车辆执行，所述车载图像采集器的采集方向朝向驾驶位，该方法具体可以包括如下：
S201、获取所述车载图像采集器采集的驾驶员面部图像。
S202、根据所述驾驶员面部图像，以及所述车载图像采集器的参数，确定驾驶员的眼睛位置和头部姿态方向。
其中，驾驶员眼睛位置表示驾驶员眼睛在世界坐标系中的三维坐标。驾驶员头部姿态表示驾驶员当前头部在世界坐标系中相对三个坐标轴方向的姿态，例如头部朝向左上方、头部朝向右上方或者头部朝向左下方等。
可选的，S202包括：
A、根据所述驾驶员面部图像，确定驾驶员面部特征点的图像坐标。
其中，面部特征点包括眼眉、眼眶、瞳孔、内外眼角、鼻梁、鼻尖、嘴唇、下颚和脸颊等。特征点的图像坐标表示特征点的图像二维坐标。
具体的，将获取到的驾驶员面部图像通过人脸检测算法，识别到驾驶员的面部边框，进而得到驾驶员面部边框上各像素点的图像坐标，可选的人脸检测算法包括基于几何特征的方法、局部特征分析方法和特征脸方法等。在获得驾驶员的面部边框以及边框上各像素点的图像坐标后，在所述面部边框内运行人脸特征点检测算法，获得驾驶员面部各特征点的图像坐标，可选的人脸特征点检测算法包括ASM(Active Shape Model，主动形状模型)、AAM(Active Appearnce Model，主动外观模型)和CPR(Cascaded pose regression，级联姿态回归)等。
B、根据驾驶员面部特征点的图像坐标和所述车载图像采集器的参数，确定驾驶员面部特征点的三维坐标和驾驶员头部姿态的三维方向向量。
具体的，根据事先标定的车载图像采集器的内参数、外参数和获取的驾驶员面部特征点的图像坐标，利用透视n点定位方法，即通过等式：m'＝A×[R|t]×M'，得到驾驶员面部特征点的三维坐标，其中m'表示驾驶员面部特征点的图像坐标，A表示车载图像采集器的内参数，[R|t]表示车载图像采集器的外参数，R表示车载图像采集器的外参数中的旋转参变量，t表示车载图像采集器的外参数中的平移参变量，M'表示驾驶员面部特征点的三维坐标。并且，根据驾驶员面部特征点的三维坐标，可以得到驾驶员面部的三维轮廓，根据三维轮廓就可以确定驾驶员头部姿态。
在获得驾驶员面部特征点的三维坐标后，可以将瞳孔的三维坐标作为驾驶员的眼睛位置，也可以将内外眼角三维坐标的中点作为驾驶员的眼睛位置。
通过根据驾驶员面部图像和车载图像采集器的参数，确定驾驶员的眼睛位置和头部姿态方向，实现了确定驾驶员当前视野范围的技术效果。
S203、根据驾驶员的眼睛位置、头部姿态方向，以及车载投射设备的安装位置，确定车载投射设备的投射位置。
其中，根据驾驶员的眼睛位置和头部姿态方向就可以确定驾驶员的视野范围，因此相应的确定车载投射设备的投射位置，并调节车载投射设备，使其投影位置与所述驾驶员的视野范围相匹配。
可选的，S203包括：
A、向服务器发送驾驶员视野确定请求，其中，所述驾驶员视野确定请求包括所述驾驶员面部图像，以及所述车载图像采集器的参数，用于指示所述服务器确定驾驶员的眼睛位置和头部姿态方向，并接受服务器返回的驾驶员的眼睛位置和头部姿态方向。
B、确定以驾驶员的眼睛位置为起点的所述头部姿态方向，与车载前挡风玻璃的目标交点位置。
其中，驾驶员的视线范围在车载前挡风玻璃内，以驾驶员的眼睛位置为起点，根据驾驶员头部姿态方向，延伸出一条在三维空间的直线，所述直线会与车载前挡风玻璃相交，则该交点即为目标交点，根据车载前挡风玻璃边框的三维坐标即可得到所述目标交点三维坐标，即目标交点位置。
C、根据所述目标交点位置，确定车载投射设备的投射位置。
其中，获得目标交点位置后，根据所述目标交点位置相应的调整车载投射设备的投射位置，以使得投射位置与所述目标交点位置相匹配。
具体的，通过如下方式根据所述目标交点位置，确定车载投射设备的投射位置：1)向车载投射设备发送投射方向确定请求，其中所述投射方向确定请求包括所述目标交点位置，用于指示所述车载投射设备确定投射位置；2)根据所述目标交点位置，从候选交点位置与车载投射设备的候选投射高度和/或候选投射角度之间的关联关系中选择车载投射设备的投射位置。
其中，不同车型汽车的车载投射设备安装位置不同，车载投射设备会根据目标点的位置相应调整投射位置，则当目标交点位置确定后，根据***预存的候选交点位置与车载投射设备的候选投射高度和/或候选投射角度之间的关联关系，相应的调整车载投射设备的投射位置，以使得投射位置与所述目标交点位置相匹配。
通过根据驾驶员的眼睛位置、头部姿态方向，以及车载投射设备的安装位置，确定车载投射设备的投射位置，实现了自动适配驾驶员视野进行平视显示器投射调节。
本实施例提供的技术方案，通过根据所述驾驶员面部图像，以及所述车载图像采集器的参数，确定驾驶员的眼睛位置和头部姿态方向，实现了确定驾驶员视野范围的效果；通过根据驾驶员的眼睛位置、头部姿态方向，以及车载投射设备的安装位置，确定车载投射设备的投射位置，实现了根据驾驶员的视野调整投射位置，因此自动适配驾驶员视野进行平视显示器投射调节。
实施例三
图3为本发明实施例三提供的一种车载投射调节装置的结构示意图，所述车载投射调节装置配置于设置有车载图像采集器的车辆上，可执行本发明任一实施例所提供的车载投射调节方法，具备执行方法相应的功能模块和有益效果。如图3所示，该装置可以包括：
面部图像获取模块31，用于获取所述车载图像采集器采集的驾驶员面部图像；
投射调节模块32，用于根据所述驾驶员面部图像、所述车载图像采集器的参数，以及车载投射设备的安装位置，确定车载投射设备的投射位置。
在上述实施例的基础上，所述投射调节模块32，具体用于：
根据所述驾驶员面部图像，以及所述车载图像采集器的参数，确定驾驶员的眼睛位置和头部姿态方向；
根据驾驶员的眼睛位置、头部姿态方向，以及车载投射设备的安装位置，确定车载投射设备的投射位置。
在上述实施例的基础上，所述投射调节模块32，具体还用于：
根据所述驾驶员面部图像，确定驾驶员面部特征点的图像坐标；
根据驾驶员面部特征点的图像坐标和所述车载图像采集器的参数，确定驾驶员面部特征点的三维坐标和驾驶员头部姿态的三维方向向量。
在上述实施例的基础上，所述投射调节模块32，具体还用于：
确定以驾驶员的眼睛位置为起点的所述头部姿态方向，与车载前挡风玻璃的目标交点位置；
根据所述目标交点位置，确定车载投射设备的投射位置。
在上述实施例的基础上，所述投射调节模块32，具体还用于：
根据所述目标交点位置，从候选交点位置与车载投射设备的候选投射高度和/或候选投射角度之间的关联关系中选择车载投射设备的投射位置。
在上述实施例的基础上，所述投射调节模块32，具体还用于：
向服务器发送驾驶员视野确定请求，其中，所述驾驶员视野确定请求包括所述驾驶员面部图像，以及所述车载图像采集器的参数，用于指示所述服务器确定驾驶员的眼睛位置和头部姿态方向；
根据服务器返回的驾驶员的眼睛位置和头部姿态方向，以及车载投射设备的安装位置，确定车载投射设备的投射位置。
在上述实施例的基础上，所述投射调节模块32，具体还用于：
向车载投射设备发送投射方向确定请求，其中所述投射方向确定请求包括所述目标交点位置，用于指示所述车载投射设备确定投射位置；
获取车载投射设备返回的所述投射位置。
本发明实施例所提供的一种车载投射调节装置，可执行本发明任一实施例所提供的车载投射调节方法，具备执行方法相应的功能模块和有益效果。未在本实施例中详尽描述的技术细节，可参见本发明任一实施例所提供的车载投射调节方法。
实施例四
图4为本发明实施例四提供的一种设备的结构示意图。图4示出了适于用来实现本发明实施方式的示例性设备400的框图。图4显示的设备400仅仅是一个示例，不应对本发明实施例的功能和使用范围带来任何限制。
如图4所示，设备400以通用计算设备的形式表现。设备400的组件可以包括但不限于：一个或者多个处理器或者处理单元401，***存储器402，连接不同***组件(包括***存储器402和处理单元401)的总线403。
总线403表示几类总线结构中的一种或多种，包括存储器总线或者存储器控制器，***总线，图形加速端口，处理器或者使用多种总线结构中的任意总线结构的局域总线。举例来说，这些体系结构包括但不限于工业标准体系结构(ISA)总线，微通道体系结构(MAC)总线，增强型ISA总线、视频电子标准协会(VESA)局域总线以及***组件互连(PCI)总线。
设备400典型地包括多种计算机***可读介质。这些介质可以是任何能够被设备400访问的可用介质，包括易失性和非易失性介质，可移动的和不可移动的介质。
***存储器402可以包括易失性存储器形式的计算机***可读介质，例如随机存取存储器(RAM)404和/或高速缓存存储器405。设备400可以进一步包括其它可移动/不可移动的、易失性/非易失性计算机***存储介质。仅作为举例，存储***406可以用于读写不可移动的、非易失性磁介质(图4未显示，通常称为“硬盘驱动器”)。尽管图4中未示出，可以提供用于对可移动非易失性磁盘(例如“软盘”)读写的磁盘驱动器，以及对可移动非易失性光盘(例如CD-ROM,DVD-ROM或者其它光介质)读写的光盘驱动器。在这些情况下，每个驱动器可以通过一个或者多个数据介质接口与总线403相连。存储器402可以包括至少一个程序产品，该程序产品具有一组(例如至少一个)程序模块，这些程序模块被配置以执行本发明各实施例的功能。
具有一组(至少一个)程序模块407的程序/实用工具408，可以存储在例如存储器402中，这样的程序模块407包括但不限于操作***、一个或者多个应用程序、其它程序模块以及程序数据，这些示例中的每一个或某种组合中可能包括网络环境的实现。程序模块407通常执行本发明所描述的实施例中的功能和/或方法。
设备400也可以与一个或多个外部设备409(例如键盘、指向设备、显示器410等)通信，还可与一个或者多个使得用户能与该设备400交互的设备通信，和/或与使得该设备400能与一个或多个其它计算设备进行通信的任何设备(例如网卡，调制解调器等等)通信。这种通信可以通过输入/输出(I/O)接口411进行。并且，设备400还可以通过网络适配器412与一个或者多个网络(例如局域网(LAN)，广域网(WAN)和/或公共网络，例如因特网)通信。如图所示，网络适配器412通过总线403与设备400的其它模块通信。应当明白，尽管图中未示出，可以结合设备400使用其它硬件和/或软件模块，包括但不限于：微代码、设备驱动器、冗余处理单元、外部磁盘驱动阵列、RAID***、磁带驱动器以及数据备份存储***等。
处理单元401通过运行存储在***存储器402中的程序，从而执行各种功能应用以及数据处理，例如实现本发明实施例所提供的车载投射调节方法，包括：
获取所述车载图像采集器采集的驾驶员面部图像；
根据所述驾驶员面部图像、所述车载图像采集器的参数，以及车载投射设备的安装位置，确定车载投射设备的投射位置。
实施例五
本发明实施例五还提供了一种计算机可读存储介质，所述计算机可执行指令在由计算机处理器执行时用于执行一种车载投射调节方法，该方法包括：
获取所述车载图像采集器采集的驾驶员面部图像；
根据所述驾驶员面部图像、所述车载图像采集器的参数，以及车载投射设备的安装位置，确定车载投射设备的投射位置。
当然，本发明实施例所提供的一种包含计算机可执行指令的存储介质，其计算机可执行指令不限于如上所述的方法操作，还可以执行本发明任意实施例所提供的一种车载投射调节方法中的相关操作。本发明实施例的计算机可读存储介质，可以采用一个或多个计算机可读的介质的任意组合。计算机可读介质可以是计算机可读信号介质或者计算机可读存储介质。计算机可读存储介质例如可以是——但不限于——电、磁、光、电磁、红外线、或半导体的***、装置或器件，或者任意以上的组合。计算机可读存储介质的更具体的例子(非穷举的列表)包括：具有一个或多个导线的电连接、便携式计算机磁盘、硬盘、随机存取存储器(RAM)、只读存储器(ROM)、可擦式可编程只读存储器(EPROM或闪存)、光纤、便携式紧凑磁盘只读存储器(CD-ROM)、光存储器件、磁存储器件、或者上述的任意合适的组合。在本文件中，计算机可读存储介质可以是任何包含或存储程序的有形介质，该程序可以被指令执行***、装置或者器件使用或者与其结合使用。
计算机可读的信号介质可以包括在基带中或者作为载波一部分传播的数据信号，其中承载了计算机可读的程序代码。这种传播的数据信号可以采用多种形式，包括但不限于电磁信号、光信号或上述的任意合适的组合。计算机可读的信号介质还可以是计算机可读存储介质以外的任何计算机可读介质，该计算机可读介质可以发送、传播或者传输用于由指令执行***、装置或者器件使用或者与其结合使用的程序。
计算机可读介质上包含的程序代码可以用任何适当的介质传输，包括——但不限于无线、电线、光缆、RF等等，或者上述的任意合适的组合。
可以以一种或多种程序设计语言或其组合来编写用于执行本发明操作的计算机程序代码，所述程序设计语言包括面向对象的程序设计语言—诸如Java、Smalltalk、C++，还包括常规的过程式程序设计语言—诸如“C”语言或类似的程序设计语言。程序代码可以完全地在用户计算机上执行、部分地在用户计算机上执行、作为一个独立的软件包执行、部分在用户计算机上部分在远程计算机上执行、或者完全在远程计算机或服务器上执行。在涉及远程计算机的情形中，远程计算机可以通过任意种类的网络——包括局域网(LAN)或广域网(WAN)—连接到用户计算机，或者，可以连接到外部计算机(例如利用因特网服务提供商来通过因特网连接)。
注意，上述仅为本发明的较佳实施例及所运用技术原理。本领域技术人员会理解，本发明不限于这里所述的特定实施例，对本领域技术人员来说能够进行各种明显的变化、重新调整和替代而不会脱离本发明的保护范围。因此，虽然通过以上实施例对本发明进行了较为详细的说明，但是本发明不仅仅限于以上实施例，在不脱离本发明构思的情况下，还可以包括更多其他等效实施例，而本发明的范围由所附的权利要求范围决定。

Claims (16)

1.一种车载投射调节方法，其特征在于，由设置有车载图像采集器的车辆执行，所述车载图像采集器的采集方向朝向驾驶位；所述方法包括：
获取所述车载图像采集器采集的驾驶员面部图像；
根据所述驾驶员面部图像、所述车载图像采集器的参数，以及车载投射设备的安装位置，确定车载投射设备的投射位置。
2.根据权利要求1所述的方法，其特征在于，根据所述驾驶员面部图像、所述车载图像采集器的参数，以及车载投射设备的安装位置，确定车载投射设备的投射位置，包括：
根据所述驾驶员面部图像，以及所述车载图像采集器的参数，确定驾驶员的眼睛位置和头部姿态方向；
根据驾驶员的眼睛位置、头部姿态方向，以及车载投射设备的安装位置，确定车载投射设备的投射位置。
3.根据权利要求2所述的方法，其特征在于，根据所述驾驶员面部图像，以及所述车载图像采集器的参数，确定驾驶员的眼睛位置和头部姿态方向，包括：
根据所述驾驶员面部图像，确定驾驶员面部特征点的图像坐标；
根据驾驶员面部特征点的图像坐标和所述车载图像采集器的参数，确定驾驶员面部特征点的三维坐标和驾驶员头部姿态的三维方向向量。
4.根据权利要求2所述的方法，其特征在于，根据驾驶员的眼睛位置、头部姿态方向，以及车载投射设备的安装位置，确定车载投射设备的投射位置，包括：
确定以驾驶员的眼睛位置为起点的所述头部姿态方向，与车载前挡风玻璃的目标交点位置；
根据所述目标交点位置，确定车载投射设备的投射位置。
5.根据权利要求4所述的方法，其特征在于，根据所述目标交点位置，确定车载投射设备的投射位置，包括：
根据所述目标交点位置，从候选交点位置与车载投射设备的候选投射高度和/或候选投射角度之间的关联关系中选择车载投射设备的投射位置。
6.根据权利要求2所述的方法，其特征在于，根据驾驶员的眼睛位置、头部姿态方向，以及车载投射设备的安装位置，确定车载投射设备的投射位置，包括：
向服务器发送驾驶员视野确定请求，其中，所述驾驶员视野确定请求包括所述驾驶员面部图像，以及所述车载图像采集器的参数，用于指示所述服务器确定驾驶员的眼睛位置和头部姿态方向；
根据服务器返回的驾驶员的眼睛位置和头部姿态方向，以及车载投射设备的安装位置，确定车载投射设备的投射位置。
7.根据权利要求4所述的方法，其特征在于，根据所述目标交点位置，确定车载投射设备的投射位置，包括：
向车载投射设备发送投射方向确定请求，其中所述投射方向确定请求包括所述目标交点位置，用于指示所述车载投射设备确定投射位置；
获取车载投射设备返回的所述投射位置。
8.一种车载投射调节装置，其特征在于，配置于设置有车载图像采集器的车辆上，所述车载图像采集器的采集方向朝向驾驶位；所述装置包括：
面部图像获取模块，用于获取所述车载图像采集器采集的驾驶员面部图像；
投射调节模块，用于根据所述驾驶员面部图像、所述车载图像采集器的参数，以及车载投射设备的安装位置，确定车载投射设备的投射位置。
9.根据权利要求8所述的装置，其特征在于，所述投射调节模块，具体用于：
根据所述驾驶员面部图像，以及所述车载图像采集器的参数，确定驾驶员的眼睛位置和头部姿态方向；
根据驾驶员的眼睛位置、头部姿态方向，以及车载投射设备的安装位置，确定车载投射设备的投射位置。
10.根据权利要求9所述的装置，其特征在于，所述投射调节模块，具体还用于：
根据所述驾驶员面部图像，确定驾驶员面部特征点的图像坐标；
根据驾驶员面部特征点的图像坐标和所述车载图像采集器的参数，确定驾驶员面部特征点的三维坐标和驾驶员头部姿态的三维方向向量。
11.根据权利要求9所述的装置，其特征在于，所述投射调节模块，具体还用于：
确定以驾驶员的眼睛位置为起点的所述头部姿态方向，与车载前挡风玻璃的目标交点位置；
根据所述目标交点位置，确定车载投射设备的投射位置。
12.根据权利要求11所述的装置，其特征在于，所述投射调节模块，具体还用于：
根据所述目标交点位置，从候选交点位置与车载投射设备的候选投射高度和/或候选投射角度之间的关联关系中选择车载投射设备的投射位置。
13.根据权利要求9所述的装置，其特征在于，所述投射调节模块，具体还用于：
向服务器发送驾驶员视野确定请求，其中，所述驾驶员视野确定请求包括所述驾驶员面部图像，以及所述车载图像采集器的参数，用于指示所述服务器确定驾驶员的眼睛位置和头部姿态方向；
根据服务器返回的驾驶员的眼睛位置和头部姿态方向，以及车载投射设备的安装位置，确定车载投射设备的投射位置。
14.根据权利要求11所述的装置，其特征在于，所述投射调节模块，具体还用于：
向车载投射设备发送投射方向确定请求，其中所述投射方向确定请求包括所述目标交点位置，用于指示所述车载投射设备确定投射位置；
获取车载投射设备返回的所述投射位置。
15.一种设备，其特征在于，所述设备包括：
一个或多个处理器；
存储装置，用于存储一个或多个程序，
当所述一个或多个程序被所述一个或多个处理器执行，使得所述一个或多个处理器实现如权利要求1-7中任一所述的车载投射调节方法。
16.一种计算机可读存储介质，其上存储有计算机程序，其特征在于，该程序被处理器执行时实现如权利要求1-7中任一所述的车载投射调节方法。
CN201910194154.1A 2019-03-14 2019-03-14 车载投射调节方法、装置、设备和存储介质 Pending CN109889807A (zh)

Priority Applications (2)

Application Number Priority Date Filing Date Title
CN201910194154.1A CN109889807A (zh) 2019-03-14 2019-03-14 车载投射调节方法、装置、设备和存储介质
US16/817,512 US11460709B2 (en) 2019-03-14 2020-03-12 Method and apparatus for adjusting on-vehicle projection

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201910194154.1A CN109889807A (zh) 2019-03-14 2019-03-14 车载投射调节方法、装置、设备和存储介质

Publications (1)

Publication Number Publication Date
CN109889807A true CN109889807A (zh) 2019-06-14

Family

ID=66932341

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910194154.1A Pending CN109889807A (zh) 2019-03-14 2019-03-14 车载投射调节方法、装置、设备和存储介质

Country Status (2)

Country Link
US (1) US11460709B2 (zh)
CN (1) CN109889807A (zh)

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110949272A (zh) * 2019-12-23 2020-04-03 斑马网络技术有限公司 车载显示设备调节方法、装置、车辆、介质及设备
CN111123518A (zh) * 2019-12-05 2020-05-08 浙江合众新能源汽车有限公司 一种汽车的ar-hud显示的智能控制方法与***
CN111873929A (zh) * 2020-05-28 2020-11-03 江西江铃集团新能源汽车有限公司 一种车载hud投影自动调节方法、***及汽车
CN111921185A (zh) * 2020-09-21 2020-11-13 鲁姆文化传媒（上海）有限公司 一种智能化乘骑游乐方法与***
CN114035324A (zh) * 2021-10-31 2022-02-11 东风商用车有限公司 一种hud光路投影***及方法
CN114043932A (zh) * 2021-11-17 2022-02-15 中汽创智科技有限公司 一种车辆平视显示器的控制方法、装置、设备及存储介质
CN114332213A (zh) * 2022-03-17 2022-04-12 中国汽车技术研究中心有限公司 车辆视觉传感器仿真图像投射位姿确定方法和***
CN115113553A (zh) * 2021-09-03 2022-09-27 博泰车联网科技(上海)股份有限公司 车载影音播放的控制方法、控制***及控制装置

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11978265B2 (en) * 2022-03-11 2024-05-07 GM Global Technology Operations LLC System and method for providing lane identification on an augmented reality display
CN115097929A (zh) * 2022-03-31 2022-09-23 Oppo广东移动通信有限公司 车载投屏方法、装置、电子设备、存储介质和程序产品
CN115002431B (zh) * 2022-05-20 2023-10-27 广景视睿科技（深圳）有限公司 一种投影方法、控制装置和投影***
CN115167743B (zh) * 2022-06-10 2024-04-02 东风汽车集团股份有限公司 一种车载智能屏幕调节方法、***及电子设备

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103728727A (zh) * 2013-12-19 2014-04-16 财团法人车辆研究测试中心 自动调整可视范围的信息显示***及其显示方法
CN104260669A (zh) * 2014-09-17 2015-01-07 北京理工大学 一种智能汽车抬头显示器
CN204586669U (zh) * 2014-12-25 2015-08-26 惠州比亚迪电池有限公司 一种车载抬头显示***及汽车
CN105774679A (zh) * 2014-12-25 2016-07-20 比亚迪股份有限公司 一种汽车、车载抬头显示***及其投影图像高度调节方法
CN106226910A (zh) * 2016-09-08 2016-12-14 邹文韬 Hud***及其影像调整方法
CN106353886A (zh) * 2016-10-12 2017-01-25 惠州市华阳多媒体电子有限公司 一种汽车智能抬头显示器

Family Cites Families (26)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7663502B2 (en) * 1992-05-05 2010-02-16 Intelligent Technologies International, Inc. Asset system control arrangement and method
US7164117B2 (en) * 1992-05-05 2007-01-16 Automotive Technologies International, Inc. Vehicular restraint system control system and method using multiple optical imagers
JP2009292409A (ja) * 2008-06-09 2009-12-17 Yazaki Corp ヘッドアップディスプレイ装置
US20100014711A1 (en) * 2008-07-16 2010-01-21 Volkswagen Group Of America, Inc. Method for controlling an illumination in a vehicle interior in dependence on a head pose detected with a 3D sensor
EP2868511B1 (en) * 2012-06-29 2020-01-15 JVC KENWOOD Corporation Display apparatus for vehicle
TWI531495B (zh) * 2012-12-11 2016-05-01 Automatic Calibration Method and System for Vehicle Display System
US20160054563A9 (en) * 2013-03-14 2016-02-25 Honda Motor Co., Ltd. 3-dimensional (3-d) navigation
US10339711B2 (en) * 2013-03-15 2019-07-02 Honda Motor Co., Ltd. System and method for providing augmented reality based directions based on verbal and gestural cues
US20140362195A1 (en) * 2013-03-15 2014-12-11 Honda Motor, Co., Ltd. Enhanced 3-dimensional (3-d) navigation
US10215583B2 (en) * 2013-03-15 2019-02-26 Honda Motor Co., Ltd. Multi-level navigation monitoring and control
JP6176070B2 (ja) * 2013-11-13 2017-08-09 株式会社デンソー 視線方向検知装置
US10649220B2 (en) * 2014-06-09 2020-05-12 Mentor Acquisition One, Llc Content presentation in head worn computing
US9296338B2 (en) * 2014-02-24 2016-03-29 Intel Corporation Vehicle mirror adjustment
JP6374676B2 (ja) * 2014-03-10 2018-08-15 矢崎総業株式会社 車両用発光表示装置及び車両用表示システム
DE112014006621B4 (de) * 2014-04-25 2019-09-05 Mitsubishi Electric Corporation Automatische Einstellvorrichtung, automatisches Einstellsystem und automatisches Einstellverfahren
US20160084661A1 (en) * 2014-09-23 2016-03-24 GM Global Technology Operations LLC Performance driving system and method
JP6518952B2 (ja) * 2015-03-27 2019-05-29 パナソニックＩｐマネジメント株式会社 車両用表示装置の位置調整方法
US10274726B2 (en) * 2016-04-13 2019-04-30 Panasonic Automotive Systems Company Of America, Division Of Panasonic Corporation Of North America Dynamic eyebox correction for automotive head-up display
CN109906165A (zh) * 2016-08-10 2019-06-18 兹沃公司 使用推断的注意力模型经由收集和存储的元数据提供信息的方法和设备
US10349032B2 (en) * 2016-09-30 2019-07-09 Veoneer Us, Inc. Vehicle occupant head positioning system
JP6756228B2 (ja) * 2016-10-07 2020-09-16 株式会社デンソー 車載表示制御装置
JP2018132685A (ja) * 2017-02-16 2018-08-23 富士フイルム株式会社 ヘッドアップディスプレイ装置
US10895741B2 (en) * 2017-10-03 2021-01-19 Industrial Technology Research Institute Ultra-wide head-up display system and display method thereof
JP2019077393A (ja) * 2017-10-26 2019-05-23 矢崎総業株式会社 車両用表示装置
JP6663896B2 (ja) * 2017-11-02 2020-03-13 矢崎総業株式会社 ヘッドアップディスプレイ装置
JP6883244B2 (ja) * 2017-12-06 2021-06-09 株式会社Ｊｖｃケンウッド 投影制御装置、ヘッドアップディスプレイ装置、投影制御方法およびプログラム

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103728727A (zh) * 2013-12-19 2014-04-16 财团法人车辆研究测试中心 自动调整可视范围的信息显示***及其显示方法
CN104260669A (zh) * 2014-09-17 2015-01-07 北京理工大学 一种智能汽车抬头显示器
CN204586669U (zh) * 2014-12-25 2015-08-26 惠州比亚迪电池有限公司 一种车载抬头显示***及汽车
CN105774679A (zh) * 2014-12-25 2016-07-20 比亚迪股份有限公司 一种汽车、车载抬头显示***及其投影图像高度调节方法
CN106226910A (zh) * 2016-09-08 2016-12-14 邹文韬 Hud***及其影像调整方法
CN106353886A (zh) * 2016-10-12 2017-01-25 惠州市华阳多媒体电子有限公司 一种汽车智能抬头显示器

Cited By (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111123518A (zh) * 2019-12-05 2020-05-08 浙江合众新能源汽车有限公司 一种汽车的ar-hud显示的智能控制方法与***
CN111123518B (zh) * 2019-12-05 2021-12-03 浙江合众新能源汽车有限公司 一种汽车的ar-hud显示的智能控制方法与***
CN110949272A (zh) * 2019-12-23 2020-04-03 斑马网络技术有限公司 车载显示设备调节方法、装置、车辆、介质及设备
CN111873929A (zh) * 2020-05-28 2020-11-03 江西江铃集团新能源汽车有限公司 一种车载hud投影自动调节方法、***及汽车
CN111921185A (zh) * 2020-09-21 2020-11-13 鲁姆文化传媒（上海）有限公司 一种智能化乘骑游乐方法与***
CN115113553A (zh) * 2021-09-03 2022-09-27 博泰车联网科技(上海)股份有限公司 车载影音播放的控制方法、控制***及控制装置
WO2023029264A1 (zh) * 2021-09-03 2023-03-09 博泰车联网科技(上海)股份有限公司 车载影音播放的控制方法、控制***及控制装置
CN114035324A (zh) * 2021-10-31 2022-02-11 东风商用车有限公司 一种hud光路投影***及方法
CN114035324B (zh) * 2021-10-31 2023-09-22 东风商用车有限公司 一种hud光路投影***及方法
CN114043932A (zh) * 2021-11-17 2022-02-15 中汽创智科技有限公司 一种车辆平视显示器的控制方法、装置、设备及存储介质
CN114332213A (zh) * 2022-03-17 2022-04-12 中国汽车技术研究中心有限公司 车辆视觉传感器仿真图像投射位姿确定方法和***
CN114332213B (zh) * 2022-03-17 2022-06-17 中国汽车技术研究中心有限公司 车辆视觉传感器仿真图像投射位姿确定方法和***

Also Published As

Publication number Publication date
US20200292832A1 (en) 2020-09-17
US11460709B2 (en) 2022-10-04

Similar Documents

Publication Publication Date Title
CN109889807A (zh) 车载投射调节方法、装置、设备和存储介质
CN109917920A (zh) 车载投射处理方法、装置、车载设备及存储介质
US8994558B2 (en) Automotive augmented reality head-up display apparatus and method
CN109941277A (zh) 显示汽车a柱盲区图像的方法、装置和车辆
CN111665513B (zh) 面部特征部检测装置、面部特征部检测方法
CN111016785A (zh) 一种基于人眼位置的平视显示***调节方法
CN109968979B (zh) 车载投射处理方法、装置、车载设备及存储介质
CN106226910A (zh) Hud***及其影像调整方法
CN108171673A (zh) 图像处理方法、装置、车载抬头显示***及车辆
WO2021197190A1 (zh) 基于增强现实的信息显示方法、***、装置及投影设备
EP4339938A1 (en) Projection method and apparatus, and vehicle and ar-hud
EP3956807A1 (en) A neural network for head pose and gaze estimation using photorealistic synthetic data
CN110009720A (zh) Ar场景中的图像处理方法、装置、电子设备及存储介质
WO2023272453A1 (zh) 视线校准方法及装置、设备、计算机可读存储介质、***、车辆
KR20130089139A (ko) 차량용 증강현실 헤드업 디스플레이 장치 및 방법
CN110341617A (zh) 眼球追踪方法、装置、车辆和存储介质
WO2022126419A1 (zh) 一种后视镜控制的方法以及相关设备
CN113366491A (zh) 眼球追踪方法、装置及存储介质
CN115525152A (zh) 图像处理方法及***、装置、电子设备和存储介质
CN115223231A (zh) 视线方向检测方法和装置
CN210139817U (zh) 汽车增强现实显示***及汽车
CN109443377A (zh) 一种图像处理方法、***、服务器和存储介质
US20230085310A1 (en) Image processing device, image processing method, program, and image presentation system
CN114290998A (zh) 一种天窗显示控制装置、方法及设备
CN117193530B (zh) 基于虚拟现实技术的智能座舱沉浸式用户体验方法及***

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20190614

RJ01 Rejection of invention patent application after publication