CN107472140A - 一种眼控车载hud*** - Google Patents

一种眼控车载hud*** Download PDF

Info

Publication number
CN107472140A
CN107472140A CN201710670224.7A CN201710670224A CN107472140A CN 107472140 A CN107472140 A CN 107472140A CN 201710670224 A CN201710670224 A CN 201710670224A CN 107472140 A CN107472140 A CN 107472140A
Authority
CN
China
Prior art keywords
hud
car
mounted terminal
data communication
communication module
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201710670224.7A
Other languages
English (en)
Other versions
CN107472140B (zh
Inventor
杜煜
傅之成
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shanghai Green Technology Co Ltd
Original Assignee
Shanghai Green Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shanghai Green Technology Co Ltd filed Critical Shanghai Green Technology Co Ltd
Priority to CN201710670224.7A priority Critical patent/CN107472140B/zh
Publication of CN107472140A publication Critical patent/CN107472140A/zh
Application granted granted Critical
Publication of CN107472140B publication Critical patent/CN107472140B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R1/00—Optical viewing arrangements; Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/017—Head mounted
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/10—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of camera system used
    • B60R2300/105—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of camera system used using multiple cameras
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/20—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of display used
    • B60R2300/205—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of display used using a head-up display
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/20—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of display used
    • B60R2300/207—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of display used using multi-purpose displays, e.g. camera image and navigation or video on same display
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/80—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the intended use of the viewing arrangement
    • B60R2300/8086—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the intended use of the viewing arrangement for vehicle path indication
    • Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02P—CLIMATE CHANGE MITIGATION TECHNOLOGIES IN THE PRODUCTION OR PROCESSING OF GOODS
    • Y02P90/00—Enabling technologies with a potential contribution to greenhouse gas [GHG] emissions mitigation
    • Y02P90/02—Total factory control, e.g. smart factories, flexible manufacturing systems [FMS] or integrated manufacturing systems [IMS]

Landscapes

  • Physics & Mathematics (AREA)
  • Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Optics & Photonics (AREA)
  • Multimedia (AREA)
  • Mechanical Engineering (AREA)
  • Fittings On The Vehicle Exterior For Carrying Loads, And Devices For Holding Or Mounting Articles (AREA)

Abstract

本发明提供了一种眼控车载HUD***，包括视线追踪模块，车载终端模块和HUD显示模块，视线追踪模块包括红外光源、图像采集器、数据处理器和控制器，车载终端模块包括车载终端和第一数据通信模块，HUD显示模块包括HUD交互显示屏及第二数据通信模块。上述眼控车载HUD***，可以解决汽车使用者与HUD显示模块和车载终端模块通过视线进行交互的问题。

Description

一种眼控车载HUD***
技术领域
本发明属于汽车电子领域，尤其涉及一种眼控车载HUD***。
背景技术
HUD(Head Up Display)，又称平视显示器或抬头显示***，较早是运用在航空器上的飞行辅助仪器的一种技术。HUD最早出现在军用飞机上，用来降低飞行员需要低头查看仪表的频率，避免注意力中断。
随着科技的发展，HUD被应用到了汽车领域，HUD可以帮助驾驶员识别车辆的重要运行信息或路径信息，而不必在运行过程中将眼睛从道路转移，提高驾驶的安全性，但是，现有的车载HUD***不能很好的实现与驾驶员的交互操作。
近年来，眼控技术受到国内外科研人员的普遍关注，市场上也出现了一些基于眼控技术的产品，尤其在一些发达国家，眼控技术的应用已日臻成熟。
将眼控技术应用于车载HUD***是本发明的关注点，解决了汽车使用者与HUD显示模块以及车载终端模块通过视线进行交互的问题。
发明内容
本发明的技术方案可以解决汽车使用者与HUD显示模块以及车载终端模块通过视线进行交互的问题，本发明的具体技术方案为：
一种眼控车载HUD***，包括视线追踪模块，车载终端模块和HUD显示模块，视线追踪模块包括红外光源、图像采集器、数据处理器和控制器，车载终端模块包括车载终端和第一数据通信模块，HUD显示模块包括HUD交互显示屏及第二数据通信模块。
第二数据通信模块接收第一数据通信模块发出的车载终端初始数据信息，并将车载终端初始数据信息显示在HUD交互显示屏。
视线追踪模块追踪汽车使用者的视线，确定汽车使用者注视位置(在HUD交互显示屏上的注视点)，控制器根据汽车使用者注视位置与HUD交互显示屏各车载终端显示位置计算汽车使用者在HUD交互显示屏上的注视目标。
视线追踪模块追踪汽车使用者的视线特征，控制器根据视线特征向第一数据通信模块发出控制指令，车载终端执行控制指令，第一数据通信模块将车载终端执行控制指令后的状态信息发送至第二数据通信模块，第二数据通信模块将接收到的状态信息显示在HUD交互显示屏。
作为本发明的进一步优化，眼控车载HUD***还包括HUD显示模块虚拟开关装置，虚拟开关装置根据汽车使用者视线特征开启或关闭车载终端***。汽车使用者可以根据实际需要用视线打开或关闭眼控车载HUD***。
作为本发明的进一步优化，车载终端包括拍摄汽车外部物体的场景摄像机，场景摄像机捕捉的画面信息储存至第二数据通信模块。
作为本发明的进一步优化，车载终端包括拍摄汽车后面物体的场景摄像机，场景摄像机捕捉的画面信息储存至第二数据通信模块。眼控车载HUD***可以将汽车后面的场景显示在HUD交互显示屏，实现后视的功能。
作为本发明的进一步优化，车载终端包括车载导航装置。眼控车载HUD***可以实现汽车导航功能。
作为本发明的进一步优化，车载终端包括车载多媒体终端。汽车使用者可以通过眼控车载HUD***实现对车载多媒体终端的操控。
本发明披露的眼控车载HUD***，可以解决汽车使用者与HUD显示模块以及车载终端模块通过视线进行交互的问题。
附图说明
图1为本发明眼控车载HUD***框架示意图；
具体实施方式
为详细说明本发明的技术方案，现结合附图说明本发明优选的实施例。
实施例中公开了一种眼控车载HUD***，如图1所示，包括视线追踪模块，车载终端模块和HUD显示模块。
视线追踪模块包括红外光源、图像采集器、数据处理器和控制器，车载终端模块包括车载终端和第一数据通信模块，所述HUD显示模块包括HUD交互显示屏及第二数据通信模块。
第二数据通信模块接收第一数据通信模块发出的车载终端初始数据信息，并将车载终端初始数据信息显示在HUD交互显示屏。第一数据模块记录并存储车载终端的数据信息，车载终端启动后，第一数据模块将数据与车载终端初始状态数据进行同步，并将同步后的初始数据发送至第二数据通信模块。
汽车使用者注视某一物体时，视线追踪模块追踪汽车使用者视线注视位置，具体为，视线追踪模块的红外光源发射的光线在汽车使用者的眼睛外角膜上反射后形成普尔钦斑，图像采集器捕捉普尔钦斑并根据普尔钦斑及瞳孔中心的位置确定汽车使用者视线注视的方向，进而确定其注视位置，控制器根据汽车使用者注视位置与HUD交互显示屏各车载终端显示位置计算汽车使用者在HUD交互显示屏上的注视目标。
视线追踪模块追踪汽车使用者的视线特征，在本实施例中，汽车使用者的视线特征为在1S的时间周期内眨眼两次，控制器根据该视线特征向第一数据通信模块发出控制指令，车载终端执行该控制指令，第一数据通信模块将车载终端执行控制指令后的状态信息发送至第二数据通信模块，第二数据通信模块将接收到的状态信息显示在HUD交互显示屏。
在本发明的其他优选实施例中，眼控车载HUD***还包括HUD显示模块开关装置，所述开关装置根据汽车使用者视线特征开启或关闭车载终端***。
在本发明的其他优选实施例中，车载终端包括拍摄汽车外部物体的场景摄像机，场景摄像机捕捉的画面信息储存至第二数据通信模块。
在本发明的其他优选实施例中，车载终端包括拍摄汽车后面物体的场景摄像机，场景摄像机捕捉的画面信息储存至第二数据通信模块。
在本发明的其他优选实施例中，车载终端包括车载导航装置。
在本发明的其他优选实施例中，车载终端包括车载多媒体终端。
尽管本发明的内容已经通过上述优选实施例作了详细介绍，但应当认识到上述的描述不应被认为是对本发明的限制。在本领域技术人员阅读了上述内容后，对于本发明的多种修改和替代都将是显而易见的。因此，本发明的保护范围应由所附的权利要求来限定。

Claims (6)

1.一种眼控车载HUD***，包括视线追踪模块，车载终端模块和HUD显示模块，所述视线追踪模块包括红外光源、图像采集器、数据处理器和控制器，车载终端模块包括车载终端和第一数据通信模块，所述HUD显示模块包括HUD交互显示屏及第二数据通信模块；
其特征在于，所述第二数据通信模块接收第一数据通信模块发出的车载终端初始数据信息，并将车载终端初始数据信息显示在HUD交互显示屏；
所述视线追踪模块追踪汽车使用者的视线，确定汽车使用者注视位置，控制器根据汽车使用者注视位置与HUD交互显示屏各车载终端显示位置计算汽车使用者在HUD交互显示屏上的注视目标；
所述视线追踪模块追踪汽车使用者的视线特征，所述控制器根据视线特征向第一数据通信模块发出控制指令，所述车载终端执行控制指令，所述第一数据通信模块将车载终端执行控制指令后的状态信息发送至第二数据通信模块，第二数据通信模块将接收到的状态信息显示在HUD交互显示屏。
2.根据权利要求1所述的眼控车载HUD***，其特征在于，所述眼控车载HUD***还包括HUD显示模块虚拟开关装置，所述虚拟开关装置根据汽车使用者视线特征开启或关闭车载终端***。
3.根据权利要求1所述的眼控车载HUD***，其特征在于，所述车载终端包括拍摄汽车外部物体的场景摄像机，场景摄像机捕捉的画面信息储存至第二数据通信模块。
4.根据权利要求1所述的眼控车载HUD***，其特征在于，所述车载终端包括拍摄汽车后面物体的场景摄像机，场景摄像机捕捉的画面信息储存至第二数据通信模块。
5.根据权利要求1所述的眼控车载HUD***，其特征在于，所述车载终端包括车载导航装置。
6.根据权利要求1所述的眼控车载HUD***，其特征在于，所述车载终端包括车载多媒体终端。
CN201710670224.7A 2017-08-08 2017-08-08 一种眼控车载hud*** Active CN107472140B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201710670224.7A CN107472140B (zh) 2017-08-08 2017-08-08 一种眼控车载hud***

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201710670224.7A CN107472140B (zh) 2017-08-08 2017-08-08 一种眼控车载hud***

Publications (2)

Publication Number Publication Date
CN107472140A true CN107472140A (zh) 2017-12-15
CN107472140B CN107472140B (zh) 2023-04-07

Family

ID=60598996

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201710670224.7A Active CN107472140B (zh) 2017-08-08 2017-08-08 一种眼控车载hud***

Country Status (1)

Country Link
CN (1) CN107472140B (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109542217A (zh) * 2018-10-12 2019-03-29 深圳市元征科技股份有限公司 一种眼球追踪显示方法以及装置
CN109968979A (zh) * 2019-03-14 2019-07-05 百度在线网络技术（北京）有限公司 车载投射处理方法、装置、车载设备及存储介质
CN113939757A (zh) * 2019-06-13 2022-01-14 金泰克斯公司 可切换多视图成像***

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005313772A (ja) * 2004-04-28 2005-11-10 Toyota Motor Corp 車両用ヘッドアップ・ディスプレイ装置
CN103020983A (zh) * 2012-09-12 2013-04-03 深圳先进技术研究院 一种用于目标跟踪的人机交互装置及方法
CN105128862A (zh) * 2015-08-18 2015-12-09 上海擎感智能科技有限公司 一种车载终端眼球识别控制方法及***
CN105739705A (zh) * 2016-02-04 2016-07-06 重庆邮电大学 一种车载***人眼控制方法及装置
CN106226910A (zh) * 2016-09-08 2016-12-14 邹文韬 Hud***及其影像调整方法

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005313772A (ja) * 2004-04-28 2005-11-10 Toyota Motor Corp 車両用ヘッドアップ・ディスプレイ装置
CN103020983A (zh) * 2012-09-12 2013-04-03 深圳先进技术研究院 一种用于目标跟踪的人机交互装置及方法
CN105128862A (zh) * 2015-08-18 2015-12-09 上海擎感智能科技有限公司 一种车载终端眼球识别控制方法及***
CN105739705A (zh) * 2016-02-04 2016-07-06 重庆邮电大学 一种车载***人眼控制方法及装置
CN106226910A (zh) * 2016-09-08 2016-12-14 邹文韬 Hud***及其影像调整方法

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
张？: "从专利视角关注车载平视显示***的发展", 《中小企业管理与科技(中旬刊)》 *

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109542217A (zh) * 2018-10-12 2019-03-29 深圳市元征科技股份有限公司 一种眼球追踪显示方法以及装置
CN109968979A (zh) * 2019-03-14 2019-07-05 百度在线网络技术（北京）有限公司 车载投射处理方法、装置、车载设备及存储介质
CN109968979B (zh) * 2019-03-14 2021-12-07 阿波罗智联(北京)科技有限公司 车载投射处理方法、装置、车载设备及存储介质
CN113939757A (zh) * 2019-06-13 2022-01-14 金泰克斯公司 可切换多视图成像***
CN113939757B (zh) * 2019-06-13 2024-03-05 金泰克斯公司 可切换多视图成像***

Also Published As

Publication number Publication date
CN107472140B (zh) 2023-04-07

Similar Documents

Publication Publication Date Title
US10613337B2 (en) Method and apparatus for adjusting imaging position and head-up display system
US9766465B1 (en) Near eye display system and method for display enhancement or redundancy
CN109353279A (zh) 一种增强现实车载抬头显示***
US10445594B2 (en) Onboard display system
US9244281B1 (en) Display system and method using a detached combiner
WO2018167966A1 (ja) Ａｒ表示装置及びａｒ表示方法
CN104875680B (zh) 一种结合语音和视频识别的hud显示装置
KR101409846B1 (ko) 3차원 증강현실 기반 헤드 업 디스플레이 장치
US10598932B1 (en) Head up display for integrating views of conformally mapped symbols and a fixed image source
US20050046953A1 (en) Virtual display device for a vehicle instrument panel
CN103303224A (zh) 车载设备手势控制***及其使用方法
CN104348851A (zh) 一种抬头显示器与移动终端的互联***
CN107472140A (zh) 一种眼控车载hud***
US11507196B2 (en) Method and device for controlling display content on an output means of a vehicle
CN106483659A (zh) 用于观察具有抬头显示器的车辆的驾驶员的眼睛的方法
CN106970748A (zh) 基于环境光颜色自动调节车载hud显示颜色的方法和***
US9399433B2 (en) Automotive camera system and the data processing method based on its shooting angle changing synchronously with the automotive speed
CN107404642A (zh) 双目显示设备的动态聚散度
CN106104667B (zh) 具有光透射率的选择可控制区域的挡风玻璃及其控制方法
KR101976106B1 (ko) 정보제공을 위한 차량용 통합 헤드업디스플레이장치
US11238834B2 (en) Method, device and system for adjusting image, and computer readable storage medium
CN107009963A (zh) 一种基于微投影技术的汽车风挡式平视显示器
CN114828684A (zh) 用于摩托车手的头盔准直器显示***
KR20140145332A (ko) 차량용 hmd 시스템 및 그 작동 방법
CN117934775A (zh) 车辆

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant