CN106205175A - 用于车辆的显示设备和车辆 - Google Patents
用于车辆的显示设备和车辆 Download PDFInfo
- Publication number
- CN106205175A CN106205175A CN201610361981.1A CN201610361981A CN106205175A CN 106205175 A CN106205175 A CN 106205175A CN 201610361981 A CN201610361981 A CN 201610361981A CN 106205175 A CN106205175 A CN 106205175A
- Authority
- CN
- China
- Prior art keywords
- vehicle
- image
- track
- processor
- information
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 230000008859 change Effects 0.000 claims description 96
- 238000004891 communication Methods 0.000 claims description 65
- 238000001514 detection method Methods 0.000 claims description 49
- 238000010276 construction Methods 0.000 claims description 25
- 230000000007 visual effect Effects 0.000 claims description 20
- 239000003086 colorant Substances 0.000 claims description 12
- 206010039203 Road traffic accident Diseases 0.000 claims description 9
- 230000008901 benefit Effects 0.000 claims description 8
- 230000008878 coupling Effects 0.000 claims description 5
- 238000010168 coupling process Methods 0.000 claims description 5
- 238000005859 coupling reaction Methods 0.000 claims description 5
- 238000000034 method Methods 0.000 description 22
- 238000010586 diagram Methods 0.000 description 18
- 238000012545 processing Methods 0.000 description 17
- 239000011521 glass Substances 0.000 description 16
- 230000008569 process Effects 0.000 description 14
- 230000033001 locomotion Effects 0.000 description 12
- 238000010200 validation analysis Methods 0.000 description 12
- 230000003287 optical effect Effects 0.000 description 10
- 230000005611 electricity Effects 0.000 description 7
- 238000005516 engineering process Methods 0.000 description 7
- 239000000446 fuel Substances 0.000 description 7
- 230000000694 effects Effects 0.000 description 6
- 230000004044 response Effects 0.000 description 6
- 238000004378 air conditioning Methods 0.000 description 5
- 239000004973 liquid crystal related substance Substances 0.000 description 5
- 230000005236 sound signal Effects 0.000 description 5
- 230000001133 acceleration Effects 0.000 description 4
- 230000003321 amplification Effects 0.000 description 4
- 230000006870 function Effects 0.000 description 4
- 210000003128 head Anatomy 0.000 description 4
- 230000007774 longterm Effects 0.000 description 4
- 238000003199 nucleic acid amplification method Methods 0.000 description 4
- 238000012706 support-vector machine Methods 0.000 description 4
- KLDZYURQCUYZBL-UHFFFAOYSA-N 2-[3-[(2-hydroxyphenyl)methylideneamino]propyliminomethyl]phenol Chemical compound OC1=CC=CC=C1C=NCCCN=CC1=CC=CC=C1O KLDZYURQCUYZBL-UHFFFAOYSA-N 0.000 description 3
- 230000009471 action Effects 0.000 description 3
- 201000001098 delayed sleep phase syndrome Diseases 0.000 description 3
- 208000033921 delayed sleep phase type circadian rhythm sleep disease Diseases 0.000 description 3
- 230000007935 neutral effect Effects 0.000 description 3
- 230000004297 night vision Effects 0.000 description 3
- 241000894007 species Species 0.000 description 3
- 239000000725 suspension Substances 0.000 description 3
- 238000012360 testing method Methods 0.000 description 3
- 230000004438 eyesight Effects 0.000 description 2
- 230000001815 facial effect Effects 0.000 description 2
- 238000003709 image segmentation Methods 0.000 description 2
- 238000007726 management method Methods 0.000 description 2
- 239000011159 matrix material Substances 0.000 description 2
- 239000000203 mixture Substances 0.000 description 2
- 230000009467 reduction Effects 0.000 description 2
- 230000011218 segmentation Effects 0.000 description 2
- 239000010409 thin film Substances 0.000 description 2
- SAZUGELZHZOXHB-UHFFFAOYSA-N acecarbromal Chemical compound CCC(Br)(CC)C(=O)NC(=O)NC(C)=O SAZUGELZHZOXHB-UHFFFAOYSA-N 0.000 description 1
- 230000000996 additive effect Effects 0.000 description 1
- 230000005540 biological transmission Effects 0.000 description 1
- 238000006243 chemical reaction Methods 0.000 description 1
- 238000002485 combustion reaction Methods 0.000 description 1
- 239000000498 cooling water Substances 0.000 description 1
- 238000013500 data storage Methods 0.000 description 1
- 230000002708 enhancing effect Effects 0.000 description 1
- 239000002803 fossil fuel Substances 0.000 description 1
- 238000005286 illumination Methods 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 230000013011 mating Effects 0.000 description 1
- 239000012528 membrane Substances 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000001151 other effect Effects 0.000 description 1
- 230000002093 peripheral effect Effects 0.000 description 1
- 230000005622 photoelectricity Effects 0.000 description 1
- 229920001296 polysiloxane Polymers 0.000 description 1
- 238000012827 research and development Methods 0.000 description 1
- 210000001525 retina Anatomy 0.000 description 1
- 238000009738 saturating Methods 0.000 description 1
- 238000001931 thermography Methods 0.000 description 1
Classifications
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01C—MEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
- G01C21/00—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
- G01C21/26—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
- G01C21/34—Route searching; Route guidance
- G01C21/3407—Route searching; Route guidance specially adapted for specific applications
- G01C21/3415—Dynamic re-routing, e.g. recalculating the route when the user deviates from calculated route or after detecting real-time traffic data or accidents
-
- G—PHYSICS
- G08—SIGNALLING
- G08G—TRAFFIC CONTROL SYSTEMS
- G08G1/00—Traffic control systems for road vehicles
- G08G1/09—Arrangements for giving variable traffic instructions
- G08G1/0962—Arrangements for giving variable traffic instructions having an indicator mounted inside the vehicle, e.g. giving voice messages
- G08G1/0968—Systems involving transmission of navigation instructions to the vehicle
- G08G1/0969—Systems involving transmission of navigation instructions to the vehicle having a display in the form of a map
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
- B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01C—MEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
- G01C21/00—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
- G01C21/26—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
- G01C21/34—Route searching; Route guidance
- G01C21/3453—Special cost functions, i.e. other than distance or default speed limit of road segments
- G01C21/3492—Special cost functions, i.e. other than distance or default speed limit of road segments employing speed data or traffic data, e.g. real-time or historical
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01C—MEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
- G01C21/00—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
- G01C21/26—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
- G01C21/34—Route searching; Route guidance
- G01C21/36—Input/output arrangements for on-board computers
- G01C21/3602—Input other than that of destination using image analysis, e.g. detection of road signs, lanes, buildings, real preceding vehicles using a camera
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01C—MEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
- G01C21/00—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
- G01C21/26—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
- G01C21/34—Route searching; Route guidance
- G01C21/36—Input/output arrangements for on-board computers
- G01C21/3626—Details of the output of route guidance instructions
- G01C21/3647—Guidance involving output of stored or live camera images or video streams
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01C—MEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
- G01C21/00—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
- G01C21/26—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
- G01C21/34—Route searching; Route guidance
- G01C21/36—Input/output arrangements for on-board computers
- G01C21/3626—Details of the output of route guidance instructions
- G01C21/365—Guidance using head up displays or projectors, e.g. virtual vehicles or arrows projected on the windscreen or on the road itself
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01C—MEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
- G01C21/00—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
- G01C21/26—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
- G01C21/34—Route searching; Route guidance
- G01C21/36—Input/output arrangements for on-board computers
- G01C21/3626—Details of the output of route guidance instructions
- G01C21/3658—Lane guidance
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01C—MEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
- G01C21/00—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
- G01C21/26—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
- G01C21/34—Route searching; Route guidance
- G01C21/36—Input/output arrangements for on-board computers
- G01C21/3697—Output of additional, non-guidance related information, e.g. low fuel level
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/50—Context or environment of the image
- G06V20/56—Context or environment of the image exterior to a vehicle by using sensors mounted on the vehicle
- G06V20/58—Recognition of moving objects or obstacles, e.g. vehicles or pedestrians; Recognition of traffic objects, e.g. traffic signs, traffic lights or roads
- G06V20/582—Recognition of moving objects or obstacles, e.g. vehicles or pedestrians; Recognition of traffic objects, e.g. traffic signs, traffic lights or roads of traffic signs
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/50—Context or environment of the image
- G06V20/56—Context or environment of the image exterior to a vehicle by using sensors mounted on the vehicle
- G06V20/588—Recognition of the road, e.g. of lane markings; Recognition of the vehicle driving pattern in relation to the road
-
- G—PHYSICS
- G08—SIGNALLING
- G08G—TRAFFIC CONTROL SYSTEMS
- G08G1/00—Traffic control systems for road vehicles
- G08G1/09—Arrangements for giving variable traffic instructions
- G08G1/0962—Arrangements for giving variable traffic instructions having an indicator mounted inside the vehicle, e.g. giving voice messages
- G08G1/0968—Systems involving transmission of navigation instructions to the vehicle
- G08G1/096855—Systems involving transmission of navigation instructions to the vehicle where the output is provided in a suitable form to the driver
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
- G09G5/003—Details of a display terminal, the details relating to the control arrangement of the display terminal and to the interfaces thereto
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
- G09G5/02—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators characterised by the way in which colour is displayed
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G2320/00—Control of display operating conditions
- G09G2320/06—Adjustment of display parameters
- G09G2320/0666—Adjustment of display parameters for control of colour parameters, e.g. colour temperature
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G2320/00—Control of display operating conditions
- G09G2320/06—Adjustment of display parameters
- G09G2320/068—Adjustment of display parameters for control of viewing angle adjustment
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G2320/00—Control of display operating conditions
- G09G2320/06—Adjustment of display parameters
- G09G2320/0686—Adjustment of display parameters with two or more screen areas displaying information with different brightness or colours
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G2340/00—Aspects of display data processing
- G09G2340/04—Changes in size, position or resolution of an image
- G09G2340/045—Zooming at least part of an image, i.e. enlarging it or shrinking it
Landscapes
- Engineering & Computer Science (AREA)
- Radar, Positioning & Navigation (AREA)
- Remote Sensing (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Automation & Control Theory (AREA)
- Theoretical Computer Science (AREA)
- Multimedia (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Computer Hardware Design (AREA)
- Transportation (AREA)
- Mechanical Engineering (AREA)
- Combustion & Propulsion (AREA)
- Chemical & Material Sciences (AREA)
- Traffic Control Systems (AREA)
- Navigation (AREA)
- Human Computer Interaction (AREA)
- Image Processing (AREA)
- Life Sciences & Earth Sciences (AREA)
- Atmospheric Sciences (AREA)
- Biodiversity & Conservation Biology (AREA)
- Ecology (AREA)
- Environmental & Geological Engineering (AREA)
- Environmental Sciences (AREA)
Abstract
用于车辆的显示设备和车辆。本发明涉及一种用于车辆的显示设备,该显示设备包括:显示器;以及处理器,该处理器被配置为控制所述显示器以通过使TBT图像与显示在所述显示器上的地图上的路线上的点匹配来将所述TBT图像显示在所述点处,所述点与正行驶有所述车辆的车道对应。
Description
技术领域
本发明涉及用于车辆的显示设备和包括该显示设备的车辆。
背景技术
车辆是用于运送人或货物的机器。车辆的一个示例是汽车。
车辆可以包括一个或更多个显示设备。能够通过配备在车辆中的显示设备来提供导航功能。
驾驶员能够使用通过显示设备提供的导航功能来方便且安全地将车辆驾驶到目的地。然而,通过常规的显示设备提供的导航功能基于存储在存储器中的数据或者通过通信接收的数据来提供信息。因此,不能够在导航功能中正确地反映车辆的当前状态。
因此,为了克服这些问题,存在对于对用于车辆的显示设备的研究和开发的需要,该车辆具有在该车辆正被驾驶的同时实时地应用通过包括在该车辆中的各种传感器获取的信息的导航功能。
发明内容
因此,已经考虑到以上问题做出了本发明,并且本发明的目的在于提供一种用于车辆的显示设备,该显示设备使TBT图像与和在地图上的路线上正行驶有车辆的车道对应的点匹配,并且将所述TBT图像显示在该点上。
可从本发明获得的技术任务不限于上述技术任务。另外,本发明所属的技术领域内的普通技术人员能够从以下描述清楚地理解其它未提到的技术任务。
为了实现本发明的目的,本发明的一个实施方式提供了一种用于车辆的显示设备,该显示设备包括:显示器;以及处理器,该处理器被配置为控制显示器以通过使TBT图像与显示在所述显示器上的地图上的路线上的点匹配来将所述TBT图像显示在所述点处,所述点与正行驶有所述车辆的车道对应。
为了实现本发明的目的,本发明的一个实施方式提供了一种包括显示设备的车辆。
为了实现本发明的目的,本发明的一个实施方式提供了一种包括用于车辆的显示设备的车辆。
其它实施方式的细节被包括在详细描述和附图中。
本发明具有以下优点。
首先,能够通过凭借使正行驶有对应车辆的车道与地图上的路线匹配来显示TBT图像,提供更准确且正确的信息。
其次,能够通过使与信息对应的图像显示在与正行驶有对应车辆的车道对应的挡风玻璃区域中,高效地提供信息而不会使用户的目光分散。
第三,能够通过不同地显示分别与正行驶有车辆的车道、要被改变至的车道以及路线上的车道对应的挡风玻璃区域,使得用户能够正确地识别路线。
第四,能够通过向图像添加动画效果,吸引用户的注意以改进与信息对应的图像的可视性。
第五,能够通过与其它图像不同地显示与重要信息对应的图像,改进重要信息的发送。
第六,能够通过基于通过TSR获取的交通信息或者从其它车辆接收的信息来改变路线并且将改变后的路线提供给用户,减少到目的地的行驶时间。
第七,能够通过响应于情况改变来向TBT图像添加效果或者用三维形式来显示TBT图像,改进向用户的信息发送。
本发明的效果不限于上述效果,并且对于本领域技术人员而言,本文中未描述的其它效果从以下描述中将变得显而易见。
附图说明
将从结合附图进行的以下详细描述更清楚地理解本发明的上述及其它目的、特征和其它优点。
图1示出了根据本发明的实施方式的包括用于车辆的显示设备的车辆的外部。
图2A、图2B和图2C是用于说明根据本发明的实施方式的包括在图1中所示的车辆中的驾驶员辅助设备的图。
图3A、图3B和图3C是根据本发明的各种实施方式的驾驶员辅助设备的框图。
图4A和图4B是图3A、图3B和图3C中所示的处理器的框图。
图5A和图5B是用于说明图4A中所示的处理器170基于分别在第一帧间隔和第二帧间隔中获取的立体图像的操作的图。
图6A和图6B是用于说明图3A、图3B和图3C中所示的驾驶员辅助设备的操作的图。
图7是图1中所示的车辆的内部框图。
图8A是根据本发明的实施方式的用于车辆的显示设备的框图。
图8B是例示了根据本发明的实施方式的用于车辆的显示设备的操作的流程图。
图9是用于说明根据本发明的实施方式的使TBT图像与和正行驶有对应车辆的车道对应的点匹配并且将TBT图像显示在与正行驶有对应车辆的车道对应的点上的操作的图。
图10A和图10B是用于说明根据本发明的实施方式的在挡风玻璃的区域中实现的画面的图。
图11A和图11B是用于说明根据本发明的实施方式的显示与车道改变对应的图像的操作的图。
图12是用于说明根据本发明的实施方式的显示与多个岔路(fork)对应的区域的操作的图。
图13A、图13B、图13C、图13D、图13E、图13F、图13G、图13H、图13I、图13J、图13K和图13L是用于说明根据本发明的实施方式的显示与信息对应的图像的操作的图。
图14A和图14B是用于说明根据本发明的实施方式的显示信息的操作的图。
图15A、图15B和图15C是用于说明根据本发明的实施方式的当预置了目的地时显示图像的操作的图。
图16是用于说明根据本发明的实施方式的在挡风玻璃的与要被改变至的车道对应的区域中显示图像的操作的图。
图17A、图17B和图17C是用于说明根据本发明的实施方式的基于从驾驶员辅助设备接收的交通信息来改变路线的操作的图。
图18A、图18B和图18C是用于说明根据本发明的实施方式的基于从其它车辆接收的交通信息来改变路线的操作的图。
图19A和图19B是用于说明根据本发明的实施方式的显示TBT图像的操作的图。
图20A和图20B是用于说明根据本发明的实施方式的显示与高乘载车辆车道信息对应的图像的操作的图。
具体实施方式
现在将参照附图更具体地描述本发明。用来表示组件的术语“模块”和“单元”在本文中被用来辅助理解组件,并因此它们不应被认为具有特定的含义或作用。因此,可以可交换地使用术语“模块”和“单元”。在本发明的以下描述中,本文并入的已知功能和配置的详细描述当其可能使本发明的主题模糊时将被省略。附图例示了本发明的示例性实施方式并且提供对本发明更详细的描述。然而,本发明的范围不应该限于此。应当理解,不存在将本发明限制到所公开的特定形式的意图。相反地,本发明是为了涵盖落入如由权利要求所限定的本发明的精神和范围内的所有修改、等同物以及替代方案。
尽管包括诸如第一或第二这样的序数的术语能够被用来描述各种组成元件,然而这些组成元件不应该限于这些术语,并且这些术语仅被用于将一个组成元件和其它组成元件区分开的目的。
将理解的是,在以下描述中,当元件被“连接”或“联接”至另一元件时,该元件能够被直接连接或联接至另一元件或者在它们之间可以存在中间元件。相比之下,当元件被“直接连接”或“直接联接”至另一元件时,不存在中间元件。
除非上下文另外清楚地指示,否则单数形式旨在也包括复数形式。
还将要理解的是,术语“包括”或“具有”当在本说明书中使用时指定说明的特征、区域、整体、步骤、操作、元件和/或组件的存在,但是不排除一个或更多个其它特征、区域、整体、步骤、操作、元件、组件和/或其组的存在或添加。
本说明书中描述的车辆可以包括汽车和摩托车。在下文中将汽车作为车辆进行描述。
本说明书中描述的车辆可以包括具有引擎作为动力源的内燃机车辆、具有引擎和电动机作为动力源的混合车辆以及具有电动机作为动力源的电动车辆。
在以下描述中,车辆的左侧意指车辆的行驶方向的左侧,并且车辆的右侧意指车辆的行驶方向的右侧。
除非另外提到,否则以下描述是基于左手驾驶(LHD)车辆的。
图1示出了根据本发明的实施方式的包括用于车辆的显示设备的车辆的外部。
如所示,车辆700可以包括:通过动力源转动的车轮103FR、103FL和103RR;用于驾驶车辆700的转向单元;以及设置到车辆700的内部的用于车辆的驾驶员辅助设备100。
驾驶员辅助设备100可以包括至少一个相机,并且由所述至少一个相机获取的图像可以在处理器中被处理成信号。
图1示出了驾驶员辅助设备100包括两个相机。
总体长度意指车辆700的前部与后部之间的长度,宽度意指车辆700的宽度,并且高度意指车轮的下部与车辆的顶部之间的距离。在以下描述中,总体长度方向L可以是指测量车辆700的总体长度的方向,宽度方向W可以是指测量车辆700的宽度的方向,并且高度方向H可以是指测量车辆700的高度的方向。
图2A、图2B和图2C是用于说明根据本发明的实施方式的包括在图1中所示的车辆中的驾驶员辅助设备的图。
将给出对于包括用于获取车辆的前视图图像的相机195a和195b的驾驶辅助装置的描述。
虽然图2A示出了驾驶员辅助设备100包括两个相机,但是相机的数目不限于此。
如所示,驾驶员辅助设备100可以包括具有第一透镜193a的第一相机195a以及具有第二透镜193b的第二相机195b。在这种情况下,相机195可以被称作立体相机。
另外,驾驶员辅助设备100可以包括用于分别屏蔽输入到第一透镜193a和第二透镜193b的光的第一遮光罩192a和第二遮光罩192b。
驾驶员辅助设备100可以具有能够附接至车辆700的顶篷或挡风玻璃的结构/从车辆700的顶篷或挡风玻璃拆卸的结构。
驾驶员辅助设备100能够从第一相机195a和第二相机195b获取车辆前面的区域的立体图像,基于所述立体图像来执行视差检测,基于视差信息针对至少一个立体图像来检测对象,并且在检测对象之后不断地跟踪对象的移动。
将参照图2B和图2C给出对于包括用于获取车辆的全景图像的相机195d、195e、195f和195g的驾驶辅助装置的描述。
虽然图2B和图2C示出了驾驶员辅助设备100包括四个相机,但是相机的数目不限于此。
如所示,驾驶员辅助设备100可以包括多个相机195d、195e、195f和195g。在这种情况下,相机195可以被称作全景相机。
所述多个相机195d、195e、195f和195g可以被布置在车辆的左面、后面、右面和前面。左相机195d可以被设置到左侧视镜的壳体的内部。另外,左相机195d可以被设置到左侧视镜的壳体的外部。另选地,左相机195d可以被设置到左前门、左后门或左挡泥板的外部的区域。
右相机195f可以被设置到右侧视镜的壳体的内部。另外,右相机195d可以被设置到右侧视镜的壳体的外部。另选地,右相机195d可以被设置到右前门、右后门或右挡泥板的外部的区域。
后相机195e可以被设置到后牌照或靠近车辆的干线开关。前相机195g可以被设置为靠近车辆的标志或散热器护栅。
由多个相机195d、195e、195f和195g拍摄的图像被发送到处理器170。处理器170能够通过将相应的图像进行组合来生成车辆的全景图像。
图2C示出了车辆的示例性全景图像。车辆的全景图像201可以包括由左相机195d拍摄的第一图像区域195di、由后相机195e拍摄的第二图像区域195ei、由右相机195f拍摄的第三图像区域195fi以及由前相机195g拍摄的第四图像区域195gi。
全景图像201可以被显示为顶视图图像或鸟瞰图像。
当从多个相机生成全景图像时,生成了图像区域之间的边界。可以通过图像混合来平滑地显示边界。
另外,可以使边界线202a、202b、202c和202d显示在多个图像的边界上。
车辆的全景图像201可以包括车辆图像700i。车辆图像700i可以是由处理器170生成的图像。
可以通过车辆的显示器741或者驾驶员辅助设备100的显示器180来显示车辆的全景图像201。
图3A、图3B和图3C是根据本发明的各种实施方式的驾驶员辅助设备的框图。
图3A和图3B中所示的驾驶员辅助设备100可以基于计算机视觉来对从相机195接收的图像进行处理,以便生成车辆相关信息。这里,车辆相关信息可以包括用于直接控制车辆的车辆控制信息或者用于向车辆驾驶员提供驾驶指导的车辆驾驶辅助信息。
这里,相机195可以是单目相机。另外,相机197可以是用于对车辆的前视图图像进行拍照的立体相机195a和195b。另选地,相机195可以是用于对车辆的全景图像进行拍照的全景相机195d、195e、195f和195g。
图3A是根据本发明的实施方式的驾驶员辅助设备100的框图。
参照图3A,驾驶员辅助设备100可以包括输入单元110、通信单元120、接口130、存储器140、处理器170、电源190、相机195、显示器180以及音频输出单元185。
输入单元110可以包括附接至驾驶员辅助设备100(具体地为相机195)的多个按钮或触摸屏。能够通过所述多个按钮或触摸屏来开启和操作驾驶员辅助设备100。另外,可以通过这些按钮或触摸屏来执行各种输入操作。
通信单元120可以按照无线方式来与移动终端600或服务器510交换数据。具体地,通信单元120可以按照无线方式与车辆驾驶员的移动终端交换数据。诸如Bluetooth、Wi-Fi直连、Wi-Fi、APiX和NFC这样的各种数据通信方案可以被采用作为无线数据通信方案。
通信单元120可以从移动终端600或服务器510接收天气信息和交通信息,例如传输协议专家组(TPEG)信息。驾驶员辅助设备100可以将获取的实时信息发送到服务器510或移动终端600。
当用户进入车辆时,可以自动地或者根据由用户对应用的执行来使驾驶员辅助设备100和用户的移动终端600配对。
通信单元120可以从外部服务器510接收关于交通灯改变的信息。这里,外部服务器510可以是位于交通控制中心处的服务器。
接口130可以接收车辆相关数据,并且将在处理器170中处理或生成的信号发送到外部。为此,接口130可以通过有线或无线通信方案来执行与设置到车辆内部的控制器770、用于车辆的显示设备400和车辆的感测单元760的数据通信。
接口130可以通过与控制器770、用于车辆的显示设备400或单独的导航***的数据通信来接收导航信息。导航信息可以包括关于设置的目的地的信息、取决于目的地的路线信息、与车辆的行驶有关的地图信息以及关于车辆的当前位置的信息。另外,导航信息可以包括关于车辆在道路上的位置的信息。
接口130可以从控制器770或感测单元760接收传感器信息。这里,传感器信息可以包括下面的项中的至少一个:车辆方向信息、车辆位置信息(GPS信息)、车辆前进方向信息、车辆速度信息、车辆加速信息、车辆倾斜信息、关于车辆的向前/向后移动的信息、电池信息、燃料信息、轮胎信息、车辆灯信息、车辆内部温度信息以及车辆内部湿度信息。
可以从前进方向传感器、偏航传感器、陀螺仪传感器、位置模块、车辆前/后传感器、车轮传感器、速度传感器、汽车主体倾斜传感器、电池传感器、燃料传感器、轮胎传感器、转向传感器、车辆内部温度传感器、车辆内部湿度传感器等获取这些传感器信息。位置模块可以包括用于接收GPS信息的GPS模块。
从传感器信息当中,与车辆的行驶有关的车辆方向信息、车辆位置信息、车辆前进方向信息、车辆速度信息和车辆倾斜信息可以被称作车辆行驶信息。
存储器140可以存储用于驾驶员辅助设备100的总体操作的各种类型的数据(诸如用于处理或控制处理器170的程序)。
存储器140可以存储用于对象识别的数据。例如,当从通过相机195获取的图像中检测到预定对象时,存储器能够存储用于根据预定算法来识别对象的数据。
存储器140可以存储与交通信息有关的数据。例如,当从通过相机195获取的图像中检测到预定交通信息时,存储器140能够存储用于根据预定算法来识别交通信息的数据。
存储器140可以是诸如ROM、RAM、EPROM、闪存驱动器和硬盘驱动器这样的存储装置。
处理器170控制驾驶员辅助设备100的每个单元的总体操作。
处理器170可以处理由相机195获取的车辆的前视图图像或全景图像。具体地,处理器170执行基于计算机视觉的信号处理。因此,处理器170能够从相机195获取车辆的前视图图像或全景图像,并且基于所获取的图像来执行对象检测和对象跟踪。具体地,处理器170能够在对象检测期间执行车道检测(LD)、车辆检测(VD)、行人检测(PD)、亮点检测(BD)、交通标志识别(TSR)、路面检测等。
交通标志可以是指能够被发送到车辆700的驾驶员的预定信息。交通标志能够通过交通灯、道路标志或路面被发送到驾驶员。例如,交通标志可以是从交通灯输出的针对车辆或行人的“走”或“停”标志。交通标志可以是道路标志上指示的符号或文本。例如,交通标志可以是路面上指示的符号或文本。
处理器170可以从通过相机195获取的车辆的前视图图像或全景图像中检测信息。所述信息可以是关于车辆行驶情况的信息。例如,所述信息能够包括关于行驶有车辆的道路的信息、交通规则、关于相邻的车辆的信息、关于针对车辆或行人的交通灯的信息、关于施工的信息、交通情况信息、停车信息、车道信息等。
所述信息可以是交通信息。处理器170可以从包括在由相机195获取的图像中的交通灯、道路标志、交通电子标志牌和路面中的一个中检测交通信息。例如,处理器170能够从包括在图像中的交通灯中检测针对车辆或行人的“走”或“停”标志。处理器170能够从包括在图像中的道路标志中检测符号或文本。处理器170能够从包括在图像中的路面中检测符号或文本。处理器170能够从包括在由相机195捕获的图像中的道路标志图像中检测关于行驶有车辆的道路的路况信息、事故信息或道路施工信息。
处理器170可以将所检测的信息与存储在存储器140中的信息进行比较,以识别信息。例如,处理器170能够根据包括在所获取的图像中的对象来检测车道的存在或不存在。这里,所述对象可以是道路的表面。
处理器170可以基于所检测的车道的颜色或形状来检查所检测的车道的类型。例如,处理器170能够基于所检测的车道是白色还是黄色来检查所检测的车道是否是中间车道。处理器170能够基于所检测的车道是实线还是虚线来检查所检测的车道是否是可改变的车道。
另外,处理器170可以控制相机195的变焦。例如,处理器170能够根据对象检测结果来控制相机195的变焦。当检测到道路标志但是未检测到道路标志上的标志时,处理器170能够控制相机195以放大。
此外,处理器170可以通过通信单元120来接收天气信息和关于道路的交通情况信息(例如传输协议专家组(TPEG)信息)。
处理器170可以基于图像来识别由驾驶员辅助设备100检测的关于车辆周围的交通情况的信息。
处理器170可以通过接口130从用于车辆的显示设备400或单独的导航***(未示出)接收导航信息等。
处理器170可以通过接口130从控制器770或感测单元760接收传感器信息。这里,传感器信息可以包括以下项中的至少一个:车辆方向信息、车辆位置信息(GPS信息)、车辆前进方向信息、车辆速度信息、车辆加速信息、车辆倾斜信息、车辆向前/向后移动信息、电池信息、燃料信息、轮胎信息、车辆灯信息、车辆内部温度信息、车辆内部湿度信息以及转向车轮转动信息。
处理器170可以通过接口130从控制器770、用于车辆的显示设备400或单独的导航***(未示出)接收导航信息。
可以使用下面的项中的一个来实现处理器170:专用集成电路(ASIC)、数字信号处理器(DSP)、数字信号处理器件(DSPD)、可编程逻辑器件(PLD)、现场可编程门阵列(FPGA)、处理器、控制器、微控制器、微处理器以及用于执行对应功能的其它电单元。
处理器170可以由控制器770来控制。
显示器180可以显示由处理器170处理的信息。显示器180可以显示与驾驶员辅助设备100的操作有关的图像。对于这种图像显示,显示器180可以包括设置到车辆内部的前部的仪表板或平视显示器(HUD)。当显示器180是HUD时,可以将用于投影图像的投影模块设置到车辆700的挡风玻璃。
音频输出单元185可以输出基于由处理器170处理的音频信号的声音。为此,音频输出单元185可以包括至少一个扬声器。
音频输入单元(未示出)可以接收用户语音。为此,音频输入单元可以包括麦克风。所接收的语音可以被转换成电信号并且发送到处理器170。
电源190可以在处理器170的控制下供应对于操作组件所需的电力。电源190可以被提供有来自车辆的电池的电力。
相机195获取车辆的前视图图像或全景图像。相机195可以是用于对车辆的前视图图像进行拍照的单目相机或立体相机195a和195b。相机195可以是用于对车辆的全景图像进行拍照的全景相机195d、195e、195f和195g。
相机195可以包括图像传感器(例如,CMOS或CCD)和图像处理模块。相机195可以对由图像传感器获取的静止图像或视频进行处理。图像处理模块可以对通过图像传感器获取的静止图像或视频进行处理。图像处理模块可以根据实施方式与处理器170分开配置或者与处理器170集成在一起。
相机195可以拍摄交通灯、道路标志、交通电子标志牌和路面中的至少一个的图像。
可以在处理器170的控制下设置相机195的变焦。例如,在处理器170的控制下使包含在相机195中的变焦镜筒(未示出)移动以设置变焦。
可以在处理器170的控制下设置相机195的焦距。例如,在处理器170的控制下使包含在相机195中的焦距镜筒(未示出)移动以设置焦距。可以基于变焦设置来自动地设置焦距。处理器170可以响应于相机195的变焦控制来自动地控制焦距。
图3B是根据本发明的另一实施方式的驾驶员辅助设备100的框图。
参照图3B,驾驶员辅助设备100与图3A的驾驶员辅助设备100的不同之处在于前者包含立体相机195a和195b。以下描述是基于这种差异的。
驾驶员辅助设备100可以包括第一相机195a和第二相机195b。这里,第一相机195a和第二相机195b能够被称作立体相机。
立体相机195a和195b可以附接至车辆700的顶篷或挡风玻璃/从车辆700的顶篷或挡风玻璃拆卸。立体相机195a和195b可以包括第一透镜193a和第二透镜193b。
另外,立体相机195a和195b可以包括用于分别屏蔽输入到第一透镜193a和第二透镜193b的光的第一遮光罩192a和第二遮光罩192b。
第一相机195a获取车辆的第一前视图图像,并且第二相机195b获取车辆的第二前视图图像。第二相机195b与第一相机195a间隔开预定距离。因为第一相机195a和第二相机195b彼此间隔开,所以产生了视差,并因此能够检测根据视差的第一相机195a和第二相机195b与对象之间的距离。
当驾驶员辅助设备100包含立体相机195a和195b时,处理器170执行基于计算机视觉的信号处理。因此,处理器170能够从立体相机195a和195b获取车辆的前视图的立体图像,基于所述立体图像来计算关于车辆的前视图的视差,基于所计算的视差来执行针对立体图像中的至少一个的对象检测,检测对象并且不断地跟踪所检测的对象的运动。这里,立体图像是基于从第一相机195a接收的第一图像和从第二相机195b接收的第二图像的。
具体地,处理器170可以在对象检测期间执行车道检测(LD)、车辆检测(VD)、行人检测(PD)、亮点检测(BD)、交通标志识别(TSR)、路面检测等。
另外,处理器170可以执行计算到所检测的相邻车辆的距离、计算所检测的车辆的速度、计算对应车辆700与所检测的车辆之间的速度差等。
处理器170可以单独地控制第一相机195a和第二相机195b的变焦。处理器170可以在使第一相机195a的变焦固定的同时定期地改变第二相机195b的变焦率。处理器170可以在使第二相机195b的变焦固定的同时定期地改变第一相机195a的变焦率。
处理器170可以控制第一相机195a或第二相机195b以定期地放大或缩小。
处理器170可以将第一相机195a的变焦设置为高放大率,以用于长距离处的对象检测。另外,处理器170可以将第二相机195b的变焦设置为低放大率,以用于短距离处的对象检测。这里,处理器170可以控制第一相机195a以放大,并且控制第二相机195b以缩小。
相反,处理器170可以将第一相机195a的变焦设置为低放大率,以用于短距离处的对象检测。另外,处理器170可以将第二相机195b的变焦设置为高放大率,以用于长距离处的对象检测。这里,处理器170可以控制第一相机195a以缩小,并且控制第二相机195b以放大。
例如,处理器170能够根据对象检测结果来控制第一相机195a或第二相机195b的变焦。当检测到道路标志但是未检测到道路标志上的标志时,处理器170能够控制第一相机195a或第二相机195b以放大。
处理器170可以响应于相机195的变焦控制来自动地控制焦距。
图3C是根据本发明的另一实施方式的驾驶员辅助设备100的框图。
参照图3C,驾驶员辅助设备100与图3A的车辆驾驶辅助装置100的不同之处在于前者包含全景相机195d、195e、105f和195g。以下描述是基于这种差异的。
驾驶员辅助设备100可以包括全景相机195d、195e、195f和195g。全景相机195d、195e、195f和195g可以分别包含透镜和用于屏蔽输入到透镜的光的遮光罩。全景相机195d、195e、195f和195g可以包括左相机195d、后相机195e、右相机195f和前相机195g。左相机195d获取车辆的左侧视图图像,并且后相机195e获取车辆的后视图图像。右相机195f获取车辆的右侧视图图像,并且前相机195g获取车辆的前视图图像。
通过全景相机195d、195e、195f和195g获取的图像被发送到处理器170。处理器170可以通过将车辆的左侧视图图像、后视图图像、右侧视图图像和前视图图像进行组合来生成车辆的全景图像。这里,车辆的全景图像可以是顶视图图像或鸟瞰视图图像。处理器170可以通过分别接收车辆的左侧视图图像、后视图图像、右侧视图图像和前视图图像、将所接收的图像进行组合并且将经组合的图像转换成顶视图图像来生成全景图像。
处理器170可以基于车辆的全景图像来检测对象。具体地,处理器170可以在对象检测期间执行车道检测(LD)、车辆检测(VD)、行人检测(PD)、亮点检测(BD)、交通标志识别(TSR)、路面检测等。
此外,处理器170可以单独地控制全景相机195d、195e、195f和195g的变焦。可以按照与关于参照图3B描述的立体相机的方式相同的方式来执行处理器170的变焦控制。
图4A和图4B是图3A、图3B和图3C中所示的处理器的框图,并且图5A和图5B是用于说明图4A和图4B中所示的处理器的操作的图。
参照图4A,包含在驾驶员辅助设备100中的处理器170可以包括图像预处理器401、视差计算器402、对象检测器404、对象跟踪单元406和应用单元407。
图像预处理器401可以从相机195接收图像,并且对该图像进行预处理。具体地,图像预处理器401可以对图像执行降噪、矫正、校准、颜色增强、颜色空间转换(CSC)、内插、相机增益控制等。因此,能够获取比由相机195拍摄的立体图像清楚的图像。
视差计算器402可以接收由图像预处理器401处理的图像,对所接收的图像执行立体匹配,并且根据立体匹配来获取视差图。也就是说,视差计算器402能够获取关于车辆的前视图的立体图像的视差信息。
这里,能够按照立体图像的像素或者在逐块的基础上执行立体匹配。视差图是指将立体图像(即,左图像和右图像)的双目视差信息表示为数字值的图。
分段单元403可以基于来自视差计算器402的视差信息来对至少一个图像执行分段和聚类。具体地,分段单元403可以基于视差信息使背景和前景分离开立体图像中的至少一个。
例如,分段单元403能够计算视差图中的与小于预定值的视差信息对应的区域作为背景,并且去除对应的区域。因此,能够相对地使前景分开。
另选地,分段单元403能够计算视差图中的与超过预定值的视差信息对应的区域作为前景,并且提取对应的区域,因此使前景分开。
当根据基于立体图像提取的视差信息使前景和背景分开时,能够提高信号处理速度,并且能够在对象检测期间减少被处理的信号的量。
对象检测器404可以基于分段单元403的图像分段来检测对象。也就是说,对象检测器404可以基于视差信息从至少一个图像中检测对象。
具体地,对象检测器404可以从至少一个图像中检测对象。例如,对象检测器404能够从根据图像分段而分开的前景中检测对象。
对象验证单元405可以对经检测的对象进行分类和验证。为此,对象验证单元405可以使用利用神经网络的识别方法、支持向量机(SVM)方法、根据利用Harr型特征的AdaBoost的识别方法、方向梯度直方图(HOG)方法等。
对象验证单元405可以通过将所检测的对象与存储器140中存储的对象进行比较来验证所检测的对象。例如,对象验证单元405能够验证位于对应车辆周围的车辆、车道、路面、道路标志、危险区域、隧道等。
对象跟踪单元406可以跟踪经验证的对象。例如,对象跟踪单元406能够验证包含在依次获取的立体图像中的对象,计算所验证的对象的运动或运动向量,并且基于所计算的运动或运动向量来跟踪对象的运动。因此,对象跟踪单元406能够跟踪对应车辆周围的车辆、车道、路面、道路标志、危险区域、隧道等。
应用单元407可以基于车辆周围的各种对象(例如,其它车辆、车道、路面、道路标志等)来计算车辆700的汽车事故风险的程度。另外,应用单元407可以计算车辆的追尾碰撞、打滑等的可能性。
此外,应用单元407可以基于所计算的危险、追尾碰撞可能性或车辆打滑来将用于向用户通知关于所计算的危险、追尾碰撞可能性或车辆打滑的信息的消息输出作为车辆驾驶辅助信息。另外,应用单元407可以生成用于车辆700的姿态控制或行驶控制的控制信号作为车辆控制信息。
图像预处理器401、视差计算器402、分段单元403、对象检测器404、对象验证单元405、对象跟踪单元406和应用单元407可以是图7和以下图中的处理器170中的图像处理器810的内部组件。
根据一个实施方式,处理器170可以包括图像预处理器401、视差计算器402、分段单元403、对象检测器404、对象验证单元405、对象跟踪单元406和应用单元407中的一部分。当相机195被配置为单目相机或全景相机时,可以根据实施方式不包括视差计算器402。此外,可以根据实施方式不包括分段单元403。
图4B是根据本发明的另一实施方式的处理器的框图。
如所示,图4B的处理器170具有与图4A的处理器170相同的内部组件单元,但是关于信号处理顺序与图4A的处理器170不同。以下仅描述这种差异。
对象检测器404接收立体图像,并且从至少一个立体图像中检测对象。区别于图4A中所示的处理器170,对象检测器404可以直接从立体图像中检测对象,而不是基于视差信息从经分段的图像中检测对象。
对象验证单元405基于来自分段单元403的图像段以及由对象检测器404检测的对象来对所检测的且分开的对象进行分类和验证。
为此,对象验证单元405可以使用利用神经网络的识别方法、支持向量机(SVM)方法、根据利用Haar型特征的AdaBoost的识别方法或者方向梯度直方图(HOG)方法。
图5A和图5B是用于说明图4A中所示的处理器170基于分别在第一帧间隔和第二帧间隔中获取的立体图像的操作的图。
参照图5A,立体相机195在第一帧间隔中获取立体图像。包含在处理器170中的视差计算器420接收由图像预处理器410处理成信号的立体图像FR1a和FR1b,并且对所接收的立体图像FR1a和FR1b执行立体匹配以便获取视差图520。
视差图520表示立体图像FR1a与FR1b之间的视差的水平。到车辆的距离随着视差水平增加而被识别为更短,并且随着视差水平降低而被识别为更长。
当显示视差图时,较高视差水平可以被呈现为较高亮度,并且较低视差水平可以被呈现为较低亮度。
在图5A中,第一车道528a、第二车道528b、第三车道528c和第四车道528d分别具有与其对应的视差水平,并且施工区域522、第一前方车辆524和第二前方车辆526在视差图520中分别具有与其对应的视差水平。
分段单元432、对象检测器434和对象验证单元436基于视差图520来对立体图像FR1a和FR1b中的至少一个分别执行分段、对象检测和对象验证。
图5A例示了使用视差图520来对第二立体图像FR1b执行对象检测和验证。也就是说,能够检测和验证图像530中的第一车道538a、第二车道538b、第三车道538c和第四车道538d、施工区域532、第一前方车辆534以及第二前方车辆536。
参照图5B,立体相机195在第二帧间隔中获取立体图像。包含在处理器170中的视差计算器420接收由图像预处理器410处理成信号的立体图像FR2a和FR2b,并且对所接收的立体图像FR2a和FR2b执行立体匹配以便获取视差图540。
在图5B中,第一车道548a、第二车道548b、第三车道548c和第四车道548d分别具有与其对应的视差水平,并且施工区域542、第一前方车辆544和第二前方车辆546在视差图540中分别具有与其对应的视差水平。
分段单元432、对象检测器434和对象验证单元436基于视差图540来对立体图像FR2a和FR2b中的至少一个分别执行分段、对象检测和对象验证。
图5B例示了使用视差图540来对第二立体图像FR2b执行对象检测和验证。也就是说,能够检测并验证图像550中的第一车道548a、第二车道548b、第三车道548c和第四车道548d、施工区域542、第一前方车辆544以及第二前方车辆546。
对象跟踪单元440通过将图5A和图5B进行比较来跟踪经验证的对象。具体地,对象跟踪单元440可以基于对象的运动或运动向量来跟踪在图5A和图5B中验证的对象的移动。因此,对象跟踪单元440能够跟踪位于对应车辆周围的车道、施工区域、第一前方车辆和第二前方车辆。
图6A和图6B是用于说明图3A、图3B和图3C中所示的驾驶员辅助设备的操作的图。
图6A例示了由包含在车辆中的立体相机195拍照的车辆的前视图图像。具体地,前视图图像被显示为鸟瞰视图图像。
参照图6A,从左到右呈现了第一车道642a、第二车道644a、第三车道646a和第四车道648a,施工区域610a位于第一车道642a与第二车道644a之间,第一前方车辆620a位于第二车道644a与第三车道646a之间,并且第二前方车辆630a位于第三车道646a与第四车道648a之间。
图6B例示了由驾驶员辅助设备识别的车辆前面的情况连同各种类型的信息一起的显示。具体地,可以将图6B中所示的图像显示在驾驶员辅助设备的显示器180、用于车辆的显示设备400或者显示器741上。
图6B例示了区别于图6A的基于由立体相机185拍摄的图像的信息的显示。
参照图6B,从左到右呈现了第一车道642b、第二车道644b、第三车道646b和第四车道648b,施工区域610b位于第一车道642b与第二车道644b之间,第一前方车辆620b位于第二车道644b与第三车道646b之间,并且第二前方车辆630b位于第三车道646b与第四车道648b之间。
驾驶员辅助设备100可以通过将由立体相机195a和195b获取的立体图像处理成信号来对关于施工区域610b、第一前方车辆620b和第二前方车辆630b的对象进行验证。
图6B示出了施工区域610b、第一前方车辆620b和第二前方车辆630b的边界被增亮以便指示关于施工区域610b、第一前方车辆620b和第二前方车辆630b的对象验证。
驾驶员辅助设备100可以基于由立体相机195获取的立体图像来计算对应车辆与施工区域610b之间的距离以及第一前方车辆620b与第二前方车辆630b之间的距离。图6B例示了分别与施工区域610b、第一前方车辆620b和第二前方车辆630b对应的第一距离信息611b、第二距离信息621b和第三距离信息631b的显示。
驾驶员辅助设备100可以从控制器770或感测单元760接收关于车辆的传感器信息。具体地,驾驶员辅助设备100可以接收车辆速度、挡位信息、指示车辆的转动角度(偏航角)的偏航率和车辆前进方向信息,并且显示所接收的信息。
参照图6B,虽然车辆速度672、挡位信息671和偏航率673被显示在车辆的前视图图像的上部670上,并且前进方向信息682被显示在车辆的前视图图像的下部680上,但是各种其它示例是可能的。另外,车辆的宽度683和道路曲率信息681可以与前进方向信息682一起被显示。
驾驶员辅助设备100可以通过通信单元120或接口130来接收关于针对正行驶有车辆的道路的速度限制的信息。图6B示出了关于速度限制640b的信息的显示。
虽然驾驶员辅助设备100能够通过显示器180来显示图6B中所示的信息,但是驾驶员辅助设备100可以在无需显示该信息的情况下存储该信息。另外,驾驶员辅助设备100可以使用该信息用于各种应用。
图7是图1中所示的车辆的内部框图。
车辆700可以包括通信单元710、输入单元720、感测单元760、输出单元740、车辆驾驶单元750、存储器730、接口780、控制器770、电源790、驾驶员辅助设备100和用于车辆的显示设备400。
通信单元710可以包括用于使得能实现车辆700与移动终端600之间、车辆700与外部服务器510之间或者车辆700与另一车辆520之间的无线通信的一个或更多个模块。另外,通信单元710可以包括用于将车辆连接至一个或更多个网络的一个或更多个模块。
通信单元710可以包括广播接收模块711、无线互联网模块712、短距离通信模块713、位置信息模块714、光通信模块715和V2X通信模块716。
广播接收模块711通过广播信道从外部广播管理服务器接收广播信号或广播相关信息。这里,广播包括无线电广播和TV广播。
无线互联网模块712是指用于无线互联网接入的模块,并且可以被嵌入在车辆700中或者设置到车辆700的外部。无线互联网模块712被配置为根据无线互联网技术来在通信网络中发送和接收无线电信号。
无线互联网技术包括无线LAN(WLAN)、无线保真(Wi-Fi)、Wi-Fi直连、数字生活网络联盟(DLNA)、无线宽带(WiBro)、全球微波接入互操作性(WiMAX)、高速下行链路分组接入(HSDPA)、高速上行链路分组接入(HSUPA)、长期演进(LTE)、高级长期演进(LTE-A)等,并且无线互联网模块712根据包括上面未提及的无线互联网技术在内的无线互联网技术中的至少一种来发送和接收数据。例如,无线互联网模块712能够按照无线方式与外部服务器510交换数据。无线互联网模块712能够从外部服务器510接收天气信息和交通信息(例如,传输协议专家组(TPEG)信息)。
短距离通信模块713是用于短距离通信的模块,并且能够使用下面的项中的至少一个来支持短距离通信:BluetoothTM、射频识别(RFID)、红外数据协会(IrDA)、超带宽(UWB)、ZigBee、近场通信(NFC)、无线保真(Wi-Fi)、Wi-Fi直连和无线通用串行总线(无线USB)。
短距离通信模块713能够通过建立无线区域网络来执行车辆700与至少一个外部装置之间的短距离通信。例如,短距离通信模块713能够与移动终端600交换数据。短距离通信模块713能够从移动终端600接收天气信息和交通信息(例如,TPEG信息)。当用户进入车辆700时,能够自动地或者根据由用户对应用的执行来使车辆700和用户的移动终端600配对。
位置信息模块714是用于获取车辆700的位置的模块,并且位置信息模块714的典型示例是全球定位***(GPS)模块。例如,车辆能够利用GPS模块使用从GPS卫星发送的信号来获取该车辆的位置。
光通信模块715可以包括光发送单元和光接收单元。光接收单元将光信号转换成电信号,以便接收信息。光接收单元可以包括用于接收光的光电二极管(PD)。光电二极管将光转换成电信号。例如,光接收单元能够通过从包含在前方车辆中的光源发出的光来接收关于前方车辆的信息。
光发送单元可以包括用于将电信号转换成光信号的至少一个发光元件。这里,发光元件优选地为发光二极管(LED)。光发送单元将电信号转换成光信号并且发射该光信号。例如,光发送单元能够通过发光元件的与预定频率对应的闪烁来发射光信号。根据一个实施方式,光发送单元可以包括多个发光元件阵列。根据一个实施方式,光发送单元可以与设置到车辆700的灯集成在一起。例如,光发送单元可以是下面的项中的至少一个:前灯、尾灯、制动灯、转向信号灯和侧灯。例如,光发送模块715能够通过光通信来与另一车辆520交换数据。
V2X通信模块716是用于车辆700与外部服务器510或另一车辆520之间的无线通信的模块。V2X模块716包括能够实现车辆到车辆通信(V2V)或车辆到基础设施通信(V2I)协议的模块。车辆700能够通过V2X通信模块716来执行与外部服务器510或另一车辆520的无线通信。
输入单元720可以包括操作单元721、相机195、麦克风723和用户输入单元724。操作单元721接收用于驾驶车辆700的用户输入。操作单元721可以包括转向输入单元、换挡输入单元、加速输入单元和制动输入单元721d。
用户对转向输入单元应用转向输入。转向输入单元优选地按照车轮的形式来配置,使得能够根据转动来应用转向输入。根据一个实施方式,转向输入单元可以被配置为触摸屏、触摸板或按钮。
用户通过换挡输入单元来应用针对车辆700的停车挡P、驱动挡(D)、空挡(N)、倒车挡(R)的输入。换挡输入单元优选地按照杆的形式来配置。根据一个实施方式,可以按照触摸屏、触摸板或按钮的形式来配置换挡输入单元。
用户通过加速输入单元来应用针对车辆700的加速的输入。用户对制动输入单元应用针对车辆700的速度的减小的输入。加速输入单元和制动输入单元优选地按照踏板的形式来配置。根据一个实施方式,可以按照触摸屏、触摸板或按钮的形式来配置加速输入单元或制动输入单元。
相机195可以包括图像传感器和图像处理模块。相机195可以对通过图像传感器(例如,CMOS或CCD)获取的静止图像或视频进行处理。图像处理模块可以对通过图像传感器获取的静止图像或视频进行处理以提取必要信息,并且将所提取的信息发送到控制器770。车辆700可以包括用于对车辆的前视图图像或全景图像进行拍照的相机195以及用于对车辆的内部进行拍照的内部相机195c。
内部相机195c可以获取进入车辆的人的图像。内部相机195c可以获取人的生物的图像。另外,内部相机195c可以通过获取人的图像来检测进入车辆的人的数目。
虽然图7示出了相机195被包含在输入单元720中,但是相机195也可以被包含在如上面参照图2至图6描述的驾驶员辅助设备100中。
麦克风723可以将外部音频信号处理成电数据。可以根据在车辆700中执行的功能按照各种方式使用经处理的数据。麦克风723可以将用户的语音命令转换成电数据。可以将经转换的电数据发送到控制器770。
根据实施方式,可以将相机195或麦克风723包含在感测单元760而不是输入单元720中。
用户输入单元724被用来从用户接收信息。当通过用户输入单元724输入信息时,控制器770可以控制车辆700的操作以对输入信息做出响应。用户输入单元724可以包括触摸型输入单元或机械输入单元。根据实施方式,用户输入单元724可以被设置到车辆的方向盘的区域。在这种情况下,驾驶员能够在握住方向盘的同时用手指来操作用户输入单元724。
感测单元760感测与车辆700的驾驶等有关的信号。为此,感测单元760可以包括碰撞传感器、车轮传感器、速度传感器、倾斜传感器、重量传感器、前进方向传感器、偏航传感器、陀螺仪传感器、位置模块、前侧/后侧传感器、电池传感器、燃料传感器、轮胎传感器、转向传感器、车辆内部温度传感器、车辆内部湿度传感器、超声传感器、雷达、激光雷达等。
因此,感测单元760可以获取针对车辆碰撞信息、车辆位置信息(GPS信息)、前进方向信息、速度信息、加速信息、车辆倾斜信息、驱动/倒车信息、电池信息、燃料信息、轮胎信息、车辆灯信息、车辆内部温度信息、车辆内部湿度信息、方向盘转动角度信息等的感测信号。
另外,感测单元760还可以包括加速踏板传感器、压力传感器、引擎速度传感器、气流传感器(AFS)、气温传感器(ATS)、水温传感器(WTS)、油门位置传感器(TPS)、TDC传感器、曲柄角度传感器(CAS)等。
此外,传感器单元760可以包括生物信息传感器。生物信息传感器感测并获取进入汽车的人的生物信息。生物信息可以包括指纹信息、虹膜扫描信息、视网膜扫描信息、手几何形状信息、面部识别信息和语音识别信息。生物信息传感器可以包括用于感测进入车辆的人的生物信息的传感器。这里,内部相机195c和麦克风723能够作为传感器操作。生物信息传感器能够通过内部相机195c来获取关于手形状的信息和面部识别信息。
输出单元740输出在控制器770中处理的信息,并且可以包括显示器、音频输出单元742和触觉输出单元743。显示器741可以显示在控制器770中处理的信息。例如,显示器741能够显示车辆相关信息。车辆相关信息可以包括用于车辆的直接控制的车辆控制信息或用于向车辆驾驶员提供驾驶指导的车辆驾驶辅助信息。另外,车辆相关信息可以包括指示车辆的当前状态的车辆状态信息或与车辆的驾驶有关的车辆驾驶信息。
显示器741可以包括下面的项中的至少一个:液晶显示器(LCD)、薄膜晶体管液晶显示器(TFT LCD)、有机发光二极管(OLED)、柔性显示器、3D显示器和电子墨水显示器。
显示器741可以通过利用触摸传感器形成分层结构或者通过与触摸传感器集成在一起来实现触摸屏。这种触摸屏能够用作提供车辆700与用户之间的输入接口并且同时提供车辆700与用户之间的输出接口的用户输入单元724。在这种情况下,显示器741可以包括用于感测施加到显示器741的触摸的触摸传感器,使得控制命令通过触摸被输入到显示器741。当对显示器741施加触摸时,触摸传感器能够感测触摸,并且控制器770能够基于所感测的触摸来生成与触摸对应的控制命令。通过触摸施加的输入可以是文本、图形或能够按照各种模式指示或指定的菜单项。
显示器741可以包括用于使得驾驶员能够驾驶车辆并且同时检查车辆状态信息或车辆驾驶信息的仪表板。仪表板可以被设置在仪表盘上。在这种情况下,驾驶员能够在向前看的同时检查显示在仪表板上的信息。
根据实施方式,显示器741可以被实现为平视显示器(HUD)。当显示器741被实现为HUD时,能够通过设置到车辆的挡风玻璃的透明显示器来输出信息。另选地,显示器741可以包括投影模块,以便通过投影到挡风玻璃的图像来输出信息。
音频输出单元742将来自控制器770的电信号转换成音频信号,并且输出该音频信号。为此,音频输出单元742可以包括扬声器。音频输出单元742能够输出与用户输入单元724的操作对应的声音。
触觉输出单元743生成触觉输出。例如,触觉输出单元743能够使方向盘、安全带或座椅振动,以使得用户能够识别触觉输出。
车辆驾驶单元750可以控制车辆的各种装置的操作。车辆驾驶单元750可以包括动力源驱动器751、转向驱动器752、制动驱动器753、灯驱动器754、空调驱动器755、窗驱动器756、气囊驱动器757、天窗驱动器758和悬挂驱动器759。
动力源驱动器751能够执行车辆700的动力源的电子控制。例如,当动力源是基于化石燃料的引擎(未示出)时,动力源驱动器751能够执行引擎的电子控制,以便控制引擎的输出转矩。当动力源驱动器751是引擎时,能够通过在控制器770的控制下限制引擎输出转矩来限制车辆的速度。
另选地,当电动机(未示出)是动力源时,动力源驱动器751能够控制电机。因此,能够控制电机的每分钟转数(RPM)、转矩等。
转向驱动器752可以以电子方式控制车辆700的转向设备,以便驾驶车辆700。
制动驱动器753可以以电子方式控制车辆700的制动设备(未示出)。例如,制动驱动器753能够通过控制设置到车轮的制动器的操作来减小车辆700的速度。作为另一示例,制动驱动器753能够通过不同地操作分别设置到左车轮和右车轮的制动器来向左或向右调整车辆700的方向。
灯驱动器754可以开启/关闭设置到车辆700的内部和外部的灯。另外,灯驱动器754可以控制灯的照明、方向等。例如,灯驱动器754能够控制转向信号、制动灯等。
空调驱动器755可以以电子方式控制车辆700的空调(未示出)。例如,空调驱动器755能够在车辆的内部温度高时控制空调以向车辆700的内部供应冷空气。
窗驱动器756可以以电子方式控制车辆700的窗设备。例如,窗驱动器756能够控制设置到车辆的侧面的左窗和右窗的打开或关闭。
气囊驱动器757可以以电子方式控制设置到车辆700的内部的气囊设备。例如,气囊驱动器757能够在危险情况下控制气囊设备进行操作。
天窗驱动器758可以以电子方式控制车辆700的天窗设备(未示出)。例如,天窗驱动器758能够控制天窗的打开或关闭。
悬挂驱动器759可以以电子方式控制车辆700的悬挂设备(未示出)。例如,悬挂驱动器759能够在道路的表面粗糙时通过控制悬挂设备来减轻车辆700的振动。
存储器730电连接至控制器770。存储器730可以存储关于各单元的基本数据,控制用于各单元的操作控制的数据并且输入/输出数据。存储器730可以是诸如ROM、RAM、EPROM、闪存驱动器和硬盘驱动器这样的各种类型的存储装置。存储器730可以存储用于车辆700的总体操作的各种类型的数据(诸如用于处理或控制的程序)。
接口780可以用作到连接至车辆700的各种外部装置的通道。例如,接口780能够包括能够连接至移动终端600的端口,并且经由该端口连接至移动终端600。在这种情况下,接口780能够与移动终端600交换数据。
另外,接口780可以用作用来向连接至接口780的移动终端600供应电能的通道。当移动终端600电连接至接口780时,接口780在控制器770的控制下向移动终端600提供从电源790供应的电能。
控制器770可以控制车辆700的相应单元的操作。控制器770可以被称作电子控制单元(ECU)。
可以使用下面的项中的至少一个来实现控制器770:专用集成电路(ASIC)、数字信号处理器(DSP)、数字信号处理器件(DSPD)、可编程逻辑器件(PLD)、现场可编程门阵列(FPGA)、处理器、控制器、微控制器、微处理器以及用于执行对应功能的其它电子单元。
电源790可以在处理器770的控制下供应对于操作相应的组件所需的电力。具体地,电源790可以被提供有来自车辆700内部的电池(未示出)的电力。
驾驶员辅助设备100可以与控制器770交换数据。在驾驶员辅助设备100中生成的控制信号可以被输出到控制器770。驾驶员辅助设备100可以是以上参照图1至图6B描述的驾驶员辅助设备。
用于车辆的显示设备400可以与控制器770交换数据。控制器770可以从显示设备400或单独的导航***(未示出)接收导航信息。这里,导航信息可以包括关于设置的目的地的信息、取决于目的地的路线信息、与车辆驾驶有关的地图信息以及车辆位置信息。
图8A是根据本发明的实施方式的用于车辆的显示设备的框图。
用于车辆的显示设备400可以被用作用户与车辆700之间的接口(人机接口(HMI))。
用于车辆的显示设备400可以提供输出音频和视频内容的功能。另外,用于车辆的显示设备400可以提供导航功能。
用于车辆的显示设备400可以接收用户输入。用于车辆的显示设备400可以包括用于执行HMI功能的多个单元。
参照图8A,用于车辆的显示设备400可以包括通信单元410、输入单元420、存储器430、输出单元440、接口480和电源490。
车辆700可以包括通信单元710、输入单元720、感测单元760、输出单元740、车辆驾驶单元750、存储器730、接口780、控制器770、电源790、驾驶员辅助设备100和用于车辆的显示设备400。
通信单元410可以包括用于使得能实现车辆700与移动终端600之间、车辆700与外部服务器510之间或车辆700与另一车辆520之间的无线通信的一个或更多个模块。另外,通信单元410可以包括用于将车辆连接至一个或更多个网络的一个或更多个模块。
通信单元410可以包括广播接收模块411、无线互联网模块412、短距离通信模块413、位置信息模块414和V2X通信模块416。
广播接收模块411通过广播信道从外部广播管理服务器接收广播信号或广播相关信息。这里,广播包括无线电广播和TV广播。
无线互联网模块412是指用于无线互联网接入的模块,并且可以被嵌入在车辆700中或者设置到车辆700的外部。无线互联网模块412被配置为根据无线互联网技术在通信网络中发送和接收无线电信号。
无线互联网技术包括无线LAN(WLAN)、无线保真(Wi-Fi)、Wi-Fi直连、数字生活网络联盟(DLNA)、无线宽带(WiBro)、全球微波接入互操作性(WiMAX)、高速下行链路分组接入(HSDPA)、高速上行链路分组接入(HSUPA)、长期演进(LTE)、高级长期演进(LTE-A)等,并且无线互联网模块412根据包括上面未提及的无线互联网技术在内的无线互联网技术中的至少一个来发送和接收数据。例如,无线互联网模块412能够以无线方式与外部服务器510交换数据。无线互联网模块412能够从外部服务器510接收天气信息和道路的交通信息(例如,TPEG信息)。
短距离通信模块413是用于短距离通信的模块,并且能够使用下面的项中的至少一个来支持短距离通信:BluetoothTM、射频识别(RFID)、红外数据协会(IrDA)、超带宽(UWB)、ZigBee、近场通信(NFC)、无线保真(Wi-Fi)、Wi-Fi直连和无线通用串行总线(无线USB)。
短距离通信模块413可以通过建立无线区域网络来执行车辆700与至少一个外部装置之间的短距离通信。例如,短距离通信模块413能够与移动终端600交换数据。短距离通信模块413能够从移动终端600接收天气信息和道路的交通信息(例如,TPEG信息)。当用户进入车辆700时,能够自动地或者根据由用户对应用的执行来使车辆700和用户的移动终端600配对。
位置信息模块414是用于获取车辆700的位置的模块,并且位置信息模块414的典型示例是GPS模块。例如,车辆能够利用GPS模块使用从GPS卫星发送的信号来获取该车辆的位置。
V2X通信模块416是用于车辆700与外部服务器510或另一车辆520之间的无线通信的模块。V2X模块416包括能够实现车辆到车辆通信(V2V)或车辆到基础设施通信(V2I)协议的模块。车辆700可以通过V2X通信模块416来执行与外部服务器510或另一车辆520的无线通信。
输入单元420可以包括用户输入单元421和音频输入单元422。
用户输入单元421从用户接收信息。当通过用户输入单元424输入信息时,处理器470可以响应于输入信息来控制用于车辆的显示设备400的操作。用户输入单元424可以包括触摸型输入单元或机械输入单元。
音频输入单元422可以将外部音频信号处理成电数据。可以根据正在用于车辆的显示设备400中执行的功能按照各种方式来使用经处理的数据。音频输入单元422可以将用户的语音命令转换成电数据。电数据可以被发送到处理器470。
存储器430电连接至处理器470。存储器430可以存储关于各单元的基本数据,控制用于各单元的操作控制的数据并且输入/输出数据。存储器430可以是诸如ROM、RAM、EPROM、闪存驱动器和硬盘驱动器这样的各种类型的存储装置。存储器430可以存储用于车辆700的总体操作的各种类型的数据(诸如用于处理器470的处理或控制的程序)。
存储器430可以存储用于实现导航功能的地图数据。这里,可以在车辆700的生产期间预存储地图数据。另选地,可以通过通信单元410或接口480从外部装置接收地图数据。
输出单元440输出由处理器470处理的信息,并且可以包括显示器441和音频输出单元442。
显示器441可以显示由处理器470处理的信息。例如,显示器441能够显示车辆相关信息。车辆相关信息可以包括用于车辆的直接控制的车辆控制信息或者用于向车辆驾驶员提供驾驶指导的车辆驾驶辅助信息。另外,车辆相关信息可以包括指示车辆的当前状态的车辆状态信息或者与车辆的驾驶有关的车辆驾驶信息。
显示器441可以包括下面的项中的至少一个:液晶显示器(LCD)、薄膜晶体管液晶显示器(TFT LCD)、有机发光二极管(OLED)、柔性显示器、3D显示器和电子墨水显示器。
显示器441可以通过利用触摸传感器形成分层结构或者通过与触摸传感器集成在一起来实现触摸屏。这种触摸屏可以用作提供用于车辆的显示设备400与用户之间的输入接口并且同时提供用于车辆的显示设备400与用户之间的输出接口的用户输入单元424。在这种情况下,显示器441可以包括用于感测施加到显示器441的触摸的触摸传感器,使得控制命令通过触摸被输入到显示器441。当对显示器441施加触摸时,触摸传感器能够感测触摸,并且处理器470能够基于所感测的触摸来生成与触摸对应的控制命令。通过触摸施加的输入可以是文本、图形或者能够按照各种模式指示或指定的菜单项。
可以将显示器441实现为使得在车辆的挡风玻璃的区域上显示图像。
显示器441可以包括透明显示器。在这种情况下,透明显示器能够附接至挡风玻璃。因此,用于车辆的显示设备400能够通过透明显示器来输出信息。
透明显示器可以利用预定透明度来显示预定画面。对于透明度,透明显示器可以包括下面的项中的至少一个:透明薄膜电致发光(TFEL)显示器、透明有机发光二极管(OLED)显示器、透明液晶显示器(LCD)、透射型透明显示器和透明发光二极管(LED)显示器。可以由处理器470来控制透明显示器的透明度。
显示器441可以包括投影模块。在这种情况下,显示设备400能够通过投影到挡风玻璃的图像来输出信息。
投影模块向挡风玻璃投影光束。投影模块可以包括光源和投影透镜。投影模块可以生成与由处理器470处理的信息对应的图像。也就是说,投影模块可以使用从光源生成的光来生成图像,并且将该图像投影到挡风玻璃上。这里,光源优选地使用LED、激光等。
音频输出单元442将来自处理器470的电信号转换成音频信号,并且输出该音频信号。为此,音频输出单元442可以包括扬声器。音频输出单元442可以输出与用户输入单元421的操作对应的声音。
接口480可以接收数据或者将在处理器470中处理或生成的信号发送到外部。为此,接口480可以根据无线电通信方案来执行与车辆的控制器770、驾驶员辅助设备100和感测单元760的数据通信。
接口480可以从控制器770或感测单元760接收传感器信息。这里,传感器信息可以包括下面的项中的至少一个:车辆方向信息、车辆位置信息(GPS信息)、车辆前进方向信息、车辆速度信息、车辆加速信息、车辆倾斜信息、关于车辆的向前/向后移动的信息、电池信息、燃料信息、轮胎信息、车辆灯信息、车辆内部温度信息以及车辆内部湿度信息。
可以从前进方向传感器、偏航传感器、陀螺仪传感器、位置模块、车辆前/后传感器、车轮传感器、速度传感器、车辆主体倾斜传感器、电池传感器、燃料传感器、轮胎传感器、转向传感器、车辆内部温度传感器、车辆内部湿度传感器等获取这种传感器信息。位置模块可以包括用于接收GPS信息的GPS模块。
从传感器信息当中,与车辆的行驶有关的车辆方向信息、车辆位置信息、车辆前进方向信息、车辆速度信息和车辆倾斜信息可以被称作车辆行驶信息。
接口480可以从驾驶员辅助设备100接收信息或数据。接口480可以接收通过包含在驾驶员辅助设备100中的相机195获取的车辆的前视图图像数据或全景图像数据。
接口480可以接收通过由驾驶员辅助设备100的处理器170处理车辆的前视图图像或全景图像获得的信息或数据。接口480可以接收从车辆的前视图图像或全景图像中检测的车道信息。例如,接口480能够接收关于来自道路的多个车道当中的正行驶有车辆700的车道的信息。
当车辆700正行驶在道路上时,驾驶员辅助设备100可以检测关于来自道路的多个车道当中的正行驶有该车辆的车道的信息。接口480可以接收关于正行驶有车辆的车道的信息。
驾驶员辅助设备100可以检测关于正行驶有车辆的车道的相邻车道的信息。接口480可以接收关于相邻车道的信息。
接口480可以接收通过内部相机195c获取的关于乘客的信息。这里,乘客信息可以包括关于乘客的数目的信息。
处理器470控制显示设备400的每个单元的总体操作。
处理器470可以控制输出单元440以输出通过通信单元410、输入单元420或接口480接收的信息或数据。处理器470可以控制输出单元440以输出存储在存储器430中的信息或数据。处理器470可以直接输出所接收的信息或数据,或者对信息或数据进行处理并且然后输出经处理的信息或数据。处理器470可以通过显示器441以视觉方式输出信息或数据。处理器470可以通过音频输出单元442以听觉方式输出信息或数据。
处理器470可以基于通过接口480接收的信息或数据来生成新的信息。处理器470可以控制显示器441以显示所生成的信息或者与所生成的信息对应的图像。
处理器470可以控制显示器441以显示地图。该地图可以是用于实现导航功能的地图。处理器470可以通过地图来显示到设置的目的地的路线。
处理器470可以控制显示器441以按照顶视图的形式来显示地图。处理器470可以控制显示器441以基于GPS信息在地图上显示车辆700的当前位置。
处理器470可以控制显示器441以使逐向提示(Turn By Turn,TBT)图像与地图上的路线上的与正行驶有车辆的车道对应的点匹配,并且将TBT图像显示在该点上。
例如,处理器470可以确定正行驶有车辆的道路的车道。处理器470可以确定针对车辆的路线。处理器470可以确定针对该路线的逐向提示(TBT)图像。处理器470可以确定车辆已经到达沿着与TBT图像以及道路的车道对应的路线的点。处理器470可以基于车辆已经到达沿着与TBT图像以及道路的车道对应的路线的点的确定来控制显示器以显示TBT图像。
处理器470可以通过接口480从驾驶员辅助设备100接收关于正行驶有车辆的车道的信息。关于正行驶有车辆的车道的信息可以是关于车辆700当前正所处的车道的信息。处理器470可以使关于正行驶有车辆700的车道的信息与地图上的路线匹配。例如,处理器470可以被配置为基于所接收的信息来确定正行驶有车辆的道路的车道。
当车辆700正行驶在三车道道路的第一车道中时,驾驶员辅助设备100可以检测车辆在第一车道中的行驶。处理器470可以通过接口480来接收关于车辆在第一车道中的行驶的信息,并且使该信息与地图上的路线匹配。在这种情况下,可以在地图上的该路线上正确地显示正行驶有车辆700的车道。
TBT图像可以是指示正行驶有车辆的车道的箭头图像。例如,TBT图像可以是指示在交叉路口或十字路口处左转、右转、直行或掉头(U turn)的箭头图像。当车辆700位于离交叉路口或十字路口预定距离内时,能够显示TBT图像。
显示器441可以被实现为使得通过透明显示器或投影模块在挡风玻璃的区域中显示画面。在以下描述中,显示器441被实现为使得在挡风玻璃的区域中显示画面。例如,处理器470可以被配置为控制显示器以在挡风玻璃的区域中的画面上显示与正行驶有车辆的车道对应的车道图像。处理器470可以被配置为使TBT图像显示在挡风玻璃的区域中的画面上。
处理器470可以控制显示器441以在挡风玻璃的区域中显示TBT图像和正行驶有车辆的车道的图像。
处理器470可以基于从驾驶员辅助设备100接收的关于正行驶有车辆的车道的信息来生成正行驶有车辆的车道的图像。处理器470可以在正行驶有车辆的车道的图像上显示表示行驶路线的TBT图像。
处理器470可以控制显示器441以使TBT图像显示在与正行驶有车辆的车道对应的挡风玻璃的区域中。例如,处理器470能够控制显示器441以将TBT图像显示在挡风玻璃的与连接用户的眼睛和正行驶有车辆的车道的线相会的区域中。例如,处理器470可以被配置为确定与驾驶员的关于正行驶有车辆的车道的视野对应的挡风玻璃的区域。处理器470可以被配置为控制显示器以将TBT图像显示在所确定的与驾驶员的关于正行驶有车辆的车道的视野对应的挡风玻璃的区域中。
处理器470可以基于正行驶有车辆的车道是否需要被改变至相邻的车道来显示TBT图像。例如,当需要路线上的车道改变时,处理器470能够使与车道改变对应的TBT图像显示在挡风玻璃的与正行驶有车辆的车道对应的区域中。例如,处理器470可以被配置为确定行驶该路线是否将从改变至与正行驶有车辆的车道不同的车道中获益。处理器470可以被配置为基于行驶该路线将从改变至与正行驶有车辆的车道不同的车道中获益的确定来控制显示器以显示与车道改变对应的TBT图像。
处理器470可以控制显示器441以用不同的颜色来显示挡风玻璃的与正行驶有车辆的车道对应的第一区域以及挡风玻璃的与除了正行驶有车辆的车道以外的车道对应的第二区域。这里,第一区域可以是挡风玻璃的与连接用户的眼睛和正行驶有车辆的车道的线相会的区域。第二区域可以是挡风玻璃的与连接用户的眼睛和除了正行驶有车辆的车道以外的车道的线相会的区域。例如,处理器470可以被配置为通过控制显示器以用第一颜色显示挡风玻璃的第一区域并且用与第一颜色不同的第二颜色显示挡风玻璃的第二区域来控制显示器以将TBT图像显示在所确定的与驾驶员的关于正行驶有车辆的车道的视野对应的挡风玻璃的区域中,挡风玻璃的第二区域与驾驶员的关于除了正行驶有车辆的车道以外的车道的视野对应。
当正行驶有车辆的车道遇到多个岔路时,处理器470可以控制显示器441以用不同的颜色来显示挡风玻璃的第一区域和第二区域。这里,挡风玻璃的第一区域可以与来自所述多个岔路当中的与地图上的路线匹配的第一岔路对应,并且挡风玻璃的第二区域可以与来自所述多个岔路当中的除了第一岔路以外的岔路对应。例如,处理器470还可以被配置为确定正行驶有车辆的车道分支成多条路段,确定基于正行驶有车辆的车道分支成多条路段,从所述多个路段当中确定与针对车辆的路线对应的第一路段,并且控制显示器以用第一颜色来显示挡风玻璃的第一区域并且用与第一颜色不同的第二颜色来显示挡风玻璃的第二区域,挡风玻璃的第一区域与驾驶员的关于第一路段的视野对应,并且挡风玻璃的第二区域与除了第一路段以外的路段对应。
此外,处理器470可以控制显示器441以进一步显示与和车辆的行驶情况有关的信息对应的图像。这里,该信息可以是交通信息。可以从通信单元410或输入单元420接收该信息。
可以通过接口480从驾驶员辅助设备100、控制器770或感测单元760接收该信息。
例如,处理器470能够通过接口480来接收通过对从驾驶员辅助设备100的相机195获取的图像进行处理而生成的信息。具体地,驾驶员辅助设备100的处理器170能够从包含在通过相机195获取的图像中的交通灯、道路标志、交通电子标志牌或路面中检测交通信息。处理器470能够通过接口480来接收所检测的交通信息,并且控制显示器441以显示与所接收的交通信息对应的图像。
该信息可以是预存储在存储器430中的信息。该信息可以包括关于道路的速度极限的信息、罗盘信息、车道信息、学校区域信息、对象检测信息、对象速度信息、关于到对象的距离的信息、关于是否能够改变车道的信息、虚拟车道信息、车道偏离信息、停车指导信息和基体头灯信息。将稍后参照图13描述显示与信息对应的图像的操作。
当显示与信息对应的图像时,处理器470可以控制显示器441以用不同的形状或不同的颜色来显示第一图像和第二图像。这里,第一图像可以是在挡风玻璃的与正行驶有车辆的车道对应的第一区域中显示的图像。第二图像可以是在挡风玻璃的与除了正行驶有车辆的车道以外的车道对应的第二区域中显示的图像。第一区域可以是挡风玻璃的与连接用户的眼睛和正行驶有车辆的车道的线相会的区域,并且第二区域可以是挡风玻璃的与连接用户的眼睛和除了正行驶有车辆的车道以外的车道的线相会的区域。例如,处理器还可以被配置为控制显示器以用第一形状或用第一颜色在挡风玻璃的与驾驶员的关于正行驶有车辆的车道的视野的位置对应的第一区域中显示第一图像,并且控制显示器以用与第一形状不同的第二形状或用与第一颜色不同的第二颜色在挡风玻璃的第二区域中显示第二图像,挡风玻璃的第二区域与驾驶员的关于除了正行驶有车辆的车道以外的车道的视野对应。
第一图像可以是与第一信息对应的图像,并且第二图像可以是与和第一信息不同的第二信息对应的图像。
当预置了目的地时,处理器470可以控制显示器441以用不同的形状或不同的颜色来显示第一图像和第二图像。例如,处理器470可以被配置为确定预置了目的地。处理器470可以控制显示器441以按照与包括正行驶有车辆的车道的平面的预定角度来显示第一图像。
处理器470可以控制显示器441以随着时间而改变第一图像与包括正行驶有车辆的车道的平面之间的预定角度。处理器470可以被配置为确定与包括正行驶有车辆的车道的第一平面的预定角度,并且控制显示器以按照与包括正行驶有车辆的车道的第一平面的预定角度来显示第一图像。处理器470可以被配置为控制显示器以经过一段时间改变预定角度。
处理器470可以控制显示器441以将第二图像显示在包括除了正行驶有车辆的车道以外的车道的平面上。处理器470可以控制显示器441以根据重要性按照与包括正行驶有车辆的车道的平面或包括另一车道的平面的预定角度显示第一图像或第二图像。例如,处理器可以被配置为控制显示器以将第二图像显示在包括除了正行驶有车辆的车道以外的车道的第二平面上。
当显示与信息对应的图像时,处理器470可以控制显示器441以用不同的形状或不同的颜色来显示第一图像和第二图像。这里,第一图像可以是在挡风玻璃的与要被改变至的车道对应的第一区域中显示的图像。第二图像可以是在挡风玻璃的与除了要被改变至的车道以外的车道对应的第二区域中显示的图像。第一区域可以是挡风玻璃的与连接用户的眼睛和要被改变至的车道的线相会的区域,并且第二区域可以是挡风玻璃的与连接用户的眼睛和除了要被改变至的车道以外的车道的线相会的区域。例如,处理器可以被配置为控制显示器以根据预定优先级按照与包括正行驶有车辆的车道的第一平面的预定角度或者按照与包括除了正行驶有车辆的车道以外的车道的第二平面的预定角度来显示第一图像或第二图像。第一图像可以与和车辆的行驶情况有关的第一信息对应,并且第二图像可以与和车辆的行驶情况有关的第二信息对应。
处理器可以被配置为控制显示器以用第一形状或者用第一颜色在挡风玻璃的与驾驶员的关于要被改变至的车道的视野对应的第一区域中显示第一图像,并且控制显示器以用与第一形状不同的第二形状或者用与第一颜色不同的第二颜色在挡风玻璃的第二区域中显示第二图像,挡风玻璃的第二区域与驾驶员的关于除了要被改变至的车道以外的车道的视野对应。
处理器470可以基于从交通灯、道路标志、交通电子标志牌或路面的图像中检测的交通信息来改变地图上的路线。处理器470可以控制显示器441以使TBT图像与改变后的路线上的与正行驶有车辆的车道对应的点匹配并且将TBT图像显示在该点上。这里,正行驶有车辆的车道是基于通过接口480从驾驶员辅助设备100接收的关于正行驶有车辆的车道的信息的。例如,处理器还被配置为从交通灯、道路标志、交通电子标志牌或路面的图像中检测交通信息,基于从交通灯、道路标志、交通电子标志牌或路面的图像中检测的交通信息来确定改变后的路线,确定针对改变后的路线的逐向提示(TBT)图像,确定正行驶有车辆的改变后的路线上的道路的车道,确定车辆已经达到沿着与TBT图像以及道路的车道对应的改变后的路线的点,并且确定基于车辆已经达到沿着与TBT图像以及道路的车道对应的改变后的路线的点,控制显示器以显示TBT图像。
当地图上的路线被改变时,处理器470可以控制显示器441以显示路线改变事件。
交通信息可以包括交通事故信息、施工信息、道路拥塞信息和附加车道信息。
处理器470可以通过通信单元从移动终端600、外部服务器510或另一车辆520接收交通信息。处理器470可以基于所接收的交通信息来改变地图上的路线。处理器470可以控制显示器441以在改变后的路线上显示与和正行驶有车辆的车道对应的点匹配的TBT图像。这里,正行驶有车辆的车道是基于通过接口480从驾驶员辅助设备100接收的关于正行驶有车辆的车道的信息的。例如,处理器470可以被配置为基于从交通灯、道路标志、交通电子标志牌或路面的图像中检测的交通信息通过以下操作来确定改变后的路线:基于从移动终端、外部服务器或另一车辆中的至少一个接收的交通信息来确定改变后的路线。
处理器470可以显示多个TBT图像。处理器470可以控制显示器441以在最靠近车辆在地图上的路线上的当前位置的改变点处显示来自所述多个TBT图像当中的第一TBT图像。这里,改变点可以是指能够改变车辆的行驶路线的点(诸如十字路口或交叉路口)。当车辆700位于离改变点预定距离内时,能够显示TBT图像。例如,处理器可以被配置为确定针对路线的多个TBT图像,从沿着路线的多个改变点当中确定最靠近与来自所述多个TBT图像当中的第一TBT图像对应的车辆的当前位置的改变点,所述改变点指示能够改变车辆的路线的点,并且控制显示器以显示第一TBT图像。
处理器470可以控制显示器441以随着车辆接近改变点而改变第一TBT图像的大小、颜色或透明度。例如,处理器可以被配置为确定车辆接近改变点,并且基于车辆接近改变点的确定来控制显示器以改变第一TBT图像的大小、颜色或透明度。
处理器470可以控制显示器441以基于通过接口480接收的关于乘客的信息来显示车辆是否能够进入高乘载车辆车道。能够从由驾驶员辅助设备100的相机195获取的图像中检测高乘载车辆车道。例如,接口480可以被配置为获得由车辆的内部相机获取的乘客信息。处理器470可以被配置为基于乘客信息来确定是否允许车辆进入从车辆前方的视图的图像或者车辆周围的视图的图像中检测的高乘载车辆车道,并且控制显示器以显示是否允许车辆进入高乘载车辆车道。
可以使用下面的项中的至少一个来实现处理器470:专用集成电路(ASIC)、数字信号处理器(DSP)、数字信号处理器件(DSPD)、可编程逻辑器件(PLD)、现场可编程门阵列(FPGA)、处理器、控制器、微控制器、微处理器以及用于执行对应功能的其它电子单元。
电源490可以在处理器470的控制下供应对于操作相应组件所需的电力。具体地,电源490可以被提供有来自车辆700的电池的电力。
图8B是例示了根据本发明的实施方式的用于车辆的显示设备的操作的流程图。
参照图8B,处理器470可以控制显示器441以显示地图(S805)。
该地图可以是用于实现导航功能的地图。处理器470可以在地图上显示到设置的目的地的路线。可以将地图预存储在存储器430中。可以通过通信单元410来接收地图。
处理器470可以控制显示器441以按照顶视图的形式显示地图。处理器470可以基于地图上的GPS信息来显示车辆700的位置。
处理器470可以接收图像或通过对图像进行处理而生成的信息或数据(S810)。
处理器470可以通过接口480从驾驶员辅助设备100接收信息或数据。具体地,处理器470可以接收车辆的前视图图像或全景图像。另外,处理器470可以从驾驶员辅助设备100接收基于车辆的前视图图像或全景图像而生成的信息或数据。
处理器470可以接收关于正行驶有车辆700的车道的信息。驾驶员辅助设备100可以从车辆700的前视图图像或全景图像中检测正行驶有车辆700的车道,并且生成关于该车道的信息。处理器470可以从驾驶员辅助设备100接收关于车道的信息。
处理器470可以接收关于除了正行驶有车辆700的车道以外的车道的信息。驾驶员辅助设备100可以从车辆700的前视图图像或全景图像中检测除了正行驶有车辆700的车道以外的车道,并且生成关于该另一车道的信息。处理器470可以从驾驶员辅助设备100接收关于另一车道的信息。
处理器470可以使关于正行驶有车辆700的车道的信息与地图上的路线匹配(S820)。
处理器470可以使关于正行驶有车辆700的车道的信息与已经应用了通过GPS获取的关于车辆700的位置的信息的地图上的路线匹配。常规的导航地图提供了关于道路的车道的信息,但是由于GPS错误而不能够提供关于当前正行驶有车辆的车道的信息。根据本发明的实施方式的用于车辆的显示设备能够通过在驾驶情况信息中反映甚至关于正行驶有车辆的车道的信息来提供准确的驾驶情况信息。
当车辆700正行驶在三车道道路的第一车道中时,驾驶员辅助设备100能够检测车辆700是否正行驶在第一车道中。处理器470可以接收关于车辆700是否正行驶在第一车道中的信息,并且使该信息与地图上的路线匹配。在这种情况下,能够将正行驶有车辆700的车道准确地显示在地图上的路线上。
如果根据交通信息改变路线(S823),则处理器470可以控制显示器441以显示改变后的路线(S825)。然后,处理器470可以控制显示器441以显示路线改变事件(S827)。
这里,交通信息可以是通过接口480接收的TSR信息。TSR信息可以是从车辆的前视图图像或全景图像中检测的交通信息。
例如,驾驶员辅助设备100能够通过相机195来获取车辆的前视图图像或全景图像。这里,车辆的前视图图像或全景图像可以包括交通灯、道路标志、交通电子标志牌或路面的图像。
驾驶员辅助设备100的处理器170可以基于交通灯、道路标志、交通电子标志牌或路面的图像来检测交通信息。
可以通过通信单元410从移动终端600、外部服务器510或另一车辆520来接收交通信息。这里,交通信息可以包括交通事故信息、施工信息、道路拥塞信息和附加车道信息。
处理器470可以基于所接收的交通信息来改变路线。例如,处理器470能够基于交通事故信息、施工信息、道路拥塞信息或附加车道信息来将路线改变为花费最少时间的路线。
当路线发生改变时,处理器470可以显示改变后的路线并且控制显示器441以显示路线改变事件。
然后,处理器470可以使TBT图像与地图上的路线上的与关于正行驶有车辆700的车道的信息对应的点匹配,并且使TBT图像显示在该点上(S830)。
处理器470可以控制显示器441以在挡风玻璃的区域中显示正行驶有车辆700的车道的图像和TBT图像。例如,处理器470能够使正行驶有车辆的车道的图像显示,并且使TBT图像显示在车道的图像上。
处理器470可以控制显示器441以将TBT图像显示在挡风玻璃的与正行驶有车辆的车道对应的区域中。例如,处理器470能够控制显示器441以将TBT图像显示在挡风玻璃的与连接用户的眼睛和正行驶有车辆的车道的线相会的区域中。
处理器470可以基于正行驶有车辆的车道是否需要改变至相邻的车道来显示TBT图像。例如,当正行驶有车辆的车道需要改变时,处理器470可以在挡风玻璃的与正行驶有车辆的车道对应的区域中显示与车道改变对应的TBT图像。
可以显示多个TBT图像。处理器470可以控制显示器441以在挡风玻璃的与正行驶有车辆的车道对应的区域中显示多个TBT图像。例如,处理器470可以控制显示器441以在靠近车辆在地图上的路线上的当前位置的改变点处显示预定数目的TBT图像。
处理器470可以控制显示器441以使来自多个TBT图像当中的第一TBT图像与最靠近车辆的当前位置的改变点匹配并且在地图上的路线上将第一TBT图像显示在该改变点上。在这种情况下,处理器470可以控制显示器441以随着车辆接近改变点而改变第一TBT图像的大小、颜色或透明度。
当在步骤S823中根据交通信息未改变路线时,处理器470可以控制显示器441以使TBT图像与和关于正行驶有车辆的车道的信息对应的点匹配,并且以在地图上的路线上将TBT图像显示在改变点上(S830)。
处理器可以接收信息(S840)。可以从通信单元410或输入单元420接收信息。可以通过接口480从驾驶员辅助设备100、控制器770或感测单元760接收信息。
例如,处理器470能够通过接口480来接收通过对由驾驶员辅助设备100的相机195获取的图像进行处理所生成的信息。具体地,驾驶员辅助设备100的处理器170可以从交通灯、道路标志、交通电子标志牌或路面的图像中检测交通信息。处理器470可以通过接口480来接收所检测的交通信息,并且控制显示器441以显示与所接收的交通信息对应的图像。
所述信息可以包括关于道路的速度限制的信息、罗盘信息、车道信息、学校区域信息、对象检测信息、对象速度信息、关于到对象的距离的信息、关于车道改变的信息、虚拟车道信息、车道偏离信息、停车指导信息和基体头灯信息。将稍后参照图13详细地描述显示与信息对应的图像的操作。
处理器470可以控制显示器441以显示与信息对应的图像(S850)。
当显示与信息对应的图像时,处理器470可以控制显示器441以用不同的形状或不同的颜色来显示第一图像和第二图像。这里,第一图像可以是在挡风玻璃的与正行驶有车辆的车道对应的第一区域中显示的图像。第二图像可以是在挡风玻璃的与除了正行驶有车辆的车道以外的车道对应的第二区域中显示的图像。第一区域可以是挡风玻璃的与连接用户的眼睛和除了要被改变至的车道以外的车道的线相会的区域。第二区域可以是挡风玻璃的与连接用户的眼睛和另外车道的线相会的区域。
第一图像可以是与第一信息对应的图像,并且第二图像可以是与和第一信息不同的第二信息对应的图像。
当预置了目的地时,处理器470可以控制显示器441以用不同的形状或不同的颜色来显示第一图像和第二图像。
处理器470可以控制显示器441以按照与包括正行驶有车辆的车道的平面的预定角度来显示第一图像。
处理器470可以控制显示器441以随着时间而改变第一图像与包括正行驶有车辆的车道的平面之间的预定角度。
处理器470可以控制显示器441以将第二图像显示在包括除了正行驶有车辆的车道以外的车道的平面上。
处理器470可以控制显示器441以根据重要性按照与包括正行驶有车辆的车道的平面或者包括除了正行驶有车辆的车道以外的车道的平面的预定角度来显示第一图像或第二图像。
当显示与信息对应的图像时,处理器470可以控制显示器441以用不同的形状或不同的颜色来显示第一图像和第二图像。这里,第一图像可以是在挡风玻璃的与要被改变至的车道对应的第一区域中显示的图像。第二图像可以是在挡风玻璃的与除了要被改变至的车道以外的车道对应的第二区域中显示的图像。第一区域可以是挡风玻璃的与连接用户的眼睛和要被改变至的车道的线相会的区域。第二区域可以是挡风玻璃的与连接用户的眼睛和除了要被改变至的车道以外的车道的线相会的区域。
图9是用于说明根据本发明的实施方式的使TBT图像与和正行驶有车辆的车道对应的点匹配并且将TBT图像显示在该点上的操作的图。
参照图9,处理器470可以控制显示器441以显示地图900。虽然图9示出了地图900按照顶视图的形式显示,但是本发明不限于此,并且处理器470可以按照各种方式来显示地图。
显示器441可以被实现为在挡风玻璃的区域中显示图像。在这种情况下,处理器470可以控制显示器441以将地图显示在挡风玻璃的区域中。
处理器470可以控制显示器441以在地图900上显示车辆700的当前位置。处理器470可以基于GPS信息来显示车辆700的当前位置。处理器470可以在地图900上的与车辆700的位置对应的点920处显示与车辆700对应的图像700i。
附图标记910、920、930、940、950、960和970指示地图900上的与车辆的位置对应的点。附图标记911、921、931、941、951、961和971分别表示当车辆位于地图900上的点910、920、930、940、950、960和970处时被显示的画面。处理器470可以控制显示器441以在挡风玻璃的区域中显示每个画面。
如果车辆700位于对应道路上的第一位置处,则处理器470能够控制显示器441以将车辆图像700i显示在与第一位置对应的第一点910处。这里,处理器470可以控制显示器441以在挡风玻璃上显示第一画面911。
处理器470可以在第一画面911上显示TBT图像912、到改变点的距离913、速度限制914和车辆速度915。
如果车辆700位于道路上的第二位置处,则处理器470能够控制显示器441以将车辆图像700i显示在与第二位置对应的第二点920处。这里,处理器470能够控制显示器441以在挡风玻璃上显示第二画面921。
处理器470可以在第二画面921上显示TBT图像922。处理器470可以控制显示器441以将TBT图像922显示在与正行驶有车辆的车道对应的第一区域923中。处理器470可以控制显示器441以用不同的颜色来显示第一区域923和第二区域924。这里,第一区域923可以是与正行驶有车辆700的车道对应的区域,并且第二区域924可以是与除了正行驶有车辆700的车道以外的车道对应的区域。例如,第二区域924可以是与车辆700将进入的车道对应的区域。
处理器470可以控制显示器441以给出对于显示在其上的TBT图像922的远景(perspective)。例如,处理器470能够通过使所显示的TBT图像922在长度方向上的宽度改变来给出对于TBT图像922的远景。
例如,当车辆700位于道路上的第三位置处时,处理器470能够控制显示器441以将车辆图像700i显示在与第三位置对应的第三点930处。这里,处理器470能够控制显示器441以在挡风玻璃上显示第三画面931。
例如,当车辆700位于道路上的第四位置处时,处理器470能够控制显示器441以将车辆图像700i显示在与第四位置对应的第四点940处。这里,处理器470能够控制显示器441以在挡风玻璃上显示第四画面941。
处理器470可以控制显示器441以在与正行驶有车辆的车道不对应的区域中显示TBT图像943。例如,当车辆700位于道路上的第五位置处时,处理器470能够控制显示器441以将车辆图像700i显示在与第五位置对应的第五点950处。这里,处理器470可以控制显示器441以在挡风玻璃上显示第五画面951。
如果车辆700位于道路上的第六位置处,则处理器470能够控制显示器441以将车辆图像700i显示在与第六位置对应的第六点960处。这里,处理器470可以控制显示器441以在挡风玻璃上显示第六画面961。
如果车辆700位于道路上的第七位置处,则处理器470能够控制显示器441以将车辆图像700i显示在与第七位置对应的第七点970处。这里,处理器470可以控制显示器441以在挡风玻璃上显示第七画面971。
图10A和图10B是用于说明根据本发明的实施方式的显示在挡风玻璃的区域中的图像的图。
参照图10A,处理器470可以通过接口480从驾驶员辅助设备100接收关于正行驶有车辆的车道1020的信息。
处理器470可以控制显示器441以在挡风玻璃的区域中显示画面1011。处理器470可以使画面1011显示在第一区域中。这里,第一区域可以是与正行驶有车辆的车道1020对应的区域。例如,当用户看着正行驶有车辆的车道1020时,第一区域能够与挡风玻璃的与连接用户的眼睛和车道1020的线相会的点对应。
处理器470可以控制显示器441以半透明地显示画面1011。显示器441包括透明显示器或投影模块,并且处理器470可以控制透明显示器或投影模块以半透明地显示画面1011。根据实施方式,处理器470可以控制显示器411以调整画面1011的透明度。显示器441包括透明显示器或投影模块,并且处理器470能够控制透明显示器或投影模块以调整透明度。
处理器470可以控制显示器441以显示与正行驶有车辆的车道对应的车道图像1030。在这种情况下,处理器470可以使车道图像1030与和除了正行驶有车辆的车道以外的车道对应的图像1031和1032一起显示。
处理器470可以使TBT图像1012显示在车道画面1030上。处理器470可以控制显示器441以将TBT图像显示在画面1011上。处理器470可以控制显示器441以给出对于显示在其上的TBT图像1012的远景。例如,处理器470能够通过在长度方向1上用不同的宽度w1和w2显示TBT图像1012来给出对于TBT图像1012的远景。处理器470可以通过按照TBT图像1012更靠近用户的宽度w1大于TBT图像1012在离用户一定距离处的宽度w2这样的方式显示TBT图像1012来给出对于TBT图像1012的远景。
处理器470可以控制显示器441以在画面1011上显示关于到改变点的距离的信息1013。处理器470可以控制显示器441以在画面1011上显示速度限制信息1014或车辆速度信息1015。
参照图10B,处理器470可以通过接口480从驾驶员辅助设备100接收关于正行驶有车辆的车道的信息。
处理器470可以控制显示器441以在挡风玻璃的第一区域1060中显示TBT图像1050。这里,第一区域1060与正行驶有车辆的车道对应。也就是说,当用户透过挡风玻璃看着道路时,第一区域1060可以是挡风玻璃的与连接用户的眼睛和该道路的线相会的区域。
处理器470可以控制显示器441以用不同的颜色来显示挡风玻璃的与正行驶有车辆的车道对应的第一区域1060以及挡风玻璃的与除了所述车道以外的车道对应的第二区域1070。
如以上参照图10A所述,处理器470能够控制显示器441以给出对于所显示的TBT图像1050的远景。
图11A和图11B是用于说明根据本发明的实施方式的显示与车道改变对应的TBT图像的操作的图。
当需要将正行驶有车辆的车道改变至相邻车道时,处理器470可以控制显示器441以显示与车道改变对应的TBT图像。
参照图11A,处理器470可以控制显示器441以显示与车道改变对应的TBT图像。这里,当车辆需要进入、离开或改变道路时,可以根据需要对路线执行车道改变。
可以与和方向改变对应的TBT图像不同地显示与车道改变对应的TBT图像。可以用与和方向改变对应的TBT图像不同的形状、颜色、透明度或线形状来显示与车道改变对应的TBT图像。如图11A中所示,可以使用虚线来显示与车道改变对应的TBT图像。
参照图11B,当确定了车道改变点1130时,处理器470可以控制显示器441以显示指示车道改变点1130的指示器1120。这里,可以基于正行驶在相邻车道上的车辆以及到改变点的距离来确定车道改变点1130。可以由驾驶员辅助设备100检测正行驶在相邻车道上的车辆。可以基于地图和GPS信息来检查到改变点的距离。
处理器470可以用与其它区域、与要从当前车道改变至的车道1130上的车道改变点不同的颜色来显示指示器1120。
图12是用于说明根据本发明的实施方式的显示与多个岔路对应的区域的操作的图。
参照图12,当正行驶有车辆的车道遇到多个岔路时,处理器470可以控制显示器441以用不同的颜色来显示挡风玻璃的与第一岔路对应的第一区域1220和挡风玻璃的与第二岔路对应的第二区域1230。这里,第一岔路可以是来自所述多个岔路当中的与地图上的路线匹配的道路,并且第二岔路可以是来自所述多个岔路当中的除了第一岔路以外的道路。
图13A至图13L是用于说明根据本发明的实施方式的显示与信息对应的图像的操作的图。
处理器470可以控制显示器441以显示与信息对应的图像。处理器470可以通过通信单元410或输入单元420来接收信息。此外,处理器470可以通过接口480从驾驶员辅助设备100、感测单元760或控制器770接收信息。
如图13A中所示,处理器470可以控制显示器441以显示与道路的速度限制对应的图像1301、1302和1303。
驾驶员辅助设备100可以通过识别道路标志来检测关于道路的速度限制的信息。处理器470可以通过接口480从驾驶员辅助设备100接收关于速度限制的信息。
当道路具有多条车道时,相应的车道可以具有不同的速度限制。例如,第一车道、第二车道和第三车道的速度限制可以分别是80km、60km和40km。在这种情况下,处理器470可以使与车道的速度限制对应的图像1301、1302和1303分别显示在挡风玻璃的分别与这些车道对应的区域中。这里,处理器470可以控制显示器441以将图像1301、1302和1303显示在与由道路的表面形成的平面相同的平面上。因此,用户能够直观地识别相应车道的速度限制。
参照图13B,处理器470可以控制显示器441以显示与车辆700的前进方向对应的图像1305。这里,图像1305可以是罗盘图像。
处理器470可以通过接口480从感测单元760接收关于车辆的前进方向的信息。这里,关于车辆的方向的信息可以是由前进方向传感器感测到的信息。
处理器470可以使车辆行驶至的北、南、东或西显示。
当车辆的方向被改变时,处理器470可以通过对图像1305应用动画效果来使图像1305在改变后的方向上自然地改变。
参照图13C,处理器470可以控制显示器441以显示与车道信息对应的图像1311、1312和1313。
处理器470可以通过接口480从驾驶员辅助设备100接收车道信息。
驾驶员辅助设备100可以基于道路标志的图像或对应道路的表面的图像来检测车道信息。这里,车道信息可以是在改变点处指示正常车道、左转车道、右转车道和掉头车道的信息。
处理器470可以使分别与车道信息对应的正常图像、左转图像、右转图像和掉头图像中的一个显示。在这种情况下,处理器470可以在挡风玻璃的与每条车道对应的区域中显示每个图像。
参照图13D,处理器470可以控制显示器441以显示与车道信息对应的图像1315。处理器470可以通过接口480从驾驶员辅助设备100接收车道信息。
驾驶员辅助设备100可以基于道路标志的图像或对应道路的表面的图像来检测车道信息。这里,车道信息可以是关于学校区域车道或高乘载车辆车道的信息。
处理器470可以控制显示器441以将与关于学校区域车道或高乘载车辆车道的信息对应的图像1315显示在挡风玻璃的与学校区域车道或高乘载车辆车道对应的区域中。
参照图13E,处理器470可以控制显示器441以显示与到对象1321和1325的距离或速度信息对应的图像1322。处理器470可以通过接口480从驾驶员辅助设备100接收对象信息。
驾驶员辅助设备100可以检测对象并且生成对象信息。这里,对象信息可以包括对象的存在或不存在、到对象的距离以及对象的速度。另外,驾驶员辅助设备100可以基于立体相机的视差计算或者通过单目相机获取的对象大小随时间的变化来计算到对象的距离和对象的速度。
处理器470可以控制显示器441以显示对象信息。处理器470可以控制显示器441以根据到对象的距离不同地显示对象信息。
例如,处理器470能够控制显示器441以响应于到对象的距离来用不同的透明度、颜色和大小显示与对象信息对应的图像1322。
参照图13F,处理器470可以控制显示器441以显示与车道改变信息对应的图像。
当用户在驾驶期间输入针对车道改变的转向信号信息时,处理器470可以通过接口480从控制器770接收转向信号信息。处理器470可以通过转向信号信息来识别用户的改变车道的意图。
处理器470可以通过接口480从驾驶员辅助设备100接收关于要被改变至的车道的对象信息。
驾驶员辅助设备100可以基于全景图像从要被改变至的车道检测对象。处理器470可以控制显示器441以显示与车道改变信息对应的图像。
如由附图标记1330a所指示,当虽然已经输入了转向信号但是在预定距离内未从要被改变至的车道检测到对象时,处理器470可以控制显示器441以用第一颜色来显示挡风玻璃的与要被改变至的车道对应的区域1331。这里,第一颜色可以是用户能够用来直观地识别出车道能够被改变的颜色。例如,第一颜色是绿色。
当虽然已经输入了转向信号但是在预定距离内未从要被改变至的车道检测到对象时,处理器470可以控制显示器441以用第一颜色来显示箭头图像1332。这里,第一颜色可以是用户能够用来直观地识别出车道能够被改变的颜色。例如,第一颜色是绿色。
如由附图标记1330b所指示,当输入了转向信号并且在预定距离内从要被改变至的车道检测到对象时,处理器470可以控制显示器441以用第二颜色来显示挡风玻璃的与要被改变至的车道对应的区域1333。这里,第二颜色可以是用户能够用来直观地识别出当改变车道时存在交通事故的担忧的颜色。例如,第二颜色可以是红色。
当输入了转向信号并且在预定距离内从要被改变至的车道检测到对象时,处理器470可以控制显示器441以用第二颜色来显示箭头图像1334。这里,第二颜色可以是用户能够用来直观地识别出当改变车道时存在交通事故的担忧的颜色。例如,第二颜色可以是红色。
当在预定距离内在要被改变至的车道中检测到对象时,处理器470可以控制显示器441以显示指示需要加速的图标1335。这里,图标可以是加速器踏板图像。处理器470可以使加速器踏板图像周围的边缘显示,并且根据获取的加速程度来改变边缘的颜色。
参照图13G,处理器470可以控制显示器441以显示与车道信息对应的图像1341和1342。处理器470可以通过接口480从驾驶员辅助设备100接收车道信息。
驾驶员辅助设备100可以检测车道。具体地,在夜间,驾驶员辅助设备100能够通过调整相机的曝光来甚至在黑暗环境中检测车道,并且生成车道信息。
处理器470可以控制显示器441以将图像1341和1342显示在与车道对应的区域中。
处理器470可以通过存储在存储器430中的地图数据来识别前方道路是上坡道路还是下坡道路。在这种情况下,处理器470可以通过指示上坡道路或下坡道路使图像1342按照三维形式来显示。
参照图13H,处理器470可以控制显示器441以显示与对象信息对应的图像1345和1346。
车辆700还可以包括夜视装置(未示出)。夜视装置(未示出)能够使用热成像相机来感测对象。这里,对象可以是辐射热的人或动物。
处理器470可以通过接口480从夜视装置(未示出)接收对象信息。在夜间行驶期间,处理器470可以使与所接收的对象信息对应的图像1345显示在挡风玻璃的与对象所位于的区域对应的区域中。
车辆700还可以包括雷达***(未示出)或激光雷达***(未示出)。雷达***(未示出)能够使用无线电波来感测对象。激光雷达***(未示出)能够使用红外激光来感测对象。
处理器470可以通过接口480从雷达***(未示出)或激光雷达***(未示出)接收对象信息。在差的天气行驶期间,处理器470可以使与所接收的对象信息对应的图像1346显示在挡风玻璃的与对应对象所位于的区域对应的区域中。
参照图13I,处理器470可以控制显示器441以显示与对象信息对应的图像。处理器470可以通过接口480从驾驶员辅助设备100接收对象信息。
驾驶员辅助设备100可以基于车辆的前视图图像或全景图像来检测对象。这里,对象可以是行人、另一车辆或车道。
当接收到关于检测到行人的信息时,处理器470可以使与所接收到的信息对应的小心行人图像1352显示在挡风玻璃的区域中。
当接收到关于相邻车辆1353向正行驶有车辆700的车道的车道改变的信息时,处理器470可以使与所接收到的信息对应的小心碰撞图像1354显示在挡风玻璃的区域中。
当接收到关于车辆700的车道偏离的信息时,处理器470可以使与所接收到的信息对应的小心车道偏离图像1355显示在挡风玻璃的区域中。
参照图13J,处理器470可以控制显示器441以显示与关于在停车期间的方向盘转动的信息对应的图像1360。处理器470可以通过接口480从感测单元760接收关于方向盘转动的信息。
处理器470可以通过接口480从驾驶员辅助设备100接收关于相邻对象的信息。
处理器470可以基于关于相邻对象的信息和关于方向盘转动的信息来显示与车辆700在停车期间的位置和关于方向盘转动的信息对应的图像1360。具体地,处理器470能够根据车辆700取决于方向盘转动的程度与相邻车辆碰撞的可能性来用不同的颜色显示方向盘图像1360。
例如,当根据方向盘转动程度预料与相邻车辆碰撞时,处理器470能够用第一颜色来显示方向盘图像1360。如果根据方向盘转动程度未预料与相邻车辆碰撞,则处理器470能够使方向盘图像1360用第二颜色来显示。
当根据方向盘转动程度预料车辆700与相邻车辆碰撞的可能性在预定范围内时,处理器470可以使方向盘图像1360用第三颜色来显示。
参照图13K,处理器470可以控制显示器441以显示与关于前灯的操作的信息对应的图像1370。处理器470可以通过接口480从控制器770接收关于前灯的操作的信息。当前灯由多个灯模块组成时,关于前灯的操作的信息可以是每个灯模块的依据对面车道上的车辆或前方车辆的位置的打开/关闭信息。
处理器470可以使与关于来自所述多个灯模块当中的打开灯模块和关闭灯模块的信息对应的图像1370显示在挡风玻璃的区域中。
参照图13L,处理器可以控制显示器441以显示与关于到目的地的距离的信息对应的图像1380。处理器470可以使与从出发点到目的地的路线对应的条用第一颜色来显示,并且随着车辆700接近目的地,控制将该条改变为第二颜色。在这种情况下,用第一颜色显示的条的区域能够与剩余的距离对应,并且用第二颜色显示的条的区域能够与行驶的距离对应。
图14A和图14B是用于说明根据本发明的实施方式的信息显示操作的图。
参照图14A,处理器470可以控制显示器441以在挡风玻璃的与正行驶有车辆的车道对应的第一区域中显示第一图像1410。处理器470可以控制显示器441以在挡风玻璃的与除了正行驶有车辆的车道以外的车道对应的第二区域中显示第二图像1420和1430。处理器470可以使第一图像和第二图像用不同的形状或不同的颜色来显示。
例如,处理器470能够控制显示器441以按照与包括正行驶有车辆的车道的平面1415的预定角度来显示第一图像1410。在这种情况下,处理器470能够控制显示器441以将第二图像1420显示在与包括除了正行驶有车辆的车道以外的车道的平面相同的平面1425上。
当所显示的与正行驶有车辆的车道对应的图像和所显示的与除了正行驶有车辆的车道以外的车道对应的图像被不同地显示时,用户能够清楚地识别所显示的与正行驶有车辆的车道对应的图像。
第一图像可以与第一信息对应,并且第二图像可以与和第一信息不同的第二信息对应。也就是说,处理器470能够使不同的信息在第一区域中和第二区域中显示。例如,处理器470能够使速度限制信息在第一区域中显示,并且使关于高乘载车辆车道工作时间的信息在第二区域中显示。
参照图14B,处理器470可以控制显示器441以在挡风玻璃的与正行驶有车辆的车道对应的第一区域中显示第一图像1430。处理器470可以控制显示器441以按照与包括正行驶有车辆的车道的平面1415的预定角度来显示第一图像1430。
处理器470可以改变预定角度,并且通过对预定角度应用动画效果来显示预定角度。处理器470能够随着时间而改变预定角度。例如,处理器470能够随着时间而逐渐地增加预定角度。
处理器470可以根据车辆与预定点之间的距离来改变预定角度。例如,当车辆700正行驶在沿着设置了速度相机的道路上时,处理器470能够随着车辆700接近速度相机而逐渐地增加预定角度。
当第一图像1410与平面1415之间的预定角度改变时,用户对第一图像1410的专注增加,并因此能够成功地向用户发送重要信息。
另外,处理器470可以控制显示器441以根据重要性按照与包括正行驶有车辆的车道的平面或者与包括除了所述车道以外的车道的平面的预定角度来显示第一图像或第二图像。
可以预先确定重要性。例如,当车辆700行驶在高速公路上时,能够将速度限制信息的重要性设置为最高水平。当车辆700行驶在城市街道上时,能够将学校区域信息的重要性设置为最高水平。
图15A、图15B和图15C是用于说明根据本发明的实施方式的当预置了目的地时的图像显示操作的图。
图15A和图15B示出了设置了目的地的情况,并且图15C示出了未设置目的地的情况。
能够在正执行导航功能的同时根据用户输入来设置目的地。当设置了目的地时,处理器470可以控制显示器441以用不同的形状或不同的颜色来在挡风玻璃的第一区域和第二区域中分别显示第一图像和第二图像。这里,第一区域可以是挡风玻璃的与正行驶有车辆的车道对应的区域,并且第二区域可以是挡风玻璃的与除了正行驶有车辆的车道以外的车道对应的区域。
参照图15A,处理器470可以控制显示器441以在第一区域中显示TBT图像1510、与速度限制信息对应的图像1520以及与目的地信息对应的图像1530。在这种情况下,处理器470可以使图像不显示在第二区域中。
按照这种方式,与信息对应的图像仅被显示在与正行驶有车辆的车道对应的第一区域中,以便防止用户的专注被分散,因此促进安全驾驶。
处理器470可以控制显示器441以将与目的地对应的图像1540显示在挡风玻璃的与目的地对应的区域中。
参照图15B,处理器470可以控制显示器441以在第一区域中显示TBT图像1550、与速度限制信息对应的图像1560以及与目的地信息对应的图像1570。这里,处理器470可以控制显示器441以在第二区域中显示与车道信息对应的图像1572和1574。
处理器470可以控制显示器441以分别在第一区域和第二区域中显示与不同的信息对应的图像。
如图15C所示,当未设置目的地时,处理器470可以使与相同的信息对应的图像按照相同的形式显示在第一区域和第二区域中。
图16是用于说明根据本发明的实施方式的在挡风玻璃的与要被改变至的车道对应的区域中显示图像的操作的图。
参照图16,处理器470可以控制显示器441以显示与信息对应的图像1610、1620和1630。
处理器470可以使第一图像和第二图像用不同的形状或不同的颜色分别显示在挡风玻璃的第一区域和第二区域中。这里,第一区域可以是挡风玻璃的与要被改变至的车道对应的区域。例如,第一区域可以是挡风玻璃的与连接用户的眼睛和要被改变至的车道的线相会的区域。第二区域可以是挡风玻璃的与除了要被改变至的车道以外的车道对应的区域。例如,第二区域可以是挡风玻璃的与连接用户的眼睛和除了要被改变至的车道以外的车道的线相会的区域。
例如,处理器470能够控制显示器441以按照与和正行驶有车辆的车道对应的平面的预定角度来显示第一图像1610。在这种情况下,处理器470能够控制显示器441以将第二图像1620显示在与和除了正行驶有车辆的车道以外的车道对应的平面相同的平面上。
图17A至图17C是用于说明根据本发明的实施方式的基于从驾驶员辅助设备接收的交通信息来改变路线的操作的图。
参照图17A,驾驶员辅助设备100可以获取车辆的前视图图像或全景图像。车辆的前视图图像或全景图像可以包括交通灯、道路标志、交通电子标志牌或路面的图像。
车辆驾驶辅助装置100可以从交通灯、道路标志、交通电子标志牌或路面的图像中检测交通信息。这里,交通信息可以包括交通事故信息、施工信息、道路拥塞信息和附加车道信息。
处理器470可以通过接口480从驾驶员辅助设备100接收交通信息。
图17A示出了交通电子标志牌1710显示施工信息。在这种情况下,驾驶员辅助设备100从交通电子标志牌图像中检测施工信息,并且处理器470接收施工信息。
参照图17B,处理器470可以基于所接收的交通信息来改变当前路线。例如,处理器470能够基于交通事故信息、施工信息、道路拥塞信息或附加车道信息来将当前路线改变为花费最少时间的路线。
在图17B中,当在当前路线1720上正在施工时,处理器470将当前路线1720改变为没有进行施工的路线1730。
另外,处理器470可以控制显示器441以使TBT图像与和正行驶有车辆的车道对应的点匹配并且将TBT图像显示在改变后的路线上。
如图17C中所示,当基于从驾驶员辅助设备100接收的交通信息来改变路线时,处理器470可以控制显示器441以显示路线改变事件1740。
图18A、图18B和图18C是用于说明根据本发明的实施方式的基于从其它车辆接收的交通信息来改变路线的操作的图。
参照图18A,处理器470可以通过通信单元410从另一车辆520接收交通信息。这里,交通信息可以包括交通事故信息、施工信息、道路拥塞信息和附加车道信息。另一车辆520可以是前方车辆。另一车辆520能够在正在行驶的同时通过各种传感器(例如,相机)来获取交通信息。
图18A示出了另一车辆520获取道路拥塞信息。处理器470接收道路拥塞信息。
参照图18B,处理器470可以基于所接收的交通信息来改变当前路线。例如,处理器470能够基于交通事故信息、施工信息、道路拥塞信息或附加车道信息来将当前路线改变为花费最少时间的路线。
在图18B中,当当前路线1810拥塞时,处理器470将当前路线改变为不拥塞的路线1820。
另外,处理器470可以控制显示器441以使TBT图像与和正行驶有车辆的车道对应的点匹配并且将TBT图像显示在改变后的路线上。
如图18C中所示,当基于从另一车辆520接收的交通信息来改变路线时,处理器470可以控制显示器441以显示路线改变事件1830。
图19A和图19B是用于说明根据本发明的实施方式的显示TBT图像的操作的图。
参照图19A,处理器470可以控制显示器441以显示多个TBT图像。处理器470可以控制显示器441以三维形式显示多个TBT图像。
例如,处理器470能够使第一TBT图像1910显示在挡风玻璃的区域中。这里,第一TBT图像1910能够在最靠近车辆700在路线上的当前位置的第一改变点处指示方向信息。
虽然显示了第一TBT图像1910,但是处理器470可以使第二TBT图像1920显示在第一TBT图像1910周围。这里,处理器470可以使第二TBT图像1920比第一TBT图像1910小地显示。在这种情况下,对第二TBT图像1920应用远景,并因此第二TBT图像1920与第一TBT图像1910相比看起来离车辆的当前位置更远。也就是说,第一TBT图像1910和第二TBT图像1920以三维形式进行显示。第二TBT图像1920能够在第二靠近车辆700在路线上的当前位置的第二改变点处指示方向信息。
随着车辆700行驶,车辆700逐渐接近第一改变点和第二改变点。在这种情况下,处理器470能够控制显示器441以逐渐地改变第一TBT图像1910和第二TBT图像1920的大小、颜色或透明度。
因此,能够通过显示TBT图像来向用户提供更直观的道路指导,并且使得用户能够在无需观看数字信息的情况下识别车辆方向改变点。
另外,当设置了目的地时,处理器470可以控制显示器441以在挡风玻璃的区域中显示与从出发点到目的地的总距离、当前位置与目的地之间的距离以及到达目的地估计花费的时间对应的图像1925。在这种情况下,处理器470可以使图形图像显示在挡风玻璃的与正行驶有车辆的车道对应的区域中。该图形图像可以与挡风玻璃的与正行驶有车辆的车道对应的区域匹配。处理器470可以控制显示器441以响应于到目的地的剩余距离来改变图形图像的高度h。例如,处理器470能够按照高度h随着到目的地的剩余距离减小而减小的方式来改变图形图像的高度h。
参照图19B,处理器470可以控制显示器441以改变TBT图像1930和1940的大小。
处理器470可以指示方向信息的TBT图像1930在改变点处显示。当车辆700与改变点相距第一距离时,处理器470能够使TBT图像1930用第一大小来显示。当车辆700随着车辆700移动而变得与改变点相距第二距离时,处理器470能够使TBT图像1950用第二大小来显示。
第二大小可以比第一大小大。按照这种方式,能够根据距离变化用不同的大小来显示TBT图像,以便使得用户能够直观地识别向改变点的接近。
图19B的下部所例示的画面是当车辆700到达图19B的上部所示的画面中的点1940时显示的画面。
图20A和图20B是用于说明根据本发明的实施方式的显示与高乘载车辆车道信息对应的图像的操作的图。
参照图20A,处理器470可以使与高乘载车辆车道信息对应的图像2010在挡风玻璃的与高乘载车辆车道对应的区域中显示。这里,挡风玻璃的区域可以是挡风玻璃的与连接用户的眼睛和高乘载车辆车道车道的线相会的一部分。
可以基于存储在存储器430中的地图数据来获取高乘载车辆车道信息。另选地,处理器470可以通过接口480从驾驶员辅助设备100接收高乘载车辆车道信息。驾驶员辅助设备100可以从包括在车辆的前视图图像或全景图像中的路面和交通标志的图像中检测高乘载车辆车道信息。
高乘载车辆车道信息可以包括关于高乘载车辆车道工作时间的信息。
处理器470可以基于关于高乘载车辆车道工作时间的信息来控制显示器441以显示车辆是否能够进入高乘载车辆车道。在这种情况下,处理器470可以使车辆是否能够进入高乘载车辆车道显示为TBT图像2020。
如果车辆能够进入高乘载车辆车道,则处理器470能够使挡风玻璃的与高乘载车辆车道对应的区域用第一颜色来显示。这里,第一颜色优选地为作为向用户指示车辆能够进入高乘载车辆车道的颜色的绿色。
参照图20B,处理器470可以通过接口480从内部相机195c接收乘客信息。乘客信息可以是关于乘客数目的信息。
处理器470可以基于所接收的乘客信息来控制显示器441以显示车辆是否能够进入高乘载车辆车道。在这种情况下,处理器470可以使车辆是否能够进入高乘载车辆车道显示为TBT图像2040。
如果乘客的数目小并因此车辆不能够进入高乘载车辆车道,则处理器470能够使挡风玻璃的与高乘载车辆车道对应的区域用第二颜色来显示。这里,第二颜色优选地为作为向用户指示车辆不能够进入高乘载车辆车道的颜色的红色。
高乘载车辆车道信息可以包括使用高乘载车辆车道所需的乘客的最少数目的信息。
另外,处理器470可以控制显示器441以按照与和高乘载车辆车道对应的平面的预定角度来显示与高乘载车辆车道信息对应的图像2030。这里,处理器470可以使图像2030按照图像2030与包括高乘载车辆车道的平面之间的预定角度随着时间而改变(2030a、2030b、2030c和2030d)的方式来显示。
本发明可以被实现为能够被写入到计算机可读记录介质并因此能够由计算机读取的代码。该计算机可读记录介质可以是能够将数据存储在计算机可读介质中的任何类型的记录装置。计算机可读记录介质的示例包括硬盘驱动器(HDD)、固态盘(SSD)、硅盘驱动器(SDD)、ROM、RAM、CD-ROM、磁带、软盘、光数据存储装置以及例如通过互联网的数据发送的载波。计算机可以包括处理器170和470或者控制器770。尽管已经出于说明性的目的公开了本发明的优选实施方式,然而本领域技术人员应当领会,能够在不脱离如在所附的权利要求中公开的本发明的范围和精神的情况下进行各种修改、添加和替换。
相关申请的交叉引用
本申请要求于2015年5月28日在韩国知识产权局提交的韩国专利申请No.10-2015-0075204的优先权权益,该韩国专利申请的公开通过引用的方式被并入到本文中。
Claims (28)
1.一种用于车辆的显示设备,该显示设备包括:
显示器;以及
处理器,该处理器被配置为:
确定正行驶有所述车辆的道路的车道;
确定针对所述车辆的路线;
确定针对所述路线的逐向提示TBT图像;
确定所述车辆已经到达沿着与所述TBT图像以及所述道路的所述车道对应的所述路线的点;并且
基于所述车辆已经到达沿着与所述TBT图像以及所述道路的所述车道对应的所述路线的所述点的确定,控制所述显示器以显示所述TBT图像。
2.根据权利要求1所述的用于车辆的显示设备,该显示设备还包括接口,该接口被配置为接收与正行驶有所述车辆的所述车道有关的信息,
其中,与正行驶有所述车辆的所述车道有关的所述信息是基于所述车辆前方的视图的图像或者所述车辆周围的视图的图像的,并且
其中,所述处理器被配置为基于所接收的信息来确定正行驶有所述车辆的所述道路的所述车道。
3.根据权利要求1所述的用于车辆的显示设备,其中,所述显示器被配置为在所述车辆的挡风玻璃的区域中显示画面。
4.根据权利要求3所述的用于车辆的显示设备,其中,所述处理器还被配置为:
控制所述显示器以在所述挡风玻璃的所述区域中的所述画面上显示与正行驶有所述车辆的所述车道对应的车道图像;并且
控制所述显示器以使所述TBT图像显示在所述挡风玻璃的所述区域中的所述画面上。
5.根据权利要求3所述的用于车辆的显示设备,其中,所述处理器被配置为:
确定所述挡风玻璃的与驾驶员的关于正行驶有所述车辆的所述车道的视野对应的区域;并且
控制所述显示器以将所述TBT图像显示在所确定的所述挡风玻璃的与驾驶员的关于正行驶有所述车辆的所述车道的视野对应的区域中。
6.根据权利要求5所述的用于车辆的显示设备,其中,所述处理器被配置为:
确定行驶所述路线是否将从改变至与正行驶有所述车辆的所述车道不同的车道中获益;并且
基于行驶所述路线将从改变至与正行驶有所述车辆的所述车道不同的车道中获益的确定,控制所述显示器以显示与车道改变对应的TBT图像。
7.根据权利要求5所述的用于车辆的显示设备,其中,所述处理器被配置为通过以下操作来控制所述显示器以将所述TBT图像显示在所确定的所述挡风玻璃的与驾驶员的关于正行驶有所述车辆的所述车道的视野对应的区域中:
控制所述显示器以用第一颜色来显示所述挡风玻璃的第一区域并且用与所述第一颜色不同的第二颜色来显示所述挡风玻璃的第二区域,所述挡风玻璃的所述第一区域与驾驶员的关于正行驶有所述车辆的所述车道的视野对应,所述挡风玻璃的所述第二区域与驾驶员的关于除了正行驶有所述车辆的所述车道以外的车道的视野对应。
8.根据权利要求5所述的用于车辆的显示设备,其中,所述处理器还被配置为:
确定正行驶有所述车辆的所述车道分支成多条路段;
基于正行驶有所述车辆的所述车道分支成多条路段的确定:
从所述多条路段当中确定与针对所述车辆的所述路线对应的第一路段;并且
控制所述显示器以用第一颜色来显示所述挡风玻璃的第一区域并且用与所述第一颜色不同的第二颜色来显示所述挡风玻璃的第二区域,所述挡风玻璃的所述第一区域与驾驶员的关于所述第一路段的视野对应,并且所述挡风玻璃的所述第二区域与除了所述第一路段以外的路段对应。
9.根据权利要求1所述的用于车辆的显示设备,其中,所述处理器被配置为控制所述显示器以显示顶视图,该顶视图显示针对所述车辆的所述路线的地图。
10.根据权利要求1所述的用于车辆的显示设备,其中,所述处理器被配置为控制所述显示器以进一步显示与和所述车辆的行驶情况有关的信息对应的图像。
11.根据权利要求10所述的用于车辆的显示设备,其中,所述处理器还被配置为:
控制所述显示器以用第一形状或用第一颜色在挡风玻璃的与驾驶员的关于正行驶有所述车辆的所述车道的视野的位置对应的第一区域中显示第一图像;并且
控制所述显示器以用与所述第一形状不同的第二形状或者用与所述第一颜色不同的第二颜色在所述挡风玻璃的第二区域中显示第二图像,所述挡风玻璃的所述第二区域与驾驶员的关于除了正行驶有所述车辆的所述车道以外的车道的视野对应。
12.根据权利要求11所述的用于车辆的显示设备,其中,所述处理器被配置为:
确定预置了目的地;并且
基于预置了所述目的地的确定,控制所述显示器以用不同的形状或者不同的颜色来显示所述第一图像和所述第二图像。
13.根据权利要求11所述的用于车辆的显示设备,其中,所述处理器被配置为:
确定与包括正行驶有所述车辆的所述车道的第一平面的预定角度;并且
控制所述显示器以按照与包括正行驶有所述车辆的所述车道的所述第一平面的所述预定角度来显示所述第一图像。
14.根据权利要求13所述的用于车辆的显示设备,其中,所述处理器被配置为控制所述显示器以经过一段时间改变所述预定角度。
15.根据权利要求11所述的用于车辆的显示设备,其中,所述处理器被配置为控制所述显示器以将所述第二图像显示在包括除了正行驶有所述车辆的所述车道以外的所述车道的第二平面上。
16.根据权利要求11所述的用于车辆的显示设备,其中,所述处理器被配置为控制所述显示器以根据预定优先级按照与包括正行驶有所述车辆的所述车道的第一平面的预定角度或者按照与包括除了正行驶有所述车辆的所述车道以外的所述车道的第二平面的预定角度来显示所述第一图像或所述第二图像。
17.根据权利要求11所述的用于车辆的显示设备,其中,所述第一图像与和所述车辆的行驶情况有关的第一信息对应,并且所述第二图像与和所述车辆的行驶情况有关的第二信息对应。
18.根据权利要求10所述的用于车辆的显示设备,其中,所述处理器被配置为:
控制所述显示器以用第一形状或者用第一颜色在挡风玻璃的与驾驶员的关于要被改变至的车道的视野对应的第一区域中显示第一图像;并且
控制所述显示器以用与所述第一形状不同的第二形状或者用与所述第一颜色不同的第二颜色来在所述挡风玻璃的第二区域中显示第二图像,所述挡风玻璃的所述第二区域与驾驶员的关于除了要被改变至的所述车道以外的车道的视野对应。
19.根据权利要求2所述的用于车辆的显示设备,其中,所述车辆前方的视图的所述图像或所述车辆周围的视图的所述图像包括交通灯、道路标志、交通电子标志牌或路面的图像,
其中,所述处理器还被配置为:
从所述交通灯、所述道路标志、所述交通电子标志牌或所述路面的所述图像中来检测交通信息;
基于从所述交通灯、所述道路标志、所述交通电子标志牌或所述路面的所述图像中检测的所述交通信息来确定改变后的路线;
确定针对所述改变后的路线的TBT图像;
确定所述改变后的路线上的道路的正行驶有所述车辆的车道;
确定所述车辆已经到达沿着与所述TBT图像以及所述道路的所述车道对应的所述改变后的路线的点;并且
基于所述车辆已经到达沿着与所述TBT图像以及所述道路的所述车道对应的所述改变后的路线的所述点的确定,控制所述显示器以显示所述TBT图像。
20.根据权利要求19所述的用于车辆的显示设备,其中,所述处理器还被配置为控制所述显示器以在地图上显示将所述路线改变为所述改变后的路线的事件。
21.根据权利要求19所述的用于车辆的显示设备,其中,所述交通信息包括下面的项中的至少一个:交通事故信息、施工信息、道路拥塞信息或附加车道信息。
22.根据权利要求1所述的用于车辆的显示设备,该显示设备还包括:
通信单元,该通信单元被配置为从移动终端、外部服务器或另一车辆中的至少一个接收交通信息,
其中,所述处理器被配置为基于从所述移动终端、所述外部服务器或所述另一车辆中的所述至少一个接收的所述交通信息来确定所述改变后的路线。
23.根据权利要求1所述的用于车辆的显示设备,其中,所述处理器还被配置为:
确定针对所述路线的多个TBT图像;
从沿着所述路线的多个改变点当中确定最靠近与来自所述多个TBT图像当中的第一TBT图像对应的所述车辆的当前位置的改变点,所述改变点指示能够改变所述车辆的所述路线的点;并且
控制所述显示器以显示所述第一TBT图像。
24.根据权利要求23所述的用于车辆的显示设备,其中,所述处理器还被配置为:
确定所述车辆接近所述改变点;并且
基于所述车辆接近所述改变点的确定,控制所述显示器以改变所述第一TBT图像的尺寸、颜色或透明度。
25.根据权利要求2所述的用于车辆的显示设备,其中,所述接口被配置获得由所述车辆的内部相机获取的乘客信息,
其中,所述处理器还被配置为:
基于所述乘客信息,确定所述车辆是否被允许进入从所述车辆前方的视图的所述图像或者所述车辆周围的视图的所述图像中检测到的高乘载车辆车道;并且
控制所述显示器以显示所述车辆是否被允许进入所述高乘载车辆车道。
26.根据权利要求1所述的用于车辆的显示设备,其中,所述显示器被配置为显示地图,
其中,所述TBT图像与沿着所述地图上的所述路线的所述点以及所述道路的所述车道匹配。
27.一种车辆,该车辆包括:
显示设备,该显示设备包括:
显示器;以及
处理器,该处理器被配置为:
确定正行驶有所述车辆的道路的车道;
确定针对所述车辆的路线;
确定针对所述路线的逐向提示TBT图像;
确定所述车辆已经到达沿着与所述TBT图像以及所述道路的所述车道对应的所述路线的点;并且
基于所述车辆已经到达沿着与所述TBT图像以及所述道路的所述车道对应的所述路线的所述点的确定,控制所述显示器以显示所述TBT图像。
28.根据权利要求27所述的车辆,其中,所述显示器被配置为显示地图,
其中,所述TBT图像与沿着所述地图上的所述路线的所述点以及所述道路的所述车道匹配。
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR10-2015-0075204 | 2015-05-28 | ||
KR1020150075204A KR101750876B1 (ko) | 2015-05-28 | 2015-05-28 | 차량용 디스플레이 장치 및 차량 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN106205175A true CN106205175A (zh) | 2016-12-07 |
CN106205175B CN106205175B (zh) | 2020-05-12 |
Family
ID=56080347
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201610361981.1A Active CN106205175B (zh) | 2015-05-28 | 2016-05-26 | 用于车辆的显示设备和车辆 |
Country Status (4)
Country | Link |
---|---|
US (1) | US10240937B2 (zh) |
EP (2) | EP3708962B1 (zh) |
KR (1) | KR101750876B1 (zh) |
CN (1) | CN106205175B (zh) |
Cited By (13)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN108202747A (zh) * | 2016-12-16 | 2018-06-26 | 现代自动车株式会社 | 车辆及控制该车辆的方法 |
CN109115206A (zh) * | 2018-09-17 | 2019-01-01 | 联想(北京)有限公司 | 导航方法和导航*** |
CN109764887A (zh) * | 2017-11-09 | 2019-05-17 | 三星电子株式会社 | 用于显示虚拟路线的方法和装置 |
CN109817006A (zh) * | 2017-11-22 | 2019-05-28 | 上海汽车集团股份有限公司 | 一种车辆hud*** |
CN110136254A (zh) * | 2019-06-13 | 2019-08-16 | 吉林大学 | 基于动态概率驾驶地图的驾驶辅助信息显示方法 |
CN110210384A (zh) * | 2019-05-31 | 2019-09-06 | 北京科技大学 | 一种道路全局信息实时提取与表示*** |
CN110271489A (zh) * | 2018-03-15 | 2019-09-24 | 松下知识产权经营株式会社 | 车辆周边显示***以及显示控制装置 |
CN110782685A (zh) * | 2018-07-30 | 2020-02-11 | 本田技研工业株式会社 | 显示控制装置以及计算机可读存储介质 |
CN111081045A (zh) * | 2019-12-31 | 2020-04-28 | 智车优行科技(上海)有限公司 | 姿态轨迹预测方法及电子设备 |
CN111256725A (zh) * | 2018-11-30 | 2020-06-09 | 阿里巴巴集团控股有限公司 | 一种指示信息展示方法、装置、导航设备及存储介质 |
CN112304330A (zh) * | 2020-10-29 | 2021-02-02 | 腾讯科技(深圳)有限公司 | 展示车辆的行驶状态的方法以及电子设备 |
CN113306565A (zh) * | 2020-02-26 | 2021-08-27 | 丰田自动车株式会社 | 行驶辅助装置 |
CN114063295A (zh) * | 2020-08-05 | 2022-02-18 | 通用汽车环球科技运作有限责任公司 | 增强现实图像的动态调整 |
Families Citing this family (68)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
USD781317S1 (en) | 2014-04-22 | 2017-03-14 | Google Inc. | Display screen with graphical user interface or portion thereof |
USD780777S1 (en) | 2014-04-22 | 2017-03-07 | Google Inc. | Display screen with graphical user interface or portion thereof |
USD781318S1 (en) | 2014-04-22 | 2017-03-14 | Google Inc. | Display screen with graphical user interface or portion thereof |
US9972121B2 (en) | 2014-04-22 | 2018-05-15 | Google Llc | Selecting time-distributed panoramic images for display |
US9934222B2 (en) | 2014-04-22 | 2018-04-03 | Google Llc | Providing a thumbnail image that follows a main image |
JP6396850B2 (ja) * | 2015-05-29 | 2018-09-26 | 株式会社デンソー | 運転支援装置及び運転支援方法 |
CN107921870A (zh) * | 2015-09-10 | 2018-04-17 | 富士胶片株式会社 | 投影型显示装置及投影控制方法 |
WO2017064797A1 (ja) * | 2015-10-15 | 2017-04-20 | 日立マクセル株式会社 | 情報表示装置 |
US9746853B2 (en) * | 2015-11-30 | 2017-08-29 | Nissan North America, Inc. | Traffic signal timing estimation using a support vector regression model |
US10126135B2 (en) | 2015-12-15 | 2018-11-13 | Nissan North America, Inc. | Traffic signal timing estimation using an artificial neural network model |
US20180031849A1 (en) * | 2016-07-29 | 2018-02-01 | Panasonic Automotive Systems Company Of America, Division Of Panasonic Corporation Of North America | Augmented reality head-up display road correction |
US10003928B2 (en) * | 2016-09-28 | 2018-06-19 | Mapsted Corp. | Crowd-sourced passive positioning and calibration |
US10115305B2 (en) | 2016-09-30 | 2018-10-30 | Nissan North America, Inc. | Optimizing autonomous car's driving time and user experience using traffic signal information |
US11112237B2 (en) * | 2016-11-14 | 2021-09-07 | Waymo Llc | Using map information to smooth objects generated from sensor data |
KR101899981B1 (ko) * | 2016-12-02 | 2018-09-19 | 엘지전자 주식회사 | 차량용 헤드 업 디스플레이 |
KR102674463B1 (ko) * | 2016-12-23 | 2024-06-13 | 현대자동차주식회사 | 차량, 및 그 제어방법 |
KR102102761B1 (ko) * | 2017-01-17 | 2020-04-21 | 엘지전자 주식회사 | 차량용 사용자 인터페이스 장치 및 차량 |
EP3582483B1 (en) | 2017-02-13 | 2022-04-06 | LG Innotek Co., Ltd. | Camera module and vehicle |
KR20180131789A (ko) * | 2017-06-01 | 2018-12-11 | 현대자동차주식회사 | 정차 중 전방의 신호등 정보를 제공하는 시스템 및 방법 |
CN107403556A (zh) * | 2017-07-28 | 2017-11-28 | 广东兴达顺科技有限公司 | 一种信息指示方法及检测设备 |
WO2019019192A1 (zh) * | 2017-07-28 | 2019-01-31 | 广东兴达顺科技有限公司 | 一种信息指示方法及检测设备 |
JP2019049505A (ja) * | 2017-09-12 | 2019-03-28 | 矢崎総業株式会社 | 車両用表示装置および表示制御方法 |
US10890919B2 (en) | 2017-09-22 | 2021-01-12 | Waymo Llc | Calculating velocity of an autonomous vehicle using radar technology |
US10691135B2 (en) | 2017-09-22 | 2020-06-23 | Waymo Llc | Detecting motion of an autonomous vehicle using radar technology |
US10580299B2 (en) | 2017-10-13 | 2020-03-03 | Waymo Llc | Lane change notification |
US10955259B2 (en) * | 2017-10-20 | 2021-03-23 | Telenav, Inc. | Navigation system with enhanced navigation display mechanism and method of operation thereof |
JP2019095213A (ja) * | 2017-11-17 | 2019-06-20 | アイシン・エィ・ダブリュ株式会社 | 重畳画像表示装置及びコンピュータプログラム |
DE112018004583T5 (de) * | 2017-11-17 | 2020-08-27 | Aisin Aw Co., Ltd. | Anzeigevorrichtung und Computerprogramm |
CN108095987B (zh) * | 2017-12-06 | 2020-10-16 | 英业达科技有限公司 | 视障导航***及其方法 |
KR102418051B1 (ko) * | 2017-12-28 | 2022-07-07 | 현대오토에버 주식회사 | 차선별 교통상황 판단 장치, 시스템, 및 방법 |
KR102552490B1 (ko) * | 2018-01-03 | 2023-07-06 | 현대자동차주식회사 | 차량용 영상 처리 장치 및 방법 |
KR102018554B1 (ko) * | 2018-01-18 | 2019-09-05 | 엘지전자 주식회사 | 차량에 구비된 차량 제어 장치 및 차량의 제어방법 |
US10737717B2 (en) * | 2018-02-14 | 2020-08-11 | GM Global Technology Operations LLC | Trajectory tracking for vehicle lateral control using neural network |
US10994748B2 (en) | 2018-02-28 | 2021-05-04 | Nissan North America, Inc. | Transportation network infrastructure for autonomous vehicle decision making |
JP7037764B2 (ja) | 2018-03-29 | 2022-03-17 | 株式会社リコー | 移動ルート案内装置、移動体、移動ルート案内方法及びプログラム |
EP3552901A3 (en) | 2018-04-11 | 2020-04-29 | Hyundai Motor Company | Apparatus and method for providing safety strategy in vehicle |
US11597403B2 (en) * | 2018-04-11 | 2023-03-07 | Hyundai Motor Company | Apparatus for displaying driving state of vehicle, system including the same and method thereof |
US11084491B2 (en) | 2018-04-11 | 2021-08-10 | Hyundai Motor Company | Apparatus and method for providing safety strategy in vehicle |
EP3552902A1 (en) | 2018-04-11 | 2019-10-16 | Hyundai Motor Company | Apparatus and method for providing a driving path to a vehicle |
US11334067B2 (en) | 2018-04-11 | 2022-05-17 | Hyundai Motor Company | Apparatus and method for providing safety strategy in vehicle |
US11077854B2 (en) | 2018-04-11 | 2021-08-03 | Hyundai Motor Company | Apparatus for controlling lane change of vehicle, system having the same and method thereof |
EP3569460B1 (en) | 2018-04-11 | 2024-03-20 | Hyundai Motor Company | Apparatus and method for controlling driving in vehicle |
US11173910B2 (en) | 2018-04-11 | 2021-11-16 | Hyundai Motor Company | Lane change controller for vehicle system including the same, and method thereof |
US11084490B2 (en) | 2018-04-11 | 2021-08-10 | Hyundai Motor Company | Apparatus and method for controlling drive of vehicle |
US11351989B2 (en) | 2018-04-11 | 2022-06-07 | Hyundai Motor Company | Vehicle driving controller, system including the same, and method thereof |
EP3552913B1 (en) | 2018-04-11 | 2021-08-18 | Hyundai Motor Company | Apparatus and method for controlling to enable autonomous system in vehicle |
US10843710B2 (en) | 2018-04-11 | 2020-11-24 | Hyundai Motor Company | Apparatus and method for providing notification of control authority transition in vehicle |
US11548509B2 (en) | 2018-04-11 | 2023-01-10 | Hyundai Motor Company | Apparatus and method for controlling lane change in vehicle |
US10876853B2 (en) * | 2018-07-06 | 2020-12-29 | Honda Motor Co., Ltd. | Information presentation device, information presentation method, and storage medium |
KR102146451B1 (ko) * | 2018-08-17 | 2020-08-20 | 에스케이텔레콤 주식회사 | 좌표계 변환 정보 획득 장치 및 방법 |
JP7011559B2 (ja) * | 2018-09-11 | 2022-01-26 | 本田技研工業株式会社 | 表示装置、表示制御方法、およびプログラム |
JP7232604B2 (ja) | 2018-09-21 | 2023-03-03 | フォルシアクラリオン・エレクトロニクス株式会社 | ナビゲーションシステム、ナビゲーション表示方法、およびナビゲーション表示プログラム |
WO2020068960A1 (en) * | 2018-09-26 | 2020-04-02 | Coherent Logix, Inc. | Any world view generation |
JP7234650B2 (ja) * | 2019-01-23 | 2023-03-08 | 株式会社デンソー | 表示制御装置及び表示制御プログラム |
US11440471B2 (en) * | 2019-03-21 | 2022-09-13 | Baidu Usa Llc | Automated warning system to detect a front vehicle slips backwards |
DE102019204036A1 (de) * | 2019-03-25 | 2020-10-01 | Volkswagen Aktiengesellschaft | Verfahren zum Betreiben einer Navigationsvorrichtung und Navigationsvorrichtung |
JP7120963B2 (ja) * | 2019-05-21 | 2022-08-17 | 矢崎総業株式会社 | 表示ユニット |
US11624621B2 (en) * | 2019-06-14 | 2023-04-11 | Toyota Motor North America, Inc. | Re-routing context determination |
KR20210009529A (ko) * | 2019-07-17 | 2021-01-27 | 네이버랩스 주식회사 | Hd 맵과 hud를 활용한 tbt 정보를 안내하는 방법 및 시스템 |
US11423565B2 (en) | 2019-07-31 | 2022-08-23 | Toyota Motor North America, Inc. | 3D mapping using sign reference points |
US10957192B2 (en) * | 2019-08-09 | 2021-03-23 | Ford Global Technologies, L.L.C | Systems and methods for displaying visual content in an automobile stopped at a traffic light |
JP7476568B2 (ja) * | 2019-09-02 | 2024-05-01 | 株式会社アイシン | 重畳画像表示装置、重畳画像描画方法及びコンピュータプログラム |
KR20210122535A (ko) * | 2020-04-01 | 2021-10-12 | 삼성전자주식회사 | 차량의 주행 안내 방법 및 전자 장치 |
US11491909B2 (en) * | 2020-09-16 | 2022-11-08 | Waymo Llc | External facing communications for autonomous vehicles |
JP7136874B2 (ja) * | 2020-11-26 | 2022-09-13 | 本田技研工業株式会社 | 画像処理装置、運転支援装置および車両 |
JP2022157716A (ja) * | 2021-03-31 | 2022-10-14 | 本田技研工業株式会社 | 運転支援装置、運転支援プログラム、運転支援方法 |
US11598960B1 (en) | 2022-04-28 | 2023-03-07 | Beta Air, Llc | Systems and methods for a heads-up display for an electric aircraft |
KR102645699B1 (ko) * | 2022-06-10 | 2024-03-12 | 엘지전자 주식회사 | 차량의 ar 디스플레이 장치 및 그것의 동작방법 |
Citations (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20050154505A1 (en) * | 2003-12-17 | 2005-07-14 | Koji Nakamura | Vehicle information display system |
US20100138146A1 (en) * | 2006-12-06 | 2010-06-03 | Wilhelm Vogt | Routing method, routing arrangement, corresponding computer program, and processor-readable storage medium |
US20100169007A1 (en) * | 2008-12-30 | 2010-07-01 | Shashikumar Kaushik | Method and apparatus for navigation system for detecting and warning traffic rule violation |
US20100253539A1 (en) * | 2009-04-02 | 2010-10-07 | Gm Global Technology Operations, Inc. | Vehicle-to-vehicle communicator on full-windshield head-up display |
US20110288766A1 (en) * | 2008-01-29 | 2011-11-24 | Increment P Corporation | Navigation device, navigation method, navigation program, and recording medium |
US20120259546A1 (en) * | 2011-04-05 | 2012-10-11 | Hyundai Motor Company | Apparatus and method for displaying road guide information on windshield |
CN103129466A (zh) * | 2011-12-02 | 2013-06-05 | 通用汽车环球科技运作有限责任公司 | 在全挡风玻璃平视显示器上的驾驶操纵辅助 |
US20130173159A1 (en) * | 2010-09-13 | 2013-07-04 | Jeroen Trum | Navigation device |
CN103842775A (zh) * | 2011-11-08 | 2014-06-04 | 爱信艾达株式会社 | 车道引导显示***、方法和程序 |
WO2014129017A1 (ja) * | 2013-02-22 | 2014-08-28 | クラリオン株式会社 | 車両用ヘッドアップディスプレー装置 |
EP2863181A1 (en) * | 2012-09-28 | 2015-04-22 | Aisin AW Co., Ltd. | Intersection navigation system, method, and program |
Family Cites Families (42)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH0886662A (ja) * | 1994-07-18 | 1996-04-02 | Sumitomo Electric Ind Ltd | 車載の走行経路表示装置、道路情報送信装置、経路案内システムおよびナビゲーションシステムの表示方法 |
US7418346B2 (en) * | 1997-10-22 | 2008-08-26 | Intelligent Technologies International, Inc. | Collision avoidance methods and systems |
US7629899B2 (en) * | 1997-10-22 | 2009-12-08 | Intelligent Technologies International, Inc. | Vehicular communication arrangement and method |
JPH11311523A (ja) * | 1998-04-28 | 1999-11-09 | Aisin Aw Co Ltd | 車両用ナビゲーション装置 |
JP3475123B2 (ja) * | 1999-05-24 | 2003-12-08 | アイシン・エィ・ダブリュ株式会社 | ナビゲーション装置および記憶媒体 |
KR20010001839A (ko) | 1999-06-09 | 2001-01-05 | 김영환 | 차량의 주행 경로 안내 장치 |
US6415224B1 (en) * | 2001-02-06 | 2002-07-02 | Alpine Electronics, Inc. | Display method and apparatus for navigation system |
US6771189B2 (en) * | 2002-07-17 | 2004-08-03 | Alpine Electronics, Inc. | Display method and apparatus for navigation system |
EP1751499B1 (en) * | 2004-06-03 | 2012-04-04 | Making Virtual Solid, L.L.C. | En-route navigation display method and apparatus using head-up display |
JP4722433B2 (ja) * | 2004-08-25 | 2011-07-13 | アルパイン株式会社 | 車載用ナビゲーション装置 |
US7317385B2 (en) * | 2005-08-02 | 2008-01-08 | Johnson Controls Technology Company | In-vehicle animation bypass system and method |
KR20070016796A (ko) | 2005-08-05 | 2007-02-08 | 에스케이 텔레콤주식회사 | 실시간 사고 정보를 활용한 길안내 서비스를 제공하는 방법및 시스템 |
JP4683380B2 (ja) * | 2005-11-07 | 2011-05-18 | 株式会社デンソー | 車線変更案内装置 |
JP4791262B2 (ja) * | 2006-06-14 | 2011-10-12 | 本田技研工業株式会社 | 運転支援装置 |
JP4763537B2 (ja) * | 2006-07-13 | 2011-08-31 | 株式会社デンソー | 運転支援情報報知装置 |
KR100815153B1 (ko) * | 2006-11-08 | 2008-03-19 | 한국전자통신연구원 | 카메라를 이용한 차량용 내비게이션의 교차로 안내 장치 및그 방법 |
MX2009008201A (es) * | 2007-01-31 | 2009-08-12 | Alpla Werke | Metodo para recubrir cuerpos huecos en ciertas regiones. |
JP4420034B2 (ja) * | 2007-02-01 | 2010-02-24 | 株式会社デンソー | 車両用地図表示装置 |
US20090112452A1 (en) * | 2007-10-25 | 2009-04-30 | Gm Global Technology Operations, Inc. | Vehicle navigation system with real time traffic image display |
KR101479773B1 (ko) * | 2007-12-27 | 2015-01-13 | 엘지전자 주식회사 | 네비게이션 장치 및 이의 턴 지점 리스트 제공방법 |
US8167891B2 (en) * | 2008-07-21 | 2012-05-01 | Osteomed Llc | System and method for fracture reduction |
US8361004B2 (en) * | 2009-07-29 | 2013-01-29 | Mitchell John R | Foot abduction apparatus |
JP2010127685A (ja) * | 2008-11-26 | 2010-06-10 | Honda Motor Co Ltd | ナビゲーション装置 |
JP5397887B2 (ja) * | 2008-12-17 | 2014-01-22 | アルパイン株式会社 | 車両モニタシステム |
JP5161760B2 (ja) * | 2008-12-26 | 2013-03-13 | 株式会社東芝 | 車載用表示システム及び表示方法 |
US20120028298A1 (en) * | 2010-07-28 | 2012-02-02 | Glenn Takayama | System and method for automated tissue slide processing and data management |
US8509982B2 (en) * | 2010-10-05 | 2013-08-13 | Google Inc. | Zone driving |
JP5708307B2 (ja) * | 2011-06-30 | 2015-04-30 | アイシン・エィ・ダブリュ株式会社 | ナビゲーションシステム、ナビゲーション方法、及びナビゲーションプログラム |
TW201312081A (zh) * | 2011-09-14 | 2013-03-16 | Hon Hai Prec Ind Co Ltd | 汽車導航裝置及汽車導航方法 |
JP2013117515A (ja) * | 2011-11-02 | 2013-06-13 | Aisin Aw Co Ltd | レーン案内表示システム、方法およびプログラム |
JP5724864B2 (ja) * | 2011-12-13 | 2015-05-27 | アイシン・エィ・ダブリュ株式会社 | 表示システム、表示方法、及び表示プログラム |
KR101316176B1 (ko) * | 2011-12-14 | 2013-10-08 | 현대자동차주식회사 | 다중도로구간 안내시스템 및 그 안내 방법 |
US8965696B2 (en) * | 2012-06-05 | 2015-02-24 | Apple Inc. | Providing navigation instructions while operating navigation application in background |
US20140032098A1 (en) * | 2012-07-26 | 2014-01-30 | Garmin Switzerland Gmbh | Navigation device and method for guiding high-occupancy vehicles |
JP6015228B2 (ja) * | 2012-08-10 | 2016-10-26 | アイシン・エィ・ダブリュ株式会社 | 交差点案内システム、方法およびプログラム |
JP5998840B2 (ja) * | 2012-10-22 | 2016-09-28 | 株式会社デンソー | 表示装置 |
US9070209B2 (en) * | 2012-12-21 | 2015-06-30 | Volkswagen Ag | Moving control console |
US8972175B2 (en) * | 2013-03-14 | 2015-03-03 | Qualcomm Incorporated | Navigation using crowdsourcing data |
US9103694B2 (en) * | 2013-06-24 | 2015-08-11 | Here Global B.V. | Method and apparatus for conditional driving guidance |
GB201318049D0 (en) * | 2013-10-11 | 2013-11-27 | Tomtom Int Bv | Apparatus and methods of displaying navigation instructions |
KR20150054022A (ko) * | 2013-11-08 | 2015-05-20 | 현대오트론 주식회사 | 헤드업 디스플레이를 이용한 차선변경 정보 표시 장치 및 방법 |
KR20150056323A (ko) * | 2013-11-15 | 2015-05-26 | 현대오트론 주식회사 | 헤드업 디스플레이를 이용한 길 안내 정보 표시 장치 및 방법 |
-
2015
- 2015-05-28 KR KR1020150075204A patent/KR101750876B1/ko active IP Right Grant
-
2016
- 2016-05-25 EP EP20172317.8A patent/EP3708962B1/en active Active
- 2016-05-25 EP EP16171290.6A patent/EP3106838B1/en active Active
- 2016-05-26 CN CN201610361981.1A patent/CN106205175B/zh active Active
- 2016-05-27 US US15/166,455 patent/US10240937B2/en active Active
Patent Citations (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20050154505A1 (en) * | 2003-12-17 | 2005-07-14 | Koji Nakamura | Vehicle information display system |
US20100138146A1 (en) * | 2006-12-06 | 2010-06-03 | Wilhelm Vogt | Routing method, routing arrangement, corresponding computer program, and processor-readable storage medium |
US20110288766A1 (en) * | 2008-01-29 | 2011-11-24 | Increment P Corporation | Navigation device, navigation method, navigation program, and recording medium |
US20100169007A1 (en) * | 2008-12-30 | 2010-07-01 | Shashikumar Kaushik | Method and apparatus for navigation system for detecting and warning traffic rule violation |
US20100253539A1 (en) * | 2009-04-02 | 2010-10-07 | Gm Global Technology Operations, Inc. | Vehicle-to-vehicle communicator on full-windshield head-up display |
US20130173159A1 (en) * | 2010-09-13 | 2013-07-04 | Jeroen Trum | Navigation device |
US20120259546A1 (en) * | 2011-04-05 | 2012-10-11 | Hyundai Motor Company | Apparatus and method for displaying road guide information on windshield |
CN103842775A (zh) * | 2011-11-08 | 2014-06-04 | 爱信艾达株式会社 | 车道引导显示***、方法和程序 |
CN103129466A (zh) * | 2011-12-02 | 2013-06-05 | 通用汽车环球科技运作有限责任公司 | 在全挡风玻璃平视显示器上的驾驶操纵辅助 |
EP2863181A1 (en) * | 2012-09-28 | 2015-04-22 | Aisin AW Co., Ltd. | Intersection navigation system, method, and program |
WO2014129017A1 (ja) * | 2013-02-22 | 2014-08-28 | クラリオン株式会社 | 車両用ヘッドアップディスプレー装置 |
Cited By (19)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN108202747A (zh) * | 2016-12-16 | 2018-06-26 | 现代自动车株式会社 | 车辆及控制该车辆的方法 |
CN109764887A (zh) * | 2017-11-09 | 2019-05-17 | 三星电子株式会社 | 用于显示虚拟路线的方法和装置 |
CN109817006A (zh) * | 2017-11-22 | 2019-05-28 | 上海汽车集团股份有限公司 | 一种车辆hud*** |
CN110271489A (zh) * | 2018-03-15 | 2019-09-24 | 松下知识产权经营株式会社 | 车辆周边显示***以及显示控制装置 |
CN110271489B (zh) * | 2018-03-15 | 2022-10-25 | 松下知识产权经营株式会社 | 车辆周边显示***以及显示控制装置 |
CN110782685B (zh) * | 2018-07-30 | 2022-02-25 | 本田技研工业株式会社 | 显示控制装置以及计算机可读存储介质 |
CN110782685A (zh) * | 2018-07-30 | 2020-02-11 | 本田技研工业株式会社 | 显示控制装置以及计算机可读存储介质 |
CN109115206A (zh) * | 2018-09-17 | 2019-01-01 | 联想(北京)有限公司 | 导航方法和导航*** |
CN111256725A (zh) * | 2018-11-30 | 2020-06-09 | 阿里巴巴集团控股有限公司 | 一种指示信息展示方法、装置、导航设备及存储介质 |
CN110210384A (zh) * | 2019-05-31 | 2019-09-06 | 北京科技大学 | 一种道路全局信息实时提取与表示*** |
CN110136254A (zh) * | 2019-06-13 | 2019-08-16 | 吉林大学 | 基于动态概率驾驶地图的驾驶辅助信息显示方法 |
CN111081045A (zh) * | 2019-12-31 | 2020-04-28 | 智车优行科技(上海)有限公司 | 姿态轨迹预测方法及电子设备 |
CN113306565A (zh) * | 2020-02-26 | 2021-08-27 | 丰田自动车株式会社 | 行驶辅助装置 |
CN113306565B (zh) * | 2020-02-26 | 2024-05-17 | 丰田自动车株式会社 | 行驶辅助装置 |
US12024189B2 (en) | 2020-02-26 | 2024-07-02 | Toyota Jidosha Kabushiki Kaisha | Driving assistance apparatus |
CN114063295A (zh) * | 2020-08-05 | 2022-02-18 | 通用汽车环球科技运作有限责任公司 | 增强现实图像的动态调整 |
WO2022088973A1 (zh) * | 2020-10-29 | 2022-05-05 | 腾讯科技(深圳)有限公司 | 展示车辆的行驶状态的方法以及电子设备 |
CN112304330A (zh) * | 2020-10-29 | 2021-02-02 | 腾讯科技(深圳)有限公司 | 展示车辆的行驶状态的方法以及电子设备 |
CN112304330B (zh) * | 2020-10-29 | 2024-05-24 | 腾讯科技(深圳)有限公司 | 展示车辆的行驶状态的方法以及电子设备 |
Also Published As
Publication number | Publication date |
---|---|
EP3106838A2 (en) | 2016-12-21 |
EP3106838B1 (en) | 2020-07-01 |
EP3708962B1 (en) | 2023-05-03 |
US20160349066A1 (en) | 2016-12-01 |
EP3708962A1 (en) | 2020-09-16 |
EP3106838A3 (en) | 2017-05-10 |
CN106205175B (zh) | 2020-05-12 |
KR20160139748A (ko) | 2016-12-07 |
KR101750876B1 (ko) | 2017-06-26 |
US10240937B2 (en) | 2019-03-26 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN106205175A (zh) | 用于车辆的显示设备和车辆 | |
CN106167045B (zh) | 驾驶人员辅助装置及其控制方法 | |
CN106240456B (zh) | 驾驶员辅助设备及其控制方法 | |
EP3093192B1 (en) | Rear combination lamp for vehicle comprising a display | |
CN106915302B (zh) | 用于车辆的显示装置及其控制方法 | |
KR101844885B1 (ko) | 차량 운전 보조장치 및 이를 포함하는 차량 | |
EP3112810B1 (en) | Advanced driver assistance apparatus, display apparatus for vehicle and vehicle | |
CN109843676B (zh) | 自动泊车辅助装置以及包括其的车辆 | |
KR102309316B1 (ko) | 차량용 디스플레이 장치 및 이를 구비한 차량 | |
KR102551099B1 (ko) | 어라운드뷰 제공장치, 제공방법 및 이를 구비한 차량 | |
CN106394553A (zh) | 驾驶员辅助设备及其控制方法 | |
CN106240457A (zh) | 车辆驾驶辅助装置及车辆 | |
US10703374B2 (en) | Vehicle driving assisting apparatus and vehicle comprising same | |
KR101767507B1 (ko) | 차량용 디스플레이 장치 및 그 제어 방법 | |
KR101822896B1 (ko) | 운전자 보조 장치 및 그 제어방법 | |
KR101728964B1 (ko) | 디스플레이 장치 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |