CN106454310A - 用于增强车辆视觉性能的聚焦*** - Google Patents
用于增强车辆视觉性能的聚焦*** Download PDFInfo
- Publication number
- CN106454310A CN106454310A CN201610649190.9A CN201610649190A CN106454310A CN 106454310 A CN106454310 A CN 106454310A CN 201610649190 A CN201610649190 A CN 201610649190A CN 106454310 A CN106454310 A CN 106454310A
- Authority
- CN
- China
- Prior art keywords
- vehicle
- image
- depth
- controller
- field
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 230000004438 eyesight Effects 0.000 title abstract description 15
- 230000008859 change Effects 0.000 claims description 10
- 210000001508 eye Anatomy 0.000 claims description 9
- 230000004044 response Effects 0.000 claims description 9
- 210000005252 bulbus oculi Anatomy 0.000 claims 1
- 230000000007 visual effect Effects 0.000 description 31
- 230000006870 function Effects 0.000 description 16
- 238000000034 method Methods 0.000 description 16
- 238000004891 communication Methods 0.000 description 13
- 238000010586 diagram Methods 0.000 description 12
- 230000006855 networking Effects 0.000 description 9
- 238000001514 detection method Methods 0.000 description 7
- 238000012545 processing Methods 0.000 description 7
- 238000009434 installation Methods 0.000 description 6
- 230000008569 process Effects 0.000 description 6
- 210000001747 pupil Anatomy 0.000 description 5
- 238000004422 calculation algorithm Methods 0.000 description 4
- 238000004590 computer program Methods 0.000 description 3
- 238000005516 engineering process Methods 0.000 description 3
- 230000003287 optical effect Effects 0.000 description 3
- LFQSCWFLJHTTHZ-UHFFFAOYSA-N Ethanol Chemical compound CCO LFQSCWFLJHTTHZ-UHFFFAOYSA-N 0.000 description 2
- 230000003044 adaptive effect Effects 0.000 description 2
- 230000008901 benefit Effects 0.000 description 2
- 230000005540 biological transmission Effects 0.000 description 2
- 230000000694 effects Effects 0.000 description 2
- 230000002708 enhancing effect Effects 0.000 description 2
- 230000010365 information processing Effects 0.000 description 2
- 238000012423 maintenance Methods 0.000 description 2
- 238000005259 measurement Methods 0.000 description 2
- 238000000691 measurement method Methods 0.000 description 2
- 238000012544 monitoring process Methods 0.000 description 2
- 230000005236 sound signal Effects 0.000 description 2
- 238000012546 transfer Methods 0.000 description 2
- 241000533950 Leucojum Species 0.000 description 1
- 230000004913 activation Effects 0.000 description 1
- 230000003321 amplification Effects 0.000 description 1
- 229940104697 arixtra Drugs 0.000 description 1
- 230000000712 assembly Effects 0.000 description 1
- 238000000429 assembly Methods 0.000 description 1
- 230000006399 behavior Effects 0.000 description 1
- 230000001413 cellular effect Effects 0.000 description 1
- 239000000571 coke Substances 0.000 description 1
- 230000006835 compression Effects 0.000 description 1
- 238000007906 compression Methods 0.000 description 1
- 238000001816 cooling Methods 0.000 description 1
- 230000003247 decreasing effect Effects 0.000 description 1
- 230000004069 differentiation Effects 0.000 description 1
- 230000005611 electricity Effects 0.000 description 1
- 238000005562 fading Methods 0.000 description 1
- KANJSNBRCNMZMV-ABRZTLGGSA-N fondaparinux Chemical compound O[C@@H]1[C@@H](NS(O)(=O)=O)[C@@H](OC)O[C@H](COS(O)(=O)=O)[C@H]1O[C@H]1[C@H](OS(O)(=O)=O)[C@@H](O)[C@H](O[C@@H]2[C@@H]([C@@H](OS(O)(=O)=O)[C@H](O[C@H]3[C@@H]([C@@H](O)[C@H](O[C@@H]4[C@@H]([C@@H](O)[C@H](O)[C@@H](COS(O)(=O)=O)O4)NS(O)(=O)=O)[C@H](O3)C(O)=O)O)[C@@H](COS(O)(=O)=O)O2)NS(O)(=O)=O)[C@H](C(O)=O)O1 KANJSNBRCNMZMV-ABRZTLGGSA-N 0.000 description 1
- 239000000446 fuel Substances 0.000 description 1
- 230000003862 health status Effects 0.000 description 1
- 238000010438 heat treatment Methods 0.000 description 1
- 238000005286 illumination Methods 0.000 description 1
- 230000003993 interaction Effects 0.000 description 1
- 230000002045 lasting effect Effects 0.000 description 1
- 238000007726 management method Methods 0.000 description 1
- 239000003595 mist Substances 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000003533 narcotic effect Effects 0.000 description 1
- 238000003199 nucleic acid amplification method Methods 0.000 description 1
- 238000004806 packaging method and process Methods 0.000 description 1
- 238000004088 simulation Methods 0.000 description 1
- 238000005728 strengthening Methods 0.000 description 1
- 230000005612 types of electricity Effects 0.000 description 1
- 238000012795 verification Methods 0.000 description 1
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/20—Image signal generators
- H04N13/204—Image signal generators using stereoscopic image cameras
- H04N13/239—Image signal generators using stereoscopic image cameras using two 2D image sensors having a relative position equal to or related to the interocular distance
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
- B60R1/00—Optical viewing arrangements; Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
- G02B27/0101—Head-up displays characterised by optical features
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
- G02B27/0179—Display position adjusting means not related to the information to be displayed
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T11/00—2D [Two Dimensional] image generation
- G06T11/60—Editing figures and text; Combining figures or text
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/50—Context or environment of the image
- G06V20/56—Context or environment of the image exterior to a vehicle by using sensors mounted on the vehicle
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
- H04N13/106—Processing image signals
- H04N13/128—Adjusting depth or disparity
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/61—Control of cameras or camera modules based on recognised objects
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/63—Control of cameras or camera modules by using electronic viewfinders
- H04N23/633—Control of cameras or camera modules by using electronic viewfinders for displaying additional information relating to control or operation of the camera
- H04N23/635—Region indicators; Field of view indicators
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/67—Focus control based on electronic image sensor signals
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/80—Camera processing pipelines; Components thereof
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/90—Arrangement of cameras or camera modules, e.g. multiple cameras in TV studios or sports stadiums
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/95—Computational photography systems, e.g. light-field imaging systems
- H04N23/958—Computational photography systems, e.g. light-field imaging systems for extended depth of field imaging
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
- B60R2300/00—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
- B60R2300/10—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of camera system used
- B60R2300/105—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of camera system used using multiple cameras
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
- B60R2300/00—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
- B60R2300/30—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of image processing
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
- B60R2300/00—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
- B60R2300/40—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the details of the power supply or the coupling to vehicle components
- B60R2300/402—Image calibration
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
- B60R2300/00—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
- B60R2300/80—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the intended use of the viewing arrangement
- B60R2300/8093—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the intended use of the viewing arrangement for obstacle warning
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
- G02B27/0101—Head-up displays characterised by optical features
- G02B2027/0118—Head-up displays characterised by optical features comprising devices for improving the contrast of the display / brillance control visibility
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
- G02B27/0101—Head-up displays characterised by optical features
- G02B2027/0127—Head-up displays characterised by optical features comprising devices increasing the depth of field
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
- G02B27/0101—Head-up displays characterised by optical features
- G02B2027/0129—Head-up displays characterised by optical features comprising devices for correcting parallax
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
- G02B27/0101—Head-up displays characterised by optical features
- G02B2027/0138—Head-up displays characterised by optical features comprising image capture systems, e.g. camera
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
- G02B27/0101—Head-up displays characterised by optical features
- G02B2027/014—Head-up displays characterised by optical features comprising information/image processing systems
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
- G02B27/0179—Display position adjusting means not related to the information to be displayed
- G02B2027/0187—Display position adjusting means not related to the information to be displayed slaved to motion of at least a part of the body of the user, e.g. head, eye
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- General Physics & Mathematics (AREA)
- Optics & Photonics (AREA)
- Theoretical Computer Science (AREA)
- Computing Systems (AREA)
- Mechanical Engineering (AREA)
- Traffic Control Systems (AREA)
- General Engineering & Computer Science (AREA)
- Human Computer Interaction (AREA)
- Computer Graphics (AREA)
- Computer Hardware Design (AREA)
- Software Systems (AREA)
- Eye Examination Apparatus (AREA)
Abstract
公开了一种用于增强车辆视觉性能的聚焦***。一种车辆包括界面和控制器,所述界面显示车辆附近的对象的图像,所述控制器基于与驾驶员眼睛视线相对于所述图像的方向相关联的焦点来改变所述图像的景深,以改变远离焦点的所述图像的模糊度。
Description
技术领域
本申请总体上涉及车辆中的视觉***,所述视觉***被配置为选择性地调节聚焦的视场,以增强视场内的对象。
背景技术
车辆的驾驶员要观察和处理量不断增加的信息,以在驾驶在开放式道路上时安全地操控。驾驶员不仅必须自身了解并遵循道路规则,而且他们还必须注意附近的车辆和行人的行为。车辆周围的诸如雪、雨和雾的天气状况影响能见度,并且可能影响一些车辆***的运转。视觉***通常被设计成具有大的景深,以使视场中的很多对象在图像中呈现为焦点对准的(in focus)。
发明内容
一种车辆包括界面和至少一个控制器,所述界面被配置为显示车辆附近的对象的图像,所述至少一个控制器被配置为:基于与驾驶员眼睛视线相对于所述图像的方向相关联的焦点来改变所述图像的景深,以改变远离焦点的所述图像的模糊度。
一种增强车辆中的数字图像的方法包括:识别显示屏上的焦点,所述焦点与驾驶员观看图像的视线相关联;基于车辆和通过所述图像在所述焦点处呈现的对象的物理位置之间的距离来改变与所述图像关联的景深,以使所述图像中的远离所述焦点的其它对象模糊。
根据本发明的一个实施例,所述方法还包括:响应于驾驶员眼睛视线远离所述图像而使所述图像的景深最大化,以及响应于驾驶员眼睛视线指向所述图像的特定部分持续预定时间段,定位与通过所述图像在所述特定部分处呈现的物理位置相关联的焦点,并且基于所述车辆和与所述图像的特定部分相关联的所述物理位置之间的距离而减小所述图像的景深。
根据本发明的一个实施例,改变所述景深的步骤包括调节用于捕捉所述图像的相机的光圈的尺寸。
根据本发明的一个实施例,改变所述景深的步骤包括调节用于混合用于捕捉所述图像的至少两个相机的图像的视差。
根据本发明的一个实施例,改变所述景深的步骤包括调节用于捕捉所述图像的所述至少两个相机中的每个的光圈的尺寸。
根据本发明的一个实施例,所述方法还包括:基于焦点处的对象作为行人的分类而输出警告。
一种车辆包括相机、显示器和驾驶员相机组件。相机具有光圈并被配置为输出指示视场的信号,显示器被配置为将所述信号转换为图像,驾驶员相机组件被配置为输出与驾驶员相对于显示器的视线相关联的焦点。所述车辆还包括至少一个控制器,所述至少一个控制器被配置为:调节光圈的尺寸以改变景深,从而使焦点周围的景深以外的对象模糊。
根据本发明的一个实施例,所述至少一个控制器还被配置为:响应于所述视线远离所述图像而使所述景深最大化,以及响应于所述视线指向所述图像的特定部分持续预定时间段,识别与通过所述图像在所述特定部分处呈现的物理位置相关联的焦点,并基于所述车辆和所述物理位置之间的距离而减小所述图像的景深。
根据本发明的一个实施例,所述车辆还包括第二相机,所述第二相机具有第二光圈并被配置为输出指示视场的第二信号,其中,所述至少一个控制器还被配置为:通过调节用于混合所述信号和所述第二信号的视差来改变所述景深。
根据本发明的一个实施例,所述至少一个控制器还被配置为:识别视场中的行人,并响应于识别出行人正在穿过所述车辆的当前行驶路径而输出警告信号。
根据本发明的一个实施例,所述显示器为仪表组、信息娱乐***或抬头显示器***。
附图说明
图1A和图1B是车辆信息娱乐***的示例性框式拓扑图。
图2A至图2C是检测车辆驾驶员观看显示器上的图像的眼睛视线的车辆显示与感测***的示图。
图3是包括被配置为生成混合图像的立体视觉***的车辆的示图。
图4A至图4D是通过调节相机的光圈而产生的图像上的景深的效果的示图。
具体实施方式
在此描述本公开的实施例。然而,应当理解的是,所公开的实施例仅为示例,其它实施例可采取多种和替代形式。附图无需按比例绘制;可夸大或最小化一些特征以示出特定组件的细节。因此,此处所公开的具体结构和功能细节不应被解释为限制,而仅仅作为教导本领域技术人员以多种形式利用实施例的代表性基础。如本领域普通技术人员将理解的,参照任一附图示出和描述的各个特征可与一个或更多个其它附图中示出的特征组合以产生未明确示出或描述的实施例。示出的特征的组合提供用于典型应用的代表性实施例。然而,与本公开的教导一致的特征的多种组合和变型可被期望用于特定的应用或实施方式。
本公开的实施例总体上提供多个电路或其它电子装置。当提及所述电路和其它电子装置以及由它们中的每个提供的功能时,都不意在限于仅涵盖在此示出和描述的内容。虽然可以向公开的各种电路或其它电子装置分配特定标号,但是这样的标号并非意在限制所述电路和其它电子装置的操作范围。可基于期望的特定类型的电实施方式,以任何方式将所述电路和其它电子装置彼此组合和/或分开。应该认识到,在此公开的任何电路或其它电子装置可包括任意数量的微处理器、集成电路、存储装置(例如,闪存、随机存取存储器(RAM)、只读存储器(ROM)、电可编程只读存储器(EPROM)、电可擦除可编程只读存储器(EEPROM)或它们的其它适当变型)和软件,它们彼此协作以执行在此公开的操作。此外,电子装置的任意一个或更多个可被配置为执行在非暂时性计算机可读介质中实施的计算机程序,其中,计算机程序被编写为用于执行任意数量的公开的功能。
除此以外,本公开提出用于车辆运行的视觉***和方法,其中,所述视觉***调节景深以使焦点以外的对象模糊。例如,当下雪时在道路上驾驶时,雪可能吸引驾驶员或车辆视觉***的注意力。当车辆视觉***具有大景深时,许多对象在图像中看起来是清楚的并且那些对象可能使注意力从焦点处转移开。通过减小焦点处的景深,使景深之外的对象(诸如雪、雨等)模糊。当景深之外的对象模糊时,靠近景深之外的对象的边缘的区域呈现出具有半透明的样子,使得焦点处的图像趋于呈现为突出或者看起来已被增强。这还可通过考虑驾驶员在夜间在暴风雪中驾驶车辆来示出。如果驾驶员以远光设置打开车辆的前照灯,则在驾驶员视野中靠近车辆前方的雪被照亮并且可能阻碍驾驶员的视野。当驾驶员将前照灯降低到近光设置时,在驾驶员视野中靠近车辆前方的雪不再被照亮并且呈现为半透明,使得驾驶员的视场可看起来更清晰。这里,驾驶员的景深基于靠近车辆前方的雪片的照亮而改变。
另一方面是人类具有快速检测、区分、识别和表征对象的能力。例如,现代化的行人检测***可被配置为检测行走的个体,然而行人检测***可能难以检测婴儿车、在自行车、滑板车、滑板、三轮自行车上的儿童或者穿着具有特定图案的特定衣服的人或在特定静止位置静止站立的人。利用操作者的视线来控制景深的视觉***的组合可增强这些视觉***的性能。视觉***可包括行人检测***、碰撞检测***、自适应巡航控制***或其它动态车辆***。驾驶员或操作者的视线可与抬头显示器(HUD)***、车辆信息娱乐***、车辆仪表组、车辆中控台显示器、驾驶员信息控制台或连接到后视镜或侧视镜的显示屏相结合。***可观察接近车辆的对象(诸如车辆前方、车辆侧方或车辆后方的对象)。
图1A和图1B示出了可被用于向车辆102提供远程信息处理服务的***100的示例图。车辆102可以是各种类型的乘用车辆之一(诸如跨界多用途车辆(CUV)、运动型多用途车辆(SUV)、卡车、休旅车(RV))、船、飞机或用于运输人或货物的其它移动机械。作为一些非限制性可行方式,远程信息处理服务可包括导航、逐向导航(turn by turn directions)、车辆健康状况报告、本地商业搜索、事故报告和免提呼叫。在示例中,***100可包括由密歇根州迪尔伯恩市的福特汽车公司制造的SYNC***。应该注意的是,示出的***100仅为示例,并且可使用更多、更少和/或不同布置的元件。
计算平台104可包括一个或更多个处理器106,所述一个或更多个处理器106连接到内存108和计算机可读存储介质112两者并被配置为执行支持在此描述的处理的指令、命令以及其它例程。例如,计算平台104可被配置为执行车辆应用110的指令,以提供多种功能(诸如导航、事故报告、卫星无线电解码和免提呼叫)。可使用各种类型的计算机可读存储介质112以非易失性方式保存这样的指令和其它数据。计算机可读介质112(还被称作处理器可读介质或存储器)包括参与提供可由计算平台104的处理器106读取的指令或其它数据的任何非暂时性介质(例如,有形介质)。处理器还可以是在多个计算单元(每个计算单元执行整体驾驶员警告的一部分)中的多个处理器。例如,位于音频模块(122)中的一个处理器可执行音频警告功能,而位于视频控制器(140)中的另一处理器处理根据相同的警告消息预测的视觉警告。可从使用各种编程语言和/或技术创建的计算机程序编译或解释计算机可执行指令,所述各种编程语言和/或技术包括但不限于以下项中的单独一个或它们的组合:Java、C、C++、C#、Objective C、Fortran、Pascal、Java Script、Python、Perl和PL/SQL。
计算平台104可设置有允许车辆乘员与计算平台104交互的各种功能。例如,计算平台104可包括音频输入114和辅助音频输入118,音频输入114被配置为通过连接的麦克风116从车辆乘员接收语音命令,辅助音频输入118被配置为从连接的装置接收音频信号。辅助音频输入118可以是物理连接(诸如电线或光缆)或无线输入(诸如蓝牙音频连接)。在一些示例中,音频输入114可被配置为提供音频处理能力,诸如低电平信号的前置放大以及将模拟输入转换成数字数据以由处理器106进行处理。
计算平台104还可向具有音频重放功能的音频模块122的输入提供一个或更多个音频输出120。在其它示例中,计算平台104可通过使用一个或更多个专用扬声器(未示出)向乘员提供音频输出。音频模块122可包括输入选择器124,输入选择器124被配置为向音频放大器128提供来自选择的音频源126的音频内容,以用于通过车辆扬声器130或耳机(未示出)进行重放。作为一些示例,音频源126可包括解码的调幅(AM)或调频(FM)无线电信号以及来自致密盘(CD)或数字通用盘(DVD)音频重放的音频信号。音频源126还可包括从计算平台104接收的音频,诸如,由计算平台104生成的音频内容、从连接到计算平台104的通用串行总线(USB)子***132的闪存驱动器解码的音频内容以及来自辅助音频输入118的通过计算平台104传输的音频内容。
计算平台104可利用语音接口134向计算平台104提供免提接口。语音接口134可支持根据与可用命令相关联的语法对经由麦克风116接收的音频进行语音识别,并且可支持语音提示的生成以用于经由音频模块122进行输出。在一些情况下,当音频提示已准备好由计算平台104呈现并且另一音频源126被选择用于重放时,***可被配置为暂时静音或者以其它方式超驰由输入选择器124指定的音频源。
计算平台104还可从被配置为提供乘员与车辆102的交互的人机界面(HMI)控制件(control)136接收输入。例如,计算平台104可与被配置为调用计算平台104上的功能的一个或更多个按钮或者其它HMI控制件(例如,方向盘音频按钮、一键通话按钮、仪表板控制件等)进行交互。计算平台104还可驱动一个或更多个显示器138或者以其它方式与一个或更多个显示器138进行通信,一个或更多个显示器138被配置为通过视频控制器140向车辆乘员提供视觉输出。在一些情况下,显示器138可为还被配置为经由视频控制器140接收用户触摸输入的触摸屏,而在其它情况下,显示器138可仅为不具备触摸输入能力的显示器。
计算平台104还可被配置为经由一个或更多个车载网络142与车辆102的其它组件进行通信。作为一些示例,车载网络142可包括车辆控制器局域网(CAN)、以太网以及面向媒体的***传输(MOST)中的一种或更多种。车载网络142可允许计算平台104与车辆102的其它***进行通信,所述其它***诸如车载调制解调器144(在一些配置中可能不存在)、被配置为提供车辆102的当前位置和航向信息的全球定位***(GPS)模块146以及被配置为与计算平台104协作的各种车辆ECU(电子控制单元)148。作为一些非限制性的可行方式,车辆ECU 148可包括:动力传动***控制模块,被配置为提供发动机操作组件(例如,怠速控制组件、燃料输送组件、排放控制组件等)的控制以及发动机操作组件的监测(例如,发动机诊断代码的状态);车身控制模块,被配置为管理各种电力控制功能,诸如,外部照明、内部照明、无钥匙进入、远程启动以及接入点状态验证(例如,车辆102的引擎盖、车门和/或行李厢的关闭状态);无线电收发器模块,被配置为与遥控钥匙(keyfob)或车辆102的其它本地装置进行通信;气候控制管理模块,被配置为提供加热和冷却***组件的控制和监测(例如,压缩机离合器和鼓风机控制、温度传感器信息等)。
如图所示,音频模块122和HMI控制件136可通过第一车载网络142-A与计算平台104进行通信,车载调制解调器144、GPS模块146和车辆ECU 148可通过第二车载网络142-B与计算平台104进行通信。在其它示例中,计算平台104可连接到更多或更少的车载网络142。此外或可选地,一个或更多个HMI控制件136或其它组件可经由与示出的车载网络不同的车载网络142连接到计算平台104,或者在不连接到车载网络142的情况下直接连接到计算平台104。
计算平台104还可被配置为与车辆乘员的移动装置152进行通信。移动装置152可为任何各种类型的便携式计算装置,诸如蜂窝电话、平板计算机、智能手表、膝上型计算机、便携式音乐播放器或能够与计算平台104进行通信的其它装置。在许多示例中,计算平台104可包括被配置为与移动装置152的兼容的无线收发器154进行通信的无线收发器150(例如,蓝牙模块、ZIGBEE收发器、Wi-Fi收发器、IrDA收发器、RFID收发器等)。无线模块可以以载波频率或中心频率发送数据。由于中心频率影响抗噪声性能和带宽,所以中心频率是无线***的重要方面。例如,典型的远程无钥匙进入***在美国以315MHz运行,在欧洲以433MHz运行,而WiFi和蓝牙可以以包括超过2GHz的频率(诸如2.4GHz)的频率运行。此外或可选地,计算平台104可通过有线连接与移动装置152进行通信,诸如经由移动装置152与USB子***132之间的USB连接与移动装置152进行通信。
通信网络156可向连接到通信网络156的装置提供诸如分组交换网络服务(例如,互联网访问、VoIP通信服务)的通信服务。通信网络156的示例可包括蜂窝电话网络。移动装置152可经由移动装置152的装置调制解调器158提供到通信网络156的网络连接能力。为了方便通过通信网络156进行通信,移动装置152可与唯一装置标识符(例如,移动装置号码(MDN)、互联网协议(IP)地址等)相关联,以识别移动装置152通过通信网络156进行的通信。在一些情况下,计算平台104可根据存储介质112中保存的配对的装置数据160来识别车辆102的乘员或具有连接到计算平台104的许可的装置。例如,配对的装置数据160可指示先前与车辆102的计算平台104配对的移动装置152的唯一装置标识符,使得计算平台104可无需用户的干预而自动地重新连接到在配对的装置数据160中涉及的移动装置152。
当支持网络连接的移动装置152与计算平台104进行配对时,移动装置152可允许计算平台104使用装置调制解调器158的网络连接能力,以通过通信网络156与远程信息处理服务器162进行通信。在一个示例中,计算平台104可利用移动装置152的话上数据计划或数据计划在计算平台104与通信网络156之间传送信息。此外或可选地,计算平台104可在不使用移动装置152的通信设施的情况下利用车载调制解调器144在计算平台104与通信网络156之间传送信息。
与计算平台104类似,移动装置152可包括一个或更多个处理器164,所述一个或更多个处理器164被配置为执行从移动装置152的存储介质168加载到移动装置152的内存166的移动应用170的指令。在一些示例中,移动应用170可被配置为经由无线收发器154与计算平台104进行通信,且经由装置调制解调器158与远程信息处理服务器162或其它网络服务进行通信。计算平台104还可包括装置链路接口172,以便于将移动应用170的功能与可经由语音接口134获得的命令的语法进行整合,以及便于将移动应用170的功能集成到计算平台104的显示器138中。装置链路接口172还可向移动应用170提供对计算平台104经由车载网络142可获得的车辆信息的访问。装置链路接口172的一些示例包括由密歇根州迪尔伯恩市的福特汽车公司提供的SYNC***的SYNC APPLINK组件、由加利福尼亚州库比蒂诺市的苹果公司提供的CarPlay协议或者由加利福尼亚州山景城的谷歌公司提供的安卓汽车协议。车辆组件接口应用174可以是安装到移动装置152的这样的一个应用。
移动装置152的车辆组件接口应用174可被配置为便于访问使得车辆102能够进行装置配置的一个或更多个车辆102功能。在一些情况下,可用的车辆102功能可由单个车辆组件接口应用174访问,在这种情况下,车辆组件接口应用174可被配置为可定制的,或者可被配置为保存支持特定车辆102的品牌/型号以及选项包的配置。在示例中,车辆组件接口应用174可被配置为:从车辆102接收可被控制的功能的定义,显示描述可用功能的用户界面,并向车辆102提供来自用户界面的用户输入以允许用户控制指示的功能。如下面详细举例说明的,适合于显示车辆组件接口应用174的移动装置152可被识别,用于显示的用户界面的定义可被提供给识别的移动装置152以用于向用户进行显示。
诸如***100的***可能需要移动装置152与计算平台104进行配对和/或其它设置操作。然而,如下面详细说明的,***可被配置为:在无需移动装置152与计算平台104已配对或者与计算平台104通信的情况下,允许车辆乘员与他们的车辆中的用户界面元件或者与任何其它框架使能的车辆进行无缝交互。
图2A是包括显示器202和感测***的车辆内部200的示图,所述感测***检测车辆驾驶员204观看显示器上的图像的眼睛视线(eye gaze)206。这里显示器示出了车辆附近(诸如从车辆前方、车辆后方或车辆侧方看到)的视场。卡车210在所述视场中。然而,视场可包括诸如行人、路标、车辆或物体的任何对象。驾驶员的眼睛视线206指向图像的期望的焦点208。驾驶员的眼睛视线206被定义为观看固定点持续预定的时间段。注视(fixed look)是驾驶员的眼睛盯着一个方向不动的情况。眼睛移动的检测可以补偿眼球震颤,因为这可能是先天性障碍或者可能是由诸如酒精的麻醉品引起的。所述检测可使用诸如驾驶员面对的相机或多个驾驶员面对的相机的车辆内部***。存在用于检测眼睛视线的多种方式,相机或多个相机可使用这些方式中的任何其它方式,这些方式包括眼睛闪烁测量以及瞳孔/虹膜的定位和方向。预定的时间段可以是诸如1秒的固定时间段,或者可以是可变的时间段(可变的时间段基于诸如车辆速度、车窗雨刷器的操作或来自其它车辆模块(包括行人检测***、碰撞检测***、自适应巡航控制***或其它动态车辆***)的信号的条件而变化)。图像的期望的焦点208具有关联的接近于车辆的对象。例如,在该示图中,期望的焦点208被示出为卡车210的图像。如果捕捉该图像的相机是侧视相机,则期望的焦点208可与位于车辆侧方的牵引车挂车(tractor trailer)212相关联。
图2B是包括显示器202和感测***的车辆内部200的示图,所述感测***检测车辆驾驶员204观看显示器上的图像的眼睛视线206,其中,图像被网格214划分为多个部分。处理装置或控制器可被用来识别位于显示器202上的图像的期望的焦点208处的卡车210。处理装置或控制器可将卡车210与视场中的牵引车挂车212区分开。当检测到卡车210(在此被示出为牵引车挂车)时,处理器或控制器可利用图像处理技术来确定从车辆到卡车210的距离。从车辆到卡车210的距离还可使用距离测量技术(包括无线电探测和测距(RADAR)、声音导航和测距、光探测和测距(LIDAR)以及视觉)通过车辆中的其它传感器或模块进行计算。一旦距离被确定,则可减小景深以使图像中的诸如牵引车挂车212的其它对象模糊,从而突出卡车210。一旦期望的聚焦对象(focal object)(诸如卡车210)被确定,则卡车的轨迹(包括卡车210的方向和速度)可被确定。在检测到碰撞的情况下,可向其它模块(包括车辆仪表组、ABS模块或信息娱乐***)发送警告信号。
图2C是包括显示器202和感测***的车辆内部200的示图,所述感测***检测车辆驾驶员204观看图像的眼睛视线216。这里,驾驶员204已将她的眼睛视线216从最接近车辆的卡车210转移到离车辆更远的牵引车挂车212。当检测到牵引车挂车212时,处理器或控制器可利用图像处理技术来确定从车辆到牵引车挂车212的距离。从车辆到牵引车挂车212的距离还可使用距离测量技术通过车辆中的传感器或模块进行计算。一旦距离被确定,则景深可减小到距焦点处的牵引车挂车212的小距离以使图像中的诸如卡车210的其它对象模糊,从而突出牵引车挂车212。
图3是被配置为生成混合图像322的车辆302的立体视觉***300的示图。立体视觉***300包括分开预定距离306的两个相机304A和304B。相机304A和304B捕捉视场308的图像。在视场308中距相机304A和304B距离310处有已通过驾驶员的视线识别为图像的期望的焦点的期望的对象312。也在视场中但不在期望的焦点内的第二对象314被示出。由于相机304A距相机304B距离306,所以相机304A捕捉与由相机304B捕捉的图像316B不同的图像316A。如图所示,图像316A具有对象312的表示318A以及第二对象314的第二表示320A。同样地,图像316B具有对象312的表示318B以及第二对象314的第二表示320B。对于两个不同的图像316A和316B,期望的对象312在两个不同的图像316A和316B中具有两个表示318A和318B。处理装置或控制器可将两个图像316A和316B作比较以及将表示318A和318B的位置作对比。基于图像316A中的表示318A的位置以及图像316B中的表示318B的位置,计算表示318A与表示318B之间的视差距离328。该视差距离328是视差角度的函数。视差是沿着两条不同的视线观察的对象的视位的差异。视差通过两条不同的视线之间的视差角度来测量。当相机之间的距离306固定时,通过测量焦点的表示318A和318B之间的视差距离328,从相机304A和304B到期望的对象312的距离310可由控制器或处理装置确定。基于距离310,可以混合或合成图像316以产生单个的合成图像322。合成图像322可包括期望对象的描绘324和第二对象的描绘326。图像316A、316B和322可以是模拟图像或数字图像,并且图像可以是诸如原始图或位图的无损图像,或诸如压缩图像的有损图像。位于景深内的期望对象的描绘324将清楚地呈现,而位于景深外的第二对象的描绘326将是模糊的图像。使图像模糊的人为结果(artifact)是被模糊的对象具有半透明效果。这可使用图像处理(可被用于增强期望对象的表示324并最小化第二对象的表示326)来放大。随着使用视差来改变景深,立体视觉***还可调节相机304A和304B中的每个的光圈来改变景深。
图4A是相机镜头406和行人的表示402的示图,相机镜头具有处于F16设置的光圈408,行人的表示402被捕捉为在暴风雪期间行走穿过街道的行人。关于光学***,还被称作焦比或相对孔径的f光圈值(f-stop)是镜头的焦距与镜头的入射光瞳的直径的比。入射光瞳可与镜头集成在一起或可以是与镜头结合的单独设备。传统上,f光圈值越高(诸如F16),则入射光瞳越小,而f光圈值越低(诸如F1.5),则入射光瞳越大。在光圈处于F16设置(如图所示)时,景深是大的并且视场中的许多对象被清楚地显示。这里,行人的表示402是焦点对准的,但是,雪的表示404也是焦点对准的。生成的图像400示出了焦点对准的雪使图像的期望的焦点(即行人)模糊。
图4B是相机镜头406和行人的表示422的示图,相机镜头406具有处于F7.5设置的光圈410,行人的表示422被捕捉为在暴风雪期间行走穿过街道的行人。当光圈如示出的处于F7.5设置时,景深被减小但通常来讲仍然是大的,使得视场中的许多对象被清楚地显示。这里,行人的表示422是焦点对准的,但是,大量的雪的表示424也是焦点对准的。生成的图像420示出了焦点对准的雪使行人模糊。
图4C是相机镜头406和行人的表示442的示图,相机镜头406具有处于F2.5设置的光圈412,行人的表示442被捕捉为在暴风雪期间行走穿过街道的行人。当光圈如示出的处于F2.5设置时,景深被进一步减小,使得视场中的许多对象不突出(deemphasize),使得行人的表示442呈现得更清楚。这里,行人的表示442是焦点对准的,并且仅有少量的雪的表示444是焦点对准的。生成的图像440示出了行人是焦点对准的并且呈现为被增强的,同时焦点未对准的雪被柔化。
图4D是相机镜头406和行人的表示462的示图,相机镜头406具有处于F1.5设置的光圈414,行人的表示462被捕捉为在暴风雪期间行走穿过街道的行人。当光圈如示出的处于F1.5设置时,景深是小的并且视场中的许多对象是模糊的。这里,行人的表示462是焦点对准的,但是大部分的雪464是模糊的。生成的图像460示出了行人是焦点对准的并且作为图像的中心而突出,大部分焦点未对准的雪呈现为逐渐消失。
在此公开的处理、方法或算法可被传送到处理装置、控制器或计算机,或者通过处理装置、控制器或计算机来实现,其中,所述处理装置、控制器或计算机可包括任何现有的可编程电子控制单元或专用电子控制单元。类似地,所述处理、方法或算法可按照多种形式被存储为可由控制器或计算机执行的数据和指令,所述多种形式包括但不限于:永久地存储在非可写存储介质(诸如ROM装置)上的信息和可变地存储在可写存储介质(诸如软盘、磁带、CD、RAM装置以及其它磁介质和光介质)上的信息。所述处理、方法或算法还可在软件可执行对象中被实现。可选地,所述处理、方法或算法可使用合适的硬件组件(诸如专用集成电路(ASIC)、现场可编程门阵列(FPGA)、状态机、控制器或者其它硬件组件或装置)或者硬件、软件和固件组件的组合来整体或部分地实现。
尽管上文描述了示例性实施例,但是这些实施例并不意在描述了权利要求所包含的所有可能的形式。在说明书中使用的词语是描述性词语而非限制性词语,应该理解的是,可在不脱离本公开的精神和范围的情况下做出各种改变。如前所述,各个实施例的特征可被组合,以形成可能未被明确描述或示出的本发明的进一步的实施例。尽管各个实施例可能已被描述为提供优点或者在一个或更多个期望的特性方面优于其它实施例或现有技术的实施方式,但是本领域普通技术人员应该认识到,可对一个或更多个特征或特性进行折衷,以实现期望的整体***属性,期望的整体***属性取决于具体的应用和实施方式。这些属性可包括但不限于成本、强度、耐久性、生命周期成本、可销售性、外观、包装、尺寸、维护保养方便性、重量、可制造性、装配容易性等。因此,被描述为在一个或更多个特性方面不如其它实施例或现有技术的实施方式合意的实施例并不在本公开的范围之外,并且可被期望用于特定的应用。
Claims (8)
1.一种车辆,包括:
界面,被配置为显示车辆附近的对象的图像;
至少一个控制器,被配置为:基于与驾驶员眼睛视线相对于所述图像的方向相关联的焦点来改变所述图像的景深,以改变远离所述焦点的所述图像的模糊度。
2.如权利要求1所述的车辆,其中,所述至少一个控制器还被配置为:响应于驾驶员眼睛视线远离所述图像而使所述图像的景深最大化,以及响应于驾驶员眼睛视线指向所述图像的特定部分持续预定时间段,识别与通过所述图像在所述特定部分处呈现的物理位置相关联的焦点,并且基于所述车辆与所述物理位置之间的距离而减小所述图像的景深。
3.如权利要求2所述的车辆,其中,所述至少一个控制器还被配置为:通过调节用于捕捉所述图像的相机的光圈的尺寸来改变所述景深。
4.如权利要求2所述的车辆,其中,所述至少一个控制器还被配置为:通过调节视差来改变所述景深,所述视差用于混合用于捕捉所述图像的至少两个相机的图像。
5.如权利要求4所述的车辆,其中,所述至少一个控制器还被配置为:调节用于捕捉所述图像的所述至少两个相机中的每个的光圈的尺寸。
6.如权利要求1所述的车辆,其中,所述至少一个控制器还被配置为:识别附近的行人,并响应于识别出附近的行人正在穿过所述车辆的当前行驶路径而输出警告信号。
7.如权利要求1所述的车辆,其中,所述至少一个控制器还被配置为:识别附近的车辆和附近的车辆的轨迹,并响应于附近的车辆的轨迹与所述车辆的当前行驶路径交叉而输出警告信号。
8.如权利要求1所述的车辆,其中,所述界面为仪表组、信息娱乐***或抬头显示器。
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US14/825,558 US10713501B2 (en) | 2015-08-13 | 2015-08-13 | Focus system to enhance vehicle vision performance |
US14/825,558 | 2015-08-13 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN106454310A true CN106454310A (zh) | 2017-02-22 |
Family
ID=57908181
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201610649190.9A Pending CN106454310A (zh) | 2015-08-13 | 2016-08-10 | 用于增强车辆视觉性能的聚焦*** |
Country Status (5)
Country | Link |
---|---|
US (1) | US10713501B2 (zh) |
CN (1) | CN106454310A (zh) |
DE (1) | DE102016114754A1 (zh) |
MX (1) | MX2016010512A (zh) |
RU (1) | RU2016131044A (zh) |
Cited By (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN108859959A (zh) * | 2017-05-16 | 2018-11-23 | 通用汽车环球科技运作有限责任公司 | 车辆环境成像***和方法 |
CN109076201A (zh) * | 2017-12-28 | 2018-12-21 | 深圳市大疆创新科技有限公司 | 调焦方法、装置及抬头显示设备 |
CN109415016A (zh) * | 2017-06-16 | 2019-03-01 | 京东方科技集团股份有限公司 | 基于视觉的交互式控制设备和控制车辆后视镜的方法 |
CN109849788A (zh) * | 2018-12-29 | 2019-06-07 | 北京七鑫易维信息技术有限公司 | 信息提供方法、装置及*** |
WO2021228100A1 (zh) * | 2020-05-15 | 2021-11-18 | 华为技术有限公司 | 显示调整方法、装置、***及存储介质 |
Families Citing this family (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US11256931B2 (en) | 2010-04-19 | 2022-02-22 | SMR Patent S.à.r.l | Rearview device simulation |
US10967882B2 (en) * | 2018-01-09 | 2021-04-06 | Motherson Innovations Company Limited | Autonomous vehicles with control retaking systems and methods of using same |
JP6714791B2 (ja) * | 2016-07-13 | 2020-07-01 | 株式会社バンダイナムコエンターテインメント | シミュレーションシステム及びプログラム |
CN109784130B (zh) * | 2017-11-15 | 2023-04-28 | 株式会社日立制作所 | 行人重识别方法及其装置和设备 |
JP2020067461A (ja) * | 2018-10-19 | 2020-04-30 | 本田技研工業株式会社 | 表示装置 |
USD947699S1 (en) | 2019-03-11 | 2022-04-05 | Dometic Sweden Ab | Controller |
EP3726473A1 (en) * | 2019-04-18 | 2020-10-21 | SMR Patents S.à.r.l. | Method for rearview device simulation |
KR20210087271A (ko) | 2020-01-02 | 2021-07-12 | 삼성전자주식회사 | 3d 증강 현실 내비게이션 정보 표시 방법 및 장치 |
US12015836B2 (en) * | 2020-11-10 | 2024-06-18 | Deere & Company | Work vehicle perception systems and front modules |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20120093358A1 (en) * | 2010-10-15 | 2012-04-19 | Visteon Global Technologies, Inc. | Control of rear-view and side-view mirrors and camera-coordinated displays via eye gaze |
CN102887121A (zh) * | 2011-07-19 | 2013-01-23 | 通用汽车环球科技运作有限责任公司 | 将注视位置映射到车辆中的信息显示器的方法 |
CN103380447A (zh) * | 2011-03-01 | 2013-10-30 | 奥托立夫开发公司 | 用于机动车辆的驾驶员辅助***和方法 |
US20140364228A1 (en) * | 2013-06-07 | 2014-12-11 | Sony Computer Entertainment Inc. | Sharing three-dimensional gameplay |
Family Cites Families (28)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
AUPP603798A0 (en) * | 1998-09-18 | 1998-10-15 | Canon Kabushiki Kaisha | Automated image interpretation and retrieval system |
US6456262B1 (en) * | 2000-05-09 | 2002-09-24 | Intel Corporation | Microdisplay with eye gaze detection |
US6397137B1 (en) | 2001-03-02 | 2002-05-28 | International Business Machines Corporation | System and method for selection of vehicular sideview mirrors via eye gaze |
US8292433B2 (en) | 2003-03-21 | 2012-10-23 | Queen's University At Kingston | Method and apparatus for communication between humans and devices |
JP4707368B2 (ja) * | 2004-06-25 | 2011-06-22 | 雅貴 ▲吉▼良 | 立体視画像作成方法および装置 |
US7881496B2 (en) * | 2004-09-30 | 2011-02-01 | Donnelly Corporation | Vision system for vehicle |
US7719520B2 (en) | 2005-08-18 | 2010-05-18 | Scenera Technologies, Llc | Systems and methods for processing data entered using an eye-tracking system |
US7937667B2 (en) * | 2006-09-27 | 2011-05-03 | Donnelly Corporation | Multimedia mirror assembly for vehicle |
BRPI0909562A2 (pt) * | 2008-06-27 | 2015-09-22 | Ford Global Tech Llc | aparelhos para gravar eventos em um veículo |
WO2010144900A1 (en) * | 2009-06-12 | 2010-12-16 | Magna Electronics Inc. | Scalable integrated electronic control unit for vehicle |
US8174375B2 (en) | 2009-06-30 | 2012-05-08 | The Hong Kong Polytechnic University | Detection system for assisting a driver when driving a vehicle using a plurality of image capturing devices |
JP5460173B2 (ja) * | 2009-08-13 | 2014-04-02 | 富士フイルム株式会社 | 画像処理方法、画像処理装置、画像処理プログラム、撮像装置 |
WO2011067906A1 (ja) * | 2009-12-01 | 2011-06-09 | パナソニック株式会社 | 認識用撮像装置及びその制御方法 |
CN102655843A (zh) * | 2009-12-23 | 2012-09-05 | 高露洁-棕榄公司 | 视觉上有图案的定向组合物 |
JP2012027408A (ja) * | 2010-07-27 | 2012-02-09 | Sanyo Electric Co Ltd | 電子機器 |
GB2484133B (en) * | 2010-09-30 | 2013-08-14 | Toshiba Res Europ Ltd | A video analysis method and system |
US8941722B2 (en) * | 2012-01-03 | 2015-01-27 | Sony Corporation | Automatic intelligent focus control of video |
JP5572647B2 (ja) * | 2012-02-17 | 2014-08-13 | 任天堂株式会社 | 表示制御プログラム、表示制御装置、表示制御システム、および表示制御方法 |
US20140222995A1 (en) * | 2013-02-07 | 2014-08-07 | Anshuman Razden | Methods and System for Monitoring Computer Users |
EP3214837A1 (en) * | 2013-03-14 | 2017-09-06 | Brainlab AG | 3d-volume viewing by controlling sight depth |
JP6429368B2 (ja) * | 2013-08-02 | 2018-11-28 | 本田技研工業株式会社 | 歩車間通信システムおよび方法 |
JP6061816B2 (ja) * | 2013-08-22 | 2017-01-18 | キヤノン株式会社 | 撮像装置、撮像装置の制御方法、プログラム、および、記憶媒体 |
US9143880B2 (en) * | 2013-08-23 | 2015-09-22 | Tobii Ab | Systems and methods for providing audio to a user based on gaze input |
JP6333076B2 (ja) * | 2014-06-06 | 2018-05-30 | キヤノン株式会社 | 撮像装置、撮像装置の制御方法、プログラム、および、記憶媒体 |
US20160094705A1 (en) * | 2014-09-30 | 2016-03-31 | Ringcentral, Inc. | Message Read Confirmation Using Eye Tracking |
CN105866949B (zh) * | 2015-01-21 | 2018-08-17 | 成都理想境界科技有限公司 | 能自动调节景深的双目ar头戴设备及景深调节方法 |
US10130301B2 (en) * | 2015-01-22 | 2018-11-20 | Elwha Llc | Devices and methods for remote hydration measurement |
US9992473B2 (en) * | 2015-01-30 | 2018-06-05 | Jerry Nims | Digital multi-dimensional image photon platform system and methods of use |
-
2015
- 2015-08-13 US US14/825,558 patent/US10713501B2/en active Active
-
2016
- 2016-07-28 RU RU2016131044A patent/RU2016131044A/ru not_active Application Discontinuation
- 2016-08-09 DE DE102016114754.0A patent/DE102016114754A1/de active Pending
- 2016-08-10 CN CN201610649190.9A patent/CN106454310A/zh active Pending
- 2016-08-12 MX MX2016010512A patent/MX2016010512A/es unknown
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20120093358A1 (en) * | 2010-10-15 | 2012-04-19 | Visteon Global Technologies, Inc. | Control of rear-view and side-view mirrors and camera-coordinated displays via eye gaze |
CN103380447A (zh) * | 2011-03-01 | 2013-10-30 | 奥托立夫开发公司 | 用于机动车辆的驾驶员辅助***和方法 |
CN102887121A (zh) * | 2011-07-19 | 2013-01-23 | 通用汽车环球科技运作有限责任公司 | 将注视位置映射到车辆中的信息显示器的方法 |
US20140364228A1 (en) * | 2013-06-07 | 2014-12-11 | Sony Computer Entertainment Inc. | Sharing three-dimensional gameplay |
Cited By (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN108859959A (zh) * | 2017-05-16 | 2018-11-23 | 通用汽车环球科技运作有限责任公司 | 车辆环境成像***和方法 |
CN109415016A (zh) * | 2017-06-16 | 2019-03-01 | 京东方科技集团股份有限公司 | 基于视觉的交互式控制设备和控制车辆后视镜的方法 |
CN109415016B (zh) * | 2017-06-16 | 2022-06-28 | 京东方科技集团股份有限公司 | 基于视觉的交互式控制设备和控制车辆后视镜的方法 |
US11400862B2 (en) | 2017-06-16 | 2022-08-02 | Boe Technology Group Co., Ltd. | Vision-based interactive control apparatus and method of controlling rear-view mirror for vehicle |
CN109076201A (zh) * | 2017-12-28 | 2018-12-21 | 深圳市大疆创新科技有限公司 | 调焦方法、装置及抬头显示设备 |
WO2019127224A1 (zh) * | 2017-12-28 | 2019-07-04 | 深圳市大疆创新科技有限公司 | 调焦方法、装置及抬头显示设备 |
CN109849788A (zh) * | 2018-12-29 | 2019-06-07 | 北京七鑫易维信息技术有限公司 | 信息提供方法、装置及*** |
WO2021228100A1 (zh) * | 2020-05-15 | 2021-11-18 | 华为技术有限公司 | 显示调整方法、装置、***及存储介质 |
CN113674717A (zh) * | 2020-05-15 | 2021-11-19 | 华为技术有限公司 | 显示调整方法、装置、***及存储介质 |
US11885962B2 (en) | 2020-05-15 | 2024-01-30 | Huawei Technologies Co., Ltd. | Display adjustment method and apparatus, system, and storage medium |
Also Published As
Publication number | Publication date |
---|---|
RU2016131044A (ru) | 2018-02-01 |
DE102016114754A1 (de) | 2017-02-16 |
MX2016010512A (es) | 2017-02-13 |
US20170046578A1 (en) | 2017-02-16 |
US10713501B2 (en) | 2020-07-14 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN106454310A (zh) | 用于增强车辆视觉性能的聚焦*** | |
JP7210589B2 (ja) | ダイナミックレンジを拡大するための複数の動作モード | |
US20230356721A1 (en) | Personalization system and method for a vehicle based on spatial locations of occupants' body portions | |
CN106143282B (zh) | 车辆用组合尾灯及包括其的车辆 | |
US9840197B2 (en) | Apparatus for providing around view and vehicle including the same | |
US9736364B2 (en) | Camera capable of reducing motion blur in a low luminance environment and vehicle including the same | |
US20150341620A1 (en) | Stereo camera and driver assistance apparatus and vehicle including the same | |
CN106240457B (zh) | 车辆驾驶辅助装置及车辆 | |
US9919611B2 (en) | Vehicle charge assistance device and vehicle including the same | |
CN105966405A (zh) | 驾驶员分心检测*** | |
DE102019104485A1 (de) | Fenstertönungssystem und -verfahren für ein fahrzeug | |
CN107364390A (zh) | 设于车辆的控制装置、车辆及其控制方法 | |
JP2020516100A (ja) | アラウンドビュー提供装置 | |
CN109849906A (zh) | 自主行驶车辆及其控制方法 | |
CN108737992A (zh) | 通过车辆间通信的摄像机辅助的车辆车灯的诊断 | |
KR102470298B1 (ko) | 카메라 보정 방법 및 장치 | |
CN112061024A (zh) | 车辆外部扬声器*** | |
CN113497876B (zh) | 红外摄像头模块盖 | |
DE102022126163A1 (de) | System und verfahren zum integrieren auditiver und nichtauditiver eingaben für anpassbare spracherkennung | |
CN113259004A (zh) | 具有可见光通信的增强现实车辆识别 | |
CN115116247A (zh) | 控制方法、装置和*** |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
RJ01 | Rejection of invention patent application after publication |
Application publication date: 20170222 |
|
RJ01 | Rejection of invention patent application after publication |