CN104010912A - 用于增强车辆内摄像仪视场的***、方法和装置 - Google Patents

用于增强车辆内摄像仪视场的***、方法和装置 Download PDF

Info

Publication number
CN104010912A
CN104010912A CN201180075945.4A CN201180075945A CN104010912A CN 104010912 A CN104010912 A CN 104010912A CN 201180075945 A CN201180075945 A CN 201180075945A CN 104010912 A CN104010912 A CN 104010912A
Authority
CN
China
Prior art keywords
graphicinformation
vehicle
video camera
reflecting surfaces
visual field
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201180075945.4A
Other languages
English (en)
Other versions
CN104010912B (zh
Inventor
D·L·格劳曼
C·E·蒙特西诺斯
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Intel Corp
Original Assignee
Intel Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Intel Corp filed Critical Intel Corp
Publication of CN104010912A publication Critical patent/CN104010912A/zh
Application granted granted Critical
Publication of CN104010912B publication Critical patent/CN104010912B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R11/00—Arrangements for holding or mounting articles, not otherwise provided for
    • B60R11/04—Mounting of cameras operative during drive; Arrangement of controls thereof relative to the vehicle
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R1/00—Optical viewing arrangements; Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
    • B60R1/02—Rear-view mirror arrangements
    • B60R1/025—Rear-view mirror arrangements comprising special mechanical means for correcting the field of view in relation to particular driving conditions, e.g. change of lane; scanning mirrors
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R1/00—Optical viewing arrangements; Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
    • B60R1/12—Mirror assemblies combined with other articles, e.g. clocks
    • B60R2001/1253—Mirror assemblies combined with other articles, e.g. clocks with cameras, video cameras or video screens
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/10—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of camera system used
    • B60R2300/101—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of camera system used using cameras with adjustable capturing direction
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/80—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the intended use of the viewing arrangement
    • B60R2300/8006—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the intended use of the viewing arrangement for monitoring and displaying scenes of vehicle interior, e.g. for monitoring passengers or cargo

Landscapes

  • Engineering & Computer Science (AREA)
  • Mechanical Engineering (AREA)
  • Multimedia (AREA)
  • Fittings On The Vehicle Exterior For Carrying Loads, And Devices For Holding Or Mounting Articles (AREA)

Abstract

本发明的某些实施例可以包括用于增强车辆内摄像仪视场的***、方法和装置。根据本发明的示例性实施例，提供一种用于增强与车辆内的摄像仪相关联的视场的方法，用于由一个或多个处理器执行计算机可执行指令。所述方法包括：捕捉来自车辆内的一个或多个物体或一个或多个乘员的图像信息；处理所述图像信息；接收与以下各项中的一个或多个相关联的触发信息：与所述车辆相关联的所述图像信息、所述一个或多个物体或者所述一个或多个乘员；至少部分地基于所接收的触发信息配置一个或多个反射表面，其中，配置包括相对于所述摄像仪的视场定位所述一个或多个反射表面；以及至少基于对所述图像信息的处理来调整所述一个或多个反射表面的位置。

Description

用于增强车辆内摄像仪视场的***、方法和装置
技术领域
本发明总体上涉及带有摄像仪的车辆的成像部分，并且具体地，涉及用于增强摄像仪视场的***、方法和装置。
背景技术
汽车制造商依靠许多车厢内的传感器和控制器来接收来自车辆乘员的输入，和/或测量与车辆相关联的方面。车厢内的摄像仪可以用作例如收集与车辆内的物品或乘员有关的信息的传感器。在某些情况下，对车辆内的摄像仪的使用可以用于简化线束、减少体积、提高可靠性以及降低制造成本。但是，车辆内的摄像仪可能由于实际或成本约束而在数量上和/或在车辆内的放置位置上受到限制。通过限制车辆内的摄像仪的数量或放置，可用的视场可能被限制于车辆车厢的某些部分。
附图说明
现在将参考附图和流程图，所述附图和流程图不一定是按比例绘制的，并且其中：
图1A为根据本发明示例性实施例的具有由圆顶反射镜扩大的视场的示意性摄像仪的示意图；
图1B为根据本发明示例性实施例的带有由改向反射镜修正的视场的图1A的示意性摄像仪的示意图；
图2为根据本发明示例性实施例的具有示意性的面对车厢的摄像仪的车辆侧景的示意图，面对车厢的摄像仪具有由改向反射表面修正的视场；
图3为根据本发明示例性实施例的带有示意性的面对车厢的摄像仪和收缩的被修正的反射表面的车辆侧景的示意图；
图4为根据本发明示例性实施例的示意性摄像仪视场修正***的方框图；
图5为根据本发明示例性实施例的方法流程图。
具体实施方式
将参考附图在下文中更充分地描述本发明的实施例，其中，在附图中示出了本发明的实施例。但是，本发明可以体现为许多不同的形式，而不应被解释为限于在此所给出的实施例；相反，提供这些实施例是为了使本公开是彻底的和完整的，并且这些实施例将向本领域技术人员充分传达本发明的范围。
在下面的描述中，给出了许多具体的细节。但是，应当理解，可以在没有这些具体细节的情况下实践本发明的实施例。在其他实例中，未详细示出公知的方法、结构和技术，以免模糊对本说明书的理解。提及“一个实施例”、“实施例”、“示例性实施例”、“各种实施例”等表示如此描述的本发明的实施例可以包括特定的特征、结构或特性，但不是每个实施例都必须包括该特定的特征、结构或特性。此外，短语“在一个实施例中”的反复使用不一定指的是同一实施例，尽管其可以是指同一实施例。
在下面的描述中，提及“反射镜”总体上用于指至少一个镜面表面，并且与“反射器”、“反射元件”、“反射面”等是可以互换的。根据本发明的示例性实施例，镜面表面可以是扁平的、异型的、圆顶的、扭曲的、弯曲的等等。根据某些示例性实施例，术语“反射镜”可以指一个或多个反射元件。
本发明的某些实施例可以使固定位置的摄像仪能够具有通过选择性添加或移除摄像仪视场路径内的一个或多个反射镜而被修正、改向或延伸的相关联的视场。根据示例性实施例，一个或多个反射镜可以选择性地接合，以便来自车辆某部分的图像被反射进摄像仪视场内。在另一实施例中，一个或多个反射镜可以是分离的或收缩的，以便有清晰的视场路径用于成像车辆的其他部分。根据另一示例性实施例，一个或多个反射镜可以选择性地接合，以便来自车辆某部分的图像被反射进摄像仪视场用于成像，同时摄像仪视场的一部分未被反射镜阻碍。在本示例性实施例中，可以同时对车辆的不同区域进行成像。
根据本发明的示例性实施例，可以选择性地改变反射镜的位置、倾斜、旋转、姿态、弯曲率、扭曲率或它们的组合，以访问与车辆相关联的不同视野。根据示例性实施例，一个或多个伺服发动机、致动器、螺线管、静电元件等可以用于选择性地控制反射镜的位置、倾斜、旋转、姿态、弯曲率或扭曲率。根据示例性实施例，反射镜与摄像仪的接近度可以被选择性地修正。根据示例性实施例，摄像仪可以具有与其视场相关联的受光角，并且放置在摄像仪光圈附近的小直径反射镜可以用于对摄像仪视场的至少一部分(如果不是全部的话)进行改向。根据示例性实施例，与反射镜相关联的直径可能需要随着摄像仪光圈和反光镜之间距离的增加而增加。根据某些示例性实施例，利用靠近摄像仪光圈放置的小反射镜来对视场进行改向，在重量、体积和空间方面可能是有利的。
根据某些示例性实施例，反射镜可以与一个或多个致动器交互，或者可以附接至一个或多个致动器。根据示例性实施例，致动器可以选择性地接合，以定位、设置或调整反射镜的某些方面。根据示例性实施例，致动器可以用于相对于摄像仪的视场来定位、设置或调整反射镜。在示例性实施例中，致动器可以用于选择性地脱离，以相对于摄像仪视场改变或移动反射镜的相对布置或形状。根据示例性实施例，致动器可以提供用于定位反射镜的某些受控致动运动，包括线性平移、旋转、倾斜和姿态。
根据示例性实施例中，反射镜可以是可变形的。例如，反射镜在一种模式中可以是扁平的，而在另一种模式中是弯曲的。根据示例性实施例，致动器和反射镜可以被设计为选择性地修正与反射镜相关联的形状、变形、弯曲等。例如，致动器可以被配置为选择性地使反射镜或附接柔性反射镜表面的基体的一部分弯曲。
根据示例性实施例，摄像仪可以放置在车辆控制台内或接近车辆控制台，并可以被配置为查看驾驶员的头部和躯干。在示例性实施例中，在增加了适当定位的反射镜的情况下，摄像仪的视场可以被延伸为例如包括一个或更多个乘客。通过控制反射镜的位置，视场可以进一步被延伸为包括来自车辆外部的图像信息。但车辆内或车辆外的某些感兴趣的区域可能由于某些阻碍视场的物体仍然被挡住。根据示例性实施例，可以选择性地定位并结合使用两个或更多个反射镜，以访问通常可能不在摄像仪或者摄像仪与单个反射镜的组合的视线内的景物。
根据本发明示例性实施例，各种部件和几何形状可以用于选择性地改向或延伸摄像仪的视场，现在将参考附图来描述这些部件和几何形状。
图1A示出了根据本发明示例性实施例的由圆顶反射镜106将正常视场108扩展为延伸的视场110的摄像仪100。在示例性实施例中，摄像仪100可以安装或附接至车辆的一部分，例如安装或附接至控制台或仪表盘102上。根据示例性实施例，摄像仪100可以放置在车辆内任何方便的位置。根据示例性实施例，圆顶反射镜106可以附接至车辆，例如在后视镜下侧、在车窗上、在车厢顶部上或附近、或者在车辆上任何方便的位置。根据示例性实施例，可以对摄像仪与反射镜的组合进行旋转、平移等等，以获得车辆内的任意方便的布置，而不脱离示例性实施例。根据示例性实施例，摄像仪和相关联的反射镜可以放置在车辆的车厢隔间内。在其他示例性实施例中，摄像仪、反射镜或摄像仪和反射镜都可以在车厢隔间外部而放置在车辆上。
根据示例性实施例，圆顶反射镜106可以提供车辆车厢的特定的“鱼眼”或翘曲的视野，以供摄像仪100成像。例如，圆顶反射镜106可以提供360度的视野。在示例性实施例中，视野可以包括车辆内部和/或外部的图像信息。在本示例性实施例中，通常仅在摄像仪100视野外侧的附加信息可以用于供摄像仪100成像。根据示例性实施例，由摄像仪100捕捉的图像可以被处理、转化、消除翘曲等，以获得来自感兴趣区域的信息。
图1A还描绘了用于容纳改向反射镜112的示例性槽104，改向反射镜112在该图中被描绘为处于收缩位置。图1B描绘了改向反射镜112处于接合或交替位置。根据示例性实施例，改向反射镜I12可以选择性地啮合、倾斜116、翘曲等，以选择所期望的改向视场114。
图2是根据本发明示例性实施例的具有示意性的面对车厢的摄像仪202的车辆侧景200的示意图，面对车厢的摄像仪202具有由改向反射镜204修正、增强或延伸的视场。在示例性实施例中，改向反射镜204可以被配置为经由一个或多个致动器选择性地接合(如图所示)或收缩进腔体206。根据示例性实施例，摄像仪202和与改向反射镜204相关联的致动器可以放置在控制台内靠近用于访问电线、电源等的方便位置。根据示例性实施例，一个或多个致动器可以用于倾斜或旋转216改向反射镜204。例如，改向反射镜可以倾斜或旋转216，以调整摄像仪202的改向视场。
根据示例性实施例，改向反射镜204可以平移为仅部分地与摄像仪202的视场交互。在本示例性实施例中，改向反射镜204可以提供视场的部分改向，而视场的其他部分可以保持在摄像仪的视线内，而不由改向反射镜204改向。根据示例性实施例，改向反射镜204可以完全倾斜或旋转216出与摄像仪202相关联的正常视场的线路。
根据示例性实施例，摄像仪202、改向反射镜204或腔体206中的一个或多个可以附接至与车辆相关联的仪表盘208或其他方便的位置。在示例性实施例中，例如，后视镜212可以附接至挡风玻璃210，并且可以包括附加的改向反射镜，用以获得与车辆相关联的延伸的或扩大的图像。例如，如之前在图1A和1B中所描绘的，后视镜212可以包括圆顶反射镜或可能与倾斜216的改向反射镜204结合使用以提供车辆车厢的附加的延伸视野的其他反射镜表面。与改向反射镜204类似，后视镜可以被选择性地布置、倾斜、翘曲等，以与改向反射镜204协调。根据示例性实施例，改向反射镜204可以接合和/或倾斜216，以获取车辆外侧的图像。根据示例性实施例，改向反射镜204可以收缩进腔体206和/或倾斜216，以获取车辆内侧的图像，例如与乘客座位214相关联的或乘客座位214附近的感兴趣区域。根据示例性实施例，改向反射镜204可以被配置为当车辆停放并且车内没有乘员时，对车辆外侧部分进行成像。根据示例性实施例，某些触发(例如门打开)、重量传感器、钥匙链、点火开关、乘员手势等可以用来修正改向反射镜204或任何其他相关联反射表面的位置、倾斜、收缩、弯曲、翘曲等。根据示例性实施例，改向反射镜204可以选择性地响应于各种触发而被改变，以从车辆外侧向车辆内侧切换视野，或在任何可用视野之间切换。
图3是具有面对车厢的摄像仪302(其可以对应于图2中的摄像仪202)和收缩的改向反射镜304(其可以对应于图2中的改向反射镜204)的车辆侧景300的示意性图。根据本发明示例性实施例，并且如上所述的，传感器可以位于车辆内，例如，用于检测乘员308的存在。根据示例性实施例，面对车厢的摄像仪302可以对车辆车厢内部的一部分进行成像。根据示例性实施例，图像可以被处理或分析，以获取与车辆的一个或多个乘员308相关联的或者与关联于车辆的任何物品、控制等相关联的信息，包括但不限于：物理特征、手的位置、方向盘的位置、座椅位置、安全带位置、踏板位置、个人物品、控制设置、乘客、车辆内容、车辆设置等。
图4是根据本发明示例性实施例的示意性摄像仪视场修正***400的方框图。***400包括：与一个或多个摄像仪424通信的控制器402，以及用于相对于一个或多个摄像仪424定位或配置一个或多个反射镜422的一个或多个致动器426。根据示例性实施例，控制器402可以包括一个或多个处理器406以及一个或多个输入/输出接口408。根据示例性实施例，一个或多个输入/输出接口可以用于与一个或多个摄像仪424和/或一个或多个致动器426通信。根据示例性实施例，一个或多个致动器426可以包括伺服控制和/或致动反馈，用于对一个或多个反射镜422的粗略或精细定位进行位置验证和/或调整。
根据示例性实施例，存储器404可以包括操作***412和数据414。在示例性实施例中，存储器404可以包括反射镜模块418，其可以用于经由一个或多个致动器426定位或配置反射镜422。根据示例性实施例，一个或多个致动器426可以包括静电换能器、磁、静电荷、线性发动机、螺线管、发动机DC发动机、空气驱动发动机、或任何能够配置一个或多个反射镜的装置。在示例性实施例中，配置一个或多个反射镜可以包括线性平移、旋转、倾斜、扫描等。
根据示例性实施例，存储器可以包括一个或多个用于控制摄像仪424、接收图像、处理图像和/或从图像信息中提取信息的摄像仪模块420。
根据示例性实施例，控制器402可以包括一个或多个网络接口410，以经由无线网络432与远程服务器434进行通信。例如，由一个或多个摄像仪424捕捉的图像信息或与所述图像信息相关联的信息可以被传递至远程设备434，例如，计算机、网络服务器、移动计算设备等。在远程设备434处，或在与远程设备434通信的设备处，图像信息或与所述图像信息相关联的信息可以被存储、进一步被处理、或被查看，使得主人可以从远程位置查看车辆的内容或环境。根据另一示例性实施例，车辆主人(或具有访问权的其他相关联实体)可以使用这种***来对乘员进行可视验证，或捕捉和传送车辆内侧或外侧的一个或多个图像。根据示例性实施例，如果车辆被盗，那么执法部门或其他授权实体可以利用这种***来捕捉小偷的图像。
根据示例性实施例，摄像仪模块420可以用于确定与一个或多个摄像仪424捕捉的图像相关联的深度信息。根据示例性实施例，控制器402可以用于控制一个或多个光源428以用结构光照亮车辆内的乘员或物体。例如，可以通过以下方式从光源428产生已知的光图案：通过衍射光栅或全息元件430发射光。根据示例性实施例，所产生的光图案可以被投影在车辆内的乘员或物体上。根据另一示例性实施例，所产生的光图案可以被投影到车辆外侧的物体上。根据示例性实施例，光源428可以包括发光二极管、激光二极管等。根据示例性实施例，光源428可以发射出摄像仪424可见的波长，包括对人眼安全的红外线、近红外线、可见光或紫外光。根据示例性实施例，光源428可以是脉冲的(例如根据与摄像仪424相关联的帧速率的倍数)，以进一步帮助检测投影的图像。
根据示例性实施例，一个或多个摄像仪424可以捕捉图像，以确定与结构光投影在其上的一个或多个物体或人员相关联的深度信息。例如，摄像仪模块420可以用于处理图像并检测与所投影的结构光相关联的特征的形状或相对间距。根据示例性实施例，可以通过对来自光源428的光的波长和/或衍射光栅或全息元件430的折射率和/或光密度轮廓进行选择，来设计结构光使之具有已知的图案和扇出角度。根据示例性实施例，与结构光相关联的投影特征可以相对于衍射光栅或全息元件430与结构光投射在其上的一个或多个物体或人员之间的距离而被调整大小或被间隔开。根据示例性实施例，可以通过例如用一个或多个处理器406分析投影特征的大小或间距来获取深度信息。
根据示例性实施例，可以获取深度信息，例如，以确定乘员头部或上半身的位置。这种信息可能对于例如相对于感兴趣的物体或乘员将反射镜的位置或倾斜角设置在适当的位置是有用的。例如，可以至少部分地基于根据所处理的结构光图像确定的信息来调整反射镜布置或反射镜倾斜角的位置，，使得能够调整视场。根据示例性实施例，反射镜可以被调整，以获得视场的最优(或接近最优)的使用。例如，摄像仪可以具有与其视场相关联的有限数量的像素，并且根据示例性实施例，与特定的感兴趣区域相关联的图像可以具有其完整的(或接近于完整的)分辨率，所述分辨率通过控制摄像仪和反射镜的组合来利用，以使感兴趣区域占用像实际可能那样多的视场。
现在将参考图5的流程图来对用于增强与车辆内摄像仪相关联的视场的示例性方法500进行描述。方法500开始于方框502，并且根据本发明示例性实施例，其包括：捕捉来自车辆内的一个或多个物体或者一个或多个乘员的图像信息。在方框504中，方法500包括：处理图像信息。在方框506中，方法500包括：接收与以下中的一个或多个相关联的触发信息：与车辆相关联的图像信息、一个或多个物体、或一个或多个乘员。在方框508中，方法500包括：至少部分地基于所接收的触发信息来配置一个或多个反射表面，其中，配置包括相对于摄像仪视场定位一个或多个反射表面。在方框510中，方法500包括：至少基于对图像信息的处理来调整一个或多个反射表面的位置。方法500在方框510后结束。
根据示例性实施例，触发信息可以是基于与车辆相关联的事件或定时、与一个或多个乘员相关联的动作或事件、和/或与图像相关联的信息。例如，摄像仪可以被定位，以捕捉使用中的车辆内侧的物品或乘员的图像，但是例如在乘员离开车辆并锁定门之后，摄像仪视场可以扫描车厢以便发现任何遗留下来的物品，并且如果没有检测到任何东西，那么视场可以被切换为监视汽车外侧的事件。在本示意性示例中，锁定汽车的动作可以提供触发信息，用以相对于摄像仪定位反射镜以便扫描座椅等。本示例还描绘了触发信息可以如何基于图像中的信息。
示例性实施例可以包括至少基于图像信息的处理来调整与摄像仪相关联的焦距。示例性实施例可以包括至少部分地基于与一个或多个反射表面相关联的形状来变换图像信息。示例性实施例可以包括调整一个或多个反射表面的形状。示例性实施例可以包括将一图案投影至一个或多个物体或乘员。捕捉图像信息可以包括对投影图案的至少一部分进行成像。对图案进行投影可以包括结构光图案。
示例性实施例可以包括移动或旋转一个或多个反射镜或反射表面中的至少一个，以改变与摄像仪相关联的视场。根据示例性实施例，反射镜可以包括形状、轮廓、弯曲等。根据示例性实施例，反射镜可以是圆顶的、圆柱的、多角度的反射阵列或复杂的形状。
根据示例性实施例，能够提供某些技术效果，例如创建某些能够选择性地延伸、扩大或增强摄像仪视场的***、方法和设备。本发明的示例性实施例能提供以下进一步技术效果：提供利用单台摄像仪选择性地查看与车辆相关联的多于一个的区域的***和方法。
在本发明的示例性实施例中，摄像仪视场修正***400可以包括被执行以便于任何操作的任何数量的硬件和/或软件应用程序。在示例性实施例中，一个或多个输入/输出接口可以便于摄像仪视场修正***400与一个或多个输入/输出设备之间的通信。例如，通用串行总线端口、串行端口、磁盘驱动器、CD-ROM驱动器和/或一个或多个用户接口设备(例如显示器、键盘、小键盘、鼠标、控制面板、触摸屏显示器、麦克风等)可以便于用户与摄像仪视场修正***400的交互。一个或多个输入/输出接口可以用于从各种输入设备接收或收集数据和/或用户指令。所接收的数据可以由一个或多个计算机处理器来处理(如在本发明的各种实施例中所期望的)，或存储在一个或多个存储器设备中。
一个或多个网络接口可以便于将摄像仪视场修正***400的输入和输出连接至一个或多个合适的网络和/或连接；例如，便于与任何数量的与***相关联的传感器的通信的连接。一个或多个网络接口可以进一步便于连接到一个或多个合适的网络；例如，局域网、广域网、因特网、蜂窝网络、射频网络、蓝牙TM(由爱立信公司所有)启用网络、Wi-FiTM(由Wi-Fi联盟所有)启用网络、基于卫星的网络、任何有线网络、任何无线网络等，以与外部设备和/或***通信。
如所期望的，本发明的实施例可以包括带有多于或少于图4中示出的部件的摄像仪视场修正***400。
参考根据本发明示例性实施例的***和方法和/或计算机程序产品的方框图和流程图，对本发明的某些实施例进行了如上描述。应当理解，方框图和流程图中的一个或多个方框以及方框图和流程图中的方框的组合，分别能够由计算机可执行程序指令来实现。同样地，根据本发明的一些实施例，方框图和流程图的某些方框可能不一定需要按照所提出的顺序来执行，或者可能不一定需要全部执行。
这些计算机可执行程序指令可以被加载至通用计算机、专用计算机、处理器或其他可编程数据处理装置，以产生特定的机器，使得在计算机、处理器或其他可编程数据处理装置上执行的指令创建用于实现流程图方框或多个方框中指定的一个或多个功能的模块。这些计算机程序指令也可以存储在计算机可读存储器中，其能够指导计算机或其他可编程数据处理装置以特定方式起作用，以便存储在计算机可读存储器中的指令产生制造产品，其包括实现流程图方框或多个方框中指定的一个或多个功能的指令模块。作为示例，本发明的实施例可以提供计算机程序产品，其包括具有体现在其中的计算机可读程序代码或程序指令的计算机可用介质，所述计算机可读程序代码适于被执行以实现在流程图方框或多个方框中指定的一个或多个功能。计算机程序指令也可以被加载至计算机或其他可编程数据处理装置上，以引起一系列操作元件或步骤在计算机或其他可编程装置上执行，以产生计算机实现的过程，使得在计算机或其他可编程装置上执行的指令提供用于实现流程图方框或多个方框中指定功能的元件或步骤。
相应地，方框图和流程图中的方框支持用于执行指定功能的模块的组合、用于执行指定功能的元件或步骤的组合、以及用于执行指定功能的程序指令模块。还应当理解，方框图和流程图的每个方框以及方框图和流程图中的方框的组合能够由专用的、基于硬件的用于执行指定功能、元件或步骤的计算机***或者专用硬件和计算机指令的组合来实现。
虽然已经结合当前被认为是最实用的内容以及各个实施例来描述了本发明的某些实施例，但是应当理解，本发明并不限于所公开的实施例，而是相反，本发明旨在覆盖包括在所附权利要求范围内的各种修改和等同的布置。尽管在此采用了特定术语，但是它们仅以通用的和说明性的意义进行使用，并不是为了限制的目的。
本书面说明书使用示例来公开本发明的某些实施例，包括最佳模式，并且还使本领域任何技术人员能够实践本发明的某些实施例，包括制作和使用任何设备或***以及执行任何所结合的方法。本发明的某些实施例的可授予专利权的范围在权利要求中被限定，并且可以包括本领域技术人员可想到的其他实施例。如果这样的其他示例具有的结构元件并不与权利要求的书面语言不同，或者如果它们包括与权利要求的书面语言无实质差异的等效结构元件，那么这样的其它示例旨在落入权利要求的范围内。

Claims (32)

1.一种用于增强与车辆内的摄像仪相关联的视场的方法，包括由一个或多个处理器执行计算机可执行指令，所述方法还包括：
捕捉来自所述车辆内的一个或多个物体或者一个或多个乘员的图像信息；
处理所述图像信息；
接收与以下各项中的一个或多个相关联的触发信息：与所述车辆相关联的所述图像信息、所述一个或多个物体或者所述一个或多个乘员；
至少部分地基于所接收的触发信息来配置一个或多个反射表面，其中，配置包括相对于所述摄像仪的视场来定位所述一个或多个反射表面；以及
至少基于对所述图像信息的所述处理来调整所述一个或多个反射表面的位置。
2.根据权利要求1所述的方法，还包括：至少基于对所述图像信息的所述处理来调整与所述摄像仪相关联的焦距。
3.根据权利要求1所述的方法，其中，处理所述图像信息包括：至少部分地基于与所述一个或多个反射表面相关联的形状来变换所述图像信息。
4.根据权利要求1所述的方法，其中，配置还包括：调整所述一个或多个反射表面的形状。
5.根据权利要求1所述的方法，还包括：将一图案投影到所述一个或多个物体或者乘员上。
6.根据权利要求5所述的方法，其中，捕捉所述图像信息包括：对所投影的图案的至少一部分进行成像。
7.根据权利要求5所述的方法，其中，对一图案进行投影包括：发射包括可见光、近红外光或紫外光中的一个或多个的结构化光图案。
8.根据权利要求1所述的方法，其中，配置所述一个或多个反射表面包括：移动或旋转所述一个或多个反射表面中的至少一个，以改变与所述摄像仪相关联的视场。
9.一种车辆，包括：
至少一个摄像仪；
一个或多个反射表面，其中，所述一个或多个反射表面是能够动态配置的；
至少一个存储器，其用于存储数据和计算机可执行指令；以及
一个或多个处理器，其被配置为访问所述至少一个存储器，并且还被配置为执行用于以下操作的计算机可执行指令：
捕捉来自与所述车辆相关联的一个或多个物体或者一个或多个乘员的图像信息；
处理所述图像信息；
识别与以下各项中的一个或多个相关联的触发信息：与所述车辆相关联的所述图像信息、所述一个或多个物体或者所述一个或多个乘员；
至少部分地基于所接收的触发信息来配置所述一个或多个反射表面，其中，配置包括相对于所述摄像仪的视场来定位所述一个或多个反射表面；以及
至少基于对所述图像信息的所述处理来调整所述一个或多个反射表面的位置。
10.根据权利要求9所述的车辆，其中，所述一个或多个反射表面包括以下各项中的一个或多个的至少一部分：圆顶、圆柱、多角度反射阵列或复杂形状。
11.根据权利要求9所述的车辆，还包括：与所述一个或多个反射表面通信的一个或多个伺服发动机。
12.根据权利要求9所述的车辆，其中，所述触发信息包括以下各项中的一个或多个：开启与所述车辆相关联的门；识别所述车辆内的乘员的身份；或者识别与所述车辆的乘员相关联的手势或移动。
13.根据权利要求9所述的车辆，其中，配置所述一个或多个反射表面包括：移动或旋转所述一个或多个反射表面中的至少一个，以改变与所述摄像仪相关联的视场。
14.根据权利要求9所述的车辆，还包括：至少基于对所述图像信息的所述处理来调整与所述摄像仪相关联的焦距。
15.根据权利要求9所述的车辆，其中，处理所述图像信息包括：至少部分地基于与所述一个或多个反射表面相关联的形状来变换所述图像信息。
16.根据权利要求9所述的车辆，其中，配置还包括：调整所述一个或多个反射表面的形状。
17.根据权利要求9所述的车辆，还包括：光源和漫射器，用于将一图案投影到所述一个或多个物体或者乘员上，其中，所述光源包括可见光、近红外光或紫外光中的一个或多个。
18.根据权利要求17所述的车辆，其中，捕捉所述图像信息包括：对所投影的图案的至少一部分进行成像。
19.一种装置，包括：
至少一个存储器，其用于存储数据和计算机可执行指令；以及
一个或多个处理器，其被配置为访问所述至少一个存储器，并且还被配置为执行用于以下操作的计算机可执行指令：
捕捉来自与车辆相关联的一个或多个物体或者一个或多个乘员的图像信息；
处理所述图像信息；
识别与以下各项中的一个或多个相关联的触发信息：与所述车辆相关联的所述图像信息、所述一个或多个物体或者所述一个或多个乘员；
至少部分地基于所接收的触发信息来配置一个或多个反射表面，其中，配置包括相对于摄像仪的视场来定位所述一个或多个反射表面；以及
至少基于对所述图像信息的所述处理来调整所述一个或多个反射表面的位置。
20.根据权利要求19所述的装置，其中，所述一个或多个反射表面包括以下各项中的一个或多个的至少一部分：圆顶、圆柱、多角度反射阵列或者复杂形状。
21.根据权利要求19所述的装置，其中，所述一个或多个处理器被配置为控制与所述一个或多个反射表面通信的一个或多个伺服发动机。
22.根据权利要求19所述的装置，其中，所述信息包括以下各项中的一个或多个：开启与所述车辆相关联的门；识别所述车辆内的乘员的身份；或者识别与所述车辆的乘员相关联的手势或移动。
23.根据权利要求19所述的装置，其中，配置所述一个或多个反射表面包括：移动或旋转所述一个或多个反射表面中的至少一个，以改变与所述摄像仪相关联的视场。
24.根据权利要求19所述的装置，还包括：至少基于对所述图像信息的所述处理来调整与所述摄像仪相关联的焦距。
25.根据权利要求19所述的装置，其中，处理所述图像信息包括：至少部分地基于与所述一个或多个反射表面相关联的形状来变换所述图像信息。
26.根据权利要求19所述的装置，其中，配置还包括：调整所述一个或多个反射表面的形状。
27.根据权利要求19所述的装置，其中，所述一个或多个处理器被配置为控制光源，用以将一图案投影到所述一个或多个物体或者乘员上，并且其中，捕捉所述图像信息包括对所投影的图案的至少一部分进行成像。
28.一种计算机程序产品，包括计算机可用介质，所述计算机可用介质具有体现在其中的计算机可读程序代码，所述计算机可读程序代码适于被执行以实现用于增强与车辆内的摄像仪相关联的视场的方法，所述方法还包括：
捕捉来自与所述车辆相关联的一个或多个物体或者一个或多个乘员的图像信息；
处理所述图像信息；
接收或识别与以下各项中的一个或多个相关联的触发信息：与所述车辆相关联的所述图像信息、所述一个或多个物体或者所述一个或多个乘员；
至少部分地基于所接收的触发信息来配置一个或多个反射表面，其中，配置包括相对于所述摄像仪的视场来定位所述一个或多个反射表面；以及
至少基于对所述图像信息的所述处理来调整所述一个或多个反射表面的位置。
29.根据权利要求28所述的计算机程序产品，其中，处理所述图像信息包括：至少部分地基于与所述一个或多个反射表面相关联的形状来变换所述图像信息。
30.根据权利要求28所述的计算机程序产品，其中，配置还包括：调整所述一个或多个反射表面的形状。
31.根据权利要求28所述的计算机程序产品，其中，处理所述图像信息还包括：分析与所述图像相关联的图案。
32.根据权利要求28所述的计算机程序产品，其中，配置所述一个或多个反射表面包括：移动或旋转所述一个或多个反射表面中的至少一个，以改变与所述摄像仪相关联的视场。
CN201180075945.4A 2011-12-29 2011-12-29 用于增强车辆内摄像仪视场的***、方法和装置 Active CN104010912B (zh)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/US2011/067823 WO2013101049A1 (en) 2011-12-29 2011-12-29 Systems, methods, and apparatus for enhancing a camera field of view in a vehicle

Publications (2)

Publication Number Publication Date
CN104010912A true CN104010912A (zh) 2014-08-27
CN104010912B CN104010912B (zh) 2017-10-24

Family

ID=48698286

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201180075945.4A Active CN104010912B (zh) 2011-12-29 2011-12-29 用于增强车辆内摄像仪视场的***、方法和装置

Country Status (4)

Country Link
US (1) US9902340B2 (zh)
EP (1) EP2797792B1 (zh)
CN (1) CN104010912B (zh)
WO (1) WO2013101049A1 (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110626269A (zh) * 2019-10-16 2019-12-31 湖北工业大学 一种基于意图辨识模糊控制的智能成像驾驶辅助***及方法
CN113785248A (zh) * 2019-05-03 2021-12-10 奥迪股份公司 用于机动车的外部灯光装置

Families Citing this family (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104010912B (zh) 2011-12-29 2017-10-24 英特尔公司 用于增强车辆内摄像仪视场的***、方法和装置
US9602779B2 (en) * 2012-07-10 2017-03-21 Christopher DeJuliis System for passenger monitoring
US20140168415A1 (en) * 2012-12-07 2014-06-19 Magna Electronics Inc. Vehicle vision system with micro lens array
WO2017199780A1 (ja) * 2016-05-16 2017-11-23 日本精機株式会社 表示装置
US10821987B2 (en) * 2016-07-20 2020-11-03 Ford Global Technologies, Llc Vehicle interior and exterior monitoring
CN108216041A (zh) * 2016-12-13 2018-06-29 蔚来汽车有限公司 车辆后视镜以及用于监控驾驶者驾驶状态的方法和***
JP6909960B2 (ja) * 2017-03-31 2021-07-28 パナソニックＩｐマネジメント株式会社 検知装置、検知方法及び検知プログラム
US10491793B2 (en) * 2017-04-19 2019-11-26 Ford Global Technologies, Llc Shielded camera monitoring of wheels from vehicle underside using reflectors
CN110324556B (zh) * 2018-03-28 2023-01-31 北京富纳特创新科技有限公司 视频通信装置及方法
JP7289070B2 (ja) * 2019-03-11 2023-06-09 パナソニックＩｐマネジメント株式会社 レーダー装置および車両
DE112020001011B4 (de) * 2019-04-04 2023-07-13 Joyson Safety Systems Acquisition Llc Erkennung und Überwachung von aktiven optischen Retroreflektoren
US20210229601A1 (en) * 2020-01-27 2021-07-29 Nvidia Corporation Automatically-adjusting mirror for use in vehicles
US20230087169A1 (en) * 2021-09-22 2023-03-23 Motional Ad Llc Switchable wheel view mirrors
US20230087119A1 (en) * 2021-09-22 2023-03-23 Motional Ad Llc Switchable wheel view mirrors

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2002062623A2 (en) * 2001-01-23 2002-08-15 Donnelly Corporation Improved vehicular lighting system for a mirror assembly
US20030098909A1 (en) * 2001-11-29 2003-05-29 Martin Fritzsche Process for monitoring the internal space of a vehicle, as well as a vehicle with at least one camera within the vehicle cabin
CN1516655A (zh) * 2001-06-15 2004-07-28 汽车镜
US20060092534A1 (en) * 2004-11-02 2006-05-04 Yuri Ivanov Automatic mirror stabilization
DE102008019732A1 (de) * 2008-04-18 2009-10-22 Volkswagen Ag Verfahren und Vorrichtung zur Ansteuerung eines elektronischen Außenspiegels
EP2218606A1 (de) * 2009-02-11 2010-08-18 Audi AG Kraftfahrzeug mit einer Wiedergabeeinrichtung zur in Abhängigkeit der erfassten Sitzposition des Fahrers steuerbare Wiedergabe von Bildinformationen
JP2011109634A (ja) * 2009-06-17 2011-06-02 Rohm Co Ltd 車載カメラ

Family Cites Families (24)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR19980048812U (ko) * 1996-12-30 1998-10-07 양재신 차량손상가해자 기록장치
US6226035B1 (en) 1998-03-04 2001-05-01 Cyclo Vision Technologies, Inc. Adjustable imaging system with wide angle capability
DE10110904A1 (de) * 2001-03-07 2002-09-12 Volkswagen Ag Verfahren und Einrichtung zur kameragestützten Außenraumbeobachtung um das Kraftfahrzeug
JP2003029150A (ja) * 2001-07-13 2003-01-29 Olympus Optical Co Ltd 光学特性可変光学素子を含む光学系及び光学装置
US20060061008A1 (en) * 2004-09-14 2006-03-23 Lee Karner Mounting assembly for vehicle interior mirror
US20060132604A1 (en) * 2002-11-08 2006-06-22 Ich-Kien Lao Video quick zoom and autofocus for officer safety
US7202792B2 (en) * 2002-11-11 2007-04-10 Delphi Technologies, Inc. Drowsiness detection system and method
US20040150741A1 (en) * 2002-11-15 2004-08-05 Tsuyoshi Togawa Image-pickup apparatus
JP2004309684A (ja) * 2003-04-04 2004-11-04 Olympus Corp 結像光学系及びそれを用いた撮像装置
JP2005092175A (ja) * 2003-08-08 2005-04-07 Olympus Corp 光学特性可変光学素子
US20050100191A1 (en) * 2003-11-11 2005-05-12 Harbach Andrew P. Imaging system and method for monitoring an eye
US20050200984A1 (en) * 2004-03-12 2005-09-15 Browne Alan L. Active mirror assemblies
US7881496B2 (en) * 2004-09-30 2011-02-01 Donnelly Corporation Vision system for vehicle
US7364301B2 (en) * 2004-11-11 2008-04-29 Delphi Technologies, Inc. Vehicular optical system
JP2007022401A (ja) * 2005-07-19 2007-02-01 Takata Corp 乗員情報検出システム、乗員拘束装置、車両
JP2008001136A (ja) * 2006-06-20 2008-01-10 Takata Corp 車両乗員シート検出システム、作動装置制御システム、車両
JP2008002838A (ja) * 2006-06-20 2008-01-10 Takata Corp 車両乗員検出システム、作動装置制御システム、車両
US8154418B2 (en) * 2008-03-31 2012-04-10 Magna Mirrors Of America, Inc. Interior rearview mirror system
DE102009027512A1 (de) 2009-07-08 2011-01-20 Robert Bosch Gmbh Vorrichtung zur Erfassung von Bilddaten
ES2739036T3 (es) * 2009-09-14 2020-01-28 Viion Systems Inc Cámara de análisis de vídeo de resolución dual sacádica
DE102010003666B4 (de) * 2010-04-07 2019-07-04 Robert Bosch Gmbh Kamera für ein Fahrzeug und Anordnung aus einer Kamera und einem Kamerahalter
CN104010912B (zh) 2011-12-29 2017-10-24 英特尔公司 用于增强车辆内摄像仪视场的***、方法和装置
US9517776B2 (en) * 2011-12-29 2016-12-13 Intel Corporation Systems, methods, and apparatus for controlling devices based on a detected gaze
CN104024022B (zh) * 2011-12-29 2017-04-12 英特尔公司 控制面板

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2002062623A2 (en) * 2001-01-23 2002-08-15 Donnelly Corporation Improved vehicular lighting system for a mirror assembly
CN1516655A (zh) * 2001-06-15 2004-07-28 汽车镜
US20030098909A1 (en) * 2001-11-29 2003-05-29 Martin Fritzsche Process for monitoring the internal space of a vehicle, as well as a vehicle with at least one camera within the vehicle cabin
US20060092534A1 (en) * 2004-11-02 2006-05-04 Yuri Ivanov Automatic mirror stabilization
DE102008019732A1 (de) * 2008-04-18 2009-10-22 Volkswagen Ag Verfahren und Vorrichtung zur Ansteuerung eines elektronischen Außenspiegels
EP2218606A1 (de) * 2009-02-11 2010-08-18 Audi AG Kraftfahrzeug mit einer Wiedergabeeinrichtung zur in Abhängigkeit der erfassten Sitzposition des Fahrers steuerbare Wiedergabe von Bildinformationen
JP2011109634A (ja) * 2009-06-17 2011-06-02 Rohm Co Ltd 車載カメラ

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113785248A (zh) * 2019-05-03 2021-12-10 奥迪股份公司 用于机动车的外部灯光装置
CN110626269A (zh) * 2019-10-16 2019-12-31 湖北工业大学 一种基于意图辨识模糊控制的智能成像驾驶辅助***及方法

Also Published As

Publication number Publication date
EP2797792A1 (en) 2014-11-05
US20150085116A1 (en) 2015-03-26
EP2797792B1 (en) 2019-08-28
EP2797792A4 (en) 2015-10-07
WO2013101049A1 (en) 2013-07-04
US9902340B2 (en) 2018-02-27
CN104010912B (zh) 2017-10-24

Similar Documents

Publication Publication Date Title
CN104010912A (zh) 用于增强车辆内摄像仪视场的***、方法和装置
US10824704B2 (en) Two factor biometric authentication for auto
US10616218B2 (en) Driver identification and authentication systems and methods
CN108473109B (zh) 无缝车辆访问***
US11447085B2 (en) 3D time of flight active reflecting sensing systems and methods
US9868449B1 (en) Recognizing in-air gestures of a control object to control a vehicular control system
US9517776B2 (en) Systems, methods, and apparatus for controlling devices based on a detected gaze
EP3051784A1 (en) Operating a vehicle and a wearable device
US20060145825A1 (en) Virtual keypad for vehicle entry control
CN1664290A (zh) 组合的独立验证***
CN106061804B (zh) 用于机动车的装配模块
JP2015213305A (ja) 携行可能な情報機器のための機器制御方法および機器制御システム
CN107809577A (zh) 通过全景相机进行车辆入侵检测
CN104040464A (zh) 使用在三维空间中执行的手势以及相关的计算机程序产品控制车辆功能的方法和设备
WO2019244083A1 (en) Driver identification and identification systems and methods
CN110723096B (zh) 用于检测被夹柔性材料的***及方法
CN111667782B (zh) 移动体和移动***
WO2020225627A1 (en) Multi-factor authentication process
US20210276575A1 (en) Vehicle component identification system
US20230177900A1 (en) Enhanced biometric authorization
CN109435883B (zh) 汽车自适应人体智能进入***和方法
US20230222808A1 (en) Systems, devices, and methods for vehicle camera calibration
WO2024054731A1 (en) Reflective structures
WO2024085871A1 (en) Vehicle pillar display system
WO2023248199A1 (en) Mirror assembly with driver modeling system

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant