具体实施方式
在下文中,将参照附图详细地描述本发明的实施例。在将参考标号加入每一副附图中的元件中,虽然参考标号在不同附图中被示出,但是如果可能的话,相同的元件将由相同的参考标号标出。另外,在本发明的下述描述中,当确定描述可使本发明的主题相当不清楚时,将省略并入本文的已知功能和配置的详细描述。
此外,当描述本发明的组件时,可在本文中使用诸如第一、第二、A、B、(a)、(b)等术语。这些术语仅用于区分一个结构元件和其它结构元件,相应结构元件的属性、顺序和序列等不受术语的限制。应当注意的是,如果在说明书中描述一个组件被“连接至”、“联接至”或“接合至”另一组件,第三组件可被“连接”、“联接”或“接合”在第一组件和第二组件之间,但是第一组件可被直接连接至、联接至、接合至第二组件。
图1是说明根据本发明的实施例的摄像机装置的简图。
参照图1,摄像机装置100包括第一镜头120、第二镜头130、第一图像产生单元122、第二图像产生单元132、图像分析单元110等。
第一镜头120可具有第一视场角和第一焦距,第二镜头130可具有第二视场角和第二焦距。在这种情况下,第一镜头120和第二镜头130可具有不同的视场角。例如,第一镜头120的第一视场角可比第二镜头130的第二视场角窄。并且,第一镜头120和第二镜头130可具有不同的焦距。例如,第一镜头120的第一焦距可比第二镜头130的第二焦距长。
具有宽视场角的镜头可具有短焦距,具有窄视场角的镜头可具有长焦距。这仅是情况的普遍性的示例,所有镜头可不限于这些情况。在下文中,将基于采用一般镜头的情况提供描述。因此,在下文中,将从第一镜头120的第一视场角比第二镜头130的第二视场角窄并且第一镜头120的第一焦距比第二镜头130的第二焦距长的示例的角度提供描述。
第一图像产生单元122基于通过第一镜头120输入的入射光产生第一图像。第一图像可以是包括多个像素的数字图像数据,像素包括颜色信息或灰度信息。
第二图像产生单元132基于通过第二镜头130输入的入射光产生第二图像。第二图像可以是包括多个像素的数字图像数据,像素包括颜色信息或灰度信息。
图像分析单元110可分析第一图像和第二图像并且可识别车辆周围的目标。并且,图像分析单元110可基于与识别的目标相关联的信息进一步产生诸如目标的距离信息、目标的移动方向信息、目标的速度信息等附加信息。
第一图像产生单元122可通过使用具有第一视场角和第一焦距的第一镜头120产生第一图像,第二图像产生单元132可通过使用具有第二视场角和第二焦距的第二镜头130产生第二图像,因此第一图像产生单元122和第二图像产生单元132的拍摄区域可不同。
图2是说明第一图像产生单元和第二图像产生单元的拍摄区域的简图。
参照图2,第一图像产生单元122通过拍摄第一区域210产生第一图像,第二图像产生单元132通过拍摄第二区域220产生第二图像。
第一镜头120的焦距比第二镜头130的焦距长,因此,第一区域210的前方长度可比第二区域220的前方长度长。并且,第二镜头130的视场角比第一镜头120的视场角宽,因此,第二区域220的右左宽度可比第一区域210的右左宽度宽。
第一区域210可包括第一子区域212和第二子区域214。第一区域210可基本上由第一子区域212和第二子区域214构成。根据实施例,第一区域210可进一步包括另一子区域。
第二区域220可包括第二子区域214和第三子区域222。第二区域220可基本上由第二子区域214和第三子区域222构成。根据实施例,第二区域220可进一步包括另一子区域。
第二子区域214可以是被包括在第一区域210和第二区域220两者中的公共区域。因此,与第二子区域214相关联的图像可被包括在第一图像中,与第二子区域214相关联的图像可被包括在第二图像中。特别地,第一图像产生单元122可产生包括与第一子区域212相关联的第一子图像和与第二子区域214相关联的第二子图像的第一图像,第二图像产生单元132可产生包括与第二子区域214相关联的第三子图像和与第三子区域222相关联的第四子图像的第二图像。
图像分析单元110可通过分析由拍摄第一子区域212获得的第一子图像识别第一前方目标232。图像分析单元110可通过分析由拍摄第三子区域222获得的第四子图像识别横向目标236。
第一前方目标232可位于相距车辆远距离处。例如,第一前方目标232可位于车辆前方至少200米处。摄像机装置100可使用长焦距的远摄镜头作为第一镜头120,因此可识别位于远离车辆的区域中的第一前方目标232。
横向目标236可位于车辆的左侧区域和右侧区域中。摄像机装置100可使用视场角宽的宽镜头作为第二镜头130,因此,可识别位于车辆的左侧区域和右侧区域中的横向目标236。
当如上所述使用预定的视场角和焦距的单个镜头时,位于长距离处的第一前方目标232和位于横侧的横向目标236不能同时被识别。相反地,根据本发明的实施例的摄像机装置100可使用具有不同视场角或不同焦距的两个镜头120和130,因此,可同时识别位于长距离处的第一前方目标232和位于横侧的横向目标236。
图像分析单元110可通过分析由拍摄第二子区域214获得的第二子图像和第三子图像识别第二前方目标234。图像分析单元110可通过分析第二子图像和第三子图像测量到第二前方目标234的距离。当摄像机装置100分析在不同位置拍摄的两个图像时,摄像机装置100可测量到通过相对应图像识别的目标的距离。根据本发明的实施例的摄像机装置100通过使用第一镜头120拍摄位于第二子区域214中的第二前方目标234产生第二子图像并且通过使用第二镜头130拍摄相同的第二前方目标234产生第三子图像。因此,摄像机装置100可获取与第二前方目标234相关联的两个图像(第二子图像和第三子图像)并且可通过分析两个图像(第二子图像和第三子图像)测量到第二前方目标234的距离。
图像分析单元110可通过分析由拍摄第二子区域214获得的第二子图像识别第二前方目标234,并可通过分析由拍摄相同的第二子区域214获得的第三子图像验证第二前方目标234的识别。相反地,图像分析单元110可通过分析由拍摄第二子区域214获得的第三子图像识别第二前方目标234,并可通过分析由拍摄相同的第二子区域214获得的第二子图像验证第二前方目标234的识别。通过验证,图像分析单元110可提高识别第二前方目标234的可靠性。
如上所述,摄像机装置100可使用具有不同视场角和不同焦距的两个镜头120和130,因此,可加宽目标识别区域、可测量位于公共区域中的目标的距离并且可提高识别位于公共区域中的目标的可靠性。
由摄像机装置100识别的目标可以是车辆或诸如行车道、障碍物、行人、交通灯等位于车辆周围的所有目标。
将参照图3和图4提供基于目标是交通灯的实施例和目标是行车道的实施例的描述。
图3是说明根据本发明的实施例的摄像机装置在十字路口处识别交通灯的示例的简图。
参照图3,摄像机装置100可通过分析由拍摄第一子区域212获得的第一子图像识别前方交通灯232a。并且,摄像机装置100可通过分析由拍摄第三子区域222a和222b获得的第四子图像识别横向交通灯236a和236b。如上所述,摄像机装置100可识别位于十字路口的前方方向、左侧方向和右侧方向的所有交通灯232a、236a和236b。
图4是说明根据本发明的实施例的摄像机装置在岔路口处识别行车道的示例的简图。
参照图4,摄像机装置100使用焦距长的第一镜头120拍摄第一区域210并且可通过分析在第一区域210中拍摄的第一图像识别第一车道232c。在这种情况下,第一车道232c的曲率可小于或等于预定值。例如,第一车道232c可以是直行车道。当第一镜头120的焦距变长时,拍摄的区域在前方方向上变长。因此,摄像机装置100可获取向前延伸的区域的图像。摄像机装置100可使用在前方方向上延伸长的图像识别具有低曲率的行车道。
摄像机装置100使用视场角宽的第二镜头130拍摄第二区域220,并可通过分析在第二区域220中拍摄的第二图像识别第二车道236c。在这种情况下,第二车道236c的曲率可大于或等于预定值。例如,第二车道236c可以是弯曲的车道。当第二镜头130的视场角变得更宽时,拍摄的区域在横向方向上变得更宽。因此,摄像机装置100可获取在横向方向上延伸的区域的图像。摄像机装置100可使用在横向方向上延伸的区域的图像识别具有高曲率的行车道。
由摄像机装置100识别的交通灯信息或行车道信息可被输送至另一设备或***并可用于控制车辆。
车辆可包括使用图像信息的多个控制装置。特别地,车辆可包括使用由摄像机装置100识别的行车道信息的***。例如,诸如车道偏离警告***(LDWS)、车道保持辅助***(LKAS)等***可被包括在车辆中,***可基于通过摄像机装置100识别的行车道信息警告车道偏离或可辅助保持车道。并且,车辆可包括使用由摄像机装置100识别的障碍物信息的***。例如,诸如防碰撞***(CAS)、十字路交通辅助***(CTA)等***可被包括在车辆中,***可基于由摄像机装置100识别的障碍物信息防止或警告车辆碰撞。并且,制动控制***(例如自动紧急制动(AEB))、巡航控制***(例如智能巡航控制(SCC))等可被包括在车辆中。***可基于通过摄像机装置100识别的目标信息或目标距离信息控制车辆或控制巡航行驶。
摄像机装置100可将与第一前方目标(例如图2的目标232)和第二前方目标(例如图2的目标234)相关联的识别信息和与第二前方目标234相关联的距离信息传输至制动控制***或巡航控制***。制动控制***或巡航控制***可使用信息执行控制。例如,制动控制***可基于与第一前方目标232相关联的识别信息识别出障碍物存在于位于前方方向上的第一子区域(例如图2的子区域212)中。制动控制***可基于与第二前方目标234相关联的识别信息和距离信息确定车辆和位于第二子区域(例如图2的子区域214)中的障碍物之间的距离并且可具体地确定制动点和制动强度。
将参照图9详细地描述本发明的使用摄像机装置100的各个检测方案和使用其的车辆控制方法。
在每个子区域中识别的信息可被传输至不同***装置。
图5是说明根据本发明的实施例的摄像机装置和***装置的信息流的简图。
参照图5,第一控制装置510、第二控制装置520和第三控制装置530可被安装至车辆上。
在车辆中,在第一子区域(例如图2的子区域212)中识别的第一信息可被传输至第一控制装置510,在第三子区域(例如图2的子区域222)中识别的第二信息可被传输至第二控制装置520,在第二子区域(图2的子区域214)中识别的第三信息可被传输至第三控制装置530。例如,巡航控制***可被安装在第一控制装置510上,十字路交通***可被安装在第二控制装置520上,制动控制***可被安装在第三控制装置530上。在这种情况下,第一控制装置510可基于与位于远距离处的障碍物相关联的信息执行巡航控制,第二控制装置520可基于与位于横向方向上的障碍物相关联的信息执行十字路交通控制,第三控制装置530可基于与在前方方向上接近的障碍物相关联的距离信息执行制动控制。
摄像机装置100使用两个镜头120和130产生第一图像和第二图像,摄像机装置100可使用与相同目标相关联的两个图像(第一图像和第二图像)测量相对应目标的距离。
图6和图7是说明使用两个镜头测量目标的距离的示例的简图。
参照图6,摄像机装置100包括被间隔开预定间隙(g)的两个镜头120和130。通过使用两个镜头120和130,摄像机装置100可产生与第二前方目标234相关联的两个拍摄图像(第一图像和第二图像),其中第二前方目标234位于第二子区域214中并且远离车辆预定间距(d)。
摄像机装置100可通过分析第一图像和第二图像测量第二前方目标234的距离。特别地,摄像机装置100可分析通过使用第一镜头120拍摄第二子区域214获得的第二子图像和通过使用第二镜头130拍摄第二子区域214获得的第三子图像,可识别第二前方目标234并且可测量第二前方目标234的距离。
将参照图7描述第二前方目标234的距离的测量方法。
参照图7,第二前方目标234可在第一方向(x)上与车辆间隔开xd,在第二方向上与车辆间隔开yd。第二前方目标234的分隔距离(d)可通过计算在第一方向(x)上间隔开的距离(xd)和在第二方向(y)上间隔开的距离(yd)来测量。
在本文中,第一方向(x)分隔距离(xd)可被表示为水平距离,第二方向(y)分隔距离(yd)可被表示为垂直距离。
首先,第二方向(y)分隔距离(yd)可基于第二子图像中第二前方目标234的第一方向坐标(xr)和第三子图像中第二前方目标234的第一方向坐标(xl)之间的差通过下列等式来计算。
[等式1]
其中,f是焦距。
在这种情况下,假设基于通过第一镜头产生的第二子图像的中心,第二前方目标234的图像的第一方向(x)和第二方向(y)的坐标是(xr、yr)。假设基于通过第二镜头产生的第三子图像的中心,第二前方目标234的图像的第一方向(x)和第二方向(y)的坐标是(xl、yl)。
第一镜头120的焦距(fr)和第二镜头130的焦距(fl)不同,因此,摄像机装置100可调节第二子图像和第三子图像中的至少一个的尺寸或分辨率。通过调节,第二前方目标234在第二子图像中的第一方向坐标(xr)或第二前方目标234在第三子图像中的第一方向坐标(xl)可被改变。
例如,当第二子图像的尺寸或分辨率基于第二前方目标234在第三子图像中的第一方向坐标(xl)被调节fl/fr时,第二前方目标234在第二子图像中的第一方向坐标可被改变如下。
[等式2]
xr'是第二前方目标234在第二子图像中的调节后的第一方向坐标。
等式1可被修正如下。
[等式3]
是第二前方目标234在第一方向(x)上与两个镜头的中心点(P)间隔开的距离的第一方向(x)分隔距离(xd)可被计算如下。
[等式4]
即,基于第二前方目标234的图像在第三子图像中的位置坐标(xl、yl),第二前方目标234的图像在通过第一镜头产生的第二子图像中的坐标(xr、yr)可被调节以具有相同的尺寸。在相同的基础上,第二前方目标234与第一镜头和第二镜头的中心点的垂直距离(yd)和水平距离(xd)可被计算。
摄像机装置100可调节第二子图像和第三子图像中的至少一个图像以具有相同的第二方向坐标。
图8A和图8B是说明第一图像和第二图像的简图。
参照图8A和图8B,第一图像810可由第一子图像812和第二子图像814构成,第二子图像814可位于第一子图像812下方。在这种情况下,第一图像810的尺寸可以是xa×ya1,第二子图像814的尺寸可以是xa×ya2。第二图像820由第三子图像822和第四子图像824构成,第四子图像824可位于第三子图像822的横侧面。在这种情况下,第二图像820的尺寸可以是xb1×yb,第三子图像822的尺寸可以是xb2×yb。
通过拍摄相同的第二前方目标234获得的第二子图像814和第三子图像822的尺寸可彼此不同。例如,第二子图像814在y轴上可具有短的长度,第三子图像822在x轴上可具有短的长度。
摄像机装置100可调节与第二前方目标234相关联的第二子图像814和和第三子图像822中的至少一个图像以具有相同的y轴坐标。
第二子图像814和第三子图像822是通过拍摄相同目标获得的图像,因此,摄像机装置100通过分析第二子图像814识别第二前方目标234,并且通过分析第三子图像822验证第二前方目标234的识别;或通过分析第三子图像822识别第二前方目标234并且通过分析第二子图像814验证第二前方目标234的识别。
虽然已经描述摄像机装置100包括两个镜头120和130的实施例,但是本发明可不限于此。摄像机装置100可包括三个或更多个镜头。
例如,摄像机装置100可进一步包括通过具有第三视场角和第三焦距的第三镜头拍摄第三区域产生第三图像的第三图像产生单元。摄像机装置100可通过分析第一图像和第三图像测量位于第一区域和第三区域的公共区域中的第三前方目标的距离;或可通过分析第二图像和第三图像测量位于第二区域和第三区域的公共区域中的第四前方目标的距离。
图9是说明根据本发明的包括摄像机装置的整个车辆控制***的配置的简图。
整个车辆控制***包括:成像器模块1100,其包括根据本发明的使用三个不同镜头的三个摄像机;图像处理模块1200,其处理通过成像器模块获得的图像;检测模块1300,其使用通过图像处理模块执行的处理结果检测在外部存在的目标或车辆;以及控制模块1400,其使用通过检测模块执行的检测结果控制车辆的操作***。
图9的成像器模块1100包括:第一摄像机单元1110,其包括具有是最窄视场角的第一视场角和是最长焦距的第一焦距的第一镜头1112以及通过第一镜头获得图像的第一成像器1114;第二摄像机单元1120,其包括具有是最宽视场角的第二视场角和是最短焦距的第二焦距的第二镜头1122以及通过第二镜头获得图像的第二成像器1124;以及第三摄像机单元1130,其包括具有范围在第一视场角和第二视场角之间的第三视场角和范围在第一焦距和第二焦距之间的第三焦距的第三镜头1132以及通过第三镜头获得图像的第三成像器1134。
为了便于描述,第一镜头和第一摄像机单元可被表示为窄镜头和窄摄像机,第二镜头和第二摄像机单元可被表示为宽镜头和宽摄像机,第三镜头和第三摄像机单元可被表示为常规镜头和常规摄像机。
当然,摄像机单元可不限于包括三个摄像机的摄像机单元,摄像机单元可仅由窄镜头(摄像机)和宽镜头(摄像机)构成。
图像处理模块1200可包括:单处理器1210,其只处理从成像器模块1100中包括的两个或更多个摄像机中的一个获得的数据;以及多处理器1220,其一起处理从两个或更多个摄像机获得的数据。
图像处理模块1200可基于下面将描述的检测模块的检测操作的类型有选择地使用单处理器1210和多处理器1220中的一个的信号处理结果。
检测模块1300是使用图像处理模块执行的处理结果检测在外部存在的目标或车辆。特别地,检测模块1300可包括下列中的一个或多个:检测道路的车道的车道检测单元1310;检测在车主车辆的前方超车(cut in)的车辆的超车车辆检测单元1315;检测在车辆周围的行人的行人检测单元1320;检测具有小于或等于预定阈值曲率半径的急弯曲率的行车道的急弯车道检测单元1325;检测在长距离处的另一车辆的长距离车辆检测单元1330;检测径直穿过车主车辆前方的道路的自行车或两轮车辆的路口骑行者检测单元1335;检测位于行车道周围或位于道路上的交通标志的交通标志检测单元1340;检测径直穿过车主车辆前方的道路的另一车辆的路口车辆检测单元1345;检测一般目标的一般目标检测单元1350;检测交通灯的交通灯检测单元1355;测量前方道路的深度的道路深度检测单元1360;以及检测车辆周围的空白空间的自由空间检测单元1365。
控制模块1400是使用检测模块的检测结果控制车辆的各个操作***。特别地,控制模块1400可由下列构成:警告车道偏离或执行控制以保持车道的车道偏离警告(LDW)和车道保持辅助(LKA)***1410;执行自动紧急制动的自动紧急制动(AEB)控制模块1420;执行诸如自动地跟随前方车辆等自动驾驶控制的自适应巡航控制模块1430;以及控制车辆的前照灯的方向等前照灯控制模块(HBA)1420。
如上所述包括在检测模块1200中的每个检测单元可基于从包括在图像处理模块中的单处理器1210或多处理器1220获得的处理结果检测所需的目标。
特别地,以与图4的描述相似的方式,在沿道路正常行驶期间,包括在检测模块1300中的车道检测单元1310可基于从包括窄镜头的第一摄像机单元1110或包括常规镜头的第三摄像机单元1130获得的图像以及基于在与其对应的单处理器1210中处理的结果数据检测行车道。
当在上述车道检测过程期间检测的行车道被改变成具有小于或等于预定的阈值曲率半径的急弯曲率时,行车道可能不能基于从包括窄镜头的第一摄像机单元1110或包括常规镜头的第三摄像机单元1130获得的图像被检测。因此,急弯车道检测单元1325可运行以便基于从包括宽镜头的第二摄像机单元1120获得的图像检测急弯车道。
例如,急弯车道检测单元1325可检测曲率半径小于或等于约125m的道路(例如高速公路匝道处的道路)的行车道。
图10A说明本发明的摄像机装置和检测模块在十字路口区域处的操作。
如图10A中说明,可需要用于在十字路口区域处引导车辆的多个车道,因此,直车道中的一些可能被断开。
在这种情况下,在只采用使用单个摄像机的常规车道检测功能的情况下,当车辆进入十字路口区域时,车辆意外地未能识别直车道,且车辆可被错误地控制。
并且,可在十字路口区域处需要基于行车道、向前行驶车辆或交通灯的车辆的转向和制动控制。在十字路口区域处,车辆可需要识别径直穿过车主车辆的前方的道路的各个目标(自行车、另一车辆等)并且可对其执行附加控制。
并且,在车辆在十字路口区域处右转弯的情况下,当沿右侧的人行横道处的行人被检测到时,在其上的控制可被另外执行。
然而,使用单个摄像机的现有前方摄像机装置可能难以足够支持如上所述在十字路口区域处需要的各种控制类型。
因此,本发明使用包括两个或更多个视场角的摄像机单元在十字路口区域处执行如下详细的控制。
图10B说明根据本发明在十字路口处的行车道检测方案。
根据本发明,在检测模块1300的车道检测模块1310使用包括窄镜头的第一摄像机单元或包括常规镜头的第三摄像机单元检测行车道并检测到在至少预定距离期间检测的车道未被识别或检测到在至少预定距离期间检测的车道被断开的情况下,检测模块1300可将相应的车道部分1510确定为十字路口区域。
当相应的车道部分1510被确定为十字路口区域时,车道检测模块1310驱动包括宽镜头的第二摄像机单元并且获得宽图像,因此,车可识别延伸至右侧和左侧的右左路口车道1520。另外,车道检测模块1310可使用包括窄镜头的第一摄像机单元检测在十字路口区域后在直路上延伸的长距离车道1530。
因此,根据本发明,当车辆进入十字路口时,右左路口车道1520和在十字路口区域后在直路上延伸的长距离车道1530可被另外地识别。因此,在十字路口区域处错误的车道检测和基于其的异常车辆控制可被克服。
图10C说明在十字路口区域处的路口车辆或路口骑行者检测方案。
如图10B中说明,当通过检测模块1300确定车辆进入十字路口区域时,路口骑行者检测单元1335或路口车辆检测单元1345可通过使用从包括宽镜头的第二摄像机单元获得的图像检测径直穿过车辆前方的道路并且移动的自行车或另一车辆。
在这种情况下,长距离车辆检测单元1330可使用包括窄镜头的第一摄像机单元和与其对应的单处理器1210检测在距离车主车辆长距离处存在的另一车辆,同时,路口骑行者检测单元1335或路口车辆检测单元1345可通过使用包括宽镜头的第二摄像机单元和与其对应的单处理器1210另外地检测在十字路口区域处径直穿过车主车辆前方的道路的自行车(两轮车辆1610)或另一车辆。
当然,在这种情况下,为了同时处理从第一摄像机单元(或第三摄像机单元)和第二摄像机单元获得的图像,可使用包括在图像处理模块1200中的多处理器1220。
在这种情况下,路口骑行者检测单元1335或路口车辆检测单元1345可从包括宽镜头的第二摄像机单元获得的图像检测目标的斑点(blob),并且可确定两个相似的圆形图案是否从斑点的内部被检测。
当两个相似的圆形图案是从相同斑点的内部被检测时,目标可被识别为路口车辆或路口自行车。
通过采用上述的结构,前方车辆、径直穿过车主车辆前方的道路的车辆或自行车可被检测。因此,将在下文中描述的自动紧急制动控制器1420可被控制,因此,可能在十字路口区域发生的意外事故可被避免。
图10D说明检测在车主车辆的前方水平超车的超车车辆的示例。
长距离车辆检测单元1330使用包括窄镜头的第一摄像机单元和与其对应的单处理器1210检测在距离车主车辆的前方方向上的长距离处存在的第一车辆1710,并且同时超车车辆检测单元1315可从包括宽镜头(第二镜头)的第二摄像机单元以及与其对应的处理器接收结果数据,并可检测在车主车辆的前方超车的第二车辆1720。
图10E说明检测在十字路口处位于转弯车道中的人行横道、人行横道交通灯、行人等的结构。
如图10B中说明,当通过检测模块1300确定车辆进入十字路口区域并且基于车辆的转弯指示灯的激活状态确定车辆是否左转/右转时,交通灯检测单元1355可通过使用从包括宽镜头的第二摄像机单元获得的图像识别在车辆的移动方向(左转或右转)上存在的人行横道交通灯1810。
即,当确定车辆进入十字路口并且车辆的右转指示灯被接通时,交通灯检测单元1355可被激活并且可通过使用从包括宽镜头的第二摄像机单元获得的图像确定在沿右侧的道路中存在的人行横道交通灯的状态。
在这种情况下,当在沿右侧的道路中存在的人行横道交通灯是绿灯时,控制模块1400可控制自动紧急制动控制器1420等以便停止车辆。
并且,当确定车辆进入十字路口并且车辆的右转指示灯被接通时,交通标志检测单元1340可被激活并可通过使用从包括宽镜头的第二摄像机单元获得的图像识别在沿右侧的道路中存在的人行横道标志1820。
并且,与识别人行横道一起,行人检测单元1320可通过使用从包括宽镜头的第二摄像机单元获得的图像区分在人行横道上或人行横道周围存在的行人1830。
在这种情况下,详细的车辆控制方案可被配置如下。
首先,当交通信号检测单元1340通过使用具有宽镜头的第二摄像单元检测在沿十字路口的右侧的道路中存在的人行横道时,行人检测单元1320将行人检测灵敏度设置为高并且增大用于自动紧急制动的制动压力使得当行人出现时有可能紧急制动。
在这种情况下,当行人检测单元1320检测到行人时,控制模块的自动紧急制动控制器1420可执行车辆的紧急制动。
如上所述,在十字路口区域中,在沿转弯车道的道路上存在的人行横道、人行横道交通灯和行人中的至少一个可通过使用从带有宽镜头的摄像机单元获得的图像被检测。因此,车辆或转向***可在此基础上被控制并且可能在十字路口发生的意外事故可被避免。
当人行横道交通灯如图10E中说明地被识别时,前方交通灯可使用包括窄镜头或常规镜头的第一或第三摄像机单元被同时检测。在此基础上,检测在沿右侧的道路中存在的人行横道交通灯或人行横道的功能可得到提高。
例如,在交通灯检测单元1355使用包括窄镜头或常规镜头的第一或第三摄像机单元检测前方交通灯的情况下,只有当检测的结果是绿灯时,在沿右侧的道路上的人行横道交通灯或人行横道可使用具有宽镜头的第二摄像单元的图像被检测。
图10F说明交通标志检测单元1340使用多个摄像机单元的图像识别道路标记的示例。
如在图10F中说明,交通标志检测单元1340可通过使用包括窄镜头或常规镜头的第一或第三摄像机单元检测诸如在车辆的前方的道路上存在的方向指示标记等道路标记。
在这种情况下,包括窄镜头或常规镜头的第一或第三摄像机单元具有窄视场角,因此,可仅检测包括在单个车道中的方向指示标记,这是一种限制。
因此,当交通标志检测单元1340通过使用包括窄镜头或常规镜头的第一或第三摄像机单元检测在车辆的前方的行驶道路上存在的方向指示标记1910时,交通标志检测单元1340可在检测的同时或在之后的预定时间段使用从具有宽镜头的第二摄像机单元获得的图像另外地识别在行驶车道的左右车道上存在的方向指示标记1920和1920'。
在整个上文中,通过包括窄镜头或常规镜头的第一或第三摄像机单元执行的检测行驶车道上的方向指示标记的有效性可被确定。
例如,在使用包括窄镜头或常规镜头的第一或第三摄像机单元检测的行驶车道上的方向指示标记1910指示直行的状态下,当通过使用带有宽镜头的第二摄像机单元检测的右车道上的方向指示标记指示左转时,确定通过使用包括窄镜头或常规镜头的第一或第三摄像机单元检测的行驶车道上的方向指示标记1910有错误。
并且,当行驶车道和相邻车道上存在的道路标记使用多个摄像机被准确地识别时,如上所述,自主车辆的自动驾驶的性能可得到改善。
例如,当基于从导航等接收的自动驾驶的路线信息确定车辆将左转时并且当如上所述在行驶车道或相邻车道上存在的方向指示标记使用多个摄像机被检测时,改变车辆的行车道的时间点可在此基础上被优化。
如上所述,根据本发明,摄像机装置100可获得拍摄区域不同的至少两个图像,且使用由摄像机拍摄的图像的***的目标识别区域可变宽。
另外,由于诸如“包括”、“包含”和“具有”等术语是指可存在一个或多个相应组件,除非它们被特别描述为相反,否则其应被理解为一个或多个其它组件可被包括在内。所有技术术语、科学术语或其它方面的术语与如本领域技术人员所理解含义一致,除非被定义为相反的含义。在词典中找到的常用术语应该在相关科技写作的上下文中被解释而不应该太理想或不切实际地解释,除非在本发明中明确地如此定义。
虽然为了说明的目的本发明的优选实施例已被描述,但是本领域的技术人员将理解的是,在不脱离如所附权利要求公开的本发明的范围和精神的情况下,各种修改、增加和替换都是可能的。因此,在本发明中公开的实施例旨在说明本发明的技术思想的范围,并且本发明的范围并不由该实施例限定。本发明的范围应在所附权利要求的基础上以包括在等同于权利要求的范围内的所有技术思想属于本发明的方式被理解。