CN111660935B - 车辆显示装置、显示控制方法和后视监视*** - Google Patents

Abstract

本公开涉及车辆显示装置、显示控制方法和后视监视***。提供了一种车辆显示装置，包括：显示单元，安装在车辆的驾驶室中并且具有以与驾驶员的方向不同的方向定向的显示面，被配置为显示描绘车辆的周围区域的图像，以及反射镜单元，安装在车辆的驾驶室中并且被配置为反射显示在显示单元上的图像区域的一些或全部。通过在反射镜单元中反射的显示单元的图像，驾驶员可见的周围区域的可见范围根据驾驶员的观察位置相对于反射镜单元的移动而改变。

Description

车辆显示装置、显示控制方法和后视监视***

本申请是中国专利申请号为201580040535.4、申请日为2015年8月11日的PCT申请PCT/JP2015/004023、发明名称为“车辆显示装置、显示控制方法和后视监视***”的发明专利申请的分案申请。

相关申请的交叉引用

本申请要求2014年8月12日提交的日本优先权专利申请JP2014-164179的权益，通过引用将其全部内容并入本文。

技术领域

本技术涉及车辆显示装置、显示控制方法和后视监视***，并且使得能够容易地观察车辆周围的区域。

背景技术

近来，通过由图像捕获装置和显示装置构成的监视***来实现与车辆的后视镜对应的功能。利用使用后视镜的观察方法，驾驶员能够通过移动他或她的头部、眼睛位置等(以下简称为“头部位置”)来移动可以观察的范围(以下指定为“可见范围”)。然而，利用在显示装置上简单地显示由图像捕获装置捕获的图像的监视***，可见范围是固定的，并且即使驾驶员移动他或她的头部位置，驾驶员也不能移动可以观察的范围。为此，专利文献1公开了通过检测驾驶员的头部位置的变化来根据头部位置的变化移动可见范围，根据头部位置的变化来修剪来自周围区域的捕获图像的图像，以及在显示装置上显示该修剪的图像。

引用列表

专利文献

PTL 1：JP2010-179850A

发明内容

技术问题

同时，当与后视镜类似地根据头部位置的变化来修剪来自周围区域的图像以根据头部位置的变化来改变可见范围时，应当根据头部位置的变化来适当地修剪图像。例如，如果图像修剪位置相对于头部位置的变化存在小的移动，则与使用后视镜来观察期望范围的情况类似地，即使在移动头部之后也可能无法显示期望范围。

因此，期望提供一种使得能够容易地观察车辆周围区域的车辆显示装置、显示控制方法和后视监视***。

问题的解决方案

本技术的一个实施例是一种车辆显示装置，包括：显示单元，安装在车辆的驾驶室中并且具有以与驾驶员的方向不同的方向定向的显示面，所述显示单元被配置为显示描绘车辆的周围区域的图像，以及反射镜单元，安装在车辆的驾驶室中并且被配置为反射显示在显示单元上的图像区域的一些或全部。通过在反射镜单元中反射的显示单元的图像对驾驶员可见的周围区域的可见范围根据驾驶员的观察位置相对于反射镜单元的移动而改变。

在本技术中，显示单元和反射镜单元设置在车辆的驾驶室中。显示单元的显示面以与驾驶员的方向不同的方向定向，并且显示面的图像区域的一些或全部经由反射镜单元对驾驶员可见。在显示单元上，显示描绘车辆周围的区域的图像。此外，在周围区域中，由反射镜单元反射的显示单元的图像可以观察的可见范围根据驾驶员的观察位置的移动而改变。例如，对于除了与可见范围对应的显示区域之外的其它显示区域，降低亮度。此外，确定驾驶员的移动，并且基于移动确定结果，控制亮度要降低的显示区域，以根据驾驶员的移动来移动或扩展可见范围。此外，在描绘车辆周围区域的图像中，在可见范围的移动方向上相对于可见范围的移动方向上的边缘区域进行图像压缩，并且基于移动确定结果，控制压缩比或压缩范围以移动或扩展可见范围。此外，例如，基于移动确定结果，响应于驾驶员瞥视反射镜单元，进行描绘周围区域的图像的显示，并且在确定在检测到所述瞥视之后所述驾驶员执行预定义移动的情况下，移动或扩展可见范围的区域。此外，根据驾驶员的移动扩展可见范围，并且基于车辆的驾驶状况来控制要扩展的可见范围的区域大小。驾驶员的预定义移动是指检测指令同时还考虑驾驶员的姿势特征的姿势控制，并且稍后将详细讨论示例性实施例。

本技术的另一实施例是一种显示控制方法，包括：在安装在车辆的驾驶室中并且具有以与驾驶员的方向不同的方向定向的显示面的显示单元上显示描绘车辆的周围区域的图像，以及利用显示控制器，确定驾驶员的动作，并且以通过在设置在车辆的驾驶室中的反射镜单元中反射的显示单元上的图像对驾驶员可见的可见范围根据驾驶员的动作而改变的方式，基于动作确定结果来控制要在显示单元上显示的图像的显示。

本技术的另一实施例是一种后视监视***，包括附接到车辆外部并且相对于车辆行驶方向面向后方的至少两个或更多个图像捕获装置，以及在车辆的驾驶室中的仪表盘中心设置有至少两个或更多个相邻布置的屏幕显示区域的显示单元。在要显示在屏幕显示区域中的捕获图像的显示内容中，来自安装在车辆行驶方向前侧的第一图像捕获装置的图像被布置在来自安装在车辆行驶方向上比第一图像捕获装置更靠后方的图像捕获装置的图像之上。

本技术的另一实施例是一种后视监视***，包括附接到车辆外部并且相对于车辆行驶方向面向后方的至少两个或更多个图像捕获装置，以及车辆的驾驶室中设置有至少两个或更多个相邻布置的屏幕显示区域的显示单元。在要显示在屏幕显示区域中的捕获图像的显示内容中，包括在来自安装在车辆行驶方向前侧的第一图像捕获装置的图像中的无穷远处的消失点被布置在包括在来自安装在车辆行驶方向上比第一图像捕获装置更靠后方的图像捕获装置的图像中的无穷远处的消失点之上。

发明的有利效果

根据本技术的一个或多个实施例，描绘车辆周围区域的图像被显示在显示单元上，该显示单元被安装在车辆的驾驶室中并且其显示面以与驾驶员的方向不同的方向定向。反射镜单元被安装在车辆的驾驶室中并且反射显示在显示单元上的图像区域的一些或全部。通过反射镜单元中反射的显示单元的图像对驾驶员可见的周围区域的可见范围根据驾驶员的观察位置相对于反射镜单元的移动而改变。为此，当车辆周围的区域的图像被捕获并显示在显示单元上，使得可以检查周围区域时，例如可以在与过去的光学后视镜类似的意义上容易地检查周围区域的期望范围(诸如后方和周围的视野)。注意，本说明书中描述的有利效果仅仅是为了示例和非限制性的目的，并且可以有额外的有利效果。

附图说明

[图1]图1是示出第一实施例的配置的示例的图。

[图2]图2是示出驾驶员、显示单元和反射镜单元之间的位置关系的示例的图。

[图3]图3是用于说明周围区域图像捕获单元的图像捕获范围的图。

[图4]图4是示出反射镜单元和显示单元与过去的后视镜之间的关系的图。

[图5]图5是表示聚焦变化和反应时间之间的关系的图。

[图6]图6是用于说明第一实施例的操作的图。

[图7]图7是示出反射镜单元包括弯曲部的情况的示例的图。

[图8]图8是示出第二实施例的配置的示例的图。

[图9]图9是示出驾驶员、显示单元和反射镜单元之间的位置关系的示例的图。

[图10]图10是示出显示控制器的配置的图。

[图11]图11是用于说明第二实施例的操作的图。

[图12]图12是示出显示控制器的操作的流程图。

[图13]图13是用于说明显示控制器的第一显示控制操作的图。

[图14]图14是用于说明显示控制器的第二显示控制操作的图。

[图15]图15示出了显示单元的显示和压缩比与周围区域之间的关系。

[图16]图16是示出第三实施例的配置的示例的图。

[图17]图17是示出周围区域图像捕获单元的配置的示例的图。

[图18]图18是示出显示控制器的配置的图。

[图19]图19是示出显示控制器的操作的流程图。

[图20]图20是示出可见范围模式的示例的图。

[图21]图21是示出驾驶状况确定结果和可见范围模式之间的关系的示例的图。

[图22]图22是示出在显示单元上显示的显示图像的示例的图。

[图23]图23是示出在显示单元上显示的显示图像的另一示例的图。

[图24]图24是示出在显示单元上显示的显示图像的另一示例的图。

[图25]图25是示出驾驶员掌握周围区域状况的情况下的操作的示例的流程图。

[图26]图26是表示第四实施例的配置的示例的图。

[图27]图27是示出显示控制器的配置的图。

[图28]图28是示出显示控制器的操作的流程图。

[图29]图29是示出瞥视操作和改变可见范围的指令的示例的图。

[图30]图30是示出瞥视确定操作和改变可见范围的指令的确定的示例的图。

[图31]图31是示出使用头旋转操作的加速作为操作指令量的情况的示例的图。

[图32]图32示出了在呈现警告显示的情况下的显示控制器的配置的示例。

[图33]图33是示出周围区域图像捕获单元和显示在显示单元上的周围图像的放置的示例的图。

[图34]图34是用于说明当头部在前后方向上移动时周围区域图像的变化的图。

[图35]图35是用于说明当头部向左方向上移动时周围区域图像的变化的图。

[图36]图36是示出在使用单个周围区域图像捕获单元来实现与内后视镜对应的功能的情况下的配置的示例的图。

[图37]图37是示出在使用多个周围区域图像捕获单元来实现与内后视镜对应的功能的情况下的配置的示例的图。

[图38]图38是示出在与内后视镜相比减少盲点的情况下的配置的示例的图。

[图39]图39是用于说明图像接合位置的变化的图。

具体实施方式

在下文中，将描述本技术的实施例。注意，将按照以下顺序进行描述。

1.第一实施例

1-1.第一实施例的配置

1-2.第一实施例的操作

1-3.第一实施例的其它配置和操作

2.第二实施例

2-1.第二实施例的配置

2-2.第二实施例的操作

3.第三实施例

3-1.第三实施例的配置

3-2.第三实施例的操作

4.第四实施例

4-1.第四实施例的配置

4-2.第四实施例的操作

5.其它实施例

<1.第一实施例>

(1-1.第一实施例的配置)

图1示出了第一实施例的配置的示例。显示装置10设置有周围区域图像捕获单元11、显示单元50和反射镜单元55。此外，图2是示出驾驶员、显示单元和反射镜单元之间的位置关系的示例的图。

周围区域图像捕获单元11捕获车辆周围的周围区域的图像，并且将图像信号输出到显示单元50。图3是用于说明周围区域图像捕获单元的图像捕获范围的图。例如，假设当使用后视镜91时，驾驶员DR在头部位置(眼睛的位置)PS1处可以观察周围区域中的区域ARb1的范围。注意，在以下描述中，躯干位置和眼睛的位置将被简单地称为头部位置。

假设当驾驶员DR将头部位置移动到位置PS2时，可以观察周围区域中的区域ARb2的范围。例如，周围区域图像捕获单元11捕获包括区域ARb1和区域ARb2的区域ARc的范围的图像，并且生成图像信号。以这种方式，通过配置图像捕获范围，周围区域图像捕获单元11能够生成描绘当使用后视镜91时可见的周围区域的图像信号。注意，例如，周围区域图像捕获单元11的图像捕获范围不限于包括区域ARb1和区域ARb2的区域ARc的范围，并且可以取为比区域ARc具有更宽的视角的范围。以下，将周围区域图像捕获单元11捕获的区域指定为捕获的周围区域。

显示单元50被安装成使得显示面经由反射镜单元55对驾驶员DR间接可见，并且在显示面上显示由周围区域图像捕获单元11捕获的图像(以下指定为“周围区域的捕获图像”)。注意，在显示单元50的显示图像中，对应于经由反射镜单元55对驾驶员可见的周围区域的范围(以下指定为“可见范围”)的图像区域将被称为监视图像区域。

反射镜单元55被设置成使得显示单元50的显示面对于驾驶员DR是间接可见的。例如，反射镜单元55被放置在车辆内部，在柱附近的位置处，例如使得当驾驶员DR执行类似于察看过去的后视镜的操作的操作时，在反射镜单元55中反射的图像是可见。

此外，相对于反射镜单元55的显示单元50设置有显示尺寸和与反射镜单元55的间隔，使得在反射镜单元55中反射的显示单元50上的周围区域的捕获图像类似于在过去的后视镜中反射的周围区域。此外，显示单元50和反射镜单元55被布置为使得从在反射镜单元55中反射的显示单元50的图像对驾驶员可见的周围区域的可见范围根据驾驶员的观察位置相对于反射镜单元55的移动而改变。

图4示出反射镜单元和显示单元与过去的后视镜之间的关系。反射镜单元55的反射镜平面尺寸和位置被设置成大致匹配当驾驶员DR察看后视镜91时后视镜91的反射镜平面范围(箭头WA的范围)。此外，在经由反射镜单元55可见的显示单元50的图像区域中，显示在后视镜91的反射镜平面中反射的周围区域的捕获图像。根据这样的配置，显示单元50和反射镜单元55可以用于获得类似于过去的后视镜91的操作效果。尽管这里的实际示例引用了位于过去的A柱附近的侧(后视)反射镜以及被布置成实现类似的可见性方向的反射镜单元55的位置关系的示例，但是其中与挡泥板反射镜的可见性方向类似地，可见性方向到达仪表盘中心的布置也是可以接受的，并且作为实现由驾驶员更少的颈部转动操作的布置，也期待有效地减轻负担的优点。

对于显示装置10，为了使所捕获的周围区域的图像经由反射镜单元55对驾驶员DR间接可见，从驾驶员DR到显示单元50的显示面的距离与驾驶员DR直接观察显示单元50上的显示面的情况相比增加。

图5是表示驾驶员的眼睛的聚焦变化与反应时间之间的关系的图。如图5(A)所示，当在无穷远处的可见对象OBa和在近距离处的可见对象OBb的两个点之间切换眼睛的聚焦时，用以将聚焦从一个对象调整到另一个对象的反应时间依据到近距离处的可见对象OBb的距离LA而变化。图5(B)示出了到近距离处的可见对象OBb的距离LA与反应时间TR之间的关系。在到近距离处的可见对象OBb的距离变得短于某一距离之后，反应时间TR存在随着到可见对象OBb的距离变短而变得更长的趋势。这里，实线是针对老人的情况，而虚线是针对中年人的情况，单点链线是针对年轻人的情况。为此，在本技术中，通过增加从驾驶员DR到显示单元50的显示面的距离，以便周围区域的捕获图像经由反射镜单元55对驾驶员DR间接可见，快速感知工作成为可能。具体地，显示单元50和反射镜单元55被布置或光学设计成使得经由反射镜单元55从驾驶员DR到显示单元50的显示面的光学视距变为至少1.1m或更大。通过以这种方式布置显示单元50和反射镜单元55，利用显示装置10，驾驶员将聚焦调整到显示在显示单元50上的周围区域的捕获图像的时间就更接近驾驶员将聚焦调整到经由后视镜看到的对象的时间。

此外，在显示装置10中，由于周围区域的捕获图像经由反射镜单元55对驾驶员DR间接可见，因此显示单元50被布置为使得显示面和来自显示面的照明光对驾驶员DR不是直接可见的。此外，还可以使用设置有阻挡显示单元50的显示面和来自驾驶员DR的照明光的遮挡件的配置。

(1-2.第一实施例的操作)

图6是用于说明第一实施例的操作的图。显示单元50显示由周围区域图像捕获单元11捕获的捕获图像。例如，反射镜单元55被配置为平面镜，并且其尺寸被设定为使得当驾驶员DR经由反射镜单元55间接地观察周围区域的捕获图像时，显示单元50的显示区域GRc的部分区域GRm是可见的。注意，区域GRm被指定为监视图像区域。此外，显示单元50在显示区域GRc中显示由周围区域图像捕获单元11捕获的区域ARc的图像。

例如，显示单元50和反射镜单元55被布置成使得当车辆的驾驶员DR移动他或她的头部位置以改变可见范围时(诸如通过沿着箭头Va的方向移动)，经由反射镜单元55可见的监视图像区域GRm沿着箭头Vb的方向移动，类似于过去的后视镜的情况。具体地，显示单元50和反射镜单元55被布置为使得当头部位置移动时，监视图像区域GRm的移动方向变为显示单元50上的显示区域的长度方向。

在这一点上，当面向反射镜单元55的方向的驾驶员DR的头部位置处于图中所示的位置时，驾驶员DR能够通过经由反射镜单元55观察监视图像区域GRm的图像来检查周围区域的可见范围ARm的状况。

接下来，如果驾驶员DR沿着指向车辆前方的箭头Vaf的方向移动他或她的头部位置，以便检查比可见范围ARm更向外的区域，则经由反射镜单元55对驾驶员DR可见的监视图像区域GRm沿箭头Vbf的方向移动。换句话说，驾驶员DR通过使他或她的头部位置朝向车辆的前方移动并且经由反射镜单元55观察监视图像区域中的图像，能够检查在周围区域中比移动头部位置之前更向外的区域的状况。

此外，如果驾驶员DR朝向车辆的后方(箭头Vaf的相反方向)移动他或她的头部位置，则经由反射镜单元55对驾驶员DR可见的监视图像区域GRm沿着箭头Vbf的相反方向移动。换句话说，驾驶员DR通过使他或她的头部位置朝向车辆的后方移动并且经由反射镜单元55观察监视图像区域中的图像，能够检查在周围区域中比移动头部位置之前更向内的区域的状况。

因此，通过使驾驶员经由反射镜单元55观察显示单元50的图像，可类似于使用后视镜的情况来检查周围区域的期望区域。此外，由于显示单元50和反射镜单元55被设置在车辆的驾驶室中，因此可以很好地检查周围区域，而不会像使用后视镜的情况那样受到侧窗的不利影响。例如，能够避免由于例如雾化或雨滴等附着在侧窗上而难以检查周围区域。

(1-3.第一实施例的其它配置和操作)

同时，尽管如上讨论的根据第一实施例的反射镜单元55被描述为配置为平面镜，但是反射镜单元55不限于是平面反射镜，并且还可以被配置为包括弯曲部。通过部分地弯曲反射镜单元55，可以获得与凸后视镜对应的有利效果。

图7示出了反射镜单元包括弯曲部的情况的示例。例如，反射镜单元55在可见范围的移动方向上，或者换句话说，在根据驾驶员DR的头部位置的移动的监视图像区域GRm的移动方向上的形状被形成为在驾驶员DR的方向上突出的弯曲形状。此外，在反射镜单元55中，中央部MRc的弯曲小于可见范围的移动方向的端部处的弯曲，并且形成为大致平面形状。

通过以这种方式弯曲端部，图像在弯曲部处在可见范围的移动方向上被压缩。因此，如果反射镜单元55的中央部MRc被认为是对应于监视图像区域GRm的区域，则周围区域从对应于监视图像区域GRm的可见范围Arm更向外或向内的那部分可以利用反射镜单元55的端部处的压缩图像来检查。因此，与使用平面镜的情况相比，能够确保可以由驾驶员检查的周围区域的更宽区域。

<2.第二实施例>

(2-1.第二实施例的配置)

图8示出了第二实施例的配置的示例。显示装置10设置有周围区域图像捕获单元11、驾驶员图像捕获单元12、显示控制器20、显示单元50和反射镜单元55。同时，图9是示出驾驶员、显示单元、反射镜单元和驾驶员图像捕获单元之间的位置关系的示例的图。

周围区域图像捕获单元11捕获车辆周围的周围区域的图像，并且将图像信号输出到显示控制器20。注意，由周围区域图像捕获单元11捕获的区域将被指定为捕获的周围区域。

例如，驾驶员图像捕获单元12设置在驾驶员DR的前面或者设置在反射镜单元55所安装的方向上，以使得能够确定诸如头部位置、头部定向(对应于面部的定向)以及驾驶员DR的视线方向的特性。驾驶员图像捕获单元12捕获驾驶员DR的图像，并且将图像信号输出到显示控制器20。

显示控制器20使显示单元50显示已由周围区域图像捕获单元11捕获的周围区域的捕获图像。此外，显示控制器20基于诸如头部位置、头部定向和驾驶员的视线方向的特性以及位置和定向的移动，来根据预定的显示改变通信操作控制显示在显示单元50上的图像的显示。

显示单元50被布置成使得显示单元50的显示面经由反射镜单元55对驾驶员间接可见。此外，例如，显示单元50的显示面被配置为一定尺寸，使得即使驾驶员DR在驾驶的同时移动他或她的头部位置以利用后视镜检查宽范围内的区域，显示单元50的显示图像也经由反射镜单元55可见。注意，在显示单元50的显示图像中，与驾驶员经由反射镜单元55检查的周围区域的可见范围相对应的区域将被称为监视图像区域。

反射镜单元55被设置成使得显示单元50的显示面对于驾驶员DR是间接可见的。例如，反射镜单元55被放置在车辆内部在柱附近的位置处，使得当驾驶员DR执行查看过去的后视镜的操作时，在反射镜单元55中反射的图像是可见的。此外，反射镜单元55与显示单元50的位置关系和反射镜单元55的尺寸被配置为使得当驾驶员DR经由反射镜单元55间接地观察周围区域的捕获图像时，显示单元50的整个显示区域被反射在反射镜单元55中。此外，在显示单元50和反射镜单元55中，从在反射镜单元55中反射的显示单元50的图像对驾驶员可见的周围区域的可见范围通过显示控制器20的显示控制根据驾驶员的观察位置相对于反射镜单元55的移动来改变。如图4所示，反射镜单元55的反射镜平面尺寸和位置被设置成当驾驶员DR察看后视镜91时大致匹配后视镜91的反射镜平面范围(箭头WA的范围)。根据这种配置，显示单元50和反射镜单元55可以用于获得类似于过去的后视镜91的操作效果。

对于显示装置10，为了使周围区域的捕获图像经由反射镜单元55对驾驶员DR间接可见，从驾驶员DR到显示单元50的显示面的距离与驾驶员DR直接观察显示单元50上的显示面的情况相比增加。

此外，在显示装置10中，由于周围区域的捕获图像经由反射镜单元55对驾驶员DR间接可见，因此显示单元50被布置成使得显示面和来自显示面的照明光对驾驶员DR不可见。此外，还可以使用设置有阻挡对显示单元50的显示面和来自驾驶员DR的照明光直接观察的遮挡件的配置。尽管这里的实际示例描述了被布置为实现类似于过去的位于A柱附近的后视镜的可见性方向的反射镜单元55的位置关系，但是其中视线到达仪表盘中心(其中可见方向对应于挡泥板反射镜)的布置也是可接受的。

图10是示出显示控制器的配置的图。显示控制器20设置有驾驶员移动确定单元21、控制处理器35、显示调节器41和亮度调节器42。

驾驶员移动确定单元21基于从驾驶员图像捕获单元12提供的图像信号，检测驾驶员的头部位置，并且确定驾驶员的头部位置的移动方向和移动量。例如，驾驶员移动确定单元21例如基于从驾驶员图像捕获单元12提供的图像信号进行驾驶员的面部识别，并且确定所识别的面部的位置、面部的定向(对应于头部的定向)、以及视线的定向。此外，驾驶员移动确定单元21跟踪所识别的面部，并且确定头部位置的移动方向和移动量。驾驶员移动确定单元21将确定结果输出到控制处理器35。

控制处理器35基于来自驾驶员移动确定单元21的确定结果，生成控制信号，以针对显示单元50的监视图像区域和其它区域(以下称为“非监视图像区域”)来不同地控制显示，并且输出到显示调节器41和亮度调节器42。

例如，显示调节器41基于来自控制处理器35的控制信号，对从周围区域图像捕获单元11提供的图像信号执行周围区域的捕获图像的尺度调整，诸如通过将图像压缩应用到非监视图像区域。

亮度调节器42基于来自控制处理器35的控制信号，将显示单元50上的非监视图像区域的亮度降低到小于监视图像区域。例如，如果显示单元50使用可能需要照明的显示元件(诸如液晶元件等)来配置，则例如亮度调节器42控制照明的部分区域(诸如液晶面板的背光)，以将非监视图像区域的亮度降低到小于监视图像区域。同时，例如，如果显示单元50使用不需要照明的显示元件或使用诸如有机EL显示元件的发光元件来配置，则可以进行处理以降低对应于非监视图像区域的亮度信号的信号电平。

(2-2.第二实施例的操作)

图11是用于说明第二实施例的操作的图。显示控制器20在显示单元50的显示区域GRc中显示由周围区域图像捕获单元11捕获的区域ARc的图像。例如，反射镜单元55被配置为平面镜，并且其尺寸被设定为使得当驾驶员DR经由反射镜单元55间接地观察周围区域的捕获图像时，显示单元50的显示区域GRc是可见的。

此外，显示控制器20对显示区域GRc中的显示图像进行亮度控制、压缩处理等，并且在显示区域GRc中呈现可区分地显示可见范围的图像的显示，所述可见范围是经由反射镜单元55对驾驶员可见的周围区域的范围。这里，对应于可见范围的显示区域被指定为监视图像区域GRm。

此外，例如，显示控制器20基于由驾驶员图像捕获单元12捕获的驾驶员DR的移动(诸如沿着车辆前后方向(箭头Va的方向)的移动)，沿箭头Vb的方向移动监视图像区域GRm。可选地，代替移动监视图像区域GRm，显示控制器20移动与监视图像区域GRm对应的可见范围ARm，在箭头Vb的方向上扩展监视图像区域GRm等。

关于图像的移动速度，例如，如果在驾驶员暂时察看除监视图像之外的东西时在所显示的图像内容中发生突然变化，则存在失去对该情况的掌握的风险。因此，避免了突然的屏幕移动，并且显示图像的平均移动保持在每个总移动量(整个视角的移位量)最大0.2s内。这里，通过停留在与稍后讨论的头部和视线的位置检测相关联的200ms的屏幕改变反应延迟时间内，与使用相关领域的后视图的情况相比，能够避免或缓和减少的用户控制感，同时，能够令人满意地避免忽视由于掌握环境状况的延迟而导致的危险。

还预期，驾驶员在给出改变屏幕显示区域的指令之后的轻微间隔期间，将对与关于后周围的信息不同的，通过窗口获得的直接视觉信息执行操作。在这种情况下，驾驶员沿着窗口方向扫过反射镜单元55，并且在瞬间把注意从屏幕移开之后，再次返回到经由反射镜单元55检查显示屏幕的步骤。因此，如果整个屏幕内容在该间隔期间发生改变，则存在失去掌握情况的风险。因此，由于这种屏幕改变而导致的显示范围在改变之后保持原始显示内容的至少1/4，并且保持改变之前的屏幕的部分包括在改变之后的屏幕上的移动。例如，当驾驶员在屏幕改变和移动时将注意力转移到其它视觉信息(例如，经过反射镜单元55和窗口看到的直接视野)，并且然后将他或她的视线返回到显示器单元50，记住的屏幕的连续性可以减少可能瞬间发生的失去显示单元上的掌握。

图12是示出显示控制器的操作的流程图。在步骤ST1中，显示控制器20确定是否已经执行了检查周围区域的操作。这里，检查周围区域的操作是指驾驶员经由由图像捕获装置和显示装置构成的监视***观察显示装置上的屏幕的整体操作。例如，显示控制器20基于从驾驶员图像捕获单元12提供的图像信号，确定驾驶员的头部定向和视线方向是否在反射镜单元55的方向上。例如，如果驾驶员的头部定向和视线方向在反射镜单元55的方向上(诸如当驾驶员沿反射镜单元55的方向瞥视时)，显示控制器20确定已经执行了检查周围区域的操作，并且行进到步骤ST2。同时，如果驾驶员的头部定向和视线方向不在反射镜单元55的方向上，则显示控制器20确定没有执行检查周围区域的操作，并且返回到步骤ST1。

在步骤ST2中，显示控制器20确定可见范围。显示控制器20基于从驾驶员图像捕获单元12提供的图像信号，检测驾驶员的头部位置，例如，确定经由反射镜单元55从检测到的头部位置可见的可见范围，并且行进到步骤ST3。

在步骤ST3中，显示控制器20进行图像显示控制处理。显示控制器20在显示单元50上显示可见范围的图像作为监视图像区域中的图像。此外，例如，如果在非监视图像区域中描绘高亮度被摄体，则显示控制器20控制部分背光或亮度水平，使得驾驶员的视力不被从图像发出的高亮度水平的显示内容减弱。此外，当将显示单元50的预定区域视为监视图像区域时，显示控制器20进行诸如压缩与非监视图像区域相对应的周围区域的图像的处理，使得可以从监视图像区域中的图像检查期望的可见范围。显示控制器20进行图像显示控制处理，并行进到步骤ST4。

在步骤ST4中，显示控制器20确定是否已经给出了改变可见范围的指令。例如，显示控制器20基于从驾驶员图像捕获单元12提供的图像信号，确定驾驶员的头部位置，并且确定是否已经执行了指令操作以改变周围区域的可见范围。如果驾驶员的头部位置产生了预定动作，则显示控制器20确定已经给出了改变可见范围的指令，并且行进到步骤ST5。同时，如果驾驶员的头部位置产生预定动作，则显示控制器20确定尚未给出改变可见范围的指令，并且行进到步骤ST6。

在步骤ST5中，显示控制器20进行改变可见范围的处理。显示控制器20根据驾驶员的头部位置的动作来移动驾驶员可见的可见范围。例如，显示控制器20控制背光或亮度水平，以根据驾驶员的头部位置的动作移动暗显示的区域，从而改变明亮显示的监视图像区域。此外，例如，显示控制器20附加地压缩设置在监视图像区域的移动方向的相对侧上的非监视图像区域中的图像，从而根据驾驶员的头部位置的动作移动由监视图像区域中的图像显示的可见范围。此外，由于在监视图像区域的移动方向上设置的非监视图像区域上显示的周围区域的范围变得更小，因此非监视图像区域的压缩较少。显示控制器20进行改变可见范围的处理，并行进到步骤ST6。

在步骤ST6中，显示控制器20确定检查周围区域的操作是否已结束。例如，显示控制器20基于从驾驶员图像捕获单元12提供的图像信号，确定驾驶员的头部定向和视线方向是否不再处于反射镜单元55的方向。如果驾驶员的头部定向和视线方向继续在反射镜单元55的方向上，则显示控制器20确定检查周围区域的操作没有结束，并且返回到步骤ST4。同时，如果驾驶员的头部定向和视线方向不再处于反射镜单元55的方向，则显示控制器20确定检查周围区域的操作已经结束，并且行进到步骤ST7。

在步骤ST7中，显示控制器20结束显示。显示控制器20结束显示单元50上的周围区域的图像显示，以允许驾驶员聚焦于驾驶，并且返回到步骤ST1。

图13是用于说明显示控制器的第一显示控制操作的图。在第一显示控制操作中，在显示周围区域的捕获图像的同时，显示控制器降低除可见范围之外的其它范围中的一些或全部图像的亮度，使得其它范围对于驾驶员不太可见。在这样做时，通过经由反射镜单元55观察图像，与使用后视镜的情况类似，驾驶员能够检查周围区域的期望可见范围。此外，存在诸如在产生眩光的非监视图像区域中，特别是在夜间，调节不需要的亮度的优点。

图13(A)示出了显示单元50上的显示，而图13(B)示出了显示单元50的显示位置和亮度之间的关系。显示控制器20将非监视图像区域GRb1和GRb2的亮度(非监视图像区域GRb1和GRb2是与除了可见范围的其它范围相对应的图像区域)降低为低于与可见范围相对应的监视图像区域GRm的亮度，使得非监视图像区域GRb1和GRb2中的图像更不可见。例如，如果显示单元50使用液晶显示元件配置，则进行背光发射控制以使非监视图像区域GRb1和GRb2变暗。同时，如果显示单元50使用有机EL显示元件来配置，则进行亮度信号的信号电平控制以使非监视图像区域GRb1和GRb2变暗。以这种方式，在显示单元50的显示图像中，由于非监视图像区域GRb1和GRb2被置于暗状态，因此驾驶员DR变得仅能够观察监视图像区域GRm中的图像。因此，驾驶员DR能够通过经由反射镜单元55观察显示单元50的显示图像来检查周围区域的可见范围ARm的状况。

此外，例如，当显示控制器20确定驾驶员DR的头部位置已经朝向车辆的前方移动时，显示控制器20根据头部位置的移动来移动监视图像区域GRm，并且移动经由向外的反射镜单元55可见的周围区域的可见范围。具体地，显示控制器20根据头部位置朝向车辆前方的移动来控制图像的亮度，使得非监视图像区域GRb1的区域宽度变得更窄，而非监视图像区域GRb2的区域宽度变得更宽。通过进行这样的显示控制，监视图像区域GRm中的图像变为与移动之前相比周围区域的更向外的范围的图像。例如，当显示控制器20确定驾驶员DR的头部位置已经朝向车辆的后方移动时，虽然未示出，但是显示控制器20根据头部位置的移动来控制图像的亮度，使得非监视图像区域GRb1的区域宽度变得更宽，而非监视图像区域GRb2的区域宽度变得更窄。通过进行这种显示控制，监视图像区域GRm中的图像变为与移动之前相比周围区域的更向内的范围的图像。结果，通过移动他或她的头部位置，与使用后视镜的情况类似，驾驶员能够检查周围区域的期望可见范围。此外，由于显示单元50和反射镜单元55被设置在车辆的驾驶室中，所以可以良好地检查周围区域，而不会如使用后视镜的情况那样受到侧窗的不利影响。

图14是用于说明显示控制器的第二显示控制操作的图。在第二显示控制操作中，在显示周围区域的捕获图像，而不是移动监视图像区域GRm的同时，显示控制器在监视图像区域GRm的移动方向上压缩除了可见范围之外的其它范围的图像。通过以这种方式压缩图像，显示控制器移动对应于监视图像区域GRm的可见范围ARm，使得驾驶员能够检查周围区域的期望可见范围。

图14(A)示出了显示单元50上的显示，而图14(B)示出了显示单元50的显示位置和压缩之间的关系，并且图14(C)示出了显示单元50的显示位置和亮度之间的关系。显示控制器20进行显示控制，使得对于作为与除了可见范围之外的其它范围对应的图像区域的非监视图像区域GRb1和GRb2，图像朝向边缘减少得更多。通过以这种方式压缩非监视图像区域GRb1和GRb2并调整非监视图像区域GRb1和GRb2的压缩率，与监视图像区域GRm对应的可见范围ARm变得可移动。

例如，当显示控制器20根据驾驶员DR的头部位置的动作确定已经给出了向外移动周围区域的可见范围的指令时(诸如当显示控制器20确定驾驶员已经在向前方向上转动他或她的颈部时)，显示控制器20向外移动对应于监视图像区域GRm的可见范围。具体地，显示控制器20控制图像的压缩比，使得非监视图像区域GRb2的周围区域的范围变得更宽。此外，通过减小与向外方向对应的非监视图像区域GRb1的压缩和降低的亮度程度，驾驶员变得能够检查比图像在非监视图像区域GRb1中的可见范围更向外的范围。换句话说，可以扩展可见范围。注意，即使仅减小非监视图像区域GRb1的降低亮度的程度，驾驶员也能够检查比可见范围更向外的范围，并且可以扩展可见范围。

图15示出了显示单元的显示和压缩比与周围区域之间的关系。注意，图15(A)示出了显示单元50上的显示，而图15(B)示出了显示单元50的显示位置和压缩之间的关系，并且图15(C)示出了周围区域图像捕获单元11的图像捕获范围。在监视图像区域GRm中，显示可见区域ARm的捕获图像。在非监视图像区域GRb1中，压缩并显示比可见范围ARm更向外的捕获图像，而在非监视图像区域GRb2中，压缩并显示比可见范围ARm更向内的捕获图像。这里，当显示控制器20确定已经给出了向外移动可见范围的指令时，显示控制器20控制图像的压缩比，使得非监视图像区域GRb2的周围区域的范围变得更宽。因此，对应于监视图像区域GRm的可见范围ARm在周围区域中向外移动。

同时，例如，当显示控制器20确定已经给出了向内移动可见范围的指令时(诸如当显示控制器20确定驾驶员已经沿向后方向转动他或她的颈部时)，显示控制器20控制图像的压缩比，使得非监视图像区域GRb1的周围区域的范围变得更宽。因此，对应于监视图像区域GRm的可见范围ARm在周围区域中向内移动。

此外，如前所述，在给出改变可见范围的指令之前，显示控制器20将非监视图像区域GRb1和GRb2的亮度降低到低于与可见范围对应的监视图像区域GRm的亮度，使得非监视图像区域GRb1和GRb2中的图像更不可见。例如，如果显示单元50使用液晶显示元件配置，则进行背光发射控制以使非监视图像区域GRb1和GRb2变暗。同时，如果显示单元50使用有机EL显示元件配置，则进行亮度信号的信号电平控制以使非监视图像区域GRb1和GRb2变暗。以这种方式，在显示单元50的显示图像中，由于非监视图像区域GRb1和GRb2被置于暗状态，因此驾驶员DR变得仅能够观察监视图像区域GRm中的图像。因此，驾驶员DR能够通过经由反射镜单元55观察显示单元50的显示图像来检查周围区域的可见范围ARm的状况。之后，如果给出改变可见范围的指令，则显示控制器20使非监视图像区域的亮度水平接近监视图像区域GRm的亮度水平。

通过进行这样的显示控制，当驾驶员给出改变可见范围的指令时，根据驾驶员的指令移动与监视图像区域GRm对应的可见范围ARm，从而使驾驶员能够容易地检查周围的期望范围。此外，由于使非监视图像区域的亮度水平与监视图像区域GRm的亮度水平相似，因此从监视图像区域的划分被去除。因此，可见范围可以自动地扩展。此外，由于驾驶员能够通过简单地给出改变指令来改变可见范围，因此驾驶员变得能够容易地检查期望的周围范围，而不在向前方向等上移动他或她的头部位置直到期望的周围范围在后视镜中反射，如在使用过去的后视镜的情况下。此外，由于显示单元50和反射镜单元55被设置在车辆的驾驶室中，所以可以良好地检查周围区域，而不会如使用后视镜的情况那样受到侧窗的不利影响。

注意，当驾驶员给出改变可见范围的指令时，非监视图像区域的亮度水平也可以保持在降低的状态。在这种情况下，不进行监视图像区域GRm的扩展，以预定亮度显示基于改变指令移动的可见范围的图像。此外，非监视图像区域的压缩特性和亮度特性不限于图14中的特性。例如，压缩比也可以突然变化，而亮度水平也可以逐渐变化。此外，通过使得压缩特性和亮度特性由驾驶员可选择，可以根据驾驶员的偏好来显示周围区域的图像。此外，诸如所显示图像的放大率或可见范围的放大/缩小的属性也可以根据改变可见范围的指令而变化。例如，可以将驾驶员DR移动或已经移动靠近反射镜单元55的操作视为改变可见范围的指令，并且显示具有宽可见范围的图像或具有低放大率的图像(例如，这些图像可以被指定为第一图像)。同时，可以将驾驶员DR移动或已经移动远离反射镜单元55的操作视为改变可见范围的指令，并且显示与第一图像相比具有窄可见范围的图像或具有高放大率的图像。

<3.第三实施例>

第三实施例描述了驾驶员想要检查的周围区域根据车辆的驾驶状况而变化的情况。作为示例，将描述如下情况，其中驾驶室和拖车部分是可分离的，例如，与拖车、铰接客车或露营车一样，并且其中驾驶室的定向和拖车部分的定向根据驾驶状况而改变。

(3-1.第三实施例的配置)

图16示出了第三实施例的配置的示例。显示装置10装配有周围区域图像捕获单元11a和11b、驾驶员图像捕获单元12、驾驶状况检测传感器13、显示控制部20、显示单元50和反射镜单元55。注意，驾驶员图像捕获单元12、驾驶状况检测传感器13、显示单元50、反射镜单元55和驾驶员DR以图9所示的位置关系存在。

周围区域图像捕获单元11a和11b捕获车辆周围的周围区域的图像，并且向显示控制器20输出图像信号。周围区域图像捕获单元11a被设置在驾驶室上，而周围区域图像捕获单元11b被设置在拖车部分上。这里，由周围区域图像捕获单元11a捕获的区域将被指定为第一捕获周围区域，而由周围区域图像捕获单元11b捕获的区域将被指定为第二捕获周围区域。

例如，驾驶员图像捕获单元12被设置在驾驶员DR的前面或者反射镜单元55所安装的方向上，以使得能够确定诸如驾驶员DR的头部位置、头部定向和视线方向的属性。驾驶员图像捕获单元12捕获驾驶员DR的图像，并且将图像信号输出到显示控制器20。

例如，驾驶状况检测传感器13获取与驾驶状况相关的信息，诸如表示转向状态的信息、表示拖车部分的耦接状态的信息、关于拖车部分相对于驾驶室的转向的信息、档位信息和车辆速度信息、方向指示器配置信息和当前位置信息(例如，卫星定位***的定位信号)。驾驶状况检测传感器13将获取的驾驶信息作为传感器信息输出到显示控制器20。

显示控制器20基于由周围区域图像捕获单元11a和11b生成的图像信号，在显示单元50上显示周围区域的捕获图像。此外，显示控制器20基于诸如驾驶员的头部位置、头部定向和视线方向的属性，位置和定向的移动，以及来自驾驶状况检测传感器13的传感器信息来控制在显示单元50上显示的周围区域的捕获图像的显示。

显示单元50被布置成使得显示单元50的显示面经由反射镜单元55对驾驶员间接可见。此外，例如，显示单元50的显示面被配置为大于其中反射镜单元55的镜面汇聚的光线的尺寸，如图4所示，使得即使驾驶员DR在驾驶的同时移动他或她的头部位置以利用后视镜检查宽范围的区域，显示单元50的显示图像经由反射镜单元55也是可见的。注意，在显示单元50的显示图像中，与驾驶员经由反射镜单元55检查的图像区域的可见范围相对应的区域将被称为监视图像区域。

反射镜单元55被设置成使得显示单元50的显示面对于驾驶员DR是间接可见的。例如，反射镜单元55被放置在车辆内部在柱的位置处，使得当驾驶员DR执行察看过去的后视镜的操作时，在反射镜单元55中反射的图像是可见的。此外，反射镜单元55与显示单元50的位置关系和反射镜单元55的尺寸被配置为使得当驾驶员DR经由反射镜单元55间接地观察周围区域的捕获图像时，在反射镜单元55中反射显示单元50的整个显示区域。此外，在显示单元50和反射镜单元55中，从在反射镜单元55中反射的显示单元50的图像对驾驶员可见的周围区域的可见范围由显示控制器20的显示控制根据驾驶员的观察位置相对于反射镜单元55的移动而改变。注意，反射镜单元55的尺寸被优选地如第一实施例和第二实施例中那样配置，使得获得类似于过去的后视镜的操作优点。

对于显示装置10，为了使周围区域的捕获图像经由反射镜单元55对驾驶员DR间接可见，从驾驶员DR到显示单元50的显示面的距离与驾驶员DR直接观察显示单元50上的显示面的情况相比增加。

此外，在显示装置10中，由于周围区域的捕获图像经由反射镜单元55对驾驶员DR间接可见，因此显示单元50被布置成使得显示面和来自显示面的照明光对驾驶员DR不可见。此外，还可以使用设置有阻挡显示单元50的显示面和来自驾驶员DR的显示光的遮挡件的配置。

图17示出了周围区域图像捕获单元的布置的示例。注意，例如，该图示出了在省略了右侧面上的周围区域图像捕获单元的同时，在拖车的左侧面上布置周围区域图像捕获单元的情况的示例。

如上所述，周围区域图像捕获单元11a被设置在驾驶室上，而周围区域图像捕获单元11b被设置在拖车部分上。这里，由周围区域图像捕获单元11a捕获的区域将被指定为第一捕获周围区域，而由周围区域图像捕获单元11b捕获的区域将被指定为第二捕获周围区域。

图17(A)示出了驾驶室和拖车部分位于直线上的情况。图17(B)示出了拖车部分相对于驾驶室向安装有周围区域图像捕获单元11a的一侧转向的状态，并且图17(C)示出了拖车部分相对于驾驶室在与安装有周围图像捕获单元11a的一侧相反的方向上转向的状态。如果拖车部分从图17(A)所示的状态到如图17(B)所示的状态，则描绘拖车部分的图像部分被添加到由周围区域图像捕获单元11a捕获的捕获图像，并且驾驶员可能不再能够检查周围区域。此外，如果拖车部分从图17(A)所示的状态到如图17(C)所示的状态，则拖车部分离开周围区域图像捕获单元11a的图像捕获范围，并且拖车部分的附近变为驾驶员不能检查的盲点。另一方面，由于周围区域图像捕获单元11b被设置在拖车部分上，因此由周围区域图像捕获单元11b捕获的捕获图像变为示出周围区域的图像，而不管驾驶室和拖车部分之间的位置关系如何。

因此，显示控制器20依据驾驶状况和驾驶员的意图使用由周围区域图像捕获单元11a捕获的捕获图像和由周围区域图像捕获单元11b捕获的捕获图像，并且从而控制显示，使得可以经由反射镜单元55检查周围区域。

图18是示出显示控制器的配置的图。显示控制器20装配有驾驶员移动确定单元21、驾驶状况确定单元22、控制处理器35、显示调节器41和亮度调节器42。

驾驶员移动确定单元21基于从驾驶员图像捕获单元12提供的图像信号，检测驾驶员的头部位置，并且确定驾驶员的头部位置的移动方向和移动量。例如，驾驶员移动确定单元21例如基于从驾驶员图像捕获单元12提供的图像信号进行驾驶员的面部识别，并且确定所识别的面部的位置、面部的定向或头部的定向。此外，驾驶员移动确定单元21跟踪所识别的面部，并且确定头部位置的移动方向和移动量。驾驶员移动确定单元21将确定结果输出到控制处理器35。

驾驶状况确定单元22基于从驾驶状况检测传感器13提供的传感器信息来确定驾驶状况。例如，驾驶状况确定单元22基于档位等确定车辆是向前还是向后移动，并且基于车辆速度、方向指示器配置信息、转向状态等，确定车辆是直线移动、右转、还是左转。此外，例如，驾驶状况确定单元22基于关于拖车部分的耦接状态、拖车部分的转向等的信息来确定诸如是否存在平缓的左/右转或急剧的左/右转以及行驶位置是否处于环形交叉口(roundabout)的位置的因素。驾驶状况确定单元22将确定结果输出到控制处理器35。

控制处理器35基于来自驾驶员移动确定单元21和驾驶状况确定单元22的确定结果，生成控制信号，以针对显示单元50的监视图像区域和非监视图像区域不同地控制显示，并且输出到显示调节器41和亮度调节器42。

例如，显示调节器41基于来自控制处理器35的控制信号，对从周围区域图像捕获单元11提供的图像信号执行周围区域的捕获图像的尺度调整，诸如通过将图像压缩应用到非监视图像区域。此外，显示调节器41基于来自控制处理器35的控制信号，还可以切换或组合由多个周围区域图像捕获单元捕获的周围区域的图像，调整待显示的周围区域的显示宽度等。

亮度调节器42基于来自控制处理器35的控制信号，将显示单元50上的非监视图像区域的亮度降低到小于监视图像区域。例如，如果显示单元50使用可能需要照明的显示元件(诸如液晶元件)来配置，则例如亮度调节器42控制诸如背光的照明，以将非监视图像区域的亮度降低到小于监视图像区域。同时，例如，如果显示单元50使用不需要照明的显示元件或使用发光元件(诸如有机EL显示元件)来配置，则可以进行处理以降低与非监视图像区域相对应的亮度信号的信号电平。

(3-2.第三实施例的操作)

图19是示出第三实施例中的显示控制器的操作的流程图。在步骤ST11中，显示控制器20确定是否已经执行了检查周围区域的操作。例如，显示控制器20基于从驾驶员图像捕获单元12提供的图像信号，确定驾驶员的头部定向和视线方向是否在反射镜单元55的方向上。例如，如果驾驶员的头部定向和视线方向在反射镜单元55的方向上(诸如当驾驶员沿反射镜单元55的方向瞥视时)，显示控制器20确定已经执行了检查周围区域的操作，并且行进到步骤ST12。同时，如果驾驶员的头部定向和视线方向不在反射镜单元55的方向上，则显示控制器20确定尚未执行检查周围区域的操作，并且返回到步骤ST11。

在步骤ST12中，显示控制器20确定驾驶状况。显示控制器20基于从驾驶状况检测传感器13提供的传感器信息来确定驾驶状况。显示控制器20确定诸如车辆是向前还是向后移动，车辆是直线移动、右转还是左转，是否存在平缓的左/右转或急剧的左/右转以及行驶位置是否处于环形交叉口的位置的因素，并且行进到步骤ST13。

在步骤ST13中，显示控制器20确定可见范围。显示控制器20基于驾驶状况确定结果确定经由反射镜单元55可见的可见范围，并且行进到步骤ST14。注意，在可见范围的确定中，可以通过额外考虑驾驶员的头部位置来确定可见范围。

图20示出了可见范围模式的示例。例如，模式1是在正常行驶期间的反射镜可见性基础范围。例如，模式2是使得在正常行驶期间能够从反射镜可见性基础范围得到向内和向外两者更宽的可见性的范围。例如，模式3被配置为使得驾驶员能够在倒车等时观察到从车辆向外的区域，没有盲点。这里，例如，假设周围区域图像捕获单元11a的图像捕获范围是正常行驶期间的反射镜可见性基础范围，而周围区域图像捕获单元11b的图像捕获范围是比周围区域图像捕获单元11a的图像捕获范围更宽的范围。此外，如图20(A)所示，假设模式1将周围区域图像捕获单元11a的图像捕获范围视为可见范围，而模式2将周围区域图像捕获单元11b的图像捕获范围视为可见范围。此外，如图20(B)所示，假设模式3将包括在周围区域图像捕获单元11a和周围区域图像捕获单元11b的图像捕获范围中的范围视为可见范围。注意，周围区域图像捕获单元11a的图像捕获范围也可以是可切换的，并且可以依据驾驶状况或驾驶员指令将周围区域图像捕获单元11b的图像捕获范围视为可见范围。例如，如图20(C)所示，周围区域图像捕获单元11a的图像范围也可以可切换到模式1至模式3的范围。

图21示出了驾驶状况确定结果和可见范围模式之间的关系的示例。例如，当显示控制器20基于检测到的信息确定车辆正在被直线向前行驶时，模式1的范围被视为可见范围，如圆形符号所示。例如，当显示控制器20基于检测到的信息确定车辆处于环形交叉口位置时，模式1的范围被视为可见范围，如圆形符号所示。例如，当显示控制器20基于检测到的信息确定车辆正在进行平缓的右转或左转时，模式1的范围被视为可见范围，如圆形符号所示。例如，当显示控制器20基于检测到的信息确定车辆正在进行急剧右转或左转时，模式2的范围被视为可见范围，并且可检查的范围向外变宽，如圆形符号所示。例如，当显示控制器20基于检测到的信息确定车辆正在直线倒车时，模式1的范围被视为可见范围，如圆形符号所示。例如，当显示控制器20基于检测到的信息确定车辆正在以锐角倒车时，由圆形符号指示的模式2的范围，或者换句话说，周围区域图像捕获单元11b的图像捕获范围被视为可见范围，使得图17(C)中所示的盲点不发生。

在步骤ST14中，显示控制器20进行图像显示控制处理。显示控制器20根据可见范围模式配置监视图像区域的区域宽度，并且在显示单元50上将可见范围的图像显示为监视图像区域中的图像。此外，例如，显示控制器20控制背光或亮度水平，使得非监视图像区域中的图像是不可见的。此外，当将显示单元50的预定区域视为监视图像区域时，显示控制器20进行诸如压缩与非监视图像区域相对应的周围区域的图像的处理，使得可见范围的图像可以被显示在监视图像区域中，并且还使得与监视图像区域相对应的可见范围可以被移动。显示控制器20进行图像显示控制处理，并行进到步骤ST15。

在步骤ST15中，显示控制器20确定是否已经给出了改变可见范围的指令。例如，显示控制器20基于从驾驶员图像捕获单元12提供的图像信号，确定驾驶员的头部位置，并且确定是否已经执行了改变周围区域的可见范围的指令操作。如果驾驶员的头部位置产生了具有可见范围的移动的动作，则显示控制器20确定已经给出了改变可见范围的指令，并且行进到步骤ST16。同时，如果驾驶员的头部位置产生了具有可见范围的移动的动作，则显示控制器20确定尚未给出改变可见范围的指令，并且行进到步骤ST17。

在步骤ST16中，显示控制器20进行模式改变处理。当改变可见范围的指令是用以加宽可见范围的指令时，显示控制器20切换到具有宽可见范围的模式。例如，当设置为由图21中的圆形符号指示的模式时，显示控制器20切换到由方形符号指示的模式，并且当设置为由方形符号指示的模式时，显示控制器20切换到由星形符号指示的模式。此外，当改变可见范围的指令是使可见范围变窄的指令时，显示控制器20切换到具有窄可见范围的模式。例如，当设置为由图21中的方形符号指示的模式时，显示控制器20切换到由圆形符号指示的模式，并且当设置为由星符号指示的模式时，显示控制器20切换到由方形符号指示的模式。显示控制器20基于改变可见范围的指令来切换模式，并且行进到步骤ST17。

在步骤ST17中，显示控制器20确定检查周围区域的操作是否已经结束。例如，显示控制器20基于从驾驶员图像捕获单元12提供的图像信号，确定驾驶员的头部定向和视线方向是否不再处于反射镜单元55的方向。如果驾驶员的头部定向和视线方向继续处于反射镜单元55的方向，则显示控制器20确定检查周围区域的操作没有结束，并且返回到步骤ST15。同时，如果驾驶员的头部定向和视线方向不再处于反射镜单元55的方向，则显示控制器20确定检查周围区域的操作已经结束，并且行进到步骤ST18。

在步骤ST18中，显示控制器20结束显示。显示控制器20结束显示单元50上的周围区域的图像显示，以允许驾驶员聚焦于驾驶，并且返回到步骤ST11。

通过进行这种显示控制，可以根据驾驶状况自动地进行可见范围的配置和切换，使得驾驶员能够比在使用过去的后视镜的情况下更容易地检查周围区域的期望可见范围。例如，当基于从驾驶状况检测传感器13提供的传感器信息，车辆的行驶方向为直线向前时，模式从模式1切换到模式2，并且可见范围在车辆的向外方向上扩展。此外，在驾驶室的定向和拖车部分的定向基于从驾驶状况检测传感器13提供的传感器信息是不同的急剧左/右转或以锐角倒车的情况下，模式从模式2切换到模式3，并且可见范围被扩展，使得拖车部分的向外侧包括在可见范围中。因此，可以检查期望的可见范围。此外，由于显示单元50和反射镜单元55被设置在车辆的驾驶室中，因此可以良好地检查周围区域，而不会如使用后视镜的情况那样受到侧窗的不利影响。

图22示出了使用由周围区域图像捕获单元11a和周围区域图像捕获单元11b获取的周围图像在显示单元50上显示的显示图像的示例。图22(A)示出了其中汽车位于周围区域图像捕获单元11a的盲点中的情况下的例子。图22(B)示出了显示由周围区域图像捕获单元11a捕获的周围图像MGa的情况的示例，其中不能仅利用由周围区域图像捕获单元11a捕获的图像的显示图像来检查整个车辆后面。为此，如图22(C)所示，显示控制部20不仅显示由周围区域图像捕获单元11a捕获的周围图像MGa，而且还显示由周围区域捕获单元11b捕获的周围图像MGb，从而使得驾驶员能够检查整个车辆后面。注意，如果显示控制器20被配置为根据驾驶状况或驾驶员的意图切换图22(B)和图22(C)所示的显示，或者改变如图22(C)中的箭头所指示的周围图像MGa和周围图像MGb的区域宽度(或***宽度)，则可以以最容易看见的状态显示周围区域。

图23示出了使用由周围区域图像捕获单元11a和周围区域图像捕获单元11b捕获的周围图像在显示单元50上显示的显示图像的另一示例。图23(A)示出了显示由周围区域图像捕获单元11a捕获的周围图像MGa的情况的示例。图23(B)示出了通过垂直布置来显示由周围区域图像捕获单元11a捕获的周围图像MGa和由周围区域图像捕获单元11b捕获的周围图像MGb的情况的示例。显示控制器20根据驾驶状况和驾驶员的意图在图23(A)所示的显示和图23(B)所示的显示之间切换。此外，也可以使用能够改变由图23(B)中的箭头所指示的周围图像MGa和周围图像MGb之间的区域宽度(或***宽度)的配置。在这一点上，当用通过多个图像捕获捕获的相邻图像显示在显示单元上呈现显示时，相对于车身的行驶方向更向前布置的捕获图像可以在显示屏幕上布置得更高，而相对于行驶方向更向后安装的捕获图像可以在显示屏幕上布置得更低。这种布置具有使驾驶员能够直观和即时地确定车身在可见屏幕上的前/后关系的优点。换句话说，例如，当至少两个或更多个图像捕获装置附接在车辆外部并且相对于车辆行驶方向面向后方，并且设置有至少两个或更多个相邻布置的屏幕显示区域的显示单元被包括在车辆的驾驶室中(诸如在仪表盘中心)时，在待显示在屏幕显示区域中的捕获图像的显示内容中，来自安装在车辆行驶方向上的前侧的第一图像捕获装置(例如，周围区域图像捕获单元11a)的图像被布置在来自比第一图像捕获装置在车辆行驶方向上更远离后方的图像捕获装置(例如，周围区域图像捕获单元11b)的图像之上(例如，图23(B))。这样的配置具有使驾驶员能够直观且即时地确定车身在可见屏幕上的前/后关系的优点。

此外，即使在屏幕较大并且垂直布置不可用的布局的情况下，安装到行驶方向前方的图像捕获单元的屏幕的后消失点也被布置在顶部。换句话说，当至少两个或更多个图像捕获装置附接在车辆外部并且相对于车辆行驶方向面向后方，并且设置有至少两个或更多个相邻布置的屏幕显示区域的显示单元包括在车辆的驾驶室中时，在待显示在屏幕显示区域中的捕获图像的显示内容中，将包括在来自安装在车辆行驶方向前侧的第一图像捕获装置的图像中的无穷远处的消失点布置在包括在来自比所述第一图像捕获装置在车辆行驶方向上更向后方安装的图像捕获装置的图像中的无穷远处的消失点之上。根据这样的配置，得到类似的有利效果。在这种情况下，期望在垂直方向上移动显示屏幕的至少20％或更多以更快速地区分差异。

图24示出了使用由周围区域图像捕获单元11a和周围区域图像捕获单元11b捕获的周围图像在显示单元50上显示的显示图像的另一示例。图24(A)示出了显示由周围区域图像捕获单元11a捕获的周围图像MGa的情况的示例。例如，图24(B)示出了如下情况的示例，在该情况中通过垂直布置显示由周围区域图像捕获单元11a捕获的周围图像MGa和由周围区域图像捕获单元11b捕获的周围图像MGb，并且设置使得驾驶员能够识别哪个周围区域图像捕获单元捕获每个周围图像的显示，诸如图形地示出驾驶室和拖车部分的图标显示HT。此外，例如，在图标显示HT上，设置指示捕获相邻显示的周围图像的周围区域图像捕获单元的照相机形状标记HC。以这种方式，通过将由设置在车辆前方的周围区域图像捕获单元11a捕获的显示图像布置在顶部，并且将由设置在车辆后方的周围区域图像捕获单元11b捕获的显示图像布置在底部，驾驶员变得能够容易地掌握所显示的周围图像和周围区域图像捕获单元之间的对应关系，并且变得能够参考显示图像并执行适当的驾驶操作。显示控制器20根据驾驶状况和驾驶员的意图在图24(A)所示的显示和图24(B)所示的显示之间切换。此外，也可以使用能够改变如图24(B)中的箭头所示的周围图像MGa和周围图像MGb之间的区域宽度(或***宽度)的配置。

此外，例如，在诸如正常行驶的情况下，仅显示由周围区域图像捕获单元11a捕获的周围图像，并且因此可以避免通过显示多个周围图像的布置的正面***区域的视野的障碍。

此外，周围区域图像捕获单元的切换和要显示的周围图像的控制根据车辆的驾驶状态改变显示内容，同时还使得能够基于驾驶员的意图进行适当的切换。因此，驾驶员能够直观且自然地掌握每个区域中的可见区域而不用仔细地观察屏幕。在诸如拖拉机拖车的牵引车辆的情况下，从人机工程学的角度来看，期望能够实现具有边界的瞬时每部分屏幕识别而不是在单个屏幕上的组合屏幕显示的显示，并且因此显示控制器20呈现人机工程学上合适的显示。

此外，例如，在诸如拖拉机拖车的拖曳车辆中盲点变得重要的状况是在小弯曲行驶期间，诸如当在具有两个或更多个车道的环形交叉口处将车道改变到外车道时，或者当在倒车的同时检查后方障碍物时。因此，通过结合车辆的驾驶状态进行反映驾驶员的屏幕操作的预期显示的屏幕转变显示，可以提高对盲点中的状况的掌握。在这种状况下，不是改变单个照相机的视野区域，而是在切换到拖车部分上的周围区域图像捕获单元11b的照相机之后切换或改变显示区域的操作是有效的。

此外，对于显示扩展，不限于经由反射镜单元55的方法的显示区域扩展功能是有效的。

注意，尽管第三实施例描述了切换模式的情况，但是第三实施例也可以与第二实施例的处理操作组合。

此外，尽管前述实施例描述了进行头部定向和视点识别的情况，但是触摸按钮控制、语音命令识别、非基于头部的姿势识别等也可以作为辅助***配置来进行。特别地，如下所述，当恢复正常状态，在学习期间校正指示内容识别的误检测时，以及当驾驶员在低速停车操作期间执行姿态的复杂变化时，结合(诸如通过按钮操作)给出直接指令的接口进行控制是有效。

<4.第四实施例>

当使用显示装置观察周围区域时，根据由法律确定的最小显示比例，在正常行驶期间确保固定的屏幕比例。换句话说，在驾驶时存在用于稳定状态头部定向的显示屏幕，并且当头部定向从稳定状态位置改变到不同位置时，经由人机接口接收显示改变指令，用于驾驶员将其视为非稳定状态的意图声明，并且进行屏幕显示改变。例如，在接收到指令(诸如将显示内容改变为较低比例的指令，或者改变到用于非稳定状态行驶(诸如当停车时)的特别视野的指令)之后进行屏幕显示改变。因此，第四实施例描述了与改变显示内容有关的人机接口的机制。

图25是示出驾驶员掌握周围区域的状况的情况下的操作示例的流程图。在步骤ST21中，驾驶员开始瞥视操作，并且行进到步骤ST22。在步骤ST22中，驾驶员用他或她的眼睛捕获反射镜单元，并且行进到步骤ST23。在步骤ST23中，驾驶员暂时停止或几乎停止他或她的头部，并且行进到步骤ST24。注意，“几乎停止”是指可以被解释为停止状态的小的头部动作的状态。

在步骤ST24中，驾驶员经由反射镜单元聚焦于图像，并且行进到步骤ST25。在步骤ST25中，驾驶员通过检查可见范围的图像来掌握周围区域的状况，并行进到步骤ST26。

在步骤ST26中，驾驶员判断是否改变可见范围。如果在步骤ST25中驾驶员已经通过观察监视图像区域中的图像掌握了周围区域的期望范围的状况，则驾驶员决定不改变可见范围，并且行进到步骤ST27。另一方面，如果驾驶员不能掌握周围区域的期望范围的状况，则驾驶员决定改变可见范围，并且行进到步骤ST28。

在步骤ST27中，驾驶员返回到前视状态。由于驾驶员能够掌握期望的周围区域的状况，因此驾驶员结束瞥视并将他或她的脸部指向前方，以使驾驶员能够向前看的状态结束处理。

如果处理从步骤ST26行进到步骤ST28，则驾驶员给出改变可见范围的指令。例如，驾驶员执行预定义动作，诸如重复移动他或她的躯干的动作，并且行进到步骤ST29。同时，在显示装置上，检测到驾驶员改变可见范围的指令，并且进行改变由监视图像区域中的图像显示的可见范围的处理。在可见范围的改变中，对驾驶员可见的周围区域的范围被移动或扩展。

在步骤ST29中，驾驶员通过检查具有改变的可见范围的图像来掌握周围区域的状况，并且行进到步骤ST30。

在步骤ST30中，驾驶员决定是否不需要回复到改变指令之前的状态。如果驾驶员想要检查从改变指令之前的可见范围，则驾驶员决定回复到改变指令之前的状态，并且行进到步骤ST31。另一方面，如果驾驶员决定不回复到改变指令之前的状态，则驾驶员行进到步骤ST32。

在步骤ST31中，驾驶员给出恢复可见范围的指令。例如，驾驶员执行预定义动作，诸如移回他或她的头部的动作，并且行进到步骤ST32。同时，在显示装置上，检测驾驶员恢复可见范围的指令，并且进行将由监视图像区域中的图像显示的可见范围回复到变化之前的范围的处理。

在步骤ST32中，驾驶员不注视反射镜单元达固定时间段，并且行进到步骤ST33。

在步骤ST33中，驾驶员返回到前视状态。驾驶员结束对周围区域的状况的掌握。换句话说，驾驶员结束瞥视并将他或她的面部指向前方，导致使驾驶员能够向前看的状态。

显示装置使用响应于驾驶员操作的这种人机接口，来基于来自驾驶员的显示改变指令改变周围区域的可见范围。注意，使用这种人机接口的显示装置不限于根据第一至第三实施例配置的显示装置，并且还可以应用于诸如当驾驶员直接观察显示单元50上的显示以掌握周围区域的状况的情况。

为了简单起见，图25所示的流程图描述了被执行直到返回向前看的一系列操作，其中处理简单地直接返回。在实际实践中，可以在返回向前看之前执行更复杂的操作，并且在返回向前看之前通过直接观察和观察显示单元重复检查的现象可以发生多次。然而，由于目的不是描述每个可能的现象，因此将省略除上述之外的示例的描述。

接下来，将类似于第一至第三实施例，针对驾驶员经由反射镜单元间接地观察显示单元上的图像的情况来描述根据第四实施例的配置和操作。

(4-1.第四实施例的配置)

图26是示出根据第四实施例的配置的示例的图。显示装置10装配有周围区域图像捕获单元11、驾驶员图像捕获单元12、驾驶员识别信息获取单元15、显示控制器20、显示单元50和反射镜单元55。此外，设置驾驶员、显示单元、反射镜单元和驾驶员图像捕获单元，如先前所述的图9所示。

周围区域图像捕获单元11捕获车辆周围的周围区域的图像，并且将图像信号输出到显示控制器20。这里，由周围区域图像捕获单元11捕获的区域将被指定为捕获的周围区域。

例如，驾驶员图像捕获单元12被设置在驾驶员DR的前面或者安装反射镜单元55的方向上，以使得能够确定诸如驾驶员DR的头部位置、头部定向和视线方向的属性。驾驶员图像捕获单元12捕获驾驶员DR的图像，并且将图像信号输出到显示控制器20。

驾驶员识别信息获取单元15获取驾驶员识别信息，并且输出到显示控制器20，所述驾驶员识别信息是驾驶员特有的识别信息。驾驶员识别信息获取单元15可以使用由驾驶员图像捕获单元12获得的驾驶员面部识别，使用分配给驾驶员所具有的车辆点火钥匙的识别信息，或者实施诸如使驾驶员经由按钮操作直接输入指令的各种方法等。

显示控制器20使显示单元50显示已经由周围区域图像捕获单元11捕获的周围区域的捕获图像。此外，显示控制器20基于诸如驾驶员的头部位置、头部定向和视线方向的属性，位置和定向的移动以及从驾驶员识别信息获取单元15提供的信息来确定在反射镜单元55的方向上的瞥视、移动要检查的区域的操作以及各种指令操作。此外，显示控制器20基于确定结果来控制待在显示单元50上显示的周围区域的捕获图像的显示。例如，当驾驶员在反射镜单元的方向上瞥视时，显示控制器20在显示单元50上显示周围区域的捕获图像。此外，例如，在确定检测到瞥视之后驾驶员已经执行了预定义动作的情况下，显示控制器20扩展可见范围的区域。

显示单元50被布置为使得显示单元50的显示面经由反射镜单元55对驾驶员间接可见。此外，显示单元50的显示面被配置为大于反射镜单元55的尺寸，使得即使驾驶员DR在驾驶时移动他或她的头部位置以利用后视镜检查宽范围内的区域，显示单元50的显示图像经由反射镜单元55也是可见的。注意，在显示单元50的显示图像中，与驾驶员经由反射镜单元55检查的图像区域的可见范围相对应的区域将被称为监视图像区域。

反射镜单元55被设置成使得显示单元50的显示面对于驾驶员DR是间接可见的。例如，反射镜单元55被放置在车辆内部，使得当驾驶员DR执行察看过去的后视镜的操作时，在反射镜单元55中反射的图像是可见的。此外，反射镜单元55与显示单元50的位置关系以及反射镜单元55的尺寸被配置为使得当驾驶员DR经由反射镜单元55间接地观察周围区域的捕获图像时，在反射镜单元55中反射显示单元50的整个显示区域。此外，在显示单元50和反射镜单元55中，从在反射镜单元55中反射的显示单元50的图像对驾驶员可见的周围区域的可见范围由显示控制器20的显示控制根据驾驶员的观察位置相对于反射镜单元55的移动来改变。注意，反射镜单元55的尺寸优选地被配置为使得描绘该可见范围的区域的尺寸类似于过去的后视镜的尺寸，使得获得类似于过去的后视镜的操作优点。

对于显示装置10，为了使周围区域的捕获图像经由反射镜单元55对驾驶员DR间接可见，从驾驶员DR到显示单元50的显示面的距离与驾驶员DR直接观察显示单元50上的显示面的情况相比增加。

此外，在显示装置10中，由于周围区域的捕获图像经由反射镜单元55对驾驶员DR间接可见，因此显示单元50被布置成使得显示面和来自显示面的照明光对驾驶员DR不可见。此外，还可以使用设置有阻挡显示单元50的显示面和来自驾驶员DR的照明光的遮挡件的配置。

图27是示出显示控制器的配置的图。显示控制器20装配有识别单元23、瞥视确定单元24、指令操作确定单元25、驾驶员认证单元26、控制处理器35、显示调节器41和亮度调节器42。

识别单元23基于从驾驶员图像捕获单元12提供的图像信号进行面部识别。此外，识别单元23识别所识别的头部的定向或所识别的面部中的视线方向，并且将识别结果输出到瞥视确定单元24。

瞥视确定单元24包括瞥视确定处理器241、瞥视确定学习单元242和确定参考值存储单元243。

瞥视确定处理器241将来自识别单元23的识别结果与从瞥视确定学习单元242提供的瞥视确定参考值进行比较，确定驾驶员是否面向反射镜单元55的方向，并将确定结果输出到指令操作确定单元25和控制处理器35。

瞥视确定学***的操作更精确地实现指令操作的确认。例如，期望给驾驶员DR的反馈不是数字0/1、真或假确定，而是通过通知单元模拟地反馈指示驾驶员动作的确定程度的状态。

确定参考值存储单元243存储用于瞥视确定的瞥视确定参考值。此外，当进行驾驶员认证时，确定参考值存储单元243存储针对每个驾驶员的瞥视确定参考值。根据来自瞥视确定学习单元242的学习结果更新存储在确定参考值存储单元243中的瞥视确定参考值。

指令操作确定单元25包括指令操作确定处理器251、指令操作确定学习单元252和确定参考值存储单元253。

指令操作确定处理器251使用来自识别单元23的识别结果、来自瞥视确定单元24的瞥视确定结果和从指令操作确定学习单元252提供的确定参考值来确定驾驶员是否执行了预定操作，并输出到控制处理器35。例如，指令操作确定处理器251基于驾驶员头部的两个或更多个加速或减速操作的组合的检测结果，从驾驶员的动作确定由驾驶员的指令。

指令操作确定学习单元252从确定参考值存储单元253中读出指令操作确定参考值，并输出到指令操作确定处理器251。此外，当从控制处理器35报告驾驶员时，指令操作确定学习单元252从确定参考值存储单元253中读出与所报告的驾驶员相对应的指令操作确定参考值，并输出到指令操作确定处理器251。此外，指令操作确定学习单元252基于头部定向和视线方向的识别结果来更新指令操作确定参考值，由此使指令操作确定处理器251能够进行精确的指令操作确定。指令操作确定学习单元252将更新的指令操作确定参考值输出到确定参考值存储单元253，并更新存储在确定参考值存储单元253中的指令操作确定参考值。注意，如果对应于所报告的驾驶员的指令操作确定参考值不被存储在确定参考值存储单元253中，则指令操作确定学习单元252将预配置指令操作确定参考值输出到指令操作确定处理器251。此外，指令操作确定学习单元252使随后更新的指令操作确定参考值与驾驶员信息相关联地存储在确定参考值存储单元253中。

确定参考值存储单元253存储用于指令操作确定的指令操作确定参考值。此外，当进行驾驶员认证时，确定参考值存储单元253存储针对每个驾驶员的指令操作确定参考值。根据来自指令操作确定学习单元252的学习结果来更新存储在确定参考值存储单元253中的指令操作确定参考值。

例如，在这一点上，可以提供一种功能，使得如果用姿势执行的操作在指令操作确定学习单元252中产生了非预期的确定结果并且导致不正确的操作，则可以(诸如通过按钮操作或语音操作)以姿势检测以外的反馈格式进行排除类别等的指定。

驾驶员认证单元26基于由驾驶员识别信息获取单元15获取的驾驶员特有的识别信息来确定车辆的当前驾驶员，并将确定结果输出到控制处理器35。

控制处理器35基于来自驾驶员认证单元26的确定结果确定车辆的驾驶员，并且将所确定的驾驶员报告给瞥视确定学习单元242和指令操作确定学习单元252。此外，控制处理器35基于来自瞥视确定单元24和指令操作确定单元25的确定结果，生成针对显示单元50的监视图像区域和非监视图像区域不同地控制显示的控制信号。控制处理器35将所生成的控制信号输出到显示调节器41和亮度调节器42。

显示调节器41基于来自控制处理器35的控制信号，关于从周围区域图像捕获单元11提供的图像信号进行周围区域的捕获图像的比例调整、改变或组合周围区域的图像等。

亮度调节器42基于来自控制处理器35的控制信号，将显示单元50上的非监视图像区域的亮度降低到小于监视图像区域。例如，如果显示单元50使用可能需要照明的显示元件(诸如液晶元件)来配置，则例如亮度调节器42控制诸如背光的照明，以将非监视图像区域的亮度降低到小于监视图像区域。同时，例如，如果显示单元50使用不需要照明的显示元件或使用发光元件(诸如有机EL显示元件)来配置，则可以进行处理以降低对应于非监视图像区域的亮度信号的信号电平。

根据上述配置，作为检测预先预测的驾驶员操作的序列，迅速进行开始观察显示单元的状态的检测。

通过普通驾驶员的人体工程学操作的步骤预期如下。当动物经由视觉感知来掌握外部世界时，眼睛移动掌握方向并最快地改变方向，并且当在仅在眼睛移动的旋转范围之外的范围中存在期望的对象时，颈部和头部的姿态额外地改变以跟踪对象并补偿不足的范围。

结果，在驾驶员向前看并且将他或她的视线聚焦在沿着明显不同的方向安装的反射镜单元的安装方向的一系列步骤中，驾驶员掌握在其上反射镜单元中的图像是可见的近似方向，并开始眼睛旋转和颈部旋转。在驾驶员将反射镜单元带到视线中之后，随着颈部转动，眼睛旋转与视线方向对准，以抵消颈部旋转，并且在视线变得与反射镜单元对准时，颈部转动动作也停止并变得大致静止。随着时间连续地分析作为该一系列操作的特征的头部旋转状态，以了解从动作加速和减速的状态到开始观察反射镜单元的状态的变化。通过以这种方式进行学***的操作更精确地实现指令操作的确认。例如，期望给驾驶员DR的反馈不是数字0/1、真或假确定，而是通过通知单元模拟地反馈指示驾驶员动作的确定程度的状态。然而，由于太多的反馈的显示也可能阻碍视野，并且如果这样的显示在学习驾驶员特有的特性之后变得不需要，则显示功能也可能停止，并且显示可能不被始终显示。

此外，当驾驶是普通高速向前行驶时，具有很少的身体动作并且窄范围成为目标视野范围，而在低速停车期间，驾驶员进行大的头部和身体移动作为掌握整个环境的工作的一部分。为此，期望用于检测每个指令的确定参考在高速和低速之间不同。因此，通过使模式改变确定执行车辆的驾驶状态的相关性确定，提高了可操作性。

(4-2.第四实施例的操作)

图28是示出显示控制器的操作的流程图。在步骤ST41中，显示控制器20获取确定参考值。显示控制器20获取用于确定瞥视操作的确定参考值、改变可见范围的指令以及恢复可见范围的指令。此外，可以为每个驾驶员提供确定参考值，并且还可以获取与当前驾驶员相对应的确定参考值。此外，可以根据驾驶员操作更新确定参考值，并且还可以获取最新的确定参考值。显示控制器20获取确定参考值，并且行进到步骤ST42。

在步骤ST42中，显示控制器20开始观察头部定向。显示控制器20使用从驾驶员图像捕获单元12提供的图像信号来进行面部识别，开始确定驾驶员的面部的处理和检测所确定的头部的定向的处理，并且行进到步骤ST43。

在步骤ST43中，显示控制器20确定稳定状态期间的面部的位置和定向。显示控制器20基于面部定向(头部定向)的观察结果来确定稳定状态期间的面部的位置和定向。当在稳定状态期间的面部位置或定向从先前确定改变时，显示控制器20根据改变的量来计算校正值。此外，如果不存在与驾驶员对应的信息，则将与默认值的差作为校正值。显示控制器20计算校正值，并且行进到步骤ST44。

在步骤ST44中，显示控制部20配置瞥视确定参考值。显示控制器20使用确定参考值和计算的校正值来配置瞥视确定参考值，并且行进到步骤ST45。

在步骤ST45中，显示控制器20开始瞥视确定。显示控制器20使用头部定向的观察结果和瞥视确定参考值开始确定驾驶员的瞥视操作的处理，并且行进到步骤ST46。

在步骤ST46中，显示控制器20跟踪脸部位置和定向。显示控制器20基于面部位置和定向的观察结果跟踪面部位置和定向，并且行进到步骤ST47。

在步骤ST47中，显示控制器20确定面部位置或定向是否发生改变。在确定面部位置或定向没有改变的情况下，显示控制器20返回到步骤ST46，并且在确定已经发生改变的情况下，显示控制器20行进到步骤ST48。

在步骤ST48中，显示控制器20确定反射镜单元注视状态是否存在。显示控制器20使用面部位置和定向以及确定参考值来确定驾驶员是否处于注视着反射镜单元的状态。显示控制器20在确定注视状态的情况下行进到步骤ST49，并且在确定没有注视状态的情况下返回到步骤ST46。注意，这里的注视状态是指存在作为生理操作眼睛聚焦并且继续掌握该情况的时刻的点，并且不限于驾驶员正在专心地观察反射镜单元中的图像的状态。

在步骤ST49中，显示控制器20切换到高速检测模式。显示控制器20进行面部位置和定向的高速观察，以便精确地检测由驾驶员改变可见范围的指令和恢复可见范围的指令，从而使得能够检测驾驶员的微小动作。例如，在高速检测模式的情况下，显示控制器20以100ms或以下的频率周期性地进行驾驶员的面部位置和定向的观察。注意，瞥视检测是在普通检测模式下进行的，其中在比高速检测模式更宽的间隔内周期性地进行对驾驶员的面部位置和定向的观察。显示控制器20切换到高速检测模式，并且行进到步骤ST50。

在步骤ST50中，显示控制器20开始指示检测。显示控制器20使用面部位置和定向的观察结果以及确定参考值开始检测改变可见范围的指令和恢复可见范围的指令，并且行进到步骤ST51。

在步骤ST51中，显示控制器20确定是否检测到指令。如果通过指令检测检测到指示改变可见范围的指令或恢复可见范围的指令的驾驶员动作，则显示控制器20行进到步骤ST52。同时，如果没有检测到指令，则显示控制器20行进到步骤ST53。

在步骤ST52中，显示控制器20根据指令来控制显示。例如，如果检测到改变可见范围的指令，则显示控制器20根据面部位置和定向的改变来改变由监视图像区域中的图像显示的可见范围。此外，例如，如果检测到恢复可见范围的指令，则显示控制器20将由监视图像区域中的图像显示的可见范围回复到改变之前的区域。显示控制器20以这种方式控制显示，并返回到步骤ST50。

在步骤ST53中，显示控制器20确定头部定向是否在与反射镜单元方向不同的方向上。显示控制器20使用头部定向的观察结果和确定参考值来确定头部定向是否在与图像观察方向不同的方向上。如果头部定向被确定为在与图像观察方向不同的方向上，则显示控制器20从高速检测模式切换到普通检测模式，并且返回到步骤ST47。同时，如果头部定向被确定为在反射镜单元的方向上，则显示控制器20行进到步骤ST54。

在步骤ST54中，显示控制器20确定时间是否在预定确定时间段内。如果时间在预定确定时段内，则显示控制器20返回到步骤ST50，而如果经过了预定确定时间段，则显示控制器20将高速检测模式切换到普通检测模式，并返回到步骤ST47。

图29是示出瞥视操作和改变可见范围的指令的示例的图。此外，图30是示出瞥视确定操作和改变可见范围的指令的确定的示例的图。注意，图30(A)示出了瞥视方向(角度)和时间之间的关系的示例，而图30(B)示出了瞥视速度和时间之间的关系的示例。

在图29中，方向PF1表示驾驶员头部正常面向的前方向，而方向PF2表示当驾驶员观察反射镜单元55中的图像时的头部定向的示例。方向PF3表示反射镜单元55的方向。

范围FS1表示正常的驾驶员头部定向的移动范围的示例，而范围FSa表示通过驾驶员的眼睛移动的搜索范围的示例。范围FS2是当头部定向从方向PF1向方向PF2移动时的头部旋转加速区，以及当头部定向从方向PF2移动到方向PF1时的头部旋转减速区。范围FS3是当头部定向从方向PF1向方向PF2移动时的头部旋转加速区，以及当头部定向从方向PF2移动到方向PF1时的头部旋转加速区。角度FVa示出了当驾驶员观察反射镜单元55中的图像时头部的瞥视角度的示例。角度FVb示出了当驾驶员观察反射镜单元55中的图像时由眼睛移动覆盖的瞥视角度的示例。范围FSc示出了当驾驶员观察反射镜单元55中的图像时通过眼睛移动的搜索范围的示例。

在图30(A)中，范围JA是被解释为驾驶员面向前方的瞥视角度的范围。范围JB是当驾驶员沿方向PF2旋转他或她的头部时被解释为驾驶员注视反射镜单元55的瞥视角度的范围。范围JC是被解释为通过眼睛移动注视反射镜单元55的瞥视角度的范围。曲线QCa表示头部定向，而曲线QCb表示基于头部定向和眼睛移动的视线方向。此外，在图30(B)中，范围JE是向前瞥视期间的确定范围。

显示控制器20检测到瞥视速度(对应于头部定向的变化)超过由确定参考值所指示的范围JE并返回到范围JE内，而瞥视方向(角度)在由确定参考值指示的瞥视方向的范围JB(参考反射镜方向配置的范围)内。在这种情况下，显示控制器20估计驾驶员已经瞥视并正注视着反射镜单元55的方向，并且确定进行了瞥视操作。注意，如果基于头部定向和眼睛移动进行了眼睛移动检测并且估计了视线方向，则可以通过将估计的视线方向与范围JC进行比较来更精确地确定瞥视操作。在确定进行了瞥视操作的情况下，显示控制器20改变到高速检测模式，以使得能够以高时间分辨率检测改变可见范围的指令。

注意，在驾驶员侧和乘客侧的后视监视***中，预期显示单元50和反射镜单元55的位置和方向可以不同，并且指令操作确定、瞥视角度确定等可以全部不同。为此，期望单独地配置确定的基础。

例如，显示控制器20将用于确定瞥视方向(角度)是否处于注视状态的范围JB与瞥视方向(角度)进行比较，并且检测到在预定方向上瞥视方向(角度)超过范围JB预定次数，诸如两次。这里，在时间tj处检测到驾驶员头部的两个或更多个加速/减速操作的组合的情况下，如图30(A)所示，或者换句话说，在确定瞥视方向(角度)超过范围JB两次的情况下，显示控制器20估计驾驶员正在相对于反射镜单元的注视状态中执行指令，并且确定进行了改变可见范围的指令。之后，显示控制器20根据改变可见范围的指令控制显示以改变可见范围。

注意，显示控制器20检测到头部定向在由确定参考值指示的范围JA内。在这种情况下，显示控制器20确定驾驶员将定向从反射镜单元方向向向前方向改变，并返回到瞥视操作确定之前的状态。

此外，用于执行改变可见范围的指令的操作指令量也可以依据驾驶状态而不同。通常，驾驶员习惯了在诸如停车的低速驾驶操作期间利用他或她的头部和身体进行大的动作。另一方面，在高速行驶期间，头部根本上几乎没有移动，并且眼睛移动支配主视线移动。为此，优选地提供利用较少头部移动进行确定的基础。此外，尽管图30示出了两个或更多个重复移动的示例，但驾驶员的头部操作也可以是一系列没有大量反向动作的单向，两阶段加速动作。

图31示出了使用头旋转操作的加速作为操作指令量的情况的示例。图31(A)示出了瞥视方向(角度)，而图31(B)示出了瞥视速度，并且图31(C)示出了瞥视加速。

当驾驶员多次执行瞥视时，瞥视的反向操作和下一瞥视的反向操作可能不会在相同的开始位置严格地对准。例如，可以在上一瞥视的反向操作返回到原始位置之前进行下一瞥视操作。在这种情况下，指示头部定向的曲线QCa如图31(A)所示变化。因此，可能难以基于瞥视方向(角度)确定改变可见范围的指令。然而，如果重复瞥视的反向操作，则瞥视加速变为每次瞥视操作产生一个振荡周期的波形，如图31(C)所示。因此，显示控制器20可以利用瞥视加速来精确地检测瞥视的重复。

此外，显示控制器20学习驾驶员的瞥视速度和瞥视方向的操作特征历史，并且根据该驾驶员特有的特征来改变针对每个驾驶员的确定参考值。通过以这种方式更新确定参考值，提供了自学习功能，其提高了确定瞥视操作或改变可见范围的指令的精度，并且此外使得能够以更少的指令操作进行精确的指令检测。此外，利用学习功能，包括操作指令量的操作特征是自学习的，以产生对于驾驶员的特征优化的工作。

通过进行这样的处理，能够进行与当驾驶员掌握周围区域的状况时执行的操作相对应的精确显示控制。

此外，在已经过用以稳定瞥视操作的时间之后进行头部定向的移动的检测。在这样做时，例如，当在与头部定向正交的方向上的头部移动重复两次或更多次时，或者当围绕颈部的轴旋转面部的定向的面部转动操作重复两次或更多次时，确定已经进行了改变可见范围的指令或恢复可见范围的指令。因此，可以更精确地进行指令的确定。

当在人最终开始视觉注意的同时通过眼睛移动快速掌握目标对象并且眼睛开始聚焦时，本技术基于当人在与主要关注的视线方向不同的方向上瞥视时的人体工程学过程，考虑用以稳定头部移动的动作。换句话说，在驾驶员视觉地感知显示内容并开始掌握情况的时刻，头部位置的移动稳定并停止。驾驶员此外通过感知屏幕来判断是否改变可见范围，从而反映指令操作在经历稳定过程之后被进行。

此外，在显示控制中，显示控制器20响应于检测到驾驶员的头部定向已经在反射镜单元的方向上移动来控制显示。例如，如果头部定向不在反射镜单元的方向上，则背光被关闭或者亮度信号的信号电平被降低，使得图像不可见或不太可见。同时，如果头部定向在反射镜单元的方向上，则背光被打开，并且调节亮度控制或亮度信号的信号电平，以使得驾驶员能够检查可见范围的图像。因此，当驾驶员面向前方时，可以避免显示周围区域的不必要地明亮的图像。此外，仅当驾驶员面向反射镜单元的方向时，可以显示周围区域的图像。

此外，在改变可见范围之后，显示控制器20还可以逐渐地并且自动地将可见范围回复到原始位置。在这种情况下，驾驶员不需要执行将可见范围回复到原始范围的操作。此外，为了避免驾驶员暂时变得不能检查情况的状态，显示控制器20控制显示，使得显示比例的改变和显示格式的改变不突然发生。

为了方便起见，本说明书中的描述描述了识别头部方向和视线并检测指令的过程的实际示例。然而，由于实际目的不是准确地计算特定的头部方向和视线，因此足以获得与观察显示单元50的驾驶员的状态的相关性，并且显示控制器20的作用不一定需要提供使得能够识别视线或准确地掌握头部定向的功能。为此，显示控制器20不限于图27的配置，并且可以被不同地配置，只要显示器响应于车辆状态和驾驶员的操作指令姿势。

<5.其它实施例>

此外，作为另一实施例，当在显示单元50上显示图像时，如果图像出于显示而被压缩，则存在从显示图像感知的视距与到包括在周围地区中的被摄体的距离显著不同的风险。因此，根据图像压缩的程度，也可以在显示单元的屏幕上或边界上设置警告显示。

图32示出了在呈现警告显示的情况下的显示控制器的配置的示例。显示控制器20装配有驾驶员移动确定单元21、控制处理器35、显示调节器41、亮度调节器42和警告显示叠加单元43。

驾驶员移动确定单元21基于从驾驶员图像捕获单元12提供的图像信号，检测驾驶员的头部位置，并且确定驾驶员的头部位置的移动方向和移动量。例如，驾驶员移动确定单元21例如基于从驾驶员图像捕获单元12提供的图像信号进行驾驶员的面部识别，并且确定所识别的面部的位置、面部的定向或头部的定向。此外，驾驶员移动确定单元21跟踪所识别的面部，并且确定头部位置的移动方向和移动量。驾驶员移动确定单元21将确定结果输出到控制处理器35。

控制处理器35基于来自驾驶员移动确定单元21的确定结果，生成控制信号，以针对显示单元50的监视图像区域和非监视图像区域不同地控制显示，并且输出到显示调节器41、亮度调节器42和警告显示叠加单元43。

显示调节器41基于来自控制处理器35的控制信号，关于从周围区域图像捕获单元11提供的图像信号进行周围区域的捕获图像的比例调整、改变或组合周围区域的图像等。

亮度调节器42基于来自控制处理器35的控制信号，将显示单元50上的非监视图像区域的亮度降低到小于监视图像区域。例如，如果显示单元50使用可能需要照明的显示元件(诸如液晶元件)来配置，则例如亮度调节器42控制诸如背光的照明，以将非监视图像区域的亮度降低到小于监视图像区域。同时，例如，如果显示单元50使用不需要照明的显示元件或使用发光元件(诸如有机EL显示元件)来配置，则可以进行处理以降低对应于非监视图像区域的亮度信号的信号电平。

例如，警告显示叠加单元43基于来自控制处理器35的控制信号，使表示图像压缩程度的信息叠加到显示可变处理之后的图像上。例如，显示可见范围的图像以匹配面部的左右动作，通过两次或更多次头部或面部的重复操作来扩大可见范围，并且通过相反方向上的操作来恢复放大之前的显示。此外，当显示具有改变的比例的图像时，提供动态警告显示以警告显示具有改变的比例。为了直观地理解警告内容，动态警告显示根据改变比例的操作来调整框尺寸，从而根据比例的改变来显示其中斑纹条纹流动的斑纹条纹框。关于斑纹显示的流动，当考虑人体生理机制时，期望包括在接近方向上的动作，因为人类对接近的对象敏感，当移动对象从视线外进入视野时，接近的对象被感知为威胁。

通过以这种方式控制显示，当图像出于显示被压缩时，可以避免驾驶员的距离感的损失等。例如，能够避免由于图像被压缩导致的将接近的被摄体误识别为处于远处位置的被摄体。

此外，显示控制器20还可以结合导航***来控制显示，并且当在高速公路上合流或在环形交叉口中行驶时，显示比普通后视视野具有更广的视角的图像。

此外，例如，驾驶员动作的确定不限于使用头部定向的移动，或者换句话说，围绕颈部的轴的头部旋转，并且还可以通过使用头部倾斜操作(点头)或在驾驶员上身的前、后、左或右方向上的移动中的至少一个来控制显示。此外，移动头部的操作或沿反射镜单元的方向的姿势变化也可以用来对显示图像进行放大或缩小操作。

图33至图35示出了基于其它驾驶员动作的显示控制的示例。图33示出周围图像捕获单元和显示在显示单元上的周围图像的放置的示例。如图33(A)所示，周围区域图像捕获单元11c和11d被设置在车辆的侧面，而周围区域图像捕获单元11e被设置在车辆的后面。如图33(B)所示，显示控制器20在显示单元50上显示由周围区域图像捕获单元11c、11d和11e捕获的三个周围区域的图像。

图34是用于说明当头部在前后方向上移动时的周围区域图像的变化的图。如图34(A)所示，在进行头部移动之前，显示控制器在显示单元50上显示由周围区域图像捕获单元11c、11d和11e捕获的三个周围区域的图像。此外，例如，在确定在向前方向上的头部移动的情况下，如图34(B)所示，显示控制器改变为如下图像，在所述图像中显示由设置在车辆侧面的周围区域图像捕获单元11c和11d捕获的周围区域的图像的显示区域被在前进方向上扩展。之后，当头部移回原始位置时，显示控制器控制显示回复到改变之前的图像。

图35是用于说明当头部向左方向移动时的周围区域图像的变化的图。如图35(A)所示，在进行头部移动之前，显示控制器在显示单元50上显示由周围区域图像捕获单元11c、11d和11e捕获的三个周围区域的图像。此外，例如，在确定在向左方向上的头部移动的情况下，如图35(B)所示，显示控制器改变为具有显示左侧周围区域的图像的扩展显示区域的图像。之后，当头部移回原始位置时，显示控制器控制显示回复到改变之前的图像。

以这种方式，通过不仅使用头部定向的移动而且通过使用诸如头部倾斜操作的因素来控制显示，可以以各种格式显示周围区域的图像。

此外，尽管前述实施例描述了通过基于驾驶员动作确定结果控制显示来改变可见范围的情况，但也可以基于驾驶员动作确定结果来改变反射镜单元的定向，从而在所述反射镜单元中描绘显示单元上的显示图像的期望可见范围的图像。

此外，例如，作为使用半透镜的配置，反射镜单元还可以在反射镜单元后面设置有显示装置，诸如液晶显示元件、有机EL显示元件或使用发光二极管的显示元件。在这种情况下，在反射镜单元中，可以与显示在后显示装置上的图像同时观察显示在显示单元上的周围区域的图像。因此，如果在后显示装置上显示各种信息，则驾驶员将能够读取信息，同时还检查周围区域。用后显示装置显示的信息可以是与显示在显示单元上的周围区域的图像有关的信息(例如，来自驾驶员的确定的指令或确定的可见范围的模式)或与驾驶状况等有关的信息(诸如导航指令信息)。

此外，反射镜单元可以被配置为使得半透镜包括半透射光调光功能，或者使得调节透射光量的调光装置额外设置在半透镜后面。根据这种配置，能够使用半透射光调光功能或调光装置来调整设置在反射镜单元后面的显示装置上的显示图像的可见性。因此，可以显示信息，使得驾驶员能够容易地读取各种信息，同时还检查周围区域。

此外，前述实施例示出了实现与后视镜对应的功能的情况的示例。然而，由于不仅使用外后视镜而且还使用内后视镜进行周围区域的观察，因此还可以实现对应于内后视镜的功能。接下来，将描述实现与内后视镜对应的功能的情况作为另一实施例。注意在这种情况下，例如，显示单元、反射镜单元等不严格限于与过去的反射镜对应的布置，并且还可以布置在诸如仪表盘上的仪表板或控制面板附近的位置。

首先，将描述使用单个周围区域图像捕获单元来实现与内后视镜对应的功能的情况。图36示出了在使用单个周围区域图像捕获单元实现与内后视镜对应的功能的情况下的配置的示例。例如，如图36(A)所示，在车辆后方设置单个周围区域图像捕获单元以捕获车辆后方的图像，使得驾驶员DR能够检查由周围区域图像捕获单元11捕获的周围区域的图像。注意在图36(A)中，省略了显示周围区域的图像的显示单元。

此外，即使驾驶员DR观察到由周围区域图像捕获单元11捕获的周围区域，驾驶员DR也能够保持类似于在内后视镜61中反射的周围区域的距离感。例如，由周围区域图像捕获单元11捕获的区域ARu(由周围区域图像捕获单元11捕获的周围图像的水平视角)近似等于在内后视镜61中反射的周围区域的水平视野区域ARrm。在这样做时，单个周围区域图像捕获单元可以用于实现与内后视镜对应的功能。

同时，例如，如果跟随的汽车OBc或人OBp被如图36(A)所示定位，则在内后视镜61中反射的周围图像是图36(A)中的视野区域ARrm的图像，并且因此成为图36所示的图像。此外，例如，由周围区域图像捕获单元11捕获的周围区域是图36(A)中的周围区域ARu，并且因此成为图36(C)所示的图像。换句话说，在由周围区域图像捕获单元11捕获的周围区域的图像中，与在内后视镜61中反射的周围图像相比，车辆附近的盲点的区域大，并且因此驾驶员可能不能检查人OBp，如图36(C)所示。

因此，如图37所示，多个周围区域图像捕获单元用于实现与内后视镜对应的功能。例如，如果周围区域图像捕获单元11g被设置在车辆的左侧，而周围区域图像捕获单元11h被设置在车辆的右侧，并且每个周围区域图像捕获单元11捕获后部的图像以实现对应于内后视镜的功能，与图36的情况相比，盲点减少。注意，区域ARrm是在内后视镜61中反射的周围图像的水平视野区域，而区域ARug是由左侧上的周围区域图像捕获单元11g捕获的周围图像的水平视野区域，并且区域ARuh是由右侧上的周围区域图像捕获单元11h捕获的周围图像的水平视野区域。在这样做时，当周围区域图像捕获单元用于实现与内后视镜对应的功能时，通过组合由周围区域图像捕获单元11g和周围区域图像捕获单元11h捕获的周围区域的图像，能够避免车辆附近更大的盲点区域。

此外，由于在由周围区域图像捕获单元11g和周围区域图像捕获单元11h捕获的周围区域的图像之间出现视差，所以难以消除组合和显示周围图像的视差差异。因此，对于组合周围区域的图像，使得图像组合处理被人体工程学和容易地进行，使得视差差异不明显。

图38示出了与内后视镜相比减少盲点的情况下的配置的示例。周围区域图像捕获单元11j被设置在车辆的左侧，而周围区域图像捕获单元11k被设置在车辆的右侧。在周围区域图像捕获单元11j中，所捕获的周围图像的水平视野区域(视角)被配置为包括在内后视镜61中反射的周围图像的水平视野区域ARrm中包括的区域ARuj1，以及视野区域ARrm的左外侧的区域ARuj2。在周围区域图像捕获单元11k中，所捕获的周围图像的水平视野区域(视角)被配置为包括在内后视镜61中反射的周围图像的水平视野区域ARrm中包括的区域ARuk1，以及视野区域ARrm的外右侧的区域ARuk2。此外，关于车辆的后方位置，视野区域ARrm被引导包括在区域ARuj1和区域ARuk1中的至少一个中。

先前讨论的显示控制器20的显示调节器41基于来自控制处理器35的控制信号，修剪并接合来自由周围区域图像捕获单元11j和11k捕获的周围图像的图像。控制处理器35控制图像修剪，使得周围区域在接合的图像中是连续的。此外，控制处理器35基于驾驶员移动确定单元21的确定结果，根据来自驾驶员的指令来移动图像修剪位置和接合位置。

例如，控制处理器35通过将来自由周围区域图像捕获单元11j捕获的周围图像的区域ARmj和来自由周围区域图像捕获单元11k捕获的周围图像的区域ARmk的图像相结合，使得驾驶员能够检查包括区域ARrm的周围区域，如图38(B)所示。此外，由于可以通过简单地接合区域ARmj的图像和区域ARmk的图像来生成用于检查周围区域的图像，而不进行消除组合和显示图像的视差差异的处理，因此可以容易地生成用于检查周围区域的图像。

此外，对于图像接合，在参考图像接合位置预定的范围上进行混合处理，并且由周围区域图像捕获单元11j捕获的周围图像与由周围区域图像捕获单元11k捕获的周围图像的混合比连续变化。通过进行这样的处理，接合部可能变得不明显。

此外，例如，当基于来自驾驶员移动确定单元21的确定结果改变图像修剪位置，并且驾驶员DR的位置向左或向右移动时，控制处理器35移动该图像的区域以与在内后视镜61中反射的周围区域的移动类似地进行修剪。在这样做时，即使驾驶员动作发生，也可以实现与内后视镜对应的功能。

同时，对于由周围区域图像捕获单元11j捕获的周围图像和由周围区域图像捕获单元11k捕获的周围图像的接合，由于右视点的图像和左视点的图像被接合，因此当后方车辆或人处于接合位置时，存在车辆、人等的图像可能变为看起来不自然的图像的风险。特别是，如果车辆、人等接近，则图像的不自然由于视差大而在接合部变得显著。因此，控制处理器35能够基于来自驾驶员移动确定单元21的确定结果，根据来自驾驶员的指令改变接合位置。

图39是用于说明图像接合位置的改变的图。如图39(A)所示，当由周围区域图像捕获单元11j捕获的周围图像和由周围区域图像捕获单元11k捕获的周围图像的接合位置是位置Pb1时，由于位置Pb1不包括在跟随的车OBc或人OBp的图像区域中，因此可以容易地利用显示周围图像来检查跟随的车OBc或人OBp。然而，如果接合位置固定在位置Pb1，并且人OBp的图像区域变为位置Pb1，如图39(B)所示，人OBp的图像变为左视点图像和右视点图像的接合图像，并且存在人OBp可能变得难以正确区分的风险。因此，控制处理器35根据来自驾驶员的指令改变接合位置。例如，在确定将接合位置向左移动的驾驶员指令的情况下，接合位置向左移动，如图39(C)所示。如果以这种方式移动接合位置，则仅通过由周围区域图像捕获单元11k捕获的周围图像来显示人OBp，并且因此变得能够容易且正确地区分人OBp。

此外，如果控制处理器35被配置为呈现指示接合位置的显示(例如，诸如标记的显示)，则驾驶员能够容易地掌握接合位置和跟随的车辆、人等之间的位置关系。为此，驾驶员变得能够容易地确定是否移动接合位置，并且确定移动接合位置的优选方向。注意，接合位置的默认位置可以自动设置为预配置位置或用户配置位置，并且也可以是当前一驾驶结束时配置的位置。

此外，例如，响应于上面讨论的驾驶员操作，使用人机接口从驾驶员执行的操作指令姿势中检测来自驾驶员的指令。这样做时，驾驶员变得能够容易地通过简单地移动他或她的头部或视线来沿期望的方向移动接合位置。

此外，在说明书中说明的处理序列可以通过硬件、软件和组合硬件和软件的配置来实现。在通过软件实现处理的情况下，能够在并入专用硬件的计算机内的存储器中安装编码处理序列的程序并执行该程序。也能够在通用计算机中安装能够执行各种类型的处理的程序并执行程序。

例如，程序可以被记录在被内置在信号处理半导体装置中或者被预先作为记录介质单独设置的硬盘、SSD(固态驱动器)或只读存储器(ROM)上。可选择地，程序可以临时或永久地存储(记录)在诸如软盘、CD-ROM(光盘只读存储器)、MO(磁光)盘、DVD(数字通用盘)、BD(蓝光光盘(Blu-Ray Disc)(注册商标))、磁盘或半导体存储卡的可移除记录介质中(上)。这种可移除记录介质可以被设置为所谓的封装软件。

此外，程序不仅可以从可移除记录介质安装在计算机上，而且还可以通过自诊断功能或机载诊断(OBD)终端无线或有线地经由诸如LAN(局域网)或因特网的网络从下载站传送到计算机。在这种计算机中，以上述方式传送的程序可以在诸如内置硬件的记录介质上被接收和安装或更新。

本领域技术人员应当理解，依据设计要求和其它因素，可以进行各种修改、组合、子组合和替换，只要它们在随附权利要求或其等同物的范围内。

此外，根据本技术的实施例的车辆显示装置还可以被配置如下。

(1)

一种车辆显示装置，包括：

显示单元，安装在车辆的驾驶室中并且具有沿与驾驶员的方向不同的方向定向的显示面，被配置为显示描绘车辆的周围区域的图像；以及

反射镜单元，安装在车辆的驾驶室中并且被配置为反射显示在显示单元上的图像区域的一些或全部，

其中，通过在所述反射镜单元中反射的所述显示单元的图像，对所述驾驶员可见的所述周围区域的可见范围根据所述驾驶员的观察位置相对于所述反射镜单元的移动而改变。

(2)

根据(1)所述的车辆显示装置，还包括：

显示控制器，被配置为确定驾驶员的动作，基于动作确定结果控制待在显示单元上显示的图像的显示，并且根据驾驶员的动作改变可见范围。

(3)

根据(2)所述的车辆显示装置，还包括：

通知单元，被配置为向驾驶员呈现驾驶员的动作的确定的变化作为视觉或听觉反馈。

(4)

根据(2)所述的车辆显示装置，其中

显示控制器降低除了与可见范围相对应的显示区域之外的另一显示区域的一些或全部的亮度，基于动作确定结果控制显示区域的亮度降低的范围，以及根据驾驶员的动作改变可见范围。

(5)

根据(4)所述的车辆显示装置，其中

显示控制器基于动作确定结果控制显示区域的亮度降低的范围，并且扩展可见范围。

(6)

根据(2)至(5)中任一项所述的车辆显示装置，其中

显示控制器在描绘车辆的周围区域的图像中相对于沿可见范围的移动方向的边缘区域在可见范围的移动方向上进行图像压缩，基于动作确定结果控制压缩比或压缩范围，以及根据驾驶员的动作改变可见范围。

(7)

根据(6)所述的车辆显示装置，其中

显示控制器基于动作确定结果控制压缩比或压缩范围，并且扩展可见范围。

(8)

根据(2)至(7)中任一项所述的车辆显示装置，其中

在基于动作确定结果确定所述驾驶员在所述反射镜单元的方向上瞥视的情况下，所述显示控制器在所述显示单元上进行图像显示。

(9)

根据(8)所述的车辆显示装置，其中

在确定驾驶员在检测到瞥视之后执行预定动作的情况下，显示控制器扩展可见范围的区域。

(10)

根据(8)或(9)所述的车辆显示装置，其中

在检测到瞥视之后，显示控制器提高用于确定驾驶员的动作的时间分辨率。

(11)

根据(2)至(10)中任一项所述的车辆显示装置，其中

所述显示控制器包括

学习单元，被配置为单独地学习针对驾驶员的动作的特征，

确定处理器，被配置为使用学习单元的学习结果来确定驾驶员的动作，以及

控制处理器，被配置为基于所述确定处理器的确定结果改变所述可见范围。

(12)

根据(11)所述的车辆显示装置，其中

所述确定处理器根据所述驾驶员的动作进行由所述驾驶员的指示的确定，并且在指示的确定中，基于驾驶员的头部的两个或更多个加速和减速操作的组合的检测结果来确定指示的内容。

(13)

根据(11)或(12)所述的车辆显示装置，其中

驾驶员的动作是颈部转动，围绕颈部轴的头部旋转或向前、后、左、右的上身移动中的至少一种。

(14)

根据(2)至(13)中任一项所述的车辆显示装置，其中

所述显示控制器根据驾驶员的动作来扩展所述可见范围，并且基于车辆的驾驶状况来控制所述可见范围的区域尺寸。

(15)

根据(14)所述的车辆显示装置，其中

所述显示控制器基于与所述车辆的行驶方向相关的驾驶信息沿所述车辆的向外方向扩展所述可见范围。

(16)

根据(14)或(15)所述的车辆显示装置，其中

车辆包括耦接到所述驾驶室的拖车部分，并且从所述驾驶室进行所述车辆的周围区域的图像捕获，以及

显示控制器基于与产生不同于拖车部分定向的驾驶室定向的情况的驾驶状况有关的驾驶信息以拖车部分的向外侧仍然包括在可见范围内的方式延伸可见范围，即使驾驶室定向和拖车部分定向不同。

(17)

根据(1)至(16)中任一项所述的车辆显示装置，其中

显示单元和反射镜单元以显示单元上显示的图像的一部分被在反射镜单元中反射的方式布置，并且反射镜单元中反射的图像区域根据驾驶员的观察位置相对于反射镜单元的移动而移动。

(18)

根据(1)至(17)中任一项所述的车辆显示装置，其中

所述显示单元和所述反射镜单元以经由所述反射镜单元从所述驾驶员的眼睛的位置到所述显示单元的显示面的光学观察距离为至少1.1米或更大的方式布置或光学设计。

(19)

根据(1)至(18)中任一项所述的车辆显示装置，其中

所述显示单元以所述显示单元上的显示面或所述显示面的照明光对驾驶员不可见的方式设置。

(20)

根据(1)至(19)中任一项所述的车辆显示装置，其中

反射镜单元在可见范围的移动方向上的形状是朝向驾驶员突出的弯曲形状。

(21)

根据(20)所述的车辆显示装置，其中

所述反射镜单元在可见范围的移动方向上在中央部比在端部具有更小的弯曲。

(22)

根据(1)至(21)中任一项所述的车辆显示装置，还包括：

显示控制器，被配置为基于动作确定结果确定所述驾驶员的动作并改变所述反射镜单元的定向，从而根据所述驾驶员的动作改变所述可见范围。

(23)

根据(1)至(22)中任一项所述的车辆显示装置，其中

所述反射镜单元是半透镜。

(24)

根据(23)所述的车辆显示装置，其中

所述半透镜包括半透射调光功能，或者调节透射光量的调光装置被附加地设置在半透镜的后面。

(25)

一种车辆中的显示***，包括：

显示屏幕，被配置为显示与所述车辆的周围区域相对应的图像；以及

表面，被配置为将由所述显示屏幕显示的图像的至少部分反射给观察者。

(26)

根据(25)所述的显示***，其中，所述观察者是所述车辆的操作者。

(27)

根据(26)所述的显示***，还包括：

控制电路，被配置为基于观察者的状态的检测结果来控制所述周围区域的图像的显示。

(28)

根据(27)所述的显示***，其中，

所述检测结果包括用户的动作的检测结果。

(29)

根据(25)至(28)中任一项所述的显示***，其中所述表面是非平面的。

(30)

根据(27)所述的显示***，其中，所述控制电路还被配置为基于所述车辆的状态控制所述周围区域的图像的显示。

(31)

根据(30)所述的显示***，其中，当拖车被附接到车辆时，所述车辆的状态包括所述拖车是否阻挡所述周围区域的一部分。

(32)

根据(27)所述的显示***，其中，所述控制电路还被配置为

在所述图像上，在所述周围区域的可见范围的移动方向上相对于所述可见范围的移动方向上的边缘区域执行图像压缩，

基于所述观察者的动作来控制压缩比和压缩范围中的至少一个，

根据观察者的动作改变所述可见范围。

(33)

根据(32)所述的显示***，其中，所述控制电路还被配置为基于所述观察者的动作来控制所述压缩比和所述压缩范围中的至少一个，以便扩展所述可见范围。

(34)

根据(27)所述的显示***，其中，所述控制电路还被配置为：当基于所述观察者的动作，所述控制电路确定所述观察者在所述表面的方向上察看时，控制所述显示屏幕上的图像显示。

(35)

根据(34)所述的显示***，其中，所述控制电路还被配置为扩展当观察者在沿所述表面的方向察看之后执行预定义动作时所显示的所述周围区域的部分。

(36)

根据(34)所述的显示***，其中，所述控制电路还被配置为在确定观察者沿所述表面的方向观察之后提高用于确定所述观察者的动作的时间分辨率。

(37)

根据(27)所述的显示***，其中，所述控制电路还被配置为

学习所述观察者的动作的特征，

使用学习结果来确定所述观察者的动作，以及

基于所述观察者的动作的确定结果改变所显示的所述周围区域的部分。

(38)

根据(36)所述的显示***，其中，所述观察者的动作包括颈部转动，围绕颈部轴的头部旋转或者向前、后、左或右的上身移动中的至少一个。

(39)

根据(27)所述的显示***，其中，所述控制电路还被配置为

根据观察者的动作扩展所显示的所述周围区域的部分，以及

基于所述车辆的状况来控制扩展显示的所述周围区域的部分的区域尺寸。

(40)

根据权利要求(39)所述的显示***，其中，所述控制电路还被配置为基于与所述车辆的行驶方向相关的信息来扩展在所述车辆的向外方向上显示的所述周围区域的部分。

(41)

根据(39)所述的显示***，其中，所述车辆是包括驾驶室和耦接到所述驾驶室的拖车的车辆，并且从所述驾驶室进行所述周围区域的图像捕获，

所述显示控制电路基于所述车辆的驾驶信息，进一步配置为当所述驾驶室定向和所述拖车定向不同时，扩展所显示的所述周围区域的部分，以使所述拖车被显示。

(42)

根据(25)至(41)中任一项所述的显示***，其中，所述显示屏幕和所述表面被布置为使得在所述表面上反射在所述显示屏幕上显示的图像的一部分，以及由所述表面反射的图像区域根据所述观察者的观察位置相对于所述表面的移动而移动。

(43)

根据(25)至(43)中任一项所述的显示***，其中所述显示屏幕和所述表面被布置或光学设计成使得经由所述表面从所述观察者的眼睛的位置到所述显示屏幕的显示面的光学距离至少为1.1米或更大。

(44)

根据(25)至(43)中任一项所述的显示***，其中，所述显示屏幕被配置为使得所述显示屏幕的显示面或显示面的照明光对所述观察者不可见。

(45)

根据(25)至(44)中任一项所述的显示***，其中，在所显示的所述周围区域的部分的移动方向上的所述表面的形状是朝向所述观察者突出的弯曲形状。

(46)

根据权利要求(45)所述的显示***，其中所述表面以在所述观察者的移动方向上在中心区域比在端部区域具有更小的弯曲来成形。

(47)

根据(25)至(46)中任一项所述的显示***，还包括：

控制电路，被配置为确定所述观察者的动作并且基于所确定的所述观察者的动作来改变所述表面的定向，所显示的周围区域的部分根据所述表面的定向的改变而改变。

(48)

根据(25)至(47)中任一项所述的显示***，其中所述表面是反射镜。

(49)

根据(49)所述的显示***，其中，所述反射镜是半透镜。

(50)

根据(49)所述的显示***，其中所述半透镜包括半透射调光功能，或者调节透射光量的调光装置，所述调光装置被设置在所述半透镜后面。

(51)

根据(25)至(50)中任一项所述的显示***，还包括附接到车辆外部并且相对于车辆的行驶方向面向后方的至少两个或更多个图像捕获装置，其中，与所述车辆的周围区域相对应的图像由所述图像捕获装置中的至少一个捕获。

(52)

根据(25)至(51)中任一项所述的显示***，其中，所述车辆是汽车或公共汽车。

(53)

一种显示控制方法，包括：

利用显示屏幕显示与车辆的周围区域相对应的图像；以及用表面将由所述显示屏幕显示的图像的至少一部分反射给观察者。

工业实用性

在根据本技术的实施例的车辆显示装置、显示控制方法和后视监视***中，描绘车辆周围的区域的图像显示在显示单元上，该显示单元被安装在车辆驾驶室中并且其显示面沿与驾驶员的方向不同的方向定向。反射镜单元被安装在车辆的驾驶室中并反射显示在显示单元上的图像。通过反射镜单元中反射的显示单元的图像对驾驶员可见的周围区域的可见范围，根据驾驶员的观察位置相对于反射镜单元的移动而改变。为此，即使在通过在显示单元上捕获并显示车辆周围的区域的图像来使得能够检查周围区域的情况下，也可以容易地观察到车辆周围的区域。该技术适用于诸如汽车、卡车或公共汽车的车辆。

附图标记列表

10 显示装置

11、11a、11b、11 周围图像捕获单元

12 驾驶员图像捕获单元

13 驾驶状况检测传感器

15 驾驶员识别信息获取单元

20 显示控制器

21 驾驶员移动确定单元

22 驾驶状况确定单元

23 识别单元

24 瞥视确定单元

25 指令操作确定单元

26 驾驶员认证单元

35 控制处理器

41 显示调节器

42 亮度调节器

43 警告显示叠加单元

50 显示单元

55 反射镜单元

61 内后视镜

91 后视镜

241 瞥视确定处理器

242 瞥视确定学习单元

243 确定参考值存储单元

251 指令操作确定处理器

252 指令操作确定学习单元

253 确定参考值存储单元

Claims (13)

1.一种图像处理装置，包括:

至少一个电路，被配置为

从多个图像捕获装置接收移动装置周围的多个捕获图像，其中所述多个捕获图像的视野彼此是不同的；

通过对所述多个捕获图像至少执行修剪处理和组合处理来生成显示图像；

控制所述显示图像的修剪位置和组合位置中的至少一个；以及

检测用户的移动，其中，

当检测到所述用户的位置向左或向右移动时，基于所述用户的移动来控制所述显示图像的修剪位置，以与在所述移动装置的内后视镜中反射的周围区域的移动类似地进行修剪，

当从所述用户执行的操作指令姿势中检测到来自所述用户的指令时，基于所述用户的指令来控制所述显示图像的组合位置，以沿所述用户的期望的方向移动所述组合位置。

2.根据权利要求1所述的图像处理装置，其中所述至少一个电路还被配置为

在所述移动装置的车载显示器上显示所述显示图像。

3.根据权利要求1所述的图像处理装置，其中

设置用于所述用户的移动的确定的预定参考值，以及

仅当所述用户的移动超过所述预定参考值时执行控制。

4.根据权利要求1所述的图像处理装置，其中

所述用户是驾驶员。

5.根据权利要求1所述的图像处理装置，其中

所述多个图像捕获装置被安装在所述移动装置上。

6.根据权利要求3所述的图像处理装置，其中

基于所述用户的移动的确定结果来更新所述预定参考值。

7.根据权利要求3所述的图像处理装置，其中

所述用户的移动的确定包括用户的头部定向和视线方向的确定。

8.根据权利要求7所述的图像处理装置，其中

所述头部定向的确定趋势经由通知单元作为视觉或听觉反馈被提供给所述用户。

9.根据权利要求3所述的图像处理装置，其中

针对每个用户，依赖于所述移动装置的速度范围进行所述确定。

10.根据权利要求5所述的图像处理装置，其中

所述多个图像捕获装置中的至少一个被安装在所述移动装置的左侧，并且所述多个图像捕获装置中的至少一个被安装在所述移动装置的右侧。

11.根据权利要求1所述的图像处理装置，其中所述至少一个电路还被配置为

通过对所述多个捕获图像执行混合处理来生成显示图像。

12.一种图像处理方法，包括；

从多个图像捕获装置接收移动装置周围的多个捕获图像，其中所述多个捕获图像的视野彼此是不同的；

通过对所述多个捕获图像至少执行修剪处理和组合处理来生成显示图像；

控制所述显示图像的修剪位置和组合位置中的至少一个；以及

检测用户的移动，其中，

当检测到所述用户的位置向左或向右移动时，基于所述用户的移动来控制所述显示图像的修剪位置，以与在所述移动装置的内后视镜中反射的周围区域的移动类似地进行修剪，

当从所述用户执行的操作指令姿势中检测到来自所述用户的指令时，基于所述用户的指令来控制所述显示图像的组合位置，以沿所述用户的期望的方向移动所述组合位置。

13.一种存储有指令的非暂时性计算机可读介质，所述指令在由处理器执行时使所述处理器执行以下处理：

从多个图像捕获装置接收移动装置周围的多个捕获图像，其中所述多个捕获图像的视野彼此是不同的；

通过对所述多个捕获图像至少执行修剪处理和组合处理来生成显示图像；

控制所述显示图像的修剪位置和组合位置中的至少一个；以及

检测用户的移动，其中，

当检测到所述用户的位置向左或向右移动时，基于所述用户的移动来控制所述显示图像的修剪位置，以与在所述移动装置的内后视镜中反射的周围区域的移动类似地进行修剪，

当从所述用户执行的操作指令姿势中检测到来自所述用户的指令时，基于所述用户的指令来控制所述显示图像的组合位置，以沿所述用户的期望的方向移动所述组合位置。