CN110321771B - 车内监视模块以及监视*** - Google Patents

Abstract

本发明的目的是提供一种能够恰当地监视车辆的室内的车内监视模块以及监视***。监视***(500)所具有的车内监视模块(1)的特征在于，具有：检测部(5)，检测车辆(V)的室内的状况；服务动作部(6)，被设置于车辆(V)；控制装置(7)，能够执行以下处理：根据由检测部(5)检测到的车辆(V)的室内的状况，判定在该车辆(V的室内发生的事件的类别，根据判定的事件的类别，控制服务动作部(6)，使该服务动作部(6)进行与该事件的类别对应的动作；以及箱体(2)，组装检测部(5)、服务动作部(6)以及控制装置(7)以进行单元化，并且设置于车辆(V)的车顶部件。

Description

车内监视模块以及监视***

技术领域

本发明涉及车内监视模块以及监视***。

背景技术

作为搭载于车辆的现有的车内监视模块，例如，在专利文献1中公开了一种车辆用乘员情绪应对控制装置。该装置根据车辆的乘员的生物信息来推定该乘员的情绪，根据需要地，改善该乘员的情绪。

现有技术文献

专利文献

专利文献1：日本特开2016-137204号公报

发明内容

发明欲解决的技术问题

然而，上述专利文献1中记载的装置例如在车辆的室内监视的方面存在进一步改善的余地。

本发明是鉴于上述状况而完成的，其目的是提供一种能够对车辆的室内进行恰当地监视的车内监视模块以及监视***。

用于解决问题的技术手段

为了达成上述目的，本发明涉及的车内监视模块的特征在于，包括：检测部，检测车辆的室内的状况；服务动作部，设置于所述车辆；控制装置，能够执行以下处理：根据由所述检测部检测到的所述车辆的室内的状况，判定在该车辆的室内发生的事件的类别，根据已判定的所述事件的类别，控制所述服务动作部，使该服务动作部进行与该事件的类别对应的动作；以及箱体，组装所述检测部、所述服务动作部以及所述控制装置以进行单元化，并且设置于所述车辆的室内的上方。

另外，在上述车内监视模块中，也可以是，所述检测部包括通过拍摄所述车辆的室内的图像来检测所述车辆的室内的状况的拍摄装置，所述控制装置根据由所述拍摄装置拍摄到的所述车辆的室内的图像，判定在该车辆的室内已发生的所述事件的类别。

另外，在上述车内监视模块中，也可以是，所述检测部包括通过检测所述车辆的室内的声音来检测所述车辆的室内的状况的声音检测装置，所述控制装置根据由所述声音检测装置检测到的所述车辆的室内的声音，判定在该车辆的室内已发生的所述事件的类别。

另外，在上述车内监视模块中，也可以是，所述车内监视模块具有能够与所述车辆的外部的外部设备通信的车外通信部，所述控制装置能够执行以下处理：控制所述车外通信部，将与已判定的所述事件的类别相关的信息经由该车外通信部而向所述外部设备发送。

另外，在上述车内监视模块中，也可以是，所述服务动作部包括能够向所述车辆的室内输出信息的信息输出装置，所述控制装置能够执行以下处理：控制所述信息输出装置，输出从所述外部设备经由所述车外通信部而接收到的信息。

另外，在上述车内监视模块中，也可以是，所述控制装置能够执行以下处理：根据从所述外部设备经由所述车外通信部而接收到的信息，控制所述检测部，远程操作该检测部；以及控制所述车外通信部，将与由所述检测部检测到的所述车辆的室内的状况相关的信息经由所述车外通信部而向所述外部设备发送。

另外，在上述车内监视模块中，也可以是，所述车内监视模块具有能够与搭载于所述车辆的所述箱体外的车载设备通信的车内通信部，所述控制装置能够执行以下处理：根据已判定的所述事件的类别，经由所述车内通信部来控制所述车载设备，使该车载设备进行与该事件的类别对应的动作。

另外，在上述车内监视模块中，也可以是，所述控制装置将对所述室内产生残留物、所述室内的人物未佩戴安全带、所述室内的人物身体状况变差、所述室内的人物的可疑行为或者所述室内的异常情况作为所述事件的类别进行判定。

为了达成上述目的，本发明涉及的监视***的特征在于，所述监视***具有：搭载于车辆的车内监视模块；和设置于所述车辆的外部并且能够与所述车内监视模块相互收发信息的外部设备，所述车内监视模块包括：检测部，检测所述车辆的室内的状况；服务动作部，设置于所述车辆；控制装置，能够执行以下处理：根据由所述检测部检测到的所述车辆的室内的状况，判定在该车辆的室内发生的事件的类别，根据已判定的所述事件的类别，控制所述服务动作部，使该服务动作部进行与该事件的类别对应的动作；以及箱体，组装所述检测部、所述服务动作部以及所述控制装置以进行单元化，并且设置在所述车辆的室内的上方，所述控制装置与所述外部设备协作地执行使所述服务动作部进行与所述事件的类别对应的动作的处理。

发明效果

本发明涉及的车内监视模块以及监视***中，控制装置根据由检测部检测到的车辆的室内的状况来判定在该车辆的室内发生的事件的类别。而且，车内监视模块根执行以下处理：根据控制装置判定的事件的类别来控制服务动作部，使该服务动作部进行与该事件的类别对应的动作。在这样的结构中，车内监视模块的检测部、服务动作部以及控制装置被组装在箱体而单元化，并且设置在车辆的室内的上方。其结果，车内监视模块实现能够对车辆的室内进行恰当地监视这样的效果。

附图说明

图1是表示具有实施方式涉及的车内监视模块的监视***的概略结构的框图。

图2是表示实施方式涉及的车内监视模块的搭载例的示意性的局部立体图。

图3是表示应用了实施方式涉及的车内监视模块的车辆的室内的概略结构的示意图。

图4表示应用了实施方式涉及的车内监视模块的车辆的室内的概略结构的示意图。

图5是表示实施方式涉及的车内监视模块中的控制的一个例子的流程图。

图6是表示实施方式涉及的车内监视模块中的残留物应对处理的一个例子的流程图。

图7是表示实施方式涉及的车内监视模块中的未佩戴安全带用应对处理的一个例子的流程图。

图8是表示实施方式涉及的车内监视模块中的身体状况变差应对处理的一个例子的流程图。

图9是表示实施方式涉及的车内监视模块中的可疑行为应对处理的一个例子的流程图。

图10是表示实施方式涉及的车内监视模块中的控制的另一个例子的流程图。

图11是表示实施方式涉及的车内监视模块中的异常情况应对处理的一个例子的流程图。

符号说明

1 车内监视模块

2 箱体

3 车外通信部

4 车内通信部

5 检测部

6 服务动作部

7 控制装置

51 拍摄装置

53 声压传感器(声音检测装置)

62 车内用显示器(信息输出装置)

63 扬声器(信息输出装置)

101 车载设备

500 监视***

CL 外部设备

IN 室内

RF 车顶部件

V 车辆

具体实施方式

以下，根据附图，对本发明涉及的实施方式进行说明。需要说明的是，本发明不限于该实施方式。另外，在下述实施方式中的构成要素中包含本领域技术人员能够且容易置换的要素或者实质上相同的要素。

[实施方式]

图1、图2、图3示出的本实施方式的车内监视模块1是搭载于车辆V的车载***。本实施方式的车内监视模块1是用于监视车辆V的室内IN的状况并且根据状况进行各种应对处理的结构上的模块。而且，本实施方式的车内监视模块1中，将主要部分单元化后配置在车辆V的室内IN的上方此处为车顶部件(顶盖)RF，从而构成顶盖集中配置型的监视单元。此处，车顶部件RF是在车辆V中位于铅垂方向上侧并且构成该车辆V的外观的结构体。车顶部件RF经由被形成为中空柱状的多个支柱PL而与车体主体BO连结，并且支承在该车体主体BO的铅垂方向上侧。车辆V以该车顶部件RF作为铅垂方向上侧的边界而分为室外OU侧和室内IN侧区域。车内监视模块1例如经由在中空柱状的支柱PL的内部空间等布线的电力线(电线)等而与电源电连接并供电。车内监视模块1与在车辆V的外部设置的外部设备CL一起构成监视***500。本实施方式的监视***500具有：搭载于车辆V的车内监视模块1；以及设置在车辆V的外部并且能够与车内监视模块1相互收发信息的外部设备CL。而且，本实施方式的车内监视模块1与外部设备CL协作地执行各种处理。车内监视模块1通过将图1所示的构成要素搭载于车辆V从而实现。以下，参照图1、图2、图3，针对车内监视模块1的各构成进行详细说明。

需要说明的是，在图1所示的车内监视模块1中，用于电力供给、控制信号、授受各种信息等的各构成要素之间的连接方式若无特别说明，可以是经由电线、光纤等布线材料而进行的有线连接(例如，也包含经由光纤的光通信等)、无线通信、非接触供电等无线连接中的任一。另外，适用车内监视模块1的车辆V可以是电动车辆(EV(Electric Vehicle))、混合动力车辆(HEV(Hybrid Electric Vehicle))、插电式混合动力车辆(PHEV(Plug-inHybrid Electric Vehicle))、汽油车辆、柴油车辆等使用电动机或发动机作为驱动源的任何一种车辆。另外，该车辆V的驾驶可以是驾驶员进行的手动驾驶、半自动驾驶、完全自动驾驶等中的任意驾驶形式。另外，该车辆V可以是由所谓的个人拥有的私家汽车、租赁汽车、共享汽车、公共汽车、出租车、拼车中的任何一个。在以下的说明中，作为一个例子，以车辆V为公共汽车、出租车、拼车等由特定从业者等管理、被不特定多数利用者并且自动地移动到由利用者预约后的上下车位置的能够完全自动驾驶的车辆为例进行说明。在完全自动驾驶的情况下，也有驾驶员自身不在车辆V的情况。

具体而言，车内监视模块1包括：箱体2、车外通信部3、车内通信部4、检测部5、服务动作部6和控制装置7。车内监视模块1通过将这些箱体2、车外通信部3、车内通信部4、检测部5、服务动作部6以及控制装置7单元化从而构成。车内监视模块1也可以被构成除此之外还包含车室灯、各种操作部等。

箱体2是组装有构成车内监视模块1的车外通信部3、车内通信部4、检测部5、服务动作部6以及控制装置7的部件。箱体2例如由具有绝缘性的合成树脂形成。箱体2例如也可以是组合多个部件而整体上形成为中空箱状。箱体2在中空箱状的内部组装车外通信部3、车内通信部4、检测部5、服务动作部6以及控制装置7，并且收容它们，作为车内监视模块1而进行单元化。此处，箱体2将已收容在内部的车外通信部3、车内通信部4、检测部5、服务动作部6等的一部分在外面露出。而且，箱体2设置在车辆V的室内IN的上方此处为车顶部件RF。箱体2典型地设置在车辆V的室内IN的上方，优选设置在远望室内IN的所有乘员的位置(用后述的拍摄装置51能够拍摄室内IN的所有乘员的位置)。更详细而言，箱体2被装配在车顶部件RF的室内IN侧的面。此处，箱体2例如被设置在车顶部件RF与挡风玻璃WS的交叉部分且车辆V的车宽方向的大致中央位置。挡风玻璃WS设置在车辆V的前部，并且成为室内IN与室外OU的边界。挡风玻璃WS由使光透过的透光性部件构成，也被称为前窗玻璃。本实施方式的车内监视模块1的整体设置在车辆V的车顶部件RF的室内IN侧的面，并且构成合并了各种各样功能的顶置模块(OHM：Over-Head Module)或者顶盖模块(RM：Roof Module)。

车外通信部3是搭载于车辆V的无线通信功能零配件。车外通信部3是将车辆V和该车辆V的外部的网络N以无线方式连接的通信模块。此处，网络N能够将车内监视模块1和车辆V的外部的设备可通信地连接。网络N不管有线或无线，可以使用任意的通信网。车外通信部3在已连接到网络N的设备与车内监视模块1之间进行信息的收发。车外通信部3例如能够通过广域无线、窄域无线等各种方式的无线通信来经由网络N而与车辆V的外部的设备通信。此处，广域无线的方式例如是广播(AM、FM)、TV(UHF、4K、8K)、TEL、GPS、WiMAX(注册商标)等。另外，狭域无线的方式例如是ETC/DSRC、VICS(注册商标)、无线LAN、毫米波通信等。本实施方式的车外通信部3至少经由网络N而在与已连接到该网络N的外部设备CL之间进行信息的收发。也就是说，本实施方式的车外通信部3作为车辆V的外部的设备，被构成为至少能够与外部设备CL通信。此处，外部设备CL构成在车辆V的外部的网络N上安装的云服务设备，构成所谓的云服务中的中心。外部设备CL在与车内监视模块1(车辆V)之间能够经由网络N而相互收发信息。外部设备CL也可以通过在已知的PC、工作站等计算机***中安装使各种处理实现的应用程序来构成。车内监视模块1经由该车外通信部3而与外部设备CL相互通信并且协作，从而能够从该外部设备CL接受各种云服务。需要说明的是，该车外通信部3也可以构成后述的服务动作部6的一部分。

车内通信部4是搭载于车辆V的通信中继功能零配件。车内通信部4被构成为能够经由车载网络等而与已搭载于车辆V的ECU(Electronic Control Unit)100、车载设备101通信。也就是说，车内通信部4被构成为能够与搭载于车辆V的ECU 100、车载设备101收发各种信息。此处，ECU 100是对包含车载设备101等的车辆V整体进行统一控制的电子控制单元。该ECU 100也可以被构成为车内监视模块1的一部分。换言之，车内监视模块1也可以是具有ECU 100的结构。车载设备101是被搭载于车辆V的箱体2外，且实现各种功能的设备。车载设备101被设置多个。车内通信部4经由ECU 100而在与已连接到该ECU 100的多个车载设备101之间进行信息的收发。车内通信部4例如也可以被构成为具有：进行路由选择处理的路由器功能、进行协议转换处理的网关功能等。作为一个例子，本实施方式的多个车载设备101被构成为包含行驶***致动器111、安全带装置112和门装置113。行驶***致动器111是用于使车辆V行驶的各种设备。行驶***致动器111典型地被构成包括：行驶用动力传动***、操舵装置、制动装置等。行驶用动力传动***是使车辆V行驶的驱动装置。操舵装置是进行车辆V的操舵的装置。制动装置是进行车辆V的制动的装置。安全带装置112是将车辆V的安全带电动地锁定的装置。门装置113是电动地开闭车辆V的上下车用的门以及该门的锁定机构的装置。需要说明的是，该车内通信部4也可以构成后述服务动作部6的一部分。

检测部5检测车辆V的室内IN的状况。检测部5检测表示车辆V的室内IN的状况的室内状况信息。室内状况信息例如可以包括：表示车辆V的内部环境的信息、表示车辆V的内部有无人物、物体等、位置、状态的信息、表示有无就坐到车辆V的座位、有无佩戴安全带的信息等。图1所示的检测部5作为一个例子而示出了被构成为包含拍摄装置51、雷达/声纳52以及作为声音检测装置的声压传感器53的情况。拍摄装置51通过拍摄车辆V的室内IN的图像，从而检测表示车辆V的室内IN状况的室内状况信息。拍摄装置51被组装于箱体2，例如，调整视角，从而使拍摄范围覆盖车辆V的室内IN的整个区域。拍摄装置51在无法用1个来覆盖车辆V的室内IN的整个区域的情况下，也可以被构成为设置多个拍摄装置51，并且利用该多个拍摄装置51来覆盖车辆V的室内IN的整个区域。拍摄装置51例如可以是能够拍摄二维图像的单眼相机，也可以是能够拍摄三维图像的立体相机。另外，拍摄装置51也可以是所谓的TOF(Time of Flight)相机等。雷达/声纳52使用红外线、毫米波、超声波等来检测表示车辆V的室内IN的状况的室内状况信息。雷达/声纳52被组装于箱体2，例如被调整为其检查范围覆盖车辆V的室内IN的整个区域。雷达/声纳52在1个雷达/声纳52无法覆盖车辆V的室内IN的整个区域的情况下，也可以被构成为设置多个雷达/声纳52，并且利用该多个雷达/声纳52来覆盖车辆V的室内IN的整个区域。声压传感器53通过检测车辆V的室内IN的声音来检测表示车辆V的室内IN状况的室内状况信息。此处，声压传感器53虽然以检测车辆V的室内IN的声音的声压的产品为例进行说明，但是也可以是所谓的收音麦克风等。声压传感器53在1个声压传感器53无法覆盖车辆V的室内IN的整个区域的情况下，也可以被构成为设置多个声压传感器53并利用该多个声压传感器53来覆盖车辆V的室内IN的整个区域。另外，检测部5也可以被构成为包括经由车内通信部4、车载网络而从ECU 100等处理部获取室内状况信息的获取部。由检测部5(拍摄装置51、雷达/声纳52、声压传感器53)检测到的信息例如被控制装置7用于判定在室内IN发生的事件的类别。

服务动作部6被设置于车辆V，并且在该车辆V的室内IN进行与在车辆V的室内IN发生的事件的类别对应的服务动作。本实施方式的服务动作部6被构成为包括：车外用显示器61、车内用显示器62、扬声器63、话筒64和旋转灯65等。车外用显示器61构成能够向车辆V的室外OU输出信息的车外用的信息输出装置。车外用显示器61朝向车辆V的室外OU显示(输出)图像信息(视觉信息)。车外用显示器61例如由薄型的液晶显示器、等离子显示器、有机EL显示器等构成。车外用显示器61被组装于箱体2，并且将图像信息显示在从车辆V的室外OU透过挡风玻璃WS可见的位置。车内用显示器62以及扬声器63构成能够向车辆V的室内IN输出信息的车内用的信息输出装置。车内用显示器62向车辆V的室内IN显示(输出)图案、文字等的图像信息(视觉信息)。车内用显示器62例如由薄型的液晶显示器、等离子显示器、有机EL显示器等构成。车内用显示器62被组装于箱体2，并且将图像信息显示在从车辆V的室内IN的所有座位可见的位置。扬声器63向车辆V的室内IN输出声音信息(听觉信息)。扬声器63例如也可以使用在车辆V的室内IN中仅欲提示信息的特定乘员能够听到声音信息这样指向性高的设备。同样地，车内用显示器62例如也可以适用在车辆V的室内IN仅欲提示信息的特定乘员能够辨认图像信息的技术，例如也可以按照与各乘员对应的方式单独设置。话筒64是将在车辆V的室内IN发生的声音转换为电信号的收音装置。旋转灯65向车辆V的室外OU报知车辆V正在紧急行驶中。旋转灯65例如利用在该光源的周围旋转的反射镜来反射来自光源的光，使其在水平方向旋转发光，从而报知车辆V正在紧急行驶中。旋转灯65被设置为在组装于箱体2的状态下，贯通车顶部件RF的一部分，并且露出到车辆V的室外OU。

控制装置7统一地控制车内监视模块1的各部。控制装置7监视车辆V的室内IN的状况，并且根据状况而执行用于各种各样的应对处理的各种运算处理。控制装置7被构成为包含以公知的微型计算机作为主体的电子电路，该微型计算机具有：CPU(CentralProcessing Unit)、MPU(Micro Processing Unit)、ASIC(Application SpecificIntegrated Circuit)、FPGA(Field Programmable Gate Array)等中央运算处理装置、ROM(Read Only Memory)、RAM(Random Access Memory)以及接口。控制装置7与车外通信部3、车内通信部4、检测部5以及服务动作部6电连接。控制装置7能够在与各部之间相互授受各种检测信号、用于驱动各部的驱动信号等各种电信号。

具体而言，控制装置7在功能概念上被构成为包括接口部7A、存储部7B以及处理部7C。接口部7A、存储部7B以及处理部7C能够在与电连接有的各种设备之间相互授受各种信息。接口部7A是用于与车外通信部3、车内通信部4、检测部5、服务动作部6等车内监视模块1的各部之间收发各种信息的接口。接口部7A具有在与各部之间经由电线等而对信息进行有线通信的功能、在与各部之间经由无线通信单元等而对信息进行无线通信的功能等。存储部7B是存储各种信息的存储装置。存储部7B例如也可以是硬盘、SSD(Solid State Drive)、光盘等较大容量的存储装置或者RAM、闪存、NVSRAM(Non Volatile Static Random AccessMemory)等能够重写数据的半导体存储器。存储部7B存储有：控制装置7中的各种处理所必要的条件和信息、控制装置7中执行的各种程序和应用程序、控制数据等。存储部7B例如对在车辆V的室内IN发生的事件的类别判定中使用的事件类别判定信息等进行数据库化并存储。另外，存储部7B例如也能够就由车外通信部3、车内通信部4接收到的各种信息、由检测部5检测到的室内状况信息暂时存储。存储部7B被处理部7C等根据需要地读取这些信息。处理部7C是根据各种输入信号等来执行在存储部7B中存储的各种程序，并且通过该程序的动作来执行用于向各部输出输出信号并实现各种功能的各种处理的部分。

更详细而言，处理部7C能够执行根据由检测部5检测到的车辆V的室内IN的状况来判定在该车辆V的室内IN发生的事件的类别的处理。而且，处理部7C能够执行根据判定的事件的类别来控制服务动作部6并且使该服务动作部6进行与该事件的类别对应的动作的处理。此处，处理部7C能够执行在根据判定的事件的类别来控制服务动作部6的同时与外部设备CL协作地使该服务动作部6进行与该事件的类别对应的动作的处理。处理部7C能够执行控制车外通信部3，并且经由该车外通信部3而将与判定的事件的类别相关的发生事件类别信息向外部设备CL发送的处理。进一步地，处理部7C能够执行控制车外用显示器61、车内用显示器62、扬声器63等，并且使从外部设备CL经由车外通信部3而接收到的输出信息输出的处理。另外，处理部7C能够执行根据从外部设备CL经由车外通信部3而接收到的远程操作信息来控制检测部5并且使该检测部5远程操作的处理。进一步地，处理部7C能够执行控制车外通信部3，并且使与由检测部5检测到的车辆V的室内IN的状况相关的室内状况信息经由车外通信部3而向外部设备CL发送的处理。另外，处理部7C能够执行根据判定的事件的类别经由车内通信部4地控制车载设备101，并且使该车载设备101进行与该事件的类别对应的动作的处理。为了执行上述处理，本实施方式的处理部7C在功能概念上被构成为具有：信息处理部7a、图像识别部7b、语音对话处理部7c以及服务执行部7d。

信息处理部7a是具有能够执行与车内监视模块1使用的各种信息相关的处理的功能的部分。本实施方式的信息处理部7a具有能够执行控制检测部5并且检测室内状况信息的处理的功能。例如，信息处理部7a能够执行控制拍摄装置51，并且通过拍摄车辆V的室内IN的图像来检测室内状况信息的处理。另外，信息处理部7a控制雷达/声纳52，并且执行使用红外线、毫米波、超声波等来检测室内状况信息的处理。另外，信息处理部7a执行控制声压传感器53，并且通过检测车辆V的室内IN的声音来检测室内状况信息的处理。而且，信息处理部7a执行将由检测部5检测到的室内状况信息存储于存储部7B的处理。另外，本实施方式的信息处理部7a能够执行控制车外通信部3并且与外部设备CL之间收发各种信息的处理。信息处理部7a执行从存储部7B读取由车外通信部3发送的信息的处理、将由车外通信部3接收到的信息存储于存储部7B的处理。例如，信息处理部7a执行将与由后述的图像识别部7b、语音对话处理部7c判定的事件的类别相关的发生事件类别信息经由车外通信部3而向外部设备CL发送的处理。发生事件类别信息是与在车辆V的室内IN发生的事件的类别相关的信息，且是与由图像识别部7b、语音对话处理部7c根据由检测部5检测到的室内状况信息判定的该事件的类别相关的信息。另外，信息处理部7a执行将用车外用显示器61、车内用显示器62、扬声器63输出的输出信息经由车外通信部3而从外部设备CL接收的处理。输出信息是从车外用显示器61、车内用显示器62、扬声器63输出的信息，例如，如图4所示例的那样，包括在车外用显示器61、车内用显示器62显示的图像信息、从扬声器63输出的声音信息等。进一步地，信息处理部7a进行将使检测部5远程操作的远程操作信息经由车外通信部3而从外部设备CL接收的处理。远程操作信息是用于根据来自外部设备CL的指示而对检测部5进行远程操作的信息。另外，信息处理部7a能够执行将由检测部5检测到的室内状况信息经由车外通信部3而向外部设备CL发送的处理。另外，本实施方式的信息处理部7a控制车内通信部4，并且具有能够执行在与车载设备101之间收发各种信息的处理的功能。信息处理部7a执行从存储部7B读取由车内通信部4发送的信息的处理、使由车内通信部4接收到的信息存储于存储部7B的处理。信息处理部7a执行经由ECU 100而在与车载设备101之间收发各种信息的处理。例如，信息处理部7a执行将用于利用后述的服务执行部7d使行驶***致动器111、安全带装置112、门装置113等动作的信息经由车内通信部4而向行驶***致动器111、安全带装置112、门装置113发送的处理。

图像识别部7b是具有能够执行根据由检测部5检测到的表示车辆V的室内IN状况的室内状况信息来判定在该车辆V的室内IN发生的事件的类别的处理的部分。图像识别部7b与后述语音对话处理部7c一起作为判定在该车辆V的室内IN发生的事件的类别的事件判定部而发挥作用。本实施方式的图像识别部7b例如使用各种公知的人工智能(ArtificialIntelligence)技术、深度学习(DeepLearning)技术来判定在车辆V的室内IN发生的事件的类别。例如，图像识别部7b根据由检测部5检测到的室内状况信息、在存储部7B中存储的事件类别判定信息等来判定在车辆V的室内IN发生的事件的类别。该事件类别判定信息是反映了利用采用人工智能技术、深度学习技术的各种各样手段与室内状况信息等对应地学习了在该车辆V的室内IN发生的事件的类别的结果的信息。换言之，事件类别判定信息是为了根据室内状况信息等推定在车辆V的室内IN发生的事件的类别而利用采用人工智能技术、深度学习技术的各种各样手段进行数据库化后的信息。此处，图像识别部7b作为事件的类别而对室内IN产生残留物、室内IN的人物未佩戴安全带、室内IN的人物的身体状况变差或者室内IN的人物的可疑行为(例如，器物损坏行为、盗窃行为、伤害行为等)进行判定。也就是说，此处，由控制装置7判定的事件的类别作为一个例子而包括对室内IN产生残留物、室内IN的人物未佩戴安全带、室内IN的人物的身体状况变差以及室内IN的人物的可疑行为。本实施方式的图像识别部7b根据表示由构成检测部5的拍摄装置51拍摄到的车辆V的室内IN的图像的图像信息，来判定在该车辆V的室内IN发生的事件的类别。也就是说，图像识别部7b根据构成室内状况信息的图像信息以及在存储部7B中存储的事件类别判定信息来判定上述事件的类别。例如，图像识别部7b能够根据乘员上车辆V前的图像信息与乘员下车辆V后的图像信息的差分图像，来判定对室内IN产生残留物。进一步地，图像识别部7b例如能够根据图像信息中包含的安全带的图像，来判定室内IN人物未佩戴安全带。另外，图像识别部7b例如能够通过对照在图像信息中包含的车辆V的室内IN的乘员的行动、表情与在存储部7B中存储的事件类别判定信息，从而判定室内IN人物的身体状况变差、室内IN人物的可疑行为。

语音对话处理部7c是具有以下功能的部分，即：能够执行根据由检测部5检测到的表示车辆V的室内IN状况的室内状况信息来判定在该车辆V的室内IN发生的事件的类别的处理。语音对话处理部7c与上述图像识别部7b一起作为判定在该车辆V的室内IN发生的事件的类别的事件判定部而发挥作用。此处，例如作为事件的类别，语音对话处理部7c判定室内IN的异常情况(能够从声音信息判别的事态)的发生。也就是说，此处，作为一个例子，由控制装置7判定的事件的类别还包含室内IN的异常情况。本实施方式的语音对话处理部7c根部表示由构成检测部5的声压传感器53检测到的车辆V的室内IN的声音的声音信息，来判定在该车辆V的室内IN发生的事件的类别。例如，语音对话处理部7c能够在由声压传感器53检测到的车辆V的室内IN的声音的声压为预先设定的阈值以上的情况下，判定室内IN的异常情况。

服务执行部7d是具有能够执行以下处理的功能的部分，即：根据由图像识别部7b以及语音对话处理部7c判定的事件的类别，来控制服务动作部6，并使该服务动作部6进行与该事件的类别对应的动作。本实施方式的服务执行部7d在由图像识别部7b判定了对室内IN产生残留物的情况下，通过执行残留物应对处理的至少一部分，从而使服务动作部6进行残留物应对动作(例如，参照后述的图6)。另外，服务执行部7d在由图像识别部7b判定了室内IN的人物未佩戴安全带的情况下，通过执行未佩戴安全带用应对处理的至少一部分，从而使服务动作部6进行未佩戴安全带用应对动作(例如，参照后述的图7)。另外，服务执行部7d在由图像识别部7b判定了室内IN人物的身体状况变差的情况下，通过执行身体状况变差应对处理的至少一部分，从而使服务动作部6进行身体状况变差应对动作(例如，参照后述的图8)。另外，服务执行部7d在由图像识别部7b判定了室内IN的人物的可疑行为的情况下，通过执行可疑行为应对处理的至少一部分，从而使服务动作部6进行可疑行为应对动作(例如，参照后述的图9)。另外，服务执行部7d在由语音对话处理部7c判定了室内IN的异常情况的情况下，通过执行异常情况应对处理的至少一部分，从而使服务动作部6进行异常情况应对动作(例如，参照后述的图11)。另外，服务执行部7d也能够执行根据由图像识别部7b判定的事件的类别，而经由车内通信部4来控制包括行驶***致动器111、安全带装置112、门装置113在内的车载设备101，并使该车载设备101进行与该事件的类别对应的动作的处理。

接下来，参照图5的流程图，说明车内监视模块1中的控制的一个例子的概况，然后，参照图6、图7、图8、图9，针对残留物应对处理、未佩戴安全带用应对处理、身体状况变差应对处理、可疑行为应对处理的具体例进行说明。

首先，控制装置7例如在车辆V的点火被设为ON时，将车内监视模块1所构成的***设为ON(步骤ST1)。

接下来，控制装置7的信息处理部7a控制拍摄装置51，来拍摄车辆V的室内IN的图像，从而检测室内状况信息。然后，信息处理部7a获取包含该室内IN的图像信息在内的室内状况信息(步骤ST2)。

接下来，控制装置7的图像识别部7b对表示在步骤ST2获取到的室内状况信息中包含的车辆V的室内IN的图像的图像信息进行分析。然后，如上所述，图像识别部7b根据表示车辆V的室内IN的图像的图像信息，来判定在该车辆V的室内IN发生的事件的类别(步骤ST3)。

接下来，图像识别部7b判定室内IN产生残留物是否被判定为在车辆V的室内IN发生的事件的类别(步骤ST4)。

在步骤ST4的处理中室内IN产生残留物被判定为在车辆V的室内IN发生的事件的类别的情况下(步骤ST4：是)，控制装置7的服务执行部7d执行残留物应对处理(步骤ST5)，并进入步骤ST6的处理。

在步骤ST4的处理中未判定为室内IN产生残留物的情况下(步骤ST4：否)，图像识别部7b判定室内IN的人物未佩戴安全带是否被判定为在车辆V的室内IN发生的事件的类别(步骤ST7)。

在步骤ST7的处理中室内IN的人物未佩戴安全带被判定为在车辆V的室内IN发生的事件的类别的情况下(步骤ST7：是)，服务执行部7d执行未佩戴安全带用应对处理(步骤ST8)，并进入步骤ST6的处理。

在步骤ST7的处理中未判定为室内IN的人物未佩戴安全带的情况下(步骤ST7：否)，图像识别部7b判定室内IN的人物的身体状况变差是否被判定为在车辆V的室内IN发生的事件的类别(步骤ST9)。

在步骤ST9的处理中室内IN的人物的身体状况变差被判定为在车辆V的室内IN发生的事件的类别的情况下(步骤ST9：是)，服务执行部7d执行身体状况变差应对处理(步骤ST10)，并进入步骤ST6的处理。

在步骤ST9的处理中未判定为室内IN人物的身体状况变差的情况下(步骤ST9：否)，图像识别部7b判定室内IN人物的可疑行为是否被判定为在车辆V的室内IN发生的事件的类别(步骤ST11)。

在步骤ST11的处理中室内IN的人物的可疑行为被判定为在车辆V的室内IN发生的事件的类别的情况下(步骤ST11：是)，服务执行部7d执行可疑行为应对处理(步骤ST12)，并进入步骤ST6的处理。

图像识别部7b在步骤ST11的处理中未判定为室内IN的人物的可疑行为的情况下(步骤ST11：否)，进入步骤ST6的处理。

控制装置7在步骤ST6的处理中判定例如车内监视模块1所构成的***是否伴随着车辆V的点火的OFF等而被设定为OFF(步骤ST6)。控制装置7在判定为***未被设定为OFF的情况下(步骤ST6：否)，返回到步骤ST2的处理，重复执行以后的处理。控制装置7在判定为***被设定为OFF的情况下(步骤ST6：是)，结束该控制。

接下来，参照图6的流程图，对残留物应对处理的一个例子的概况进行说明。

信息处理部7a在残留物应对处理中，首先，控制车外通信部3，将与由图像识别部7b判定的事件的类别相关的发生事件类别信息经由车外通信部3而向外部设备CL发送。此处，信息处理部7a将表示在室内IN产生残留物的发生事件类别信息向外部设备CL发送。基于此，信息处理部7a向构成中心的外部设备CL通知在车辆V的室内IN产生残留物(步骤ST501)。

接下来，信息处理部7a控制车外通信部3，从外部设备CL经由车外通信部3接收远程操作信息。基于此，信息处理部7a根据从外部设备CL经由车外通信部3而接收到的远程操作信息来控制检测部5，并且根据来自外部设备CL的指示来远程操作该检测部5。例如，管理外部设备CL的从业者的操作员(以下，有时简称为“操作员”)对拍摄装置51的视角进行远程操作，以拍摄车辆V的室内IN的整个区域。而且，信息处理部7a控制车外通信部3，并将由检测部5检测到的室内状况信息经由车外通信部3而向外部设备CL发送。此处，信息处理部7a将由被远程操作的拍摄装置51拍摄到的图像信息、由声压传感器53检测到的声音的声音信息作为室内状况信息经由车外通信部3而向外部设备CL发送。基于此，操作员例如能够确认在车辆V的室内IN发生的事件详情(步骤ST502)。

接下来，图像识别部7b判定在室内IN的残留物是否为脏东西(例如，垃圾、呕吐物、污渍等)(步骤ST503)。图像识别部7b例如能够根据由拍摄装置51拍摄到的图像信息，来判定在室内IN的残留物是否为脏东西。另外，图像识别部7b也可以根据由在步骤ST502中确认了事件详情的操作员经由外部设备CL、车外通信部3等而输入的信息，判定在室内IN的残留物是否为脏东西。图像识别部7b在判定为在室内IN的残留物是脏东西的情况下(步骤ST503：是)，进入步骤ST504的处理。图像识别部7b在判定为在室内IN的残留物不是脏东西的情况下(步骤ST503：否)，进入步骤ST511的处理。

图像识别部7b在步骤ST504的处理中判定车辆V的室内IN是否有乘员(乘员是否在)(步骤ST504)。图像识别部7b例如能够根据由拍摄装置51拍摄到的图像信息来判定在车辆V的室内IN中是否有乘员。另外，图像识别部7b也可以根据由在步骤ST502中确认了事件详情的操作员经由外部设备CL、车外通信部3等而输入的信息来判定在车辆V的室内IN中是否有乘员。图像识别部7b在判定为在车辆V的室内IN中有乘员的情况下(步骤ST504：是)，进入步骤ST505的处理。图像识别部7b在判定为在车辆V的室内IN无乘员的情况下(步骤ST504：否)，进入步骤ST510的处理。

信息处理部7a在步骤ST505的处理中，控制车外通信部3，经由车外通信部3而在与外部设备CL之间进行相互通信(步骤ST505)。在这种情况下，服务执行部7d将构成服务动作部6的车内用显示器62、扬声器63、话筒64等的动作设定为ON，并且设定为能够执行基于信息处理部7a的相互通信的状态。信息处理部7a例如从外部设备CL经由车外通信部3而接收由操作员输入到外部设备CL的输出信息。而且，服务执行部7d从车内用显示器62向室内IN的乘员显示在已接收到的输出信息中包含的图像信息。另外，服务执行部7d从扬声器63向室内IN的乘员输出在已接收到的输出信息中包含的声音信息。基于此，例如，如图4所示，服务执行部7d例如能够在使操作员的图像显示在车内用显示器62的同时，从扬声器63输出“有什么问题吗？”等语音引导。需要说明的是，在这种情况下，服务执行部7d也可以例如不是从外部设备CL发送的输出信息，而是根据由操作员输入到外部设备CL的指令信息来读取预先存储在存储部7B中的图像信息、声音信息。而且，服务执行部7d也可以将从存储部7B读到的图像信息、声音信息从车内用显示器62、扬声器63输出。另外，信息处理部7a例如控制车外通信部3，将由话筒64收集到的乘员的语音信息经由车外通信部3而向外部设备CL发送。其结果，服务执行部7d例如能够进行室内IN的乘员与外部设备CL侧的操作员之间的相互通信，能够实现思想的沟通。

接下来，服务执行部7d判定是否因为脏东西处理而需要车辆V的改乘(步骤ST506)。服务执行部7d例如可以根据由拍摄装置51拍摄到的图像信息来判定是否需要车辆V的改乘。另外，服务执行部7d也可以根据由在步骤ST502中确认了事件详情的操作员、在步骤ST505进行了相互通信的操作员经由外部设备CL、车外通信部3等而输入的信息，来判定是否需要车辆V的改乘。服务执行部7d在判定为需要车辆V的改乘的情况下(步骤ST506：是)，进入步骤ST507的处理。服务执行部7d在判定为不需要车辆V的改乘的情况下(步骤ST506：否)，结束残留物应对处理。

服务执行部7d在步骤ST507的处理中，要求调配替代车辆(步骤ST507)。在这种情况下，信息处理部7a例如控制车外通信部3，并将与由服务执行部7d已要求的替代车辆的调配相关的信息经由车外通信部3而向构成中心的外部设备CL发送。外部设备CL如果接到与替代车辆的调配相关的信息，则例如将该车辆V的当前位置附近的空车作为替代车辆而调配到该车辆V的当前位置。

接下来，服务执行部7d控制车内用显示器62、扬声器63等，引导室内IN的乘员下车(步骤ST508)。

接下来，服务执行部7d判定室内IN的乘员的下车是否完成(步骤ST509)。服务执行部7d例如能够根据由拍摄装置51拍摄到的图像信息来判定室内IN的乘员的下车是否完成。服务执行部7d在判定为室内IN的乘员完成下车的情况下(步骤ST509：是)，进入步骤ST510的处理。服务执行部7d在判定为室内IN的乘员的下车未完成的情况下(步骤ST509：否)，返回到步骤ST508的处理，重复执行以后的处理。

服务执行部7d在步骤ST510的处理中使车辆V返回从业者所管理的维修基地等(步骤ST510)，并结束残留物应对处理。在这种情况下，服务执行部7d利用ECU 100来控制行驶***致动器111，并使车辆V自动返回到维修基地等。而且，从业者对返回到维修基地等的车辆V实施清扫等必要的处置。

图像识别部7b在步骤ST511的处理中判定在室内IN的残留物是否为乘员的遗失物(步骤ST511)。图像识别部7b例如可以根据由拍摄装置51拍摄到的图像信息，判定对室内IN的残留物是否为乘员的遗失物。另外，图像识别部7b也可以根据从在步骤ST502中确认了事件详情的操作员经由外部设备CL、车外通信部3等而输入的信息，来判定在室内IN的残留物是否为乘员的遗失物。图像识别部7b在判定为在室内IN的残留物是乘员的遗失物的情况下(步骤ST511：是)，进入步骤ST512的处理。图像识别部7b在判定为在室内IN的残留物不是乘员的遗失物的情况下(步骤ST511：否)，例如确定为残留物既不是脏东西也不是乘员的遗失物等，并结束残留物应对处理。在这种情况下，信息处理部7a例如也可以控制车外通信部3，并将表示内容为残留物既不是脏东西也不是乘员的遗失物等的信息经由车外通信部3而向外部设备CL发送。

服务执行部7d在步骤ST512的处理中判定能否确定遗失物的持有者(步骤ST512)。服务执行部7d例如能够根据由拍摄装置51拍摄到的图像信息、在车辆V的预约时等已注册的利用者信息等，判定能否确定遗失物的持有者。服务执行部7d在判定为能够确定遗失物的持有者的情况下(步骤ST512：是)，进入步骤ST513的处理。服务执行部7d在判定为无法确定遗失物的持有者的情况下(步骤ST512：否)，进入步骤ST514的处理。

服务执行部7d在步骤ST513的处理中，向在步骤ST512中已确定的遗失物的持有者通知有遗失物落下的内容(步骤ST513)，并进入步骤ST514的处理。在这种情况下，信息处理部7a例如控制车外通信部3，并将表示内容为有遗失物的通知信息经由车外通信部3而向上述被确定的遗失物的持有者所持有的便携终端等发送。车辆V的利用者(持有者)所持有的便携终端的地址等例如在车辆V的预约时等预先登记到外部设备CL。需要说明的是，表示内容为有遗失物的通知信息也可以从外部设备CL向上述被确定的遗失物的持有者所持有的便携终端等发送。利用便携终端等接收了表示内容为有遗失物的通知信息的持有者也可以经由便携终端等而将遗失物的移交场所等登记到外部设备CL。

服务执行部7d在步骤ST514的处理中，判定室内IN的所有乘员是否已下车(步骤ST514)。服务执行部7d例如能够根据由拍摄装置51拍摄到的图像信息，来判定是否室内IN的所有乘员已下车。服务执行部7d在判定为室内IN的所有乘员已下车的情况下(步骤ST514：是)，进入步骤ST515的处理。服务执行部7d在判定为室内IN有乘员未下车的情况下(步骤ST514：否)，重复执行步骤ST514的处理。

服务执行部7d在步骤ST515的处理中判定遗失物的移交场所是否确定(步骤ST515)。在这种情况下，信息处理部7a例如控制车外通信部3，并从外部设备CL经由车外通信部3接收与遗失物的移交场所相关的信息。服务执行部7d在接收到与遗失物的移交场所相关的信息时，判定为遗失物的移交场所确定(步骤ST515：是)，并进入步骤ST516的处理。服务执行部7d在未接收到与遗失物的移交场所相关的信息时判定为遗失物的移交场所未确定(步骤ST515：否)，并进入步骤ST510的处理。

服务执行部7d在步骤ST516的处理中，使车辆V移动到基于与遗失物的移交场所相关的信息而确定的移交场所(步骤ST516)，并结束残留物应对处理。在这种情况下，服务执行部7d利用ECU 100来控制行驶***致动器111，并使车辆V自动地移动到遗失物的移交场所，将该遗失物移交给持有者。

接下来，参照图7的流程图，对未佩戴安全带用应对处理的一个例子的概况进行说明。

服务执行部7d在未佩戴安全带用应对处理中，首先，控制车内用显示器62、扬声器63等，并提醒室内IN的乘员注意佩戴安全带(步骤ST801)。

接下来，服务执行部7d判定室内IN的乘员的安全带佩戴是否完成(步骤ST802)。服务执行部7d例如可以根据由拍摄装置51拍摄到的图像信息来判定室内IN的乘员的安全带佩戴是否完成。服务执行部7d在判定为室内IN的乘员的安全带佩戴已完成的情况下(步骤ST802：是)，进入步骤ST803的处理。服务执行部7d在判定为室内IN的乘员的安全带佩戴未完成的情况下(步骤ST802：否)，进入步骤ST804的处理。

服务执行部7d在步骤ST803的处理中，允许车辆V出发(步骤ST803)，并结束未佩戴安全带用应对处理。

服务执行部7d在步骤ST804的处理中，不允许车辆V出发而使其待机(步骤ST804)，并返回到步骤ST801的处理，重复执行以后的处理。

接下来，参照图8的流程图，针对身体状况变差应对处理的一个例子的概况进行说明。

信息处理部7a在身体状况变差应对处理中，首先，控制车外通信部3，将与由图像识别部7b判定的事件的类别相关的发生事件类别信息经由车外通信部3而向外部设备CL发送。此处，信息处理部7a将表示室内IN的人物的身体状况变差的发生事件类别信息向外部设备CL发送。基于此，信息处理部7a将车辆V的室内IN的人物的身体状况变差的情况通知构成中心的外部设备CL(步骤ST1001)。

接下来，信息处理部7a与上述步骤ST502的处理同样地，控制车外通信部3，并从外部设备CL经由车外通信部3接收远程操作信息。基于此，信息处理部7a根据从外部设备CL经由车外通信部3而接收到的远程操作信息来控制检测部5，并利用来自外部设备CL的指示远程操作该检测部5。而且，信息处理部7a控制车外通信部3，并将由检测部5检测到的室内状况信息经由车外通信部3而向外部设备CL发送。基于此，操作员例如能够确认在车辆V的室内IN发生的事件详情(步骤ST1002)。

接下来，信息处理部7a与上述步骤ST505的处理同样地，控制车外通信部3，并经由车外通信部3而在与外部设备CL之间进行相互通信(步骤ST1003)。在这种情况下，服务执行部7d将构成服务动作部6的车内用显示器62、扬声器63、话筒64等的动作设定为ON，并成为能够执行基于信息处理部7a的相互通信的状态。其结果，服务执行部7d例如能够进行室内IN的乘员与外部设备CL侧的操作员之间的相互通信，并能够实现思想的沟通。

接下来，服务执行部7d判定是否具有紧急性(步骤ST1004)。服务执行部7d例如可以根据由拍摄装置51拍摄到的图像信息，来判定室内IN的人物的身体状况变差是否具有紧急性。另外，服务执行部7d也可以根据由在步骤ST1002中确认了事件详情的操作员、在步骤ST1003中进行了相互通信的操作员经由外部设备CL、车外通信部3等而输入的信息，来判定室内IN人物的身体状况变差是否具有紧急性。服务执行部7d在判定为具有紧急性的情况下(步骤ST1004：是)，进入步骤ST1005的处理。服务执行部7d在判定为不具有紧急性的情况下(步骤ST1004：否)，结束身体状况变差应对处理。

服务执行部7d在步骤ST1005的处理中，与上述步骤ST507的处理同样地，要求替代车辆的调配(步骤ST1005)。

接下来，服务执行部7d与上述步骤ST508的处理同样地，控制车内用显示器62、扬声器63等，并引导室内IN中的身体状况已变差的人物以外的乘员下车(步骤ST1006)。

接下来，服务执行部7d与上述步骤ST509的处理同样地，判定室内IN的身体状况已变差的人物以外的乘员的下车是否已完成(步骤ST1007)。服务执行部7d在判定为室内IN的身体状况已变差的人物以外的乘员已完成下车的情况下(步骤ST1007：是)，进入步骤ST1008的处理。服务执行部7d在判定为室内IN的身体状况已变差的人物以外的乘员未完成下车的情况下(步骤ST1007：否)，返回到步骤ST1006的处理，重复执行以后的处理。

服务执行部7d在步骤ST1008的处理中控制旋转灯65，并向车辆V的室外OU报知车辆V在紧急行驶中(步骤ST1008)。在这种情况下，服务执行部7d也可以控制车外用显示器61等，并向车辆V的室外OU显示车辆V正在紧急行驶中的内容。

接下来，服务执行部7d将车辆V作为急救车辆而向医院等运输(步骤ST1009)，结束身体状况变差应对处理。在这种情况下，服务执行部7d利用ECU 100来控制行驶***致动器111，并使车辆V载着身体状况已变差的人物自动地向医院等运输。

需要说明的是，在以上的说明中，以控制装置7执行将车辆V作为急救车辆而向医院等运输的处理作为身体状况变差应对处理的情况进行了说明，但不限于此，例如也可以执行向急救通报并且在该车辆V的附近要求急救车辆的处理。

接下来，参照图9的流程图，对可疑行为应对处理的一个例子的概况进行说明。

信息处理部7a在可疑行为应对处理中，首先，控制车外通信部3，并将与由图像识别部7b判定的事件的类别相关的发生事件类别信息经由车外通信部3而向外部设备CL发送。此处，信息处理部7a将表示室内IN的人物的可疑行为的发生事件类别信息向外部设备CL发送。基于此，信息处理部7a向构成中心的外部设备CL通知车辆V的室内IN的人物的可疑行为(步骤ST1201)。

接下来，信息处理部7a与上述步骤ST502的处理同样地，控制车外通信部3，并从外部设备CL经由车外通信部3而接收远程操作信息。基于此，信息处理部7a根据从外部设备CL经由车外通信部3而接收到的远程操作信息来控制检测部5，并根据来自外部设备CL的指示来远程操作该检测部5。而且，信息处理部7a控制车外通信部3，将由检测部5检测到的室内状况信息经由车外通信部3而向外部设备CL发送。基于此，操作员例如可以确认在车辆V的室内IN发生的事件详情(步骤ST1202)。

接下来，服务执行部7d判定是否具有紧急性(步骤ST1203)。服务执行部7d例如可以根据由拍摄装置51拍摄到的图像信息来判定室内IN的人物的可疑行为是否具有紧急性。另外，服务执行部7d也可以根据由在步骤ST1202中确认了事件详情的操作员经由外部设备CL、车外通信部3等而输入的信息来判定室内IN的人物的可疑行为是否具有紧急性。服务执行部7d在判定为具有紧急性的情况下(步骤ST1203：是)，进入步骤ST1204的处理。服务执行部7d在判定为不具有紧急性的情况下(步骤ST1203：否)，结束可疑行为应对处理。

服务执行部7d在步骤ST1204的处理中，锁定可疑行为对象的安全带(步骤ST1204)。在这种情况下，服务执行部7利用ECU 100控制安全带装置112，锁定可疑行为对象的安全带。

接下来，服务执行部7d与上述步骤ST507的处理同样地，要求替代车辆的调配(步骤ST1205)。

接下来，服务执行部7d与上述步骤ST508的处理同样地，控制车内用显示器62、扬声器63等，引导室内IN的可疑行为对象以外的乘员下车(步骤ST1206)。

接下来，服务执行部7d与上述步骤ST509的处理同样地，判定室内IN的可疑行为对象以外的乘员是否已完成下车(步骤ST1207)。服务执行部7d在判定为室内IN的可疑行为对象以外的乘员已完成下车的情况下(步骤ST1207：是)，进入步骤ST1208的处理。服务执行部7d在判定为室内IN的可疑行为对象以外的乘员未完成下车的情况下(步骤ST1207：否)，返回步骤ST1206的处理，重复执行以后的处理。

服务执行部7d在步骤ST1208的处理中，锁定车辆V的上下车用的门(步骤ST1208)。在这种情况下，服务执行部7d利用ECU 100控制门装置113，并锁定车辆V的上下车用的门。

接下来，服务执行部7d控制旋转灯65，向车辆V的室外OU报知车辆V正在紧急行驶中(步骤ST1209)。在这种情况下，服务执行部7d也可以控制车外用显示器61等，向车辆V的室外OU显示车辆V正在紧急行驶中。

接下来，服务执行部7d使车辆V作为警察车辆而向警察局等运输(步骤ST1210)，并结束可疑行为应对处理。在这种情况下，服务执行部7d利用ECU 100来控制行驶***致动器111，并使车辆V载着可疑行为对象自动地向警察局等运输。

需要说明的是，在以上的说明中，以控制装置7进行将车辆V作为警察车辆而向警察局等运输的处理作为可疑行为应对处理的情况进行了说明，但是限于此，例如也可以进行向警察通报并且在该车辆V的附近要求警察车辆的处理。

接下来，参照图10的流程图，对车内监视模块1中的控制的另一个例子的概况进行说明，然后，参照图11，对异常情况应对处理的具体例进行说明。该图10中说明的控制典型地被与图5中说明的控制并行地执行。

首先，控制装置7例如在车辆V的点火被设定为ON时，将车内监视模块1所构成的***设定为ON(步骤ST21)。

接下来，控制装置7的信息处理部7a控制声压传感器53，检测车辆V的室内IN的声音·语音，从而检测室内状况信息。而且，信息处理部7a获取包含该室内IN的声音信息在内的室内状况信息(步骤ST22)。

接下来，控制装置7的语音对话处理部7c对声音信息的声压进行测量，该声音信息表示在步骤ST22中获取到的室内状况信息中包含的车辆V的室内IN的声音·语音(步骤ST23)。

接下来，语音对话处理部7c根据在步骤ST23中测量到的声压来判定在该车辆V的室内IN发生的事件的类别。此处，图像识别部7b判定在步骤ST23中测量到的声压是否为预先设定的阈值以上(步骤ST24)。

语音对话处理部7c在判定为声压是阈值以上的情况下(步骤ST24：是)，判定为室内IN的异常情况，来作为在车辆V的室内IN发生的事件的类别，并进入步骤ST25的处理。控制装置7的服务执行部7d在步骤ST25的处理中，执行异常情况应对处理(步骤ST25)，并进入步骤ST26的处理。语音对话处理部7c在判定为声压小于阈值的情况下(步骤ST24：否)，跳过步骤ST25的异常情况应对处理而进入步骤ST26的处理。

控制装置7在步骤ST26的处理中，例如判定车内监视模块1所构成的***是否伴随着车辆V的点火的OFF等而被设定为OFF(步骤ST26)。控制装置7在判定为***被设定为OFF的情况下(步骤ST26：否)，返回骤ST22的处理，重复执行以后的处理。控制装置7在判定为***被设定为OFF的情况下(步骤ST26：是)，结束该控制。

接下来，参照图11的流程图，对异常情况应对处理的一个例子的概况进行说明。

信息处理部7a在异常情况应对处理中，首先，控制车外通信部3，并将与由语音对话处理部7c判定的事件的类别相关的发生事件类别信息经由车外通信部3而向外部设备CL发送。此处，信息处理部7a将表示室内IN的异常情况的发生事件类别信息向外部设备CL发送。基于此，信息处理部7a向构成中心的外部设备CL通知车辆V的室内IN的异常情况(步骤ST2501)。

接下来，信息处理部7a与上述步骤ST502的处理同样地，控制车外通信部3，并从外部设备CL经由车外通信部3而接收远程操作信息。基于此，信息处理部7a根据从外部设备CL经由车外通信部3而接收到的远程操作信息来控制检测部5，并利用来自外部设备CL的指示而远程操作该检测部5。而且，信息处理部7a控制车外通信部3，将由检测部5检测到的室内状况信息经由车外通信部3而向外部设备CL发送。基于此，操作员例如能够确认在车辆V的室内IN发生的事件详情(步骤ST2502)。

接下来，图像识别部7b与上述步骤ST504的处理同样地，判定车辆V的室内IN是否有乘员(有无乘员)(步骤ST2503)。图像识别部7b在判定为车辆V的室内IN有乘员的情况下(步骤ST2503：是)，进入步骤ST2504的处理。图像识别部7b在判定为车辆V的室内IN无乘员的情况下(步骤ST2503：否)，跳过步骤ST2504的处理，进入步骤ST2505的处理。

信息处理部7a在步骤ST2504的处理中，与上述步骤ST505的处理同样地，控制车外通信部3，经由车外通信部3而在与外部设备CL之间进行相互通信(步骤ST2504)，进入步骤ST2505的处理。在这种情况下，服务执行部7d将构成服务动作部6的车内用显示器62、扬声器63、话筒64等的动作设定为ON，并且设定为能够执行基于信息处理部7a的相互通信的状态。其结果，服务执行部7d例如能够进行室内IN的乘员与外部设备CL侧的操作员之间的相互通信，且能够实现思想的沟通。

服务执行部7d在步骤ST2505的处理中，与上述步骤ST1004的处理同样地，判定是否具有紧急性(步骤ST2505)。服务执行部7d例如能够根据由拍摄装置51拍摄到的图像信息来判定室内IN的异常情况是否具有紧急性。另外，服务执行部7d也可以根据由在步骤ST2502中确认了事件详情的操作员、在步骤ST2504中进行了相互通信的操作员经由外部设备CL、车外通信部3等而输入的信息，来判定室内IN的异常情况是否具有紧急性。服务执行部7d在判定为具有紧急性的情况下(步骤ST2505：是)，进入步骤ST2506的处理。服务执行部7d在判定为不具有紧急性的情况下(步骤ST2505：否)，跳过步骤ST2506的处理而结束异常情况应对处理。

服务执行部7d在步骤ST2505的处理中，向车辆V的附近派遣警察车辆、急救车辆等、或者使车辆V返回从业者所管理的维修基地等(步骤ST510)，并结束异常情况应对处理。在这种情况下，服务执行部7d也可以利用ECU 100控制行驶***致动器111来使车辆V自动地返回到维修基地等。而且，从业者也可以对已返回到维修基地等的车辆V实施必要的处置。

以上说明的车内监视模块1、监视***500中，控制装置7根据由检测部5检测到的车辆V的室内IN的状况来判定在该车辆V的室内IN发生的事件的类别。而且，车内监视模块1中，控制装置7执行根据已判定的事件的类别来控制服务动作部6并且使该服务动作部6进行与该事件的类别对应的动作的处理。在这样的结构中，车内监视模块1将检测部5、服务动作部6以及控制装置7等组装于箱体2，并且单元化而设置在车辆V的室内IN的上方，此处设置在车顶部件RF。根据该结构，车内监视模块1通过将主要部分单元化后配置在车辆V的车顶部件RF，从而能够从室内IN的上方的该车顶部件RF侧集中监视车辆V的室内IN。其结果，车内监视模块1能够恰当地监视车辆V的室内IN。在这种情况下，车内监视模块1即使例如是被应用于驾驶员自身不在的能够执行完全自动驾驶的车辆V中的情况，也能够替代驾驶员等来监视车辆V的室内IN，并且能够根据状况进行各种各样的应对处理。其结果，车内监视模块1例如能够宛如驾驶员乘坐那样安全、安心、舒适地运用车辆V。

此处，以上说明的车内监视模块1、监视***500中，控制装置7能够根据由构成检测部5的拍摄装置51拍摄到的车辆V的室内IN的图像来判定在该车辆V的室内IN发生的事件的类别。其结果，车内监视模块1能够根据车辆V的室内IN的图像来恰当地监视车辆V的室内IN。

另外，以上说明的车内监视模块1、监视***500中，控制装置7能够根据由构成检测部5的声压传感器53检测到的车辆V的室内IN的声音来判定在该车辆V的室内IN发生的事件的类别。其结果，车内监视模块1能够根据车辆V的室内IN的声音来恰当地监视车辆V的室内IN。

另外，以上说明的车内监视模块1、监视***500中，控制装置7控制车外通信部3，并将与已判定的事件的类别相关的信息经由该车外通信部3而向外部设备CL发送。根据该结构，车内监视模块1能够在从外部设备CL接受各种各样的云服务的同时，使服务动作部6进行与在室内IN发生的事件的类别对应的动作。另外，根据该结构，车内监视模块1能够运用为管理外部设备CL的从业者的操作员等根据在室内IN发生的事件的类别在需要时进行应对即可，而不用时常监视车辆V的室内IN。其结果，车内监视模块1例如能够提高管理外部设备CL的从业者的业务效率。

更详细而言，以上说明的车内监视模块1、监视***500中，控制装置7能够控制车内用显示器62、扬声器63，并且输出从外部设备CL经由车外通信部3而接收到的输出信息。根据该结构，车内监视模块1能够由管理外部设备CL的从业者的操作员等经由车内用显示器62、扬声器63而向车辆V的室内IN输出各种各样的信息。其结果，车内监视模块1能够根据在室内IN发生的事件的类别，采取更精细的应对。

另外，以上说明的车内监视模块1、监视***500中，控制装置7能够根据从外部设备CL经由车外通信部3而接收到的远程操作信息，控制检测部5，并且远程操作该检测部5。进一步地，车内监视模块1中，控制装置7能够将与由检测部5检测到的车辆V的室内IN的状况相关的室内状况信息经由车外通信部3而向外部设备CL发送。在这一点上，车内监视模块1也能够与在室内IN发生的事件的类别对应地采取更精细的应对。

进一步地，以上说明的车内监视模块1、监视***500中，控制装置7也能够经由车内通信部4而控制箱体2外的车载设备101，并使该车载设备101进行与在室内IN发生的事件的类别对应的动作。其结果，车内监视模块1例如能够与成构成车辆V的车载设备101的行驶***致动器111、安全带装置112、门装置113等一起，与在室内IN发生的事件的类别对应地采用更精细的应对。

此处，在以上说明的车内监视模块1、监视***500中，作为一个例子，能够区别地判定在室内IN产生残留物、室内IN的人物未佩戴安全带、室内IN的人物的身体状况变差、室内IN的人物的可疑行为以及室内IN的异常情况。而且，车内监视模块1能够使服务动作部6进行与对室内IN产生残留物、室内IN的人物未佩戴安全带、室内IN的人物的身体状况变差、室内IN的人物的可疑行为以及室内IN的异常情况的每个相对应的动作。

需要说明的是，上述本发明的实施方式涉及的车内监视模块不限于上述实施方式，能够在权利要求的保护范围内进行各种改变。

在以下的说明中，作为一个例子，以车辆V为公共汽车、出租车、拼车等由特定从业者等管理并且能够完全自动驾驶的车辆为例进行了说明，但不限于此。车辆V例如也可以是根据车辆V的驾驶员的驾驶操作来控制车辆V的行动的能够手动驾驶的车辆。

在以上的说明中，车内监视模块1以将车外通信部3、车内通信部4、检测部5、服务动作部6以及控制装置7组装于箱体2并被单元化的例子进行了说明，但不限于此。车内监视模块1例如也可以是将车外通信部3、车内通信部4与箱体2分开设置并且与控制装置7可通信地连接的结构。另外，车内监视模块1也可以是不具有车外通信部3、车内通信部4自身的结构。另外，车内监视模块1只要至少将构成检测部5的拍摄装置51、雷达/声纳52、声压传感器53中的任一组装于箱体2即可，也可以是检测部5的一部分与箱体2分开设置并且与控制装置7可通信地连接的结构。同样地，车内监视模块1只要至少将构成服务动作部6的车外用显示器61、车内用显示器62、扬声器63、话筒64、旋转灯65中的任一组装于箱体2即可，也可以是服务动作部6的一部分与箱体2分开设置并且与控制装置7可通信地连接的结构。例如，扬声器63、话筒64也可以设置于头枕。

另外，在以上的说明中，以箱体2被设置于车辆V的车顶部件RF的情况进行了说明，但是不限于此，只要是室内IN的上方，也可以设置在室内IN的侧壁部件的车顶部件RF附近。

在以上的说明中，作为一个例子，以图1所示的检测部5被构成为包含拍摄装置51、雷达/声纳52以及声压传感器53的情况进行了说明，但是不限于此。检测部5也可以被构成为除了拍摄装置51、雷达/声纳52、声压传感器53以外的其他检测器。例如，以上说明的话筒64也可以兼用作检测部5的声音检测装置。在这种情况下，检测部5可以具有话筒64和声压传感器53这两者来作为声音检测装置，也可以仅具有话筒64。另外，在以上的说明中，服务动作部6例如不限于车外用显示器61、车内用显示器62、扬声器63、话筒64、旋转灯65，例如，也可以被构成为具有输出座位振动等的触觉信息输出装置等来作为信息输出装置。另外，服务动作部6也可以被构成为除了信息输出装置以外，还包含其他动作部。

在以上的说明中，虽然控制装置7以图像识别部7b根据由拍摄装置51拍摄到的车辆V的室内IN的图像来判定在该车辆V的室内IN发生的事件的类别的情况进行了说明，但不限于此。另外，虽然控制装置7以语音对话处理部7c根据由声压传感器53检测到的车辆V的室内IN的声音来判定在该车辆V的室内IN发生的事件的类别的情况进行了说明，但不限于此。控制装置7也可以例如以根据由雷达/声纳52、其他检测器检测到的室内状况信息来判定在车辆V的室内IN发生的事件的类别。例如，控制装置7除了室内IN的图像、室内IN的声音之前，也可以根据作为室内状况信息的室内IN的振动、室内IN的臭味、室内IN的气体(有毒气体、香烟的烟等)、室内IN的热等来判定在该车辆V的室内IN发生的事件的类别。另外，在以上的说明中，作为事件的类别，虽然控制装置7以判定对室内IN产生残留物、室内IN的人物未佩戴安全带、室内IN的人物的身体状况变差、室内IN的人物的可疑行为或者室内IN的异常情况为例进行了说明，但不限于此。另外，残留物应对处理、未佩戴安全带用应对处理、身体状况变差应对处理、可疑行为应对处理、异常情况应对处理等的内容不限于上述记载。

在以上的说明中，语音对话处理部7c虽然以在由声压传感器53检测到的车辆V的室内IN的声音法声压为预先设定的阈值以上的情况下判定为室内IN的异常情况为例进行了说明，但不限于此。语音对话处理部7c也可以与图像识别部7b同样地使用各种公知的人工智能技术来判定在车辆V的室内IN发生的事件的类别。例如，语音对话处理部7c也可以根据由检测部5检测到的室内状况信息、在存储部7B中存储的事件类别判定信息等，来判定在车辆V的室内IN发生的事件的类别。在这种情况下，语音对话处理部7c例如也可以根据由构成声音检测装置的收音麦克风(例如，话筒64等)收集到的声音信息，在识别到“杀”、“住手”等特定词汇的情况下对室内IN的异常情况进行判定。

由以上说明的检测部5(拍摄装置51、雷达/声纳52、声压传感器53)检测到的室内状况信息例如也可以记录、保存在存储部7B、行车记录仪等的记录装置中。在这种情况下，车内监视模块1也可以通知乘员正在记录、保存室内状况信息。

以上说明的控制装置7虽然以与外部设备CL协作地执行使服务动作部6进行与事件的类别对应的动作的处理的情况进行了说明，但不限于此。控制装置7也可以不与外部设备CL协作，以由车内监视模块1完成的方式执行使服务动作部6进行与事件的类别对应的动作的处理。

在以上的图10中说明的控制也可以并入在图5中说明的控制。

以上说明的控制装置7也可以构成为各部独立地构成，并且该各部被连接为能够相互授受各种电信号，从而构成，一部分功能也可以由其他控制装置来实现。例如，语音对话处理部7c也可以设置在外部设备CL侧。另外，语音对话处理部7c例如也可以正确使用各种公知的人工智能技术来虚拟地承担管理外部设备CL的从业者的操作员的责任。另外，以上说明的程序、应用程序、各种数据等可以适当地更新，也可以储存在经由任意网络连接到车内监视模块1的服务器(例如，外部设备CL等)中。以上说明的程序、应用程序、各种数据等例如根据需要地，也可以下载其全部或者一部分。另外，例如，针对控制装置7所具备的处理功能，其全部或任意的一部分例如可以通过CPU等以及由该CPU等解释执行的程序来实现，另外，也可以作为基于布线逻辑等的硬件来实现。

Claims (9)

1.一种车内监视模块，其特征在于，包括：

检测部，所述检测部检测车辆的室内的状况；

服务动作部，所述服务动作部设置于所述车辆；

控制装置，所述控制装置能够执行以下处理：根据由所述检测部检测到的所述车辆的室内的状况，来判定在该车辆的室内发生的事件的类别，并根据已判定的所述事件的类别来控制所述服务动作部，且使该服务动作部进行与该事件的类别对应的动作；

箱体，所述箱体组装所述检测部、所述服务动作部以及所述控制装置以进行单元化，并且所述箱体设置于所述车辆的室内的上方，以及

所述车内监视模块具有能够与所述车辆的外部的外部设备通信的车外通信部，

所述服务动作部包括能够向所述车辆的室内输出信息的信息输出装置，所述控制装置能够执行以下处理：控制所述车外通信部，并将与已判定的所述事件的类别相关的信息经由该车外通信部而向所述外部设备发送，并且控制所述信息输出装置，并输出从所述外部设备经由所述车外通信部而接收到的信息。

2.根据权利要求1所述的车内监视模块，其特征在于，

所述检测部包括通过拍摄所述车辆的室内的图像来检测所述车辆的室内的状况的拍摄装置，

所述控制装置根据由所述拍摄装置拍摄到的所述车辆的室内的图像来判定在该车辆的室内已发生的所述事件的类别。

3.根据权利要求1所述的车内监视模块，其特征在于，

所述检测部包括通过检测所述车辆的室内的声音来检测所述车辆的室内的状况的声音检测装置，

所述控制装置根据由所述声音检测装置检测到的所述车辆的室内的声音来判定在该车辆的室内已发生的所述事件的类别。

4.根据权利要求2所述的车内监视模块，其特征在于，

所述检测部包括通过检测所述车辆的室内的声音来检测所述车辆的室内的状况的声音检测装置，

所述控制装置根据由所述声音检测装置检测到的所述车辆的室内的声音来判定在该车辆的室内已发生的所述事件的类别。

5.根据权利要求1所述的车内监视模块，其特征在于，

所述控制装置能够执行以下处理：根据从所述外部设备经由所述车外通信部而接收到的信息来控制所述检测部，并远程操作该检测部；以及控制所述车外通信部，并将与由所述检测部检测到的所述车辆的室内的状况相关的信息经由所述车外通信部而向所述外部设备发送。

6.根据权利要求1至5中任一项所述的车内监视模块，其特征在于，

所述车内监视模块具有能够与搭载于所述车辆的所述箱体外的车载设备通信的车内通信部，

所述控制装置能够执行以下处理：根据已判定的所述事件的类别来经由所述车内通信部来控制所述车载设备，并使该车载设备进行与该事件的类别对应的动作。

7.根据权利要求1至5中任一项所述的车内监视模块，其特征在于，

所述控制装置将对所述室内产生残留物、所述室内的人物未佩戴安全带、所述室内的人物身体状况变差、所述室内的人物的可疑行为或者所述室内的异常情况作为所述事件的类别进行判定。

8.根据权利要求6所述的车内监视模块，其特征在于，

所述控制装置将对所述室内产生残留物、所述室内的人物未佩戴安全带、所述室内的人物身体状况变差、所述室内的人物的可疑行为或者所述室内的异常情况作为所述事件的类别进行判定。

9.一种监视***，其特征在于，

所述监视***具有：搭载于车辆的车内监视模块；和设置于所述车辆的外部并且能够与所述车内监视模块相互收发信息的外部设备，

所述车内监视模块包括：

检测部，所述检测部检测所述车辆的室内的状况；

服务动作部，所述服务动作部设置于所述车辆；

控制装置，所述控制装置能够执行以下处理：根据由所述检测部检测到的所述车辆的室内的状况来判定在该车辆的室内发生的事件的类别，并根据已判定的所述事件的类别来控制所述服务动作部，且使该服务动作部进行与该事件的类别对应的动作；

箱体，所述箱体组装所述检测部、所述服务动作部以及所述控制装置以进行单元化，并且所述箱体设置在所述车辆的室内的上方，以及

所述车内监视模块具有能够与所述车辆的外部的外部设备通信的车外通信部，

所述服务动作部包括能够向所述车辆的室内输出信息的信息输出装置，

所述控制装置与所述外部设备协作地执行使所述服务动作部进行与所述事件的类别对应的动作的处理，所述控制装置能够执行以下处理：控制所述车外通信部，并将与已判定的所述事件的类别相关的信息经由该车外通信部而向所述外部设备发送，并且控制所述信息输出装置，并输出从所述外部设备经由所述车外通信部而接收到的信息。

Images