CN110861654A

CN110861654A - 一种提醒方法、装置、车辆、设备和存储介质

Info

Publication number: CN110861654A
Application number: CN201911144287.4A
Authority: CN
Inventors: 王一; 周荣刚; 谭北平
Original assignee: Beihang University; Beijing Mininglamp Software System Co ltd
Current assignee: Beihang University; Beijing Mininglamp Software System Co ltd
Priority date: 2019-11-20
Filing date: 2019-11-20
Publication date: 2020-03-06

Abstract

本申请提供了一种提醒方法、装置、车辆、设备和存储介质，其中，该方法包括：获取自动驾驶车辆在自动驾驶过程中驾驶员当前进行的次级任务类别；在获取到所述自动驾驶车辆发送的用于指示所述驾驶员接管驾驶的指示信息后，根据所述驾驶员当前进行的次级任务类别，确定对应的接管提示方式；根据所述接管提示方式，向对应的提醒设备发送启动指令，以使所述提醒设备对所述驾驶员进行提醒，通过上述方式，在需要驾驶员接管驾驶时，可以向驾驶员发出提醒信息，有利于使驾驶员能够及时地接管驾驶，进而有利于降低车辆出现事故的概率，从而有利于提高驾驶员的安全性。

Description

一种提醒方法、装置、车辆、设备和存储介质

技术领域

本申请涉及计算机技术领域，具体而言，涉及一种提醒方法、装置、车辆、设备和存储介质。

背景技术

随着科技的发展，自动驾驶技术被应用到越来越多的车辆上，从而为驾驶员提供更加便捷的驾驶方式，例如：驾驶员在使用车辆中的自动驾驶技术后，驾驶员的身份由操作者转变为监督者，从而大大减轻驾驶员的工作负荷，并且驾驶员可以有更多的时间来处理次级任务，其中，次级任务可以包括：打电话、发短信、写邮件、看视频等等。

车辆在自动驾驶的过程中，遇到需要人为参与的事件后，需要由驾驶员接管驾驶，以使车辆从自动驾驶模式切换到手动模式，但是此时驾驶员可能在进行次级任务，从而使得驾驶员无法及时地接管驾驶，导致车辆出现事故的概率增高，进而降低了驾驶员的安全性。

发明内容

有鉴于此，本申请实施例的目的在于提供一种提醒方法、装置、车辆、设备和存储介质，以提高驾驶员的安全性。

第一方面，本申请实施例提供了一种提醒方法，包括：

获取自动驾驶车辆在自动驾驶过程中驾驶员当前进行的次级任务类别；

在获取到所述自动驾驶车辆发送的用于指示所述驾驶员接管驾驶的指示信息后，根据所述驾驶员当前进行的次级任务类别，确定对应的接管提示方式；

根据所述接管提示方式，向对应的提醒设备发送启动指令，以使所述提醒设备对所述驾驶员进行提醒。

可选地，所述接管提示方式包括以下至少一种：

视觉类接管提示方式、听觉类接管提示方式和触觉类接管提示方式。

可选地，所述次级任务类别包括以下至少一种：

视觉类、听觉类和视听混合类。

可选地，所述根据所述驾驶员当前进行的次级任务类别，确定对应的接管提示方式，包括：

当所述次级任务类别为所述视觉类时，将听觉类接管提示方式和/或触觉类接管提示方式确定为对应的接管提示方式；

当所述次级任务类别为所述听觉类时，将视觉类接管提示方式和/或触觉类接管提示方式确定为对应的接管提示方式；

当所述次级任务类别为所述视听混合类时，将触觉类接管提示方式确定为对应的接管提示方式。

可选地，当确定出的所述接管提示方式为所述视觉类接管提示方式时，所述根据所述接管提示方式，向对应的提醒设备发送启动指令，包括：

获取所述驾驶员当前的眼动轨迹特征信息；

根据所述眼动轨迹特征信息，确定所述驾驶员当前注视的位置信息；

向所述位置信息对应的用于进行视觉类接管提示方式的提醒设备发送启动指令。

第二方面，本申请实施例提供了一种提醒装置，包括：

获取单元，用于获取自动驾驶车辆在自动驾驶过程中驾驶员当前进行的次级任务类别；

确定单元，用于在获取到所述自动驾驶车辆发送的用于指示所述驾驶员接管驾驶的指示信息后，根据所述驾驶员当前进行的次级任务类别，确定对应的接管提示方式；

发送单元，用于根据所述接管提示方式，向对应的提醒设备发送启动指令，以使所述提醒设备对所述驾驶员进行提醒。

可选地，所述接管提示方式包括以下至少一种：

可选地，所述次级任务类别包括以下至少一种：

视觉类、听觉类和视听混合类。

可选地，所述确定单元的配置在用于根据所述驾驶员当前进行的次级任务类别，确定对应的接管提示方式时，包括：

可选地，当确定出的所述接管提示方式为所述视觉类接管提示方式时，所述发送单元的配置在用于根据所述接管提示方式，向对应的提醒设备发送启动指令时，包括：

获取所述驾驶员当前的眼动轨迹特征信息；

第三方面，本申请实施例提供了一种自动驾驶车辆，包括如第一方面中任一项所述的提醒装置。

第四方面，本申请实施例提供了一种电子设备，包括：处理器、存储介质和总线，所述存储介质存储有所述处理器可执行的机器可读指令，当电子设备运行时，所述处理器与所述存储介质之间通过总线通信，所述处理器执行所述机器可读指令，以执行如第一方面中任一项所述的提醒方法的步骤。

第五方面，本申请实施例提供了一种计算机可读存储介质，所述计算机可读存储介质上存储有计算机程序，所述计算机程序被处理器运行时执行如第一方面中任一项所述的提醒方法的步骤。

本申请的实施例提供的技术方案可以包括以下有益效果：

在本申请中，在自动驾驶车辆自动驾驶的过程中，获取驾驶员当前进行的次级任务类别，以便对驾驶员当前进行的行为进行实施掌握，在获取到所述自动驾驶车辆发送的用于指示所述驾驶员接管驾驶的指示信息后，可以根据驾驶员当前进行的次级任务类别，确定对应的接管提示方式，然后根据确定出的接管提示方式，向对应的提醒设备发送启动指令，以便对应的提醒设备发出提醒信息对用户进行提醒，通过上述方式，在需要驾驶员接管驾驶时，可以向驾驶员发出提醒信息，有利于使驾驶员能够及时地接管驾驶，进而有利于降低车辆出现事故的概率，从而有利于提高驾驶员的安全性，并且，在对驾驶员进行提醒时，是根据驾驶员当前进行次级任务类别进行地针对性提醒，从而有利于使驾驶员快速响应该提醒，进一步提高了驾驶员的安全性。

为使本申请的上述目的、特征和优点能更明显易懂，下文特举较佳实施例，并配合所附附图，作详细说明如下。

附图说明

为了更清楚地说明本申请实施例的技术方案，下面将对实施例中所需要使用的附图作简单地介绍，应当理解，以下附图仅示出了本申请的某些实施例，因此不应被看作是对范围的限定，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他相关的附图。

图1为本申请实施例一提供的一种提醒方法的流程示意图；

图2为本申请实施例一提供的另一种提醒方法的流程示意图；

图3为本申请实施例二提供的一种提醒装置的结构示意图；

图4为本申请实施例三提供的一种电子设备的结构示意图。

具体实施方式

为使本申请实施例的目的、技术方案和优点更加清楚，下面将结合本申请实施例中附图，对本申请实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本申请一部分实施例，而不是全部的实施例。通常在此处附图中描述和示出的本申请实施例的组件可以以各种不同的配置来布置和设计。因此，以下对在附图中提供的本申请的实施例的详细描述并非旨在限制要求保护的本申请的范围，而是仅仅表示本申请的选定实施例。基于本申请的实施例，本领域技术人员在没有做出创造性劳动的前提下所获得的所有其他实施例，都属于本申请保护的范围。

实施例一

图1为本申请实施例一提供的一种提醒方法的流程示意图，如图1所示，该方法包括以下步骤：

步骤101、获取自动驾驶车辆在自动驾驶过程中驾驶员当前进行的次级任务类别。

具体的，为了在需要驾驶员接管驾驶时可以对驾驶员提供精准的提醒，需要获取驾驶员当前进行的次级任务类别，以便根据驾驶员当前进行的次级任务类别来确定驾驶员当前使用的感官都有哪些，从而针对驾驶员使用的感官来进行精准提醒，其中，次级任务包括但不限于：打电话、发短信、写邮件、听音乐、看视频等，在打电话何听音乐时使用的感官为听觉感官，在写邮件时使用的感官为视觉感官，在看视频时使用的感官包括听觉感官和视觉感官。

自动驾驶车辆在自动驾驶的过程中，可以通过内部摄像装置来获取驾驶员的图像，通过对图像进行分析来确定驾驶当前进行的次级任务类别，或者自动驾驶车辆可以和置于车辆内部的所有设备进行通信连接，自动驾驶车辆通过判断设备的使用情况来判断用户具体在使用哪个设备，通过判断驾驶员对当前使用的设备的操作情况来确定驾驶员当前进行的次级任务类别，当然还可以通过其他方式来获取自动驾驶车辆在自动驾驶过程中驾驶员当前进行的次级任务类别，关于得到驾驶员当前进行的次级任务类别的具体方式在此不做具体限定。

需要说明的是，具体包括哪些次级任务类型可以根据实际需要进行设置，在此不做具体限定。

步骤102、在获取到所述自动驾驶车辆发送的用于指示所述驾驶员接管驾驶的指示信息后，根据所述驾驶员当前进行的次级任务类别，确定对应的接管提示方式。

具体的，自动驾驶车辆在自动驾驶的过程中会对道路情况进行采集和分析，以及对自身车况进行分析，以便确定当前的道路和自身车况是否需要驾驶员来接管驾驶，例如：当自动驾驶车辆通过采集的道路图像确定出当前道路的车道线不清晰时，为了降低交通事故，此时需要向提醒装置发送用于指示驾驶员接管驾驶的指示信息，或者，当自动驾驶车辆检测到胎压不足或者油量较低的情况时，也需要向提醒装置发送用于指示驾驶员接管驾驶的指示信息，当然还可以包括出现其他情况时发送用于指示驾驶员接管驾驶的指示信息，关于具体需要发送用于指示驾驶员接管驾驶的指示信息的情况可以根据实际需要进行设定，例如：可以设定道路情况、自身车况和天气情况等不满足自动驾驶的要求时，发送用于指示驾驶员接管驾驶的指示信息，具体发送该指示信息的情况在此不做具体限定。

提醒装置在接收到该提示信息后，可以根据驾驶员当前进行的次级任务类别，确定驾驶员当前使用的感官，从而为驾驶员制定出精准的接管提示方式，例如：驾驶员当前进行的次级任务为听音乐时，确定出的接管提示方式可以为输出特定的音频，或者还可以包括特定的视觉提醒(如当自动驾驶车辆内部设置有灯光时，视觉提醒可以为使灯光按照指定的方式发光)，再或者还可以是采用触感提醒的方式进行提醒(如：使驾驶员的座椅进行振动提醒)，在确定对应的接管提醒方式时可以根据实际情况设置一种或多种提醒方式，关于如何根据次级任务类别确定对应的接管提醒方式的方法可以根据实际需要进行设置，并且确定出的接管提示方式的类型和数量也可以根据实际需要进行设置，在此不做具体限定。

步骤103、根据所述接管提示方式，向对应的提醒设备发送启动指令，以使所述提醒设备对所述驾驶员进行提醒。

具体的，提醒装置在获取到接管提示方式后，可以获知需要控制那些提醒设备来对驾驶员进行提醒，因此提醒装置可以向接管提示方式对应的提醒设备发送启动指令，以便该对应的提醒设备启动后按照预设的提醒方式对驾驶员进行提醒，从而可以使驾驶员放弃继续进行次级任务而接管驾驶，从而有利于降低车辆出现事故的概率，进而有利于提高驾驶员的安全性，并且，在对驾驶员进行提醒时，是根据驾驶员当前进行次级任务类别进行地针对性提醒，从而有利于使驾驶员快速响应该提醒，进一步提高了驾驶员的安全性。

在一个可行的实施方案中，所述接管提示方式包括以下至少一种：

具体的，在确定接管提示方式时，可以根据实际需要将上述提示方式中的至少一种提示方式确定为对应的接管提示方式，例如：在将其中一种接管提示方式确定为对应的接管提示方式时，可以根据预设规则来确定，如通过次级任务类别确定驾驶员当前使用的感官是视觉类感官时，可以使用听觉类接管提示方式或触觉类接管提示方式对驾驶员进行提醒，即：使用的提醒方式为驾驶员在进行次级任务类别时未使用的感官，当然，也可以使用视觉类接管提示方式，如驾驶员当前进行的次级任务为通过平板电脑看文件时，可以向平板电脑发送指示信息，以便平板电脑在屏幕上显示特定的内容来实现对驾驶员的提醒，通过上述方式可以对驾驶员进行精准的提醒，有利于使驾驶员快速接管驾驶，又例如：在将其中两种或三种接管提示方式确定为对应的接管提示方式时，也可以根据预设规则来确定，如通过次级任务类别确定驾驶员当前使用的感官是视觉类感官时，可以使用听觉类接管提示方式和触觉类接管提示方式对驾驶员进行提醒，即：使用的提醒方式为驾驶员在进行次级任务时未使用的感官，当然，也可以使用视觉类接管提示方式，以及选择听觉类接管提示方式或触觉类接管提示方式中的一种，如驾驶员当前进行的次级任务为通过平板电脑看文件时，可以向平板电脑发送指示信息，以便平板电脑在屏幕上显示特定的内容，以及启动自动驾驶车辆内的音响发出指定音频或者使驾驶员的座椅发生震动，通过上述两种接管提示方式来对驾驶员进行提醒，又例如：可以将上述三种提醒方式设置为对应的接管提示方式，通过将两种或三种接管提示方式设置为对应的接管提示方式可以增强对驾驶员提醒的力度，以及增加多驾驶员提醒的种类，从而有利于使驾驶员能够快速接管驾驶。

需要说明的是，具体使用哪种或者哪几种接管提示方式可以根据实际需要进行设置对应的规则或算法，在此不做具体限定。

在一个可行的实施方案中，所述次级任务类别包括以下至少一种：

视觉类、听觉类和视听混合类。

需要说明的是，关于具体设置几种次级任务类别，以及次级任务类别的具体设置方式可以根据实际需要进行设置，在此不做具体限定。

在一个可行的实施方案中，在执行步骤102时，可以通过以下方式实现：

当所述次级任务类别为所述视觉类时，将听觉类接管提示方式和/或触觉类接管提示方式确定为对应的接管提示方式；当所述次级任务类别为所述听觉类时，将视觉类接管提示方式和/或触觉类接管提示方式确定为对应的接管提示方式；当所述次级任务类别为所述视听混合类时，将触觉类接管提示方式确定为对应的接管提示方式。

具体的，在对驾驶员进行提醒时，使用的是驾驶员在进行次级任务时未使用到的感官，可以对驾驶员进行更佳精准的提醒，有利于使驾驶员快速接管驾驶。

需要说明的是，具体选择一种接管提示方式和两种接管提示方式可以根据实际需要进行设置，在此不做具体限定。

在一个可行的实施方案中，图2为本申请实施例一提供的另一种提醒方法的流程示意图，当确定出的所述接管提示方式为所述视觉类接管提示方式时，如图2所示，在执行步骤103时，可以通过以下步骤实现：

步骤201、获取所述驾驶员当前的眼动轨迹特征信息。

步骤202、根据所述眼动轨迹特征信息，确定所述驾驶员当前注视的位置信息。

步骤203、向所述位置信息对应的用于进行视觉类接管提示方式的提醒设备发送启动指令。

具体的，在确定出接管提示方式为视觉类接管提示方式时，为了增加引起驾驶员注意的概率，需要针对性的对驾驶员进行视觉提醒，如：需要在驾驶员注视的位置处进行视觉提醒，为了实现上述目的，需要获得驾驶员当前的眼动轨迹特征信息，根据眼动轨迹特征信息可以分析出驾驶员当前注视的位置，然后启动该位置处用于进行视觉类接管提示方式的提醒设备，以便该位置上的提醒设备进行视觉提醒，通过上述方式，有利于提高驾驶员注意到提醒的概率，从而有利于提高驾驶员接管驾驶的速度，进而有利于提高驾驶员的安全性。

需要说明的是，在本申请实施例一中涉及到的提醒设备可以根据实际需要进行设置，例如：用于进行视觉类接管提示方式的提醒设备可以是灯光，或者也可以是图像显示设备等，用于进行听觉类接管提示方式的提醒设备可以是自动驾驶车辆内部的音响设备，或者也可以是驾驶员佩戴的耳机等，用于进行触觉类接管提示方式的提醒设备可以是能够进行振动的座椅，或者佩戴驾驶员身上的能够进行触觉提醒的装置，关于具体的提醒设备在此不做具体限定。

实施例二

图3为本申请实施例二提供的一种提醒装置的结构示意图，如图3所示，该提醒装置包括：

获取单元31，用于获取自动驾驶车辆在自动驾驶过程中驾驶员当前进行的次级任务类别；

确定单元32，用于在获取到所述自动驾驶车辆发送的用于指示所述驾驶员接管驾驶的指示信息后，根据所述驾驶员当前进行的次级任务类别，确定对应的接管提示方式；

发送单元33，用于根据所述接管提示方式，向对应的提醒设备发送启动指令，以使所述提醒设备对所述驾驶员进行提醒。

在一种可行的实施方案中，所述接管提示方式包括以下至少一种：

在一种可行的实施方案中，所述次级任务类别包括以下至少一种：

视觉类、听觉类和视听混合类。

在一种可行的实施方案中，所述确定单元32的配置在用于根据所述驾驶员当前进行的次级任务类别，确定对应的接管提示方式时，包括：

在一种可行的实施方案中，当确定出的所述接管提示方式为所述视觉类接管提示方式时，所述发送单元33的配置在用于根据所述接管提示方式，向对应的提醒设备发送启动指令时，包括：

获取所述驾驶员当前的眼动轨迹特征信息；

关于实施例二的相关原理可参考实施例一的相关说明，在此不再详细说明。

本申请实施例二还提供了一种自动驾驶车辆，该自动驾驶车辆包括实施例二中涉及到的提醒装置。

实施例三

图4为本申请实施例三提供的一种电子设备的结构示意图，包括：处理器401、存储介质402和总线403，所述存储介质402存储有所述处理器401可执行的机器可读指令，当电子设备运行上述的提醒方法时，所述处理器401与所述存储介质402之间通过总线403通信，所述处理器401执行所述机器可读指令，以执行以下步骤：

在本申请实施例中，所述存储介质402还可以执行其它机器可读指令，以执行如实施例一中其它所述的方法，关于具体执行的方法步骤和原理参见实施例一的说明，在此不再详细赘述。

实施例四

本申请实施例四还提供了一种计算机可读存储介质，该计算机可读存储介质上存储有计算机程序，该计算机程序被处理器运行时执行以下步骤：

在本申请实施例中，该计算机程序被处理器运行时还可以执行其它机器可读指令，以执行如实施例一中其它所述的方法，关于具体执行的方法步骤和原理参见实施例一的说明，在此不再详细赘述。

在本申请所提供的实施例中，应该理解到，所揭露装置和方法，可以通过其它的方式实现。以上所描述的装置实施例仅仅是示意性的，例如，所述单元的划分，仅仅为一种逻辑功能划分，实际实现时可以有另外的划分方式，又例如，多个单元或组件可以结合或者可以集成到另一个***，或一些特征可以忽略，或不执行。另一点，所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些通信接口，装置或单元的间接耦合或通信连接，可以是电性，机械或其它的形式。

所述作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为单元显示的部件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。

另外，在本申请提供的实施例中的各功能单元可以集成在一个处理单元中，也可以是各个单元单独物理存在，也可以两个或两个以上单元集成在一个单元中。

所述功能如果以软件功能单元的形式实现并作为独立的产品销售或使用时，可以存储在一个计算机可读取存储介质中。基于这样的理解，本申请的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质中，包括若干指令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)执行本申请各个实施例所述方法的全部或部分步骤。而前述的存储介质包括：U盘、移动硬盘、只读存储器(ROM，Read-Only Memory)、随机存取存储器(RAM，Random Access Memory)、磁碟或者光盘等各种可以存储程序代码的介质。

最后应说明的是：以上所述实施例，仅为本申请的具体实施方式，用以说明本申请的技术方案，而非对其限制，本申请的保护范围并不局限于此，尽管参照前述实施例对本申请进行了详细的说明，本领域的普通技术人员应当理解：任何熟悉本技术领域的技术人员在本申请揭露的技术范围内，其依然可以对前述实施例所记载的技术方案进行修改或可轻易想到变化，或者对其中部分技术特征进行等同替换；而这些修改、变化或者替换，并不使相应技术方案的本质脱离本申请实施例技术方案的精神和范围。都应涵盖在本申请的保护范围之内。因此，本申请的保护范围应以所述权利要求的保护范围为准。

Claims

1.一种提醒方法，其特征在于，包括：

2.如权利要求1所述的提醒方法，其特征在于，所述接管提示方式包括以下至少一种：

3.如权利要求1所述的提醒方法，其特征在于，所述次级任务类别包括以下至少一种：

视觉类、听觉类和视听混合类。

4.如权利要求3所述的提醒方法，其特征在于，所述根据所述驾驶员当前进行的次级任务类别，确定对应的接管提示方式，包括：

5.如权利要求2或4所述的提醒方法，其特征在于，当确定出的所述接管提示方式为所述视觉类接管提示方式时，所述根据所述接管提示方式，向对应的提醒设备发送启动指令，包括：

获取所述驾驶员当前的眼动轨迹特征信息；

6.一种提醒装置，其特征在于，包括：

7.如权利要求6所述的提醒装置，其特征在于，所述接管提示方式包括以下至少一种：

8.一种自动驾驶车辆，其特征在于，包括如权利要求6至7中任一项所述的提醒装置。

9.一种电子设备，其特征在于，包括：处理器、存储介质和总线，所述存储介质存储有所述处理器可执行的机器可读指令，当电子设备运行时，所述处理器与所述存储介质之间通过总线通信，所述处理器执行所述机器可读指令，以执行如权利要求1至5中任一项所述的提醒方法的步骤。

10.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质上存储有计算机程序，所述计算机程序被处理器运行时执行如权利要求1至5中任一项所述的提醒方法的步骤。