CN107223101A - 车辆自动驾驶方法和车辆自动驾驶*** - Google Patents
车辆自动驾驶方法和车辆自动驾驶*** Download PDFInfo
- Publication number
- CN107223101A CN107223101A CN201680001428.5A CN201680001428A CN107223101A CN 107223101 A CN107223101 A CN 107223101A CN 201680001428 A CN201680001428 A CN 201680001428A CN 107223101 A CN107223101 A CN 107223101A
- Authority
- CN
- China
- Prior art keywords
- occupant
- automatic driving
- driving
- profile information
- vehicular automatic
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 100
- 230000003044 adaptive effect Effects 0.000 claims abstract description 39
- 238000006757 chemical reactions by type Methods 0.000 claims description 14
- 230000002708 enhancing effect Effects 0.000 claims description 14
- 230000008569 process Effects 0.000 claims description 14
- 230000001133 acceleration Effects 0.000 claims description 12
- 241001465754 Metazoa Species 0.000 claims description 11
- 238000005516 engineering process Methods 0.000 claims description 11
- 230000004044 response Effects 0.000 claims description 8
- 230000003862 health status Effects 0.000 claims description 7
- 230000036651 mood Effects 0.000 claims description 4
- 241000208340 Araliaceae Species 0.000 claims description 3
- 235000005035 Panax pseudoginseng ssp. pseudoginseng Nutrition 0.000 claims description 3
- 235000003140 Panax quinquefolius Nutrition 0.000 claims description 3
- 235000008434 ginseng Nutrition 0.000 claims description 3
- 230000008447 perception Effects 0.000 abstract description 10
- 230000001755 vocal effect Effects 0.000 description 8
- 238000004422 calculation algorithm Methods 0.000 description 7
- 238000001514 detection method Methods 0.000 description 5
- 230000000694 effects Effects 0.000 description 4
- 230000002996 emotional effect Effects 0.000 description 4
- 230000006399 behavior Effects 0.000 description 3
- 230000008859 change Effects 0.000 description 3
- 230000002452 interceptive effect Effects 0.000 description 3
- 206010011878 Deafness Diseases 0.000 description 2
- 230000009471 action Effects 0.000 description 2
- 238000010586 diagram Methods 0.000 description 2
- 230000010354 integration Effects 0.000 description 2
- 229910052573 porcelain Inorganic materials 0.000 description 2
- 238000003825 pressing Methods 0.000 description 2
- 238000012545 processing Methods 0.000 description 2
- 238000004458 analytical method Methods 0.000 description 1
- 230000008901 benefit Effects 0.000 description 1
- 230000015572 biosynthetic process Effects 0.000 description 1
- 230000036772 blood pressure Effects 0.000 description 1
- 210000004204 blood vessel Anatomy 0.000 description 1
- 230000037396 body weight Effects 0.000 description 1
- 238000004364 calculation method Methods 0.000 description 1
- 238000010224 classification analysis Methods 0.000 description 1
- 230000019771 cognition Effects 0.000 description 1
- 230000001149 cognitive effect Effects 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 230000001815 facial effect Effects 0.000 description 1
- 238000009434 installation Methods 0.000 description 1
- 235000013372 meat Nutrition 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000012544 monitoring process Methods 0.000 description 1
- 238000003058 natural language processing Methods 0.000 description 1
- 201000004409 schistosomiasis Diseases 0.000 description 1
- 238000004088 simulation Methods 0.000 description 1
- 238000005728 strengthening Methods 0.000 description 1
- XLYOFNOQVPJJNP-UHFFFAOYSA-N water Substances O XLYOFNOQVPJJNP-UHFFFAOYSA-N 0.000 description 1
Classifications
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W50/00—Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
- B60W50/0098—Details of control systems ensuring comfort, safety or stability not otherwise provided for
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W30/00—Purposes of road vehicle drive control systems not related to the control of a particular sub-unit, e.g. of systems using conjoint control of vehicle sub-units
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W40/00—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
- B60W40/08—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to drivers or passengers
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/50—Context or environment of the image
- G06V20/59—Context or environment of the image inside of a vehicle, e.g. relating to seat occupancy, driver state or inner lighting conditions
Landscapes
- Engineering & Computer Science (AREA)
- Automation & Control Theory (AREA)
- Transportation (AREA)
- Mechanical Engineering (AREA)
- Physics & Mathematics (AREA)
- Mathematical Physics (AREA)
- General Physics & Mathematics (AREA)
- Multimedia (AREA)
- Theoretical Computer Science (AREA)
- Human Computer Interaction (AREA)
- Traffic Control Systems (AREA)
- Control Of Driving Devices And Active Controlling Of Vehicle (AREA)
Abstract
提供了车辆自动驾驶方法和车辆自动驾驶***,车辆自动驾驶***包括:传感器,感测车内人员;轮廓信息获得单元,用于获得车内人员的轮廓信息;归类单元,对车内人员进行归类;以及自适应控制单元,根据所述归类,确定相应的自动驾驶行驶模式,并对车辆进行自适应控制。提供了通过车内感知来做自适应控制的方法和***,能够提供更为安全和高效的自动驾驶方法和***。
Description
技术领域
本发明总体地涉及车辆自动驾驶技术,更具体地涉及基于车内感知的车辆自动驾驶方法和车辆自动驾驶***。
背景技术
在自动驾驶***中,规划主要依据环境感知的结果前瞻模拟下一个时间段内各种可能的自动驾驶方案,包括速度调整和转向调整等;然后把最佳的方案传递到决策层去实现车辆的物理控制。环境感知主要是外部的物理道路感知和认知,以及和车辆周围运动目标的感知和认知等。
在现有的自动驾驶***中,主要依赖于外部环境的感知结果、以及来自车辆本身的速度传感器等来做运动规划和控制,对车内环境的感知较少,现有的对车内的感知一般限于对司机的状态的感知,如是否疲劳驾驶。
发明内容
根据本发明的一个方面,提供了一种车辆自动驾驶方法,包括:感测车内人员,获得车内人员的轮廓信息;对车内人员进行归类;以及根据所述归类,确定相应的自动驾驶行驶模式,并对车辆进行自适应控制。
进一步地,车辆自动驾驶方法还可以包括:在行驶过程中,持续接收车内人员的反馈;以及根据车内人员的反馈自适应调整自动驾驶的参数。
进一步地,在车辆自动驾驶方法中,车内人员的轮廓信息可以包括车内每个人偏好的行驶模式。
进一步地,在车辆自动驾驶方法中,每个人偏好的行驶模式可以由对应的行驶参数来表示。
进一步地,在车辆自动驾驶方法中,对车内人员进行归类可以包括:确定每个车内人员是否为病人;确定每个车内人员是否是老人、小孩或残疾人;以及确定是否每个人都设置了所偏好的驾驶模式。
进一步地,在车辆自动驾驶方法中,自动驾驶模式可以包括:舒适模式、普通模式和运动模式,以及所述根据所述归类,确定相应的自动驾驶行驶模式可以包括:确定车内人员是否有病人,如果有病人,则确定自动驾驶模式为舒适模式;如果车内人员没有病人,则确定车内每个人是否都有偏好的驾驶模式,如果车内每个人都有偏好的驾驶模式,则使用这些偏好的驾驶模式之中舒适度最高的驾驶模式;以及如果并非车内每个人都有偏好的驾驶模式,则确定不具有偏好的驾驶模式的人中是否存在老人、小孩或者残疾人;以及如果存在,则使用舒适模式。
进一步地,在车辆自动驾驶方法中,感测车内人员可以包括使用下述手段中的至少一个:摄像头、压力传感器和麦克风、指纹识别器、红外传感器。
进一步地,在车辆自动驾驶方法中,获得车内人员的轮廓信息可以包括:识别车内人员的身份,识别车内人员的身份包括基于身份信息数据库,通过下述身份识别技术中的一项或者其组合来识别车内人员的身份:人脸识别、声纹识别、指纹识别、虹膜识别、红外识别;以及基于识别得到的车内人员的身份,从轮廓信息数据库检索该车内人员的轮廓信息,在轮廓信息数据库中与车内人员的身份标识相关联地存储了轮廓信息。
进一步地,在车辆自动驾驶方法中,在轮廓数据库中未存储该车内人员的轮廓信息的情况下,可以接收车内人员的轮廓信息输入,并将其存储到数据库中。
进一步地,在车辆自动驾驶方法中,轮廓信息可以包括:年龄、性别、情绪、健康状态信息、偏好的行驶模式中的一项或多项。
进一步地,在车辆自动驾驶方法中,不同的模式可以对应于相关联的规划和控制参数,所述参数可以选自下列项目中的一个或多个:正常加速度、超常加速度、正常减速度、超常减速度、前轮偏角和车速比的最大值、安全距离、换道最小频率、换道安全车距。
进一步地,在车辆自动驾驶方法中,根据车内人员的反馈自适应调整自动驾驶的参数可以包括:响应于车内人员对当前驾驶状态的反馈式命令,利用预设的对应于所述反馈的参数和调整量来进行调整,所述反馈式命令指示对驾驶状态进行确定调整。
进一步地,在车辆自动驾驶方法中,当用户不再给出反馈式命令时,记录当前的参数作为该用户的偏好的驾驶模式参数。
进一步地,在车辆自动驾驶方法中,根据车内人员的反馈自适应调整自动驾驶的参数可以包括:响应于车内人员对当前驾驶状态的反馈式命令,采用增强学习方法进行调整。
进一步地,在车辆自动驾驶方法中,身份识别技术中的一个或多个可以运行在本地车载计算机***中、云端服务器中,或者以本地车载计算机***和云端服务器相互协作的方式运行。
进一步地,在车辆自动驾驶方法中,所述车内人员的身份信息数据库和轮廓信息数据库中的一个或两者存储在云端存储中。
进一步地,车辆自动驾驶方法还可以包括:感测车内是否存在特定动物和/或特定物品;基于感测到车内存在特定动物和/或特定物品,确定相应的自动驾驶行驶模式。
根据本发明的另一方面,提供了一种车辆自动驾驶***,可以包括:传感器,感测车内人员;轮廓信息获得单元,用于获得车内人员的轮廓信息;归类单元,对车内人员进行归类;以及自适应控制单元,根据所述归类,确定相应的自动驾驶行驶模式,并对车辆进行自适应控制。
进一步地,车辆自动驾驶***还可以包括:反馈接收单元,在行驶过程中,持续接收车内人员的反馈;以及所述自适应控制单元根据车内人员的反馈自适应调整自动驾驶的参数。
在一个示例中,车内人员的轮廓信息可以包括车内每个人偏好的行驶模式。
在一个示例中,在车辆自动驾驶***中,归类单元对车内人员进行归类可以包括:确定每个车内人员是否为病人;确定每个车内人员是否是老人、小孩或残疾人;以及确定是否每个人都设置了所偏好的驾驶模式。
在一个示例中,在车辆自动驾驶***中,自动驾驶模式可以包括:舒适模式、普通模式和运动模式,以及所述根据所述归类,确定相应的自动驾驶行驶模式包括:确定车内人员是否有病人,如果有病人,则确定自动驾驶模式为舒适模式;如果车内人员没有病人,则确定车内每个人是否都有偏好的驾驶模式,如果车内每个人都有偏好的驾驶模式,则使用这些偏好的驾驶模式之中舒适度最高的驾驶模式;以及如果并非车内每个人都有偏好的驾驶模式,则确定不具有偏好的驾驶模式的人中是否存在老人、小孩或者残疾人;以及如果存在,则使用舒适模式。
在一个示例中,根据车内人员的反馈自适应调整自动驾驶的参数可以包括:响应于车内人员对当前驾驶状态的反馈式命令,采用增强学习方法进行调整。
在一个示例中,在车辆自动驾驶***中,传感器还可以感测车内是否存在特定动物和/或特定物品;以及自适应控制单元基于感测到车内存在特定动物和/或特定物品,确定相应的自动驾驶行驶模式。
根据本发明的另一方面,提供了一种车辆自动驾驶方法,可以包括:感测车内人员,获得车内人员的轮廓信息;基于所获得的车内人员的轮廓信息,对车辆进行自适应控制。
本发明实施例的车辆自动驾驶***和方法关注车内人员的感知,并确定相应的自动驾驶行驶模式,并持续进行车内情况感知,并对车辆进行自适应控制,能够提供更为安全和高效的自动驾驶方法和***。
附图说明
从下面结合附图对本发明实施例的详细描述中,本发明的这些和/或其它方面和优点将变得更加清楚并更容易理解,其中:
图1示出了根据本发明一个实施例的车辆自动驾驶***100的结构示意框图。
图2示出了根据本发明一个实施例的轮廓信息获取单元模块120的功能结构图。
图3示出了根据本发明另一实施例的车辆自动驾驶***200的结构框图。
图4示出了根据本发明另一实施例的车辆自动驾驶***300的结构示意图。
图5示出了根据本发明一个实施例的车辆自动驾驶方法400的总体流程图。
图6描述根据本发明一个实施例的示例性车辆自动驾驶方法500的更详细过程。
图7示出了根据本发明实施例的示例性自适应控制方法600的流程图。
图8示出了根据本发明另一实施例的使用增强学习方法的示例性自适应控制方法700的流程图。
具体实施方式
为了使本领域技术人员更好地理解本发明,下面结合附图和具体实施方式对本发明作进一步详细说明。
轮廓信息(profile),为车内人员的资料,可以由车内人员注册得到,优选包括车内人员偏好的驾驶模式,还可以包括姓名、年龄、性别、健康状况、情绪等等。
自适应控制和/或调整,指根据车内人员的反馈来自动调整自动驾驶的参数,直至满足车内人员的要求。
本发明关注车内人员的感知,对车内人员进行归类分析,并确定相应的自动驾驶行驶模式,并持续进行车内情况感知,并对车辆进行自适应控制,能够提供更为安全和高效的自动驾驶方法和***。
图1示出了根据本发明一个实施例的车辆自动驾驶***100的结构示意框图。
车辆自动驾驶***100包括传感器110、轮廓信息获得单元120、归类单元130、自适应控制单元140。传感器110感测车内人员,轮廓信息获得单元120用于获得车内人员的轮廓信息,归类单元130对车内人员进行归类,自适应控制单元140,根据所述归类,确定相应的自动驾驶行驶模式,并对车辆进行自适应控制。
这里的轮廓信息获得单元120、归类单元130、自适应控制单元140可以由车载计算机的软件、硬件或者两者的结合来实现,也可以由车载计算机协同云端的存储和/或应用服务来实现,
在自动驾驶车辆内安装高性能嵌入式计算机***来处理传感器数据,执行感知、分析、规划、决策和控制等任务。车内计算机***包含CPU、内存和永久性存储介质等部件,以及可选的FPGA、ASIC、DSP、GPU等计算加速部件。车内计算机***可以是单机***,也可以是分布式***。如果是分布式***,其多个计算节点之间使用某种网络连接(如以太网等)。分布式***的多个节点可以是同构的、也可以是异构的,比如采用不同的体系结构和操作***。
车内计算机***可以独立运行,也可以连接到云20。云端的***可以存储大量来自各个车辆上传的驾驶员和乘客信息,并可以提供基于人脸识别和声纹识别等的身份识别服务。
这里的传感器为广义的概念,并不特指某一个传感器设备,而可以是传感器器件的集合。
感测车内人员包括感测车内人员的图像、声音、质量等等。
例如感测车内人员可以使用下述手段中的至少一个:摄像头、压力传感器和麦克风、指纹识别器、红外传感器。
关于车内传感器设备,可以考虑下面的设置。
(1)车内摄像头。可安装一个或多个摄像头,每个摄像头可以是单目、双目、深度摄像头。安装方式例如可以考虑下述两种之一。
安装方式一:每个座位前方安装一个正对人脸的摄像头,可以清晰拍到人脸的正面。
安装方式二:可以选择其他摄像头安装方式,比如使用一个摄像头拍摄多个座位,前提是保证能拍到所有驾驶员和乘客的脸的正面。
(2)每个座位上的压力(质量)传感器。可以实时的提供车内乘客人数信息,也可以通过质量信息识别乘客内是否有小孩等粗略年龄信息。
(3)麦克风。车内麦克风可以获取乘客的语音命令和反馈,通过自然语言处理来理解命令和反馈。并能根据声纹来识别不同的人。
麦克风安装方式:可以车内的中间位置安装一个,也可以在前排的中间位置和后排的中间位置各安装一个。
以上传感器器件仅为示例,可以视需要增加或减少传感器器件,任何现有的或未来出现的传感器器件均可以用于本发明。
关于轮廓信息获得单元120,这里的轮廓信息可以包括,例如但不限于,身份、年龄、性别、人脸特征、声纹特征、健康状态、情绪状态、年龄等等。
在一个优选示例中,车内人员的轮廓信息包括其偏好的行驶模式。在一个示例中,按照舒适程度,将行使模式分为舒适模式、普通模式和运动模式,舒适程度顺次降低,不同的行使模式对应于不同的规划和控制参数,比如:正常加速度、超常加速度、正常减速度、超常减速度、横向控制量最大值、安全距离、换道最小频率、换道安全车距等。需要说明的是,即便同为舒适模式,对于不同人来说,对应的参数也可以视不同的。例如,关于舒适模式,一般对于老人来说,希望车辆开的尽量平稳,因此希望加速度低些,换道频率低些;而一般对于青年人来说,则对于平稳性没有如此高的要求。因此,优选地,可以针对每个人定制其偏好的自动驾驶模式。
图2示出了根据本发明一个实施例的轮廓信息获取单元模块120的功能结构图。
轮廓信息获取单元模块120可以包括身份识别模块121、轮廓信息采集模块124、车内人员的其他属性和状态检测模块123以及轮廓信息综合模块122。
在一个示例中,轮廓信息可以如下获得:首先,由身份识别模块121识别车内人员的身份,例如,基于身份信息数据库,基于车内传感器感测得到的人脸特征、声纹特征、虹膜特征和红外特征等等,通过下述身份识别技术中的一项或者其组合来识别车内人员的身份:人脸识别、声纹识别、指纹识别、虹膜识别、红外识别;以及基于识别得到的车内人员的身份,从轮廓信息数据库检索该车内人员的轮廓信息,在轮廓信息数据库中与车内人员的身份标识相关联地存储了轮廓信息。这里的轮廓信息数据库和身份信息数据库可以是分开的,也可以是统一在一起共用的,这里的身份信息例如为车内人员的ID(手机号码,身份证信息)连同车内人员的人脸特征、声纹特征、手纹特征、虹膜特征、红外特征、血管特征等等能够唯一标识一个人身份的信息,基于通过传感器获得的感测信息(图像、声音、指纹等等)和身份信息数据库,通过识别技术来识别车内人员的身份。轮廓信息数据库中,与车内人员身份标识相关联地存储了轮廓信息,例如姓名、年龄、性别、健康状况、偏好的行使模式等等。
在身份信息数据库和/或轮廓信息数据库中缺少某个车内人员信息的情况下,轮廓信息采集模块124来采集新人的轮廓信息,可以通过例如语音交互方式来录入一些基本资料,比如姓名、年龄、性别、偏好的行驶模式等;车内摄像头可以拍摄多张照片,以及录制语音声纹、指纹等等,将这些信息形成身份信息记录和/或轮廓信息记录存储在身份信息数据库和/或轮廓信息数据库中。
除了获得身份信息数据库和/或轮廓信息数据库中已有的轮廓信息外,还可以由车内人员的其他属性和状态检测模块123实时地获得当前的车内人员信息,例如通过对摄像头拍摄的图像进行图像处理、通过测量车内人员的血压、心跳等等、或者通过与车内人员的语音交互来获得车内人员当前的情绪状态和当前的健康状况。
轮廓信息综合模块122综合来自轮廓信息数据库的信息、轮廓信息采集模块134采集的信息以及车内人员的其它属性和状态检测模块123的信息,得到各个车内人员的轮廓信息,以供后续的归类单元和自适应控制单元使用。
图2中所示的身份识别模块121(包括人脸识别模块、声纹识别模块、虹膜识别模块、指纹识别模块等)等模块和轮廓信息数据库、身份信息数据库可以运行和存储在车载计算机和/或云端。
回到图1,归类单元130对车内人员进行归类。例如,基于轮廓信息获得单元120获得的车内人员的轮廓信息,判断各个车内人员所属的类别,例如对车内人员进行归类包括:确定每个车内人员是否为病人;确定每个车内人员是否是老人、小孩或残疾人;以及确定是否每个人都设置了所偏好的驾驶模式。
自适应控制单元140根据所述归类,确定相应的自动驾驶行驶模式,并对车辆进行自适应控制。
自适应控制单元140根据所述归类,确定相应的自动驾驶行驶模式包括:
确定车内人员是否有病人,如果有病人,则确定自动驾驶模式为舒适模式;
如果车内人员没有病人,则确定车内每个人是否都有偏好的驾驶模式,如果车内每个人都有偏好的驾驶模式,则使用这些偏好的驾驶模式之中舒适度最高的驾驶模式;以及
如果并非车内每个人都有偏好的驾驶模式,则确定不具有偏好的驾驶模式的人中是否存在老人、小孩或者残疾人;以及如果存在,则使用舒适模式。
上述对车内人员的归类仅为优选示例,可以根据需要来进行不同的归类。
后续将结合方法流程图来详细说明自适应控制的过程。
图3示出了根据本发明另一实施例的车辆自动驾驶***200的结构框图。
相比于图1,车辆自动驾驶***200还包括反馈接收单元250。图3中的传感器210、轮廓信息获得单元220和归类单元230的结构和工作过程可以与图1所示的对应部分类似,这里不再赘述。
反馈接收单元250在行驶过程中,持续接收车内人员的反馈,自适应控制单元240根据车内人员的反馈自适应调整自动驾驶的参数。
有关接收车内人员的反馈的方式,可以为语音方式,通过语音识别模块来识别车内人员的反馈,例如比如“开快点、开慢点、开稳点、别太肉”等等;也可以为其他方式,例如在车上提供预定的实体控制按钮供按压等;或者是通过车内人员的手机上的车辆驾驶控制应用来进行反馈等等;或者可以用手势来给出反馈,这对于聋哑人特别适用;。
根据车内人员的反馈自适应调整自动驾驶的参数可以包括:一种是根据先验知识由算法预设每个命令需要调整的参数和调整量;另一种是采用增强学习的方法在大量的行驶中来学习确定这些参数值。
图4示出了根据本发明另一实施例的车辆自动驾驶***300的结构示意图。
相比于图3,图4的车辆自动驾驶***300还包括驾驶模式指令接收模块360,其它模块310、320、330、350可以与图3所示的对应模块相同,这里不再赘述。
驾驶模式指令接收模块360用于接收车内人员的显式指定车辆行驶模式,***提供若干预定义的行驶模式:比如普通模式、舒适模式、运动模式等等。有关接收车内人员的驾驶模式指令的方式,可以为语音方式,通过语音识别模块来识别车内人员的驾驶模式指令,例如比如“舒适模式”、“运动模式”等等;也可以为其他方式,例如在车上提供预定的实体控制按钮供按压等,例如两个按钮,一个表示“更好了”,一个表示“更差了”,当然也可以设计更多的按钮,也可以设计其它形式的反馈硬件等;或者可以用手势来给出反馈,这对于聋哑人特别适用;或者是通过车内人员的手机上的车辆驾驶控制应用来进行反馈等等。
在一个示例中,所述传感器还感测车内是否存在特定动物和/或特定物品,以及自适应控制单元基于感测到车内存在特定动物和/或特定物品,确定相应的自动驾驶行驶模式。例如,感测车内是否存在易碎品,例如瓷器、玻璃制品等,车内是否存在某些小动物,例如小猫或小狗等,从而调整自动驾驶行使模式,如在感测到存在瓷器时,调整自动驾驶行使模式为舒适模式,以较平稳地驾驶。
下面结合附图描述根据本发明实施例的车辆自动驾驶方法。车辆自动驾驶方法结合前文的车辆自动驾驶***来实现。
图5示出了根据本发明一个实施例的车辆自动驾驶方法400的总体流程图。
如图5所示,在步骤S410中,通过传感器感测车内人员,获得车内人员的轮廓信息。
在步骤S420中,对车内人员进行归类。
在步骤S430中,根据所述归类,确定相应的自动驾驶行驶模式,并对车辆进行自适应控制。
在一个示例中,车辆自动驾驶方法400还包括:在行驶过程中,持续接收车内人员的反馈;以及根据车内人员的反馈自适应调整自动驾驶的参数。
根据车内人员的反馈自适应调整自动驾驶的参数可以包括:响应于车内人员对当前驾驶状态的反馈式命令,利用预设的对应于所述反馈的参数和调整量来进行调整,所述反馈式命令指示对驾驶状态进行确定调整。
在一个示例中,当用户不再给出反馈式命令时,可以记录当前的参数作为该用户的偏好的驾驶模式参数,并更新该用户的轮廓信息至轮廓信息数据库。
在一个示例中,根据车内人员的反馈自适应调整自动驾驶的参数包括:响应于车内人员对当前驾驶状态的反馈式命令,采用增强学习方法进行调整。
在一个示例中,车内人员的轮廓信息可以包括,例如但不限于,身份、年龄、性别、人脸特征、声纹特征、健康状态、情绪状态、年龄等等。
每个人偏好的行驶模式可以由对应的行驶参数来表示,即可以针对每个人来定制起偏好的行使模式。
在一个示例中,对车内人员进行归类包括:确定每个车内人员是否为病人;确定每个车内人员是否是老人、小孩或残疾人;以及确定是否每个人都设置了所偏好的驾驶模式。
在一个示例中,自动驾驶模式可以包括:舒适模式、普通模式和运动模式,以及所述根据所述归类,确定相应的自动驾驶行驶模式包括:确定车内人员是否有病人,如果有病人,则确定自动驾驶模式为舒适模式;如果车内人员没有病人,则确定车内每个人是否都有偏好的驾驶模式,如果车内每个人都有偏好的驾驶模式,则使用这些偏好的驾驶模式之中舒适度最高的驾驶模式;以及如果并非车内每个人都有偏好的驾驶模式,则确定不具有偏好的驾驶模式的人中是否存在老人、小孩或者残疾人;以及如果存在,则使用舒适模式。
不同的驾驶模式对应于不同的规划和控制参数,这些参数例如有:正常加速度、超常加速度、正常减速度、超常减速度、前轮偏角和车速比的最大值、安全距离、换道最小频率、换道安全车距等等。
在一个示例中,感测车内人员包括使用下述手段中的至少一个:摄像头、压力传感器和麦克风、指纹识别器、红外传感器。
在一个示例中,获得车内人员的轮廓信息包括:识别车内人员的身份,识别车内人员的身份包括基于身份信息数据库,通过下述身份识别技术中的一项或者其组合来识别车内人员的身份:人脸识别、声纹识别、指纹识别、虹膜识别、红外识别;以及基于识别得到的车内人员的身份,从轮廓信息数据库检索该车内人员的轮廓信息,在轮廓信息数据库中与车内人员的身份标识相关联地存储了轮廓信息。
在一个示例中,在轮廓数据库中未存储该车内人员的轮廓信息的情况下,接收车内人员的轮廓信息输入,并将其存储到数据库中。
在一个示例中,身份识别技术中的一个或多个运行在云端服务器中,或者以本地车载计算机***和云端服务器相互协作的方式运行。类似地,其它应用服务也可以运行在本地车载计算机***,或运行在云端,或者以本地车载计算机***和云端服务器相互协作的方式运行。
类似地,车内人员的身份信息数据库和轮廓信息数据库中的一个或两者可以存储在本地计算机***和/或存储在云端存储中,或者以相互协作的方式存储在两者中。
在一个示例中,车辆自动驾驶方法还可以感测车内是否存在特定动物和/或特定物品;基于感测到车内存在特定动物和/或特定物品,确定相应的自动驾驶行驶模式。
作为具体示例,下面结合图6描述根据本发明一个实施例的示例性车辆自动驾驶方法500的更详细过程。
如图6所示,行程开始后在每个周期内,车载自动驾驶计算机***会读取传感器输入,由各个感知模块(如人脸识别、声纹识别等)进行处理,再由识别模块(如身份识别),最终按照一定的自适应算法来进行控制,直至行程结束。在自适应算法中可以考虑驾驶员和乘客的反馈来进行调整。
如图6所示,基于各个传感器器件例如摄像头、麦克风、体重传感器等的输入,各个识别模块进行处理,具体地,在步骤S510由人脸识别模块进行人脸识别,在步骤S520中由声纹识别模块进行声纹识别,在步骤S530中由车内人员其他属性和状态识别模块来识别车内人员的其他属性和状态。
下面分别详述之。
(1)人脸识别
具体地址,通过车载摄像头实时获取车内的人脸图像,根据人脸特征通过图像处理识别驾驶员和车内乘客人数,并可以识别驾驶员和车内乘客身份、年龄、性别、情绪等信息。
人脸识别模块可以运行在车载本地计算机***,或者运行在云端的服务器中,或者以协作方式运行在两个***中以获得更佳效果。
车内人员的身份、年龄、性别、人脸特征等信息保存在车载本地计算机***的永久性存储器,以及可选的云端存储中,例如存储在身份信息数据库和/或轮廓信息数据库中,如前所述,身份信息数据库和轮廓信息数据库两者可以合并为一,也可以分开存储和组织。
(2)声纹识别
具体地址,通过麦克风进行声纹识别,需要车载声纹识别模块发起和乘车人的语音交互来实现。
声纹识别模块可以运行在车载本地计算机***,或者运行在云端的服务器中,或者以协作方式运行在两个***中以获得更佳效果。
车内人员的身份、年龄、性别、声纹特征等信息可以保存在车载本地计算机***的永久性存储器,以及可选的云端存储中,例如存储在身份信息数据库和/或轮廓信息数据库中,如前所述,身份信息数据库和轮廓信息数据库两者可以合并为一,也可以分开存储和组织。
(3)车内人员的其他属性和状态检测
车内人员的其他属性和状态检测模块通过对摄像头、麦克风、压力传感器等传感器器件感测的信息进行处理,可以检测到更多的信息,包括人员数量、每个人的健康状态(健康、疲劳、生病、残疾等)、情绪状态(快乐、悲伤、愤怒、紧张、惊讶等)、年龄(儿童、青年、中年、老人)等。
车内人员的其他属性和状态等信息可以保存在车载本地计算机***的永久性存储器,以及可选的云端存储中,或者以协作方式运行在两个***中获得更佳效果。例如存储在身份信息数据库和/或轮廓信息数据库中,如前所述,身份信息数据库和轮廓信息数据库两者可以合并为一,也可以分开存储和组织。
回到图6,在步骤S540中,基于人脸识别S510、声纹识别S520和车内人员其他属性和状态识别S530的结果,参考本地/云端中存储的用户属性(例如身份信息数据库和轮廓信息数据库中存储的用户属性),来识别出车内人员的身份信息,获得车内人员的轮廓信息。这里的轮廓信息可以是从轮廓信息数据库检索得到的,或者如后续的基于①的来源而输入的(对于轮廓信息数据库中不存在该车内人员的记录的情况)、或者是由车内人员其他属性和状态识别收集到的,也可以是由上述各项组合得到。
此外,在车辆自动驾驶方法500中存在语音命令识别和处理路径。
在步骤S570中,识别语音命令。需要说明的是,语音命令的监测、识别和处理是存在于车辆自动驾驶的整个过程中的。
在识别到语音命令后,在步骤S580中,判断该语音命令是否为人工指定行驶模式。如果判断结果为“是(Y)”,则流程转到步骤S550的自适应控制步骤;如果判断结果为“否(N)”,则前进到步骤S590。
在步骤S590中,判断该语音命令是否为对行驶状况的反馈。如果判断结果为“是(Y)”,则流程转到步骤S550的自适应控制步骤;如果判断结果为“否(N)”,则前进到步骤S591。
在步骤S591中,判断该语音命令是否为进行人员信息录入。如果判断结果为“是(Y)”,则流程转到步骤S540(如图中的①所示),进行车内人员信息录入,其中在步骤S540中可以通过语音交互方式来录入一些基本资料,比如年龄、性别、偏好的行驶模式;以及车内摄像头可以拍摄多张照片,以及录制语音声纹、指纹等等,将这些信息作为身份识别信息和/或轮廓信息存储在车载计算机和/或云存储上;如果判断结果为“否(N)”,则确定其为无效命令,对其不予处理。
在本示例中,语音识别模块会识别上面这三种命令(人工指定行驶模式,对行驶状况的反馈,人员信息录入),并忽略其他无法识别的语音。根据需要,也可以设计、识别和处理其他命令。
语音识别模块可以运行在车载本地计算机***,或者运行在云端的服务器中,或者以协作方式运行在两个***中以获得更佳效果。
在步骤S550中,进行自适应控制。后面将参考图7给出自适应控制方法示例的详细描述。
在步骤S560中,判断是否车辆自动驾驶行程结束,如结果为“Y”,则过程结果,否则返回到过程开始,继续监视传感器的输入。
自适应的控制调整方法可以有两种,一种是根据先验知识由算法预设每个命令需要调整的参数和调整量。另一种是采用增强学习的方法在大量的行驶中来学习确定这些参数值。下面分别结合图7和图8对上述两种自适应控制调整方法的示例加以描述。
下面结合图7给出根据先验知识的自适应控制方法示例的详细描述。
图7示出了根据本发明实施例的示例性自适应控制方法600的流程图,自适应控制方法600可以应用于图6所示的步骤S550。
如图7所示,在步骤S610中,基于车内人员的轮廓信息,判断各个车内人员是否被归为病人,当确定某个车内人员被归为病人时,流程转到步骤S611,***默认采用舒适模式。如果基于车内人员的轮廓信息,确定车内人员中不存在病人,则流程前进到步骤S620。
在步骤S620中,判断车内人员是否每个人都有偏好模式,具体地址,检查每个车内人员的轮廓信息,看是否都设定了自己偏好的驾驶模式。如果步骤S620确定每个车内人员都有自己偏好的驾驶模式,则转到步骤S621,在步骤S621中,将车辆的驾驶模式设置为所有车内人员的偏好的驾驶模式之中舒适度最高的驾驶模式。
如果步骤S620确定不是每个车内人员都有自己偏好的驾驶模式,则前进到步骤S630。
在步骤S630中,判断未设定偏好的驾驶模式中的人中是否有老人、小孩和残疾人,如果判断结果为是,则转到步骤S631,在步骤S631中,默认使用舒适模式。
在步骤S640中,自适应控制单元收集传感器数据,接收车内人员的语音反馈。
在步骤S650中,判断是否存在语音反馈。在判断结果为是的情况下,前进到步骤S660,否则跳回到步骤S640。
在步骤S660中,根据每个人的语音反馈,自适应调节控制,并用这些特征来更新相应个人的行驶模式。比如自动驾驶***对舒适模式提供了默认的控制参数,而某个乘客要求行驶中的控制更平稳和安全,这时他会发出命令“再稳点”,自动驾驶***收到反馈命令后会对这些参数进行细微调整。而该乘客可能会反复发出命令来调整,直到最终不再调整时,***记录该乘客的个性化的舒适模式参数作为该乘客偏好的驾驶模式,并更新该乘客的轮廓信息至身份信息数据库和/或轮廓信息数据库。
在步骤S670中,判断车辆是否行驶结束,例如已经到达目的地,或者接收到乘客的停车命令等等。在步骤S670判断车辆行驶结束的情况下,过程结束,否则返回到步骤S640。
图8示出了根据本发明另一实施例的使用增强学习方法的示例性自适应控制方法700的流程图,自适应控制方法700可以应用于图6所示的步骤S550。
相比于图7,图8的不同点在于用使用增强学习方法调整参数控制量的步骤S750代替了步骤S660,以及不存在与图7的判定是否存在语音反馈的步骤S650对应的步骤。图8中其余的步骤和图7中对应标号的步骤类似,这里不再赘述。
图8中去掉了语音反馈判断步骤是因为,在增强学习方法中,将语音反馈作为增强学习方法的一个回报函数值,当车内人员没有语音时,也认为是存在一定回报函数值的,因此无需如图7那样特别判断是否存在语音反馈来作为流程跳转的条件。
下面给出使用增强学习方法调整自动驾驶规划和控制参数控制量的示例性实现的描述,该示例性实现可以用于图8的步骤S750。
增强学习算法有不同的分类,比如蒙特卡罗方法和时间差分法,但这些方法的共同点和核心包括状态集、动作集、回报函数。在一个示例中,状态集、动作集、回报函数定义如下。
状态集S:
s1:纵向车速
s2:纵向加速度
s3:横向速度
s4:横向加速度
s5:和本车道前车之间距离
s6:和本车道后车之间距离
s7:和左侧车道前车之间距离
s8:和左侧车道后车之间距离
s9:和右侧车道前车之间距离
s10:和右侧车道后车之间距离
s11:期望的纵向车速
s12:期望的横向车速
s13:期望变道的方位
上面所有的状态都是离散化后的区间值。
动作集A:
a1:油门为0,刹车为0,前轮偏角为0
a2:油门为0,刹车为0,前轮偏角为+0.5度
a3:油门为0,刹车为0,前轮偏角为+1度
…
a51:油门为0,刹车为0,前轮偏角为+25度
a52:油门为0,刹车为0,前轮偏角为-0.5度
a53:油门为0,刹车为0,前轮偏角为-1.0度
…
a100:油门为0,刹车为0,前轮偏角为-25度
a101:油门为1,刹车为0,前轮偏角为0
a102:油门为2,刹车为0,前轮偏角为0
a103:油门为3,刹车为0,前轮偏角为0
a104:油门为4,刹车为0,前轮偏角为0
a105:油门为0,刹车为1,前轮偏角为0
a106:油门为0,刹车为2,前轮偏角为0
a107:油门为0,刹车为3,前轮偏角为0
a108:油门为0,刹车为4,前轮偏角为0
上面所有的动作(油门、刹车和前轮偏角)是离散化后的值。
回报函数R:
车内人员的反馈,此时的反馈信息是用车内人员的满意度来衡量,分为5个离散值如下表所示,其中如表中第4行所示,对于没有反馈的情况,将其回报函数值r设置为0,视为与车内人员回应(例如以语音方式)以“一般”“正好”的情况相同。此表的反馈信息与回报函数值r之间的对应设置仅为示例,本领域技术人员可以根据情况来进行设计。
反馈信息 | 回报r |
非常糟糕 | -2 |
更差了 | -1 |
一般、正好或没有反馈 | 0 |
更好了 | +1 |
非常好 | +2 |
作为增强学习方法中的时间差分法类型的例子,以Q-Learning算法为例,示例性流程如下:
1.初始化Q(s,a)为任意值
2.重复下面的循环直到policy的变化量小于预设的阈值
·初始化s为任意值
·重复下面的步骤直到s为终止状态
·应用Q中的policyπ(s,a)(比如采用ε-greedy方法),对当前状态s选择一个动作α
·执行动作α,观察即时回报r,以及下一个状态s′
·Q(s,a)+=α[r+γmaxa′Q(s′,a′)-Q(s,a)]
·s=s′
在上面的算法中,a是控制学习速度的系数。
ε-greedy方法的公式如下:
ε∈[0,1]
这里,优选地,自适应规划和控制模块运行在车载本地计算机***上。
在前面的示例性描述中,自动驾驶模式被描述为包括舒适模式、普通模式和运动模式。此仅为示例,视需要可以进行更细致的分类,或者进行更粗粒度的分类。
需要说明的是,在图7和图8中,以语音反馈作为反馈方式的例子,但这仅为示例,可以视情况采用其它的反馈方式,例如车上设置的实体按钮,乘客手机上的App程序,乘客的手势等等。
本文中的车辆应该做广义解释,除了包括陆地上行驶的各种大中小型车辆外,还可以包括水面上行驶的轮船,乃至空中驾驶的飞行器等。
应该注意,以上讨论的方法、***和设备仅意图作为例子。需要强调的是,各个实施例可以在适当时省略、替换或者添加各种过程或者组件。例如,应该理解,在替换实施例中,可以按与所述不同的顺序进行方法,并且可以添加、省略或组合各个步骤。而且,可以在各种其他实施例中组合关于某些实施例所述的特征。可以按类似的方式组合实施例的不同方面和要素。而且,应该强调,技术不断发展以及因此本文所示例的许多要素仅是例子,而不应被解释为限制本发明的范围。
此外,可以通过硬件、软件、固件、中间件、微代码、硬件描述语言或其任意组合来实现实施例。当以软件、固件、中间件或微代码实现任务时,用于进行任务所需的程序代码或者码段可以存储在诸如存储介质的计算机可读介质中,处理器可以进行所需的任务。
以上已经描述了本发明的各实施例,上述说明是示例性的,并非穷尽性的,并且也不限于所披露的各实施例。在不偏离所说明的各实施例的范围和精神的情况下,对于本技术领域的普通技术人员来说许多修改和变更都是显而易见的。因此,本发明的保护范围应该以权利要求的保护范围为准。
Claims (25)
1.一种车辆自动驾驶方法,包括:
感测车内人员,获得车内人员的轮廓信息;
对车内人员进行归类;以及
根据所述归类,确定相应的自动驾驶行驶模式,并对车辆进行自适应控制。
2.根据权利要求1的车辆自动驾驶方法,还包括:
在行驶过程中,持续接收车内人员的反馈;以及
根据车内人员的反馈自适应调整自动驾驶的参数。
3.根据权利要求1的车辆自动驾驶方法,所述车内人员的轮廓信息包括车内每个人偏好的行驶模式。
4.根据权利要求3的车辆自动驾驶方法,所述每个人偏好的行驶模式由对应的行驶参数来表示。
5.根据权利要求1的车辆自动驾驶方法,所述对车内人员进行归类包括:
确定每个车内人员是否为病人;
确定每个车内人员是否是老人、小孩或残疾人;以及
确定是否每个人都设置了所偏好的驾驶模式。
6.根据权利要求1的车辆自动驾驶方法,其中所述自动驾驶模式包括:舒适模式、普通模式和运动模式,以及所述根据所述归类,确定相应的自动驾驶行驶模式包括:
确定车内人员是否有病人,如果有病人,则确定自动驾驶模式为舒适模式;
如果车内人员没有病人,则确定车内每个人是否都有偏好的驾驶模式,如果车内每个人都有偏好的驾驶模式,则使用这些偏好的驾驶模式之中舒适度最高的驾驶模式;以及
如果并非车内每个人都有偏好的驾驶模式,则确定不具有偏好的驾驶模式的人中是否存在老人、小孩或者残疾人;以及如果存在,则使用舒适模式。
7.根据权利要求1的车辆自动驾驶方法,所述感测车内人员包括使用下述手段中的至少一个:
摄像头、压力传感器和麦克风、指纹识别器、红外传感器。
8.根据权利要求1的车辆自动驾驶方法,所述获得车内人员的轮廓信息包括:
识别车内人员的身份,识别车内人员的身份包括基于身份信息数据库,通过下述身份识别技术中的一项或者其组合来识别车内人员的身份:人脸识别、声纹识别、指纹识别、虹膜识别、红外识别;以及
基于识别得到的车内人员的身份,从轮廓信息数据库检索该车内人员的轮廓信息,在轮廓信息数据库中与车内人员的身份标识相关联地存储了轮廓信息。
9.根据权利要求8的自动驾驶方法,在轮廓数据库中未存储该车内人员的轮廓信息的情况下,接收车内人员的轮廓信息输入,并将其存储到数据库中。
10.根据权利要求8的车辆自动驾驶方法,所述轮廓信息包括:
年龄、性别、情绪、健康状态信息、偏好的行驶模式中的一项或多项。
11.根据权利要求1的车辆自动驾驶方法,不同的模式对应于相关联的规划和控制参数,所述参数选自下列项目中的一个或多个:
正常加速度、超常加速度、正常减速度、超常减速度、前轮偏角和车速比的最大值、安全距离、换道最小频率、换道安全车距。
12.根据权利要求2的车辆自动驾驶方法,所述根据车内人员的反馈自适应调整自动驾驶的参数包括:
响应于车内人员对当前驾驶状态的反馈式命令,利用预设的对应于所述反馈的参数和调整量来进行调整,所述反馈式命令指示对驾驶状态进行确定调整。
13.根据权利要求12的车辆自动驾驶方法,当用户不再给出反馈式命令时,记录当前的参数作为该用户的偏好的驾驶模式参数。
14.根据权利要求2的车辆自动驾驶方法,所述根据车内人员的反馈自适应调整自动驾驶的参数包括:
响应于车内人员对当前驾驶状态的反馈式命令,采用增强学习方法进行调整。
15.根据权利要求8的车辆自动驾驶方法,所述身份识别技术中的一个或多个运行在本地车载计算机***中、云端服务器中,或者以本地车载计算机***和云端服务器相互协作的方式运行。
16.根据权利要求8的车辆自动驾驶方法,所述车内人员的身份信息数据库和轮廓信息数据库中的一个或两者存储在本地车载计算机***中或者云端存储中。
17.根据权利要求1到16任一项的车辆自动驾驶方法,还包括:
感测车内是否存在特定动物和/或特定物品;
基于感测到车内存在特定动物和/或特定物品,确定相应的自动驾驶行驶模式。
18.一种车辆自动驾驶***,包括:
传感器,感测车内人员;
轮廓信息获得单元,用于获得车内人员的轮廓信息;
归类单元,对车内人员进行归类;以及
自适应控制单元,根据所述归类,确定相应的自动驾驶行驶模式,并对车辆进行自适应控制。
19.根据权利要求18的车辆自动驾驶***,还包括:
反馈接收单元,在行驶过程中,持续接收车内人员的反馈;以及
所述自适应控制单元根据车内人员的反馈自适应调整自动驾驶的参数。
20.根据权利要求18的车辆自动驾驶***,所述车内人员的轮廓信息包括车内每个人偏好的行驶模式。
21.根据权利要求18的车辆自动驾驶***,所述对车内人员进行归类包括:
确定每个车内人员是否为病人;
确定每个车内人员是否是老人、小孩或残疾人;以及
确定是否每个人都设置了所偏好的驾驶模式。
22.根据权利要求18-21任一项的车辆自动驾驶***,其中所述自动驾驶模式包括:舒适模式、普通模式和运动模式,以及所述根据所述归类,确定相应的自动驾驶行驶模式包括:
确定车内人员是否有病人,如果有病人,则确定自动驾驶模式为舒适模式;
如果车内人员没有病人,则确定车内每个人是否都有偏好的驾驶模式,如果车内每个人都有偏好的驾驶模式,则使用这些偏好的驾驶模式之中舒适度最高的驾驶模式;以及
如果并非车内每个人都有偏好的驾驶模式,则确定不具有偏好的驾驶模式的人中是否存在老人、小孩或者残疾人;以及如果存在,则使用舒适模式。
23.根据权利要求19的车辆自动驾驶***,所述根据车内人员的反馈自适应调整自动驾驶的参数包括:
响应于车内人员对当前驾驶状态的反馈式命令,采用增强学习方法进行调整。
24.根据权利要求18到21任一项的车辆自动驾驶***,其中
所述传感器还感测车内是否存在特定动物和/或特定物品;以及
自适应控制单元基于感测到车内存在特定动物和/或特定物品,确定相应的自动驾驶行驶模式。
25.一种车辆自动驾驶方法,包括:
感测车内人员,获得车内人员的轮廓信息;
基于所获得的车内人员的轮廓信息,对车辆进行自适应控制。
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
PCT/CN2016/086914 WO2017219319A1 (zh) | 2016-06-23 | 2016-06-23 | 车辆自动驾驶方法和车辆自动驾驶*** |
Publications (1)
Publication Number | Publication Date |
---|---|
CN107223101A true CN107223101A (zh) | 2017-09-29 |
Family
ID=59928253
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201680001428.5A Pending CN107223101A (zh) | 2016-06-23 | 2016-06-23 | 车辆自动驾驶方法和车辆自动驾驶*** |
Country Status (2)
Country | Link |
---|---|
CN (1) | CN107223101A (zh) |
WO (1) | WO2017219319A1 (zh) |
Cited By (38)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN108146360A (zh) * | 2017-12-25 | 2018-06-12 | 出门问问信息科技有限公司 | 车辆控制的方法、装置、车载设备和可读存储介质 |
CN108466619A (zh) * | 2018-03-26 | 2018-08-31 | 北京小马慧行科技有限公司 | 一种自动驾驶***运行模式自动设置的方法及装置 |
CN108891422A (zh) * | 2018-07-09 | 2018-11-27 | 深圳市易成自动驾驶技术有限公司 | 智能车辆的控制方法、装置及计算机可读存储介质 |
CN109131167A (zh) * | 2018-08-03 | 2019-01-04 | 百度在线网络技术(北京)有限公司 | 用于控制车辆的方法和装置 |
CN109177971A (zh) * | 2018-08-28 | 2019-01-11 | 武汉联城家科技发展有限公司 | 汽车和服务器及其安全控制方法、控制装置及存储介质 |
CN109760603A (zh) * | 2017-11-09 | 2019-05-17 | 英属开曼群岛商麦迪创科技股份有限公司 | 车体设备控制***与车体设备控制方法 |
CN109858359A (zh) * | 2018-12-28 | 2019-06-07 | 青岛科技大学 | 一种考虑情感的汽车驾驶人驾驶意图辨识方法 |
CN109895777A (zh) * | 2019-03-11 | 2019-06-18 | 汉腾汽车有限公司 | 一种共享自动驾驶汽车*** |
CN110027548A (zh) * | 2018-01-12 | 2019-07-19 | 本田技研工业株式会社 | 控制装置、控制装置的工作方法及介质 |
CN110103989A (zh) * | 2019-05-17 | 2019-08-09 | 爱驰汽车有限公司 | 自动驾驶主动式交互车载***、方法、设备及存储介质 |
CN110162027A (zh) * | 2018-02-11 | 2019-08-23 | 上海捷谷新能源科技有限公司 | 一种车辆自动驾驶控制*** |
CN110263664A (zh) * | 2019-05-29 | 2019-09-20 | 深圳市元征科技股份有限公司 | 一种多乘员车道违章识别方法及装置 |
CN110281935A (zh) * | 2018-03-14 | 2019-09-27 | 本田技研工业株式会社 | 车辆控制装置、车辆控制方法及存储介质 |
CN110370267A (zh) * | 2018-09-10 | 2019-10-25 | 北京京东尚科信息技术有限公司 | 用于生成模型的方法和装置 |
CN110509983A (zh) * | 2019-09-24 | 2019-11-29 | 吉林大学 | 一种适用于不同驾驶需求的线控转向路感反馈装置 |
CN110555346A (zh) * | 2018-06-01 | 2019-12-10 | 杭州海康威视数字技术股份有限公司 | 驾驶员情绪检测方法、装置、电子设备及存储介质 |
CN110576864A (zh) * | 2019-08-15 | 2019-12-17 | 中国第一汽车股份有限公司 | 驾驶模式的控制方法、装置、车辆及存储介质 |
WO2020001345A1 (zh) * | 2018-06-29 | 2020-01-02 | 比亚迪股份有限公司 | 驾驶控制***和方法以及车辆 |
CN110789469A (zh) * | 2018-08-02 | 2020-02-14 | 罗伯特·博世有限公司 | 用于驾驶车辆的方法、相应的控制器和相应的车辆 |
CN110871810A (zh) * | 2018-08-21 | 2020-03-10 | 上海博泰悦臻网络技术服务有限公司 | 车辆、车机设备及其基于驾驶模式的行车信息提示方法 |
CN111204348A (zh) * | 2020-01-21 | 2020-05-29 | 腾讯云计算(北京)有限责任公司 | 调节车辆行驶参数方法、装置、车辆及存储介质 |
CN111252073A (zh) * | 2018-11-30 | 2020-06-09 | 丰田自动车北美公司 | 检测有问题的健康状况的***和方法 |
CN111315617A (zh) * | 2017-11-03 | 2020-06-19 | 采埃孚股份公司 | 用于调整车辆的舒适度的方法、调控设备和车辆 |
CN111433087A (zh) * | 2017-12-18 | 2020-07-17 | 智加科技公司 | 用于自动驾驶车辆中的似人车辆控制预测的方法和*** |
CN111599202A (zh) * | 2020-05-27 | 2020-08-28 | 四川邮电职业技术学院 | 一种车载通信终端及车载通信*** |
CN111667782A (zh) * | 2019-03-06 | 2020-09-15 | 丰田自动车株式会社 | 移动体和移动*** |
CN111885547A (zh) * | 2020-07-10 | 2020-11-03 | 吉利汽车研究院(宁波)有限公司 | 一种车载人机交互*** |
CN112158151A (zh) * | 2020-10-08 | 2021-01-01 | 南昌智能新能源汽车研究院 | 一种基于5g网络的自动驾驶汽车手势控制***及其方法 |
CN112429013A (zh) * | 2019-08-07 | 2021-03-02 | 现代自动车株式会社 | 用于控制自动驾驶车辆的行为的装置及方法 |
CN112654548A (zh) * | 2020-05-09 | 2021-04-13 | 华为技术有限公司 | 一种自适应优化自动驾驶***的方法及装置 |
EP3725597A4 (en) * | 2017-12-14 | 2021-04-21 | NIO (Anhui) Holding Co., Ltd. | MONITORING SYSTEM AND METHOD FOR TARGET BODIES ON A VEHICLE AND VEHICLE |
CN113581215A (zh) * | 2021-09-01 | 2021-11-02 | 国汽智控(北京)科技有限公司 | 车辆的控制方法、装置及车辆 |
CN113799717A (zh) * | 2020-06-12 | 2021-12-17 | 广州汽车集团股份有限公司 | 一种疲劳驾驶缓解方法及其***、计算机可读存储介质 |
TWI752773B (zh) * | 2020-11-30 | 2022-01-11 | 荷蘭商荷蘭移動驅動器公司 | 駕駛輔助方法及車載裝置 |
CN114194122A (zh) * | 2021-11-24 | 2022-03-18 | 重庆长安汽车股份有限公司 | 一种安全提示***及汽车 |
TWI771401B (zh) * | 2017-11-09 | 2022-07-21 | 英屬開曼群島商麥迪創科技股份有限公司 | 車體設備控制系統與車體設備控制方法 |
CN114973727A (zh) * | 2022-08-02 | 2022-08-30 | 成都工业职业技术学院 | 一种基于乘客特征的智能驾驶方法 |
US11650586B2 (en) | 2017-12-18 | 2023-05-16 | Plusai, Inc. | Method and system for adaptive motion planning based on passenger reaction to vehicle motion in autonomous driving vehicles |
Families Citing this family (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN110570127B (zh) * | 2019-09-12 | 2022-10-04 | 启迪数华科技有限公司 | 一种智能公交***、车辆运行调度方法及装置 |
CN113255347B (zh) * | 2020-02-10 | 2022-11-15 | 阿里巴巴集团控股有限公司 | 实现数据融合的方法和设备及实现无人驾驶设备的识别方法 |
CN112418162B (zh) * | 2020-12-07 | 2024-01-12 | 安徽江淮汽车集团股份有限公司 | 车辆控制的方法、设备、存储介质及装置 |
CN112947759A (zh) * | 2021-03-08 | 2021-06-11 | 上汽大众汽车有限公司 | 车载情感化交互平台及交互方法 |
CN112906304B (zh) * | 2021-03-10 | 2023-04-07 | 北京航空航天大学 | 一种刹车控制方法和装置 |
CN114407907A (zh) * | 2022-01-18 | 2022-04-29 | 上汽通用五菱汽车股份有限公司 | 智能驾驶***参数自适应调整方法、设备及存储介质 |
CN117334066A (zh) * | 2023-09-20 | 2024-01-02 | 广州亿胜鑫网络科技有限公司 | 基于车辆数据的风险分析方法、***、终端及存储介质 |
Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN104260725A (zh) * | 2014-09-23 | 2015-01-07 | 北京理工大学 | 一种含有驾驶员模型的智能驾驶*** |
CN104590274A (zh) * | 2014-11-26 | 2015-05-06 | 浙江吉利汽车研究院有限公司 | 一种驾驶行为自适应***及驾驶行为自适应方法 |
CN104648383A (zh) * | 2013-11-22 | 2015-05-27 | 福特全球技术公司 | 改进的自主车辆设置 |
CN104765598A (zh) * | 2014-01-06 | 2015-07-08 | 哈曼国际工业有限公司 | 自动驾驶者识别 |
CN104816727A (zh) * | 2014-01-30 | 2015-08-05 | 沃尔沃汽车公司 | 用于自主驾驶车辆的控制设备 |
CN104932322A (zh) * | 2014-03-17 | 2015-09-23 | 福特全球技术公司 | 学习自动化车辆 |
CN105000020A (zh) * | 2014-04-22 | 2015-10-28 | 通用汽车环球科技运作有限责任公司 | 用于基于车辆事件解读驾驶员生理数据的***和方法 |
Family Cites Families (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US7864029B2 (en) * | 2008-05-19 | 2011-01-04 | Gm Global Technology Operations, Inc. | Vehicle-setting-based driver identification system |
CN104002807A (zh) * | 2014-05-28 | 2014-08-27 | 长城汽车股份有限公司 | 一种汽车安全驾驶控制方法及*** |
-
2016
- 2016-06-23 WO PCT/CN2016/086914 patent/WO2017219319A1/zh active Application Filing
- 2016-06-23 CN CN201680001428.5A patent/CN107223101A/zh active Pending
Patent Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN104648383A (zh) * | 2013-11-22 | 2015-05-27 | 福特全球技术公司 | 改进的自主车辆设置 |
CN104765598A (zh) * | 2014-01-06 | 2015-07-08 | 哈曼国际工业有限公司 | 自动驾驶者识别 |
CN104816727A (zh) * | 2014-01-30 | 2015-08-05 | 沃尔沃汽车公司 | 用于自主驾驶车辆的控制设备 |
CN104932322A (zh) * | 2014-03-17 | 2015-09-23 | 福特全球技术公司 | 学习自动化车辆 |
CN105000020A (zh) * | 2014-04-22 | 2015-10-28 | 通用汽车环球科技运作有限责任公司 | 用于基于车辆事件解读驾驶员生理数据的***和方法 |
CN104260725A (zh) * | 2014-09-23 | 2015-01-07 | 北京理工大学 | 一种含有驾驶员模型的智能驾驶*** |
CN104590274A (zh) * | 2014-11-26 | 2015-05-06 | 浙江吉利汽车研究院有限公司 | 一种驾驶行为自适应***及驾驶行为自适应方法 |
Cited By (51)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN111315617A (zh) * | 2017-11-03 | 2020-06-19 | 采埃孚股份公司 | 用于调整车辆的舒适度的方法、调控设备和车辆 |
CN109760603A (zh) * | 2017-11-09 | 2019-05-17 | 英属开曼群岛商麦迪创科技股份有限公司 | 车体设备控制***与车体设备控制方法 |
TWI771401B (zh) * | 2017-11-09 | 2022-07-21 | 英屬開曼群島商麥迪創科技股份有限公司 | 車體設備控制系統與車體設備控制方法 |
EP3725597A4 (en) * | 2017-12-14 | 2021-04-21 | NIO (Anhui) Holding Co., Ltd. | MONITORING SYSTEM AND METHOD FOR TARGET BODIES ON A VEHICLE AND VEHICLE |
CN111433087A (zh) * | 2017-12-18 | 2020-07-17 | 智加科技公司 | 用于自动驾驶车辆中的似人车辆控制预测的方法和*** |
US11650586B2 (en) | 2017-12-18 | 2023-05-16 | Plusai, Inc. | Method and system for adaptive motion planning based on passenger reaction to vehicle motion in autonomous driving vehicles |
US11643086B2 (en) | 2017-12-18 | 2023-05-09 | Plusai, Inc. | Method and system for human-like vehicle control prediction in autonomous driving vehicles |
CN108146360A (zh) * | 2017-12-25 | 2018-06-12 | 出门问问信息科技有限公司 | 车辆控制的方法、装置、车载设备和可读存储介质 |
CN110027548B (zh) * | 2018-01-12 | 2022-04-29 | 本田技研工业株式会社 | 控制装置、控制装置的工作方法及介质 |
CN110027548A (zh) * | 2018-01-12 | 2019-07-19 | 本田技研工业株式会社 | 控制装置、控制装置的工作方法及介质 |
CN110162027A (zh) * | 2018-02-11 | 2019-08-23 | 上海捷谷新能源科技有限公司 | 一种车辆自动驾驶控制*** |
CN110281935B (zh) * | 2018-03-14 | 2022-08-23 | 本田技研工业株式会社 | 车辆控制装置、车辆控制方法及存储介质 |
CN110281935A (zh) * | 2018-03-14 | 2019-09-27 | 本田技研工业株式会社 | 车辆控制装置、车辆控制方法及存储介质 |
US11327491B2 (en) | 2018-03-14 | 2022-05-10 | Honda Motor Co., Ltd. | Vehicle control device, vehicle control method, and storage medium |
CN108466619B (zh) * | 2018-03-26 | 2020-03-27 | 北京小马慧行科技有限公司 | 一种自动驾驶***运行模式自动设置的方法及装置 |
CN108466619A (zh) * | 2018-03-26 | 2018-08-31 | 北京小马慧行科技有限公司 | 一种自动驾驶***运行模式自动设置的方法及装置 |
CN110555346A (zh) * | 2018-06-01 | 2019-12-10 | 杭州海康威视数字技术股份有限公司 | 驾驶员情绪检测方法、装置、电子设备及存储介质 |
WO2020001345A1 (zh) * | 2018-06-29 | 2020-01-02 | 比亚迪股份有限公司 | 驾驶控制***和方法以及车辆 |
CN108891422A (zh) * | 2018-07-09 | 2018-11-27 | 深圳市易成自动驾驶技术有限公司 | 智能车辆的控制方法、装置及计算机可读存储介质 |
CN110789469A (zh) * | 2018-08-02 | 2020-02-14 | 罗伯特·博世有限公司 | 用于驾驶车辆的方法、相应的控制器和相应的车辆 |
CN109131167A (zh) * | 2018-08-03 | 2019-01-04 | 百度在线网络技术(北京)有限公司 | 用于控制车辆的方法和装置 |
CN110871810A (zh) * | 2018-08-21 | 2020-03-10 | 上海博泰悦臻网络技术服务有限公司 | 车辆、车机设备及其基于驾驶模式的行车信息提示方法 |
CN109177971A (zh) * | 2018-08-28 | 2019-01-11 | 武汉联城家科技发展有限公司 | 汽车和服务器及其安全控制方法、控制装置及存储介质 |
CN110370267A (zh) * | 2018-09-10 | 2019-10-25 | 北京京东尚科信息技术有限公司 | 用于生成模型的方法和装置 |
CN111252073A (zh) * | 2018-11-30 | 2020-06-09 | 丰田自动车北美公司 | 检测有问题的健康状况的***和方法 |
CN111252073B (zh) * | 2018-11-30 | 2024-05-28 | 丰田自动车北美公司 | 检测有问题的健康状况的***和方法 |
CN109858359A (zh) * | 2018-12-28 | 2019-06-07 | 青岛科技大学 | 一种考虑情感的汽车驾驶人驾驶意图辨识方法 |
CN111667782A (zh) * | 2019-03-06 | 2020-09-15 | 丰田自动车株式会社 | 移动体和移动*** |
CN111667782B (zh) * | 2019-03-06 | 2022-10-28 | 丰田自动车株式会社 | 移动体和移动*** |
CN109895777A (zh) * | 2019-03-11 | 2019-06-18 | 汉腾汽车有限公司 | 一种共享自动驾驶汽车*** |
CN110103989A (zh) * | 2019-05-17 | 2019-08-09 | 爱驰汽车有限公司 | 自动驾驶主动式交互车载***、方法、设备及存储介质 |
CN110263664A (zh) * | 2019-05-29 | 2019-09-20 | 深圳市元征科技股份有限公司 | 一种多乘员车道违章识别方法及装置 |
CN112429013A (zh) * | 2019-08-07 | 2021-03-02 | 现代自动车株式会社 | 用于控制自动驾驶车辆的行为的装置及方法 |
CN110576864A (zh) * | 2019-08-15 | 2019-12-17 | 中国第一汽车股份有限公司 | 驾驶模式的控制方法、装置、车辆及存储介质 |
CN110509983B (zh) * | 2019-09-24 | 2021-07-16 | 吉林大学 | 一种适用于不同驾驶需求的线控转向路感反馈装置 |
CN110509983A (zh) * | 2019-09-24 | 2019-11-29 | 吉林大学 | 一种适用于不同驾驶需求的线控转向路感反馈装置 |
CN111204348A (zh) * | 2020-01-21 | 2020-05-29 | 腾讯云计算(北京)有限责任公司 | 调节车辆行驶参数方法、装置、车辆及存储介质 |
CN112654548A (zh) * | 2020-05-09 | 2021-04-13 | 华为技术有限公司 | 一种自适应优化自动驾驶***的方法及装置 |
CN112654548B (zh) * | 2020-05-09 | 2022-04-05 | 华为技术有限公司 | 一种自适应优化自动驾驶***的方法及装置 |
CN111599202A (zh) * | 2020-05-27 | 2020-08-28 | 四川邮电职业技术学院 | 一种车载通信终端及车载通信*** |
CN113799717A (zh) * | 2020-06-12 | 2021-12-17 | 广州汽车集团股份有限公司 | 一种疲劳驾驶缓解方法及其***、计算机可读存储介质 |
CN111885547B (zh) * | 2020-07-10 | 2024-06-04 | 吉利汽车研究院(宁波)有限公司 | 一种车载人机交互*** |
CN111885547A (zh) * | 2020-07-10 | 2020-11-03 | 吉利汽车研究院(宁波)有限公司 | 一种车载人机交互*** |
CN112158151A (zh) * | 2020-10-08 | 2021-01-01 | 南昌智能新能源汽车研究院 | 一种基于5g网络的自动驾驶汽车手势控制***及其方法 |
TWI752773B (zh) * | 2020-11-30 | 2022-01-11 | 荷蘭商荷蘭移動驅動器公司 | 駕駛輔助方法及車載裝置 |
CN114633757A (zh) * | 2020-11-30 | 2022-06-17 | 荷兰移动驱动器公司 | 驾驶辅助方法及车载装置 |
CN113581215A (zh) * | 2021-09-01 | 2021-11-02 | 国汽智控(北京)科技有限公司 | 车辆的控制方法、装置及车辆 |
CN114194122B (zh) * | 2021-11-24 | 2024-03-05 | 重庆长安汽车股份有限公司 | 一种安全提示***及汽车 |
CN114194122A (zh) * | 2021-11-24 | 2022-03-18 | 重庆长安汽车股份有限公司 | 一种安全提示***及汽车 |
CN114973727B (zh) * | 2022-08-02 | 2022-09-30 | 成都工业职业技术学院 | 一种基于乘客特征的智能驾驶方法 |
CN114973727A (zh) * | 2022-08-02 | 2022-08-30 | 成都工业职业技术学院 | 一种基于乘客特征的智能驾驶方法 |
Also Published As
Publication number | Publication date |
---|---|
WO2017219319A1 (zh) | 2017-12-28 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN107223101A (zh) | 车辆自动驾驶方法和车辆自动驾驶*** | |
US11919531B2 (en) | Method for customizing motion characteristics of an autonomous vehicle for a user | |
US11186241B2 (en) | Automated emotion detection and environmental response | |
CN108688677B (zh) | 车辆驾驶支援***以及车辆驾驶支援方法 | |
CN108688676B (zh) | 车辆驾驶支援***以及车辆驾驶支援方法 | |
US9725098B2 (en) | Vehicle driver identification | |
US8437919B2 (en) | Vehicle personalization system | |
CN107458172A (zh) | 用于社交地控制自主交通工具的交通工具气候的*** | |
CN109263645A (zh) | 用于调整机动车的运行参数的方法和***以及机动车 | |
CN107600072A (zh) | 一种多乘客共同偏好参数的获取方法及*** | |
EP3750765A1 (en) | Methods, apparatuses and computer programs for generating a machine-learning model and for generating a control signal for operating a vehicle | |
JP7073880B2 (ja) | 進路決定装置 | |
CN114502445B (zh) | 适应用户驾驶偏好控制自主车辆 | |
US20220242417A1 (en) | Operational Assistance Method for a Vehicle, Control Unit, and Vehicle | |
CN108688675B (zh) | 车辆驾驶支援*** | |
WO2013101054A1 (en) | Systems, methods, and apparatus for identifying an occupant of a vehicle | |
CN110509983A (zh) | 一种适用于不同驾驶需求的线控转向路感反馈装置 | |
CN108688673A (zh) | 车辆驾驶支援*** | |
CN103802837B (zh) | 主动舒适性人机交互***的核心控制策略模块的工作方法 | |
WO2013101052A1 (en) | Systems, methods, and apparatus for learning the identity of an occupant of a vehicle | |
CN113905938B (zh) | 用于改进多个自动驾驶车辆与其所在驾驶环境间交互的***和方法 | |
JP6645543B1 (ja) | 運転制御調整装置および運転制御調整方法 | |
CN108875617A (zh) | 辅助驾驶方法和装置、车辆 | |
AU2020202639A1 (en) | Control device for motor vehicle, motor vehicle, associated control method and computer program | |
CN110135447B (zh) | 根据识别的人员信息调整车辆内人员坐姿的*** |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
RJ01 | Rejection of invention patent application after publication |
Application publication date: 20170929 |
|
RJ01 | Rejection of invention patent application after publication |