CN115497478A - 一种车辆内外交流的方法、装置和可读存储介质 - Google Patents

一种车辆内外交流的方法、装置和可读存储介质 Download PDF

Info

Publication number
CN115497478A
CN115497478A CN202211136039.7A CN202211136039A CN115497478A CN 115497478 A CN115497478 A CN 115497478A CN 202211136039 A CN202211136039 A CN 202211136039A CN 115497478 A CN115497478 A CN 115497478A
Authority
CN
China
Prior art keywords
vehicle
information
communication
target object
target
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202211136039.7A
Other languages
English (en)
Inventor
张更伽
肖宽
赵文锋
牛培铮
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Jingwei Hirain Tech Co Ltd
Original Assignee
Beijing Jingwei Hirain Tech Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Jingwei Hirain Tech Co Ltd filed Critical Beijing Jingwei Hirain Tech Co Ltd
Priority to CN202211136039.7A priority Critical patent/CN115497478A/zh
Publication of CN115497478A publication Critical patent/CN115497478A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00Speech recognition
    • G10L15/26Speech to text systems
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/50Context or environment of the image
    • G06V20/56Context or environment of the image exterior to a vehicle by using sensors mounted on the vehicle
    • G06V20/58Recognition of moving objects or obstacles, e.g. vehicles or pedestrians; Recognition of traffic objects, e.g. traffic signs, traffic lights or roads
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/20Movements or behaviour, e.g. gesture recognition
    • GPHYSICS
    • G07CHECKING-DEVICES
    • G07CTIME OR ATTENDANCE REGISTERS; REGISTERING OR INDICATING THE WORKING OF MACHINES; GENERATING RANDOM NUMBERS; VOTING OR LOTTERY APPARATUS; ARRANGEMENTS, SYSTEMS OR APPARATUS FOR CHECKING NOT PROVIDED FOR ELSEWHERE
    • G07C5/00Registering or indicating the working of vehicles
    • G07C5/08Registering or indicating performance data other than driving, working, idle, or waiting time, with or without registering driving, working, idle or waiting time
    • G07C5/0841Registering performance data
    • G07C5/085Registering performance data using electronic data carriers
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00Speech recognition
    • G10L15/04Segmentation; Word boundary detection
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00Speech recognition
    • G10L15/08Speech classification or search
    • G10L15/18Speech classification or search using natural language modelling
    • G10L15/1822Parsing for meaning understanding
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/18Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • H04N7/181Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a plurality of remote sources

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Health & Medical Sciences (AREA)
  • Human Computer Interaction (AREA)
  • Computational Linguistics (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Acoustics & Sound (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Signal Processing (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • General Health & Medical Sciences (AREA)
  • Psychiatry (AREA)
  • Social Psychology (AREA)
  • Artificial Intelligence (AREA)
  • Telephonic Communication Services (AREA)

Abstract

本申请提供了一种车辆内外交流的方法、装置和可读存储介质,包括:获取所述车辆的环境信息;基于所述车辆的运行状态是停止状态,分析所述环境信息得到所述车辆外的目标区域内存在目标对象以及所述目标对象的交流信息;分析所述交流信息得到所述目标对象的交流意图类型;基于所述交流意图类型控制车辆的目标组件响应所述交流信息。本方案中,在车辆处于停止状态,对于车辆环境信息分析得到该车辆外的目标区域中存在目标对象以及该目标对象的交流信息,基于该交流信息得到该目标对象的交流意图类型,针对不同的交流意图类型控制车辆进行不同的响应,以保证车辆内人员的安全的前提下与车外人员交流或者不与车外人员交流。

Description

一种车辆内外交流的方法、装置和可读存储介质
技术领域
本申请涉及车辆控制领域,更具体的说,是涉及一种车辆内外交流的方法、装置和可读存储介质。
背景技术
用户在用车过程中,经常会遇到要与车外人员(尤其是陌生人)交流的场景,由于汽车良好的隔音效果恰好阻碍了此场景下的正常交流,用户一般采取直接开门下车或降下车窗的方式来与车外人员交流,这些方式都存在一定的风险,可能导致犯罪份子有机可乘,造成车辆财产损失或人员伤亡。
因此,亟需一种能够与车外人员进行安全有效沟通的方法。
发明内容
有鉴于此,本申请提供了一种车辆内外交流的方法,如下:
一种车辆内外交流的方法,包括:
获取所述车辆的环境信息;
基于所述车辆的运行状态是停止状态,分析所述环境信息得到所述车辆外的目标区域内存在目标对象以及所述目标对象的交流信息;
分析所述交流信息得到所述目标对象的交流意图类型;
基于所述交流意图类型控制车辆的目标组件响应所述交流信息,所述目标组件与所述交流意图类型对应。
可选的,上述的方法,所述获取所述车辆的环境信息,包括:
获取所述车辆周围的图像信息和/或音频信息,所述图像信息是由车辆外两侧设置的至少两个图像采集模块采集得到,所述音频信息是由车辆外两侧设置的至少两个音频采集模块采集得到。
可选的,上述的方法,若所述环境信息是图像信息,所述分析所述环境信息得到所述车辆外的目标区域内存在目标对象以及所述目标对象的交流信息,包括:
分析所述图像信息,得到所述车辆外的目标区域内存在目标对象;
分析所述图像信息得到所述目标对象的动作内容,将动作内容作为所述目标对象的交流信息。
可选的,上述的方法,若所述环境信息是音频信息,所述分析所述环境信息得到所述车辆外的目标区域内存在目标对象以及所述目标对象的交流信息,包括:
分析所述音频信息,分析得到满足预设语音条件的语音片段,确定所述车辆外的目标区域内存在目标对象;
分析所述音频信息得到所述目标对象的语音内容;
将满足预设内容条件的语音内容作为所述目标对象的交流信息。
可选的,上述的方法,分析所述交流信息得到所述目标对象的交流意图类型,包括:
确定所述交流信息是否包含攻击内容;
若所述交流信息包含攻击内容,确定所述目标对象的交流意图类型是攻击类型;
若所述交流信息不包含攻击内容,确定所述目标对象的交流意图类型是非攻击类型。
可选的,上述的方法,基于所述交流意图类型控制车辆的目标组件响应所述交流信息,包括:
基于所述交流意图类型是攻击类型,至少控制车辆的车窗关闭;
基于所述交流意图类型是非攻击类型,且所述车辆的车窗关闭,控制车辆的交流***启动,所述交流***用于将所述目标对象的图像信息和/或音频信息在车内输出,并将车辆内对象的音频信息在车辆外输出。
可选的,上述的方法,所述控制车辆的交流***启动,包括:
生成提示信息,所述提示信息用于提示是否启动车辆的交流***,所述车辆的交流***用于实现车辆内对象与车辆外的目标对象进行交流;
输出所述提示信息;
基于接收到确认信息,控制车辆的交流***启动,所述确认信息是对于所述提示信息的确认反馈。
可选的,上述的方法,所述控制车辆的交流***启动,包括:
基于所述环境信息确定目标对象在车辆外侧所在的目标侧;
控制所述目标侧设置的图像采集模块和/或第一音频采集模块采集得到第一目标图像信息和/或第一目标音频信息;
控制车辆内的第一输出模块输出所述第一目标图像信息和/或第一目标音频信息;
控制车辆内设置的第二音频采集模块采集得到第二目标音频信息;
控制车辆外目标侧设置的第二输出模块输出所述第二目标音频信息。
一种车辆内外交流的装置,包括:
获取模块,用于获取所述车辆的环境信息;
第一分析模块,用于基于所述车辆的运行状态是停止状态,分析所述环境信息得到所述车辆外的目标区域内存在目标对象以及所述目标对象的交流信息;
第二分析模块,用于分析所述交流信息得到所述目标对象的交流意图类型;
控制模块,用于基于所述交流意图类型控制车辆的目标组件响应所述交流信息,所述目标组件与所述交流意图类型对应。
一种可读存储介质,其上存储有计算机程序,所述计算机程序被处理器调用并执行,实现如上述任一项所述的车辆内外交流的方法的各步骤。
经由上述的技术方案可知,本申请提供了一种车辆内外交流的方法,包括:获取所述车辆的环境信息;基于所述车辆的运行状态是停止状态,分析所述环境信息得到所述车辆外的目标区域内存在目标对象以及所述目标对象的交流信息;分析所述交流信息得到所述目标对象的交流意图类型;基于所述交流意图类型控制车辆的目标组件响应所述交流信息,所述目标组件与所述交流意图类型对应。本方案中,在车辆处于停止状态,对于车辆环境信息分析得到该车辆外的目标区域中存在目标对象以及该目标对象的交流信息,基于该交流信息得到该目标对象的交流意图类型,针对不同的交流意图类型控制车辆的不同组件进行不同的响应,以保证车辆内人员的安全的前提下与车外人员交流或者不与车外人员交流。
附图说明
为了更清楚地说明本申请实施例的技术方案,下面将对实施例描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本申请的实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据提供的附图获得其他的附图。
图1是本申请提供的一种车辆内外交流的方法实施例1的流程图;
图2是本申请提供的一种车辆内外交流的方法实施例2的流程图;
图3是本申请提供的一种车辆内外交流的方法实施例2中一车辆示意图;
图4是本申请提供的一种车辆内外交流的方法实施例2中另一车辆示意图;
图5是本申请提供的一种车辆内外交流的方法实施例3的流程图;
图6是本申请提供的一种车辆内外交流的方法实施例4的流程图;
图7是本申请提供的一种车辆内外交流的方法实施例5的流程图;
图8是本申请提供的一种车辆内外交流的方法实施例6的流程图;
图9是本申请提供的一种车辆内外交流的方法实施例7的流程图;
图10是本申请提供的一种车辆内外交流的方法实施例7中车辆示意图;
图11是本申请提供的一种车辆内外交流的方法的硬件布置示意图;
图12是本申请提供的一种车辆内外交流的方法的***框图;
图13是本申请提供的一种车辆内外交流的装置实施例的结构示意图。
具体实施方式
下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本申请一部分实施例,而不是全部的实施例。基于本申请中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本申请保护的范围。
如图1所示的,为本申请提供的一种车辆内外交流的方法实施例1的流程图,该方法应用于一车载处理器,该方法包括以下步骤:
步骤S101:获取车辆的环境信息;
其中,该车载处理器可以是车辆中设置的ECU(Electronic Control Unit,电子控制单元)。
其中,对于该车辆的环境信息进行获取。
具体的,可以通过设置在车辆的外侧的采集模块进行环境信息的采集,获取该采集模块采集的环境信息。
步骤S102:基于所述车辆的运行状态是停止状态,分析所述环境信息得到所述车辆外的目标区域内存在目标对象以及所述目标对象的交流信息;
其中,基于该车辆处于停止状态,进一步基于该环境信息确定该车辆外的目标区域内的情况。
其中,若当前车辆处于停止状态,车外人员与车内人员能够稳定的交流,则获得该车外目标人员的交流信息。
其中,该交流信息可以是音频信息,也可以是视频信息等,根据车内外设置的交流涉及的功能模块确定。
其中,目标区域是车辆预设距离范围内的区域,具体可以是驾驶室车门和/或者副驾驶室车门的一段距离内,如1米内的范围。
具体的,该目标对象可以是人类,相应的,基于该环境信息分析得到该车辆外目标区域内存在目标对象,表征在车辆周围预设距离范围内有人。
相应的,基于该环境信息还能够分析确定该目标对象的交流信息。
其中,该交流信息可以包括该目标对象的语音、动作等信息。
其中,确定车辆的运行状态是否是停止状态可以采用以下至少一种方式:检测车辆的车速是否为0,若车速为0,则满足停止状态;电池的输出电流是否为0,若输出电流为0,则车辆未启动,满足停止状态;车辆的发动机是否停止运行,若发动机停止运行,则车辆未启动,满足停止状态。
步骤S103:分析所述交流信息得到所述目标对象的交流意图类型;
其中,对于该交流信息进行分析,得到该目标对象的交流意图类型。
具体的,该交流意图类型包括攻击类型和非攻击类型。
需要说明的是,后续实施例中会针对该分析的过程进行详细说明,本实施例中不做详述。
步骤S104:基于所述交流意图类型控制车辆的目标组件响应所述交流信息。
其中,所述目标组件与所述交流意图类型对应。
其中,基于确定的交流意图类型,控制车辆的不同组件进行不同形式的响应,以响应该目标对象的交流信息。
具体的,针对不同的交流意图类型,控制车辆的不同组件进行响应该交流信息,以使得车辆内的人员能够与该目标对象进行交流或者不交流。
需要说明的是,后续实施例中会针对响应的过程进行详细说明,本实施例中不做详述。
综上,本实施例提供的一种车辆内外交流的方法,包括:获取所述车辆的环境信息;基于所述车辆的运行状态是停止状态,分析所述环境信息得到所述车辆外的目标区域内存在目标对象以及所述目标对象的交流信息;分析所述交流信息得到所述目标对象的交流意图类型;基于所述交流意图类型控制车辆的目标组件响应所述交流信息,所述目标组件与所述交流意图类型对应。本方案中,在车辆处于停止状态,对于车辆环境信息分析得到该车辆外的目标区域中存在目标对象以及该目标对象的交流信息,基于该交流信息得到该目标对象的交流意图类型,针对不同的交流意图类型控制车辆进行不同的响应,以保证车辆内人员的安全的前提下与车外人员交流或者不与车外人员交流。
如图2所示的,为本申请提供的一种车辆内外交流的方法实施例2的流程图,该方法包括以下步骤:
步骤S201:获取所述车辆周围的图像信息和/或音频信息;
其中,所述图像信息是由车辆外两侧设置的至少两个图像采集模块采集得到。
其中,所述音频信息是由车辆外两侧设置的至少两个音频采集模块采集得到。
其中,车辆外两侧包括车辆外的左侧和右侧,具体的,可以是驾驶室的外侧和副驾驶室的外侧。
其中,图像采集模块可以是摄像头等结构,音频采集模块可以是麦克风等结构。
具体的,可以在车辆的驾驶室的外侧和副驾驶室的外侧设置图像采集模块和音频采集模块的。
其中,该图像信息中包含的内容是该图像采集模块的图像采集范围内出现的物体,该图像采集范围是以设置位置为球心的半球形区域。
其中,该音频信息中包含的内容是该音频采集模块的音频采集范围内出现的声音。
步骤S202:基于所述车辆的运行状态是停止状态,分析所述环境信息得到所述车辆外的目标区域内存在目标对象以及所述目标对象的交流信息;
步骤S203:分析所述交流信息得到所述目标对象的交流意图类型;
步骤S204:基于所述交流意图类型控制车辆的目标组件响应所述交流信息。
其中,步骤S202-204与实施例1中的步骤S102-104一致,本实施例中不做赘述。
综上,本实施例提供的一种车辆内外交流的方法中,获取车辆周围的图像信息和/或音频信息,该车辆周围的图像信息和/或音频信息表征了车辆周围环境中的情况,基于该图像信息和/或音频信息进行分析,可以对于车辆周围环境中尤其是目标区域的情况进行确定。
如图3所示的,为本申请提供的一种车辆内外交流的方法实施例3的流程图,该方法包括以下步骤:
步骤S301:获取所述车辆周围的图像信息;
其中,步骤S301与实施例2中的步骤S201一致,本实施例中不做赘述。
步骤S302:基于所述车辆的运行状态是停止状态,分析所述图像信息,得到所述车辆外的目标区域内存在目标对象;
其中,本实施例中是以获取的环境信息是图像信息进行说明的。
其中,若当前车辆的运行状态是停止状态,则其可以与车外人员进行交流,则对于获得的图像信息进行分析,确定车辆外的目标区域内是否存在目标对象。
具体的,预设人的特征信息,基于该特征信息对于图像信息进行分析,确定其中是否存在符合该特征信息的人的影像。
具体实施中,可以对于该图像信息以帧为单位进行分析,得到在该车辆预设距离范围内的目标区域内是否存在目标人员。
如图4所示的是一车辆示意图,该车辆的外侧设置有两个图像采集模块(如摄像头)401-402,一个设置在驾驶室外侧、一个设置在副驾驶室外侧,具体是设置在车辆两侧的后视镜处,其能够分别对于车辆的驾驶室外侧和副驾驶室外侧的区域进行图像采集。当有人进入该图像采集模块的采集范围内时,采集得到的图像信息包含该人的影像。该图4中,有人在图像采集模块401的图像采集范围内。
具体实施中,还可以对该目标对象进行实时目标跟踪,确认其是否离开该目标区域的范围。
具体实施中,为了降低车辆处理器的数据处理负担,该步骤S301-302可以是由图像采集模块执行,该图像采集模块只需要将表征有无目标对象的标识以及自身的标识发送给处理器即可,处理器可以基于发送有目标对象的图像采集模块的标识,在后续步骤中确定选择如何选择目标组件进行响应。
具体的,基于以每帧图像信息为基础进行检测、分类、分割等计算,分析得到该车辆的预设距离范围内有人的影像。
步骤S303:分析所述图像信息得到所述目标对象的动作内容,将动作内容作为所述目标对象的交流信息;
其中,对于该多帧图像信息进行分析,可以得到该目标对象的动作内容。
具体的,该动作内容可以是对象做出的各种动作,如走路、举手、抬腿等。
具体的,可以基于多帧连续的图像信息进行目标跟踪,提取有效特征,最后基于特征数据,分析得到该人的影像的动作内容。
具体实施中,还可以对于该目标对象的动作内容进行筛选,确定该动作内容是与车辆相关的,才将其作为目标对象的交流信息。
其中,该与车辆相关可以是方向相关,即该动作内容是朝向车辆方向做出的动作;该与车辆相关也可以是移动趋势相关,即该动作内容是靠近车辆的动作。
例如,目标对象的动作内容是向车辆的方向招手,确定该动作内容是目标对象的交流信息;目标对象的动作内容是向与车辆相反的方向招手,则该动作内容是与车辆无关的,则该动作内容不能够作为目标对象的交流信息。
步骤S304:分析所述交流信息得到所述目标对象的交流意图类型;
步骤S305:基于所述交流意图类型控制车辆的目标组件响应所述交流信息。
其中,步骤S304-305与实施例2中的步骤S203-204一致,本实施例中不做赘述。
综上,本实施例提供的一种车辆内外交流的方法中,包括:基于获得的图像信息进行分析,得到所述车辆外的目标区域内存在目标对象,以及该目标对象的动作内容,将该动作内容作为该目标对象的交流信息。本实施例中,基于图像信息进行分析,可以得到车辆外目标区域的情况,确定其中是否存在目标对象以及在有目标对象时该目标对象的动作内容。
如图5所示的,为本申请提供的一种车辆内外交流的方法实施例4的流程图,该方法包括以下步骤:
步骤S501:获取所述车辆周围的音频信息;
其中,步骤S501与实施例2中的步骤S201一致,本实施例中不做赘述。
步骤S502:基于所述车辆的运行状态是停止状态,分析所述音频信息,分析得到满足预设语音条件的语音片段,确定所述车辆外的目标区域内存在目标对象;
其中,本实施例中是以获取的环境信息是音频信息进行说明的。
其中,若当前车辆的运行状态是停止状态,则其可以与车外人员进行交流,则对于获得的音频信息进行分析,确定车辆外的目标区域内是否存在目标对象。
具体的,基于该语音条件对于音频信息进行分析,确定其中是否存在符合语音条件的语音片段。
其中,该预设语音条件是包含人类语音特征的条件,,若存在符合预设语音条件的语音片段,则表征有人在该车辆周围,确定该车辆外的目标区域内存在目标对象。
其中,该车辆中的音频采集模块的设置位置可以参考实施例3中的图4中设置图像采集模块的位置,该音频采集模块的设置位置可以与图像采集模块设置位置相邻。
步骤S503:分析所述音频信息得到所述目标对象的语音内容;
其中,可以基于语音识别功能模块对于该音频信息进行识别,得到其中的语音内容。
具体的,为了提高识别的准确度,还可以对于该音频信息中的满足预设语音条件的语音片段进一步筛选,过滤掉清晰度较低和/或音量较小的语音片段,相应的,得到清晰度较高和/或音量大于阈值的语音片段。
其中,对于该得到的语音片段进行识别得到其中的语音内容,并且将该语音内容作为该目标对象的语音内容。
其中,当车辆外的人员有交流意图时,其声音会较大以保证车内人员能够听到,因此,通过保留清晰度较高和/或音量大于阈值的语音片段实现保留车辆外的人员的具有交流意图的语音内容,去除无意义的语音内容。
步骤S504:将满足预设内容条件的语音内容作为所述目标对象的交流信息;
其中,当车辆外的目标对象有交流意图时,其可以通过说的话将交流意图传达给车内人员,因此,对于该得到的语音内容中满足预设内容条件的语音内容作为该目标对象的交流信息。
其中,该预设内容条件可以是预设的包含交流意图的词、短语或者句子等。
步骤S505:分析所述交流信息得到所述目标对象的交流意图类型;
步骤S506:基于所述交流意图类型控制车辆的目标组件响应所述交流信息。
其中,步骤S505-506与实施例2中的步骤S203-204一致,本实施例中不做赘述。
综上,本实施例提供的一种车辆内外交流的方法中,包括:基于获得的音频信息,分析得到满足预设语音条件的语音片段,确定所述车辆外的目标区域内存在目标对象,以及该目标对象的语音内容,将满足预设内容条件的语音内容作为目标对象的交流信息。本实施例中,基于语音信息进行分析,可以得到车辆外目标区域的情况,确定其中是否存在目标对象以及在有目标对象时该目标对象的语音内容。
如图6所示的,为本申请提供的一种车辆内外交流的方法实施例5的流程图,该方法包括以下步骤:
步骤S601:获取车辆的环境信息;
步骤S602:基于所述车辆的运行状态是停止状态,分析所述环境信息得到所述车辆外的目标区域内存在目标对象以及所述目标对象的交流信息;
其中,步骤S601-602与实施例1中的步骤S101-102一致,本实施例中不做赘述。
步骤S603:确定所述交流信息是否包含攻击内容;
其中,对于该目标对象的交流信息进行分析,得到其中包含的交流意图内容。
其中,该交流信息是目标对象生成的,其携带该目标对象的交流意图。
例如,交流信息是目标对象的动作内容时,则该动作内容中包含有能够表征该目标对象的交流意图的动作。
例如,交流信息是目标对象的语音内容时,则该语音内容中包含有能够表征该目标对象的交流意图的内容。
具体的,可以预设攻击内容条件,基于该预设攻击内容条件对于该交流信息进行筛选,确定其中是否包含有预设攻击内容。
具体的,该攻击内容包括攻击语言和攻击动作中的至少一个。
其中,若该交流信息是动作内容时,对于该动作内容中是否包含攻击动作进行确定,以确定其中包含有预设攻击内容。
例如,攻击动作包括:握持管制器械、挥动握持物体、击打、脚踹等能够对他人做出伤害的动作等。
其中,若该交流信息是音频信息时,对于该音频信息中是否包含攻击语言进行确定,以确定其中包含有预设攻击内容。
例如,攻击语言包括:脏话、挑衅语言等。
步骤S604:若所述交流信息包含攻击内容,确定所述目标对象的交流意图类型是攻击类型;
其中,若该交流信息中包含攻击内容,则表征该目标对象的交流意图有攻击意图,确定该目标对象的交流意图类型是攻击类型,该目标对象可能会伤害车内人员。
步骤S605:若所述交流信息不包含攻击内容,确定所述目标对象的交流意图类型是非攻击类型;
其中,若该交流信息中不包含攻击内容,则表征该目标对象的交流意图无攻击意图,确定该目标对象的交流意图类型是非攻击类型,该目标对象意图与车内人员正常交流。
步骤S606:基于所述交流意图类型控制车辆的目标组件响应所述交流信息。
其中,步骤S506与实施例1中的步骤S104一致,本实施例中不做赘述。
综上,本实施例提供的一种车辆内外交流的方法中,包括:分析该目标对象的交流信息,确定其中是否包含攻击内容;若该交流信息包含攻击内容,确定目标对象的交流意图类型是攻击类型;若该交流信息不包含攻击内容,确定目标对象的交流意图类型是非攻击类型。本实施例中,基于目标对象的交流信息确定其交流意图类型是攻击类型还是非攻击类型,以便后续针对不同的交流意图类型控制车辆以不同的方式进行响应,保证车内人员安全。
如图7所示的,为本申请提供的一种车辆内外交流的方法实施例6的流程图,该方法包括以下步骤:
步骤S701:获取车辆的环境信息;
步骤S702:基于所述车辆的运行状态是停止状态,分析所述环境信息得到所述车辆外的目标区域内存在目标对象以及所述目标对象的交流信息;
步骤S703:确定所述交流信息是否包含攻击内容;
步骤S704:若所述交流信息包含攻击内容,确定所述目标对象的交流意图类型是攻击类型;
步骤S705:若所述交流信息不包含攻击内容,确定所述目标对象的交流意图类型是非攻击类型;
其中,步骤S701-705与实施例5中的步骤S601-605一致,本实施例中不做赘述。
步骤S706:基于所述交流意图类型是攻击类型,至少控制车辆的车窗关闭;
其中,若该目标对象的交流意图类型的攻击类型,该车辆的环境不安全,为保证车内人员安全,控制车辆的车窗关闭。
具体实施中,若在确定交流意图类型是攻击类型,且车辆的车窗已经关闭,则维持该车窗的关闭状态。
具体实施中,还可以生成警报,并控制车辆外的报警模块输出该警报,以警告该目标对象立即停止攻击行为/攻击语言。
具体实施中,还可以对该目标对象进行实时目标跟踪,确认其是否离开该目标区域的范围或者是停止攻击行为/攻击语言以确定该车辆周围环境是否安全,若该车辆周围环境安全,则可以控制车窗恢复原有开度状态。或者,在确定车辆周围环境安全后,提示车内人员是否控制车窗回复原有开度状态,并在接收到确认的指示后,控制车窗恢复原有开度状态。
其中,可以仅控制车辆与该目标对象所在一侧的车窗关闭。
其中,在步骤S702中确定的目标区域内存在目标对象过程中,可以确定该目标区域具体是车辆的哪侧外的区域。
具体的,可以根据确定存在该目标对象的图像信息是由设置于该车辆的哪一侧的图像采集模块采集得到,即可得知该目标对象具体是在车辆的哪一侧,相应的,关闭该侧的车窗。
具体的,可以根据设置于车辆两侧的音频采集模块采集得到的音频信息中,哪一侧的音频信息中的交流信息的音量/清晰度较大,则确定该目标对象具体是在车辆的哪一侧,相应的,关闭该侧的车窗。
步骤S707:基于所述交流意图类型是非攻击类型,且所述车辆的车窗关闭,控制车辆的交流***启动。
其中,所述交流***用于将所述目标对象的图像信息和/或音频信息在车内输出,并将车辆内对象的音频信息在车辆外输出。
其中,该车辆内对象是处于车辆内的人员。
其中,若确定目标对象的交流意图类型是非攻击性类型,则车内人员可以与车外目标对象进行交流,若该车辆的车窗关闭,需要启动车辆的交流信息,以实现车辆内的人员与车外的目标对象进行交流。
其中,该车辆的交流***用于实现车辆外的目标对象与车辆内的人员实现交流。
其中,若车窗开启,车辆外的目标对象与车辆内人员可以直接进行交流,无需启动交流***。
综上,本实施例提供的一种车辆内外交流的方法中,若该目标对象的交流意图类型是攻击类型,至少控制车辆的车窗关闭,以隔离该目标对象与车内对象,保护车内对象的安全;若基于该目标对象的交流意图类型是非攻击类型,且所述车辆的车窗关闭,控制车辆的交流***启动,所述交流***用于将所述目标对象的图像信息和/或音频信息在车内输出,并将车辆内对象的音频信息在车辆外输出,以在保护车内对象的前提下,实现车辆内对象与车辆外的目标对象能够交流。本实施例中,针对目标对象的不同交流意图类型,控制车辆以不同的方式响应,保护车内人员的安全。
如图8所示的,为本申请提供的一种车辆内外交流的方法实施例7的流程图,该方法包括以下步骤:
步骤S801:获取车辆的环境信息;
步骤S802:基于所述车辆的运行状态是停止状态,分析所述环境信息得到所述车辆外的目标区域内存在目标对象以及所述目标对象的交流信息;
步骤S803:分析所述交流信息得到所述交流信息中包含的交流意图内容;
步骤S804:若所述交流意图内容包含攻击内容,确定所述目标对象的交流意图类型是攻击类型;
步骤S805:若所述交流意图内容不包含攻击内容,确定所述目标对象的交流意图类型是非攻击类型;
步骤S806:基于所述交流意图类型是攻击类型,至少控制车辆的车窗关闭;
其中,步骤S801-805与实施例6中的步骤S701-706一致,本实施例中不做赘述。
步骤S807:基于所述交流意图类型是非攻击类型,且所述车辆的车窗关闭,生成提示信息;
其中,所述提示信息用于提示是否启动车辆的交流***。
其中,所述车辆的交流***用于实现车辆内对象与车辆外的目标对象进行交流。
其中,车辆外的目标区域内存在预与车内对象交流的目标对象,而且该车辆处于停止状态,则生成提示信息。
具体的,该提示信息用于提示是否激活交流***,以该目标对象进行交流。
因此,具体实施中,该提示信息还可以是“是否启动车内外交流***”或者“是否与车外人员交流”等,提示信息的具体内容可以根据实际情况进行设置,本申请中不对于该提示信息的具体内容做限制。
步骤S808:输出所述提示信息;
具体的,输出该提示信息的方式可以是语音播放、视频播放、对话框等中的一种或者多种的结合,根据输出该提示信息的模块结构的功能相应设置。
作为一个示例,将该提示信息生成语音信息,车辆的驾驶室设置有音频输出模块(如声音播放器),将该语音信息进行播放,以使得该车辆内驾驶室/副驾驶室的人员能够听到该提示信息。
作为一个示例,将该提示信息生成对话框,并在车辆的显示屏幕中显示输出,以使得车辆驾驶室/副驾驶室的人员能够看到该提示信息。
步骤S809:基于接收到确认信息,控制车辆的交流***启动。
其中,所述确认信息是对于所述提示信息的确认反馈。
其中,该确认信息可以是语音信息、基于触控屏上的触控操作输入的信息中的任意一个。
具体的,若该确认信息是语音信息时,可以仅对于语音信息中包含的语音内容进行识别,若包含“确认”或者类似确认的语音内容,则收到确认信息。
具体的,若该确认信息是语音信息时,也可以在语音内容的基础上,结合该语音信息中的身份相关特征进行识别,若该语音信息的声纹信息与驾驶人的声纹信息一致(表征发声人有启动交流***权限),且语音内容包含“确认”或者类似确认的语音内容,则收到确认信息;否则,未收到确认信息。
具体实施中,为了降低车辆的耗电量,在输出提示信息后的预设时间段内,若未接收到确认信息,则自动认为取消后续步骤。
具体的,该预设时间段可以是10秒、1分钟等,具体时长可以根据实际情况设置,本申请中不对于预设时间段的取值做限制。
具体实施中,车辆内设置的采集模块、输出模块与车辆外设置的采集模块、输出模块以及执行本方案的处理器组成交流***。
具体实施中,为了降低车辆的电量损耗,车内人员与车外人员交流时涉及的车内的音频采集模块,在启动车辆时,并未上电运行,而是在基于接收到的确认信息再上电启动,或者是并不作为与车外人员交流的功能模块,即该车内的音频采集模块不与车外的采集模块(音频采集模块和/或图像采集模块)组成交流***。
而且,为了降低车辆的电量消耗,在车辆启动上电时,并不启动车外设置的输出模块,而是在接收到上述的确认操作后,才启动该车外的输出模块,以实现与车外人员交流。
具体实施中,为了保证车内人员能够收到该提示信息,如果在约定时间内未接收到车内人员的响应,间隔一段时间再次输出,进行两次或者约定次数的提示,若在约定次数提示后仍内未接收到确认信息,默认不启动该交流***。
需要说明的是,在启动车辆的交流***之前,设置在车辆外部的图像采集模块和音频采集模块用于采集车辆的环境信息,设置在车辆内的图像输出模块以及音频输出模块能够输出其他的图像和其他的音频,设置在车辆内的音频采集模块能够对于车辆内的音频进行采集,并且基于该采集的音频进行其他形式的响应,如语音控制车辆的其他功能等。
综上,本实施例提供的一种车辆内外交流的方法中,包括:基于目标对象的交流意图类型是非攻击类型,且车辆的车窗关闭,生成提示信息,以提示车内对象是否开启交流***,以实现该目标对象进行交流,在接收到确认信息时,才启动该交流***,以保证车外人员能够与车内人员进行交流,是由车内人员确定是否与车外的目标人员交流,提高了车内人员的体验。
如图9所示的,为本申请提供的一种车辆内外交流的方法实施例8的流程图,该方法包括以下步骤:
步骤S901:获取车辆的环境信息;
步骤S902:基于所述车辆的运行状态是停止状态,分析所述环境信息得到所述车辆外的目标区域内存在目标对象以及所述目标对象的交流信息;
步骤S903:分析所述交流信息得到所述交流信息中包含的交流意图内容;
步骤S904:若所述交流意图内容包含攻击内容,确定所述目标对象的交流意图类型是攻击类型;
步骤S905:若所述交流意图内容不包含攻击内容,确定所述目标对象的交流意图类型是非攻击类型;
步骤S906:基于所述交流意图类型是攻击类型,至少控制车辆的车窗关闭;
其中,步骤S901-905与实施例6中的步骤S701-706一致,本实施例中不做赘述。
步骤S907:基于所述交流意图类型是非攻击类型,且所述车辆的车窗关闭,基于所述环境信息确定目标对象在车辆外侧所在的目标侧;
其中,车辆内设置的采集模块和输出模块、车辆两外侧设置的采集模块和输出模块以及执行本方案的处理器组成交流***。
其中,为了提高交流的效果且降低功耗,针对车辆外侧设置的采集模块和输出模块,仅采用目标对象所在一侧的输采集模块和输出模块进行交流。
具体的,基于该车辆的环境信息进行分析,得到其中目标对象在车辆外侧的所在的目标侧。
具体的,若有目标对象在车辆的预设距离范围内出现,该目标对象是在车辆的主驾驶室一侧或者副驾驶室一侧,只有一侧的图像采集模块能够采集得到包含该目标对象的图像信息,因此,确定存在该目标对象的图像信息是由哪侧设置的图像采集模块采集得到,即可得知该目标对象具体是在车辆的哪一侧。
其中,当目标对象靠近车辆意图与车内人员交流时,若其音量较小,只有其靠近一侧的音频采集模块采集得到的音频信息中包含交流内容,车辆另一侧的音频采集模块由于离该目标对象较远,其采集到的音频信息中并未包含交流内容,因此,直接基于交流内容所属音频信息确定对应的音频采集模块所在一侧即为该目标侧,该目标对象在该车辆的目标侧。
其中,当目标对象靠近车辆意图与车内人员交流时,若其音较大,其靠近一侧的音频采集模块采集得到的音频信息中包含交流内容,车辆另一侧的音频采集模块采集到的音频信息中包含该交流内容,另一侧的音频采集模块由于离该目标对象较远,其采集得到的音频信息的音量/清晰度小于该目标对象靠近一侧的音频采集模块采集得到的音频信息的音量/清晰度,确定音量/清晰度较大音频信息确定对应的音频采集模块所在一侧即为该目标侧,该目标对象在该车辆的目标侧。
具体的,该交流***包括设置在车辆外部的图像采集模块和/或音频采集模块、设置在车辆外部的音频输出模块、设置在车辆内图像输出模块和/或音频输出模块、设置在车辆内的音频采集模块。
其中,启动该交流***,具体是将该交流***中包括的各个模块采集的信息传递给同一个处理模块,由该处理模块对各个模块采集的信息进行交互方式的处理。
步骤S908:控制所述目标侧设置的图像采集模块和/或第一音频采集模块采集得到第一目标图像信息和/或第一目标音频信息;
其中,控制该车辆的目标侧设置的图像采集模块和/或第一音频采集模块采集对应侧区域的图像或者音频,得到第一目标图像信息和/或第一目标音频信息。
其中,该第一目标图像信息中包含目标对象的影像,该第一目标音频信息中包含该目标对象的声音。
步骤S909:控制车辆内的第一输出模块输出所述第一目标图像信息和/或第一目标音频信息;
其中,车辆内设置有输出模块,用于输出图像信息或者音频信息。
具体的,车辆内设置的第一输出模块包括图像输出模块和/或音频输出模块。
其中,该图像输出模块输出在车辆外部采集的第一目标图像信息;该音频输出模块用于输出在车辆外部采集的第一目标音频信息。
步骤S910:控制车辆内设置的第二音频采集模块采集得到第二目标音频信息;
其中,车辆内设置的第二音频采集模块,能够对于车辆内的音频进行采集得到第二目标音频信息。
具体的,该第二目标音频信息中包含有车辆内对象的声音。
其中,该第二目标音频信息可以是对于车外目标对象之前交流内容的反馈,也可以是向车外目标对象的交流内容。
步骤S911:控制车辆外目标侧设置的第二输出模块输出所述第二目标音频信息。
其中,在确定了目标对象所在的车辆外的目标侧后,控制该目标侧设置的输出模块输出该第二目标音频信息,以保证该目标对象能够听到该音频信息。
需要说明的是,步骤S908-909与步骤S91-911的先后顺序不限制于此实施例中的顺序,可以先执行获得车辆内的第二目标音频信息并输出到车辆外,也可以同时执行。
如图10所示的是车辆示意图,该车辆的外侧设置有两组采集模块1001-1002与两个输出模块1003-1004,分别设置在驾驶室外侧和副驾驶室外侧,具体是设置在车辆两侧的后视镜处。本示意图中,采集模块采用声音采集模块(收音器)和图像采集模块(摄像头),输出模块采用声音播放器,收音器能够分别对于车辆的驾驶室外侧和副驾驶室外侧的区域进行声音采集,摄像头能够分别对于车辆的驾驶室外侧和副驾驶室外侧的区域进行图像采集。其中,当目标人员在驾驶室一侧,设置于车辆外部驾驶室一侧的采集模块1001采集交流信息,同侧设置的输出模块1003输出反馈信息,实现车辆外人员与车辆内人员的无障碍交流。
综上,本实施例提供的一种车辆内外交流的方法中,基于环境信息确定目标对象在车辆外侧所在的目标侧;控制该目标侧的采集模块采集得到第一目标图像信息和/或第一目标音频信息在车辆内的第一输出模块输出;控制车辆内设置的采集模块采集得到第二目标音频信息在车辆外目标侧设置的第二输出模块输出,实现车辆外人员与车辆内人员的无障碍交流。
如图11所示的为应用本申请提供的一种车辆内外交流的方法的硬件布置示意图,该场景具体应用于一车辆中,该车辆内设置有车内声音播放器1101、车内声音收音器1102和显示屏1103,车辆外的驾驶室一侧设置有车外声音播放器1104、车外声音收音器1105、摄像头1106和车窗升降马达1107,车辆外的副驾驶室一侧设置有车外声音播放器1108、车外声音收音器1109、摄像头1110和车窗升降马达1111。
其中,车内声音收音器用于对于其所在环境的声音采集,具体是对于车辆内的声音进行采集;车内声音播放器用于将车外采集的声音在车内播放,显示屏用于显示待显示内容;其中,车外声音收音器用于对于其所在环境的声音采集,具体是对于车辆外的声音进行采集;车外声音播放器用于将车内采集的声音在车外播放;摄像头用于对于其所在环境的图像进行采集,具体是对于车辆外其图像采集范围的图像进行采集;车窗升降马达用于控制车窗的开度。
如图12所示的为应用本申请提供的一种车辆内外交流的方法的***框图,包括摄像头1、摄像头2、数据处理模块、ECU、车速传感器、软/应开关、显示屏、车内声音收音器、车内声音播放器、车外声音收音器1、车外声音播放器1、车外声音收音器2、车外声音播放器2、车窗升降马达1、车窗升降马达2,其中,摄像头1、车外声音收音器1、车外声音播放器1、车窗升降马达1是设置在驾驶室一侧外部的结构,车窗升降马达1设置于驾驶室一侧的车门内,用于控制该驾驶室的车窗升降,摄像头2、车外声音收音器2、车外声音播放器2是设置在副驾驶室一侧外部的结构,车窗升降马达2设置于副驾驶室一侧的车门内,用于控制该副驾驶室的车窗升降。
摄像头1和摄像头2采集的图像信息经数据处理模块初步处理,确定车辆外的目标区域内存在目标对象,而且该目标对象有攻击意图,通知ECU,ECU控制车窗升降马达运行,关闭车窗,以保证车内人员安全。
摄像头1和摄像头2采集的图像信息经数据处理模块初步处理,确定车辆外的目标区域内存在目标对象,而且该目标对象无攻击意图,通知ECU,ECU基于车速传感器检测到的车速为0,确定可以进行车内外人员的交流,该ECU生成提示信息在显示屏中显示,用户通显示屏输入确认信息后,ECU控制车内声音收音器采集的车内声音经过降噪处理,由车外声音播放器进行播放,ECU控制车外声音收集器采集的车外声音经过降噪处理,由车内声音播放器进行播放,实现车内外人员的无障碍交流。
其中,该提示信息可以用于提示车内人员是否启动车内外人员交流的交流***,其目的是确定该***框图中的组成结构的功能是否开启,如该ECU是否执行上述过程,车内声音收音器是否启动/采集车内声音、车外声音播放器是否启动/播放声音等功能。
其中,用户还可以通过软/硬开关启动车内外人员交流的***,即ECU执行上述过程,摄像头1和2采集的图像信息能够应用于确定是否在车辆外的目标区域内存在目标对象。当然,该软硬开关还可以用于关闭车内外人员交流的***。通过软/硬开关启动车内外人员交流的***时,不考虑车速的限制。
与上述本申请提供的一种车辆内外交流的方法实施例相对应的,本申请还提供了应用该车辆内外交流的方法的装置实施例。
如图13所示的为本申请提供的一种车辆内外交流的装置实施例的结构示意图,该装置包括以下结构:获取模块1301、第一分析模块1302、第二分析模块1303和控制模块1304;
其中,获取模块1301,用于获取所述车辆的环境信息;
其中,第一分析模块1302,用于基于所述车辆的运行状态是停止状态,分析所述环境信息得到所述车辆外的目标区域内存在目标对象以及所述目标对象的交流信息;
其中,第二分析模块1303,用于分析所述交流信息得到所述目标对象的交流意图类型;
其中,控制模块1304,用于基于所述交流意图类型控制车辆的目标组件响应所述交流信息,所述目标组件与所述交流意图类型对应。
可选的,该获取模块具体用于:
获取所述车辆周围的图像信息和/或音频信息,所述图像信息是由车辆外两侧设置的至少两个图像采集模块采集得到,所述音频信息是由车辆外两侧设置的至少两个音频采集模块采集得到。
可选的,若所述环境信息是图像信息,所述第一分析模块具体用于:
分析所述图像信息,得到所述车辆外的目标区域内存在目标对象;
分析所述图像信息得到所述目标对象的动作内容,将动作内容作为所述目标对象的交流信息。
可选的,若所述环境信息是音频信息,所述第一分析模块具体用于:
分析所述音频信息,分析得到满足预设语音条件的语音片段,确定所述车辆外的目标区域内存在目标对象;
分析所述音频信息得到所述目标对象的语音内容;
将满足预设内容条件的语音内容作为所述目标对象的交流信息。
可选的,第二分析模块,具体用于:
确定所述交流信息是否包含攻击内容;
若所述交流信息包含攻击内容,确定所述目标对象的交流意图类型是攻击类型;
若所述交流信息不包含攻击内容,确定所述目标对象的交流意图类型是非攻击类型。
可选的,控制模块,包括:
第一控制单元,用于基于所述交流意图类型是攻击类型,至少控制车辆的车窗关闭;
第二控制单元,用于基于所述交流意图类型是非攻击类型,且所述车辆的车窗关闭,控制车辆的交流***启动,所述交流***用于将所述目标对象的图像信息和/或音频信息在车内输出,并将车辆内对象的音频信息在车辆外输出。
可选的,第二控制单元,具体用于:
生成提示信息,所述提示信息用于提示是否启动车辆的交流***,所述车辆的交流***用于实现车辆内对象与车辆外的目标对象进行交流;
输出所述提示信息;
基于接收到确认信息,控制车辆的交流***启动,所述确认信息是对于所述提示信息的确认反馈。
可选的,第二控制单元,具体用于:
基于所述环境信息确定目标对象在车辆外侧所在的目标侧;
控制所述目标侧设置的图像采集模块和/或第一音频采集模块采集得到第一目标图像信息和/或第一目标音频信息;
控制车辆内的第一输出模块输出所述第一目标图像信息和/或第一目标音频信息;
控制车辆内设置的第二音频采集模块采集得到第二目标音频信息;
控制车辆外目标侧设置的第二输出模块输出所述第二目标音频信息。
需要说明的是,本申请中的车辆内外交流的装置中组成结构的功能参考方法实施例中的解释,本实施例中不做赘述。
综上,本申请提供了一种车辆内外交流的装置,在车辆处于停止状态,对于车辆环境信息分析得到该车辆外的目标区域中存在目标对象以及该目标对象的交流信息,基于该交流信息得到该目标对象的交流意图类型,针对不同的交流意图类型控制车辆进行不同的响应,以保证车辆内人员的安全的前提下与车外人员交流或者不与车外人员交流。
与上述本申请提供的一种车辆内外交流的方法实施例相对应的,本申请还提供了与该车辆内外交流的方法相应的电子设备以及可读存储介质。
其中,该电子设备,包括:存储器、处理器;
其中,存储器存储有处理程序;
所述处理器用于加载并执行所述存储器存储的所述处理程序,以实现如上述任一项所述的车辆内外交流的方法的各步骤。
具体该电子设备的实现车辆内外交流的方法,参考前述车辆内外交流的方法实施例即可。
其中,该可读存储介质,其上存储有计算机程序,所述计算机程序被处理器调用并执行,实现如上述任一项所述的车辆内外交流的方法的各步骤。
具体该可读存储介质存储的计算机程序执行实现车辆内外交流的方法,参考前述车辆内外交流的方法实施例即可。
本说明书中各个实施例采用递进的方式描述,每个实施例重点说明的都是与其他实施例的不同之处,各个实施例之间相同相似部分互相参见即可。对于实施例提供的装置而言,由于其与实施例提供的方法相对应,所以描述的比较简单,相关之处参见方法部分说明即可。
对所提供的实施例的上述说明,使本领域专业技术人员能够实现或使用本申请。对这些实施例的多种修改对本领域的专业技术人员来说将是显而易见的,本文中所定义的一般原理可以在不脱离本申请的精神或范围的情况下,在其它实施例中实现。因此,本申请将不会被限制于本文所示的这些实施例,而是要符合与本文所提供的原理和新颖特点相一致的最宽的范围。

Claims (10)

1.一种车辆内外交流的方法,其特征在于,包括:
获取所述车辆的环境信息;
基于所述车辆的运行状态是停止状态,分析所述环境信息得到所述车辆外的目标区域内存在目标对象以及所述目标对象的交流信息;
分析所述交流信息得到所述目标对象的交流意图类型;
基于所述交流意图类型控制车辆的目标组件响应所述交流信息,所述目标组件与所述交流意图类型对应。
2.根据权利要求1所述的方法,其特征在于,所述获取所述车辆的环境信息,包括:
获取所述车辆周围的图像信息和/或音频信息,所述图像信息是由车辆外两侧设置的至少两个图像采集模块采集得到,所述音频信息是由车辆外两侧设置的至少两个音频采集模块采集得到。
3.根据权利要求2所述的方法,其特征在于,若所述环境信息是图像信息,所述分析所述环境信息得到所述车辆外的目标区域内存在目标对象以及所述目标对象的交流信息,包括:
分析所述图像信息,得到所述车辆外的目标区域内存在目标对象;
分析所述图像信息得到所述目标对象的动作内容,将动作内容作为所述目标对象的交流信息。
4.根据权利要求2所述的方法,其特征在于,若所述环境信息是音频信息,所述分析所述环境信息得到所述车辆外的目标区域内存在目标对象以及所述目标对象的交流信息,包括:
分析所述音频信息,分析得到满足预设语音条件的语音片段,确定所述车辆外的目标区域内存在目标对象;
分析所述音频信息得到所述目标对象的语音内容;
将满足预设内容条件的语音内容作为所述目标对象的交流信息。
5.根据权利要求1所述的方法,其特征在于,分析所述交流信息得到所述目标对象的交流意图类型,包括:
确定所述交流信息是否包含攻击内容;
若所述交流信息包含攻击内容,确定所述目标对象的交流意图类型是攻击类型;
若所述交流信息不包含攻击内容,确定所述目标对象的交流意图类型是非攻击类型。
6.根据权利要求5所述的方法,其特征在于,基于所述交流意图类型控制车辆的目标组件响应所述交流信息,包括:
基于所述交流意图类型是攻击类型,至少控制车辆的车窗关闭;
基于所述交流意图类型是非攻击类型,且所述车辆的车窗关闭,控制车辆的交流***启动,所述交流***用于将所述目标对象的图像信息和/或音频信息在车内输出,并将车辆内对象的音频信息在车辆外输出。
7.根据权利要求6所述的方法,其特征在于,所述控制车辆的交流***启动,包括:
生成提示信息,所述提示信息用于提示是否启动车辆的交流***,所述车辆的交流***用于实现车辆内对象与车辆外的目标对象进行交流;
输出所述提示信息;
基于接收到确认信息,控制车辆的交流***启动,所述确认信息是对于所述提示信息的确认反馈。
8.根据权利要求6所述的方法,其特征在于,所述控制车辆的交流***启动,包括:
基于所述环境信息确定目标对象在车辆外侧所在的目标侧;
控制所述目标侧设置的图像采集模块和/或第一音频采集模块采集得到第一目标图像信息和/或第一目标音频信息;
控制车辆内的第一输出模块输出所述第一目标图像信息和/或第一目标音频信息;
控制车辆内设置的第二音频采集模块采集得到第二目标音频信息;
控制车辆外目标侧设置的第二输出模块输出所述第二目标音频信息。
9.一种车辆内外交流的装置,其特征在于,包括:
获取模块,用于获取所述车辆的环境信息;
第一分析模块,用于基于所述车辆的运行状态是停止状态,分析所述环境信息得到所述车辆外的目标区域内存在目标对象以及所述目标对象的交流信息;
第二分析模块,用于分析所述交流信息得到所述目标对象的交流意图类型;
控制模块,用于基于所述交流意图类型控制车辆的目标组件响应所述交流信息,所述目标组件与所述交流意图类型对应。
10.一种可读存储介质,其特征在于,其上存储有计算机程序,所述计算机程序被处理器调用并执行,实现如权利要求1-8任一项所述的车辆内外交流的方法的各步骤。
CN202211136039.7A 2022-09-19 2022-09-19 一种车辆内外交流的方法、装置和可读存储介质 Pending CN115497478A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202211136039.7A CN115497478A (zh) 2022-09-19 2022-09-19 一种车辆内外交流的方法、装置和可读存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202211136039.7A CN115497478A (zh) 2022-09-19 2022-09-19 一种车辆内外交流的方法、装置和可读存储介质

Publications (1)

Publication Number Publication Date
CN115497478A true CN115497478A (zh) 2022-12-20

Family

ID=84471073

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202211136039.7A Pending CN115497478A (zh) 2022-09-19 2022-09-19 一种车辆内外交流的方法、装置和可读存储介质

Country Status (1)

Country Link
CN (1) CN115497478A (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN116131872A (zh) * 2023-01-13 2023-05-16 浙江极氪智能科技有限公司 车辆的交互***、方法及存储介质

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN116131872A (zh) * 2023-01-13 2023-05-16 浙江极氪智能科技有限公司 车辆的交互***、方法及存储介质

Similar Documents

Publication Publication Date Title
EP3675121B1 (en) Computer-implemented interaction with a user
CN112124073B (zh) 基于酒精检测的智能驾驶控制方法及装置
WO2023273064A1 (zh) 对象说话检测方法及装置、电子设备和存储介质
CN110310618B (zh) 车辆行驶环境声音的处理方法、处理装置和车辆
CN112026790B (zh) 车载机器人的控制方法及装置、车辆、电子设备和介质
WO2007074842A1 (ja) 画像処理装置
CN108463369B (zh) 车辆信息娱乐和连接性***
CN110910887B (zh) 语音唤醒方法和装置
CN111415347A (zh) 遗留对象检测方法和装置及交通工具
EP4141813A1 (en) Detection and mitigation of inappropriate behaviors of autonomous vehicle passengers
KR20210042860A (ko) 정보 출력 방법, 장치 및 시스템
CN115497478A (zh) 一种车辆内外交流的方法、装置和可读存储介质
JP2019123259A (ja) 車両制御装置、車両制御方法、及び車両制御プログラム
WO2023231211A1 (zh) 语音识别方法、装置、电子设备、存储介质及产品
CN111340665A (zh) 一种求救方法、求救终端及计算机可读存储介质
CN105383380A (zh) 一种提示信息输出方法及车载终端
CN107139925A (zh) 车辆起步控制方法及装置、车辆、存储介质
WO2023273063A1 (zh) 乘员说话检测方法及装置、电子设备和存储介质
CN114332941A (zh) 基于乘车对象检测的报警提示方法、装置及电子设备
CN114283793A (zh) 一种语音唤醒方法、装置、电子设备、介质及程序产品
CN117095680A (zh) 车辆控制方法、装置、设备及存储介质
CN112061065B (zh) 一种车内行为识别报警方法、设备、电子设备及存储介质
CN112937479A (zh) 车辆控制方法及装置、电子设备和存储介质
CN112233674A (zh) 一种多模交互方法及其***
WO2023137908A1 (zh) 声音识别方法、装置、介质、设备、程序产品及车辆

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination