车辆及其设备操作信息显示方法和***
技术领域
本申请涉及车机设备技术领域,具体涉及一种设备操作信息显示方法,以及应用所述设备操作信息显示方法的***和车辆。
背景技术
随着生活水平的不断改善,汽车在人们的生活中越来越普遍,逐步成为城市和乡村的人们生活中不可或缺的交通工具之一。
同时,人们不再简单的定义汽车为交通运输工具与代步工具,汽车的安全性、环保性、舒适性以及娱乐性等方面的需求越来越大。
特别是在车辆使用过程中,用户希望用车体验能够更加舒适、互动和可观赏性等,但是,目前车辆只能提供简单的搭运功能,用户上车一般就是简单的开车,乘客则只能聊天、看手机或者直接睡觉。另外,有些智能设备的功能复杂,用户一般难以及时了解,所以需要提供额外的帮助信息用户进行操作。
显然,现有的车内设置明显跟不上技术发展的趋势,难以满足日益增长的物质文化需求。
针对现有技术的多方面不足,本申请的发明人经过深入研究,提出一种车辆及其设备操作信息显示方法和***。
发明内容
本申请的目的在于,提供一种车辆及其设备操作信息显示方法和***,能够对用户的随身携带智能物品进行识别,而且当这些智能物品邻接至某些屏显区域时,能够自动生成设备操作信息,供用户了解智能物品并通过车机设备进行间接控制智能物品,增加互动乐趣。
为解决上述技术问题,本申请提供一种设备操作信息显示方法,作为其中一种实施方式,提供一屏显装置、摄像头和车机设备,所述设备操作信息显示方法包括:
屏显装置判断是否获取到智能设备;
若获取到智能设备,判断所述智能设备是否邻近和/或接触至屏显装置的屏显区域;
若邻近和/或接触至屏显装置的屏显区域,摄像头获取所述智能设备的特征标记信息;
车机设备根据所述特征标记信息加载用于控制所述智能设备的设备操作信息;
将所述设备操作信息发送至所述屏显区域进行显示,以供用户进行操作。
作为其中一种实施方式,所述屏显装置判断是否获取到智能设备的步骤,具体包括:
车机设备通过蓝牙方式搜索智能设备;
若搜索到智能设备则获取所述智能设备的设备ID,通过获取的所述设备ID判断是否为智能设备。
作为其中一种实施方式,车机设备启动车载摄像头对智能设备进行识别,以获取所述智能设备的特征标记信息。
作为其中一种实施方式,所述车机设备根据所述特征标记信息加载用于控制所述智能设备的设备操作信息的步骤,具体包括:
车机设备根据所述特征标记信息判断是否为已绑定的智能设备;
若为已绑定的智能设备,从车机设备本地加载对应的设备操作信息。
作为其中一种实施方式,若为未绑定的智能设备,车机设备根据所述特征标记信息从云服务器加载对应的设备操作信息。
作为其中一种实施方式,车机设备加载对应的设备操作信息,具体包括过程:
车机设备获取所述智能设备的操作功能项及其对应的控制交互命令协议,其中,所述操作功能项包括上、下、左、右、确认、上一首、下一首、播放、暂停、音量+、音量-和/或发送共享。
作为其中一种实施方式,所述将所述设备操作信息发送至所述屏显区域进行显示的步骤,具体包括:
在所述屏显区域内显示所述智能设备,并将所述设备操作信息环绕所述智能设备分布显示。
作为其中一种实施方式,所述将所述设备操作信息发送至所述屏显区域进行显示的步骤之后,还包括:
车机设备判断是否接收到用户的操作语音;
若接收到用户的操作语音,分析所述操作语音对应的操作命令,将所述操作指令发送给智能设备,以使智能设备执行相应的响应操作。
为解决上述技术问题,本申请还提供一种设备操作信息显示***,作为其中一种实施方式,配置有屏显装置、摄像头和车机设备,所述车机设备包括存储器和处理器,所述存储器存储有计算机程序,所述处理器用于执行计算机程序,以实现如上所述的设备操作信息显示方法的步骤。
为解决上述技术问题,本申请还提供一种车辆,作为其中一种实施方式,所述车辆配置有如上所述的设备操作信息显示***。
作为其中一种实施方式,所述屏显装置为车机主屏幕、中央扶手显示屏幕、前挡风窗平台显示屏幕和/或座椅靠背显示屏幕。
本申请车辆及其设备操作信息显示方法和***,提供一屏显装置、摄像头和车机设备,屏显装置判断是否获取到智能设备,若获取到智能设备,判断所述智能设备是否邻近和/或接触至屏显装置的屏显区域,若邻近和/或接触至屏显装置的屏显区域,摄像头获取所述智能设备的特征标记信息,车机设备根据所述特征标记信息加载用于控制所述智能设备的设备操作信息,将所述设备操作信息发送至所述屏显区域进行显示,以供用户进行操作。本申请能够对用户的随身携带智能物品进行识别,而且当这些智能物品邻接至某些屏显区域时,能够自动生成设备操作信息,供用户了解智能物品并通过车机设备进行间接控制智能物品,增加互动乐趣。
上述说明仅是本申请技术方案的概述,为了能够更清楚了解本申请的技术手段,而可依照说明书的内容予以实施,并且为了让本申请的上述和其他目的、特征和优点能够更明显易懂,以下特举较佳实施例,并配合附图,详细说明如下。
附图说明
图1为本申请设备操作信息显示方法一实施方式的流程示意图。
图2为本申请设备操作信息显示***的车机设备的模块示意图。
具体实施方式
为更进一步阐述本申请为达成预定申请目的所采取的技术手段及功效,以下结合附图及较佳实施例,对依据本申请车辆及其设备操作信息显示方法和***的具体实施方式、方法、步骤、特征及其效果,详细说明如下。
有关本申请的前述及其他技术内容、特点及功效,在以下配合参考图式的较佳实施例的详细说明中将可清楚呈现。通过具体实施方式的说明,当可对本申请为达成预定目的所采取的技术手段及效果得以更加深入且具体的了解,然而所附图式仅是提供参考与说明之用,并非用来对本申请加以限制。
请参阅图1,图1为本申请设备操作信息显示方法一实施方式的流程示意图。
需要说明的是,本实施方式提供一屏显装置、摄像头和车机设备,所述设备操作信息显示方法可以包括但不限于如下几个步骤。
步骤S101,屏显装置判断是否获取到智能设备;
步骤S102,若获取到智能设备,判断所述智能设备是否邻近和/或接触至屏显装置的屏显区域;其中,若没获取到,则不作处理;
步骤S103,若邻近和/或接触至屏显装置的屏显区域,摄像头获取所述智能设备的特征标记信息;其中,若未邻近或接触至屏显区域,则不作处理;
步骤S104,车机设备根据所述特征标记信息加载用于控制所述智能设备的设备操作信息;
步骤S105,将所述设备操作信息发送至所述屏显区域进行显示,以供用户进行操作。
值得说明的是,本实施方式所述屏显装置判断是否获取到智能设备的步骤,具体可以包括:车机设备通过蓝牙方式搜索智能设备;若搜索到智能设备则获取所述智能设备的设备ID,通过获取的所述设备ID判断是否为智能设备。
容易理解的是,通过蓝牙等连接的设备,其一般会同时显示设备ID,比如M音箱,或者6S-iPhone等等。
具体而言,本实施方式车机设备启动车载摄像头对智能设备进行识别,以获取所述智能设备的特征标记信息。
在本实施方式中,所述车机设备根据所述特征标记信息加载用于控制所述智能设备的设备操作信息的步骤,具体包括:车机设备根据所述特征标记信息判断是否为已绑定的智能设备;若为已绑定的智能设备,从车机设备本地加载对应的设备操作信息。
在其他实施方式中,若为未绑定的智能设备,车机设备根据所述特征标记信息从云服务器加载对应的设备操作信息。
本实施方式以手机或者蓝牙音箱两个智能设备为例,车机设备加载对应的设备操作信息,具体包括过程:车机设备获取所述智能设备的操作功能项及其对应的控制交互命令协议,其中,所述操作功能项包括上、下、左、右、确认、上一首、下一首、播放、暂停、音量+、音量-和/或发送共享。
为增加用户的互动体验,本实施方式所述将所述设备操作信息发送至所述屏显区域进行显示的步骤,具体包括:在所述屏显区域内显示所述智能设备,并将所述设备操作信息环绕所述智能设备分布显示。
需要说明的是,用户在开车的时候不便操作,本实施方式所述将所述设备操作信息发送至所述屏显区域进行显示的步骤之后,还包括:车机设备判断是否接收到用户的操作语音;若接收到用户的操作语音,分析所述操作语音对应的操作命令,将所述操作指令发送给智能设备,以使智能设备执行相应的响应操作。
需要特别说明的是,本实施方式所述将所述设备操作信息发送至所述屏显区域进行显示,以供用户进行操作的步骤之后,还可以包括如下过程:
过程201,车机设备获取所述智能设备与所述屏显装置的屏显区域之间的实时距离值;
过程202,根据所述实时距离值动态调整所述设备操作信息的屏显播放方式。
容易理解的是,本实施方式屏显播放方式,可以指的是渐变、突变、纹理切换、颜色切换、形状切换、体积改变和位置改变等等。
需要说明的是,本实施方式所述车机设备通过摄像头获取所述智能设备的特征标记信息;和/或,所述车机设备通过压感方式获取所述智能设备的形状、轮廓和/或纹理的特征标记信息。
在本实施方式中,屏显装置的屏显区域可以具备压感功能,比如采用压力传感器的方式,用于对邻接的智能设备进行压力感应、进而识别轮廓、纹理等结构信息。
需要说明的是,本实施方式可以在车机设备自身进行处理,也可以通过3G通信网络、4G通信网络、5G通信网络和WIFI网络等进行远程处理。
具体而言,本实施方式在屏显区域显示的智能设备,具体可以为倒影动画、虚拟三维模拟动画、平面模拟动画或虚拟场景衍生动画。
本申请能够对用户的随身携带智能物品进行识别,而且当这些智能物品邻接至某些屏显区域时,能够自动生成设备操作信息,供用户了解智能物品并通过车机设备进行间接控制智能物品,增加互动乐趣。
请参阅图2,本申请还提供一种设备操作信息显示***,作为其中一种实施方式,配置有屏显装置、摄像头和车机设备,所述车机设备包括存储器20和处理器21,所述存储器20存储有计算机程序,所述处理器21用于执行计算机程序,以实现如上所述的设备操作信息显示方法。
具体而言,所述处理器21用于通过屏显装置判断是否获取到智能设备;
若获取到智能设备,所述处理器21用于判断所述智能设备是否邻近和/或接触至屏显装置的屏显区域;其中,若没获取到,则不作处理;
若邻近和/或接触至屏显装置的屏显区域,所述处理器21用于通过摄像头获取所述智能设备的特征标记信息;其中,若未邻近或接触至屏显区域,则不作处理;
所述处理器21用于车机设备根据所述特征标记信息加载用于控制所述智能设备的设备操作信息;
所述处理器21用于将所述设备操作信息发送至所述屏显区域进行显示,以供用户进行操作。
值得说明的是,本实施方式所述处理器21用于通过蓝牙方式搜索智能设备;若搜索到智能设备则获取所述智能设备的设备ID,通过获取的所述设备ID判断是否为智能设备。
容易理解的是,通过蓝牙等连接的设备,其一般会同时显示设备ID,比如M音箱,或者6S-iPhone等等。
具体而言,本实施方式车机设备启动车载摄像头对智能设备进行识别,以获取所述智能设备的特征标记信息。
在本实施方式中,所述处理器21用于根据所述特征标记信息判断是否为已绑定的智能设备;若为已绑定的智能设备,从车机设备本地加载对应的设备操作信息。
在其他实施方式中,若为未绑定的智能设备,所述处理器21用于根据所述特征标记信息从云服务器加载对应的设备操作信息。
本实施方式以手机或者蓝牙音箱两个智能设备为例,所述处理器21用于获取所述智能设备的操作功能项及其对应的控制交互命令协议,其中,所述操作功能项包括上、下、左、右、确认、上一首、下一首、播放、暂停、音量+、音量-和/或发送共享。
为增加用户的互动体验,本实施方式在所述屏显区域内显示所述智能设备,并将所述设备操作信息环绕所述智能设备分布显示。
需要说明的是,用户在开车的时候不便操作,本实施方式还包括:所述处理器21用于判断是否接收到用户的操作语音;若接收到用户的操作语音,分析所述操作语音对应的操作命令,将所述操作指令发送给智能设备,以使智能设备执行相应的响应操作。
需要特别说明的是,本实施方式所述将所述设备操作信息发送至所述屏显区域进行显示,以供用户进行操作之后,所述处理器21用于获取所述智能设备与所述屏显装置的屏显区域之间的实时距离值;所述处理器21用于根据所述实时距离值动态调整所述设备操作信息的屏显播放方式。
容易理解的是,本实施方式屏显播放方式,可以指的是渐变、突变、纹理切换、颜色切换、形状切换、体积改变和位置改变等等。
需要说明的是,本实施方式所述处理器21用于通过摄像头获取所述智能设备的特征标记信息;和/或,所述处理器21用于通过压感方式获取所述智能设备的形状、轮廓和/或纹理的特征标记信息。
在本实施方式中,屏显装置的屏显区域可以具备压感功能,用于对邻接的智能设备进行压力感应、进而识别轮廓、纹理等结构信息。
需要说明的是,本实施方式可以在车机设备自身进行处理,也可以通过3G通信网络、4G通信网络、5G通信网络和WIFI网络等进行远程处理。
具体而言,本实施方式在屏显区域显示的智能设备,具体可以为倒影动画、虚拟三维模拟动画、平面模拟动画或虚拟场景衍生动画。
本申请能够对用户的随身携带智能物品进行识别,而且当这些智能物品邻接至某些屏显区域时,能够自动生成设备操作信息,供用户了解智能物品并通过车机设备进行间接控制智能物品,增加互动乐趣。
请继续参阅图2,本申请还提供一种车辆,作为其中一种实施方式,所述车辆配置有如上所述的设备操作信息显示***及其配置的车机设备。
作为其中一种实施方式,所述屏显装置为车机主屏幕、中央扶手显示屏幕、前挡风窗平台显示屏幕和/或座椅靠背显示屏幕。
本申请能够对用户的随身携带智能物品进行识别,而且当这些智能物品邻接至某些屏显区域时,能够自动生成设备操作信息,供用户了解智能物品并通过车机设备进行间接控制智能物品,增加互动乐趣。
值得一提的是,本实施方式的5G通讯/通信网络技术,可以是一个面向场景化的技术,本申请利用5G技术对车辆(特别是智能网联汽车)起到关键的支持作用,其同时实现连接人、连接物或连接车辆,其具体可以采用下述三个典型应用场景组成。
第一个是eMBB(Enhance Mobile Broadband,增强移动宽带),使用户体验速率在0.1~1gpbs,峰值速率在10gbps,流量密度在10Tbps/km2;
第二个超可靠低时延通信,本申请可以实现的主要指标是端到端的时间延迟为ms(毫秒)级别;可靠性接近100%;
第三个是mMTC(海量机器类通信),本申请可以实现的主要指标是连接数密度,每平方公里连接100万个其他终端,10^6/km2。
通过上述方式,本申请利用5G技术的超可靠、低时延时的特点,结合比如雷达和摄像头等就可以给车辆提供显示的能力,可以跟车辆实现互动,同时利用5G技术的交互式感知功能,用户可以对外界环境做一个输出,不光能探测到状态,还可以做一些反馈等。进一步而言,本申请还可以应用到自动驾驶的协同里面,比如车辆之间进行协作式避碰,车辆编队等,以进行车速整体编队通行,提高通行效率。
此外,本申请还可以利用5G技术实现通信增强自动驾驶感知能力,并且可以满足车内乘客对AR(增强现实)/VR(虚拟现实)、游戏、电影、移动办公等车载信息娱乐,以及高精度的需求。本申请可以实现厘米级别的3D高精度定位地图的下载量在3~4Gb/km,正常车辆限速120km/h(千米/时)下每秒钟地图的数据量为90Mbps~120Mbps(兆比特每秒),同时还可以支持融合车载传感器信息的局部地图实时重构,以及危险态势建模与分析等。
需要说明的是,本申请还可以应用到自动驾驶层面,利用5G技术可以协助对城市固定路线车辆实现部分智能云控制,对园区、港口的无人驾驶车辆实现基于云的运营优化以及特定条件下的远程显示、控制。
在本申请中,上述***和方法,均可以使用到具备车辆TBOX的车辆***中,即车辆为可以具备车辆TBOX的车辆***,其还可以连接到车辆的CAN总线上。
在本实施方式中,CAN可以包括三条网络通道CAN_1、CAN_2和CAN_3,车辆还可以设置一条以太网网络通道,其中三条CAN网络通道可以通过两个车联网网关与以太网网络通道相连接,举例而言,其中CAN_1网络通道包括混合动力总成***,其中CAN_2网络通道包括运行保障***,其中CAN_3网络通道包括电力测功机***,以太网网络通道包括高级管理***,所述的高级管理***包括作为节点连接在以太网网络通道上的人-车-路模拟***和综合信息采集单元,所述的CAN_1网络通道、CAN_2网络通道与以太网网络通道的车联网网关可以集成在综合信息采集单元中;CAN_3网络通道与以太网网络通道的车联网网关可以集成在人-车-路模拟***中。
进一步而言,所述的CAN_1网络通道连接的节点有:发动机ECU、电机MCU、电池BMS、自动变速器TCU以及混合动力控制器HCU;CAN_2网络通道连接的节点有:台架测控***、油门传感器组、功率分析仪、瞬时油耗仪、直流电源柜、发动机水温控制***、发动机机油温度控制***、电机水温控制***以及发动机中冷温度控制***;CAN_3网络通道连接的节点有:电力测功机控制器。
优选的所述的CAN_1网络通道的速率为250Kbps,采用J1939协议;CAN_2网络通道的速率为500Kbps,采用CANopen协议;CAN_3网络通道的速率为1Mbps,采用CANopen协议;以太网网络通道的速率为10/100Mbps,采用TCP/IP协议。
在本实施方式中,所述车联网网关支持5G技术的V2X车联网网络,其还可以配备有IEEE802.3接口、DSPI接口、eSCI接口、CAN接口、MLB接口、LIN接口和/或I2C接口。
在本实施方式中,比如,IEEE802.3接口可以用于连接无线路由器,为整车提供WIFI网络;DSPI(提供者管理器组件)接口用于连接蓝牙适配器和NFC(近距离无线通讯)适配器,可以提供蓝牙连接和NFC连接;eSCI接口用于连接4G/5G模块,与互联网通讯;CAN接口用于连接车辆CAN总线;MLB接口用于连接车内的MOST(面向媒体的***传输)总线,LIN接口用于连接车内LIN(局域互联网络)总线;IC接口用于连接DSRC(专用短程通讯)模块和指纹识别模块。此外,本申请可以通过采用MPC5668G芯片对各个不同协议进行相互转换,将不同的网络进行融合。
此外,本实施方式车辆TBOX***,Telematics-BOX,简称车载TBOX或远程信息处理器。
本实施方式Telematics为远距离通信的电信(Telecommunications)与信息科学(Informatics)的合成,其定义为通过内置在车辆上的计算机***、无线通信技术、卫星导航装置、交换文字、语音等信息的互联网技术而提供信息的服务***。简单的说就通过无线网络将车辆接入互联网(车联网***),为车主提供驾驶、生活所必需的各种信息。
此外,本实施方式Telematics是无线通信技术、卫星导航***、网络通信技术和车载电脑的综合,当车辆行驶当中出现故障时,通过无线通信连接服务中心,进行远程车辆诊断,内置在发动机上的计算机可以记录车辆主要部件的状态,并随时为维修人员提供准确的故障位置和原因。通过用户通讯终端接收信息并查看交通地图、路况介绍、交通信息、安全与治安服务以及娱乐信息服务等,另外,本实施方式的车辆还可以在后座设置电子游戏和网络应用。不难理解,本实施方式通过Telematics提供服务,可以方便用户了解交通信息、临近停车场的车位状况,确认当前位置,还可以与家中的网络服务器连接,及时了解家中的电器运转情况、安全情况以及客人来访情况等等。
本实施方式车辆还可设置ADAS(Advanced Driver Assistant System,先进驾驶辅助***),其可以利用安装于车辆上的上述各种传感器,在第一时间收集车内外的环境数据,进行静、动态物体的辨识、侦测与追踪等技术上的处理,从而能够让驾驶者在最快的时间察觉可能发生的危险,以引起注意和提高安全性。对应地,本申请ADAS还可以采用雷达、激光和超声波等传感器,可以探测光、热、压力或其它用于监测车辆状态的变量,通常位于车辆的前后保险杠、侧视镜、驾驶杆内部或者挡风玻璃上。不难看出,上述ADAS功能所使用的各种智能硬件,均可以通过以太网链路的方式接入V2X车联网网络实现通信连接、交互。
本实施方式车辆的主机可包括适当的逻辑器件、电路和/或代码以用于实现OSI模型(Open System Interconnection,开放式通信***互联参考模型)上面五层的运行和/或功能操作。因此,主机会生成用于网络传输的数据包和/或对这些数据包进行处理,并且还会对从网络接受到的数据包进行处理。同时,主机可通过执行相应指令和/或运行一种或多种应用程序来为本地用户和/或一个或多个远程用户或网络节点提供服务。在本申请的不同实施方式中,主机可采用一种或多种安全协议。
在本申请中,用于实现V2X车联网网络的网络连接可以为交换机,其可以具有AVB功能(Audio Video Bridging,满足IEEE802.1的标准集合),和/或包括有一条或多条非屏蔽双绞线,每一端可以具有8P8C模块连接器。
在一优选实施方式中,V2X车联网网络中具体可以包括车身控制模块BCM、动力总线P-CAN、车身总线I-CAN、组合仪表CMIC、底盘控制装置和车身控制装置。
在本实施方式中,车身控制模块BCM可以集成车联网网关的功能,进行不同网段,即动力总线P-CAN和车身总线I-CAN之间的信号转换及报文转发等,例如,挂接在动力总线上的控制器如需要与挂接在车身总线I-CAN上的控制器进行通信,则要经过车身控制模块BCM进行两者之间的信号转换及转发等。
动力总线P-CAN和车身总线I-CAN分别与车身控制模块BCM相连。
组合仪表CMIC与动力总线P-CAN相连,且组合仪表CMIC与车身总线I-CAN相连。优选地,本实施方式的组合仪表CMIC与不同的总线,如动力总线P-CAN和车身总线I-CAN均相连,当组合仪表CMIC需要获取挂接在任意总线上的控制器信息时,均无需通过车身控制模块BCM进行信号转换以及报文转发,因此,可减轻网关压力、减少网络负载,且提高组合仪表CMIC获取信息的速度。
底盘控制装置与动力总线P-CAN相连。车身控制装置与车身总线I-CAN相连。在一些示例中,底盘控制装置和车身控制装置可分别向动力总线P-CAN和车身总线I-CAN上进行信息等数据广播,以便挂接在动力总线P-CAN或车身总线I-CAN上的其它车载控制器等设备获取该广播的信息,从而实现不同控制器等车载设备之间的通信。
此外,本实施方式车辆的V2X车联网网络,可以使用两条CAN总线,即动力总线P-CAN和车身总线I-CAN,将车身控制模块BCM作为网关,将组合仪表CMIC与动力总线P-CAN和车身总线I-CAN均相连的结构,可以省去了传统方式中组合仪表CMIC挂接在两条总线上的一条上时的底盘控制装置或车身控制装置的信息通过网关转发给组合仪表CMIC的操作,由此,减轻了车身控制模块BCM作为网关的压力,减少了网络负载,且更加方便将多条总线,如动力总线P-CAN和车身总线I-CAN上挂接的车载设备的信息发送至组合仪表CMIC上进行显示、信息传输实时性强。
最后,本申请的具体实施例可以包括如下:
1.车辆顾客区设计有娱乐信息一体化屏显区域(如桌面屏幕),也可以是大面积的中央扶手,且带有压感功能;
2.车辆内有带有可以识别物体的AI(人工智能)摄像头;
实现原理包括:
1.桌面屏幕的压感功能够感应智能设备,如底部轮廓特征;
2.车辆控制***接收到桌面屏幕的轮廓特征识别完成事件以后,与AI摄像头交互,对放在桌面屏幕上的摆件物体进行识别;
3.有车机设备或智能家居等主控***连接屏显桌面和摄象头,该主控***可以与智能设备建立WIFI或蓝牙连接,并且枚举获取该设备的功能或设备项,另外,还可以通过互联网从云服务器下载识别到的智能设备的控制菜单项及交互命令等;
在具体实现过程中,包括如下:
1.车机设备增加通过无线方式搜索发现及通过摄象头视觉特征来绑定某个智能设备的功能,比如一个智能蓝牙音箱,放到桌子上,通过蓝牙发现识别到该设备的Device-ID,并通过启动摄象头进行特征记忆学习的方法建立一个视觉智能设备与无线连接的对应关系;
2.桌面屏幕带有压感功能,进入识别模式;如指定智能桌面熄屏时感应到有物体摆放在其上且静置时间超过3秒,并且为非人体的触发操作时,对物体的大体底部轮廓特征进行识别,并通知主控***启动AI摄象头对桌面物体进行视觉识别,同时探测是否为绑定的无线设备;
3.当车机设备判断为已绑定的无线设备标识,并且AI摄象头识别到桌面摆放物体的视觉特征与绑定的智能设备有较高的匹配近似度时,通知智能桌面获取物体的底部轮廓与占位坐标;
4.车机设备获取该智能设备的操作功能项及控制交互命令协议,可以通过云服务器获取指定产品型号匹配的控制协议,当然,还可以通过直接与该智能设备沟通交互的方法来获取;
比如具体的实施方式包括但不限于以下方案:
A.向云服务器URL请求某型号智能设备的操作协议获取如下控制协议;
B.通过预定的蓝牙服务端口或智能设备的网络端口服务获取如下控制协议:
具体的控制协议包括但不限于以下内容:
5.车机设备根据智能音箱的摆放位置和底部轮廓进行控制菜单的UI环绕布局,并显示在桌面的屏幕中。
6.桌面屏显检测用户的控制菜单点击选择事件,可选地,也能支持语音识别选择某控制菜单项;
7.向智能设备发送菜单项的控制名称对应的操作码,或是进行进一步的逻辑处理,比如发送MP3时,则可以进行MP3文件路径的选择,打包发送MP3文件的二进制数据等;
8.接收智能设备发送的操作响应,判断是否成功,并相应的在桌面上给出提示;
9.当智能设备从桌面拿起时,屏幕检测到智能设备的离开,自动清除操作菜单等。
本实施方式通过智能屏显桌面能感应到摆放到其上的智能设备,并能自动识别该智能设备,自动建立无线连接,最后枚举智能设备的操作使用功能,并在环绕该智能设备所放置的桌面四周显示出与该设备相关的操作功能界面,这样便捷地提供一种可视化操作该设备的方式,提高了车辆的智能桌面与智能设备的操作体验。
以上所述,仅是本申请的较佳实施例而已,并非对本申请作任何形式上的限制,虽然本申请已以较佳实施例揭露如上,然而并非用以限定本申请,任何熟悉本专业的技术人员,在不脱离本申请技术方案范围内,当可利用上述揭示的技术内容作出些许更动或修饰为等同变化的等效实施例,但凡是未脱离本申请技术方案内容,依据本申请的技术实质对以上实施例所作的任何简单修改、等同变化与修饰,均仍属于本申请技术方案的范围内。