CN116118758A - 一种人车互联的虚拟现实控制方法、装置及*** - Google Patents

一种人车互联的虚拟现实控制方法、装置及*** Download PDF

Info

Publication number
CN116118758A
CN116118758A CN202211363612.8A CN202211363612A CN116118758A CN 116118758 A CN116118758 A CN 116118758A CN 202211363612 A CN202211363612 A CN 202211363612A CN 116118758 A CN116118758 A CN 116118758A
Authority
CN
China
Prior art keywords
target vehicle
real
instruction
wearable device
virtual reality
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202211363612.8A
Other languages
English (en)
Inventor
武亚铭
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Zhejiang Geely Holding Group Co Ltd
Zhejiang Zeekr Intelligent Technology Co Ltd
Original Assignee
Zhejiang Geely Holding Group Co Ltd
Zhejiang Zeekr Intelligent Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Zhejiang Geely Holding Group Co Ltd, Zhejiang Zeekr Intelligent Technology Co Ltd filed Critical Zhejiang Geely Holding Group Co Ltd
Priority to CN202211363612.8A priority Critical patent/CN116118758A/zh
Publication of CN116118758A publication Critical patent/CN116118758A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/08Interaction between the driver and the control system
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/08Interaction between the driver and the control system
    • B60W50/10Interpretation of driver requests or demands
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00Manipulating 3D models or images for computer graphics
    • G06T19/006Mixed reality
    • YGENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02PCLIMATE CHANGE MITIGATION TECHNOLOGIES IN THE PRODUCTION OR PROCESSING OF GOODS
    • Y02P90/00Enabling technologies with a potential contribution to greenhouse gas [GHG] emissions mitigation
    • Y02P90/02Total factory control, e.g. smart factories, flexible manufacturing systems [FMS] or integrated manufacturing systems [IMS]

Landscapes

  • Engineering & Computer Science (AREA)
  • Automation & Control Theory (AREA)
  • Human Computer Interaction (AREA)
  • Transportation (AREA)
  • Mechanical Engineering (AREA)
  • Computer Graphics (AREA)
  • Computer Hardware Design (AREA)
  • General Engineering & Computer Science (AREA)
  • Software Systems (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • User Interface Of Digital Computer (AREA)
  • Processing Or Creating Images (AREA)

Abstract

本申请公开了人车互联的虚拟现实控制方法、装置及***,其中,人车互联的虚拟现实控制方法可应用于自动驾驶技术领域,该方法包括:接收用户通过智能穿戴设备发送的目标车辆控制指令;向目标车辆发送所述目标车辆控制指令,以使得所述目标车辆根据所述目标车辆控制指令执行相应的目标车辆控制动作,并采集所述目标车辆控制动作执行过程中的实时场景图像得到第一实时场景图像信息;获取所述目标车辆发送的所述第一实时场景图像信息,根据所述第一实时场景图像信息生成第一实时虚拟现实全景图像;向所述智能穿戴设备发送所述第一实时虚拟现实全景图像,以使得所述智能穿戴设备显示所述第一实时虚拟现实全景图像。本申请极大的改善车辆使用便利性。

Description

一种人车互联的虚拟现实控制方法、装置及***
技术领域
本申请涉及计算机技术领域,特别涉及一种人车互联的虚拟现实控制方法、装置及***。
背景技术
随着物联网技术的发展,汽车产业也基于物联网技术开发出更多功能,在车辆驾驶安全性、舒适性等各方面提高的前提下,用户对驾驶便捷性和操作智能化的期望越来越高,汽车的智能化水平也逐渐提升。作为汽车智能化的一部分,人车交互直接影响到用户对智能驾驶功能的体验,然而现有技术中的人车交互方式忽略了远程人车交互的实时性和实景化,且多为用户单向触发的人车交互,导致人与车辆之间的互动性较差。
发明内容
为了解决现有技术的问题,本申请实施例提供了一种人车互联的虚拟现实控制方法、装置及***。所述技术方案如下:
一方面,提供了一种人车互联的虚拟现实控制方法,所述方法包括:
接收用户通过智能穿戴设备发送的目标车辆控制指令;
向目标车辆发送所述目标车辆控制指令,以使得所述目标车辆根据所述目标车辆控制指令执行相应的目标车辆控制动作,并采集所述目标车辆控制动作执行过程中的实时场景图像得到第一实时场景图像信息;
获取所述目标车辆发送的所述第一实时场景图像信息,根据所述第一实时场景图像信息生成第一实时虚拟现实全景图像;
向所述智能穿戴设备发送所述第一实时虚拟现实全景图像,以使得所述智能穿戴设备显示所述第一实时虚拟现实全景图像。
另一方面,提供了一种人车互联的虚拟现实控制装置,所述装置包括:
指令接收模块,用于接收用户通过智能穿戴设备发送的目标车辆控制指令;
指令发送模块,用于向所述目标车辆发送所述目标车辆控制指令,以使得所述目标车辆根据所述目标车辆控制指令执行相应的目标车辆控制动作,并采集所述目标车辆控制动作执行过程中的实时场景图像得到第一实时场景图像信息;
图像生成模块,用于获取所述目标车辆发送的所述第一实时场景图像信息,根据所述第一实时场景图像信息生成第一实时虚拟现实全景图像;
图像发送模块,用于向所述智能穿戴设备发送所述第一实时虚拟现实全景图像,以使得所述智能穿戴设备显示所述第一实时虚拟现实全景图像。
在一个示例性的实施方式中,所述装置还包括用于基于第一实时虚拟现实全景图像更新目标车辆控制指令的第一指令更新模块,所述第一指令更新模块,包括:
第一接收模块,用于接收所述智能穿戴设备发送的第一变更车辆控制指令;所述第一变更车辆控制指令是所述用户基于所述第一实时虚拟现实全景图像发出的车辆控制指令;
第一更新模块,用于基于所述第一变更车辆控制指令更新所述目标车辆控制指令。
在一个示例性的实施方式中,所述装置还包括用于基于第一实时虚拟现实全景图像和当前目标车辆控制动作更新目标车辆控制指令的第二指令更新模块,所述第二指令更新模块,包括:
动作获取模块,用于获取所述目标车辆发送的当前目标车辆控制动作;
动作发送模块,用于向所述智能穿戴设备发送所述当前目标车辆控制动作;
第二接收模块,用于接收所述智能穿戴设备发送的第二变更车辆控制指令;所述第二变更车辆控制指令是所述用户基于所述第一实时虚拟现实全景图像和所述当前目标车辆控制动作做出的车辆控制指令;
第二更新模块,用于基于所述第二变更车辆控制指令更新所述目标车辆控制指令。
在一个示例性的实施方式中,所述目标车辆控制指令包括泊车指令,所述指令接收模块,包括:
预指令接收模块,用于接收所述智能穿戴设备发送的预泊车指令;
预指令发送模块,用于向所述目标车辆发送所述预泊车指令,以使得所述目标车辆响应于所述预泊车指令确定至少一个可泊车区域;
区域获取模块,用于获取所述目标车辆发送的所述至少一个可泊车区域;
区域发送模块,用于向所述智能穿戴设备发送所述至少一个可泊车区域,以使得所述智能穿戴设备显示所述至少一个可泊车区域;
泊车指令接收模块,用于接收所述智能穿戴设备基于对所述至少一个可泊车区域的选取指令发送的泊车指令;所述泊车指令指示被选取的目标可泊车区域。
在一个示例性的实施方式中,所述目标车辆控制指令包括响应事件指令,所述指令接收模块,包括:
信号接收模块,用于接收所述目标车辆响应于目标事件发送的车辆感应信号,向所述智能穿戴设备发送所述车辆感应信号;
全景生成模块,用于获取所述目标车辆发送的第二实时场景图像信息,根据所述第二实时场景图像信息生成第二实时虚拟现实全景图像;所述第二实时场景图像信息是所述目标车辆响应于所述目标事件采集的实时场景图像;
全景发送模块,用于响应于所述用户通过所述智能穿戴设备发送的针对所述目标事件的全景图像查看指令,向所述智能穿戴设备发送所述第二实时虚拟现实全景图像,以使得所述智能穿戴设备显示所述第二实时虚拟现实全景图像;
响应事件指令接收模块,用于接收所述智能穿戴设备发送的响应事件指令;所述响应事件指令是所述用户基于所述第二实时虚拟现实全景图像发出的车辆控制指令。
另一方面,提供了一种人车互联的虚拟现实控制方法,所述方法包括:
智能穿戴设备,向服务器发送目标车辆控制指令;
所述服务器,将所述目标车辆控制指令发送给目标车辆;
所述目标车辆,响应于所述目标车辆控制指令,根据所述目标车辆控制指令执行相应的目标车辆控制动作,采集所述目标车辆控制动作执行过程中的第一实时场景图像信息并发送给所述服务器;
所述服务器,根据所述第一实时场景图像信息生成第一实时虚拟现实全景图像,并将所述第一实时虚拟现实全景图像发送给所述智能穿戴设备;
所述智能穿戴设备,显示所述第一实时虚拟现实全景图像。
另一方面,提供了一种人车互联的虚拟现实控制***,所述***包括:
智能穿戴设备,用于向服务器发送目标车辆控制指令;
所述服务器,用于将所述目标车辆控制指令发送给目标车辆;
所述目标车辆,用于响应于所述目标车辆控制指令,根据所述目标车辆控制指令执行相应的目标车辆控制动作,采集所述目标车辆控制动作执行过程中的第一实时场景图像信息并发送给所述服务器;
所述服务器,还用于根据所述第一实时场景图像信息生成第一实时虚拟现实全景图像,并将所述第一实时虚拟现实全景图像发送给所述智能穿戴设备;
所述智能穿戴设备,还用于显示所述第一实时虚拟现实全景图像。
在一个示例性的实施方式中,所述***还包括:
所述智能穿戴设备,用于向所述服务器发送预泊车指令;
所述服务器,用于将所述预泊车指令发送给所述目标车辆;
所述目标车辆,用于响应于所述预泊车指令确定至少一个可泊车区域,并将所述至少一个可泊车区域发送给所述服务器;
所述服务器,还用于将所述至少一个可泊车区域发送给所述智能穿戴设备;
所述智能穿戴设备,还用于显示所述至少一个可泊车区域,并基于对所述至少一个可泊车区域的选取指令向所述服务器发送泊车指令;所述泊车指令指示被选取的目标可泊车区域。
在一个示例性的实施方式中,所述***还包括:
所述目标车辆,用于响应于目标事件,执行所述目标事件对应的车辆感应动作,向所述服务器发送车辆感应信号,并采集第二实时场景图像信息发送给所述服务器;所述车辆感应动作包括车门动作、车灯动作和音频动作;
所述服务器,用于将所述车辆感应信号发送给所述智能穿戴设备,并根据所述第二实时场景图像信息生成第二实时虚拟现实全景图像;
所述智能穿戴设备,用于向所述服务器发送针对所述目标事件的全景图像查看指令;
所述服务器,还用于响应于所述全景图像查看指令,向所述智能穿戴设备发送所述第二实时虚拟现实全景图像;
所述智能穿戴设备,还用于显示所述第二实时虚拟现实全景图像,并向所述服务器发送响应事件指令;所述响应事件指令是用户基于所述第二实时虚拟现实全景图像发出的车辆控制指令。
另一方面,提供了一种电子设备,包括处理器和存储器,所述存储器中存储有至少一条指令或者至少一段程序,所述至少一条指令或者所述至少一段程序由所述处理器加载并执行以实现上述任一方面的人车互联的虚拟现实控制方法。
另一方面,提供了一种计算机可读存储介质,所述计算机可读存储介质中存储有至少一条指令或者至少一段程序,所述至少一条指令或者所述至少一段程序由处理器加载并执行以实现如上述任一方面的人车互联的虚拟现实控制方法。
另一方面,提供了一种计算机程序产品或计算机程序,该计算机程序产品或计算机程序包括计算机指令,该计算机指令存储在计算机可读存储介质中。电子设备的处理器从计算机可读存储介质读取该计算机指令,处理器执行该计算机指令,使得该电子设备执行上述任一方面的人车互联的虚拟现实控制方法。
本申请实施例通过实时获取车内外全景影像并进行VR投射,便于车主远距离掌握车辆实时的实景信息,通过远程监控和远程车辆操纵,确保车辆财产安全的同时极大的改善车辆使用便利性。
附图说明
为了更清楚地说明本申请实施例中的技术方案,下面将对实施例描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本申请的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1是本申请实施例提供的一种人车互联的虚拟现实控制方法的流程示意图;
图2是本申请实施例提供的一种虚拟现实远程泊车的流程示意图;
图3是本申请实施例提供的一种虚拟现实远程监控的流程示意图;
图4是本申请实施例提供的一种人车互联的虚拟现实控制方法的流程示意图;
图5是本申请实施例提供的一种人车互联的虚拟现实控制***原理示意图;
图6是本申请实施例提供的一种虚拟现实远程泊车的流程示意图;
图7是本申请实施例提供的一种虚拟现实远程监控的流程示意图;
图8是本申请实施例提供的一种人车互联的虚拟现实控制装置的结构框图;
图9是本申请实施例提供的一种电子设备的硬件结构框图。
具体实施方式
下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本申请一部分实施例,而不是全部的实施例。基于本申请中的实施例,本领域普通技术人员在没有做出创造性劳动的前提下所获得的所有其他实施例,都属于本申请保护的范围。
需要说明的是,本申请的说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别类似的对象,而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换,以便这里描述的本申请的实施例能够以除了在这里图示或描述的那些以外的顺序实施。此外,术语“包括”和“具有”以及他们的任何变形,意图在于覆盖不排他的包含,例如,包含了一系列步骤或单元的过程、方法、***、产品或服务器不必限于清楚地列出的那些步骤或单元,而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单元。
可以理解的是,在本申请的具体实施方式中,涉及到用户信息等相关的数据,当本申请以上实施例运用到具体产品或技术中时,需要获得用户许可或者同意,且相关数据的收集、使用和处理需要遵守相关国家和地区的相关法律法规和标准。
请参阅图1,其所示为本申请实施例提供的一种人车互联的虚拟现实控制方法的流程示意图。需要说明的是,本说明书提供了如实施例或流程图所述的方法操作步骤,但基于常规或者无创造性的劳动可以包括更多或者更少的操作步骤。实施例中列举的步骤顺序仅仅为众多步骤执行顺序中的一种方式,不代表唯一的执行顺序。在实际中的***或产品执行时,可以按照实施例或者附图所示的方法顺序执行或者并行执行(例如并行处理器或者多线程处理的环境)。
具体的如图1所示,所述方法可以包括:
S101,接收用户通过智能穿戴设备发送的目标车辆控制指令。
其中,智能穿戴设备是能够实现VR(Virtual Reality虚拟现实)全景图像的投射,且配备内置的麦克风,实现对车辆远程语音控制的智能化可穿戴设备。具体实施中,智能穿戴设备可以是具备可调角度TFT(Thin Film Transistor薄膜场效应晶体管)显示屏的智能手表,通过语音指令实现VR全景图像对地面或对墙面的投射;智能穿戴设备也可以是配备VR镜片的眼镜或隐形眼镜,通过VR镜片对VR全景图像进行VR立体影像投射,这种实施方式能够确保车主隐私信息安全。可选地,智能穿戴设备通过5G通信芯片、双模导航芯片、加速度传感器、陀螺仪等高精度传感器以及高精度定位算法,排除环境、天气等外界干扰,实现精准人车定位和智能人车交互效率。
其中,目标车辆控制指令为用户通过智能穿戴设备发出的对车辆的控制指令,其中,车辆和智能穿戴设备分别通过5G通信与云服务器连接,从而车辆和智能穿戴设备以云服务器为中转站,完成人车交互与信息传输。具体地,目标车辆控制指令可以包括控制车辆泊车,以及控制车门、车灯、车辆音响的开关。
在一个示例性的实施方式中,目标车辆控制指令包括泊车指令,如图2所示,上述步骤S101可以包括:
S201,接收所述智能穿戴设备发送的预泊车指令。
其中,预泊车指令为用户通过智能穿戴设备语音发送的指令,用户发送该指令的目的是泊车,但是由于车辆周围的场景对于用户而言是未知的,用户无法确定目标停车位,通过预泊车指令唤醒车辆采集实时场景图像信息,确定有哪些可供用户选择的停车位,由用户选定目标停车位后即可远程控制车辆完成泊车。
S203,向所述目标车辆发送所述预泊车指令,以使得所述目标车辆响应于所述预泊车指令确定至少一个可泊车区域。
其中,目标车辆为与智能穿戴设备间接连接的车辆,二者通过5G通信分别与云服务器连接,用户通过智能穿戴设备完成与目标车辆的交互。
其中,可泊车区域为目标车辆通过采集车辆周围的场景图像信息确定的可供用户选择的空置停车位。具体实施中,用户通过智能穿戴设备语音发送预泊车指令至云服务器后,云服务器将预泊车指令发送给目标车辆,目标车辆响应于预泊车指令,开启车辆中安装的图像采集设备采集车辆周围的场景图象,并基于场景图像信息自动生成可泊车区域,供用户选择。
S205,获取所述目标车辆发送的所述至少一个可泊车区域。
其中,可泊车区域是目标车辆发送的可供用户选择的空置的停车位,目标车辆将可泊车区域发送至云服务器,由云服务器发送至智能穿戴设备,展示给用户。
S207,向所述智能穿戴设备发送所述至少一个可泊车区域,以使得所述智能穿戴设备显示所述至少一个可泊车区域。
其中,智能穿戴设备显示可泊车区域是通过VR投射的方式。具体实施中,若智能穿戴设备是智能手表,通过智能手表将可泊车区域投射到地面或者墙面上,用户选择好目标车泊车区域后在智能手表上确定选择,可以是点击确定,也可以是语音确定;若智能穿戴设备是VR眼镜,则通过VR镜片对可泊车区域进行VR立体影像投射,用户根据VR立体影像投射的可泊车区域选定目标可泊车区域。
S209,接收所述智能穿戴设备基于对所述至少一个可泊车区域的选取指令发送的泊车指令;所述泊车指令指示被选取的目标可泊车区域。
其中,选取指令为用户对智能穿戴设备显示的可泊车区域做出的选择泊车区域的指令,用户可以通过语音做出该指令,也可以通过点击的方式做出该指令。
其中,泊车指令为智能穿戴设备基于选取指令自动生成的指令,泊车指令包括用户的泊车目的和用户选择的目标可泊车区域,用户通过该指令控制目标车辆泊车。具体实施中,用户选取目标可泊车区域后,智能穿戴设备自动生成泊车指令通过5G通信发送至云服务器,云服务器通过5G通信将泊车指令发送给目标车辆,目标车辆闭合高压继电器使整车上电,并把泊车指令同步给整车控制器和车辆中安装的动力转向控制模块,整车控制器响应于泊车指令通过动力转向控制模块控制车辆前往目标可泊车区域。
其中,目标可泊车区域为用户在智能穿戴设备显示的可泊车区域中选定的可泊车区域,为用户期望目标车辆完成泊车的区域。
由本申请实施例的上述技术方案可见,本申请实施例通过预泊车指令唤醒目标车辆生成可泊车区域供用户选择,智能穿戴设备基于用户选择的目标可泊车区域发送泊车指令,丰富了用户与目标车辆之间的交互,同时给了用户更多的自主选择,使得目标车辆按照用户的意愿完成远程泊车。
在一个示例性的实施方式中,目标车辆控制指令包括响应事件指令,如图3所示,上述步骤S101还可以包括:
S301,接收所述目标车辆响应于目标事件发送的车辆感应信号,向所述智能穿戴设备发送所述车辆感应信号。
其中,目标事件为目标车辆感应到的事件,如目标车辆受到碰撞或外部入侵、目标车辆自身故障、穿戴智能穿戴设备的用户靠近目标车辆等等。具体实施中,如果目标事件为目标车辆受到碰撞或外部入侵,目标车辆在感应到目标事件时将整车唤醒,开启双闪、喇叭鸣笛,进行声光报警;如果目标事件为目标车辆受到碰撞或外部入侵、目标车辆自身故障等报警事件,报警事件相关信息永久存放在云服务器内,用户需要时可随时调阅。
其中,车辆感应信号为目标车辆感应到目标事件而生成的信号,将车辆感应信号发送至云服务器,再由云服务器发送至智能穿戴设备,从而达到将目标事件通知到用户的目的。
S303,获取所述目标车辆发送的第二实时场景图像信息,根据所述第二实时场景图像信息生成第二实时虚拟现实全景图像;所述第二实时场景图像信息是所述目标车辆响应于所述目标事件采集的实时场景图像。
其中,第二实时场景图象信息为目标车辆在感应到目标事件时,开启车辆中安装的图像采集模块实时采集的目标车辆内外的场景图像信息。
其中,第二实时虚拟现实全景图像为云服务器基于目标车辆发送的第二实时场景图象信息生成的关于目标车辆内外实时场景的VR全景图像。
S305,响应于所述用户通过所述智能穿戴设备发送的针对所述目标事件的全景图像查看指令,向所述智能穿戴设备发送所述第二实时虚拟现实全景图像,以使得所述智能穿戴设备显示所述第二实时虚拟现实全景图像。
其中,全景图像查看指令为用户通过智能穿戴设备收到关于目标事件的车辆感应信号后,用户通过智能穿戴设备发送的查看车辆内外全景图像的指令,以查看目标事件的具体情况。具体实施中,用户可通过智能手表投射到地面或墙面上的图像查看第二实时虚拟现实全景图像,也可通过VR眼镜查看第二实时虚拟现实全景图像的立体影像投射。
S307,接收所述智能穿戴设备发送的响应事件指令;所述响应事件指令是所述用户基于所述第二实时虚拟现实全景图像发出的车辆控制指令。
其中,响应事件指令为用户通过第二实时虚拟现实全景图像查看目标事件后,根据目标事件的具体情况做出的控制车辆的指令。具体实施中,如果目标事件为目标车辆被入侵,那么响应事件指令可以是打开目标车辆扬声器的指令,从而用户可以通过麦克和车载扬声器进行喊话和警告,震慑入侵者,以确保用户的私人财产安全;如果目标事件为目标车辆被碰撞,那么响应事件指令可以是打开目标车辆外置麦克风的指令,从而用户可以通过车辆外置麦克风与车外人员进行对话,进而快速处理车辆事故;如果目标事件是车辆发生故障,那么响应事件指令可以是生成VR故障信息的指令,从而用户可通过生成的VR故障信息及时查看和处理目标车辆的故障;如果目标事件为用户正在靠近目标车辆,那么响应事件指令可以是打开车门指令,从而用户可以快速上车,提高用户用车的便捷性。
由本申请实施例的上述技术方案可见,本申请实施例通过车辆响应于目标事件及时发出车辆感应信号,及时通知用户,同时由目标车辆的图像采集模块实时采集车辆内外的场景图像,并经由云服务器生成VR全景图像,便于用户查看目标事件的具体情况,进而做出针对目标事件的车辆控制指令,以便用户及时处理目标事件,确保车辆财产安全的同时极大的提高用户的用车便利。
S103,向目标车辆发送所述目标车辆控制指令,以使得所述目标车辆根据所述目标车辆控制指令执行相应的目标车辆控制动作,并采集所述目标车辆控制动作执行过程中的实时场景图像得到第一实时场景图像信息。
其中,目标车辆控制动作为执行目标车辆控制指令需要完成的动作。具体实施中,如果目标车辆控制指令为泊车指令,目标车辆基于车辆当前位置和用户选择的目标可泊车区域将泊车指令分解为至少一个目标车辆控制动作,具体可以包括直走、倒车、停止、加速、减速、喇叭、灯光、左转、右转等动作,控制车辆前往目标可泊车区域,从而完成远程泊车;如果目标车辆控制指令为响应事件指令,例如打开目标车辆扬声器的指令、打开目标车辆外置麦克风的指令、生成VR故障信息指令、打开车门指令,那么相应的目标车辆控制动作即为打开目标车辆扬声器、打开目标车辆外置麦克风、生成VR故障信息、打开车门。
其中,第一实时场景图像信息为目标车辆控制动作执行过程中目标车辆中安装的图像采集模块实时采集的目标车辆内外的场景图像信息,从而用户能够实时了解到目标车辆内外的环境,以便在目标车辆碰到突发状况时,用户能够及时变更目标车辆控制指令来操控车辆,避免出现碰撞事故等。
S105,获取所述目标车辆发送的所述第一实时场景图像信息,根据所述第一实时场景图像信息生成第一实时虚拟现实全景图像。
其中,第一实时虚拟现实全景图像为云服务器基于目标车辆发送的目标车辆内外的实时场景图像信息生成的VR全景图像,用户据此能够远程监控目标车辆。
S107,向所述智能穿戴设备发送所述第一实时虚拟现实全景图像,以使得所述智能穿戴设备显示所述第一实时虚拟现实全景图像。
其中,智能穿戴设备显示第一实时虚拟现实全景图像,用户通过智能穿戴设备查看第一实时虚拟现实全景图像,具体可以包括用户通过智能手表投射到地面或墙面上的图像查看第一实时虚拟现实全景图像,也可以通过VR眼镜查看第一实时虚拟现实全景图像的立体影像投射。从而用户能够实时了解到目标车辆内外场景,以便在目标车辆碰到突发状况时,用户能够及时变更目标车辆控制指令来操控车辆,尽可能避免目标车辆在执行目标车辆控制动作的过程中发生事故。
由本申请实施例的上述技术方案可见,本申请实施例通过实时获取车内外全景影像并进行VR投射,便于车主远距离掌握车辆实时的实景信息,通过远程监控和远程车辆操纵,确保车辆财产安全的同时极大的改善车辆使用便利性。
在一个示例性的实施方式中,在向所述智能穿戴设备发送所述第一实时虚拟现实全景图像之后,更新目标车辆控制指令的过程可以包括以下步骤:
接收所述智能穿戴设备发送的第一变更车辆控制指令;所述第一变更车辆控制指令是所述用户基于所述第一实时虚拟现实全景图像发出的车辆控制指令;
基于所述第一变更车辆控制指令更新所述目标车辆控制指令。
其中,第一变更车辆控制指令为用户基于第一实时虚拟现实全景图像所展示的目标车辆内外的场景图像,通过智能穿戴设备发送的变更目标车辆控制指令的指令。具体实施中,用户通过目标车辆实时反馈的车辆内外的VR全景图像发现目标车辆遇到突发状况时,及时通过智能穿戴设备中的麦克风发出语音指令,以此来更新目标车辆控制指令,从而及时控制目标车辆更新目标车辆控制动作,尽可能避免事故的发生。
由本申请实施例的上述技术方案可见,本申请实施例通过目标车辆实时反馈用户远程操控目标车辆的过程中车辆内外的场景图像信息,使得用户能够及时发现目标车辆碰到的突发状况,避免事故发生,提高远程操控车辆的安全性。
在一个示例性的实施方式中,在向所述智能穿戴设备发送所述第一实时虚拟现实全景图像之后,更新目标车辆控制指令的过程还可以包括以下步骤:
获取所述目标车辆发送的当前目标车辆控制动作;
向所述智能穿戴设备发送所述当前目标车辆控制动作;
接收所述智能穿戴设备发送的第二变更车辆控制指令;所述第二变更车辆控制指令是所述用户基于所述第一实时虚拟现实全景图像和所述当前目标车辆控制动作做出的车辆控制指令;
基于所述第二变更车辆控制指令更新所述目标车辆控制指令。
其中,当前目标车辆控制动作为目标车辆在执行目标车辆控制动作的过程中向云服务器实时反馈的当前执行的动作,云服务器将该动作发送至智能穿戴设备,用户通过智能穿戴设备能够及时了解到目标车辆当前执行的动作,以便用户通过第一实时虚拟现实全景图像发现目标车辆遇到突发状况时,能够根据突发状况的具体情况,并结合目标车辆当前执行的动作,及时更新目标车辆控制指令,从而及时变更目标车辆控制动作。
其中,第二变更车辆控制指令为用户基于第一实时虚拟现实全景图像所展示的目标车辆内外的场景图像发现目标车辆碰到突发状况时,基于当前目标车辆控制动作做出并通过智能穿戴设备发送的变更目标车辆控制指令的指令。具体实施中,用户通过目标车辆实时反馈的车辆内外的VR全景图像发现目标车辆遇到突发状况时,结合目标车辆当前执行的动作,及时通过智能穿戴设备中的麦克风发出语音指令,以此来更新目标车辆控制指令,从而及时控制目标车辆更新目标车辆控制动作,尽可能避免事故的发生。
由本申请实施例的上述技术方案可见,本申请实施例通过目标车辆实时反馈用户远程操控目标车辆的过程中车辆内外的场景图像信息以及车辆当前执行的动作,使得用户能够及时发现目标车辆碰到的突发状况的同时,能够结合车辆当前执行的动作及时更新目标车辆控制指令,避免事故发生,提高远程操控车辆的安全性。
请参阅图4,其所示为本申请实施例提供的一种人车互联的虚拟现实控制方法的流程示意图。需要说明的是,本说明书提供了如实施例或流程图所述的方法操作步骤,但基于常规或者无创造性的劳动可以包括更多或者更少的操作步骤。实施例中列举的步骤顺序仅仅为众多步骤执行顺序中的一种方式,不代表唯一的执行顺序。在实际中的***或产品执行时,可以按照实施例或者附图所示的方法顺序执行或者并行执行(例如并行处理器或者多线程处理的环境)。
具体的如图4所示,所述方法可以包括:
S401,智能穿戴设备,向服务器发送目标车辆控制指令。
其中,智能穿戴设备是能够实现VR全景图像的投射,且配备内置的麦克风,实现对车辆远程语音控制的智能化可穿戴设备。具体实施中,智能穿戴设备可以是具备可调角度TFT显示屏的智能手表,通过语音指令实现VR全景图像对地面或对墙面的投射;智能穿戴设备也可以是配备VR镜片的眼镜或隐形眼镜,通过VR镜片对VR全景图像进行VR立体影像投射,这种实施方式能够确保车主隐私信息安全。可选地,智能穿戴设备通过5G通信芯片、双模导航芯片、加速度传感器、陀螺仪等高精度传感器以及高精度定位算法,排除环境、天气等外界干扰,实现精准人车定位和智能人车交互效率。
其中,目标车辆控制指令为用户通过智能穿戴设备发出的对车辆的控制指令,其中,车辆和智能穿戴设备分别通过5G通信与云服务器连接,从而车辆和智能穿戴设备以云服务器为中转站,完成人车交互与信息传输。具体地,如图5所示,为人车互联的虚拟现实控制***的原理框图,该***由智能穿戴设备、云服务器和目标车辆组成,智能穿戴设备通过5G通信与云服务器连接,云服务器通过5G通信与目标车辆连接。其中,目标车辆包括车载终端、整车控制器、动力转向控制模块、图像采集模块、电池包、电机和感应动作模块;其中,图像采集模块由自动驾驶域控制器和车内外摄像头组成;感应动作模块由车辆解锁模块、车辆动作控制模块、车门控制模块、车灯控制模块和音频控制器组成。具体实施中,目标车辆控制指令可以包括控制车辆泊车,以及控制车门、车灯、车辆音响的开关。
在一个示例性的实施方式中,目标车辆控制指令包括泊车指令,如图6所示,上述步骤S401可以包括:
S601,所述智能穿戴设备,向所述服务器发送预泊车指令。
其中,预泊车指令为用户通过智能穿戴设备语音发送的指令,用户发送该指令的目的是泊车,但是由于车辆周围的场景对于用户而言是未知的,用户无法确定目标停车位,通过预泊车指令唤醒车辆采集实时场景图像信息,确定有哪些可供用户选择的停车位,由用户选定目标停车位后即可远程控制车辆完成泊车。
其中,本发明中的服务器为云服务器,不仅作为数据中转站,还用于存储相关数据以供用户调阅。
S603,所述服务器,将所述预泊车指令发送给所述目标车辆。
其中,目标车辆为与智能穿戴设备间接连接的车辆,二者通过5G通信分别与云服务器连接,用户通过智能穿戴设备完成与目标车辆的交互。
S605,所述目标车辆,响应于所述预泊车指令确定至少一个可泊车区域,。
其中,可泊车区域为目标车辆通过采集车辆周围的场景图像信息确定的可供用户选择的空置停车位。具体实施中,用户通过智能穿戴设备语音发送预泊车指令至云服务器后,云服务器将预泊车指令发送给目标车辆,目标车辆响应于预泊车指令,开启车辆中安装的图像采集设备采集车辆周围的场景图象,并基于场景图像信息自动生成可泊车区域,供用户选择。
S607,所述目标车辆,将所述至少一个可泊车区域发送给所述服务器。
S609,所述服务器,将所述至少一个可泊车区域发送给所述智能穿戴设备。
服务器将目标车辆生成的可泊车区域发送给智能穿戴设备,用户通过智能穿戴设备查看可泊车区域,并选择目标泊车区域。
S6011,所述智能穿戴设备,显示所述至少一个可泊车区域,。
其中,智能穿戴设备显示可泊车区域是通过VR投射的方式。具体实施中,若智能穿戴设备是智能手表,通过智能手表将可泊车区域投射到地面或者墙面上,用户选择好目标车泊车区域后在智能手表上确定选择,可以是点击确定,也可以是语音确定;若智能穿戴设备是VR眼镜,则通过VR镜片对可泊车区域进行VR立体影像投射,用户根据VR立体影像投射的可泊车区域选定目标可泊车区域。
S6013,基于对所述至少一个可泊车区域的选取指令向所述服务器发送泊车指令;所述泊车指令指示被选取的目标可泊车区域。
其中,选取指令为用户对智能穿戴设备显示的可泊车区域做出的选择泊车区域的指令,用户可以通过语音做出该指令,也可以通过点击的方式做出该指令。
其中,泊车指令为智能穿戴设备基于选取指令自动生成的指令,泊车指令包括用户的泊车目的和用户选择的目标可泊车区域,用户通过该指令控制目标车辆泊车。具体实施中,用户选取目标可泊车区域后,智能穿戴设备自动生成泊车指令通过5G通信发送至云服务器,云服务器通过5G通信将泊车指令发送给目标车辆,目标车辆闭合高压继电器使整车上电,并把泊车指令同步给整车控制器和车辆中安装的动力转向控制模块,整车控制器响应于泊车指令通过动力转向控制模块控制车辆前往目标可泊车区域。
其中,目标可泊车区域为用户在智能穿戴设备显示的可泊车区域中选定的可泊车区域,为用户期望目标车辆完成泊车的区域。
由本申请实施例的上述技术方案可见,本申请实施例通过预泊车指令唤醒目标车辆生成可泊车区域供用户选择,智能穿戴设备基于用户选择的目标可泊车区域发送泊车指令,丰富了用户与目标车辆之间的交互,同时给了用户更多的自主选择,使得目标车辆按照用户的意愿完成远程泊车。
在一个示例性的实施方式中,目标车辆控制指令包括响应事件指令,如图7所示,上述步骤S401还可以包括:
S701,所述目标车辆,响应于目标事件,执行所述目标事件对应的车辆感应动作,并采集第二实时场景图像信息;所述车辆感应动作包括车门动作、车灯动作和音频动作。
其中,目标事件为目标车辆感应到的事件,例如目标车辆受到碰撞或外部入侵、目标车辆自身故障、穿戴智能穿戴设备的用户靠近目标车辆等等。具体实施中,如果目标事件为目标车辆受到碰撞或外部入侵、目标车辆自身故障等报警事件,报警事件相关信息永久存放在云服务器内,用户需要时可随时调阅。
其中,车辆感应动作为目标车辆感应到目标事件时做出的具备警示作用的动作或与目标事件相对应的动作。具体实施中,如果目标车辆受到碰撞或外部入侵,目标车辆在感应到目标事件时将整车唤醒,执行车灯动作和音频动作,具体为开启双闪、喇叭鸣笛,进行声光报警。
S703,所述目标车辆,向所述服务器发送车辆感应信号和所述第二实时场景图像信息。
其中,车辆感应信号为目标车辆感应到目标事件而生成的信号,将车辆感应信号发送至云服务器,再由云服务器发送至智能穿戴设备,从而达到将目标事件通知到用户的目的。
其中,第二实时场景图象信息为目标车辆在感应到目标事件时,开启车辆中安装的图像采集模块实时采集的目标车辆内外的场景图像信息。
S705,所述服务器,根据所述第二实时场景图像信息生成第二实时虚拟现实全景图像。
其中,第二实时虚拟现实全景图像为云服务器基于目标车辆发送的第二实时场景图象信息生成的关于目标车辆内外实时场景的VR全景图像。
S707,所属服务器,将所述车辆感应信号发送给所述智能穿戴设备。
S709,所述智能穿戴设备,向所述服务器发送针对所述目标事件的全景图像查看指令。
其中,全景图像查看指令为用户通过智能穿戴设备收到关于目标事件的车辆感应信号后,用户通过智能穿戴设备发送的查看车辆内外全景图像的指令,以查看目标事件的具体情况。具体实施中,用户可通过智能手表投射到地面或墙面上的图像查看第二实时虚拟现实全景图像,也可通过VR眼镜查看第二实时虚拟现实全景图像的立体影像投射。
S7011,所述服务器,响应于所述全景图像查看指令,向所述智能穿戴设备发送所述第二实时虚拟现实全景图像。
云服务器在收到用户通过智能穿戴设备发送的全景图像查看指令后,将基于目标车辆发送的车辆内外实时场景图像生成的实时VR全景图像发送至智能穿戴设备,以供用户查看。
S7013,所述智能穿戴设备,显示所述第二实时虚拟现实全景图像
S7015,所述智能穿戴设备,向所述服务器发送响应事件指令;所述响应事件指令是用户基于所述第二实时虚拟现实全景图像发出的车辆控制指令。
其中,响应事件指令为用户通过第二实时虚拟现实全景图像查看目标事件后,根据目标事件的具体情况做出的控制车辆的指令。具体实施中,如果目标事件为目标车辆被入侵,那么响应事件指令可以是打开目标车辆扬声器的指令,从而用户可以通过麦克和车载扬声器进行喊话和警告,震慑入侵者,以确保用户的私人财产安全;如果目标事件为目标车辆被碰撞,那么响应事件指令可以是打开目标车辆外置麦克风的指令,从而用户可以通过车辆外置麦克风与车外人员进行对话,进而快速处理车辆事故;如果目标事件是车辆发生故障,那么响应事件指令可以是生成VR故障信息的指令,从而用户可通过生成的VR故障信息及时查看和处理目标车辆的故障;如果目标事件为用户正在靠近目标车辆,那么响应事件指令可以是打开车门指令,从而用户可以快速上车,提高用户用车的便捷性。
由本申请实施例的上述技术方案可见,本申请实施例通过通过车辆响应于目标事件及时发出车辆感应信号,及时通知用户,同时由目标车辆的图像采集模块实时采集车辆内外的场景图像,并经由云服务器生成VR全景图像,便于用户查看目标事件的具体情况,进而做出针对目标事件的车辆控制指令,以便用户及时处理目标事件,确保车辆财产安全的同时极大的提高用户的用车便利。
S403,所述服务器,将所述目标车辆控制指令发送给目标车辆。
服务器将目标车辆控制指令发送给目标车辆,使得用户能够通过智能穿戴设备发送指令来远程控制目标车辆。
S405,所述目标车辆,响应于所述目标车辆控制指令,根据所述目标车辆控制指令执行相应的目标车辆控制动作,采集所述目标车辆控制动作执行过程中的第一实时场景图像信息。
其中,目标车辆控制动作为执行目标车辆控制指令需要完成的动作。具体实施中,如果目标车辆控制指令为泊车指令,目标车辆基于车辆当前位置和用户选择的目标可泊车区域将泊车指令分解为至少一个目标车辆控制动作,具体可以包括直走、倒车、停止、加速、减速、喇叭、灯光、左转、右转等动作,控制车辆前往目标可泊车区域,从而完成远程泊车;如果目标车辆控制指令为响应事件指令,例如打开目标车辆扬声器的指令、打开目标车辆外置麦克风的指令、生成VR故障信息指令、打开车门指令,那么相应的目标车辆控制动作即为打开目标车辆扬声器、打开目标车辆外置麦克风、生成VR故障信息、打开车门。
其中,第一实时场景图像信息为目标车辆控制动作执行过程中目标车辆中安装的图像采集模块实时采集的目标车辆内外的场景图像信息,从而用户能够实时了解到目标车辆内外的环境,以便在目标车辆碰到突发状况时,用户能够及时变更目标车辆控制指令来操控车辆,避免出现碰撞事故等。
S407,所述目标车辆,将所述第一实时场景图像信息发送给所述服务器。
S409,所述服务器,根据所述第一实时场景图像信息生成第一实时虚拟现实全景图像。
其中,第一实时虚拟现实全景图像为云服务器基于目标车辆发送的目标车辆内外的实时场景图像信息生成的VR全景图像,用户据此能够远程监控目标车辆。
S4011,所述服务器,将所述第一实时虚拟现实全景图像发送给所述智能穿戴设备。
S4013,所述智能穿戴设备,显示所述第一实时虚拟现实全景图像。
其中,智能穿戴设备显示第一实时虚拟现实全景图像,用户通过智能穿戴设备查看第一实时虚拟现实全景图像,具体可以包括用户通过智能手表投射到地面或墙面上的图像查看第一实时虚拟现实全景图像,也可以通过VR眼镜查看第一实时虚拟现实全景图像的立体影像投射。从而用户能够实时了解到目标车辆内外场景,以便在目标车辆碰到突发状况时,用户能够及时变更目标车辆控制指令来操控车辆,尽可能避免目标车辆在执行目标车辆控制动作的过程中发生事故。
由本申请实施例的上述技术方案可见,本申请实施例通过实时获取车内外全景影像并进行VR投射,便于车主远距离掌握车辆实时的实景信息,通过远程监控和远程车辆操纵,确保车辆财产安全的同时极大的改善车辆使用便利性。
与上述几种实施例提供的人车互联的虚拟现实控制方法相对应,本申请实施例还提供一种人车互联的虚拟现实控制装置,由于本申请实施例提供的人车互联的虚拟现实控制装置与上述几种实施例提供的人车互联的虚拟现实控制方法相对应,因此前述人车互联的虚拟现实控制方法的实施方式也适用于本实施例提供的人车互联的虚拟现实控制装置,在本实施例中不再详细描述。
请参阅图8,其所示为本申请实施例提供的一种人车互联的虚拟现实控制装置的结构示意图,该装置具有实现上述方法实施例中人车互联的虚拟现实控制方法的功能,所述功能可以由硬件实现,也可以由硬件执行相应的软件实现。
如图8所示,该装置可以包括:
指令接收模块810,用于接收用户通过智能穿戴设备发送的目标车辆控制指令;
指令发送模块820,用于向所述目标车辆发送所述目标车辆控制指令,以使得所述目标车辆根据所述目标车辆控制指令执行相应的目标车辆控制动作,并采集所述目标车辆控制动作执行过程中的实时场景图像得到第一实时场景图像信息;
图像生成模块830,用于获取所述目标车辆发送的所述第一实时场景图像信息,根据所述第一实时场景图像信息生成第一实时虚拟现实全景图像;
图像发送模块840,用于向所述智能穿戴设备发送所述第一实时虚拟现实全景图像,以使得所述智能穿戴设备显示所述第一实时虚拟现实全景图像。
在一个示例性的实施方式中,所述装置还包括用于基于第一实时虚拟现实全景图像更新目标车辆控制指令的第一指令更新模块,所述第一指令更新模块,包括:
第一接收模块,用于接收所述智能穿戴设备发送的第一变更车辆控制指令;所述第一变更车辆控制指令是所述用户基于所述第一实时虚拟现实全景图像发出的车辆控制指令;
第一更新模块,用于基于所述第一变更车辆控制指令更新所述目标车辆控制指令。
在一个示例性的实施方式中,所述装置还包括用于基于第一实时虚拟现实全景图像和当前目标车辆控制动作更新目标车辆控制指令的第二指令更新模块,所述第二指令更新模块,包括:
动作获取模块,用于获取所述目标车辆发送的当前目标车辆控制动作;
动作发送模块,用于向所述智能穿戴设备发送所述当前目标车辆控制动作;
第二接收模块,用于接收所述智能穿戴设备发送的第二变更车辆控制指令;所述第二变更车辆控制指令是所述用户基于所述第一实时虚拟现实全景图像和所述当前目标车辆控制动作做出的车辆控制指令;
第二更新模块,用于基于所述第二变更车辆控制指令更新所述目标车辆控制指令。
在一个示例性的实施方式中,所述目标车辆控制指令包括泊车指令,所述指令接收模块,包括:
预指令接收模块,用于接收所述智能穿戴设备发送的预泊车指令;
预指令发送模块,用于向所述目标车辆发送所述预泊车指令,以使得所述目标车辆响应于所述预泊车指令确定至少一个可泊车区域;
区域获取模块,用于获取所述目标车辆发送的所述至少一个可泊车区域;
区域发送模块,用于向所述智能穿戴设备发送所述至少一个可泊车区域,以使得所述智能穿戴设备显示所述至少一个可泊车区域;
泊车指令接收模块,用于接收所述智能穿戴设备基于对所述至少一个可泊车区域的选取指令发送的泊车指令;所述泊车指令指示被选取的目标可泊车区域。
在一个示例性的实施方式中,所述目标车辆控制指令包括响应事件指令,所述指令接收模块,包括:
信号接收模块,用于接收所述目标车辆响应于目标事件发送的车辆感应信号,向所述智能穿戴设备发送所述车辆感应信号;
全景生成模块,用于获取所述目标车辆发送的第二实时场景图像信息,根据所述第二实时场景图像信息生成第二实时虚拟现实全景图像;所述第二实时场景图像信息是所述目标车辆响应于所述目标事件采集的实时场景图像;
全景发送模块,用于响应于所述用户通过所述智能穿戴设备发送的针对所述目标事件的全景图像查看指令,向所述智能穿戴设备发送所述第二实时虚拟现实全景图像,以使得所述智能穿戴设备显示所述第二实时虚拟现实全景图像;
响应事件指令接收模块,用于接收所述智能穿戴设备发送的响应事件指令;所述响应事件指令是所述用户基于所述第二实时虚拟现实全景图像发出的车辆控制指令。
与上述几种实施例提供的人车互联的虚拟现实控制方法相对应,本申请实施例还提供一种人车互联的虚拟现实控制***,由于本申请实施例提供的人车互联的虚拟现实控制***与上述几种实施例提供的人车互联的虚拟现实控制方法相对应,因此前述人车互联的虚拟现实控制方法的实施方式也适用于本实施例提供的人车互联的虚拟现实控制***,在本实施例中不再详细描述。
该***具有实现上述方法实施例中人车互联的虚拟现实控制方法的功能,所述功能可以由硬件实现,也可以由硬件执行相应的软件实现。该***可以包括:
智能穿戴设备,用于向服务器发送目标车辆控制指令;
所述服务器,用于将所述目标车辆控制指令发送给目标车辆;
所述目标车辆,用于响应于所述目标车辆控制指令,根据所述目标车辆控制指令执行相应的目标车辆控制动作,采集所述目标车辆控制动作执行过程中的第一实时场景图像信息并发送给所述服务器;
所述服务器,还用于根据所述第一实时场景图像信息生成第一实时虚拟现实全景图像,并将所述第一实时虚拟现实全景图像发送给所述智能穿戴设备;
所述智能穿戴设备,还用于显示所述第一实时虚拟现实全景图像。
在一个示例性的实施方式中,所述***还包括:
所述智能穿戴设备,用于向所述服务器发送预泊车指令;
所述服务器,用于将所述预泊车指令发送给所述目标车辆;
所述目标车辆,用于响应于所述预泊车指令确定至少一个可泊车区域,并将所述至少一个可泊车区域发送给所述服务器;
所述服务器,还用于将所述至少一个可泊车区域发送给所述智能穿戴设备;
所述智能穿戴设备,还用于显示所述至少一个可泊车区域,并基于对所述至少一个可泊车区域的选取指令向所述服务器发送泊车指令;所述泊车指令指示被选取的目标可泊车区域。
在一个示例性的实施方式中,所述***还包括:
所述目标车辆,用于响应于目标事件,执行所述目标事件对应的车辆感应动作,向所述服务器发送车辆感应信号,并采集第二实时场景图像信息发送给所述服务器;所述车辆感应动作包括车门动作、车灯动作和音频动作;
所述服务器,用于将所述车辆感应信号发送给所述智能穿戴设备,并根据所述第二实时场景图像信息生成第二实时虚拟现实全景图像;
所述智能穿戴设备,用于向所述服务器发送针对所述目标事件的全景图像查看指令;
所述服务器,还用于响应于所述全景图像查看指令,向所述智能穿戴设备发送所述第二实时虚拟现实全景图像;
所述智能穿戴设备,还用于显示所述第二实时虚拟现实全景图像,并向所述服务器发送响应事件指令;所述响应事件指令是用户基于所述第二实时虚拟现实全景图像发出的车辆控制指令。
需要说明的是,上述实施例提供的装置,在实现其功能时,仅以上述各功能模块的划分进行举例说明,实际应用中,可以根据需要而将上述功能分配由不同的功能模块完成,即将设备的内部结构划分成不同的功能模块,以完成以上描述的全部或者部分功能。另外,上述实施例提供的装置与方法实施例属于同一构思,其具体实现过程详见方法实施例,这里不再赘述。
本申请实施例提供了一种电子设备,该电子设备包括处理器和存储器,该存储器中存储有至少一条指令或者至少一段程序,该至少一条指令或者该至少一段程序由该处理器加载并执行以实现如上述方法实施例所提供的任意一种人车互联的虚拟现实控制方法。
存储器可用于存储软件程序以及模块,处理器通过运行存储在存储器的软件程序以及模块,从而执行各种功能应用以及数据处理。存储器可主要包括存储程序区和存储数据区,其中,存储程序区可存储操作***、功能所需的应用程序等;存储数据区可存储根据所述设备的使用所创建的数据等。此外,存储器可以包括高速随机存取存储器,还可以包括非易失性存储器,例如至少一个磁盘存储器件、闪存器件、或其他易失性固态存储器件。相应地,存储器还可以包括存储器控制器,以提供处理器对存储器的访问。
本申请实施例所提供的方法实施例可以在计算机终端、服务器或者类似的运算装置中执行,即上述电子设备可以包括计算机终端、服务器或者类似的运算装置。图9是本申请实施例提供的运行一种人车互联的虚拟现实控制方法的电子设备的硬件结构框图,如图9所示,该电子设备的内部结构可包括但不限于:处理器、网络接口及存储器。其中,电子设备内的处理器、网络接口及存储器可通过总线或其他方式连接,在本说明书实施例所示图9中以通过总线连接为例。
其中,处理器(或称CPU(Central Processing Unit,中央处理器))是电子设备的计算核心以及控制核心。网络接口可选的可以包括标准的有线接口、无线接口(如WI-FI、移动通信接口等)。存储器(Memory)是电子设备中的记忆设备,用于存放程序和数据。可以理解的是,此处的存储器可以是高速RAM存储设备,也可以是非不稳定的存储设备(non-volatile memory),例如至少一个磁盘存储设备;可选的还可以是至少一个位于远离前述处理器的存储装置。存储器提供存储空间,该存储空间存储了电子设备的操作***,可包括但不限于:Windows***(一种操作***),Linux(一种操作***),Android(安卓,一种移动操作***)***、IOS(一种移动操作***)***等等,本发明对此并不作限定;并且,在该存储空间中还存放了适于被处理器加载并执行的一条或一条以上的指令,这些指令可以是一个或一个以上的计算机程序(包括程序代码)。在本说明书实施例中,处理器加载并执行存储器中存放的一条或一条以上指令,以实现上述方法实施例提供的人车互联的虚拟现实控制方法。
本申请的实施例还提供了一种计算机可读存储介质,所述计算机可读存储介质可设置于电子设备之中以保存用于实现一种人车互联的虚拟现实控制方法相关的至少一条指令或者至少一段程序,该至少一条指令或者该至少一段程序由该处理器加载并执行以实现上述方法实施例提供的任意一种人车互联的虚拟现实控制方法。
可选地,在本实施例中,上述存储介质可以包括但不限于:U盘、只读存储器(ROM,Read-Only Memory)、随机存取存储器(RAM,Random Access Memory)、移动硬盘、磁碟或者光盘等各种可以存储程序代码的介质。
需要说明的是:上述本申请实施例先后顺序仅仅为了描述,不代表实施例的优劣。且上述对本说明书特定实施例进行了描述。其它实施例在所附权利要求书的范围内。在一些情况下,在权利要求书中记载的动作或步骤可以按照不同于实施例中的顺序来执行并且仍然可以实现期望的结果。另外,在附图中描绘的过程不一定要求示出的特定顺序或者连续顺序才能实现期望的结果。在某些实施方式中,多任务处理和并行处理也是可以的或者可能是有利的。
本说明书中的各个实施例均采用递进的方式描述,各个实施例之间相同相似的部分互相参见即可,每个实施例重点说明的都是与其他实施例的不同之处。尤其,对于装置实施例而言,由于其基本相似于方法实施例,所以描述的比较简单,相关之处参见方法实施例的部分说明即可。
本领域普通技术人员可以理解实现上述实施例的全部或部分步骤可以通过硬件来完成,也可以通过程序来指令相关的硬件完成,所述的程序可以存储于一种计算机可读存储介质中,上述提到的存储介质可以是只读存储器,磁盘或光盘等。
以上所述仅为本申请的较佳实施例,并不用以限制本申请,凡在本申请的精神和原则之内,所作的任何修改、等同替换、改进等,均应包含在本申请的保护范围之内。

Claims (10)

1.一种人车互联的虚拟现实控制方法,其特征在于,所述方法包括:
接收用户通过智能穿戴设备发送的目标车辆控制指令;
向目标车辆发送所述目标车辆控制指令,以使得所述目标车辆根据所述目标车辆控制指令执行相应的目标车辆控制动作,并采集所述目标车辆控制动作执行过程中的实时场景图像得到第一实时场景图像信息;
获取所述目标车辆发送的所述第一实时场景图像信息,根据所述第一实时场景图像信息生成第一实时虚拟现实全景图像;
向所述智能穿戴设备发送所述第一实时虚拟现实全景图像,以使得所述智能穿戴设备显示所述第一实时虚拟现实全景图像。
2.根据权利要求1所述的人车互联的虚拟现实控制方法,其特征在于,在所述向所述智能穿戴设备发送所述第一实时虚拟现实全景图像之后,所述方法还包括:
接收所述智能穿戴设备发送的第一变更车辆控制指令;所述第一变更车辆控制指令是所述用户基于所述第一实时虚拟现实全景图像发出的车辆控制指令;
基于所述第一变更车辆控制指令更新所述目标车辆控制指令。
3.根据权利要求1所述的人车互联的虚拟现实控制方法,其特征在于,在所述向所述智能穿戴设备发送所述第一实时虚拟现实全景图像之后,所述方法还包括:
获取所述目标车辆发送的当前目标车辆控制动作;
向所述智能穿戴设备发送所述当前目标车辆控制动作;
接收所述智能穿戴设备发送的第二变更车辆控制指令;所述第二变更车辆控制指令是所述用户基于所述第一实时虚拟现实全景图像和所述当前目标车辆控制动作做出的车辆控制指令;
基于所述第二变更车辆控制指令更新所述目标车辆控制指令。
4.根据权利要求1~3中任一项所述的人车互联的虚拟现实控制方法,其特征在于,所述目标车辆控制指令包括泊车指令,所述接收用户通过智能穿戴设备发送的目标车辆控制指令,包括:
接收所述智能穿戴设备发送的预泊车指令;
向所述目标车辆发送所述预泊车指令,以使得所述目标车辆响应于所述预泊车指令确定至少一个可泊车区域;
获取所述目标车辆发送的所述至少一个可泊车区域;
向所述智能穿戴设备发送所述至少一个可泊车区域,以使得所述智能穿戴设备显示所述至少一个可泊车区域;
接收所述智能穿戴设备基于对所述至少一个可泊车区域的选取指令发送的泊车指令;所述泊车指令指示被选取的目标可泊车区域。
5.根据权利要求1~3中任一项所述的人车互联的虚拟现实控制方法,其特征在于,所述目标车辆控制指令包括响应事件指令;所述接收用户通过智能穿戴设备发送的目标车辆控制指令,包括:
接收所述目标车辆响应于目标事件发送的车辆感应信号,向所述智能穿戴设备发送所述车辆感应信号;
获取所述目标车辆发送的第二实时场景图像信息,根据所述第二实时场景图像信息生成第二实时虚拟现实全景图像;所述第二实时场景图像信息是所述目标车辆响应于所述目标事件采集的实时场景图像;
响应于所述用户通过所述智能穿戴设备发送的针对所述目标事件的全景图像查看指令,向所述智能穿戴设备发送所述第二实时虚拟现实全景图像,以使得所述智能穿戴设备显示所述第二实时虚拟现实全景图像;
接收所述智能穿戴设备发送的响应事件指令;所述响应事件指令是所述用户基于所述第二实时虚拟现实全景图像发出的车辆控制指令。
6.一种人车互联的虚拟现实控制方法,其特征在于,所述方法包括:
智能穿戴设备,向服务器发送目标车辆控制指令;
所述服务器,将所述目标车辆控制指令发送给目标车辆;
所述目标车辆,响应于所述目标车辆控制指令,根据所述目标车辆控制指令执行相应的目标车辆控制动作,采集所述目标车辆控制动作执行过程中的第一实时场景图像信息并发送给所述服务器;
所述服务器,根据所述第一实时场景图像信息生成第一实时虚拟现实全景图像,并将所述第一实时虚拟现实全景图像发送给所述智能穿戴设备;
所述智能穿戴设备,显示所述第一实时虚拟现实全景图像。
7.根据权利要求6所述的人车互联的虚拟现实控制方法,其特征在于,所述目标车辆控制指令包括泊车指令,所述智能穿戴设备,向服务器发送目标车辆控制指令,包括:
所述智能穿戴设备,向所述服务器发送预泊车指令;
所述服务器,将所述预泊车指令发送给所述目标车辆;
所述目标车辆,响应于所述预泊车指令确定至少一个可泊车区域,并将所述至少一个可泊车区域发送给所述服务器;
所述服务器,将所述至少一个可泊车区域发送给所述智能穿戴设备;
所述智能穿戴设备,显示所述至少一个可泊车区域,并基于对所述至少一个可泊车区域的选取指令向所述服务器发送泊车指令;所述泊车指令指示被选取的目标可泊车区域。
8.根据权利要求6所述的人车互联的虚拟现实控制方法,其特征在于,所述目标车辆控制指令包括响应事件指令,所述智能穿戴设备,向服务器发送目标车辆控制指令,包括:
所述目标车辆,响应于目标事件,执行所述目标事件对应的车辆感应动作,向所述服务器发送车辆感应信号,并采集第二实时场景图像信息发送给所述服务器;所述车辆感应动作包括车门动作、车灯动作和音频动作;
所述服务器,将所述车辆感应信号发送给所述智能穿戴设备,并根据所述第二实时场景图像信息生成第二实时虚拟现实全景图像;
所述智能穿戴设备,向所述服务器发送针对所述目标事件的全景图像查看指令;
所述服务器,响应于所述全景图像查看指令,向所述智能穿戴设备发送所述第二实时虚拟现实全景图像;
所述智能穿戴设备,显示所述第二实时虚拟现实全景图像,并向所述服务器发送响应事件指令;所述响应事件指令是用户基于所述第二实时虚拟现实全景图像发出的车辆控制指令。
9.一种人车互联的虚拟现实控制装置,其特征在于,所述装置包括:
指令接收模块,用于接收用户通过智能穿戴设备发送的目标车辆控制指令;
指令发送模块,用于向所述目标车辆发送所述目标车辆控制指令,以使得所述目标车辆根据所述目标车辆控制指令执行相应的目标车辆控制动作,并采集所述目标车辆控制动作执行过程中的实时场景图像得到第一实时场景图像信息;
图像生成模块,用于获取所述目标车辆发送的所述第一实时场景图像信息,根据所述第一实时场景图像信息生成第一实时虚拟现实全景图像;
图像发送模块,用于向所述智能穿戴设备发送所述第一实时虚拟现实全景图像,以使得所述智能穿戴设备显示所述第一实时虚拟现实全景图像。
10.一种人车互联的虚拟现实控制***,其特征在于,所述***包括:
智能穿戴设备,用于向服务器发送目标车辆控制指令;
所述服务器,用于将所述目标车辆控制指令发送给目标车辆;
所述目标车辆,用于响应于所述目标车辆控制指令,根据所述目标车辆控制指令执行相应的目标车辆控制动作,采集所述目标车辆控制动作执行过程中的第一实时场景图像信息并发送给所述服务器;
所述服务器,还用于根据所述第一实时场景图像信息生成第一实时虚拟现实全景图像,并将所述第一实时虚拟现实全景图像发送给所述智能穿戴设备;
所述智能穿戴设备,还用于显示所述第一实时虚拟现实全景图像。
CN202211363612.8A 2022-11-02 2022-11-02 一种人车互联的虚拟现实控制方法、装置及*** Pending CN116118758A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202211363612.8A CN116118758A (zh) 2022-11-02 2022-11-02 一种人车互联的虚拟现实控制方法、装置及***

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202211363612.8A CN116118758A (zh) 2022-11-02 2022-11-02 一种人车互联的虚拟现实控制方法、装置及***

Publications (1)

Publication Number Publication Date
CN116118758A true CN116118758A (zh) 2023-05-16

Family

ID=86296238

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202211363612.8A Pending CN116118758A (zh) 2022-11-02 2022-11-02 一种人车互联的虚拟现实控制方法、装置及***

Country Status (1)

Country Link
CN (1) CN116118758A (zh)

Similar Documents

Publication Publication Date Title
EP3849150B1 (en) Secure open api for a vehicle
CN111469836B (zh) 基于车载单元和路侧单元的避障方法、设备、存储介质
CN208479957U (zh) 一种车载终端t-box以及面向v2x网联汽车的车联网信息装置
EP3516468B1 (en) Automatic autonomous driving of a vehicle
CN105763642A (zh) 一种汽车智能交互***
CN107818694A (zh) 报警处理方法、装置及终端
CN112109700A (zh) 记忆泊车***及其控制方法和计算机存储介质
JPWO2019030922A1 (ja) 駐車制御方法及び駐車制御装置
EP3956191A1 (en) Methods and systems for emergency handoff of an autonomous vehicle
CN113479195A (zh) 用于自动代客泊车的方法和用于执行所述方法的***
CN113228135A (zh) 一种盲区图像获取方法及相关终端装置
CN111098863A (zh) 自动驾驶车辆的远程驾驶请求方法、装置及用户终端
CN112997126B (zh) 一种车辆召唤方法、智能车以及设备
CN105034979A (zh) 车辆主动安全控制方法与***
CN111752267A (zh) 控制装置、控制方法以及存储介质
US20220019218A1 (en) Vehicle control device, vehicle control method, vehicle, information processing device, information processing method, and program
CN116438583A (zh) 可用泊车位识别装置、可用泊车位识别方法和程序
CN115593434A (zh) 一种配合智能汽车的停车场自动泊车***
DE112018004773B4 (de) Informationsverarbeitungseinrichtung, informationsverarbeitungsverfahren, programm und fahrzeug
CN116118758A (zh) 一种人车互联的虚拟现实控制方法、装置及***
US20230249700A1 (en) Vehicle management system and vehicle management method
CN113574575A (zh) 显示控制装置、显示控制方法以及程序
CN113401071B (zh) 显示控制装置、显示控制方法以及计算机可读取存储介质
US20210304606A1 (en) Accommodation area management device
JP2021162950A (ja) 収容領域管理装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination