CN111105294A - 一种vr导览方法、***、客户端、服务器及其存储介质 - Google Patents
一种vr导览方法、***、客户端、服务器及其存储介质 Download PDFInfo
- Publication number
- CN111105294A CN111105294A CN201911321933.XA CN201911321933A CN111105294A CN 111105294 A CN111105294 A CN 111105294A CN 201911321933 A CN201911321933 A CN 201911321933A CN 111105294 A CN111105294 A CN 111105294A
- Authority
- CN
- China
- Prior art keywords
- scene
- client
- server
- scenes
- voice
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 46
- 238000012216 screening Methods 0.000 claims abstract description 21
- 238000004458 analytical method Methods 0.000 claims abstract description 17
- 238000004364 calculation method Methods 0.000 claims abstract description 8
- 238000005516 engineering process Methods 0.000 claims description 8
- 238000004422 calculation algorithm Methods 0.000 claims description 6
- 238000012423 maintenance Methods 0.000 claims description 3
- 238000012163 sequencing technique Methods 0.000 claims description 3
- 230000006870 function Effects 0.000 abstract description 8
- 238000012905 input function Methods 0.000 abstract description 3
- 238000004590 computer program Methods 0.000 description 5
- 238000010586 diagram Methods 0.000 description 3
- 238000010205 computational analysis Methods 0.000 description 2
- 230000009286 beneficial effect Effects 0.000 description 1
- 230000001419 dependent effect Effects 0.000 description 1
- 239000011521 glass Substances 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 238000012545 processing Methods 0.000 description 1
- 230000011218 segmentation Effects 0.000 description 1
- 230000016776 visual perception Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q30/00—Commerce
- G06Q30/06—Buying, selling or leasing transactions
- G06Q30/0601—Electronic shopping [e-shopping]
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T19/00—Manipulating 3D models or images for computer graphics
- G06T19/006—Mixed reality
Landscapes
- Engineering & Computer Science (AREA)
- Business, Economics & Management (AREA)
- Physics & Mathematics (AREA)
- Accounting & Taxation (AREA)
- Finance (AREA)
- Theoretical Computer Science (AREA)
- General Physics & Mathematics (AREA)
- General Business, Economics & Management (AREA)
- Strategic Management (AREA)
- Marketing (AREA)
- Economics (AREA)
- Development Economics (AREA)
- Computer Graphics (AREA)
- Computer Hardware Design (AREA)
- General Engineering & Computer Science (AREA)
- Software Systems (AREA)
- User Interface Of Digital Computer (AREA)
Abstract
本发明涉及一种VR导览方法、***、客户端、服务器及其存储介质,VR导览的方法,包括:在VR服务器建立场景库、场景分类库和场景特征库;在VR服务器建立场景导航菜单;在VR服务器计算分析语音信息,筛选符合条件的场景;在VR服务器接收VR客户端选择的符合条件的场景的设置信息,根据设置信息在场景库中确定场景并返回给VR客户端。通过场景分类、分析场景特征,场景导航菜单,语音信息识别,计算分析数据,解决了VR场景兼容语音控制的技术问题。用户在多个场景方便、快捷、准确地选择符合条件的场景,加强了VR场景选择装置文字输入功能,用户可以从大量场景中自由选择各种功能,快速定位符合条件的场景。
Description
技术领域
本发明属于VR技术领域,具体涉及一种VR导览方法、***、客户端、服务器及其存储介质。
背景技术
在现代的商业环境下,现有技术的VR导览方法,包括:用户通过VR设备浏览场景前,首先打开多VR场景表单,然后是定位符合条件的场景,对于定位方法,除了根据表单分类层级逐级查找符合条件的场景的常规方式外,这里提供一种便捷查找方式:用户对着语音采集装置说出想要查看的场景特征,语音采集装置采集用户语音并传送给VR终端应用,VR终端应用调用语音语义解析装置解析出***认识的文字信息,VR终端应用将文字信息传送到VR服务器,VR服务器调用搜索引擎匹配出符合要求的场景并返回VR终端应用,用户通过场景选择装置选择符合条件的场景并进入符合条件的场景,开启符合条件的场景的遨游之旅。
现有技术的VR导览方案借助VR设备,包括眼镜、手柄、座椅、服务器等实现场景导览,该VR导览方案加强了虚拟***的逼真度和沉浸感,为用户提供更为真实的虚拟现实,提高用户体验,满足用户身临其境的即视感。但在应对多场景切换时却存在不便,由于VR设备不支持文字输入,只可通过手柄等触发事件向***发起指令。在少量场景选项情况下,还可以应付,但在大量场景可选择时,光靠手柄触发事件向***发起指令就显得笨拙不堪,影响客户的使用体验。因此,还需要一种新的技术来解决大量场景的筛选和定位问题并快速向***发起操作指令。
发明内容
本发明的目的在于提供一种VR导览方法、***、客户端、服务器及其机器可读存储介质,以解决上述技术问题。本发明采用科学的场景分类和场景特征,通过场景导航菜单,运用语音信息输入识别技术和计算分析,解决了VR场景兼容语音控制的技术问题,使得用户在多个场景方便、快捷、准确地选择符合条件的场景,VR服务器根据所述设置信息在场景库中确定场景并返回给VR客户端。
为了实现上述目的,本发明采用如下技术方案:
第一方面,本申请实施例提供了一种VR导览的方法,包括:
步骤1、在VR服务器建立场景库、场景分类库和场景特征库;
步骤2、在VR服务器建立场景导航菜单;
步骤3、在VR服务器计算分析语音信息,筛选符合条件的场景;
步骤4、在VR服务器接收VR客户端选择的符合条件的场景的设置信息,VR服务器根据所述设置信息在场景库中确定场景并返回给VR客户端。
优选地,所述场景库,包括预设场景,用以为VR客户端提供浏览的场景;所述场景分类库,包括多种场景和所述多种场景的场景分类信息,用以在步骤2在VR服务器建立场景导航菜单中为客户展示多种场景导航菜单;所述场景特征库,包括所述场景分类信息和/或场景的属性信息,用以在步骤3在VR服务器计算分析语音信息,筛选符合条件的场景中为客户匹配满足条件的符合条件的场景;所述场景分类信息和/或场景的属性信息可以通过***或网页设置或输入其他属性信息。
优选地,在VR服务器建立场景库、场景分类库和场景特征库,包括:
将所述场景分类库中的场景分类信息传导到步骤2在VR服务器建立场景导航菜单,用以作为场景导航菜单的场景分类信息;
将所述场景特征库中的场景特征信息传导到步骤3在VR服务器计算分析语音信息,筛选符合条件的场景,用以定位所述符合条件的场景的匹配元素。
优选地,所述步骤2在VR服务器建立场景导航菜单还包括:
根据所述场景分类信息,建立多种场景的导航菜单;
将所述场景导航菜单,传导到VR客户端,用以提供显示内容;
向所述VR客户端传导所述多种场景和/或按所述场景分类信息切换的符合条件的场景。
优选地,所述步骤3在VR服务器计算分析语音信息,筛选符合条件的场景,包括:
接收VR客户端传导来的音频数据;
通过语义分析装置对从VR客户端采集来的音频数据进行分析,从而得到文字形式的说话内容;
通过搜索引擎到所述场景特征库进行比对匹配,用以获得匹配的所述符合条件的场景。
优选地,所述步骤:通过搜索引擎到所述场景特征库进行比对匹配,用以获得匹配的所述符合条件的场景,包括:
步骤一、VR服务器调用搜索引擎,将所述文字形式的说话内容传递给搜索引擎,搜索引擎根据所述文字形式的说话内容与场景特征的匹配度,查找符合条件的场景并给出场景相似度数值;
步骤二、VR服务器向VR客户端传送所述匹配的场景及相似度数值,用以提供给VR客户端进行展示。
优选地,所述步骤一、VR服务器调用搜索引擎,将所述文字形式的说话内容传递给搜索引擎,搜索引擎根据所述文字形式的说话内容与场景特征的匹配度,查找符合条件的场景并给出场景相似度数值,包括:
确定语音内容解析后得到的语音场景特征要素及数量并分析所述语音场景特征要素的语义;
若搜索得到的搜索场景特征要素与所述语音场景特征要素数量相同且语义相同,则匹配,并且场景相似度数值是最高级;
若搜索得到的搜索场景特征要素包括所述语音场景特征要素,且搜索得到的搜索场景特征要素的数量大于所述语音场景特征要素的数量,则匹配,场景相似度数值是中级;
若搜索得到的搜索场景特征要素包括部分所述语音场景特征要素,且搜索得到的搜索场景特征要素的数量大于所述语音场景特征要素的数量,则匹配,场景相似度数值是低级;
若搜索得到的搜索场景特征要素不包括任一个所述语音场景特征要素,则不匹配,场景相似度数值是0。
优选地,所述符合条件的场景包括:虚拟现实的内容和/或现实内容;所述步骤4在VR服务器接收VR客户端选择的符合条件的场景的设置信息,VR服务器根据所述设置信息在场景库中确定场景并返回给VR客户端,用以将在所述步骤3在VR服务器计算分析语音信息,筛选符合条件的场景,获得的符合条件的场景传导给VR客户端,供客户在VR客户端上选择并浏览所述符合条件的场景的虚拟现实和/或现实内容;所述步骤4在VR服务器接收VR客户端选择的符合条件的场景的设置信息,VR服务器根据所述设置信息在场景库中确定场景并返回给VR客户端之前,还包括:
VR服务器接收并存储VR客户端传导来的客户选择的所述符合条件的场景。
第二方面,本申请实施例提供了一种VR客户端VR导览的方法,所述VR导览方法,用以提供给客户浏览内容和/或选择设置,实现客户在所述多种场景中按所述场景分类切换所述匹配获得的符合条件的场景,包括:
步骤1:VR客户端接收VR服务器传导的数据;
步骤2:VR客户端通过获取客户说话内容和/或短视频,传导给VR服务器;
步骤3:VR客户端将客户的语音通过语音识别技术识别成文字信息,通过文字信息与场景特征库做比对,找到所述符合条件的场景并计算相应场景的相似度;
步骤4:VR客户端接受VR服务器传导来的符合条件的场景和相应的相似度数值,按相似度对场景进行由高到低排序,显示搜索到的所述符合条件的场景信息
步骤5:VR客户端选择符合条件的场景及操作模式,传导给VR服务器;
步骤6:VR客户端通过手柄或者语音控制方式行进路线和方向在虚拟显示场景中游览。
第三方面,本申请实施例提供了一种VR客户端,用以VR导览,所述VR客户端包括:
接收发送模块,用以接收VR服务器传导的数据,向VR服务器发送数据;接收VR服务器传导的数据,包括:所述导航菜单,所述场景分类库全部或部分内容、所述场景特征库全部或部分内容;通过语音设备采集客户说话内容和/或短视频,并传导给VR服务器;VR客户端接受VR服务器传导来的相似度数值;
采集设备,用以采集客户说话内容和/或短视频;
计算分析模块,用以将客户的语音转化成文字信息,通过文字信息与特征库做比对来筛选多场景,找到客户关注的所述符合条件的场景;还用以统计VR服务器传导来的场景及场景相似度数值,并按场景相似度值由高到低排序;
设置输入模块,用以客户输入登陆信息,在所述找到客户关注的的所述符合条件的场景中进行选择;
场景展示模块,用以进行所述在虚拟显示场景中游览,包括:客户用VR客户端观看所述符合条件的场景,用手持选择设备选择虚拟现实场景中的路线,选择虚拟物品;客户用VR客户端将所述符合条件的场景传导到其他显示设备上观看和/或存储后播放。
存储模块,用以存储信息,包括传导的数据,语音,视频,指令。
第四方面,本申请实施例提供了一种VR导览装置,所述VR导览装置包括:
场景维护模块,用以建立和维护场景分类库和场景特征库,将线下场景维护到VR服务器存储,建立场景与场景分类库的归属关系,同时设置场景的特征库信息;
菜单模块,用以在VR服务器建立和维护场景导航菜单,建立菜单与场景的对应关系,建立菜单与场景资源的对应关系,为VR客户端提供展示的导航菜单;
计算分析模块,用以计算分析语音信息,筛选符合条件的场景;
采集模块,用以采集客户说话内容和/或短视频,将所采集的客户说话内容和/或短视频传导给VR服务器,从而为语音和/或语义识别、人脸识别提供输入数据;
设置输入模块,用以接收VR客户端选择的符合条件的场景的设置信息,VR服务器根据VR客户端的设置信息在场景库中确定场景并返回给VR客户端。
场景展示模块,用以支持VR客户端实现所述在虚拟显示场景中游览,支持VR客户端根据用户选择的场景,从VR服务器获取场景资源并播放。
优选地,所述VR导览装置,还包括:
识别模块,用以识别语音和/或语义,分析文字形式的说话内容;
搜索引擎模块,用以搜索通过搜索引擎对所述场景特征库进行分析,通过快速高效的匹配算法,来对VR客户端传导的文字形式说话内容与场景的特征库进行快速算法匹配,实现智能快速搜索功能;
存储模块,用以存储信息,包括传导的数据,语音,视频,指令,场景资源,并对依存模块提供读写接口。
接收发送模块,用以接收VR客户端传导的数据;向VR客户端发送数据;向VR客户端发送的数据,包括:所述导航菜单,所述场景分类库全部或部分内容、所述场景特征库全部或部分内容;向VR客户端发送多种场景及对应的场景相似度数值。接收VR客户端传导的数据,包括:VR客户端通过语音设备采集客户说话内容和/或短视频;向VR客户端发送的数据,包括:所述导航菜单,所述场景分类库全部或部分内容、所述场景特征库全部或部分内容;向VR客户端发送多种场景的相似度数值。
第五方面,本申请实施例提供了一种VR导览服务器,包括处理器和机器可读存储介质,所述机器可读存储介质存储有能够被所述处理器执行的机器可执行指令,在被处理器调用和执行时,所述处理器可执行指令促使所述处理器实现本申请实施例任一所述的VR导览的方法。
第六方面,本申请实施例提供了一种VR导览***,其特征在于,包括上述任一VR导览装置,及上述VR客户端。
第七方面,本申请实施例提供了一种存储介质,存储有机器可执行指令,在被处理器调用和执行时,所述处理器可执行指令促使所述处理器实现本申请实施例所述的方法。
由以上可见,本申请实施例提供的方案中,相对于现有技术,本发明具有以下有益效果:本发明采用科学的场景分类和场景特征,通过场景导航菜单,运用语音信息输入识别技术和计算分析,解决了VR场景兼容语音控制的技术问题,使得用户在多个场景方便、快捷、准确地选择符合条件的场景,VR服务器根据所述设置信息在场景库中确定场景并返回给VR客户端。本方案解决了VR场景选择装置文字输入功能弱的问题,实现了用户在大量场景中可以选择适合自己的具体功能,快速定位符合条件的场景;拓展VR应用***的应用领域,可以应用于大型线上商城。
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
附图说明
图1为本发明一实施例的VR导览方法的流程图;
图2为本发明一实施例的VR客户端VR导览方法的流程图;
图3为本发明一实施例的VR客户端的结构示意图;
图4为本发明一实施例的VR导览装置的结构示意图。
具体实施方式
为了能够更清楚地理解本发明的上述目的、特征和优点,下面结合附图和具体实施方式对本发明进行详细描述。需要说明的是,在不冲突的情况下,本申请的实施方式及实施方式中的特征可以相互组合。
除非另有定义,本文所使用的所有的技术和科学术语与属于本发明的技术领域的技术人员通常理解的含义相同。本文中在本发明的说明书中所使用的术语只是为了描述具体的实施方式的目的,不是旨在于限制本发明。
请参阅图1,图1为本发明一实施例的VR导览方法的流程图,该方法包括:
S100:在VR服务器建立场景库、场景分类库和场景特征库;
S102:在VR服务器建立场景导航菜单;
S104:在VR服务器计算分析语音信息,筛选符合条件的场景;
S106:在VR服务器接收VR客户端选择的符合条件的场景的设置信息,VR服务器根据所述设置信息在场景库中确定场景并返回给VR客户端。
具体而言,所述场景库,包括所有预设场景,用以在步骤S106中为VR前端提供场景服务;所述场景库用以为VR客户端提供浏览的场景;所述场景分类库,包括多种场景和所述多种场景的场景分类信息,用以在步骤S102在VR服务器建立场景导航菜单中为客户展示多种场景导航菜单;所述场景特征库,包括所述场景分类信息和/或场景的其他属性信息,用以在步骤S104在VR服务器计算分析语音信息,筛选符合条件的场景中为客户匹配满足条件的符合条件的场景;
S100所述建立场景库、场景分类库和场景特征库,包括:
将所述场景分类库中的场景分类信息传导到S102在VR服务器建立场景导航菜单,用以作为场景导航菜单的场景分类信息;
将所述场景特征库中的场景特征信息传导到S104在VR服务器计算分析语音信息,筛选符合条件的场景,用以定位所述符合条件的场景的匹配元素;
具体而言,所述场景分类库中的场景分类信息用以在所述步骤S102在VR服务器建立场景导航菜单,作为场景导航菜单的场景分类信息;
所述场景特征库中的场景特征信息用以在所述步骤S104在VR服务器计算分析语音信息,筛选符合条件的场景,定位符合条件场景的匹配元素。
S102所述在VR服务器建立场景导航菜单,还包括:
根据所述场景分类信息,建立多种场景的导航菜单;
将所述场景导航菜单,传导到VR客户端,用以提供显示内容;
具体而言,S104所述计算分析语音信息是在VR服务器计算分析从VR客户端采集的语音信息;所述筛选符合条件的场景是在S100所建立的分类库和特征库中筛选目标符合条件的场景;
S104所述在VR服务器计算分析语音信息,筛选符合条件的场景,包括:
接收VR客户端传导来的音频数据;
通过语义分析装置对从VR客户端采集来的音频数据进行分析,从而得到文字形式的说话内容;
通过搜索引擎到所述场景特征库进行比对匹配,用以获得匹配的所述符合条件的场景;
向VR客户端传导所述获得匹配的所述符合条件的场景。
具体而言,步骤S104又包括:
步骤一、VR服务器调用搜索引擎,将所述文字形式的说话内容传递给搜索引擎,搜索引擎根据所述文字形式的说话内容与场景特征的匹配度,查找符合条件的场景并给出场景相似度数值;本步骤又包括:
确定语音内容解析后得到的语音场景特征要素并分析所述语音场景特征要素的语义;
若搜索得到的搜索场景特征要素与所述语音场景特征要素语义相同,则匹配,并且场景相似度数值是最高级;
若搜索得到的搜索场景特征要素包括所述语音场景特征要素,且搜索得到的搜索场景特征要素的数量大于所述语音场景特征要素的数量,则匹配,场景相似度数值是中级;
若搜索得到的搜索场景特征要素包括部分所述语音场景特征要素,且搜索得到的搜索场景特征要素的数量大于所述语音场景特征要素的数量,则匹配,场景相似度数值是低级;
若搜索得到的搜索场景特征要素不包括任一个所述语音场景特征要素,则不匹配,场景相似度数值是0。
步骤二、VR服务器向VR客户端传送所述匹配的场景及相似度数值,用以提供给VR客户端进行展示,以用以客户端选择。
具体而言,S106所述VR客户端选择的符合条件的场景的设置信息是VR客户端从S104筛选场景中选择的符合条件的场景的设置信息;所述在VR服务器接收VR客户端选择的符合条件的场景的设置信息,VR服务器根据所述设置信息在场景库中确定场景并返回给VR客户端,用以将在S104所述在VR服务器计算分析语音信息,筛选符合条件的场景,并传导给VR客户端,供客户在VR客户端上选择并浏览所述符合条件的场景的虚拟现实和/或现实内容;S106所述在VR服务器接收VR客户端选择的符合条件的场景的设置信息,VR服务器根据所述设置信息在场景库中确定场景并返回给VR客户端之前,还包括:
VR服务器接收并存储VR客户端传导来的客户选择的所述符合条件的场景。
本方案通过引入语音语义解析技术来实现语音识别,从而实现语音控制来代替手柄、菜单导览,再结合搜索技术实现自动的语音导览功能,用以解决海量场景使用环境,导览不便问题,提高导览的效率和使用的方便性。
请参阅图2,图2为本发明一实施例的VR客户端VR导览的方法的流程图,所述方法包括:
S200:VR客户端接收VR服务器传导的数据;所述数据包括导航和/或场景数据;
VR客户端接收VR服务器传导的导航和/或场景数据,包括:所述导航菜单,所述场景分类库全部或部分内容、所述场景特征库全部或部分内容、语音搜索获取的符合条件的场景;;
S202:VR客户端通过获取客户说话内容和/或短视频,传导给VR服务器;
所述获取包括通过采集设备采集而来;VR客户端通过采集设备采集客户说话内容和/或短视频,并传导给VR服务器;客户对着语音采集装置说出想要查看的场景特征,语音采集装置采集客户语音并传送给VR客户端应用。
S204:VR客户端将客户的语音通过语音识别技术识别成文字信息,通过文字信息与场景特征库做比对,找到所述符合条件的场景并计算相应场景的相似度;
S206:VR客户端接受VR服务器传导来的符合条件的场景和相应的相似度数值,按相似度对场景进行由高到低排序,显示搜索到的所述符合条件的场景信息;
VR客户端接受VR服务器传导来的符合条件的场景和相应的相似度数值,按相似度对场景进行由高到低排序,显示搜索到的所述符合条件的场景信息,用以供客户端选择;
S208:VR客户端选择符合条件的场景及操作模式,传导给VR服务器;
VR客户端在服务端传到来的符合条件的场景中选择目标场景及语音操作/手柄操作模式,传导给VR服务器;
S210:VR客户端通过手柄或者语音控制方式行进路线和方向在虚拟显示场景中游览;
VR客户端实现所述在虚拟显示场景中游览,包括:客户用VR客户端观看所述符合条件的场景;客户用VR客户端将所述符合条件的场景传导到其他显示设备上观看和/或存储后播放;所述符合条件的场景包括:虚拟现实的内容和/或现实内容。
请参阅图3,图3与上述一种VR客户端VR导览的方法相对应,本实施例还提供了一种VR客户端22,用以VR导览,包括:
接收发送模块10,用以接收VR服务器传导的数据,向VR服务器发送数据;
采集设备12,用以采集客户说话内容和/或短视频;
计算分析模块14,用以将客户的语音转化成文字信息,通过文字信息与特征库做比对来筛选多场景,找到客户关注的所述符合条件的场景;还用以统计VR服务器传导来的场景及场景相似度数值,并按场景相似度值由高到低排序;
设置输入模块16,用以客户输入登陆信息,在所述找到客户关注的的所述符合条件的场景中进行选择;
场景展示模块18,用以进行所述在虚拟显示场景中游览,包括:客户用VR客户端观看所述符合条件的场景,用手持选择设备选择虚拟现实场景中的路线,选择虚拟物品;客户用VR客户端将所述符合条件的场景传导到其他显示设备上观看和/或存储后播放。
存储模块20,用以存储信息,包括传导的数据,语音,视频,指令,场景资源。
图4为本发明一实施例的VR导览装置的结构示意图,所述VR导览装置30,包括;
场景维护模块32,用以建立和维护场景分类库和场景特征库,将线下场景维护到VR服务器存储,建立场景与场景分类库的归属关系,同时设置场景的特征库信息;
菜单模块34,用以在VR服务器建立和维护场景导航菜单,建立菜单与场景的对应关系,建立菜单与场景资源的对应关系,为VR客户端提供展示的导航菜单;
计算分析模块46,用以计算分析语音信息,筛选符合条件的场景;
采集模块36,用以采集客户说话内容和/或短视频,将所采集的客户说话内容和/或短视频传导给VR服务器,从而为语音和/或语义识别、人脸识别提供输入数据;
设置输入模块38,用以接收VR客户端选择的符合条件的场景的设置信息,VR服务器根据VR客户端的设置信息在场景库中确定场景并返回给VR客户端。
场景展示模块40,用以支持VR客户端实现所述在虚拟显示场景中游览,支持VR客户端根据用户选择的场景,从VR服务器获取场景资源并播放。
所述VR导览装置,还包括:
识别模块42,用以识别语音和/或语义,分析文字形式的说话内容以及语音语义,为VR导览***提供语音和/或语义识别能力,允许VR客户端直接通过语音输入查询条件,解决VR***文字输入功能不足问题;
搜索引擎模块44,用以搜索通过搜索引擎对所述场景特征库进行分析,通过快速高效分词匹配算法,来对VR客户端传导的文字形式说话内容与场景的特征库进行快速算法匹配,实现智能快速搜索功能;
接收发送模块48,用以接收VR客户端传导的数据;向VR客户端发送数据;向VR客户端发送的数据,包括:所述导航菜单,所述场景分类库全部或部分内容、所述场景特征库全部或部分内容、语音搜索时符合条件的场景以及场景的相似度信息。
存储模块50,用以存储信息,包括传导的数据,语音,视频,指令,场景资源,并对依存模块提供读写接口。
VR服务器从VR客户端获得语音信息,通过语音语义识别模块的语音识别功能,识别出文字内容;通过搜索引擎的分词解析功能解析成语音分词,然后与场景特征库的场景特征进行比对,获得符合条件的场景及特征;通过语音语义识别模块的语义识别功能,比对语音分词与场景特征库的场景特征,获得符合条件的场景及特征;再利用计算分析模块,计算符合条件场景的相似度数据;最终获取到符合条件的场景及场景相似度数据。
本申请的一个实施例提供了一种VR导览服务器,包括处理器和机器可读存储介质,所述机器可读存储介质存储有能够被所述处理器执行的机器可执行指令,在被处理器调用和执行时,所述处理器可执行指令促使所述处理器实现本申请实施例任一所述的VR导览的方法。
本申请的一个实施例提供了一种VR导览***,其特征在于,包括上述任一VR导览装置,及上述VR客户端。
本申请的一个实施例提供了一种存储介质,存储有机器可执行指令,在被处理器调用和执行时,所述处理器可执行指令促使所述处理器实现本申请实施例所述的方法。
所述***/计算机装置集成的部件/模块/单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读取存储介质中。基于这样的理解,本发明实现上述实施方式方法中的全部或部分流程,也可以通过计算机程序来指令相关的硬件来完成,所述的计算机程序可存储于一计算机可读存储介质中,所述计算机程序在被处理器执行时,可实现上述各个方法实施方式的步骤。其中,所述计算机程序包括计算机程序代码,所述计算机程序代码可以为源代码形式、对象代码形式、可执行文件或某些中间形式等。所述计算机可读存储介质可以包括:能够携带所述计算机程序代码的任何实体或装置、记录介质、U盘、移动硬盘、磁碟、光盘、计算机存储器、只读存储器(ROM,Read-OnlyMemory)、随机存取存储器(RAM,Random Access Memory)、电载波信号、电信信号以及软件分发介质等。需要说明的是,所述计算机可读介质包含的内容可以根据司法管辖区内立法和专利实践的要求进行适当的增减,例如在某些司法管辖区,根据立法和专利实践,计算机可读介质不包括电载波信号和电信信号。
在本发明所提供的几个具体实施方式中,应该理解到,所揭露的***和方法,可以通过其它的方式实现。例如,以上所描述的***实施方式仅仅是示意性的,例如,所述部件的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式。
另外,在本发明各个实施例中的各功能模块/部件可以集成在相同处理模块/部件中,也可以是各个模块/部件单独物理存在,也可以两个或两个以上模块/部件集成在相同模块/部件中。上述集成的模块/部件既可以采用硬件的形式实现,也可以采用硬件加软件功能模块/部件的形式实现。
对于本领域技术人员而言,显然本发明实施例不限于上述示范性实施例的细节,而且在不背离本发明实施例的精神或基本特征的情况下,能够以其他的具体形式实现本发明实施例。因此,无论从哪一点来看,均应将实施例看作是示范性的,而且是非限制性的,本发明实施例的范围由所附权利要求而不是上述说明限定,因此旨在将落在权利要求的等同要件的含义和范围内的所有变化涵括在本发明实施例内。不应将权利要求中的任何附图标记视为限制所涉及的权利要求。此外,显然“包括”一词不排除其他单元或步骤,单数不排除复数。***、装置或终端权利要求中陈述的多个单元、模块或装置也可以由同一个单元、模块或装置通过软件或者硬件来实现。第一,第二等词语用来表示名称,而并不表示任何特定的顺序。
以上所述实施例仅表达了本发明的几种实施方式,其描述较为具体和详细,但并不能因此而理解为对发明专利范围的限制。应当指出的是,对于本领域的普通技术人员来说,在不脱离本发明构思的前提下,还可以做出若干变形和改进,这些都属于本发明的保护范围。因此,本发明专利的保护范围应以所附权利要求为准。
Claims (15)
1.一种VR导览方法,其特征在于,包括:
步骤1、在VR服务器建立场景库、场景分类库和场景特征库;
步骤2、在VR服务器建立场景导航菜单;
步骤3、在VR服务器计算分析语音信息,筛选符合条件的场景;
步骤4、在VR服务器接收VR客户端选择的符合条件的场景的设置信息,VR服务器根据所述设置信息在场景库中确定场景并返回给VR客户端。
2.根据权利要求1所述的VR导览的方法,其特征在于,所述场景库,包括预设场景,用以为VR客户端提供浏览的场景;所述场景分类库,包括多种场景和所述多种场景的场景分类信息,用以在步骤2在VR服务器建立场景导航菜单中为客户展示多种场景导航菜单;所述场景特征库,包括所述场景分类信息和/或场景的属性信息,用以在步骤3在VR服务器计算分析语音信息,筛选符合条件的场景中为客户匹配满足条件的符合条件的场景。
3.根据权利要求1所述的VR导览的方法,其特征在于,步骤1所述在VR服务器建立场景库、场景分类库和场景特征库,包括:
将所述场景分类库中的场景分类信息传导到步骤2在VR服务器建立场景导航菜单,用以作为场景导航菜单的场景分类信息;
将所述场景特征库中的场景特征信息传导到步骤3在VR服务器计算分析语音信息,筛选符合条件的场景,用以定位所述符合条件的场景的匹配元素。
4.根据权利要求1所述的VR导览的方法,其特征在于,所述步骤2在VR服务器建立场景导航菜单,还包括:
根据所述场景分类信息,建立多种场景的导航菜单;
将所述场景导航菜单,传导到VR客户端,用以提供显示内容;
5.根据权利要求1所述的VR导览的方法,其特征在于,所述步骤3在VR服务器计算分析语音信息,筛选符合条件的场景,包括:
接收VR客户端传导来的音频数据;
通过语义分析装置对从VR客户端采集来的音频数据进行分析,从而得到文字形式的说话内容;
通过搜索引擎到所述场景特征库进行比对匹配,用以获得匹配的所述符合条件的场景。
6.根据权利要求5所述的VR导览的方法,其特征在于,所述通过搜索引擎到所述场景特征库进行比对匹配,用以获得匹配的所述符合条件的场景,包括:
步骤一、VR服务器调用搜索引擎,将所述文字形式的说话内容传递给搜索引擎,搜索引擎根据所述文字形式的说话内容与场景特征的匹配度,查找符合条件的场景并给出场景相似度数值;
步骤二、VR服务器向VR客户端传送所述匹配的场景及相似度数值,用以提供给VR客户端进行展示。
7.根据权利要求6所述的VR导览的方法,其特征在于,所述步骤一、VR服务器调用搜索引擎,将所述文字形式的说话内容传递给搜索引擎,搜索引擎根据所述文字形式的说话内容与场景特征的匹配度,查找符合条件的场景并给出场景相似度数值,包括:
确定语音内容解析后得到的语音场景特征要素及数量并分析所述语音场景特征要素的语义;
若搜索得到的搜索场景特征要素与所述语音场景特征要素数量相同且语义相同,则匹配,并且场景相似度数值是最高级;
若搜索得到的搜索场景特征要素包括所述语音场景特征要素,且搜索得到的搜索场景特征要素的数量大于所述语音场景特征要素的数量,则匹配,场景相似度数值是中级;
若搜索得到的搜索场景特征要素包括部分所述语音场景特征要素,且搜索得到的搜索场景特征要素的数量大于所述语音场景特征要素的数量,则匹配,场景相似度数值是低级;
若搜索得到的搜索场景特征要素不包括任一个所述语音场景特征要素,则不匹配,场景相似度数值是0。
8.根据权利要求1所述的VR导览的方法,其特征在于,所述符合条件的场景包括:虚拟现实的内容和/或现实内容;所述步骤4在VR服务器接收VR客户端选择的符合条件的场景的设置信息,VR服务器根据所述设置信息在场景库中确定场景并返回给VR客户端,用以将在所述步骤3在VR服务器计算分析语音信息,筛选符合条件的场景,获得的符合条件的场景传导给VR客户端,供客户在VR客户端上选择并浏览所述符合条件的场景的虚拟现实和/或现实内容;所述步骤4在VR服务器接收VR客户端选择的符合条件的场景的设置信息,VR服务器根据所述设置信息在场景库中确定场景并返回给VR客户端之前,还包括:
VR服务器接收并存储VR客户端传导来的客户选择的所述符合条件的场景。
9.一种VR客户端VR导览的方法,其特征在于,所述VR导览方法,用以提供给客户浏览内容和/或选择设置,实现客户在所述多种场景中按所述场景分类切换所述匹配获得的符合条件的场景,包括:
步骤1:VR客户端接收VR服务器传导的数据;
步骤2:VR客户端通过获取客户说话内容和/或短视频,传导给VR服务器;
步骤3:VR客户端将客户的语音通过语音识别技术识别成文字信息,通过文字信息与场景特征库做比对,找到所述符合条件的场景并计算相应场景的相似度;
步骤4:VR客户端接受VR服务器传导来的符合条件的场景和相应的相似度数值,按相似度对场景进行由高到低排序,显示搜索到的所述符合条件的场景信息;
步骤5:VR客户端选择符合条件的场景及操作模式,传导给VR服务器;
步骤6:VR客户端通过手柄或者语音控制方式行进路线和方向在虚拟显示场景中游览。
10.一种VR客户端,用以VR导览,其特征在于,所述VR客户端包括:
接收发送模块,用以接收VR服务器传导的数据,向VR服务器发送数据;
采集设备,用以采集客户说话内容和/或短视频;
计算分析模块,用以将客户的语音转化成文字信息,通过文字信息与特征库做比对来筛选多场景,找到客户关注的所述符合条件的场景;还用以统计VR服务器传导来的场景及场景相似度数值,并按场景相似度值由高到低排序;
设置输入模块,用以客户输入登陆信息,在所述找到客户关注的的所述符合条件的场景中进行选择;
场景展示模块,用以进行所述在虚拟显示场景中游览,包括:客户用VR客户端观看所述符合条件的场景,用手持选择设备选择虚拟现实场景中的路线,选择虚拟物品;客户用VR客户端将所述符合条件的场景传导到其他显示设备上观看和/或存储后播放。
存储模块,用以存储信息,包括传导的数据,语音,视频,指令,场景资源。
11.一种VR导览装置,其特征在于,所述VR导览装置包括:
场景维护模块,用以建立和维护场景分类库和场景特征库,将线下场景维护到VR服务器存储,建立场景与场景分类库的归属关系,同时设置场景的特征库信息;
菜单模块,用以在VR服务器建立和维护场景导航菜单,建立菜单与场景的对应关系,建立菜单与场景资源的对应关系,为VR客户端提供展示的导航菜单;
计算分析模块,用以计算分析语音信息,筛选符合条件的场景;
采集模块,用以采集客户说话内容和/或短视频,将所采集的客户说话内容和/或短视频传导给VR服务器,从而为语音和/或语义识别、人脸识别提供输入数据;
设置输入模块,用以接收VR客户端选择的符合条件的场景的设置信息,VR服务器根据VR客户端的设置信息在场景库中确定场景并返回给VR客户端。
场景展示模块,用以支持VR客户端实现所述在虚拟显示场景中游览,支持VR客户端根据用户选择的场景,从VR服务器获取场景资源并播放。
12.根据权利要求11所述的VR导览装置,其特征在于,所述VR导览装置,还包括:
识别模块,用以识别语音和/或语义,分析文字形式的说话内容;
搜索引擎模块,用以搜索通过搜索引擎对所述场景特征库进行分析,通过快速高效的匹配算法,来对VR客户端传导的文字形式说话内容与场景的特征库进行快速算法匹配,实现智能快速搜索功能;
接收发送模块,用以接收VR客户端传导的数据;向VR客户端发送数据;向VR客户端发送的数据,包括:所述导航菜单,所述场景分类库全部或部分内容、所述场景特征库全部或部分内容;向VR客户端发送多种场景及对应的场景相似度数值。接收VR客户端传导的数据,包括:VR客户端通过语音设备采集客户说话内容和/或短视频;向VR客户端发送的数据,包括:所述导航菜单,所述场景分类库全部或部分内容、所述场景特征库全部或部分内容;向VR客户端发送多种场景的相似度数值;
存储模块,用以存储信息,包括传导的数据,语音,视频,指令,场景资源,并对依存模块提供读写接口。
13.一种VR导览服务器,其特征在于,包括处理器和机器可读存储介质,所述机器可读存储介质存储有能够被所述处理器执行的机器可执行指令,在被处理器调用和执行时,所述处理器可执行指令促使所述处理器:实现权利要求1-8任一所述的方法步骤。
14.一种VR导览***,其特征在于,包括如权利要求11或12所述的VR导览装置,及如权利要求10所述的VR客户端。
15.一种存储介质,其特征在于,存储有机器可执行指令,在被处理器调用和执行时,所述处理器可执行指令促使所述处理器:实现权利要求1-9任一所述的方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201911321933.XA CN111105294A (zh) | 2019-12-20 | 2019-12-20 | 一种vr导览方法、***、客户端、服务器及其存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201911321933.XA CN111105294A (zh) | 2019-12-20 | 2019-12-20 | 一种vr导览方法、***、客户端、服务器及其存储介质 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN111105294A true CN111105294A (zh) | 2020-05-05 |
Family
ID=70423045
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201911321933.XA Pending CN111105294A (zh) | 2019-12-20 | 2019-12-20 | 一种vr导览方法、***、客户端、服务器及其存储介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN111105294A (zh) |
Cited By (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN112434970A (zh) * | 2020-12-12 | 2021-03-02 | 广东电力信息科技有限公司 | 一种基于智能数据采集的资质数据验证方法、装置 |
CN113221521A (zh) * | 2021-05-31 | 2021-08-06 | 中国银行股份有限公司 | 基于vr的填单处理方法及*** |
CN114092674A (zh) * | 2022-01-24 | 2022-02-25 | 北京派瑞威行互联技术有限公司 | 多媒体数据分析方法和*** |
CN114201039A (zh) * | 2020-09-18 | 2022-03-18 | 聚好看科技股份有限公司 | 一种实现虚拟现实的显示设备 |
CN116700500A (zh) * | 2023-08-07 | 2023-09-05 | 江西科技学院 | 多场景vr互动方法、***及存储介质 |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN106371605A (zh) * | 2016-09-19 | 2017-02-01 | 腾讯科技(深圳)有限公司 | 虚拟现实场景调节方法及装置 |
CN107300970A (zh) * | 2017-06-05 | 2017-10-27 | 百度在线网络技术(北京)有限公司 | 虚拟现实交互方法和装置 |
US20180024630A1 (en) * | 2016-07-21 | 2018-01-25 | Google Inc. | Editing cuts in virtual reality |
CN109374002A (zh) * | 2018-10-09 | 2019-02-22 | 北京京东尚科信息技术有限公司 | 导航方法和***、计算机可读存储介质 |
CN110021200A (zh) * | 2019-04-01 | 2019-07-16 | 广东芬莱信息科技有限公司 | 教学练考一体化的虚拟现实培训方法、装置及存储介质 |
-
2019
- 2019-12-20 CN CN201911321933.XA patent/CN111105294A/zh active Pending
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20180024630A1 (en) * | 2016-07-21 | 2018-01-25 | Google Inc. | Editing cuts in virtual reality |
CN106371605A (zh) * | 2016-09-19 | 2017-02-01 | 腾讯科技(深圳)有限公司 | 虚拟现实场景调节方法及装置 |
CN107300970A (zh) * | 2017-06-05 | 2017-10-27 | 百度在线网络技术(北京)有限公司 | 虚拟现实交互方法和装置 |
CN109374002A (zh) * | 2018-10-09 | 2019-02-22 | 北京京东尚科信息技术有限公司 | 导航方法和***、计算机可读存储介质 |
CN110021200A (zh) * | 2019-04-01 | 2019-07-16 | 广东芬莱信息科技有限公司 | 教学练考一体化的虚拟现实培训方法、装置及存储介质 |
Non-Patent Citations (1)
Title |
---|
张慧,张明敏,潘志庚: "分布式VRML场景的实时浏览和交互观察" * |
Cited By (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN114201039A (zh) * | 2020-09-18 | 2022-03-18 | 聚好看科技股份有限公司 | 一种实现虚拟现实的显示设备 |
CN114201039B (zh) * | 2020-09-18 | 2023-08-29 | 聚好看科技股份有限公司 | 一种实现虚拟现实的显示设备 |
CN112434970A (zh) * | 2020-12-12 | 2021-03-02 | 广东电力信息科技有限公司 | 一种基于智能数据采集的资质数据验证方法、装置 |
CN113221521A (zh) * | 2021-05-31 | 2021-08-06 | 中国银行股份有限公司 | 基于vr的填单处理方法及*** |
CN114092674A (zh) * | 2022-01-24 | 2022-02-25 | 北京派瑞威行互联技术有限公司 | 多媒体数据分析方法和*** |
CN116700500A (zh) * | 2023-08-07 | 2023-09-05 | 江西科技学院 | 多场景vr互动方法、***及存储介质 |
CN116700500B (zh) * | 2023-08-07 | 2024-05-24 | 江西科技学院 | 多场景vr互动方法、***及存储介质 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN111105294A (zh) | 一种vr导览方法、***、客户端、服务器及其存储介质 | |
JP6708717B2 (ja) | ニュース推薦方法及び装置 | |
JP6967612B2 (ja) | 情報検索方法、装置及びシステム | |
CN109460514B (zh) | 用于推送信息的方法和装置 | |
US20160301639A1 (en) | Method and system for providing recommendations during a chat session | |
CN110162359B (zh) | 新手引导信息的推送方法、装置及*** | |
CN109036397B (zh) | 用于呈现内容的方法和装置 | |
CN111782977A (zh) | 兴趣点处理方法、装置、设备及计算机可读存储介质 | |
CN112000776B (zh) | 基于语音语义的话题匹配方法、装置、设备及存储介质 | |
CN107908616B (zh) | 预测趋势词的方法和装置 | |
CN111984749B (zh) | 一种兴趣点排序方法和装置 | |
CN111026853B (zh) | 目标问题的确定方法、装置、服务器和客服机器人 | |
CN113806588B (zh) | 搜索视频的方法和装置 | |
KR102601545B1 (ko) | 지리 위치점 정렬 방법, 정렬 모델 트레이닝 방법 및 대응하는 장치 | |
CN111191133A (zh) | 业务搜索处理方法、装置及设备 | |
CN110059172B (zh) | 基于自然语言理解的推荐答案的方法和装置 | |
CN109992719B (zh) | 用于确定推送优先级信息的方法和装置 | |
CN109710939B (zh) | 用于确定主题的方法和装置 | |
CN111429200B (zh) | 一种内容关联方法及装置、存储介质、计算机设备 | |
CN115760296A (zh) | 页面数据处理与浏览方法、终端设备及存储介质 | |
CN115114123A (zh) | 一种页面显示方法、装置、设备及介质 | |
CN113076395A (zh) | 语义模型训练、搜索显示方法、装置、设备及存储介质 | |
CN115080824A (zh) | 目标词的挖掘方法、装置、电子设备及存储介质 | |
CN109857838B (zh) | 用于生成信息的方法和装置 | |
CN113722593A (zh) | 事件数据处理方法、装置、电子设备和介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
RJ01 | Rejection of invention patent application after publication |
Application publication date: 20200505 |