CN110493215A - 一种基于局域网的多人沉浸式空间交互*** - Google Patents

一种基于局域网的多人沉浸式空间交互*** Download PDF

Info

Publication number
CN110493215A
CN110493215A CN201910755611.XA CN201910755611A CN110493215A CN 110493215 A CN110493215 A CN 110493215A CN 201910755611 A CN201910755611 A CN 201910755611A CN 110493215 A CN110493215 A CN 110493215A
Authority
CN
China
Prior art keywords
information
people
unit
area network
local area
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201910755611.XA
Other languages
English (en)
Inventor
张树坤
段冰
林伟
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Suzhou Zhaojian Intelligent Technology Co Ltd
Original Assignee
Suzhou Zhaojian Intelligent Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Suzhou Zhaojian Intelligent Technology Co Ltd filed Critical Suzhou Zhaojian Intelligent Technology Co Ltd
Priority to CN201910755611.XA priority Critical patent/CN110493215A/zh
Publication of CN110493215A publication Critical patent/CN110493215A/zh
Pending legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00Speech recognition
    • G10L15/26Speech to text systems
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/01Protocols
    • H04L67/131Protocols for games, networked simulations or virtual reality
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30Image reproducers
    • H04N13/332Displays for viewing with the aid of special glasses or head-mounted displays [HMD]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/21Server components or server architectures
    • H04N21/218Source of audio or video content, e.g. local disk arrays
    • H04N21/21805Source of audio or video content, e.g. local disk arrays enabling multiple viewpoints, e.g. using a plurality of cameras

Landscapes

  • Engineering & Computer Science (AREA)
  • Signal Processing (AREA)
  • Multimedia (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Databases & Information Systems (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Computational Linguistics (AREA)
  • Health & Medical Sciences (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Acoustics & Sound (AREA)
  • User Interface Of Digital Computer (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

本发明公开了一种基于局域网的多人沉浸式空间交互***,要解决的是现有交互***不能多人之间交互的问题。本发明包括采集模块、服务器和多个载体,所述采集模块和载体均通过局域网通讯模块与服务器相连,采集模块用于采集体验者的信息并且将信息发送给服务器,载体用于将每个体验者投影在同一片场景,服务器用于接收采集模块的信息、将信息发送给每个载体以及对信息进行处理。本发明将多个采集模块和多个载体连接至同一个局域网中,多个位于不同空间的体验者可以在同一个局域网中进行交互,有利于***的改进,更有利于达到沉浸式体验的效果,应用前景广阔。

Description

一种基于局域网的多人沉浸式空间交互***
技术领域
本发明涉及虚拟现实***,具体是一种基于局域网的多人沉浸式空间交互***。
背景技术
随着科技的发展和人们要求的提高,越来越多的人喜欢上了虚拟现实***。虚拟现实***(Virtual Reality System,简称VR)是近年来出现的图形图像领域的高新技术,也被称为灵境技术或人工环境,是利用电脑模拟产生一个三度空间的虚拟世界,提供使用者关于视觉、听觉、触觉等感官的模拟,让使用者如同身历其境一般,可以及时、没有限制地观察三度空间内的事物。
每个人对于虚拟现实***的感受都不一样,为了改进虚拟现实***使得体验者拥有更好的体验效果,人们都会和虚拟现实***进行交互,但是现有的交互***只能实现人与***之间的交互,尚未有多人交互***的出现,人们也在进行相关方面的研究。
发明内容
本发明实施例的目的在于提供一种基于局域网的多人沉浸式空间交互***,以解决上述背景技术中提出的问题。
为实现上述目的,本发明实施例提供如下技术方案:
一种基于局域网的多人沉浸式空间交互***,包括采集模块、服务器和多个载体,所述采集模块和载体均通过局域网通讯模块与服务器相连,采集模块用于采集体验者的信息并且将信息发送给服务器,载体用于将每个体验者投影在同一片场景,服务器用于接收采集模块的信息、将信息发送给每个载体以及对信息进行处理。
作为本发明实施例进一步的方案:服务器包括信息接收模块、分析处理模块、存储模块和信息发送模块,信息接收模块用于接收采集模块的信息,分析处理模块用于对信息进行分析和处理,存储模块用于存储分析处理后的结果,信息发送模块用于将采集模块的信息发送给每个载体,使得每个体验者可以接收其他体验者的信息,便于相互交流。
作为本发明实施例进一步的方案:采集模块包括拾音单元、视频单元和动作捕捉单元,拾音单元用于采集体验者的语言信息,视频单元用于采集体验者的图像信息,动作捕捉单元用于采集体验者的动作,可以全方位的采集体验者的信息,方便其他体验者和服务器了解该体验者的信息。
作为本发明实施例进一步的方案:分析处理模块包括语音识别单元、语义识别单元、语义转换单元、表情识别单元和动作识别单元,语音识别单元用于识别语音,语义识别单元用于识别语音中的语义,语义转换单元用于将语义转换为统一格式的数据,表情识别单元用于识别体验者的表情信息,动作识别单元用于识别体验者的动作信息。
作为本发明实施例进一步的方案:服务器还包括渲染模块,用于对每个体验者投影的场景进行渲染,增强体验效果。
作为本发明实施例进一步的方案:载体包括3D眼镜和虚拟头盔中的任意一种,市场易购得,使用效果好。
作为本发明实施例进一步的方案:局域网通讯模块包括有线单元、蓝牙单元、RFID单元、WIFI单元、红外射频单元和Zigbee单元中的至少一种,人们根据自己的工作环境选择合适的局域网通讯模块。
与现有技术相比,本发明实施例的有益效果是。
本发明将多个采集模块和多个载体连接至同一个局域网中,多个位于不同空间的体验者可以在同一个局域网中进行交互,有利于***的改进,更有利于达到沉浸式体验的效果,应用前景广阔。(如有补充请添加)。
附图说明
图1为基于局域网的多人沉浸式空间交互***的结构示意图。
图2为基于局域网的多人沉浸式空间交互***中服务器的结构示意图。
图3为基于局域网的多人沉浸式空间交互***中采集模块的结构示意图。
其中:1-采集模块,2-服务器,3-载体,4-局域网通讯模块,5-信息接收模块,6-分析处理模块,7-存储模块,8-信息发送模块,9-拾音单元,10-视频单元,11-动作捕捉单元。
具体实施方式
下面结合具体实施方式对本专利的技术方案作进一步详细地说明。
实施例1
一种基于局域网的多人沉浸式空间交互***,包括采集模块1、服务器2和多个载体33,所述采集模块1和载体3均通过局域网通讯模块4与服务器2相连,采集模块1用于采集体验者的信息并且将信息发送给服务器2,载体3用于将每个体验者投影在同一片场景,服务器2用于接收采集模块1的信息、将信息发送给每个载体3以及对信息进行处理,一个体验者说出自己的感受,采集模块1采集该体验者的语言等信息并且发送给服务器2,服务器2对信息进行处理并且发送给其他载体3,其他体验者就可以接收到该体验者的信息,便于多个不同空间的体验者进行交互。
为了体验效果更佳,服务器2包括信息接收模块5、分析处理模块6、存储模块7和信息发送模块8,信息接收模块5用于接收采集模块1的信息,分析处理模块6用于对信息进行分析和处理,存储模块7用于存储分析处理后的结果,信息发送模块8用于将采集模块1的信息发送给每个载体3,使得每个体验者可以接收其他体验者的信息,便于相互交流。
进一步的,分析处理模块6包括语音识别单元、语义识别单元、语义转换单元、表情识别单元和动作识别单元,语音识别单元用于识别语音,语义识别单元用于识别语音中的语义,语义转换单元用于将语义转换为统一格式的数据,表情识别单元用于识别体验者的表情信息,动作识别单元用于识别体验者的动作信息。
进一步的,服务器2还包括渲染模块,用于对每个体验者投影的场景进行渲染,增强体验效果。
实施例2
一种基于局域网的多人沉浸式空间交互***,包括采集模块1、服务器2和多个载体33,所述采集模块1和载体3均通过局域网通讯模块4与服务器2相连,采集模块1用于采集体验者的信息并且将信息发送给服务器2,载体3用于将每个体验者投影在同一片场景,服务器2用于接收采集模块1的信息、将信息发送给每个载体3以及对信息进行处理。
为了全方位的采集体验者的信息,采集模块1包括拾音单元9、视频单元10和动作捕捉单元11,拾音单元9用于采集体验者的语言信息,视频单元10用于采集体验者的图像信息,动作捕捉单元11用于采集体验者的动作,方便其他体验者和服务器2了解该体验者的信息。
进一步的,载体3包括3D眼镜和虚拟头盔中的任意一种,市场易购得,使用效果好。
进一步的,局域网通讯模块4包括有线单元、蓝牙单元、RFID单元、WIFI单元、红外射频单元和Zigbee单元中的至少一种,人们根据自己的工作环境选择合适的局域网通讯模块4。
进一步的,服务器2与移动终端相连,人们通过移动终端可以接收体验者的交互信息,便于人们查询。
以上所述仅为本发明的较佳实施例而已,并不用以限制本发明,凡在本发明的精神和原则之内,所作的任何修改、等同替换、改进等,均应包含在本发明的保护范围之内。不应将权利要求中的任何附图标记视为限制所涉及的权利要求。
此外,应当理解,虽然本说明书按照实施方式加以描述,但并非每个实施方式仅包含一个独立的技术方案,说明书的这种叙述方式仅仅是为清楚起见,本领域技术人员应当将说明书作为一个整体,各实施例中的技术方案也可以经适当组合,形成本领域技术人员可以理解的其他实施方式。

Claims (7)

1.一种基于局域网的多人沉浸式空间交互***,其特征在于,包括采集模块(1)、服务器(2)和多个载体(3),所述采集模块(1)和载体(3)均通过局域网通讯模块(4)与服务器(2)相连,采集模块(1)用于采集体验者的信息并且将信息发送给服务器(2),载体(3)用于将每个体验者投影在同一片场景,服务器(2)用于接收采集模块(1)的信息、将信息发送给每个载体(3)以及对信息进行处理。
2.根据权利要求1所述的基于局域网的多人沉浸式空间交互***,其特征在于,所述服务器(2)包括信息接收模块(5)、分析处理模块(6)、存储模块(7)和信息发送模块(8)。
3.根据权利要求1所述的基于局域网的多人沉浸式空间交互***,其特征在于,所述采集模块(1)包括拾音单元(9)、视频单元(10)和动作捕捉单元(11)。
4.根据权利要求2所述的基于局域网的多人沉浸式空间交互***,其特征在于,所述分析处理模块(6)包括语音识别单元、语义识别单元、语义转换单元、表情识别单元和动作识别单元。
5.根据权利要求2或4所述的基于局域网的多人沉浸式空间交互***,其特征在于,服务器(2)还包括渲染模块。
6.根据权利要求1所述的基于局域网的多人沉浸式空间交互***,其特征在于,所述载体(3)包括3D眼镜和虚拟头盔中的任意一种。
7.根据权利要求1所述的基于局域网的多人沉浸式空间交互***,其特征在于,所述局域网通讯模块(4)包括有线单元、蓝牙单元、RFID单元、WIFI单元、红外射频单元和Zigbee单元中的至少一种。
CN201910755611.XA 2019-08-15 2019-08-15 一种基于局域网的多人沉浸式空间交互*** Pending CN110493215A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201910755611.XA CN110493215A (zh) 2019-08-15 2019-08-15 一种基于局域网的多人沉浸式空间交互***

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201910755611.XA CN110493215A (zh) 2019-08-15 2019-08-15 一种基于局域网的多人沉浸式空间交互***

Publications (1)

Publication Number Publication Date
CN110493215A true CN110493215A (zh) 2019-11-22

Family

ID=68551225

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910755611.XA Pending CN110493215A (zh) 2019-08-15 2019-08-15 一种基于局域网的多人沉浸式空间交互***

Country Status (1)

Country Link
CN (1) CN110493215A (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111240475A (zh) * 2020-01-06 2020-06-05 深圳市恒悦魔方实业有限公司 一种用于多人互动的vr头盔
CN111885130A (zh) * 2020-07-10 2020-11-03 深圳市瑞立视多媒体科技有限公司 语音通信方法、装置、***、设备及存储介质

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105425955A (zh) * 2015-11-06 2016-03-23 中国矿业大学 多用户沉浸式全互动虚拟现实工程培训***
CN106023983A (zh) * 2016-04-27 2016-10-12 广东欧珀移动通信有限公司 基于虚拟现实vr场景的多用户语音交互方法以及装置
CN106598245A (zh) * 2016-12-16 2017-04-26 传线网络科技(上海)有限公司 基于虚拟现实的多用户交互控制方法及装置
CN107024995A (zh) * 2017-06-05 2017-08-08 河北玛雅影视有限公司 多人虚拟现实交互***及其控制方法
CN107070784A (zh) * 2017-06-14 2017-08-18 李云 一种基于WebGL和VR技术的3D即时通讯***
CN107678715A (zh) * 2016-08-02 2018-02-09 北京康得新创科技股份有限公司 虚拟信息的共享方法,装置和***
CN108905204A (zh) * 2018-07-24 2018-11-30 合肥爱玩动漫有限公司 一种用于沉浸式虚拟游戏的交互方法

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105425955A (zh) * 2015-11-06 2016-03-23 中国矿业大学 多用户沉浸式全互动虚拟现实工程培训***
CN106023983A (zh) * 2016-04-27 2016-10-12 广东欧珀移动通信有限公司 基于虚拟现实vr场景的多用户语音交互方法以及装置
CN107678715A (zh) * 2016-08-02 2018-02-09 北京康得新创科技股份有限公司 虚拟信息的共享方法,装置和***
CN106598245A (zh) * 2016-12-16 2017-04-26 传线网络科技(上海)有限公司 基于虚拟现实的多用户交互控制方法及装置
CN107024995A (zh) * 2017-06-05 2017-08-08 河北玛雅影视有限公司 多人虚拟现实交互***及其控制方法
CN107070784A (zh) * 2017-06-14 2017-08-18 李云 一种基于WebGL和VR技术的3D即时通讯***
CN108905204A (zh) * 2018-07-24 2018-11-30 合肥爱玩动漫有限公司 一种用于沉浸式虚拟游戏的交互方法

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111240475A (zh) * 2020-01-06 2020-06-05 深圳市恒悦魔方实业有限公司 一种用于多人互动的vr头盔
CN111885130A (zh) * 2020-07-10 2020-11-03 深圳市瑞立视多媒体科技有限公司 语音通信方法、装置、***、设备及存储介质

Similar Documents

Publication Publication Date Title
Balakrishnan et al. Interaction of spatial computing in augmented reality
CN104079552B (zh) 认证***及其操作方法
CN107479699A (zh) 虚拟现实交互方法、装置及***
CN107632706A (zh) 多模态虚拟人的应用数据处理方法和***
CN108460324A (zh) 一种用于识别幼儿情绪的方法
CN110083235A (zh) 交互***及数据处理方法
CN110493215A (zh) 一种基于局域网的多人沉浸式空间交互***
CN108109209A (zh) 一种基于增强现实的视频处理方法及其装置
CN108668050A (zh) 基于虚拟现实的视频拍摄方法和装置
CN109343695A (zh) 基于虚拟人行为标准的交互方法及***
CN107003819A (zh) 多用户的基于传感器的交互
CN112152901A (zh) 一种虚拟形象控制方法、装置及电子设备
CN108364029A (zh) 用于生成模型的方法和装置
CN100592783C (zh) 一种视频通信***及方法
CN108776917A (zh) 一种虚拟三维空间的同步处理方法及装置
CN108880983A (zh) 一种虚拟三维空间的语音实时处理方法及装置
CN110519247A (zh) 一种一对多虚拟现实展示方法及装置
CN108712359A (zh) 一种虚拟现实社交方法及***
CN103440307B (zh) 媒体信息提供方法及装置
CN106506908A (zh) 一种视频合成方法及装置
CN110427864A (zh) 一种图像处理方法、装置及电子设备
CN109660508A (zh) 数据可视化方法、电子装置、计算机设备及存储介质
CN105610698B (zh) 事件结果的处理方法和装置
KR20210073428A (ko) 현실기반 sns를 위한 나만의 캐릭터 생성 및 사물 및 배경 복원 방법 및 시스템
CN106686089A (zh) 一种基于语音的动作捕捉数据云分享的控制方法、及其***

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20191122