CN206517592U - 一种交互式3d音频*** - Google Patents

一种交互式3d音频*** Download PDF

Info

Publication number
CN206517592U
CN206517592U CN201720171045.4U CN201720171045U CN206517592U CN 206517592 U CN206517592 U CN 206517592U CN 201720171045 U CN201720171045 U CN 201720171045U CN 206517592 U CN206517592 U CN 206517592U
Authority
CN
China
Prior art keywords
audio
audio systems
systems according
interactive mode
interactive
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
CN201720171045.4U
Other languages
English (en)
Inventor
王恒
王思慧
成建洪
余智勇
黄卓文
赵路
刘聪
冯皓然
姚柳
王本廷
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Wuhan Polytechnic University
Original Assignee
Wuhan Polytechnic University
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Wuhan Polytechnic University filed Critical Wuhan Polytechnic University
Priority to CN201720171045.4U priority Critical patent/CN206517592U/zh
Application granted granted Critical
Publication of CN206517592U publication Critical patent/CN206517592U/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Landscapes

  • Stereophonic System (AREA)

Abstract

本实用新型提供了一种交互式的3D音频***。此交互式3D音频***包括三个子***:外界信息输入***、后台信号处理***和3D音频场景呈现***。外界信息输入***包括虚拟设备、麦克风、信号笔和信息处理单元等。后台信号处理***中后台计算处理程序完成信号数据的分析和3D音频的实时生成。3D音频场景呈现***包括3D视频播放设备和3D音频播放设备。本***提供即时生成相对应的3D音频文件进行播放,完善外界输入与虚拟现实***之间的交互体验。

Description

一种交互式3D音频***
技术领域
在本实用新型属于虚拟现实技术领域,特别涉及一种交互式3D音频***。
背景技术
在虚拟现实技术未来将会发展成一种改变我们生活方式的新突破。相较于传统的传感器交互***,用户通过人体在外界输入信号与虚拟实体进行交互,头盔式成像仪和眼镜等职能在视觉上进行图片改变的反馈。各种虚拟现实装备仅仅只在视觉或触觉上完成人机交互,依旧阻挡着用户和虚拟世界之间的交流和影响虚拟现实身临其境的用户体验。
3D音频的实现为3D视频的发展锦上添花,传统3D视频通过立体眼镜中的两个显示屏提供的图像来模拟人的双眼视差,进而实现3D立体图像,使用户对影像中物体的距离感知。类似3D视频原理,3D音频常见的立体声效果就是靠左右耳听到在不同位置录制的不同声音来实现的,所以会有一种方向感。现实生活里,当头部转动时,听到的声音的方向就会改变。但目前在VR***中,声音的发生方位与用户的运动无关。
发明内容
本实用新型针对现有技术及设备的不足,提供了一种交互式的3D音频***。本实用新型的技术方案提供一种交互式的3D音频***,包括三个子***:外界信息输入***、后台信号处理***和3D音频场景呈现***。外界信息录入***包括虚拟设备、麦克风、信号笔和信息处理单元等。虚拟设备分别与麦克风、信号笔以及后台信息处理***的数据输入接口相连接。后台信息处理***包括数据传入接口、后台计算处理程序以及数据传出接口。3D音频场景呈现***包括头戴式显示器、若干个播放控制设备以及若干个播放设备。头戴式显示器和播放控制设备均与后台信息处理***的数据传出接口连接,播放设备与播放控制设备连接。
而且,用户需要事先在虚拟设备中选择需要配置3D音效的虚拟场景。
而且,所述的虚拟设备呈现的场景可与信号笔的操作关联互动。
而且,所述麦克风用于录入音频素材和输入指令信息。
而且,所述信号笔用于绘制可视化的运动轨迹或者与虚拟设备呈现的场景中的物品进行互动。
而且,进行信息输入时,需正确按照预定形式进行。
而且,对于错误输入信息,***可进行及时报错。
而且,数据传入接口兼容多种虚拟设备的数据输入。
而且,头戴式显示器与播放设备有相同的时间轴。
采用本实用新型提供的3D音频***,用户可以与虚拟现实***进行实时交互,并具有如下优势:仿真性、开放性、针对性、自主性和安全性。虚拟规则可与现实中的实际操作规范相结合,从而可以利用本***进行虚拟演练等。输入的不唯一性让***可作出不同的应答,实时生成的3D视频与3D音频相结合可为用户提供理想的虚拟环境。
附图说明
图1为本实用新型实施例的外界信息输入***示意图。
图2为本实用新型实施例的后台信息处理***示意图。
图3为本实用新型实施例的3D音频场景呈现***示意图。
图4为本实用新型实施例的***工作示意图。
具体实施方式
以下结合附图和实施例对本实用新型技术方案进行详细说明。
参见图1和图2,本实用新型的技术方案提供一种交互式3D音频***,包括三个子***:外界信息输入***、后息信号处理***和3D音频场景呈现***。三个子***的组成及之间的功能关系如下:外界信息录入***包括虚拟设备、麦克风和信号笔等,根据不同的需要用户可选择不同的录入方式。首先,虚拟设备播放用户选择的虚拟场景,这里的虚拟设备包括头盔式显示器和穿戴式设备等。接着,用户将有两种方式进行相关参数录入。第一种是使用信号笔根据虚拟场景绘制轨迹,轨迹在头盔显示器中实时生成并以图像显示;第二种是用户使用麦克风输入相关语音指令。多兼容端口增加输入方式的多样性,为用户提供更多选择并精简操作。多输入方式配合原定场景,在后续3D音频处理***进行不同方式的处理。
进一步地,用户在虚拟设备上选择虚拟场景,场景由视频播放器进行显示。
进一步地,在使用信号笔或麦克风时,用户应尽量减少无关动作,以确保录入信息为有用信息。
进一步地,信号笔以及其绘制轨迹也可在虚拟场景中以图像即时显示。
进一步地,麦克风输入的指令为事先设置好的简单、固定的指令。
具体实施时,虚拟设备可以采用无线设备。麦克风可使用微型麦克风安装在信号笔上,信号笔配有功能切换按钮。两种信息录入方式不可同时进行。
然后,外界信息录入***将录入的数据通过数据传入接口输入后台信息处理***。后台信息处理***包括数据传入接口、后台计算处理程序以及数据传出接口。后台计算处理程序对信号笔录入的参数进行分析,根据信号参数生成音频文件。同时,后台计算处理程序还设有与其他程序兼容端口,以便后续功能的扩充。
进一步地,数据传入接口兼容多种虚拟设备的数据输入。
进一步地,后台信息处理***连接音效数据库,可根据用户选择形成不同的音效。
进一步地,后台计算处理程序在录入数据全部传入后,进行相关音频文件的生成。
参见图3,在后台信息处理***中实时生成的音频文件通过数据传出接口进行输出,经过音频数据接收端口在3D音频场景呈现***中播放。3D音频场景呈现***同时播放3D音频文件和3D视频文件。3D音频文件用视频播放器进行播放。3D音频播放设备可选择面向对扬声器回放或者利用头相关传递函数面向耳机回放。
进一步地,面向扬声器回放时可选用多声道技术,其中包括若干个声卡设备和多个播放设备。
进一步地,每个声卡设备同时连接并管理若干个播放设备播放相应的音频。
进一步地,当有错误的输入信息时,可通过3D音频播放设备提示警告。
具体实施时,播放的3D视频文件与开始选择的虚拟场景视频文件相同,3D视频文件和3D音频文件具有相同的时间轴。
本实用新型仅提供装置结构的改进及保护。具体实施时,本领域技术人员可以自行根据现有技术选择外界信息输入、3D音频处理、3D音频输出等实现方式,本实用新型不予涉及。
本文中所描述的具体实施例仅仅是对本实用新型精神作举例说明。本实用新型所属技术领域的技术人员可以对所描述的具体实施例做各种各样的修改或补充或采用类似的方式替代,但并不会偏离本实用新型的精神或者超越所附权利要求书所定义的范围。

Claims (10)

1.一种互交式3D音频***,其特征在于:包括三个子***:外界信息输入***包括虚拟设备、麦克风和信号笔和信号处理单元;虚拟设备分别与麦克风、信号笔以及后台信息处理***的数据输入接口相连接;后台信息处理***包括数据传入接口、后台计算处理程序以及数据传出接口;3D音频场景呈现***包括头戴式显示器、若干个播放控制设备以及若干个播放设备;播放控制设备包括扬声器和声卡;头戴式显示器和播放控制设备均与后台信息处理***的数据传出接口连接,播放设备与播放控制设备连接。
2.根据权利要求1所述交互式3D音频***,其特征在于:进行信息输入时,需正确按照预定形式进行。
3.根据权利要求2所述交互式3D音频***,其特征在于:所述外界信息输入设备可兼容多种方式输入。
4.根据权利要求1或2或3所述交互式3D音频***,其特征在于:所述的虚拟设备呈现的场景可与信号笔的操作关联互动。
5.根据权利要求1或2或3所述交互式3D音频***,其特征在于:所述信号笔用于绘制可视化的运动轨迹或者与虚拟设备呈现的场景中的物品进行互动。
6.根据权利要求1或2或3所述交互式3D音频***,其特征在于:数据传入接口兼容多种虚拟设备的数据输入。
7.根据权利要求1或2或3所述交互式3D音频***,其特征在于:所述麦克风用于录入音频素材和输入指令信息。
8.根据权利要求1或2或3所述交互式3D音频***,其特征在于:所述3D音频处理***可模拟多种场景,并对输入的不同数据选择不同的推演形式,从而反应不同场景。
9.根据权利要求1或2或3所述交互式3D音频***,其特征在于:所述声卡为不同品牌的声卡设备。
10.根据权利要求1或2或3所述交互式3D音频***,其特征在于:所述播放设备为音响***输出和耳机输出两种方式,另外,音响和耳机设备都支持蓝牙传输。
CN201720171045.4U 2017-02-24 2017-02-24 一种交互式3d音频*** Expired - Fee Related CN206517592U (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201720171045.4U CN206517592U (zh) 2017-02-24 2017-02-24 一种交互式3d音频***

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201720171045.4U CN206517592U (zh) 2017-02-24 2017-02-24 一种交互式3d音频***

Publications (1)

Publication Number Publication Date
CN206517592U true CN206517592U (zh) 2017-09-22

Family

ID=59868013

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201720171045.4U Expired - Fee Related CN206517592U (zh) 2017-02-24 2017-02-24 一种交互式3d音频***

Country Status (1)

Country Link
CN (1) CN206517592U (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109002275A (zh) * 2018-07-03 2018-12-14 百度在线网络技术(北京)有限公司 Ar背景音频处理方法、装置、ar设备和可读存储介质

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109002275A (zh) * 2018-07-03 2018-12-14 百度在线网络技术(北京)有限公司 Ar背景音频处理方法、装置、ar设备和可读存储介质

Similar Documents

Publication Publication Date Title
JP7270820B2 (ja) 空間化オーディオを用いた複合現実システム
CN108141696A (zh) 用于空间音频调节的***和方法
CN110999328B (zh) 装置以及相关联的方法
US11395089B2 (en) Mixing audio based on a pose of a user
WO2017188637A1 (ko) Vr 기기에서의 이벤트 발생에 의한 메시지 표시방법 및 그 장치
US11806621B2 (en) Gaming with earpiece 3D audio
CN108269460B (zh) 一种电子屏幕的阅读方法、***及终端设备
Nagata et al. Virtual reality technologies in telecommunication services
US10536666B1 (en) Systems and methods for transmitting aggregated video data
CN206517592U (zh) 一种交互式3d音频***
CN115777203A (zh) 信息处理装置、输出控制方法和程序
US11337025B2 (en) Information processing apparatus and sound generation method
CN108668215A (zh) 全景音域***
CN208241895U (zh) 全景音域***
KR101505099B1 (ko) 3차원 음향 제공 시스템
CN102568535A (zh) 互动式声音录放装置
NL2030186B1 (en) Autostereoscopic display device presenting 3d-view and 3d-sound
US20230388598A1 (en) Systems and methods for enabling artificial reality commentary
JP2022173870A (ja) 鑑賞システム、鑑賞装置及びプログラム
CN115268621A (zh) 一种vr头戴装置及vr虚拟现实设备
CN115206337A (zh) 一种振动马达的控制方法、装置、存储介质和电子设备

Legal Events

Date Code Title Description
GR01 Patent grant
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20170922

CF01 Termination of patent right due to non-payment of annual fee