CN118077221A - 用于触发头部跟踪***在头戴式可穿戴装置上的对中的设备和方法 - Google Patents
用于触发头部跟踪***在头戴式可穿戴装置上的对中的设备和方法 Download PDFInfo
- Publication number
- CN118077221A CN118077221A CN202280068052.5A CN202280068052A CN118077221A CN 118077221 A CN118077221 A CN 118077221A CN 202280068052 A CN202280068052 A CN 202280068052A CN 118077221 A CN118077221 A CN 118077221A
- Authority
- CN
- China
- Prior art keywords
- headset
- user
- head
- relative orientation
- processor
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title description 18
- 230000033001 locomotion Effects 0.000 claims abstract description 67
- 230000004044 response Effects 0.000 claims abstract description 17
- 238000004590 computer program Methods 0.000 claims description 15
- 238000005259 measurement Methods 0.000 claims description 15
- 210000003128 head Anatomy 0.000 description 118
- 206010044565 Tremor Diseases 0.000 description 8
- 238000010586 diagram Methods 0.000 description 7
- 230000005484 gravity Effects 0.000 description 6
- 238000013519 translation Methods 0.000 description 5
- 230000001747 exhibiting effect Effects 0.000 description 4
- 230000008569 process Effects 0.000 description 3
- 230000008859 change Effects 0.000 description 2
- 238000004891 communication Methods 0.000 description 2
- 230000006870 function Effects 0.000 description 2
- 230000001575 pathological effect Effects 0.000 description 2
- 230000009467 reduction Effects 0.000 description 2
- 230000000087 stabilizing effect Effects 0.000 description 2
- 206010064950 Head titubation Diseases 0.000 description 1
- 230000001133 acceleration Effects 0.000 description 1
- 230000008901 benefit Effects 0.000 description 1
- 230000005540 biological transmission Effects 0.000 description 1
- 210000000613 ear canal Anatomy 0.000 description 1
- 210000005069 ears Anatomy 0.000 description 1
- 230000002708 enhancing effect Effects 0.000 description 1
- 230000004886 head movement Effects 0.000 description 1
- 230000003993 interaction Effects 0.000 description 1
- 239000000463 material Substances 0.000 description 1
- 230000004118 muscle contraction Effects 0.000 description 1
- 210000003928 nasal cavity Anatomy 0.000 description 1
- 238000009877 rendering Methods 0.000 description 1
- 238000012546 transfer Methods 0.000 description 1
- 230000007704 transition Effects 0.000 description 1
- 230000001960 triggered effect Effects 0.000 description 1
- 230000003313 weakening effect Effects 0.000 description 1
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04S—STEREOPHONIC SYSTEMS
- H04S7/00—Indicating arrangements; Control arrangements, e.g. balance control
- H04S7/30—Control circuits for electronic adaptation of the sound field
- H04S7/302—Electronic adaptation of stereophonic sound system to listener position or orientation
- H04S7/303—Tracking of listener position or orientation
- H04S7/304—For headphones
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
- H04R1/00—Details of transducers, loudspeakers or microphones
- H04R1/10—Earpieces; Attachments therefor ; Earphones; Monophonic headphones
- H04R1/1041—Mechanical or electronic switches, or control elements
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
- H04R1/00—Details of transducers, loudspeakers or microphones
- H04R1/10—Earpieces; Attachments therefor ; Earphones; Monophonic headphones
- H04R1/1008—Earpieces of the supra-aural or circum-aural type
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
- H04R5/00—Stereophonic arrangements
- H04R5/033—Headphones for stereophonic communication
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04S—STEREOPHONIC SYSTEMS
- H04S2420/00—Techniques used stereophonic systems covered by H04S but not provided for in its groups
- H04S2420/01—Enhancing the perception of the sound image or of the spatial distribution using head related transfer functions [HRTF's] or equivalents thereof, e.g. interaural time difference [ITD] or interaural level difference [ILD]
Landscapes
- Physics & Mathematics (AREA)
- Engineering & Computer Science (AREA)
- Acoustics & Sound (AREA)
- Signal Processing (AREA)
- Stereophonic System (AREA)
Abstract
提供一种包括耳机、开关、至少一个运动检测器和至少一个处理器的耳机组件。所述开关被配置来传输指示设立所述耳机的相对取向的命令的第一信号。所述至少一个运动检测器被配置来传输指示所述耳机相对于用户头部的移动的第二信号。所述至少一个处理器被编程来接收设立所述耳机的所述相对取向的第一信号,并且接收指示所述耳机正在相对于所述用户头部移动的所述第二信号。所述至少一个处理器被进一步编程来确定所述耳机处于稳定状态,并且响应于至少确定所述耳机处于所述稳定状态而设立所述耳机在定位在所述用户头部上时的所述相对取向。
Description
相关申请的交叉引用
本申请要求2021年10月8日提交的美国临时申请序列号63/253,792的权益,所述申请的公开内容据此全文以引用方式并入本文。
技术领域
本文所公开的方面总体上尤其涉及用于触发头部跟踪***在头戴式可穿戴装置上的对中的设备和方法。用于触发头部跟踪***的对中的设备和方法可对应于游戏耳机,所述游戏耳机跟踪用户头部运动以在与游戏装置接口连接时提供沉浸式音质。本文将更详细地论述这些方面和其他方面。
背景技术
头部跟踪***可包括耳机(或头戴式耳机),并且通常在用户收听音频时佩戴在用户头部上。头部跟踪***可跟踪用户头部的相对取向并且提供指示用户头部的相对取向的电输出。在这方面,耳机所回放的音频可基于用户头部的相对取向来调整真实或虚拟环绕声设置和/或主动降噪(ANC)属性。
发明内容
在至少一个实施方案中,提供一种包括耳机、开关、至少一个运动检测器和至少一个处理器的耳机组件。所述开关被配置来传输指示设立所述耳机的相对取向的命令的第一信号。所述至少一个运动检测器被配置来传输指示所述耳机相对于用户头部的移动的第二信号。所述至少一个处理器被编程来接收设立所述耳机的所述相对取向的第一信号,并且接收指示所述耳机正在相对于所述用户头部移动的所述第二信号。所述至少一个处理器被进一步编程来确定所述耳机处于稳定状态,并且响应于至少确定所述耳机处于所述稳定状态而设立所述耳机在定位在所述用户头部上时的所述相对取向。
在至少一个另一实施方案中,提供一种体现在非暂时性计算机可读介质中的被编程用于确定耳机的相对取向的计算机程序产品。所述计算机程序产品包括指令,所述指令可由至少一个处理器执行以用于:接收来自开关的指示设立所述耳机的相对取向的命令的第一信号以设立所述耳机的所述相对取向;以及接收指示所述耳机相对于用户头部的移动的第二信号。所述计算机程序产品包括指令,所述指令可由至少一个处理器执行以用于:确定所述耳机在相对于所述用户头部移动之后处于稳定状态;以及响应于至少确定所述耳机处于所述稳定状态而设立所述耳机在定位在所述用户头部上时的所述相对取向。
在另一实施方案中,所述耳机组件包括包括有耳机、至少一个运动检测器和至少一个处理器的耳机组件。所述至少一个运动检测器被配置来传输指示所述耳机的移动的第一信号。所述至少一个处理器被编程来确定所述耳机在用户头部上,并且在确定所述耳机在所述用户头部上之后响应于至少确定所述耳机在由所述用户佩戴时处于稳定状态,设立所述耳机在定位在所述用户头部上时的相对取向作为用于后续相对取向测量的参考系。
附图说明
所附权利要求中特别地指出本公开的实施方案。然而,通过参考以下结合附图的详细描述,各种实施方案的其他特征将变得更加明显并且将得到最好的理解,在附图中:
图1描绘根据一个实施方案的头部跟踪***;
图2描绘根据一个实施方案的用于对中头部跟踪***的一种方法;
图3描绘根据一个实施方案的用于对中头部跟踪***的另一种方法;并且
图4描绘表现出相对取向的设备的示例。
具体实施方式
根据需要,本文公开本发明的详细实施方案;然而,应理解所公开的实施方案仅仅是可按多种和替代形式体现的本发明的示例性实施方案。附图不一定是按比例的;一些特征可能被放大或最小化以示出特定部件的细节。因此,本文所公开的特定结构细节和功能细节不应解释为是限制性的,而是仅作为教导本领域技术人员以各种方式采用本发明的代表性基础。
应当认识到,如本文所公开的控制器可包括彼此协作以执行本文所公开的一个或多个操作的各种处理器、集成电路、存储器装置(例如,FLASH、随机存取存储器(RAM)、只读存储器(ROM)、电可编程只读存储器(EPROM)、电可擦除可编程只读存储器(EEPROM)或它们的其他合适变体)和软件。另外,所公开的此类控制器利用一个或多个处理器来执行体现在非暂时性计算机可读介质中的被编程来执行任何数量的所公开的功能的计算机程序。此外,本文所提供的控制器包括外壳和定位在所述外壳内的各种数量的处理器、集成电路和存储器装置((例如,FLASH、随机存取存储器(RAM)、只读存储器(ROM)、电可编程只读存储器(EPROM)、电可擦除可编程只读存储器(EEPROM))。所公开的一个或多个控制器还包括基于硬件的输入端和输出端,它们分别用于从如本文所论述的其他基于硬件的装置接收数据和向其传输数据。
本文所公开的方面总体上提供头部跟踪***,所述头部跟踪***经历重对中方法以确保头部跟踪***的相对取向的参考系(或中心点)与用户头部的取向相匹配。在一个示例中,这可在不需要用户与头部跟踪***之间的任何交互的情况下实现。头部跟踪***可与耳机结合使用,所述耳机例如游戏耳机或不用于游戏目的的耳机。已知一些头部跟踪***需要用户以某种方式(例如,选择游戏耳机上的开关)触发***以经历重对中事件。这种触发是手动的,并且导致用户在选择开关时看向别处或者将其头部的相应位置从其正常头部位置移开。在定位以及最终选择游戏耳机上的开关时头部的移动或倾斜可能导致头部跟踪***参考系与被认为是正确的用户参考系不匹配。本文所公开的方面总体上较简单,可不需要用户了解头部跟踪***。此外,本文所述的方面确保重对中事件具有将头部***参考系改变为用户头部的自然相对取向的高可能性。
在至少一个实施方案中,提供一种耳机组件。所述耳机组件包括至少一个运动检测器和至少一个处理器。至少一个运动检测器被配置来传输指示耳机远离稳定表面的移动、耳机处于运动中以及耳机正在由用户佩戴同时用户未移动的信号。至少一个处理器被编程来基于所述信号中的一个来确定耳机正在由用户佩戴并且用户处于静止不动状态。至少一个运动检测器被进一步配置来设立耳机定位在用户头部上时耳机的相对取向,并且在后续相对取向测量中基于相对取向来提供耳机的参考系。
在至少一个实施方案中,提供一种体现在非暂时性计算机可读介质中的被编程用于确定耳机的相对取向的计算机程序产品。计算机程序产品包括可由至少一个处理器执行以用于接收指示耳机远离稳定表面(例如,水平表面)的移动的第一信号的指令。计算机程序产品包括用于确定耳机在用户头部上处于静止不动状态的指令,以及用于设立耳机在定位在用户头部上时的相对取向以将所述相对取向设立为用于后续相对取向测量的参考系的指令。
在至少一个实施方案中,一种耳机组件包括开关、至少一个运动检测器和至少一个处理器。开关被配置来传输指示获得用于在耳机定位在用户头部上时用户头部的相对取向的测量的新参考系的命令的第一信号。至少一个运动检测器被配置来传输指示耳机正在由用户佩戴并且用户头部静止不动的第二信号。至少一个处理器被编程来接收来自开关的获得用于用户头部的相对取向的测量的新参考系的第一信号,并且接收指示耳机正在由用户佩戴并且用户头部静止不动的第二信号。至少一个处理器被进一步编程来确定耳机在用户头部上处于静止不动状态,并且设立耳机在定位在用户头部上时的相对取向,并且利用所述取向作为在耳机定位在处于静止不动状态的用户头部上时的参考系。
图1总体上描绘根据一个实施方案的耳机组件(或头部跟踪***)100。头部跟踪***100包括耳机101,所述耳机将来自音频源102的音频数据传输到聆听耳机101的用户104。在一个示例中,音频源102可以是虚拟音频源,所述虚拟音频源尤其包括被动地或交互地在三维中编码音频的过程。虚拟音频的回放可在耳机101上的立体声扬声器、环绕声扬声器或标准扬声器上体验。耳机101可无线连接到音频源102。在另一示例中,耳机101可硬连线耦接到音频源102。音频源102可被认为是三维音频源。在一个示例中,耳机101可以是与包括音频源102的游戏***107接口连接的游戏耳机。耳机101可通过蓝牙或其他合适的无线通信协议参与和游戏***107的双向无线通信。游戏***107(或平台)的各种非限制性示例可包括 等。应当认识到,游戏***107107还可包括使得用户104能够在其上玩任何游戏的任何膝上型电脑、移动装置或平板电脑。音频源102也可以是从其提供音频的膝上型电脑、移动装置或平板电脑。
耳机101包括第一耳罩106a和第二耳罩106b,每个耳罩均包括用于将来自音频源102的音频提供给用户104的扩音器(未示出)。应当认识到,耳机101还可包括传声器109,所述传声器用于向游戏***107进行无线传输,使得用户的音频可提供给参与玩视频游戏的其他玩家/用户。众所周知,游戏***107可通过互联网协议提供这种音频,以传送给在能够访问互联网的任何位置活跃在游戏***上的其他用户。耳罩106a、106b中的至少一者可包括定位在其上以检测耳机101的移动的任何数量的运动检测器108a至108n。传声器109还可将音频数据传输到移动装置、膝上型电脑或平板电脑中的任一者或多者,以用于不涉及游戏的任何其他目的。
一般来讲,耳机101可通过运动检测器108a至108n跟踪用户头部的水平移动和竖直移动,并且提供指示用户头部相对于游戏***107或音频***(未示出)的相对取向的输出。相对取向通常可定义为诸如例如线、平面或刚体的对象的取向、角定位、姿态或方向是描述线、平面或刚体如何安放在其所占空间中的一部分。相对取向也指将对象从参考安放位置移动到其当前安放位置所需的假想旋转。旋转可能不足以达到当前安放位置。可能需要添加假想平移。假想平移可称为对象的位置(或定位,或线性定位)。位置和取向定义对象在空间中安放的方式。上述假想旋转和假想平移可按任何次序发生,因为对象平移时对象的取向并不改变,并且对象旋转时对象位置也不改变。
耳机101还可包括至少一个陀螺仪109(在下文称为“陀螺仪109”)和至少一个加速度计111(在下文称为“加速度计111”)。陀螺仪109通常被配置来测量用户头部的取向和角速度。加速度计111被配置来测量线性加速度。在一个示例中,陀螺仪109和加速度计111可组合成六自由度惯性测量单元(IMU)。
然后,耳机101可基于佩戴着耳机101时用户头部的位置来调整由游戏***107的音频源102提供的音频的回放。在这方面,游戏耳机所回放的音频可基于用户头部的位置来调整真实或虚拟环绕声设置和/或主动降噪(ANC)属性。应当认识到,虽然耳机101在本文中是参考游戏***107公开的,但耳机101可用于游戏之外的许多不同应用。例如,本文所公开的耳机101可例如涉及渲染三维音频的任何耳机100,并且可用于电影、专业音频混音、会议***等。
一般来讲,***106需要用户104移动他/她的头部时头部的取向以及头部相对于正在渲染的3D音频源(例如,音频源102)的定位改变时头部的取向。当头部的取向改变时,音频源102处理一组新的滤波器以便准确地渲染3D音频源。这通常意味着例如需要使用一组新的不同头部相关传递函数(HRTF)来对音频源102所提供的音频材料进行滤波。HRTF通常对应于描述耳朵如何从空间中的点接收声音的响应。在收听者接收到声音时,头部、耳朵、耳道的大小和形状、头部的密度、鼻腔和口腔的大小和形状均变换声音并影响感知声音的方式,从而增强一些频率并削弱其他频率。例如,如果虚拟源(或虚拟音频源)位于用户前方并且用户将他/她的头部向右转动90度,则所述虚拟源将等同于在用户左侧90度的虚拟音频源。虚拟音频源在左耳的声音可比右耳大。
如上所述,用户头部的相对取向和/或位置通常是任何三维音频渲染***以及游戏所关注的。例如,期望在参与游戏时用户头部移动的情况下提供高质量环绕声。环绕声通常提供方向意识,使得用户104基于用户所参与的游戏了解他或她周围在发生什么。由于用户头部可能水平和/或竖直移动,因此以环绕声格式回放音频需要考虑用户头部的位置和相对取向,并且基于用户头部的位置来调整环绕声特性。例如,倘若用户头部向左转动,则耳机101需要调整环绕声的左右声道,以考虑到用户左耳现在定位在用户头部的后方并且用户右耳定位在用户头部的中心的事实。类似地,如果用户头部向右转动,则耳机101需要调整环绕声的左右声道,以考虑到用户右耳现在定位在用户头部的前方并且用户左耳定位在用户头部的后方的事实。一般来讲,耳机101需要设立参考系(或中心点)以便计算或确定用户头部在极轴上的新相对取向。需要具有与用户头部相对于虚拟三维音频声源的相对取向相对应的信息可使得耳机101能够为给定虚拟源重建或选择正确的HRTF。
至少一个处理器112(在下文称为“处理器112”)可操作地耦接到运动检测器108a至108n。处理器112通常被配置来在执行重对中操作时,基于从运动检测器108a至108n接收的信号来检测耳机101相对于重力矢量(或沿轴110)的相对定位。一般来讲,相对取向可对应于执行测量时对象相对于重力矢量(沿轴110)的取向。这可被认为是中心的参考系。重对中的取向可被认为是耳机101的当前取向减去耳机101的相对取向。
如上所述,重对中操作通常对应于用户104(即,处理器112)设立耳机101的相对取向参考系。相对取向或“中心”可用例如四元数来表示,并且可表示为[1,0,0,0](针对[w,x,y,z,]),其中w对应于围绕x、y、z轴的旋转。处理器112被进一步配置来基于来自运动检测器108a至108n的信号来确定耳机101是否定位在水平表面(例如,桌子)上。通常,处理器112可确定耳机101是否定位在稳定(或静止)表面上。例如,处理器112可监测来自运动检测器108a至108n的输出,并且至少基于耳机101相对于轴110的绝对取向(例如,重力矢量)来确定耳机101是定位在桌子上还是佩戴在用户头部上。绝对取向通常定义为相对于“世界”坐标的位置。绝对取向对应于对象相对于其重力矢量和磁北的取向。应当认识到,耳机101的相对取向可有所不同或不同于耳机101的绝对取向,因为耳机101在具有相对取向时可能因用户头部的定位因人而异而并不处于真正的绝对取向。处理器112还被配置来检测或确定用户104在将耳机101安放在用户头部上时引起的移动事件以及耳机101一旦安放在用户头部上的相对稳定性。
一般来讲,运动检测器108a至108n可向处理器112提供指示用户头部的相对取向的信息。处理器112可通过执行与例如四元数旋转和/或通过例如欧几里得x、y、z平移的平移相关的操作来针对运动检测器108a至108n所提供的数据进行补偿。在这种情况下,运动检测器108a至108n可定位在耳机101的耳罩上或耳机101的头带上。在一个示例中,可不需要平移,因为在大量用例中,用户头部的相对取向和定位可为所关注的,而非用户头部的绝对定位和取向。可需要绝对定位和取向的耳机***的一个示例是其中用户可在虚拟空间中四处走动的体积虚拟现实(VR)体验。
例如,当用户将耳机101从表面提起时,运动检测器108a至108n将指示耳机101处于运动中的信号传输到耳机101的处理器112。一旦处理器112检测到耳机101正在由用户104佩戴,处理器112就可监测来自运动检测器108a至108n的信号以确定耳机101是否已在用户头部上稳定(例如,低运动水平)达预定时间长度“n”。低运动水平(或耳机稳定性)通常对应于用户由于不自主的非病理头部震颤而引起的移动。换句话讲,用户没有进行任何自主移动。
响应于耳机101稳定达预定时间长度,处理器112然后可将头部跟踪***100的参考系(或中心点)重取向到用户头部的当前相对取向。应当认识到,中心点(或参考系)可能并非完全对中(例如,表示为[1,0,0,0]的四元数)。中心点用作用于后续相对取向测量的参考系。如上所述,相对取向可对应于执行测量时对象相对于重力矢量(沿轴110)的取向。类似地,这可被认为是中心的参考系。同样如上所述,重对中的取向可被认为是耳机101的当前取向减去耳机101的相对取向。因此,在这方面,取向可作为四元数(即,“qn”)来测量。在四元数中,如果用作参考系的相对取向为“q0”,并且新的相对取向测量为“q1”,则q1的“重对中”版本通常定义为:q1-q0。
然而,在关于设立中心点(或相对取向)所呈现的场景中,这种中心点可足以提供关于用户104移动他/她的头部时耳机101的定位的位置读数,以使得能够在游戏事件期间调整环绕声音频属性。
在另一实施方案中,耳机101可包括定位在其上以用于触发重对中操作的开关(或按钮)120。例如,按钮120可定位在耳罩106a或106b中的任一者上。处理器112可以可操作地耦接到按钮120。为了执行重对中操作,用户104可选择按钮120。响应于用户104选择按钮120,处理器112触发定时器以等待用户104返回到自然头部相对取向。在定时器到期时,处理器112等待耳机101稳定。当处理器112等待耳机101处于稳定状态时,如果处理器112检测到运动,则处理器112生成指示正在发生移动的音频提示并将其传输给用户。音频提示充当用户在重对中操作期间保持他/她的头部静止的指示器。当处理器112基于从运动检测器108a至108n传输的信号检测到用户静止时,微处理器然后可存储(或保存)耳机101的相对取向作为用于后续相对取向测量的参考系(或中心点)。处理器112然后可传输重对中过程完成的另一音频提示。
图2描绘根据一个实施方案的用于对中头部跟踪***100的一种方法200(或状态图200)。
在状态202下,耳机101的处理器112基于来自运动检测器108a至108n的输出来确定耳机101是否在表面(例如,不包括用户头部的任何表面)上并且静止不动。一般来讲,“On_Surface_State”通常对应于耳机101静止不动并且定位在平坦表面上。“Not_On_Surface_Event”通常对应于耳机101开始被检测为在平坦表面(或耳机101在未定位在用户头部上时可位于的其他表面)上静止不动。如上所述,处理器112可监测来自运动检测器108a至108n的输出,并且至少基于耳机101相对于轴110的取向(例如,重力矢量)来确定耳机101是定位在桌子上还是佩戴在用户头部上。如果处理器112确定耳机101不在表面上,则图200移动到状态204。如果处理器112确定耳机101在平坦表面上静止,则方法200移回到操作202。
在状态204中,方法200处于“Wait_for_Tremor_State”。在此状态下,处理器112可能在等待指示耳机101正在由用户佩戴的一个或多个信号。震颤可定义为由不自主的非病理肌肉收缩引起的微小移动。例如,处理器112等待耳机101安放在用户头部上,所述安放引起耳机101的震颤。在这种情况下,多个微小移动可指示用户104已将耳机101安放在他/她的头部上。例如,形成IMU的陀螺仪109和加速度计111被配置来提供指示耳机101是否正在由用户佩戴的信息。运动检测器108a至108n通常将指示此类微小移动(或微小震颤)的信号传输到处理器112以确定此状况。在耳机101已从稳定表面移动之后,处理器112触发与处理器112等待检测到耳机101安放在他/她的头部中的预定时间长度相对应的定时器。如果第一定时器仍在运行并且未检测到移动,则图200保持处于状态204。当检测到与定位在用户头部上的耳机101一致的震颤时(例如,处理器112检测到微小震颤),则图200移动到状态206。如果定时器到期并且处理器112未接收到指示微小移动的信号(或者用户尚未将耳机101安放在他/她的头部上),则处理器112保持处于状态204,直到检测到微小移动为止。
在状态206中,处理器112等待基于来自运动检测器108a至108n的信号而从震颤状态转换到稳定状态。稳定状态通常对应于耳机101在定位在用户头部上时不再表现出任何移动(即,用户头部也不再表现出任何移动)。倘若处理器122确定耳机101正在移动(例如,用户头部仍在移动),则处理器112向用户传输通知用户他/她的头部正在移动而非静止的音频提示。在处理器122确定耳机101仍在由用户佩戴并且耳机101已进入稳定状态时,则图移动到状态208。
在状态208中,处理器122基于运动检测器108a至108n所提供的信号而存储或保存耳机101的取向信息和位置信息作为中心点(或耳机101的参考系)。如上所述,运动检测器108a至108n可通过四元数来报告耳机101的相对取向(或中心点)及因此用户头部的相对取向。在这种情况下,处理器122指定耳机101在定位在用户头部上时的相对取向作为用于后续相对取向测量的参考系。例如,耳机101可将耳机101的后续相对取向测量与指定的相对取向进行比较,以确定用户头部的位置并且基于用户头部的位置来调整音频回放。在处理器122指定或设立相对取向之后,耳机101然后可向用户传输指示重对中方法200完成的另一音频提示。
方法200通常表示其中耳机101位于平坦表面上(例如,On_Surface_State)的用例。然后用户拿起耳机101,从而触发Not_On_Surface_Event。此时,***100等待用户将耳机101安放在他/她的头部上(例如,Wait_For_Tremor_State)。一旦***100检测到正在佩戴耳机101,就触发“On_Head_Event”并且***100等待用户不再移动他/她的头部。如果用户移动,则***100渲染向用户指示已检测到移动并且此状况阻止重对中的“RecenteringAudio Cue”。一旦用户保持静止,就检测到Stability_Event并且***100执行重对中(例如,Recentered_State)。
图3描绘根据一个实施方案的用于对中头部跟踪***100的另一种方法300(或状态图300)。
在状态302中,用户104在佩戴着耳机时选择耳机101上的按钮120来发起重对中操作。“Recenter_Button_Event”对应于用户选择耳机101上的按钮120。然后,图300移动到状态304。在状态304中,处理器112触发运行达预定时间量(例如,3秒)的第一定时器。第一定时器通常可对应于使得用户能够达到自然头部取向的延迟。应当认识到,在此状态下并且虽然参考自然头部取向,但这可能不一定意味着用户将他/她的头部定位在完全对中的点,而只是意味着用户将他/她的头部安放在用户通常将他/她的头部定位在的位置。
在状态306中,处理器112监测来自运动检测器108a至108n的信号以确定耳机101何时达到稳定状态。例如,处理器112触发运行达预定时间量的第二定时器,以等待耳机101达到稳定状态(例如,用户头部静止不动)。在确定耳机101已在预定时间量内达到稳定状态时,处理器112则保存或存储耳机101的当前相对取向作为新的参考系。在这种情况下,处理器122指定耳机101在定位在用户头部上时的相对取向(或中心定位)作为用于后续相对取向测量的参考系。例如,耳机101可将耳机101的后续相对取向测量与指定的相对取向进行比较,以确定用户头部的位置并且基于用户头部的位置来调整音频回放。在处理器122指定或设立相对取向之后,耳机101然后可向用户传输指示重对中方法200完成的音频提示。
当在状态306中时,如果处理器112确定用户头部仍在移动而第二定时器已到期,则处理器112传输通知用户他/她的头部仍在移动并且他/她的头部需要在存储或指定相对取向之前完全停止的音频提示。
图4描绘表现出相对取向的设备400的示例。所述设备总体上被示出为沿三个轴(例如,x、y、z)定位的水壶。图4还展示水壶通常可围绕(1,0,1)处的轴以15度旋转。在这方面,水壶可具有以15度旋转的相对取向(1,0,1)。如图所示,水壶的相对取向并非完全对中在三个轴上,并且具有轻微角旋转。如果在图4中用耳机替换水壶,则耳机101也可总体上围绕(1,0,1)处的轴以15度旋转。然而,出于本公开的目的,水壶(或定位在用户头部上的耳机101)可在经历方法200和300中的任一种之后设立其相对取向。
虽然上文描述了示例性实施方案,但并不意图这些实施方案描述本发明的所有可能形式。实际上,在说明书中使用的措词是用于描述而非限制,并且应理解,可在不脱离本发明的精神和范围的情况下做出各种改变。另外,各种实现实施方案的特征可以结合起来以形成本发明的另外的实施方案。
Claims (20)
1.一种耳机组件,其包括:
耳机;
开关,所述开关被配置来传输指示设立所述耳机的相对取向的命令的第一信号;
至少一个运动检测器,所述至少一个运动检测器被配置来传输指示所述耳机相对于用户头部的移动的第二信号;以及
至少一个处理器,所述至少一个处理器被编程来:
接收来自所述开关的设立所述耳机的所述相对取向的第一信号;
接收指示所述耳机正在相对于所述用户头部移动的所述第二信号;
确定所述耳机在相对于所述用户头部移动之后处于稳定状态;并且
响应于至少确定所述耳机处于所述稳定状态而设立所述耳机在定位在所述用户头部上时的所述相对取向。
2.如权利要求1所述的耳机组件,其中所述至少一个处理器被进一步编程来在接收到来自所述开关的所述第一信号之后触发延迟以使得用户能够达到自然头部取向。
3.如权利要求2所述的耳机组件,其中所述至少一个处理器被进一步编程来执行第一定时器以确定在所述第一定时器到期之前所述耳机是否处于所述稳定状态。
4.如权利要求3所述的耳机组件,其中所述耳机被编程来响应于所述第一定时器到期并且检测到所述耳机正在移动而向所述用户传输保持静止的警报。
5.如权利要求4所述的耳机组件,其中所述警报对应于通知所述用户保持静止的音频提示。
6.如权利要求3所述的耳机组件,其中所述至少一个处理器被进一步编程来响应于所述第一定时器到期并且所述耳机处于所述稳定状态而设立所述耳机在定位在所述用户头部上时的所述相对取向。
7.如权利要求1所述的耳机组件,其中所述至少一个处理器被进一步编程来响应于至少确定所述耳机处于所述稳定状态而向所述用户传输警报,该警报通知所述用户所述耳机的所述相对位置已被设立。
8.如权利要求1所述的耳机组件,其中所述至少一个运动检测器定位在所述耳机上。
9.如权利要求1所述的耳机组件,其中所述开关定位在所述耳机上。
10.一种体现在非暂时性计算机可读介质中的被编程用于确定耳机的相对取向的计算机程序产品,所述计算机程序产品包括指令并且能够由至少一个处理器执行以用于:
接收来自开关的指示设立所述耳机的相对取向的命令的第一信号以设立所述耳机的所述相对取向;
接收指示所述耳机相对于用户头部的移动的第二信号;
确定所述耳机在相对于所述用户头部移动之后处于稳定状态;以及
响应于至少确定所述耳机处于所述稳定状态而设立所述耳机在定位在所述用户头部上时的所述相对取向。
11.如权利要求10所述的计算机程序产品,其还包括在接收到所述第一信号之后触发延迟以使得所述用户能够达到自然头部取向。
12.如权利要求11所述的计算机程序产品,其还包括执行第一定时器以确定在所述第一定时器到期之前所述耳机是否处于所述稳定状态。
13.如权利要求12所述的计算机程序产品,其还包括响应于所述第一定时器到期并且检测到所述耳机正在移动而向所述用户传输保持静止的警报。
14.如权利要求13所述的计算机程序产品,其中所述警报对应于通知所述用户保持静止的音频提示。
15.如权利要求13所述的计算机程序产品,其还包括
响应于所述第一定时器到期并且所述耳机处于所述稳定状态而设立所述耳机在定位在所述用户头部上时的所述相对取向。
16.如权利要求10所述的计算机程序产品,其还包括
响应于至少确定所述耳机处于所述稳定状态而向所述用户传输通知所述用户已设立所述耳机的所述相对取向的警报。
17.一种耳机组件,其包括:
耳机;
至少一个运动检测器,所述至少一个运动检测器被配置来传输指示所述耳机的移动的第一信号;以及
至少一个处理器,所述至少一个处理器被编程来:
确定所述耳机是否在用户头部上;并且
在所述确定所述耳机在所述用户头部上之后,响应于至少确定所述耳机在由所述用户佩戴时处于稳定状态,设立所述耳机在定位在所述用户头部上时的相对取向作为用于后续相对取向测量的参考系。
18.如权利要求17所述的耳机组件,其中所述至少一个处理器被进一步编程来确定在设立所述用户头部的所述相对取向之前所述耳机已从定位在所述头部之外的表面移动。
19.如权利要求17所述的耳机组件,其中所述至少一个处理器被进一步编程来响应于确定所述耳机在由所述用户佩戴时未处于所述稳定状态而向所述用户传输保持静止的警报。
20.如权利要求17所述的耳机组件,其中所述至少一个运动检测器定位在所述耳机上。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US202163253792P | 2021-10-08 | 2021-10-08 | |
US63/253,792 | 2021-10-08 | ||
PCT/US2022/046109 WO2023059912A1 (en) | 2021-10-08 | 2022-10-07 | Apparatus and method for triggering a centering of a head-tracking system on a head-worn wearable device |
Publications (1)
Publication Number | Publication Date |
---|---|
CN118077221A true CN118077221A (zh) | 2024-05-24 |
Family
ID=84246038
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202280068052.5A Pending CN118077221A (zh) | 2021-10-08 | 2022-10-07 | 用于触发头部跟踪***在头戴式可穿戴装置上的对中的设备和方法 |
Country Status (2)
Country | Link |
---|---|
CN (1) | CN118077221A (zh) |
WO (1) | WO2023059912A1 (zh) |
Family Cites Families (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
EP2645750A1 (en) * | 2012-03-30 | 2013-10-02 | GN Store Nord A/S | A hearing device with an inertial measurement unit |
US9326058B2 (en) * | 2012-09-26 | 2016-04-26 | Sony Corporation | Control method of mobile terminal apparatus |
DE102015219572A1 (de) * | 2015-10-09 | 2017-04-13 | Sivantos Pte. Ltd. | Verfahren zum Betrieb einer Hörvorrichtung und Hörvorrichtung |
-
2022
- 2022-10-07 CN CN202280068052.5A patent/CN118077221A/zh active Pending
- 2022-10-07 WO PCT/US2022/046109 patent/WO2023059912A1/en active Application Filing
Also Published As
Publication number | Publication date |
---|---|
WO2023059912A1 (en) | 2023-04-13 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US10966045B2 (en) | Sound localization for user in motion | |
JP6799141B2 (ja) | 空間化オーディオを用いた複合現実システム | |
JP2022531067A (ja) | 多数のヘッドセット間の音声空間化および強化 | |
EP3485346A1 (en) | Virtual, augmented, and mixed reality | |
CN109691141B (zh) | 空间化音频***以及渲染空间化音频的方法 | |
US10834520B2 (en) | Switching binaural sound from head movements | |
CN112335264B (zh) | 用于呈现用于向用户回放的音频信号的装置和方法 | |
CN101662720A (zh) | 声音处理装置、声像定位位置调节方法及视频处理装置 | |
US11806621B2 (en) | Gaming with earpiece 3D audio | |
CN109791436B (zh) | 用于提供虚拟场景的装置及方法 | |
CN118077221A (zh) | 用于触发头部跟踪***在头戴式可穿戴装置上的对中的设备和方法 | |
US20230045721A1 (en) | Audio signal processing method, electronic apparatus, and storage medium | |
JP2024019911A (ja) | ヘッドマウントディスプレイおよび画像表示方法 | |
JP2023546839A (ja) | 視聴覚レンダリング装置およびその動作方法 | |
CN108574925A (zh) | 虚拟听觉环境中控制音频信号输出的方法和装置 | |
CN114710726B (zh) | 智能穿戴设备的中心定位方法、设备及存储介质 | |
WO2024134736A1 (ja) | ヘッドマウントディスプレイ装置および立体音響の制御方法 | |
US10327073B1 (en) | Externalized audio modulated by respiration rate | |
WO2023226161A1 (zh) | 音源位置确定方法、设备及存储介质 | |
WO2023286513A1 (ja) | 音声生成装置、音声生成方法およびそのプログラム | |
KR20240088517A (ko) | 공간 음향 처리 방법 및 이를 위한 장치 | |
CN112558302A (zh) | 一种用于确定眼镜姿态的智能眼镜及其信号处理方法 | |
TW202320556A (zh) | 基於用戶電信號的音頻調整 | |
CN117348721A (zh) | 虚拟现实数据处理方法、控制器及虚拟现实设备 | |
Nash | Mobile SoundAR: Your Phone on Your Head |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication |