KR20220076479A - 조직 트랜듀서를 위한 조정 메커니즘 - Google Patents
조직 트랜듀서를 위한 조정 메커니즘 Download PDFInfo
- Publication number
- KR20220076479A KR20220076479A KR1020227013444A KR20227013444A KR20220076479A KR 20220076479 A KR20220076479 A KR 20220076479A KR 1020227013444 A KR1020227013444 A KR 1020227013444A KR 20227013444 A KR20227013444 A KR 20227013444A KR 20220076479 A KR20220076479 A KR 20220076479A
- Authority
- KR
- South Korea
- Prior art keywords
- headset
- transducer
- user
- carriage
- adjustable
- Prior art date
Links
- 230000007246 mechanism Effects 0.000 title description 5
- 210000001519 tissue Anatomy 0.000 claims description 45
- 210000000845 cartilage Anatomy 0.000 claims description 43
- 210000000988 bone and bone Anatomy 0.000 claims description 34
- 230000004044 response Effects 0.000 claims description 20
- 241000746998 Tragus Species 0.000 claims description 17
- 210000003437 trachea Anatomy 0.000 claims 1
- 230000006870 function Effects 0.000 description 32
- 210000003128 head Anatomy 0.000 description 29
- 238000012546 transfer Methods 0.000 description 28
- 230000003287 optical effect Effects 0.000 description 25
- 238000000034 method Methods 0.000 description 16
- 210000000613 ear canal Anatomy 0.000 description 13
- 238000013507 mapping Methods 0.000 description 13
- 230000033001 locomotion Effects 0.000 description 12
- 230000008569 process Effects 0.000 description 10
- 230000009471 action Effects 0.000 description 8
- 210000001508 eye Anatomy 0.000 description 8
- 238000004458 analytical method Methods 0.000 description 6
- 238000004590 computer program Methods 0.000 description 6
- 238000003384 imaging method Methods 0.000 description 6
- 230000004075 alteration Effects 0.000 description 5
- 230000008859 change Effects 0.000 description 5
- 238000005259 measurement Methods 0.000 description 5
- 230000003190 augmentative effect Effects 0.000 description 4
- 238000010586 diagram Methods 0.000 description 4
- 210000005069 ears Anatomy 0.000 description 4
- 230000004807 localization Effects 0.000 description 4
- 210000003625 skull Anatomy 0.000 description 4
- 238000005516 engineering process Methods 0.000 description 3
- 238000012545 processing Methods 0.000 description 3
- 230000005236 sound signal Effects 0.000 description 3
- 230000003044 adaptive effect Effects 0.000 description 2
- 210000003484 anatomy Anatomy 0.000 description 2
- 230000005540 biological transmission Effects 0.000 description 2
- 238000004891 communication Methods 0.000 description 2
- 238000001514 detection method Methods 0.000 description 2
- 238000006073 displacement reaction Methods 0.000 description 2
- 239000007943 implant Substances 0.000 description 2
- 230000001404 mediated effect Effects 0.000 description 2
- 238000001228 spectrum Methods 0.000 description 2
- 210000003454 tympanic membrane Anatomy 0.000 description 2
- 230000000007 visual effect Effects 0.000 description 2
- 241000226585 Antennaria plantaginifolia Species 0.000 description 1
- 230000001133 acceleration Effects 0.000 description 1
- 230000003321 amplification Effects 0.000 description 1
- 239000006117 anti-reflective coating Substances 0.000 description 1
- 230000000712 assembly Effects 0.000 description 1
- 238000000429 assembly Methods 0.000 description 1
- 201000009310 astigmatism Diseases 0.000 description 1
- 238000000576 coating method Methods 0.000 description 1
- 210000003477 cochlea Anatomy 0.000 description 1
- 230000006835 compression Effects 0.000 description 1
- 238000007906 compression Methods 0.000 description 1
- 238000012937 correction Methods 0.000 description 1
- 238000010168 coupling process Methods 0.000 description 1
- 238000005859 coupling reaction Methods 0.000 description 1
- 230000003111 delayed effect Effects 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 210000000883 ear external Anatomy 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 239000011521 glass Substances 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 238000010801 machine learning Methods 0.000 description 1
- 238000007620 mathematical function Methods 0.000 description 1
- 239000011159 matrix material Substances 0.000 description 1
- 230000005012 migration Effects 0.000 description 1
- 238000013508 migration Methods 0.000 description 1
- 238000010295 mobile communication Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000006855 networking Effects 0.000 description 1
- 238000003199 nucleic acid amplification method Methods 0.000 description 1
- 230000002093 peripheral effect Effects 0.000 description 1
- 238000003825 pressing Methods 0.000 description 1
- 230000000750 progressive effect Effects 0.000 description 1
- 210000001747 pupil Anatomy 0.000 description 1
- 230000035945 sensitivity Effects 0.000 description 1
- 239000000126 substance Substances 0.000 description 1
- 230000026683 transduction Effects 0.000 description 1
- 238000010361 transduction Methods 0.000 description 1
- 230000001131 transforming effect Effects 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
- H04R1/00—Details of transducers, loudspeakers or microphones
- H04R1/10—Earpieces; Attachments therefor ; Earphones; Monophonic headphones
- H04R1/1041—Mechanical or electronic switches, or control elements
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
- G02B27/017—Head mounted
- G02B27/0176—Head mounted characterised by mechanical features
-
- G—PHYSICS
- G02—OPTICS
- G02C—SPECTACLES; SUNGLASSES OR GOGGLES INSOFAR AS THEY HAVE THE SAME FEATURES AS SPECTACLES; CONTACT LENSES
- G02C11/00—Non-optical adjuncts; Attachment thereof
- G02C11/06—Hearing aids
-
- G—PHYSICS
- G02—OPTICS
- G02C—SPECTACLES; SUNGLASSES OR GOGGLES INSOFAR AS THEY HAVE THE SAME FEATURES AS SPECTACLES; CONTACT LENSES
- G02C11/00—Non-optical adjuncts; Attachment thereof
- G02C11/10—Electronic devices other than hearing aids
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
- H04R1/00—Details of transducers, loudspeakers or microphones
- H04R1/10—Earpieces; Attachments therefor ; Earphones; Monophonic headphones
- H04R1/105—Earpiece supports, e.g. ear hooks
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
- H04R1/00—Details of transducers, loudspeakers or microphones
- H04R1/10—Earpieces; Attachments therefor ; Earphones; Monophonic headphones
- H04R1/1058—Manufacture or assembly
- H04R1/1066—Constructional aspects of the interconnection between earpiece and earpiece support
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
- H04R5/00—Stereophonic arrangements
- H04R5/033—Headphones for stereophonic communication
- H04R5/0335—Earpiece support, e.g. headbands or neckrests
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
- G02B27/017—Head mounted
- G02B2027/0178—Eyeglass type
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
- H04R2460/00—Details of hearing devices, i.e. of ear- or headphones covered by H04R1/10 or H04R5/033 but not provided for in any of their subgroups, or of hearing aids covered by H04R25/00 but not provided for in any of its subgroups
- H04R2460/13—Hearing devices using bone conduction transducers
Landscapes
- Physics & Mathematics (AREA)
- Acoustics & Sound (AREA)
- Engineering & Computer Science (AREA)
- Health & Medical Sciences (AREA)
- Signal Processing (AREA)
- Otolaryngology (AREA)
- General Physics & Mathematics (AREA)
- Optics & Photonics (AREA)
- General Health & Medical Sciences (AREA)
- Ophthalmology & Optometry (AREA)
- Manufacturing & Machinery (AREA)
- Details Of Audible-Bandwidth Transducers (AREA)
- Headphones And Earphones (AREA)
Abstract
헤드셋은 헤드셋의 템플 부분을 따라 이동하는 캐리지 상에 조직 트랜듀서를 포함한다. 캐리지는 사용자의 귀의 이륜 시기부에 접촉하도록 구성된다. 이륜 시기부는 기준 포인트를 제공하며, 캐리지가 이륜 시기부와 접촉할 때, 조직 트랜듀서는 타겟 영역에 위치되도록 구성된다. 사용자의 귀의 이륜 시기부에 대하여 조직 트랜듀서의 고정된 위치를 유지함으로써, 조직 트랜듀서는 상이한 머리 형태들 및 크기들을 가진 사용자들을 위해서도, 정확하게 위치될 수 있다.
Description
본 개시는 일반적으로 인공 현실 시스템들에 관한 것이며, 보다 구체적으로 헤드셋들을 위한 오디오 트랜듀서들에 관한 것이다.
인공 현실 헤드셋들(가상 현실(VR), 증강 현실(AR), 및 혼합 현실(MR)을 포함한)과 같은, 사용자에게 오디오 콘텐트를 제공하는 헤드셋들은 음향 트랜듀서들을 사용하여 사운드를 제공한다. 종래에, 음향 트랜듀서들은 일반적으로 상이한 머리 형태들, 머리 크기들 등을 가진 사용자들에게 불구하고 헤드셋들 상에서 고정된 위치들에 있다. 따라서, 상이한 사용자들 및/또는 상이한 시간에(그러나 상이한 위치에 있는) 헤드셋을 착용한 동일한 사용자 간의 음향 트랜듀서의 상대적 위치에서의 변화들은 사용자들이 일관된 오디오 경험을 갖는 것을 막을 수 있다.
헤드셋은 헤드셋의 템플 부분을 따라 이동하는(translate) 캐리지 상에 오디오 트랜듀서를 포함한다. 상기 캐리지는 사용자의 귀의 이륜 시기부(helix root)에 접촉하도록 구성된다. 이륜 시기부는 기준 포인트를 제공하며, 캐리지가 이륜 시기부와 접촉할 때, 오디오 트랜듀서는 타겟 영역에 위치되도록 구성된다.
몇몇 실시예들에서, 헤드셋은 뒤쪽 방향으로 캐리지를 바이어싱하는 적어도 하나의 스프링을 포함한다. 사용자가 사용자의 머리 상에 헤드셋을 위치시킬 때, 캐리지는 사용자의 귀의 이륜 시기부에 맞물린다. 사용자가 뒤쪽 방향으로 헤드셋을 움직임에 따라(예컨대, 사용자의 눈들 및 코를 향해 헤드셋의 전방 부분을 움직이는), 캐리지에 인가된 이륜 시기부로부터의 접촉력은 캐리지를 바이어싱하는 스프링 힘을 극복하며 캐리지가 헤드셋의 템플 부분을 따라 앞쪽 방향으로 이동하게 한다. 스프링 힘은 캐리지가 이륜 시기부와 계속해서 접촉하게 한다.
몇몇 실시예들에서, 헤드셋은 헤드셋의 템플(temple)을 따라 캐리지를 구동하는 모터를 포함한다. 사용자의 머리 상에 헤드셋을 위치시킴으로써, 사용자는 뒤쪽 방향으로 이동하도록 캐리지에 지시할 수 있다. 캐리지는 캐리지가 사용자의 이륜 시기부에 접촉할 때까지 뒤쪽 방향으로 이동할 수 있다.
몇몇 실시예들에서, 조정 가능한 트랜듀서 어셈블리는 헤드셋의 사용자에게 오디오 콘텐트를 제공하도록 구성된 조직 트랜듀서(tissue transducer)를 포함한다. 조정 가능한 트랜듀서 어셈블리는 템플을 따라 이동하도록 구성된 캐리지를 추가로 포함할 수 있다. 상기 캐리지는 조직 트랜듀서에 결합되며 인덱싱 피처를 포함할 수 있다. 상기 인덱싱 피처는 인덱싱 피처가 사용자의 귀의 이륜 시기부에 맞닿아 배치되고 조직 트랜듀서가 조직 전도(tissue conduction)를 통해 오디오 콘텐트를 타겟 영역으로 제공하게 배치되도록 템플을 따라 캐리지와 함께 이동한다.
몇몇 실시예들에서, 템플의 힌지형 단부로부터 멀어지는 방향으로 뒤쪽 위치에서 캐리지를 바이어싱하도록 구성된 적어도 하나의 스프링을 추가로 포함하고 있을 수 있다.
몇몇 실시예들에서, 조직 트랜듀서는 연골 전도 트랜듀서를 포함할 수 있으며, 상기 타겟 영역은 사용자의 귀의 이주일 수 있다.
몇몇 실시예들에서, 템플을 따라 캐리지를 구동하도록 구성된 모터를 추가로 포함하고 있을 수 있다.
몇몇 실시예들에서, 상기 인덱싱 피처는 캐리지에 회전 가능하게 결합될 수 있다.
몇몇 실시예들에서, 상기 조직 트랜듀서는 적어도 부분적으로 캐리지 내에 위치될 수 있다.
몇몇 실시예들에서, 상기 조직 트랜듀서는 힌지를 통해 인덱싱 피처에 결합될 수 있다.
몇몇 실시예들에서, 입력에 응답하여, 상기 조직 트랜듀서는 연골 전도 위치에서 골 전도 위치로, 또는 골 전도 위치에서 연골 전도 위치로 움직이도록 구성될 수 있다.
몇몇 실시예들에서, 헤드셋은 템플을 포함한 프레임을 포함한다. 헤드셋은 템플에 결합된 조정 가능한 트랜듀서 어셈블리를 포함한다. 상기 조정 가능한 트랜듀서 어셈블리는 헤드셋의 사용자에게 오디오 콘텐트를 제공하도록 구성된 조직 트랜듀서 및 헤드셋의 템플을 따라 이동하도록 구성된 캐리지를 포함한다. 상기 캐리지는 조직 트랜듀서에 결합되며 인덱싱 피처를 포함하고, 상기 인덱싱 피처는 인덱싱 피처가 사용자의 귀의 이륜 시기부에 맞닿아 위치되며 조직 트랜듀서가 조직 전도를 통해 오디오 콘텐트를 타겟 영역으로 제공하도록 위치되도록 템플을 따라 캐리지와 함께 이동한다.
몇몇 실시예들에서, 뒤쪽 위치에서 캐리지를 바이어싱하도록 구성된 적어도 하나의 스프링을 추가로 포함하고 있을 수 있다.
몇몇 실시예들에서, 상기 조직 트랜듀서는 연골 전도 트랜듀서를 포함할 수 있으며, 상기 타겟 영역은 사용자의 귀의 이주일 수 있다.
몇몇 실시예들에서, 템플을 따라 캐리지를 구동하도록 구성된 모터를 추가로 포함하고 있을 수 있다.
몇몇 실시예들에서, 상기 모터는 사용자로부터의 입력에 기초하여 조직 트랜듀서를 배치하도록 구성될 수 있다.
몇몇 실시예들에서, 상기 인덱싱 피처는 캐리지에 회전 가능하게 결합될 수 있다.
몇몇 실시예들에서, 상기 조직 트랜듀서는 적어도 부분적으로 상기 캐리지 내에 위치될 수 있다.
몇몇 실시예들에서, 상기 조직 트랜듀서는 힌지를 통해 인덱싱 피처에 결합될 수 있다.
몇몇 실시예들에서, 사용자로부터의 입력에 응답하여, 상기 조직 트랜듀서는 연골 전도 위치에서 골 전도 위치로 움직이도록 구성될 수 있다.
몇몇 실시예들에서, 헤드셋은 템플을 포함한 프레임, 템플을 따라 이동하도록 구성된 캐리지, 및 상기 캐리지에 결합된 연골 전도 트랜듀서를 포함한다. 상기 연골 전도 트랜듀서는 사용자의 이주에 접촉하도록 구성될 수 있다.
몇몇 실시예들에서, 사용자의 이륜 시기부에 접촉하도록 구성된 인덱싱 피처를 추가로 포함하고 있을 수 있다.
몇몇 실시예들에서, 상기 인덱싱 피처와 고정될 수 있는 연골 전도 트랜듀서 간에 거리가 있을 수 있다.
몇몇 실시예들에서, 상기 연골 전도 트랜듀서는 힌지를 통해 인덱싱 피처에 결합될 수 있다.
도 1은 하나 이상의 실시예들에 따른, 안경 디바이스로서 구현된 헤드셋의 투시도이다.
도 2a는 하나 이상의 실시예들에 따른, 뒤쪽 위치에서 조정 가능한 트랜듀서 어셈블리를 가진 헤드셋의 측면도이다.
도 2b는 사용자의 머리 상에서 동작 위치에 있는 도 2a의 헤드셋의 측면도이다.
도 2c는 관절구 위치에서 골 전도를 위해 구성된 트랜듀서를 가진 동작 위치에서의 도 2a의 헤드셋의 측면도를 예시한다.
도 3a는 하나 이상의 실시예들에 따라, 캐리지 내에서 및 뒤쪽 위치에 위치된 트랜듀서를 가진 조정 가능한 트랜듀서 어셈블리를 가진 헤드셋의 측면도를 예시한다.
도 3b는 사용자의 머리 상에서 동작 위치에 있는 도 3a의 헤드셋의 측면도이다.
도 3c는 골 전도를 위해 구성된 트랜듀서를 가진 동작 위치에서의 도 3a의 헤드셋의 측면도를 예시한다.
도 4는 하나 이상의 실시예들에 따른, 오디오 시스템의 블록도이다.
도 5는 하나 이상의 실시예들에 따른, 조정 가능한 트랜듀서 어셈블리를 사용하여 오디오 콘텐트를 제공하기 위한 프로세스를 예시한 흐름도이다.
도 6은 하나 이상의 실시예들에 따른, 헤드셋을 포함하는 시스템이다.
도면들은 단지 예시의 목적들을 위해 다양한 실시예들을 묘사한다. 이 기술분야의 숙련자는 다음의 논의로부터 본 출원에서 예시된 구조들 및 방법들의 대안적인 실시예들이 본 출원에서 설명된 원리들로부터 벗어나지 않고 이용될 수 있다는 것을 쉽게 인식할 것이다.
도 2a는 하나 이상의 실시예들에 따른, 뒤쪽 위치에서 조정 가능한 트랜듀서 어셈블리를 가진 헤드셋의 측면도이다.
도 2b는 사용자의 머리 상에서 동작 위치에 있는 도 2a의 헤드셋의 측면도이다.
도 2c는 관절구 위치에서 골 전도를 위해 구성된 트랜듀서를 가진 동작 위치에서의 도 2a의 헤드셋의 측면도를 예시한다.
도 3a는 하나 이상의 실시예들에 따라, 캐리지 내에서 및 뒤쪽 위치에 위치된 트랜듀서를 가진 조정 가능한 트랜듀서 어셈블리를 가진 헤드셋의 측면도를 예시한다.
도 3b는 사용자의 머리 상에서 동작 위치에 있는 도 3a의 헤드셋의 측면도이다.
도 3c는 골 전도를 위해 구성된 트랜듀서를 가진 동작 위치에서의 도 3a의 헤드셋의 측면도를 예시한다.
도 4는 하나 이상의 실시예들에 따른, 오디오 시스템의 블록도이다.
도 5는 하나 이상의 실시예들에 따른, 조정 가능한 트랜듀서 어셈블리를 사용하여 오디오 콘텐트를 제공하기 위한 프로세스를 예시한 흐름도이다.
도 6은 하나 이상의 실시예들에 따른, 헤드셋을 포함하는 시스템이다.
도면들은 단지 예시의 목적들을 위해 다양한 실시예들을 묘사한다. 이 기술분야의 숙련자는 다음의 논의로부터 본 출원에서 예시된 구조들 및 방법들의 대안적인 실시예들이 본 출원에서 설명된 원리들로부터 벗어나지 않고 이용될 수 있다는 것을 쉽게 인식할 것이다.
헤드셋은 헤드셋의 템플 부분을 따라 이동하는 캐리지 상에 오디오 트랜듀서를 포함한다. 캐리지는 사용자의 귀의 이륜 시기부에 접촉하도록 구성된다. 이륜 시기부는 기준 포인트를 제공하며, 상기 캐리지가 이륜 시기부와 접촉할 때, 오디오 트랜듀서가 타겟 영역에 위치되도록 구성된다. 사용자의 귀의 이주에 접촉하도록 구성된 연골 전도 트랜듀서와 같은, 몇몇 오디오 트랜듀서들에 대해, 오디오 트랜듀서의 배치 시 작은 차이들에도 오디오 트랜듀서에 의해 사용자에게 제공된 사운드에서 상당한 손실을 야기할 수 있다. 그러나, 헤드셋 상에서의 위치에 대하여 대조적으로, 사용자의 귀의 이륜 시기부에 대하여 오디오 트랜듀서의 고정된 위치를 유지함으로써(이주와 접촉하여 오디오 트랜듀서를 배치하는 것과 같은), 오디오 트랜듀서는 상이한 머리 형태들 및 크기들을 가진 사용자들에 대해서도, 정확하게 배치될 수 있다.
몇몇 실시예들에서, 헤드셋은 뒤쪽 방향으로 캐리지를 바이어싱하는 스프링을 포함한다. 사용자가 사용자의 머리 상에 헤드셋을 위치시킬 때, 캐리지는 사용자의 귀의 이륜 시기부에 맞물린다. 사용자가 뒤쪽 방향으로 헤드셋을 움직임에 따라(예컨대, 사용자의 눈들 및 코를 향해 헤드셋의 전방 부분을 움직이는), 캐리지에 인가된 이륜 시기부로부터의 접촉력은 캐리지를 바이어싱하는 스프링 힘을 극복하며 캐리지가 헤드셋의 템플 부분을 따라 앞쪽 방향으로 이동하게 한다. 스프링 힘은 캐리지를 계속해서 이륜 시기부와 접촉하게 한다.
몇몇 실시예들에서, 헤드셋은 헤드셋의 템플을 따라 캐리지를 이끄는 모터를 포함한다. 사용자의 머리 상에 헤드셋을 위치시킴으로써, 사용자는 뒤쪽 방향으로 이동하도록 캐리지에 지시할 수 있다. 캐리지는 캐리지가 사용자의 이륜 시기부에 접촉할 때까지 뒤쪽 방향으로 이동할 수 있다. 사용자는 이동하는 것을 멈추도록 캐리지에 지시할 수 있거나, 또는 헤드셋은 캐리지가 사용자의 이륜 시기부에 접촉하였음을 검출할 수 있으며, 모터는 캐리지를 뒤쪽으로 이끄는 것을 멈출 수 있다.
본 발명의 실시예들은 인공 현실 시스템을 포함하거나 또는 그것과 함께 구현될 수 있다. 인공 현실은 사용자로의 프리젠테이션 이전에 몇몇 방식으로 조정되어 온 현실의 형태이며, 이것은 예컨대, 가상 현실(VR), 증강 현실(AR), 혼합 현실(MR), 하이브리드 현실, 또는 그것의 몇몇 조합 및/또는 파생물을 포함할 수 있다. 인공 현실 콘텐트는 완전히 생성된 콘텐트 또는 캡처된(예컨대, 실-세계) 콘텐트와 조합된 생성 콘텐트를 포함할 수 있다. 인공 현실 콘텐트는 비디오, 오디오, 햅틱 피드백, 또는 그것의 몇몇 조합을 포함할 수 있으며, 그 중 임의의 것은 단일 채널로 또는 다수의 채널들로(뷰어에게 3-차원 효과를 생성하는 스테레오 비디오와 같은) 제공될 수 있다. 부가적으로, 몇몇 실시예들에서, 인공 현실은 또한 인공 현실에서 콘텐트를 생성하기 위해 사용되며 및/또는 그 외 인공 현실에서 사용되는, 애플리케이션들, 제품들, 액세서리들, 서비스들, 또는 그것의 몇몇 조합과 연관될 수 있다. 인공 현실 콘텐트를 제공하는 인공 현실 시스템은, 호스트 컴퓨터 시스템에 연결된 착용 가능한 디바이스(예컨대, 헤드셋), 독립형 착용 가능한 디바이스(예컨대, 헤드셋), 이동 디바이스 또는 컴퓨팅 시스템, 또는 하나 이상의 뷰어들에게 인공 현실 콘텐트를 제공할 수 있는 임의의 다른 하드웨어 플랫폼을 포함한, 다양한 플랫폼들 상에서 구현될 수 있다.
도 1은 하나 이상의 실시예들에 따른, 안경 디바이스로서 구현된 헤드셋(100)의 투시도이다. 몇몇 실시예들에서, 안경 디바이스는 근안 디스플레이(NED)이다. 일반적으로, 헤드셋(100)은 콘텐트(예컨대, 미디어 콘텐트)가 디스플레이 어셈블리 및/또는 오디오 시스템을 사용하여 제공되도록 사용자의 얼굴 상에 착용될 수 있다. 그러나, 헤드셋(100)은 또한 미디어 콘텐트가 상이한 방식으로 사용자에게 제공되도록 사용될 수 있다. 헤드셋(100)에 의해 제공된 미디어 콘텐트의 예들은 하나 이상의 이미지들, 비디오, 오디오, 또는 그것의 몇몇 조합을 포함한다. 헤드셋(100)은 프레임(110)을 포함하며, 다른 구성요소들 중에서, 하나 이상의 디스플레이 요소들(120)을 포함한 디스플레이 어셈블리, 깊이 카메라 어셈블리(DCA), 오디오 시스템, 및 위치 센서(190)를 포함할 수 있다. 도 1은 헤드셋(100) 상에서 예시적인 위치들에서의 헤드셋(100)의 구성요소들을 예시하지만, 구성요소들은 헤드셋(100) 상에서의 다른 곳에, 헤드셋(100)과 쌍을 이룬 주변 디바이스 상에, 또는 그것의 몇몇 조합으로 위치될 수 있다. 유사하게, 도 1에 도시된 것보다 더 많거나 또는 더 적은 구성요소들이 헤드셋(100) 상에 있을 수 있다.
프레임(110)은 헤드셋(100)의 다른 구성요소들을 유지한다. 프레임(110)은 하나 이상의 디스플레이 요소들(120)을 유지하는 전방 부분 및 사용자의 머리에 부착할 엔드 피스들(예컨대, 템플들)을 포함한다. 프레임(110)의 전방 부분은 사용자의 코의 최상부를 브리징한다. 템플들의 힌지형 단부(또한 전방 단부로서 불리우는)는 프레임(110)의 전방 부분에 템플들을 연결한다. 템플들은 또한 사용자의 귀 뒤에 말리는 일 부분(또한 곡선 단부 또는 후방 단부로서 불리우는)을 포함할 수 있다.
하나 이상의 디스플레이 요소들(120)은 헤드셋(100)을 착용한 사용자에게 광을 제공한다. 예시된 대로, 헤드셋은 사용자의 각각의 눈에 대한 디스플레이 요소(120)를 포함한다. 몇몇 실시예들에서, 디스플레이 요소(120)는 헤드셋(100)의 아이박스로 제공되는 이미지 광을 생성한다. 아이박스는 헤드셋(100)을 착용하는 동안 사용자의 눈이 차지하는 공간에서의 위치이다. 예를 들어, 디스플레이 요소(120)는 도파관 디스플레이일 수 있다. 도파관 디스플레이는 광원(예컨대, 2-차원 소스, 하나 이상의 라인 소스들, 하나 이상의 포인트 소스들 등) 및 하나 이상의 도파관들을 포함한다. 광원으로부터의 광은 헤드셋(100)의 아이박스에 동공 복제가 있도록 하는 방식으로 광을 출력하는 하나 이상의 도파관들에 인-커플링된다. 하나 이상의 도파관들로부터의 광의 인-커플링 및/또는 아웃커플링은 하나 이상의 회절 격자들을 사용하여 행해질 수 있다. 몇몇 실시예들에서, 도파관 디스플레이는 그것이 하나 이상의 도파관들에 인-커플링될 때 광원으로부터 광을 스캔하는 스캐닝 요소(예컨대, 도파관, 미러 등)를 포함한다. 몇몇 실시예들에서, 디스플레이 요소들(120) 중 하나 또는 둘 모두는 불투명하며 헤드셋(100) 주위에서의 국소 영역으로부터 광을 투과하지 않는다는 것을 주의하자. 국소 영역은 헤드셋(100)을 둘러싼 영역이다. 예를 들어, 국소 영역은 헤드셋(100)을 착용한 사용자가 안에 있는 룸일 수 있거나, 또는 헤드셋(100)을 착용한 사용자가 바깥쪽에 있을 수 있으며 국소 영역은 바깥쪽 영역이다. 이러한 맥락에서, 헤드셋(100)은 VR 콘텐트를 생성한다. 대안적으로, 몇몇 실시예들에서, 디스플레이 요소들(120) 중 하나 또는 둘 모두는 적어도 부분적으로 투명하며, 따라서 국소 영역으로부터의 광은 AR 및/또는 MR 콘텐트를 생성하기 위해 하나 이상의 디스플레이 요소들로부터의 광과 조합될 수 있다.
몇몇 실시예들에서, 디스플레이 요소(120)는 이미지 광을 생성하지 않으며, 대신에 국소 영역에서 아이박스로 광을 투과하는 렌즈이다. 디스플레이 요소들(120) 중 하나 또는 둘 모두는 사용자의 시력에서의 결점들을 보정하도록 돕기 위한 보정(비-처방) 또는 처방 렌즈(예컨대, 단초점, 이중 초점 및 3초점, 또는 누진)가 없는 렌즈일 수 있다. 몇몇 실시예들에서, 디스플레이 요소(120)는 태양으로부터 사용자의 눈들을 보호하기 위해 편광되고 및/또는 착색될 수 있다.
몇몇 실시예들에서, 디스플레이 요소(120)는 부가적인 광학 블록(도시되지 않음)을 포함할 수 있다는 것을 주의하자. 광학 블록은 디스플레이 요소(120)로부터 아이박스로 광을 향하게 하는 하나 이상의 광학 요소들(예컨대, 렌즈, 프레넬(Fresnel) 렌즈 등)을 포함할 수 있다. 광학 블록은, 예컨대 이미지 콘텐트의 일부 또는 모두에서의 수차들을 보정하고, 이미지의 일부 또는 모두를 확대하거나, 또는 그것의 몇몇 조합일 수 있다.
DCA는 헤드셋(100)을 둘러싼 국소 영역의 일 부분에 대한 깊이 정보를 결정한다. DCA는 하나 이상의 이미징 디바이스들(130) 및 DCA 제어기(도 1에 도시되지 않음)를 포함하며, 또한 조명기(140)를 포함할 수 있다. 몇몇 실시예들에서, 조명기(140)는 광으로 국소 영역의 일 부분을 비춘다. 광은 예컨대, 적외선(IR)에서의 구조화 광(예컨대, 점 패턴, 바들 등), 비과 시간 동안의 IR 플래시 등일 수 있다. 몇몇 실시예들에서, 하나 이상의 이미징 디바이스들(130)은 조명기(140)로부터의 광을 포함하는 국소 영역의 부분의 이미지들을 캡처한다. 예시된 대로, 도 1은 단일 조명기(140) 및 두 개의 이미징 디바이스들(130)을 도시한다. 대안적인 실시예들에서, 조명기(140)는 없으며 적어도 두 개의 이미징 디바이스들(130)이 있다.
DCA 제어기는 캡처된 이미지들 및 하나 이상의 깊이 결정 기술들을 사용하여 국소 영역의 부분에 대한 깊이 정보를 계산한다. 깊이 결정 기술은, 예컨대, 직접적 비과 시간(ToF) 깊이 감지, 간접적 ToF 깊이 감지, 구조화 광, 수동형 스테레오 분석, 능동형 스테레오 분석(조명기(140)로부터의 광에 의해 씬에 부가된 텍스처를 사용한다), 씬의 깊이를 결정하기 위한 몇몇 다른 기술, 또는 그것의 몇몇 조합일 수 있다.
오디오 시스템은 오디오 콘텐트를 제공한다. 오디오 시스템은 트랜듀서 어레이, 센서 어레이, 및 오디오 제어기(150)를 포함한다. 그러나, 다른 실시예들에서, 오디오 시스템은 상이한 및/또는 부가적인 구성요소들을 포함할 수 있다. 유사하게, 몇몇 경우들에서, 오디오 시스템의 구성요소들을 참조하여 설명된 기능은 여기에서 설명되는 것과 상이한 방식으로 구성요소들 간에 분포될 수 있다. 예를 들어, 제어기의 기능들 중 일부 또는 모두는 원격 서버에 의해 수행될 수 있다.
트랜듀서 어레이는 사운드를 사용자에게 제공한다. 트랜듀서 어레이는 복수의 트랜듀서들을 포함한다. 트랜듀서는 스피커 또는 조직 트랜듀서(160)(예컨대, 골 전도 트랜듀서 또는 연골 전도 트랜듀서)일 수 있다. 몇몇 실시예들에서, 각각의 귀에 대한 개개의 스피커들 대신에, 헤드셋(100)은 제공된 오디오 콘텐트의 방향성을 개선하기 위해 프레임(110)으로 통합된 다수의 스피커들을 포함한 스피커 어레이를 포함한다. 조직 트랜듀서(160)는 사용자의 머리에 결합하며 사운드를 생성하기 위해 사용자의 조직(예컨대, 뼈 또는 연골)을 직접 진동시킨다. 트랜듀서들의 수 및/또는 위치들은 도 1에 도시된 것과 상이할 수 있다.
조정 가능한 트랜듀서 어셈블리(170)는 사용자의 머리의 크기 및 형태에 관계없이 조직 형질 도입에 적합한 위치에 조직 트랜듀서(160)를 배치하도록 구성된다. 조정 가능한 트랜듀서 어셈블리(170)는 프레임(110)의 템플들을 따라 앞뒤로 이동하도록 구성된다. 조정 가능한 트랜듀서 어셈블리(170)는 스피커, 연골 트랜듀서, 또는 골 트랜듀서와 같은, 트랜듀서를 포함한다. 조정 가능한 트랜듀서 어셈블리(170)는 스프링에 의해서와 같이, 뒤쪽 위치에서 바이어싱될 수 있다. 사용자가 헤드셋(100)을 끼는 것에 응답하여, 조정 가능한 트랜듀서 어셈블리(170)는 사용자의 귀의 일 부분에 접촉하도록 구성된다. 귀와 조정 가능한 트랜듀서 어셈블리(170) 간의 접촉은 조정 가능한 트랜듀서 어셈블리(170)가 템플들과 디스플레이 요소(120)를 포함한 프레임(110)의 일 부분 사이에서 힌지를 향해 템플들을 따라 앞쪽 방향으로 이동하게 할 수 있다.
몇몇 실시예들에서, 조정 가능한 트랜듀서 어셈블리(170)는 모터를 포함할 수 있다. 조정 가능한 트랜듀서 어셈블리(170)는 처음에 앞쪽 위치에 위치될 수 있다. 앞쪽 위치에서, 조정 가능한 트랜듀서 어셈블리(170)는 템플들의 곡선 단부를 향해 뒤쪽 방향으로 이동할 수 있다. 헤드셋(100)을 낀 후, 사용자는 버튼을 누르고, 명령을 말하거나, 또는 그 외 템플들의 곡선 단부를 향해 뒤쪽으로 조정 가능한 트랜듀서 어셈블리(170)를 이끌도록 모터에 지시할 수 있다. 일단 조정 가능한 트랜듀서 어셈블리(170)가 사용자의 귀에 접촉하면, 조정 가능한 트랜듀서 어셈블리(170)는 조정 가능한 트랜듀서 어셈블리(170)를 구동하는 것을 멈추도록 모터에 지시할 수 있으며, 조정 가능한 트랜듀서 어셈블리(170)는 사용자의 귀와 접촉한 채로 있을 수 있다.
몇몇 실시예들에서, 조정 가능한 트랜듀서 어셈블리(170)는 조정 가능한 트랜듀서 어셈블리(170)를 구동하는 것을 멈추도록 모터에 지시하기 위해 폐쇄-루프 피드백 시스템을 사용할 수 있다. 이러한 실시예들에서, 힘 센서(또는 터치 센서)는 이륜 시기부 상에서 캐리지로부터의 프리로딩을 모니터링하기 위해 캐리지 내에 위치될 수 있다. 캐리지가 이륜 시기부에 도달함에 따라, 폐쇄-루프 피드백 시스템은 힘 센서로부터 감지된 신호에서의 변화들에 대해 끊임없이 모니터링할 수 있다. 캐리지가 이륜 시기부에 도달하는 것에 응답하여, 폐쇄-루프 피드백 시스템은 감지된 힘 신호에서의 변화를 검출하며, 폐쇄-루프 피드백 시스템은 캐리지가 이륜 시기부와 접촉한다고 결정할 수 있다. 몇몇 실시예들에서, 폐쇄-루프 피드백 시스템은 캐리지로부터 사용자의 이륜 시기부로의 프리로딩이 타겟 프리로딩 값 내에 있음을 보장할 것이다.
조정 가능한 트랜듀서 어셈블리(170)는 사용자의 귀의 위치에 관하여 타겟 영역에 그것의 트랜듀서를 배치한다. 예를 들어, 조정 가능한 트랜듀서 어셈블리(170)는 사용자의 귀의 이주와 접촉하여 연골 전도 트랜듀서를 배치할 수 있거나, 또는 조정 가능한 트랜듀서 어셈블리(170)는 이주의 앞쪽 위치에서 사용자의 얼굴에 맞닿아 골 전도 트랜듀서를 배치할 수 있거나, 또는 조정 가능한 트랜듀서 어셈블리(170)는 사용자의 귀의 외이도 가까이에 또는 그것 내에 스피커를 배치할 수 있다.
센서 어레이는 헤드셋(100)의 국소 영역 내에서 사운드들을 검출한다. 센서 어레이는 복수의 음향 센서들(180)을 포함한다. 음향 센서(180)는 국소 영역(예컨대, 룸)에서 하나 이상의 사운드 소스들로부터 방출된 사운드들을 캡처한다. 각각의 음향 센서는 사운드를 검출하며 검출된 사운드를 전자 포맷(아날로그 또는 디지털)으로 변환하도록 구성된다. 음향 센서들(180)은 음향 파 센서들, 마이크로폰들, 사운드 트랜듀서들, 또는 사운드들을 검출하기에 적합한 유사한 센서들일 수 있다.
몇몇 실시예들에서, 하나 이상의 음향 센서들(180)은 각각의 귀의 외이도(예컨대, 양이 마이크로폰들로서 동작하는)에 위치될 수 있다. 몇몇 실시예들에서, 음향 센서들(180)은 헤드셋(100)의 외부 표면상에 위치되고, 조정 가능한 트랜듀서 어셈블리(170) 상에 또는 그것에 위치되고, 헤드셋(100)의 내부 표면상에 위치되고, 헤드셋(100)으로부터 분리되거나(예컨대, 몇몇 다른 디바이스의 부분), 또는 그것의 몇몇 조합일 수 있다. 음향 센서들(180)의 수 및/또는 위치들은 도 1에 도시된 것과 상이할 수 있다. 예를 들어, 음향 검출 위치들의 수는 수집된 오디오 정보의 양 및 정보의 민감도 및/또는 정확도를 증가시키기 위해 증가될 수 있다. 음향 검출 위치들은 마이크로폰이 헤드셋(100)을 착용한 사용자를 둘러싼 광범위한 방향들에서 사운드들을 검출할 수 있도록 배향될 수 있다.
오디오 제어기(150)는 센서 어레이에 의해 검출된 사운드들을 기술하는 센서 어레이로부터의 정보를 프로세싱한다. 오디오 제어기(150)는 프로세서 및 컴퓨터-판독 가능한 저장 매체를 포함할 수 있다. 오디오 제어기(150)는 도착 방향(DOA) 추정치들을 생성하고, 음향 전달 함수들(예컨대, 어레이 전달 함수들 및/또는 머리-관련 전달 함수들)을 생성하고, 사운드 소스들의 위치를 추적하고, 사운드 소스들의 방향으로 빔들을 형성하고, 사운드 소스들을 분류하고, 스피커들에 대한 사운드 필터들을 생성하거나, 또는 그것의 몇몇 조합을 하도록 구성될 수 있다. 오디오 제어기(150)는 사용자에 대한 사운드들을 생성하기 위해 조정 가능한 트랜듀서 어셈블리(170)로 지시들을 제공한다.
위치 센서(190)는 헤드셋(100)의 모션에 응답하여 하나 이상의 측정 신호들을 생성한다. 위치 센서(190)는 헤드셋(100)의 프레임(110)의 일 부분 상에 위치될 수 있다. 위치 센서(190)는 관성 측정 유닛(IMU)을 포함할 수 있다. 위치 센서(190)의 예들은: 하나 이상의 가속도계들, 하나 이상의 자이로스코프들, 하나 이상의 자력계들, 모션을 검출하는 또 다른 적절한 유형의 센서, IMU의 에러 정정을 위해 사용된 센서의 유형, 또는 그것의 몇몇 조합을 포함한다. 위치 센서(190)는 IMU의 외부, IMU의 내부, 또는 그것의 몇몇 조합으로 위치될 수 있다.
몇몇 실시예들에서, 헤드셋(100)은 헤드셋(100)의 위치 및 국소 영역의 모델의 업데이팅을 위해 동시적 국소화 및 매핑(SLAM)을 제공할 수 있다. 예를 들어, 헤드셋(100)은 컬러 이미지 데이터를 생성하는 수동형 카메라 어셈블리(PCA)를 포함할 수 있다. PCA는 국소 영역의 일부 또는 모두의 이미지들을 캡처하는 하나 이상의 RGB 카메라들을 포함할 수 있다. 몇몇 실시예들에서, DCA의 이미징 디바이스들(130)의 일부 또는 모두는 또한 PCA로서 기능할 수 있다. PCA에 의해 캡처된 이미지들 및 DCA에 의해 결정된 깊이 정보는 국소 영역의 파라미터들을 결정하고, 국소 영역의 모델을 생성하고, 국소 영역의 모델을 업데이트하거나, 또는 그것의 몇몇 조합을 하기 위해 사용될 수 있다. 더욱이, 위치 센서(190)는 룸 내에서 헤드셋(100)의 위치(예컨대, 자리 및 자세)를 추적한다. 구성요소들에 관한 부가적인 세부사항들은 도 6에 대하여 설명된다.
도 2a는 하나 이상의 실시예들에 따른, 뒤쪽 위치에서 조정 가능한 트랜듀서 어셈블리(205)를 가진 헤드셋(200)의 측면도이다. 헤드셋(200)은 도 1의 헤드셋(100)의 실시예일 수 있다. 조정 가능한 트랜듀서 어셈블리(205)는 도 1의 조정 가능한 트랜듀서 어셈블리(170)의 실시예일 수 있다. 조정 가능한 트랜듀서 어셈블리(205)는 뒤쪽 위치에 대해 뒤쪽 방향(x-방향)으로 바이어싱된다. 뒤쪽 위치에서, 조정 가능한 트랜듀서 어셈블리(205)는 앞쪽 방향(음의 x-방향)으로 이동할 수 있다. 몇몇 실시예들에서, 뒤쪽 위치는 조정 가능한 트랜듀서 어셈블리(205)가 양의 x-방향으로 이동할 수 있는 가장 먼 위치이다. 조정 가능한 트랜듀서 어셈블리(205)는 조정 가능한 트랜듀서 어셈블리(205) 상에서 외부 힘(예컨대, 접촉력, 자기력 등)이 없는 뒤쪽 위치에 남아있도록 구성된다.
조정 가능한 트랜듀서 어셈블리(205)는 헤드셋(200)의 템플(225)을 따라 이동하도록 구성된 캐리지(210)를 포함한다. 몇몇 실시예들에서, 캐리지(210)는 템플(225)을 외접할 수 있다. 다른 실시예들에서, 캐리지(210)의 일 부분은 적어도 부분적으로 템플(225) 내에 위치될 수 있다.
조정 가능한 트랜듀서 어셈블리는 사용자의 귀에 대하여 트랜듀서(220)를 배향시키도록 구성된 인덱싱 피처(215)를 포함한다. 인덱싱 피처(215)는 사용자의 귀(235)의 이륜 시기부(230)에 접촉하도록 구성된다. 이륜 시기부(230)는 이륜(240)이 사용자의 머리와 만나는 귀(235)의 부분이다. 인덱싱 피처(215)는 몸체(245) 및 플랜지(250)를 포함할 수 있다. 플랜지(250)는 몸체(245)로부터 뒤쪽 방향으로 연장될 수 있다. 플랜지(250)는 이륜 시기부(230)를 접촉하도록 구성되는 인덱싱 피처(215)의 부분일 수 있다. 몸체(245) 및 플랜지(250)는 단일 모놀리식 구성요소일 수 있다. 몇몇 실시예들에서, 몸체(245) 및 플랜지(250)는 파스너에 의해 함께 결합된 별개의 구성요소일 수 있다. 몸체(245)는 캐리지(210)에 회전 가능하게 결합될 수 있다. 몸체(245)는 xy-평면에서 회전하도록 구성될 수 있다. 몸체(245)는 피봇(255)에서 캐리지(210)에 결합될 수 있다. 몇몇 실시예들에서, 몸체(245)는 피봇(255) 및 몸체(245)와 캐리지(210) 간의 마찰력을 극복하는 피봇(255) 주위의 토크에 응답하여 피봇(255)에서 캐리지(210)에 대하여 회전할 수 있다. 다른 실시예들에서, 피봇(255)은 몸체(245)가 캐리지(210)에 대하여 회전하는 것을 막는 브레이크 메커니즘을 포함할 수 있으며, 사용자는 원한다면 인덱싱 피처(215)를 회전시키기 위해, 피봇(255)에 대고 손가락을 누름으로써와 같이, 브레이크 메커니즘을 해체할 수 있다.
트랜듀서(220)는 인덱싱 피처(215)에 결합될 수 있다. 트랜듀서(220)는 연골 전도 트랜듀서 또는 골 전도 트랜듀서와 같은, 조직 트랜듀서일 수 있다. 트랜듀서(220)는 오디오 콘텐트를 조직 전도를 통해 타겟 영역으로 제공하도록 구성된다. 예를 들어, 트랜듀서(220)는 연골 전도를 통해 사용자에게 사운드를 제공하기 위해 사용자의 귀의 이주(260)에 접촉하도록 구성될 수 있다. 트랜듀서(220)는 힌지(265)에서 인덱싱 피처(215)에 회전 가능하게 결합될 수 있다. 트랜듀서(220)는 yz-평면에서 회전하도록 구성될 수 있다. 힌지(265)는 사용자의 머리에 대하여 트랜듀서(220)를 바이어싱하도록 구성된 스프링 또는 다른 메커니즘을 포함할 수 있다(예컨대, 음의 z-방향으로).
도 2a에 도시된 바와 같이, 헤드셋(200)은 인덱싱 피처(215)가 사용자의 귀의 이륜 시기부(230)와 접촉하도록 사용자의 머리 상에 배치된다. 그러나, 헤드셋(200)은 전방 부분(270)과 사용자의 코(275)의 브리지 사이의 간격에 의해 입증된 바와 같이, 완전히 사용자의 머리 상에서의 위치에 있지는 않다.
도 2b는 사용자의 머리 상에서 동작 위치에서의 헤드셋(200)의 측면도이다. 동작 위치는 사용자가 통상적으로 인공 현실 콘텐트를 보고 및/또는 헤드셋(200)에 의해 제공된 오디오 콘텐트를 듣기 위해서와 같은, 의도된 방식으로 헤드셋(200)을 사용할 위치이다. 도 2a에 도시된 헤드셋(200)의 위치에 대하여, 도 2b에서의 헤드셋(200)은 뒤쪽(x-방향)으로 이동되었으며, 헤드셋(200)의 전방 부분(270)은 사용자의 코(275)의 브리지에 얹혀 있다.
사용자가 도 2a에 도시된 위치로부터 뒤쪽(x-방향)으로 도 2b에 도시된 동작으로 헤드셋을 움직임에 따라, 이륜 시기부(230)는 양의 x-방향으로 인덱싱 피처(215) 상에 접촉력을 인가한다. 조정 가능한 트랜듀서 어셈블리(205)는 스프링(280)에 의해서와 같은, 바이어싱 메커니즘에 의해 뒤쪽 방향(x-방향)으로 바이어싱된다. 스프링(280)은 캐리지(210)의 뒤쪽에 위치되고 연장 스프링으로서 동작하는 나선형 스프링일 수 있다. 다른 실시예들에서, 스프링(280)은 캐리지(210)의 앞쪽에 위치되며 압축 스프링으로서 동작할 수 있다. 음의 x-방향에서 인덱싱 피처(215) 상에서의 접촉력이 양의 x-방향에서 인덱싱 피처 상에서의 스프링 힘을 초과하는 것에 응답하여, 캐리지(210)는 템플(225)에 대하여 앞쪽으로(음의 x-방향) 이동한다. 스프링 힘은 조정 가능한 트랜듀서 어셈블리(205) 상에서의 외부 힘이 없는 뒤쪽 위치에 조정 가능한 트랜듀서 어셈블리(205)를 유지하기에 충분히 강할 수 있지만, 헤드셋(200)의 전방 부분(270)을 사용자의 코(275)의 브리지로부터 떼어내지 않고 헤드셋(200)이 동작 위치에 남아있는 것을 허용하기에 충분히 약하다. 몇몇 실시예들에서, 스프링 상수는 20 내지 40 N/m 사이, 또는 5 내지 50 N/m 사이에 있을 수 있다.
대안적인 실시예들에서, 조정 가능한 트랜듀서 어셈블리(205)는 모터를 포함할 수 있다. 조정 가능한 트랜듀서 어셈블리(205)는 처음에 앞쪽 위치에 위치될 수 있다. 헤드셋(200)을 낀 후, 사용자는 버튼을 누르고, 명령을 말하거나, 또는 그 외 캐리지(210)를 뒤쪽으로 이끌도록 모터에 지시할 수 있다. 일단 인덱싱 피처(215)가 사용자의 귀(235)에 접촉한다면, 조정 가능한 트랜듀서 어셈블리(205)는 캐리지(210)를 구동하는 것을 멈추도록 모터에 지시할 수 있으며, 인덱싱 피처(215)는 사용자의 귀와 접촉한 채로 있을 수 있다. 몇몇 실시예들에서, 모터는 인덱싱 피처(215)와 이륜 시기부(230) 사이에서의 접촉의 결과로서 힘을 검출할 수 있으며, 힘이 임계 힘을 초과하는 것에 응답하여, 모터는 뒤쪽 방향으로 캐리지를 이끄는 것을 멈출 수 있다. 인덱싱 피처(215)는 귀(235)로부터의 압력을 검출하거나 또는 귀(235)에 대한 근접성을 검출하도록 구성된 센서를 포함할 수 있다.
동작 위치에서, 트랜듀서(220)는 이주(260)와 접촉한다. 따라서, 트랜듀서(220)는 이주(260)를 사용하여 연골 전도를 위한 위치에 있다. 트랜듀서(220)의 위치(xy-평면에서)는 인덱싱 피처(215)의 위치에 대하여 고정된다. 상이한 인간들에 대해 이륜 시기부(230)와 이주(260) 간의 거리는 이주(260)와 코(275)의 브리지 간의 거리보다 훨씬 덜 가변적이다. 조정 가능한 트랜듀서 어셈블리(205)를 사용하여 이륜 시기부(230)의 위치에 대하여 트랜듀서(220)를 배치함으로써, 트랜듀서(220)는 조정 가능한 트랜듀서 어셈블리를 포함하지 않는 헤드셋들과 비교하여 더 일관되게 이주(260)에 인접하여 위치된다.
도 2c는 관절구 위치에서 골 전도를 위해 구성된 트랜듀서(220)를 갖고 동작 위치에서의 헤드셋(200)의 측면도를 예시한다. 몇몇 실시예들에서, 트랜듀서(220)는 골 전도 트랜듀서일 수 있거나, 또는 트랜듀서(220)는 골 전도 트랜듀서 및 연골 전도 트랜듀서 둘 모두를 포함할 수 있다. 도 2b에 도시된 조정 가능한 트랜듀서 어셈블리(205)의 위치에 대하여, 조정 가능한 트랜듀서 어셈블리(205)는 피봇(255)에 대하여 시계 방향으로 회전되었다. 도 2c에 도시된 바와 같이, 트랜듀서(220)는 사용자의 머리에서 골의 관절구와 접촉한다(사용자의 피부를 통해). 몇몇 실시예들에서, 사용자는 사용자의 머리를 사용하여 조정 가능한 트랜듀서 어셈블리(205)를 물리적으로 회전시킬 수 있다. 다른 실시예들에서, 헤드셋(200)은 피봇(255)에 대하여 조정 가능한 트랜듀서 어셈블리(205)를 회전시키는 모터를 포함할 수 있으며, 헤드셋(200)은 사용자로부터의 명령에 응답하여, 또는 헤드셋이 헤드셋(200)의 오디오 시스템이 골 전도 모드에 있다고 결정하는 것에 응답하여 조정 가능한 트랜듀서 어셈블리(205)를 회전시킬 수 있다. 트랜듀서(220)는 이주의 앞쪽으로 0.5 내지 1.0cm 사이와 같은, 이주(260)의 앞쪽(음의 x-방향)에 위치된다. 트랜듀서(220)는 두개골의 일 부분과 같은, 사용자의 머리의 뼈를 통해 에너지를 송신함으로써 골 전도를 통해 사용자에 대한 사운드를 생성하도록 구성된다.
도 3a는 하나 이상의 실시예들에 따른, 뒤쪽 위치에서 조정 가능한 트랜듀서 어셈블리(305)를 가진 헤드셋(300)의 측면도를 예시한다. 헤드셋(300)은 도 1의 헤드셋(100)의 실시예일 수 있다. 조정 가능한 트랜듀서 어셈블리(305)는 도 1의 조정 가능한 트랜듀서 어셈블리(170)의 실시예일 수 있다. 조정 가능한 트랜듀서 어셈블리(305)는 도 2a 내지 도 2c의 조정 가능한 트랜듀서 어셈블리(205)와 대체로 동일한 방식으로 동작한다. 그러나, 조정 가능한 트랜듀서 어셈블리(305)의 크기 및 형태는 조정 가능한 트랜듀서 어셈블리(205)와 상이하다.
캐리지(310)는 일반적으로, 원의 세그먼트를 형성하는, 곡선 형태를 포함한다. 캐리지(310)의 일 부분은 적어도 부분적으로 템플(325) 내에 위치될 수 있다. 인덱싱 피처(315)는 캐리지(310)의 후방 표면과 같은, 캐리지(310)의 표면일 수 있다. 트랜듀서(320)는 캐리지(310) 내에 위치되거나 또는 그것에 결합될 수 있다. 도 3a에 도시된 바와 같이, 헤드셋(300)은 인덱싱 피처(315)가 사용자의 귀의 이륜 시기부(330)와 접촉하도록 사용자의 머리 상에 배치된다. 그러나, 헤드셋(300)은 전방 부분(370)과 사용자의 코(375)의 브리지 간의 간격에 의해 입증된 바와 같이, 완전히 사용자의 머리 상에서의 위치에 있지는 않다.
도 3b는 사용자의 머리 상에서 동작 위치에서의 헤드셋(300)의 측면도이다. 도 3a에 도시된 헤드셋(300)의 위치에 대하여, 도 3b에서의 헤드셋(300)은 뒤쪽(x-방향)으로 이동하였으며, 헤드셋(300)의 전방 부분(370)은 사용자의 코(375)의 브리지에 얹혀 있다.
사용자가 도 3a에 도시된 위치로부터 뒤쪽 방향(x-방향)으로 도 3b에 도시된 동작 위치로 움직임에 따라, 이륜 시기부(330)는 양의 x-방향으로 인덱싱 피처(315) 상에 접촉력을 인가한다. 동작 위치에서, 트랜듀서(320)는 이주(360)와 접촉한다. 따라서, 트랜듀서(320)는 이주(360)를 사용하여 연골 전도를 위한 위치에 있다. 트랜듀서(320)의 위치(xy-평면에서)는 인덱싱 피처(315)의 위치에 대하여 고정된다.
몇몇 실시예들에서, 트랜듀서(320)는 트랜듀서 어셈블리(305)로부터 외이도의 개구로 음향 파들을 운반하는 가단 튜브/파이프를 포함할 수 있다. 트랜듀서(320)는 공기 전도 트랜듀서, 또는 공기-전도 사운드를 생성하는 조정 가능한 트랜듀서 어셈블리(305) 안에 내장된 마이크로스피커(또는 스피커들의 어레이)를 포함할 수 있다. 가단 튜브/파이프는 조정될 수 있어서, 공기 전도 사운드가 최소 조정을 갖고 외이도의 개구로 전달될 수 있도록 한다.
몇몇 실시예들에서, 조정 가능한 트랜듀서 어셈블리(305)는 마이크로폰과 같은, 음향 센서(365)를 포함할 수 있다. 음향 센서(365)는 언제든 실시간 신호들을 수집하기 위해 사용될 수 있다. 제어 시스템은 음향 센서(365)를 사용하여 검출된 사운드에 기초하여 대응하는 필터들을 생성하며 사용자가 항상 타겟 곡선을 수신할 것임을 확실하게 할 수 있다. 통상적으로, 외이도의 개구에서의 평탄 곡선은 타겟 곡선으로 고려될 수 있다.
도 3c는 골 전도를 위해 구성된 트랜듀서(320)를 가진 동작 위치에서의 헤드셋(300)의 측면도를 예시한다. 도 3b에 도시된 조정 가능한 트랜듀서 어셈블리(305)의 위치에 대하여, 조정 가능한 트랜듀서 어셈블리(305)는 시계 방향으로 회전되었다. 트랜듀서(320)는 이주의 앞쪽으로 0.5 내지 1.0cm 사이와 같은, 이주(360)의 앞쪽에(음의 x-방향) 위치된다. 트랜듀서(320)는 두개골의 일 부분과 같은, 사용자의 머리의 뼈를 통해 에너지를 송신함으로써 골 전도를 통해 사용자에 대한 사운드를 생성하도록 구성된다.
도 4는 하나 이상의 실시예들에 따른, 오디오 시스템(400)의 블록도이다. 도 1에서의 오디오 시스템은 오디오 시스템(400)의 실시예일 수 있다. 오디오 시스템(400)은 사용자에 대한 하나 이상의 음향 전달 함수들을 생성한다. 오디오 시스템(400)은 사용자에 대한 오디오 콘텐트를 그 후 생성하기 위해 하나 이상의 음향 전달 함수들을 사용할 수 있다. 도 4의 실시예에서, 오디오 시스템(400)은 트랜듀서 어레이(410), 센서 어레이(420), 및 오디오 제어기(430)를 포함한다. 오디오 시스템(400)의 몇몇 실시예들은 여기에서 설명된 것들과 상이한 구성요소들을 가진다. 유사하게, 몇몇 경우들에서, 기능들은 여기에서 설명된 것과 상이한 방식으로 구성요소들 간에 분포될 수 있따.
트랜듀서 어레이(410)는 오디오 콘텐트를 제공하도록 구성된다. 트랜듀서 어레이(410)는 복수의 트랜듀서들을 포함한다. 트랜듀서는 오디오 콘텐트를 제공하는 디바이스이다. 트랜듀서는 예컨대, 스피커, 조직 트랜듀서(예컨대, 조직 트랜듀서(160)), 오디오 콘텐트를 제공하는 몇몇 다른 디바이스, 또는 그것의 몇몇 조합일 수 있다. 조직 트랜듀서는 골 전도 트랜듀서 또는 연골 전도 트랜듀서로서 기능하도록 구성될 수 있다. 트랜듀서 어레이(410)는 공기 전도를 통해(예컨대, 하나 이상의 스피커들을 통해), 골 전도를 통해(하나 이상의 골 전도 트랜듀서를 통해), 연골 전도 오디오 시스템을 통해(하나 이상의 연골 전도 트랜듀서들을 통해), 또는 그것의 몇몇 조합으로 오디오 콘텐트를 제공할 수 있다. 몇몇 실시예들에서, 트랜듀서 어레이(410)는 주파수 범위의 상이한 부분들을 커버하기 위해 하나 이상의 트랜듀서들을 포함할 수 있다. 예를 들어, 이동 코일 트랜듀서는 주파수 범위의 제 1 부분을 커버하기 위해 사용될 수 있으며 압전 트랜듀서는 주파수 범위의 제 2 부분을 커버하기 위해 사용될 수 있다.
골 전도 트랜듀서들은 사용자의 머리에서 뼈/조직을 진동시킴으로써 음향 압력 파들을 생성한다. 골 전도 트랜듀서는 헤드셋의 일 부분에 결합될 수 있으며, 사용자의 두개골의 일 부분에 결합된 귓바퀴 뒤에 있도록 구성될 수 있다. 골 전도 트랜듀서는 오디오 제어기(430)로부터 진동 지시들을 수신하며, 수신된 지시들에 기초하여 사용자의 두개골의 일 부분을 진동시킨다. 골 전도 트랜듀서로부터의 진동들은 사용자의 달팽이관을 향해 전파되는 조직-매개 음향 압력 파를 생성하여, 고막을 바이패스한다.
연골 전도 트랜듀서들은 사용자의 귀들의 귓바퀴 연골의 하나 이상의 부분들을 진동시킴으로써 음향 압력 파들을 생성한다. 연골 전도 트랜듀서의 헤드셋의 일 부분에 결합될 수 있으며, 귀의 귓바퀴 연골의 하나 이상의 부분들에 결합되도록 구성될 수 있다. 예를 들어, 연골 전도 트랜듀서는 사용자의 귀의 귓바퀴의 뒤에 결합할 수 있다. 연골 전도 트랜듀서는 외부 귀(예컨대, 이개, 이주, 귓바퀴 연골의 몇몇 다른 부분, 또는 그것의 몇몇 조합) 주위의 귓바퀴 연골을 따라 어딘가에 위치될 수 있다. 귓바퀴 연골의 하나 이상의 부분들을 진동시키는 것은: 외이도 밖의 공기매개 음향 압력 파들; 외이도의 몇몇 부분이 진동하고 그에 의해 외이도 내에 공기매개 음향 압력 파를 생성하게 하는 조직 매개 음향 압력 파들; 또는 그것의 몇몇 조합을 생성할 수 있다. 생성된 공기매개 음향 압력 파들은 고막을 향해 외이도 아래로 전파된다.
트랜듀서 어레이(410)는 오디오 제어기(430)로부터의 지시들에 따라 오디오 콘텐트를 생성한다. 몇몇 실시예들에서, 오디오 콘텐트는 공간화된다. 공간화된 오디오 콘텐트는 특정한 방향 및/또는 타겟 영역(예컨대, 국소 영역에서의 오브젝트 및/또는 가상 오브젝트)에서 비롯되는 것처럼 보이는 오디오 콘텐트이다. 예를 들어, 공간화된 오디오 콘텐트는 사운드가 오디오 시스템(400)의 사용자로부터 룸에 걸쳐 가상 가수에서 비롯된 것처럼 보이게 할 수 있다. 트랜듀서 어레이(410)는 착용 가능한 디바이스(예컨대, 헤드셋(100))에 결합될 수 있다. 대안적인 실시예들에서, 트랜듀서 어레이(410)는 착용 가능한 디바이스(예컨대, 외부 콘솔에 결합된)로부터 분리되는 복수의 스피커들일 수 있다.
트랜듀서 어레이(410)는 도 1의 조정 가능한 트랜듀서 어셈블리(170)와 같은, 조정 가능한 트랜듀서 어셈블리를 포함한다. 조정 가능한 트랜듀서 어셈블리는 프레임의 템플들을 따라 앞뒤로 이동하도록 구성된다. 조정 가능한 트랜듀서 어셈블리는 스피커, 연골 트랜듀서, 또는 골 트랜듀서와 같은, 트랜듀서를 포함한다. 조정 가능한 트랜듀서 어셈블리는 스프링에 의해서와 같이, 뒤쪽 위치에서 바이어싱될 수 있다. 사용자가 헤드셋을 끼는 것에 응답하여, 조정 가능한 트랜듀서 어셈블리는 사용자의 귀의 일 부분에 접촉하도록 구성된다. 귀와 조정 가능한 트랜듀서 어셈블리 간의 접촉은 조정 가능한 트랜듀서 어셈블리가 템플들을 따라 앞쪽 방향으로 이동하게 할 수 있다.
몇몇 실시예들에서, 조정 가능한 트랜듀서 어셈블리는 모터를 포함할 수 있다. 조정 가능한 트랜듀서 어셈블리(170)는 처음에 앞쪽 위치에 위치될 수 있다. 헤드셋을 낀 후, 사용자는 버튼을 누르고, 명령을 말하거나, 또는 그 외 조정 가능한 트랜듀서 어셈블리를 뒤쪽으로 이끌도록 모터에 지시할 수 있다. 일단 조정 가능한 트랜듀서 어셈블리가 사용자의 귀에 접촉하면, 조정 가능한 트랜듀서 어셈블리는 조정 가능한 트랜듀서 어셈블리를 구동하는 것을 멈추도록 모터에 지시할 수 있으며, 조정 가능한 트랜듀서 어셈블리는 사용자의 귀와 접촉한 채로 있을 수 있다.
조정 가능한 트랜듀서 어셈블리는 사용자의 귀의 위치에 대하여 타겟 영역에 그것의 트랜듀서를 배치한다. 예를 들어, 조정 가능한 트랜듀서 어셈블리는 사용자의 귀의 이주와 접촉하여 연골 전도 트랜듀서를 배치할 수 있거나, 또는 조정 가능한 트랜듀서 어셈블리는 이주의 앞쪽 위치에서 사용자의 얼굴에 맞닿아 골 전도 트랜듀서를 배치할 수 있거나, 또는 조정 가능한 트랜듀서 어셈블리는 사용자의 귀의 외이도 가까이에 또는 그것 내에 스피커를 배치할 수 있다.
센서 어레이(420)는 센서 어레이(420)를 둘러싼 국소 영역 내에서 사운드들을 검출한다. 센서 어레이(420)는 각각이 음파의 공기 압력 변화들을 검출하고 검출된 사운드들을 전자 포맷(아날로그 또는 디지털)으로 변환하는 복수의 음향 센서들을 포함할 수 있다. 복수의 음향 센서들은 헤드셋(예컨대, 헤드셋(100)) 상에, 사용자 상에(예컨대, 사용자의 외이도에), 넥밴드 상에, 또는 그것의 몇몇 조합으로 위치될 수 있다. 음향 센서는, 예컨대, 마이크로폰, 진동 센서, 가속도계, 또는 그것의 임의의 조합일 수 있다. 몇몇 실시예들에서, 센서 어레이(420)는 복수의 음향 센서들 중 적어도 일부를 사용하여 트랜듀서 어레이(410)에 의해 생성된 오디오 콘텐트를 모니터링하도록 구성된다. 센서들의 수를 증가시키는 것은 트랜듀서 어레이(410)에 의해 생성된 음장 및/또는 국소 영역으로부터의 사운드를 기술하는 정보(예컨대, 방향성)의 정확도를 개선할 수 있다.
오디오 제어기(430)는 오디오 시스템(400)의 동작을 제어한다. 도 4의 실시예에서, 오디오 제어기(430)는 데이터 저장소(435), DOA 추정 모듈(440), 전달 함수 모듈(450), 추적 모듈(460), 빔형성 모듈(470), 및 사운드 필터 모듈(480)을 포함한다. 오디오 제어기(430)는 몇몇 실시예들에서, 헤드셋 안에 위치될 수 있다. 오디오 제어기(430)의 몇몇 실시예들은 여기에서 설명된 것들과 상이한 구성요소들을 가진다. 유사하게, 기능들은 여기에서 설명된 것과 상이한 방식들로 구성요소들 간에 분포될 수 있다. 예를 들어, 제어기의 몇몇 기능들은 헤드셋의 외부에서 수행될 수 있다.
데이터 저장소(435)는 오디오 시스템(400)에 의한 사용을 위해 데이터를 저장한다. 데이터 저장소(435)에서의 데이터는 오디오 시스템(400)의 국소 영역에 기록된 사운드들, 오디오 콘텐트, 머리-관련 전달 함수들(HRTF들), 하나 이상의 센서들에 대한 전달 함수들, 음향 센서들 중 하나 이상에 대한 어레이 전달 함수들(ATF들), 사운드 소스 위치들, 국소 영역의 가상 모델, 도착 방향 추정치들, 사운드 필터들, 및 오디오 시스템(400)에 의한 사용에 적절한 다른 데이터, 또는 그것의 임의의 조합을 포함할 수 있다.
DOA 추정 모듈(440)은 센서 어레이(420)로부터의 정보에 부분적으로 기초하여 국소 영역에서 사운드 소스들을 국소화하도록 구성된다. 국소화는 사운드 소스들이 오디오 시스템(400)의 사용자에 대해 위치되는 곳을 결정하는 프로세스이다. DOA 추정 모듈(440)은 국소 영역 내에서 하나 이상의 사운드 소스들을 국소화하기 위해 DOA 분석을 수행한다. DOA 분석은 사운드가 비롯되는 방향을 결정하기 위해 센서 어레이(420)에서 각각의 사운드의 세기, 스펙트럼들, 및/또는 도착 시간을 분석하는 것을 포함할 수 있다. 몇몇 경우들에서, DOA 분석은 오디오 시스템(400)이 위치되는 주변 음향 환경을 분석하기 위해 임의의 적절한 알고리즘을 포함할 수 있다.
예를 들어, DOA 분석은 센서 어레이(420)로부터 입력 신호들을 수신하며 도착 방향을 추정하기 위해 입력 신호들에 디지털 신호 프로세싱 알고리즘들을 적용하도록 설계될 수 있다. 이들 알고리즘들은, 예를 들어, 입력 신호가 샘플링되는 지연 합(delay and sum) 알고리즘들을 포함할 수 있으며, 샘플링된 신호의 결과적인 가중 및 지연 버전들은 DOA를 결정하기 위해 함께 평균화된다. 최소 평균 제곱(LMS) 알고리즘은 또한 적응형 필터를 생성하기 위해 구현될 수 있다. 이러한 적응형 필터는 그 후, 예를 들어, 신호 세기에서의 차이들, 또는 도착 시간에서의 차이들을 식별하기 위해 사용될 수 있다. 이들 차이들은 그 후 DOA를 추정하기 위해 사용될 수 있다. 또 다른 실시예에서, DOA는 입력 신호들을 주파수 도메인으로 변환하며 프로세싱할 시간-주파수(TF) 도메인 내에서의 특정 빈들을 선택함으로써 결정될 수 있다. 각각의 선택된 TF 빈은 상기 빈이 직접 경로 오디오 신호를 가진 오디오 스펙트럼의 일 부분을 포함하는지를 결정하도록 프로세싱될 수 있다. 직접-경로 신호의 일 부분을 가진 이들 빈들은 그 후 센서 어레이(420)가 직접-경로 오디오 신호를 수신한 각도를 식별하기 위해 분석될 수 있다. 결정된 각도는 그 후 수신된 입력 신호에 대한 DOA를 식별하기 위해 사용될 수 있다. 상기 나열되지 않은 다른 알고리즘들은 또한 DOA를 결정하기 위해 단독으로 또는 상기 알고리즘들과 조합하여 사용될 수 있다.
몇몇 실시예들에서, DOA 추정 모듈(440)은 또한 국소 영역 내에서 오디오 시스템(400)의 절대 위치에 대한 DOA를 결정할 수 있다. 센서 어레이(420)의 위치는 외부 시스템(예컨대, 헤드셋의 몇몇 다른 구성요소, 인공 현실 콘솔, 매핑 서버, 위치 센서(예컨대, 위치 센서(190)) 등)으로부터 수신될 수 있다. 외부 시스템은 국소 영역의 가상 모델을 생성할 수 있으며, 여기에서 오디오 시스템(400)의 국소 영역 및 위치가 매핑된다. 수신된 위치 정보는 오디오 시스템(215)의(예컨대, 센서 어레이(420)의) 일부 또는 모두의 위치 및/또는 배향을 포함할 수 있다. DOA 추정 모듈(440)은 수신된 위치 정보에 기초하여 추정된 DOA를 업데이트할 수 있다.
전달 함수 모듈(450)은 하나 이상의 음향 전달 함수들을 생성하도록 구성된다. 일반적으로, 전달 함수는 각각의 가능한 입력 값에 대한 대응하는 출력 값을 제공하는 수학적 함수이다. 검출된 사운드들의 파라미터들에 기초하여, 전달 함수 모듈(450)은 오디오 시스템과 연관된 하나 이상의 음향 전달 함수들을 생성한다. 음향 전달 함수들은 어레이 전달 함수들(ATF들), 머리-관련 전달 함수들(HRTF들), 다른 유형들의 음향 전달 함수들, 또는 그것의 몇몇 조합일 수 있다. ATF는 마이크로폰이 어떻게 공간에서의 포인트로부터 사운드를 수신하는지를 특성화한다.
ATF는 사운드 소스 및 센서 어레이(420)에서 음향 센서들에 의해 수신된 대응 사운드 간의 관계를 특성화하는 다수의 전달 함수들을 포함한다. 따라서, 사운드 소스에 대해, 센서 어레이(420)에서 음향 센서들의 각각에 대한 대응하는 전달 함수가 있다. 총괄하여, 전달 함수들의 세트는 ATF로서 불리운다. 따라서, 각각의 사운드 소스에 대해, 대응하는 ATF가 있다. 사운드 소스는, 예컨대, 국소 영역에서 사운드를 발생시키는 누군가 또는 어떤 것, 사용자, 또는 트랜듀서 어레이(410)의 하나 이상의 트랜듀서들일 수 있다. 센서 어레이(420)에 대하여 특정한 사운드 소스 위치에 대한 ATF는 그것이 사람의 귀들로 이동함에 따라 사운드에 영향을 주는 사람의 해부학(예컨대, 귀 형태, 어깨들 등)으로 인해 사용자마다 상이할 수 있다. 따라서, 센서 어레이(420)의 ATF들은 오디오 시스템(400)의 각각의 사용자에 대해 개인화된다.
몇몇 실시예들에서, 전달 함수 모듈(450)은 오디오 시스템(400)의 사용자에 대한 하나 이상의 HRTF들을 결정한다. HRTF는 귀가 어떻게 공간에서의 포인트로부터 사운드를 수신하는지를 특성화한다. 사람에 대하여 특정한 소스 위치에 대한 HRTF는 그것이 사람의 귀들로 이동함에 따라 사운드에 영향을 주는 사람의 해부학(예컨대, 귀 형태, 어깨들 등)으로 인해 사람의 각각의 귀에 고유하다(및 사람에 고유하다). 몇몇 실시예들에서, 전달 함수 모듈(450)은 교정 프로세스를 사용하여 사용자에 대한 HRTF들을 결정할 수 있다. 몇몇 실시예들에서, 전달 함수 모듈(450)은 사용자에 대한 정보를 원격 시스템으로 제공할 수 있다. 원격 시스템은 예컨대, 기계 학습을 사용하여 사용자에게 맞춤화되는 추정된 HRTF들의 초기 세트를 결정하며, HRTF들의 맞춤화된 세트를 오디오 시스템(400)으로 제공할 수 있다.
추적 모듈(460)은 하나 이상의 사운드 소스들의 위치들을 추적하도록 구성된다. 추적 모듈(460)은 현재 DOA 추정치들을 비교하며 그것들을 이전 DOA 추정치들의 저장된 이력과 비교할 수 있다. 몇몇 실시예들에서, 오디오 시스템(400)은 초당 한 번, 또는 밀리초당 한 번과 같은, 주기적으로 DOA 추정치들을 재산출할 수 있다. 추적 모듈은 이전 DOA 추정치들과 현재 DOA 추정치들을 비교할 수 있으며, 사운드 소스에 대한 DOA 추정치에서의 변화에 응답하여, 추적 모듈(460)은 상기 사운드 소스가 움직였음을 결정할 수 있다. 몇몇 실시예들에서, 추적 모듈(460)은 헤드셋 또는 몇몇 다른 외부 소스로부터 수신된 시각적 정보에 기초하여 위치에서의 변화를 검출할 수 있다. 추적 모듈(460)은 시간에 걸쳐 하나 이상의 사운드 소스들의 움직임을 추적할 수 있다. 추적 모듈(460)은 사운드 소스들의 수에 대한 값들 및 각각의 시점에서 각각의 사운드 소스의 위치를 저장할 수 있다. 수의 값 또는 사운드 소스들의 위치들에서의 변화에 응답하여, 추적 모듈(460)은 사운드 소스가 이동하였음을 결정할 수 있다. 추적 모듈(460)은 국소화 변동의 추정치를 산출할 수 있다. 국소화 변동은 움직임에서의 변화의 각각의 결정에 대한 신뢰도 레벨로서 사용될 수 있다.
빔형성 모듈(470)은 다른 영역들로부터 사운드들을 디-엠퍼사이징하는 동안 특정한 영역 내에서 사운드 소스들로부터의 사운드들을 선택적으로 엠퍼사이징하도록 하나 이상의 ATF들을 프로세싱하기 위해 구성된다. 센서 어레이(420)에 의해 검출된 사운드들을 분석할 때, 빔형성 모듈(470)은 특정한 영역의 밖에서 온 사운드를 디엠퍼사이징하는 동안 국소 영역의 상기 영역으로부터 연관된 사운드를 엠퍼사이징하기 위해 상이한 음향 센서들로부터의 정보를 조합할 수 있다. 빔형성 모듈(470)은 예컨대, DOA 추정 모듈(440) 및 추적 모듈(460)로부터의 상이한 DOA 추정치들에 기초하여 국소 영역에서의 다른 사운드 소스들로부터 특정한 사운드 소스로부터의 사운드와 연관된 오디오 신호를 격리할 수 있다. 빔형성 모듈(470)은 따라서 국소 영역에서 별개의 사운드 소스들을 선택적으로 분석할 수 있다. 몇몇 실시예들에서, 빔형성 모듈(470)은 사운드 소스로부터의 신호를 강화할 수 있다. 예를 들어, 빔형성 모듈(470)은 특정한 주파수들 위, 아래, 또는 그 사이에서의 신호들을 제거하는 사운드 필터들을 이용할 수 있다. 신호 강화는 센서 어레이(420)에 의해 검출된 다른 사운드들에 대하여 주어진 식별된 사운드 소스와 연관된 사운드들을 강화하도록 동작한다.
사운드 필터 모듈(480)은 트랜듀서 어레이(410)에 대한 사운드 필터들을 결정한다. 몇몇 실시예들에서, 사운드 필터들은 오디오 콘텐트가 공간화되게 하며, 따라서 오디오 콘텐트는 타겟 영역에서 비롯된 것처럼 보인다. 사운드 필터 모듈(480)은 사운드 필터들을 생성하기 위해 HRTF들 및/또는 음향 파라미터들을 사용할 수 있다. 음향 파라미터들은 국소 영역의 음향 속성들을 기술한다. 음향 파라미터들은, 예컨대, 반향 시간, 반향 레벨, 룸 임펄스 응답 등을 포함할 수 있다. 몇몇 실시예들에서, 사운드 필터 모듈(480)은 음향 파라미터들 중 하나 이상을 산출한다. 몇몇 실시예들에서, 사운드 필터 모듈(480)은 매핑 서버(예컨대, 도 6에 대하여 이하에서 설명되는 바와 같이)로부터 음향 파라미터들을 요청한다.
사운드 필터 모듈(480)은 사운드 필터들을 트랜듀서 어레이(410)로 제공한다. 몇몇 실시예들에서, 사운드 필터들은 주파수의 함수로서 사운드들의 포지티브 또는 네거티브 증폭을 야기할 수 있다.
하나 이상의 실시예들에 따른, 조정 가능한 트랜듀서 어셈블리를 사용하여 오디오 콘텐트를 제공하기 위한 방법(500)의 흐름도이다. 도 5에 도시된 프로세스는 오디오 시스템(예컨대, 오디오 시스템(400))과 같은, 헤드셋의 구성요소들을 사용하여 수행될 수 있다. 다른 엔티티들이 다른 실시예들에서 도 5에서의 단계들 중 일부 또는 모두를 수행할 수 있다. 실시예들은 상이한 및/또는 부가적인 단계들을 포함하거나, 또는 상이한 순서들로 단계들을 수행할 수 있다. 헤드셋은 사용자에게 오디오 콘텐트를 제공하도록 구성된 AR 또는 VR 헤드셋일 수 있다. 헤드셋은 조정 가능한 트랜듀서 어셈블리를 포함한다. 조정 가능한 트랜듀서 어셈블리는 캐리지, 및 인덱싱 피처, 및 조직 트랜듀서를 포함한다. 조정 가능한 트랜듀서 어셈블리는 헤드셋의 템플을 따라 이동하도록 구성된다.
헤드셋은 헤드셋의 템플을 따라 조정 가능한 트랜듀서 어셈블리를 이동시킨다(510). 헤드셋은 사용자가 사용자의 머리 상에 헤드셋을 위치시키는 것에 응답하여 조정 가능한 트랜듀서 어셈블리를 이동시킬 수 있다. 몇몇 실시예들에서, 조정 가능한 트랜듀서 어셈블리는 헤드셋을 따라 조정 가능한 트랜듀서 어셈블리를 구동하는 모터를 사용하여 이동할 수 있다. 다른 실시예들에서, 사용자는 조정 가능한 트랜듀서 어셈블리가 템플을 따라 이동하게 하는, 사용자의 귀의 이륜 시기부와 같은, 사용자의 신체 부분을 사용하여 조정 가능한 트랜듀서 어셈블리에 접촉력을 인가할 수 있다.
헤드셋은 조정 가능한 트랜듀서 어셈블리 상에서 인덱싱 피처를 갖고 사용자의 귀의 이륜 시기부에 접촉한다(520). 몇몇 실시예들에서, 인덱싱 피처는 조정 가능한 트랜듀서 어셈블리를 이동시키기 전에 이륜 시기부에 접촉할 수 있으며, 사용자의 귀의 이륜 시기부는 조정 가능한 트랜듀서 어셈블리를 이동시킨 후 인덱싱 피처와 접촉한 채로 있을 수 있다. 다른 실시예들에서, 헤드셋은 인덱싱 피처가 이륜 시기부에 접촉할 때까지 헤드셋의 템플을 따라 조정 가능한 트랜듀서 어셈블리를 이동시킬 수 있다.
헤드셋은 조정 가능한 트랜듀서 어셈블리 상에서 조직 트랜듀서를 사용하여 조직 전도를 통해 사용자에 대한 오디오 콘텐트를 생성한다(530). 헤드셋은 연골 및/또는 골 전도를 사용하여 사용자에게 오디오 콘텐트를 제공할 수 있다. 예를 들어, 조직 트랜듀서는 연골 전도 트랜듀서일 수 있으며, 연골 전도 트랜듀서는 사용자의 귀의 이주를 진동시킴으로써 사용자에게 오디오 콘텐트를 제공할 수 있다.
외이도로의 입구에서 양이 마이크로폰들을 이용하는 실시예들에서, 오디오 시스템은 타겟 사운드 음압 출력(외이도의 개구에서의 음압)이 타겟 곡선과 일치함을 보장할 수 있다. 몇몇 실시예들에서, 평탄 타겟 곡선이 요구될 수 있다. 그러나, 조직 트랜듀서의 원시 출력이 항상 평탄한 것은 아니며; 따라서, 출력은 오디오 시스템에 의해 균등화될 수 있다.
도 6은 하나 이상의 실시예들에 따른, 헤드셋(605)을 포함하는 시스템(600)이다. 몇몇 실시예들에서, 헤드셋(605)은 도 1의 헤드셋(100)일 수 있다. 시스템(600)은 인공 현실 환경(예컨대, 가상 현실 환경, 증강 현실 환경, 혼합 현실 환경, 또는 그것의 몇몇 조합)에서 동작할 수 있다. 도 6에 의해 도시된 시스템(600)은 헤드셋(605), 콘솔(615)에 결합되는 입력/출력(I/O) 인터페이스(610), 네트워크(620), 및 매핑 서버(625)를 포함한다. 도 6은 하나의 헤드셋(605) 및 하나의 I/O 인터페이스(610)를 포함한 예시적인 시스템(600)을 도시하지만, 다른 실시예들에서, 임의의 수의 이들 구성요소들이 시스템(600)에 포함될 수 있다. 예를 들어, 각각이 연관된 I/O 인터페이스(610)를 가진 다수의 헤드셋들이 있을 수 있으며, 각각의 헤드셋 및 I/O 인터페이스(610)는 콘솔(615)과 통신한다. 대안적인 구성들에서, 상이한 및/또는 부가적인 구성요소들이 시스템(600)에 포함될 수 있다. 부가적으로, 도 6에 도시된 구성요소들 중 하나 이상과 함께 설명된 기능은 몇몇 실시예들에서, 도 6과 함께 설명된 것과 상이한 방식으로 구성요소들 간에 분포될 수 있다. 예를 들어, 콘솔(615)의 기능 중 일부 또는 모두는 헤드셋(605)에 의해 제공될 수 있다.
헤드셋(605)은 디스플레이 어셈블리(630), 광학 블록(635), 하나 이상의 위치 센서들(640), 및 DCA(645)를 포함한다. 헤드셋(605)의 몇몇 실시예들은 도 6과 함께 설명된 것들과 상이한 구성요소들을 가진다. 부가적으로, 도 6과 함께 설명된 다양한 구성요소들에 의해 제공된 기능은 다른 실시예들에서 헤드셋(605)의 구성요소들 중에 상이하게 분포될 수 있거나, 또는 헤드셋(605)으로부터 원격인 별개의 어셈블리들에서 캡처될 수 있다.
디스플레이 어셈블리(630)는 콘솔(615)로부터 수신된 데이터에 따라 사용자에게 콘텐트를 디스플레이한다. 디스플레이 어셈블리(630)는 하나 이상의 디스플레이 요소들(예컨대, 디스플레이 요소들(120))을 사용하여 콘텐트를 디스플레이한다. 디스플레이 요소는, 예컨대, 전자 디스플레이일 수 있다. 다양한 실시예들에서, 디스플레이 어셈블리(630)는 단일 디스플레이 요소 또는 다수의 디스플레이 요소들(예컨대, 사용자의 각각의 눈에 대한 디스플레이)을 포함한다. 전자 디스플레이의 예들은: 액정 디스플레이(LCD), 유기 발광 다이오드(OLED) 디스플레이, 능동-매트릭스 유기 발광 디스플레이(AMOLED), 도파관 디스플레이, 몇몇 다른 디스플레이, 또는 그것의 몇몇 조합을 포함한다. 몇몇 실시예들에서, 디스플레이 요소(120)는 또한 광학 블록(635)의 기능 중 일부 또는 모두를 포함할 수 있다는 것을 주의하자.
광학 블록(635)은 전자 디스플레이로부터 수신된 이미지 광을 확대하고, 이미지 광과 연관된 광학 에러들을 정정하며, 정정된 이미지 광을 헤드셋(605)의 하나 또는 양쪽 아이박스들로 제공한다. 다양한 실시예들에서, 광학 블록(635)은 하나 이상의 광학 요소들을 포함한다. 광학 블록(635)에 포함된 예시적인 광학 요소들은: 애퍼처, 프레넬 렌즈, 볼록 렌즈, 오목 렌즈, 필터, 반사 표면, 또는 이미지 광에 영향을 주는 임의의 다른 적절한 광학 요소를 포함한다. 게다가, 광학 블록(635)은 상이한 광학 요소들의 조합들을 포함할 수 있다. 몇몇 실시예들에서, 광학 블록(635)에서의 광학 요소들 중 하나 이상은 부분 반사성 또는 반사-방지 코팅들과 같은, 하나 이상의 코팅들을 가질 수 있다.
광학 블록(635)에 의한 이미지 광의 확대 및 포커싱은 전자 디스플레이가 더 큰 디스플레이들보다 물리적으로 더 작고, 덜 무거우며, 더 적은 전력을 소비하도록 허용한다. 부가적으로, 확대는 전자 디스플레이에 의해 제공된 콘텐트의 시야를 증가시킬 수 있다. 예를 들어, 디스플레이된 콘텐트의 시야는 디스플레이된 콘텐트가 사용자의 시야의 거의 모두(예컨대, 대략 110도 대각선), 및 몇몇 경우들에서 모두를 사용하여 제공되도록 한다. 부가적으로, 몇몇 실시예들에서, 확대의 양은 광학 요소들을 부가하거나 또는 제거함으로써 조정될 수 있다.
몇몇 실시예들에서, 광학 블록(635)은 하나 이상의 유형들의 광학 에러를 정정하도록 설계될 수 있다. 광학 에러의 예들은 배럴 또는 핀쿠션 왜곡, 종 색 수차들, 또는 횡 색 수차들을 포함한다. 다른 유형들의 광학 에러들은 구면 수차들, 색 수차들, 또는 렌즈 상면 만곡으로 인한 에러들, 난시들, 또는 임의의 다른 유형의 광학 에러를 추가로 포함할 수 있다. 몇몇 실시예들에서, 디스플레이를 위해 전자 디스플레이로 제공된 콘텐트는 사전-왜곡되며, 광학 블록(635)은 그것이 콘텐트에 기초하여 생성된 이미지 광을 전자 디스플레이로부터 수신할 때 왜곡을 정정한다.
위치 센서(640)는 헤드셋(605)의 위치를 나타내는 데이터를 생성하는 전자 디바이스이다. 위치 센서(640)는 헤드셋(605)의 모션에 응답하여 하나 이상의 측정 신호들을 생성한다. 위치 센서(190)는 위치 센서(640)의 실시예이다. 위치 센서(640)의 예들은 하나 이상의 IMU들, 하나 이상의 가속도계들, 하나 이상의 자이로스코프들, 하나 이상의 자력계들, 모션을 검출하는 또 다른 적절한 유형의 센서, 또는 그것의 몇몇 조합을 포함한다. 위치 센서(640)는 병진 운동(앞/뒤, 위/아래, 좌/우)을 측정하기 위한 다수의 가속도계들 및 회전 운동(예컨대, 피치, 요, 롤)을 측정하기 위한 다수의 자이로스코프들을 포함할 수 있다. 몇몇 실시예들에서, IMU는 측정 신호들을 빠르게 샘플링하며 샘플링된 데이터로부터 헤드셋(605)의 추정된 위치를 산출한다. 예를 들어, IMU는 속도 벡터를 추정하기 위해 시간에 걸쳐 가속도계들로부터 수신된 측정 신호들을 적분하며 헤드셋(605) 상에서 기준 포인트의 추정된 위치를 결정하기 위해 시간에 걸쳐 속도 벡터를 적분한다. 기준 포인트는 헤드셋(605)의 위치를 설명하기 위해 사용될 수 있는 포인트이다. 기준 포인트는 일반적으로 공간에서의 포인트로서 정의될 수 있지만, 그러나, 실제로 기준 포인트는 헤드셋(605) 내에서의 포인트로서 정의된다.
DCA(645)는 국소 영역의 일 부분에 대한 깊이 정보를 생성한다. DCA는 하나 이상의 이미징 디바이스들 및 DCA 제어기를 포함한다. DCA(645)는 또한 조명기를 포함할 수 있다. DCA(645)의 동작 및 구조는 도 1에 관하여 상기 설명된다.
오디오 시스템(650)은 헤드셋(605)의 사용자에게 오디오 콘텐트를 제공한다. 오디오 시스템(650)은 상기 설명된 오디오 시스템(400)과 대체로 동일하다. 오디오 시스템(650)은 하나 이상의 음향 센서들, 하나 이상의 트랜듀서들, 및 오디오 제어기를 포함할 수 있다. 오디오 시스템(650)은 도 1의 조정 가능한 트랜듀서 어셈블리(170)와 같은, 조정 가능한 트랜듀서 어셈블리를 포함한다. 조정 가능한 트랜듀서 어셈블리는 프레임의 템플들을 따라 앞뒤로 이동하도록 구성된다. 조정 가능한 트랜듀서 어셈블리는, 스피커, 연골 트랜듀서, 또는 골 트랜듀서와 같은, 트랜듀서를 포함한다. 조정 가능한 트랜듀서 어셈블리는 스프링에 의해서와 같이, 뒤쪽 위치에서 바이어싱될 수 있다. 사용자가 헤드셋(605)을 끼는 것에 응답하여, 조정 가능한 트랜듀서 어셈블리는 사용자의 귀의 일 부분에 접촉하도록 구성된다. 귀와 조정 가능한 트랜듀서 어셈블리 간의 접촉은 조정 가능한 트랜듀서 어셈블리가 템플들을 따라 앞쪽 방향으로 이동하게 할 수 있다.
오디오 시스템(650)은 사용자에게 공간화된 오디오 콘텐트를 제공할 수 있다. 몇몇 실시예들에서, 오디오 시스템(650)은 네트워크(620)를 통해 매핑 서버(625)로부터 음향 파라미터들을 요청할 수 있다. 음향 파라미터들은 국소 영역의 하나 이상의 음향 속성들(예컨대, 룸 임펄스 응답, 반향 시간, 반향 레벨 등)을 기술한다. 오디오 시스템(650)은 예컨대, DCA(645)로부터 국소 영역의 적어도 일 부분을 기술한 정보 및/또는 위치 센서(640)로부터 헤드셋(605)에 대한 위치 정보를 제공할 수 있다. 오디오 시스템(650)은 매핑 서버(625)로부터 수신된 음향 파라미터들 중 하나 이상을 사용하여 하나 이상의 사운드 필터들을 생성하며, 조정 가능한 트랜듀서 어셈블리를 사용하여 조직 전도를 통해 사용자에게 오디오 콘텐트를 제공하기 위해 사운드 필터들을 사용할 수 있다.
I/O 인터페이스(610)는 사용자가 동작 요청들을 전송하고 콘솔(615)로부터 반응들을 수신하도록 허용하는 디바이스이다. 동작 요청은 특정한 동작을 수행하기 위한 요청이다. 예를 들어, 동작 요청은 이미지 또는 비디오 데이터의 캡처를 시작하거나 또는 종료하기 위한 지시, 또는 애플리케이션 내에서 특정한 동작을 수행하기 위한 지시일 수 있다. I/O 인터페이스(610)는 하나 이상의 입력 디바이스들을 포함할 수 있다. 예시적인 입력 디바이스들은: 키보드, 마우스, 게임 제어기, 또는 동작 요청들을 수신하고 동작 요청들을 콘솔(615)로 전달하기 위한 임의의 다른 적절한 디바이스를 포함한다. I/O 인터페이스(610)에 의해 수신된 동작 요청은, 동작 요청에 대응하는 동작을 수행하는, 콘솔(615)로 전달된다. 몇몇 실시예들에서, I/O 인터페이스(610)는 I/O 인터페이스(610)의 초기 위치에 대한 I/O 인터페이스(610)의 추정된 위치를 나타내는 교정 데이터를 캡처하는 IMU를 포함한다. 몇몇 실시예들에서, I/O 인터페이스(610)는 콘솔(615)로부터 수신된 지시들에 따라 사용자에게 햅틱 피드백을 제공할 수 있다. 예를 들어, 햅틱 피드백은 동작 요청이 수신될 때 제공되거나, 또는 콘솔(615)은 콘솔(615)이 동작을 수행할 때 I/O 인터페이스(610)가 햅틱 피드백을 생성하게 하는 지시들을 I/O 인터페이스(610)로 전달한다.
콘솔(615)은 DCA(645), 헤드셋(605), 및 I/O 인터페이스(610) 중 하나 이상으로부터 수신된 정보에 따른 프로세싱을 위해 콘텐트를 헤드셋(605)으로 제공한다. 도 6에 도시된 예에서, 콘솔(615)은 애플리케이션 저장소(655), 추적 모듈(660), 및 엔진(665)을 포함한다. 콘솔(615)의 몇몇 실시예들은 도 6과 함께 설명된 것들과 상이한 모듈들 또는 구성요소들을 가진다. 유사하게, 이하에서 추가로 설명되는 기능들은 도 6과 함께 설명된 것과 상이한 방식으로 콘솔(615)의 구성요소들 간에 분포될 수 있다. 몇몇 실시예들에서, 콘솔(615)에 대하여 본 출원에서 논의된 기능은 헤드셋(605), 또는 원격 시스템에서 구현될 수 있다.
애플리케이션 저장소(655)는 콘솔(615)에 의한 실행을 위해 하나 이상의 애플리케이션들을 저장한다. 애플리케이션은, 프로세서에 의해 실행될 때, 사용자로의 프리젠테이션을 위한 콘텐트를 생성하는 지시들의 그룹이다. 애플리케이션에 의해 생성된 콘텐트는 헤드셋(605) 또는 I/O 인터페이스(610)의 움직임을 통해 사용자로부터 수신된 입력들에 응답할 수 있다. 애플리케이션들의 예들은: 게이밍 애플리케이션들, 컨퍼런싱 애플리케이션들, 비디오 재생 애플리케이션들, 또는 다른 적절한 애플리케이션들을 포함한다.
추적 모듈(660)은 DCA(645), 하나 이상의 위치 센서들(640), 또는 그것의 몇몇 조합으로부터의 정보를 사용하여 헤드셋(605)의 또는 I/O 인터페이스(610)의 움직임들을 추적한다. 예를 들어, 추적 모듈(660)은 헤드셋(605)으로부터의 정보에 기초하여 국소 영역의 매핑 시 헤드셋(605)의 기준 포인트의 위치를 결정한다. 추적 모듈(660)은 또한 오브젝트 또는 가상 오브젝트의 위치들을 결정할 수 있다. 부가적으로, 부가적으로, 몇몇 실시예들에서, 추적 모듈(660)은 헤드셋(605)의 미래 위치를 예측하기 위해 위치 센서(640)로부터 헤드셋(605)의 위치를 나타내는 데이터의 부분들뿐만 아니라 DCA(645)로부터의 국소 영역의 표현들을 사용할 수 있다. 추적 모듈(660)은 헤드셋(605) 또는 I/O 인터페이스(610)의 추정된 또는 예측된 미래 위치를 엔진(665)으로 제공한다.
엔진(665)은 애플리케이션을 실행하며, 추적 모듈(660)로부터 헤드셋(605)의 위치 정보, 가속도 정보, 속도 정보, 예측된 미래 위치들, 또는 그것의 몇몇 조합을 수신한다. 수신된 정보에 기초하여, 엔진(665)은 사용자로의 프리젠테이션을 위해 헤드셋(605)으로 제공할 콘텐트를 결정한다. 예를 들어, 수신된 정보가 사용자가 좌측을 보고 있다고 나타낸다면, 엔진(665)은 가상 국소 영역에서 또는 부가적인 콘텐트로 국소 영역을 증대시킨 국소 영역에서 사용자의 움직임을 미러링하는 헤드셋(605)에 대한 콘텐트를 생성한다. 부가적으로, 엔진(665)은 I/O 인터페이스(610)로부터 수신된 동작 요청에 응답하여 콘솔(615) 상에서 실행한 애플리케이션 내에서 동작을 수행하며 상기 동작이 수행되었다는 피드백을 사용자에게 제공한다. 제공된 피드백은 헤드셋(605)을 통한 시각적 또는 가청 피드백 또는 I/O 인터페이스(610)를 통한 햅틱 피드백일 수 있다.
네트워크(620)는 헤드셋(605) 및/또는 콘솔(615)을 매핑 서버(625)에 결합한다. 네트워크(620)는 무선 및/또는 유선 통신 시스템들 모두를 사용하여 근거리 및/또는 광역 네트워크들의 임의의 조합을 포함할 수 있다. 예를 들어, 네트워크(620)는 인터넷, 뿐만 아니라 이동 전화 네트워크들을 포함할 수 있다. 일 실시예에서, 네트워크(620)는 표준 통신 기술들 및/또는 프로토콜들을 사용한다. 그러므로, 네트워크(620)는 이더넷, 802.11, 마이크로파 액세스를 위한 월드와이드 상호운용성(WiMAX), 2G/3G/4G 이동 통신 프로토콜들, 디지털 가입자 회선(DSL), 비동기식 전달 모드(ATM), InfiniBand, PCI 고속 고급 스위칭 등과 같은 기술들을 사용한 링크들을 포함할 수 있다. 유사하게, 네트워크(620) 상에서 사용된 네트워킹 프로토콜들은 다중프로토콜 라벨 스위칭(MPLS), 송신 제어 프로토콜/인터넷 프로토콜(TCP/IP), 사용자 데이터그램 프로토콜(UDP), 하이퍼텍스트 전송 프로토콜(HTTP), 단순 메일 전송 프로토콜(SMTP), 파일 전송 프로토콜(FTP) 등을 포함할 수 있다. 네트워크(620)를 통해 교환된 데이터는 이진 형태에서의 이미지 데이터를 포함한 기술들 및/또는 포맷들(예컨대, 휴대용 네트워크 그래픽스(PNG)), 하이퍼텍스트 마크업 언어(HTML), 확장 가능한 마크업 언어(XML) 등을 사용하여 표현될 수 있다. 또한, 링크들의 모두 또는 일부는 보안 소켓 층(SSL), 수송 층 보안(TLS), 가상 사설 네트워크들(VPN들), 인터넷 프로토콜 보안(IPsec) 등과 같은 종래의 암호화 기술들을 사용하여 암호화될 수 있다.
매핑 서버(625)는 복수의 공간들을 기술한 가상 모델을 저장하는 데이터베이스를 포함할 수 있으며, 여기에서 가상 모델에서의 하나의 위치는 헤드셋(605)의 국소 영역의 현재 구성에 대응한다. 매핑 서버(625)는 네트워크(620)를 통해 헤드셋(605)으로부터, 국소 영역의 적어도 일 부분을 기술한 정보 및/또는 국소 영역에 대한 위치 정보를 수신한다. 매핑 서버(625)는 수신된 정보 및/또는 위치 정보에 기초하여, 헤드셋(605)의 국소 영역과 연관되는 가상 모델에서의 위치를 결정한다. 매핑 서버(625)는 가상 모델에서의 결정된 위치 및 결정된 위치와 연관된 임의의 음향 파라미터들에 부분적으로 기초하여, 국소 영역과 연관된 하나 이상의 음향 파라미터들을 결정(예컨대, 검색)한다. 매핑 서버(625)는 국소 영역의 위치 및 국소 영역과 연관된 음향 파라미터들의 임의의 값들을 헤드셋(605)으로 송신할 수 있다.
부가적인 구성 정보
실시예들의 앞서 말한 설명은 예시의 목적을 위해 제공되었으며; 그것은 철저하거나 또는 특허 권한들을 개시된 정확한 형태들에 제한하도록 의도되지 않는다. 관련 기술에서의 숙련자들은 많은 수정들 및 변화들이 상기 개시를 고려하여 가능하다는 것을 이해할 수 있다.
이러한 설명의 몇몇 부분들은 정보에 대한 동작들의 알고리즘들 및 심볼 표현들에 대하여 실시예들을 설명한다. 이들 알고리즘적 설명들 및 표현들은 일반적으로 데이터 프로세싱 기술들에서의 숙련자들에 의해 그들의 작업의 본질을 이 기술분야에서의 다른 숙련자들에게 효과적으로 전달하기 위해 사용된다. 이들 동작들은, 기능적으로, 계산적으로, 또는 논리적으로 설명되지만, 컴퓨터 프로그램들 또는 등가의 전기 회로들, 마이크로코드 등에 의해 구현되는 것으로 이해된다. 더욱이, 때로는 일반성의 손실 없이 모듈들로서 동작들의 이들 배열들을 나타내는 것이 편리하다고 또한 증명되었다. 설명된 동작들 및 그것들의 연관된 모듈들은 소프트웨어, 펌웨어, 하드웨어, 또는 그것의 임의의 조합들에서 구체화될 수 있다.
본 출원에서 설명된 단계들, 동작들, 또는 프로세스들 중 임의의 것은 하나 이상의 하드웨어 또는 소프트웨어 모듈들을 갖고, 단독으로 또는 다른 디바이스들과 조합하여, 수행되거나 또는 구현될 수 있다. 일 실시예에서, 소프트웨어 모듈은 설명된 임의의 또는 모든 단계들, 동작들, 또는 프로세스들을 수행하기 위해 컴퓨터 프로세서에 의해 실행될 수 있는, 컴퓨터 프로그램 코드를 포함한 컴퓨터-판독 가능한 매체를 포함한 컴퓨터 프로그램 제품을 갖고 구현된다.
실시예들은 또한 본 출원에서 동작들을 수행하기 위한 장치에 관한 것일 수 있다. 이러한 장치는 요구된 목적들을 위해 특수하게 구성될 수 있으며, 및/또는 그것은 컴퓨터에 저장된 컴퓨터 프로그램에 의해 선택적으로 활성화되거나 또는 재구성된 범용 컴퓨팅 디바이스를 포함할 수 있다. 이러한 컴퓨터 프로그램은 비-일시적, 유형의 컴퓨터 판독 가능한 저장 매체, 또는 전자 지시들을 저장하기에 적합한 임의의 유형의 미디어에 저장될 수 있으며, 이것은 컴퓨터 시스템 버스에 결합될 수 있다. 더욱이, 명세서에서 참조된 임의의 컴퓨팅 시스템들은 단일 프로세서를 포함할 수 있거나 또는 증가된 컴퓨팅 능력을 위해 다수의 프로세서 설계들을 이용한 아키텍처들일 수 있다.
실시예들은 또한 본 출원에서 설명된 컴퓨팅 프로세서에 의해 생성되는 제품에 관한 것일 수 있다. 이러한 제품은 컴퓨팅 프로세스에서 기인한 정보를 포함할 수 있으며, 여기에서 정보는 비-일시적, 유형의 컴퓨터 판독 가능한 저장 매체상에 저장되며 본 출원에서 설명된 컴퓨터 프로그램 제품 또는 다른 데이터 조합의 임의의 실시예를 포함할 수 있다.
마지막으로, 명세서에서 사용된 언어는 원칙적으로 판독성 및 지시 목적들을 위해 선택되었으며, 그것은 특허 권한들을 상세하게 기술하거나 또는 제한하기 위해 선택되지 않을 수 있다. 그러므로, 특허 권한들의 범위는 이러한 상세한 설명에 의해서보다는 그것에 기초한 출원에서 발행한 임의의 청구항들에 의해 제한된다는 것이 의도된다. 따라서, 실시예들의 개시는 다음의 청구항들에서 제시되는, 특허 권한들의 범위에 제한적인 것이 아닌, 예시적이도록 의도된다.
Claims (14)
- 조정 가능한 트랜듀서 어셈블리에 있어서:
헤드셋의 사용자에게 오디오 콘텐트를 제공하도록 구성된 조직 트랜듀서(tissue transducer); 및
상기 헤드셋의 템플(temple)을 따라 이동(translate)하도록 구성된 캐리지로서, 상기 캐리지는 상기 조직 트랜듀서에 결합되며 인덱싱 피처를 포함하며, 상기 인덱싱 피처는 상기 인덱싱 피처가 사용자의 귀의 이륜 시기부(helix root)에 맞닿아 배치되고 상기 조직 트랜듀서가 조직 전도(tissue conduction)를 통해 타겟 영역으로 상기 오디오 콘텐트를 제공하게 배치되도록 상기 템플을 따라 상기 캐리지와 함께 이동하는, 상기 캐리지를 포함하는, 조정 가능한 트랜듀서 어셈블리. - 제1항에 있어서, 상기 템플의 힌지형 단부(hinged end)로부터 멀어지는 방향으로 뒤쪽 위치에서 상기 캐리지를 바이어싱하도록 구성된 적어도 하나의 스프링을 더 포함하는, 조정 가능한 트랜듀서 어셈블리.
- 제1항에 있어서, 상기 조직 트랜듀서는 연골 전도 트랜듀서를 포함하며, 상기 타겟 영역은 사용자의 귀의 이주인, 조정 가능한 트랜듀서 어셈블리.
- 제1항에 있어서, 상기 템플을 따라 상기 캐리지를 구동하도록 구성된 모터를 더 포함하는, 조정 가능한 트랜듀서 어셈블리.
- 제1항에 있어서, 상기 인덱싱 피처는 상기 캐리지에 회전 가능하게 결합되는, 조정 가능한 트랜듀서 어셈블리.
- 제1항에 있어서, 상기 조직 트랜듀서는 적어도 부분적으로 상기 캐리지 내에 위치되는, 조정 가능한 트랜듀서 어셈블리.
- 제1항에 있어서, 상기 조직 트랜듀서는 힌지를 통해 상기 인덱싱 피처에 결합되는, 조정 가능한 트랜듀서 어셈블리.
- 제1항에 있어서, 입력에 응답하여, 상기 조직 트랜듀서는 연골 전도 위치에서 골 전도 위치로, 또는 상기 골 전도 위치에서 상기 연골 전도 위치로 움직이도록 구성되는, 조정 가능한 트랜듀서 어셈블리.
- 제1항 내지 제8항 중 어느 한 항의 조정 가능한 트랜듀서 어셈블리를 위한 헤드셋에 있어서,
템플을 포함한 프레임; 및
상기 템플에 결합된 조정 가능한 트랜듀서 어셈블리를 포함하는, 헤드셋. - 제9항에 있어서, 상기 모터는 상기 사용자로부터의 입력에 기초하여 상기 조직 트랜듀서를 배치하도록 구성되는, 헤드셋.
- 헤드셋에 있어서:
템플을 포함한 프레임;
상기 템플을 따라 이동하도록 구성된 캐리지; 및
상기 캐리지에 결합된 연골 전도 트랜듀서로서, 상기 연골 전도 트랜듀서는 사용자의 이주에 접촉하도록 구성되는, 상기 연골 전도 트랜듀서를 포함하는, 헤드셋. - 제11항에 있어서, 사용자의 이륜 시기부에 접촉하도록 구성된 인덱싱 피처를 더 포함하는, 헤드셋.
- 제12항에 있어서, 상기 인덱싱 피처와 상기 연골 전도 트랜듀서 간의 거리는 고정되는, 헤드셋.
- 제12항에 있어서, 상기 연골 전도 트랜듀서는 힌지를 통해 상기 인덱싱 피처에 결합되는, 헤드셋.
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US16/591,984 | 2019-10-03 | ||
US16/591,984 US11082765B2 (en) | 2019-10-03 | 2019-10-03 | Adjustment mechanism for tissue transducer |
PCT/US2020/048960 WO2021066987A1 (en) | 2019-10-03 | 2020-09-01 | Adjustment mechanism for tissue transducer |
Publications (1)
Publication Number | Publication Date |
---|---|
KR20220076479A true KR20220076479A (ko) | 2022-06-08 |
Family
ID=72517335
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
KR1020227013444A KR20220076479A (ko) | 2019-10-03 | 2020-09-01 | 조직 트랜듀서를 위한 조정 메커니즘 |
Country Status (6)
Country | Link |
---|---|
US (2) | US11082765B2 (ko) |
EP (1) | EP4038899A1 (ko) |
JP (1) | JP2022550235A (ko) |
KR (1) | KR20220076479A (ko) |
CN (1) | CN114223212A (ko) |
WO (1) | WO2021066987A1 (ko) |
Families Citing this family (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US10757501B2 (en) | 2018-05-01 | 2020-08-25 | Facebook Technologies, Llc | Hybrid audio system for eyewear devices |
TWI761685B (zh) * | 2019-06-24 | 2022-04-21 | 緯創資通股份有限公司 | 穿戴式顯示裝置 |
US11892643B2 (en) * | 2019-12-13 | 2024-02-06 | K-Tronics (Suzhou) Technology Co., Ltd. | Augmented reality glasses |
US11598979B1 (en) * | 2020-03-30 | 2023-03-07 | Snap Inc. | Dual port constrained acoustic volume |
CN112135216A (zh) * | 2020-10-16 | 2020-12-25 | 深圳市喜来喜科技有限公司 | 一种可适配不同头型的蓝牙耳机 |
US11678103B2 (en) * | 2021-09-14 | 2023-06-13 | Meta Platforms Technologies, Llc | Audio system with tissue transducer driven by air conduction transducer |
Family Cites Families (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
AU2003254210A1 (en) * | 2002-07-26 | 2004-02-16 | Oakley, Inc. | Wireless interactive headset |
JP4900138B2 (ja) * | 2007-08-24 | 2012-03-21 | ソニー株式会社 | イヤースピーカ装置 |
KR100865959B1 (ko) | 2007-06-18 | 2008-10-30 | 지디텍 주식회사 | 안경 부착용 이어폰장치 |
KR102036464B1 (ko) * | 2012-06-29 | 2019-10-24 | 파인웰 씨오., 엘티디 | 스테레오 이어폰 |
US10075785B2 (en) * | 2012-07-03 | 2018-09-11 | Microsoft Technology Licensing, Llc | Ear bud headset |
JP2015179945A (ja) * | 2014-03-19 | 2015-10-08 | ソニー株式会社 | 信号処理装置、信号処理方法及びコンピュータプログラム |
US11109137B2 (en) * | 2017-04-04 | 2021-08-31 | Sony Corporation | Headphone |
KR101853248B1 (ko) | 2017-06-19 | 2018-04-30 | (주)시선 | 사운드 입출력 기능을 갖는 안경 |
US10816812B2 (en) * | 2018-09-13 | 2020-10-27 | Apple Inc. | Display devices with multimodal audio |
CN109270710A (zh) | 2018-12-13 | 2019-01-25 | 张�浩 | 骨传导眼镜架 |
-
2019
- 2019-10-03 US US16/591,984 patent/US11082765B2/en active Active
-
2020
- 2020-09-01 CN CN202080057180.0A patent/CN114223212A/zh active Pending
- 2020-09-01 JP JP2022500527A patent/JP2022550235A/ja active Pending
- 2020-09-01 EP EP20772164.8A patent/EP4038899A1/en active Pending
- 2020-09-01 WO PCT/US2020/048960 patent/WO2021066987A1/en unknown
- 2020-09-01 KR KR1020227013444A patent/KR20220076479A/ko not_active Application Discontinuation
-
2021
- 2021-07-02 US US17/366,776 patent/US11671739B2/en active Active
Also Published As
Publication number | Publication date |
---|---|
JP2022550235A (ja) | 2022-12-01 |
CN114223212A (zh) | 2022-03-22 |
US20210337300A1 (en) | 2021-10-28 |
US11671739B2 (en) | 2023-06-06 |
EP4038899A1 (en) | 2022-08-10 |
US20210105552A1 (en) | 2021-04-08 |
WO2021066987A1 (en) | 2021-04-08 |
US11082765B2 (en) | 2021-08-03 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US11671739B2 (en) | Adjustment mechanism for tissue transducer | |
US11523240B2 (en) | Selecting spatial locations for audio personalization | |
US11622223B2 (en) | Dynamic customization of head related transfer functions for presentation of audio content | |
CN114270879A (zh) | 使用用户耳朵的3d重建对音频输出进行个性化均衡 | |
KR20220050215A (ko) | 개별화된 공간 오디오 생성을 위한 빔포밍을 통한 귓바퀴 정보 추론 | |
US11012804B1 (en) | Controlling spatial signal enhancement filter length based on direct-to-reverberant ratio estimation | |
US11445318B2 (en) | Head-related transfer function determination using cartilage conduction | |
US11006197B1 (en) | Ear-plug device with in-ear cartilage conduction transducer | |
US11678103B2 (en) | Audio system with tissue transducer driven by air conduction transducer | |
US12003949B2 (en) | Modifying audio data transmitted to a receiving device to account for acoustic parameters of a user of the receiving device | |
US11758319B2 (en) | Microphone port architecture for mitigating wind noise | |
US20220180885A1 (en) | Audio system including for near field and far field enhancement that uses a contact transducer |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
E902 | Notification of reason for refusal |