JP2020178272A - 信号処理システム及び信号処理方法 - Google Patents

Abstract

【課題】１組の耳装着型発音装置をそれぞれ別の使用者が使用する場合であっても、双方の再生音を聴取可能な耳装着型発音装置を提供する。【解決手段】本発明の信号処理システムは、第１の耳装着型発音装置の動きを検出する第１のセンサの第１の検出信号と、第２の耳装着型発音装置の動きを検出する第２のセンサの第２の検出信号とを取得する検出信号取得部と、第１の検出信号と第２の検出信号との相関に基づいて、第１の耳装着型発音装置から出力される第１の出力信号及び第２の耳装着型発音装置から出力される第２の出力信号のうち少なくとも１つを変化させる制御部と、を備える。【選択図】図１

Description

本発明は、信号処理システム及び信号処理方法に関する。

例えば、下記特許文献１には、光近接センサと、加速度計と、制御回路と、を有する無線イヤーパッドが開示されている。そして、当該制御回路は、加速度計の出力を分析することにより、イヤーパッドの現在の動作状態、例えば、タップ操作を検出する。

特開２０１８−０４２２４１号公報

しかしながら、特許文献１においては、１組のイヤーパッドをそれぞれ別のユーザ（以下、これを使用者と呼んでもよい）が使用する場合については想定されておらず、例えば、１組のイヤーパッドからの再生音がそれぞれ異なる信号である場合、それぞれの使用者は、いずれかの信号のみしか聴取することができない。

本発明の一つの態様は、例えば、１組の耳装着型発音装置をそれぞれ別の使用者が使用する場合であっても、双方の再生音を聴取可能な耳装着型発音装置などを実現することを目的とする。

上記の課題を解決するために、本発明の一態様に係る信号処理システムは、第１の耳装着型発音装置の動きを検出する第１のセンサの第１の検出信号と、第２の耳装着型発音装置の動きを検出する第２のセンサの第２の検出信号とを取得する検出信号取得部と、第１の検出信号と第２の検出信号との相関に基づいて、第１の耳装着型発音装置から出力される第１の出力信号及び第２の耳装着型発音装置から出力される第２の出力信号のうち少なくとも１つを変化させる制御部と、を備える。

本発明の一態様によれば、例えば、１組の耳装着型発音装置をそれぞれ別の使用者が使用する場合であっても、双方の再生音を聴取可能な耳装着型発音装置などを実現することができる。

第１の実施の形態による信号処理信号システムの構成を示すブロック図である。 耳装着型発音装置が装着された際の概略図である。 第１の実施の形態による信号処理信号システムの処理手順を示すフローチャートである。 第１の実施の形態によるモード判定処理の処理手順を示すフローチャートである。 第１の実施の形態による第１の相関判定処理の処理手順を示すフローチャートである。 第１の実施の形態による第２の相関判定処理の処理手順を示すフローチャートである。 耳装着型発音装置の起動時及び角加速度検出時のシーケンス図である。 第１の実施の形態によるモード判定処理の処理手順を示す別のフローチャートである。 第２の実施の形態による信号処理信号システムの構成を示すブロック図である。 第２の実施の形態による信号処理信号システムの処理手順を示すフローチャートである。 第２の実施の形態によるモード判定処理の処理手順を示すフローチャートである。 第２の実施の形態による第１の相関判定処理の処理手順を示すフローチャートである。 第２の実施の形態による第２の相関判定処理の処理手順を示すフローチャートである。 第２の実施の形態によるモード判定処理の処理手順を示す別のフローチャートである。

以下、本発明の実施の形態について、図面を参照しながら説明する。

［第１の実施の形態］
図１に本実施の形態における信号処理システム１００の構成を示すブロック図を示す。図１に示すように信号を処理する信号処理システム１００は、耳装着型発音装置１３０，１４０と端末１１０とを備える。また図２に耳装着型発音装置１３０，１４０が使用者２０１に装着された際の概略図を示す。図１、図２に示すように耳装着型発音装置１３０，１４０は、端末１１０と相互に通信を行う。

耳装着型発音装置１３０，１４０は、例えばイヤホンのような装置であって、通信部１３１，１４１、センサ１３２，１４２、装置制御部１３３，１４３、増幅部１３４，１４４及び発音体１３５，１４５を備える。

耳装着型発音装置１３０，１４０は、例えば使用者２０１の耳道に挿入されるような形状でもよいし、耳介に保持されるような形状でもよく、それぞれが独立していて１つの耳に１つの耳装着型発音装置１３０，１４０が装着されるような形状であればよい。また耳装着型発音装置１３０，１４０は、必ずしも耳に装着する必要はなく、指向性スピーカなどが用いられ例えば左右の肩にそれぞれ装着するような装置でもよいものとする。

通信部１３１，１４１、装置制御部１３３，１４３及び増幅部１３４，１４４は、例えば独立した電子回路とする。また通信部１３１，１４１、装置制御部１３３，１４３及び増幅部１３４，１４４は、耳装着型発音装置１３０，１４０の有するメモリに保存されたプログラムによる一機能であってもよい。

装置制御部１３３，１４３は、耳装着型発音装置１３０，１４０における各部、例えば通信部１３１、センサ１３２、増幅部１３４及び発音体１３５を制御する。

通信部１３１，１４１は、後述の端末１１０に備えられた端末通信部１２４と通信する。通信部１３１，１４１と端末通信部１２４とは、例えば、無線で通信し、通信媒体は例えば電波や磁気などとするが通信媒体は電波や磁気に限らない。なお通信部１３１及び通信部１４１のそれぞれが、端末通信部１２４と通信してもよいし、通信部１４１と端末通信部１２４の通信に際しては、通信部１３１を中継して通信してもよいし、通信部１３１と端末通信部１２４の通信に際しては、通信部１４１を中継して通信してもよい。

センサ１３２，１４２は、耳装着型発音装置１３０，１４０の動きを検出する。このセンサ１３２，１４２は、耳装着型発音装置１３０，１４０の動きを検出するものであればよく、例えば加速度センサや角加速度センサなどが挙げられる。

以下、本実施の形態においてはセンサ１３２，１４２が角加速度センサである場合について説明する。このセンサ１３２，１４２は、例えば耳装着型発音装置１３０，１４０の筐体に、筐体の向きとは関係なく常に図２に示したようなｘ軸，ｙ軸，ｚ軸を持つように固定され内蔵される。

センサ１３２，１４２は、耳装着型発音装置１３０，１４０のｘ軸回り（右回り）の角加速度α_ｘ（耳装着型発音装置１３０，１４０の動き）を検出する。この検出された角加速度α_ｘは、通信部１３１，１４１を介して、端末１１０に送信される。

増幅部１３４，１４４は、端末１１０から通信部１３１，１４１を介して、それぞれ耳装着型発音装置１３０、１４０に対応する音声信号を受信する。そして、増幅部１３４，１４４は、例えば受信した音声信号の増幅率を変更する処理を行う。

発音体１３５，１４５は、例えばスピーカであって、それぞれ耳装着型発音装置１３０、１４０に対応する、増幅部１３４，１４４から受信した音声信号に従って発音する。

発音体１３５，１４５は、駆動方式が圧電式でも電磁式でもよいが、耳装着型発音装置１３０，１４０に磁気センサが使用される場合を考慮すると圧電式のものが望ましい。なお発音体１３５，１４５は実際に発音しなくてもよく例えば骨伝導を利用して直接骨に振動を伝達するようなものであってもよい。

次に端末１１０について説明する。端末１１０は例えば携帯型再生機や携帯型情報端末であって、耳装着型発音装置１３０，１４０と相互に通信を行うモジュールである信号送出部１２０を備える。信号送出部１２０は、独立した電子回路であってもよいし、端末１１０の有するメモリに保存されたプログラムによる一機能であって、端末１１０の有するＣＰＵ(Central Processing Unit)によって処理されてもよい。

信号送出部１２０は、例えば入力部１２１、端末信号処理部１２２、端末制御部１２３及び端末通信部１２４を備える。信号送出部１２０が電子回路の場合、入力部１２１、端末信号処理部１２２、端末制御部１２３及び端末通信部１２４は、独立した電子回路であってもよい。

また信号送出部１２０が電子回路の場合、入力部１２１、端末信号処理部１２２、端末制御部１２３及び端末通信部１２４は、信号送出部１２０の有するメモリに保存されたプログラムによる一機能であって、端末１１０の有するＣＰＵ(Central Processing Unit)
によって処理されてもよい。

信号送出部１２０が端末１１０の有するメモリに保存されたプログラムによる一機能である場合、入力部１２１、端末信号処理部１２２、端末制御部１２３及び端末通信部１２４は、信号送出部１２０の機能を細分化した機能を有するプログラムとする。信号送出部１２０は、例えば端末１１０が携帯型音楽再生機の場合、端末１１０が電源オンになると動作を開始する。

端末通信部１２４は、耳装着型発音装置１３０，１４０の備える通信部１３１，１４１
と通信する。なお、端末通信部１２４は、通信部１３１，１４１と同様の構成である。

入力部１２１は、信号送出部１２０の外部から、耳装着型発音装置１３０，１４０の発音体１３５，１４５において出力（再生）される、例えば音楽の音声信号や通話時の音声信号を受信する。これらの音声信号は、例えば端末１１０の有するメモリに蓄えられる。

端末制御部１２３は、端末１１０の各部、例えば入力部１２１、端末信号処理部１２２、端末通信部１２４などを制御する。さらに、端末制御部１２３は、耳装着型発音装置１３０，１４０から取得した角加速度α_ｘ（耳装着型発音装置１３０，１４０の動き）の相関に基づいて、耳装着型発音装置１３０，１４０の状態を判定する。このように端末制御部１２３は、検出結果である角加速度α_ｘを検出信号として取得する検出信号取得部の役割と検出信号に基づいて判定を行い入力部１２１、端末信号処理部１２２、端末通信部１２４などを制御する信号処理システム１００の制御部の役割とを備える。

本実施の形態における耳装着型発音装置１３０、１４０の状態とは、例えば耳装着型発音装置１３０および耳装着型発音装置１４０が、図２に示すように同一の使用者２０１に装着されている状態と、耳装着型発音装置１３０および耳装着型発音装置１４０の一方が使用者２０１に装着されている状態とのいずれかの状態である。

例えば端末制御部１２３は、耳装着型発音装置１３０から取得した角加速度α_ｘ（以下、これを動きと呼んでもよい）と耳装着型発音装置１４０から取得した角加速度α_ｘとの相関が高い場合、耳装着型発音装置１３０，１４０が同一の使用者２０１に装着されている状態と判定する。

一方、端末制御部１２３は、相関が低い場合、耳装着型発音装置１３０，１４０の内の一方が使用者２０１に装着されている状態と判定する。この耳装着型発音装置１３０，１４０の一方が使用者２０１に装着されている状態とは、例えば使用者２０１が耳装着型発音装置１３０のみを使用する場合、または使用者２０１が耳装着型発音装置１３０を装着し、他の使用者２０１が耳装着型発音装置１４０を装着し、２人で使用する場合などが想定される。

なお、例えば相関の高低の判定は、検出した耳装着型発音装置１３０，１４０における角加速度α_ｘから所定の演算により判定すればよく、特に限定されるものではない。例えば相関の高低の判定は、同一の期間における耳装着型発音装置１３０の角加速度α_ｘと耳装着型発音装置１４０の角加速度α_ｘとの差分を取り、差分が閾値以上の場合に相関が低いと判定するなどとする。

端末信号処理部１２２は、端末制御部１２３で判定された耳装着型発音装置１３０，１４０の状態に基づいて、入力部１２１が受信した音声信号を処理する。より具体的には、端末信号処理部１２２は、耳装着型発音装置１３０，１４０が同一の使用者２０１に装着されている状態と判定された場合、入力部１２１が受信した音声信号を、耳装着型発音装置１３０に送信する音声信号と耳装着型発音装置１４０に送信する音声信号とが異なる例えばステレオ形式の音声信号とする処理をする。

一方、端末信号処理部１２２は、耳装着型発音装置１３０，１４０の一方のみが使用者２０１に装着されている状態と判定された場合は、入力部１２１が受信した音声信号を、耳装着型発音装置１３０に送信する音声信号と、耳装着型発音装置１４０に送信する音声信号とが同一である、例えばモノラル形式の音声信号とする処理をする。なおこの端末信号処理部１２２は、入力部１２１が受信した音声信号の形式と、耳装着型発音装置１３０，１４０の状態に応じて処理すればよく、特に限定されるものではない。

なおここでいうモノラル形式とは、２チャンネル分の信号が均等な比率で加算された信号形式でなくてもよく、２つの耳装着型発音装置１３０，１４０におけるそれぞれの加算結果が同一でなくてもよいものとする。

つまり２つの耳装着型発音装置１３０，１４０に送信される信号の相違が、ステレオ形式よりも小さいものをモノラル形式と呼んでもよいものとする。なお空間的な定位処理が困難な場合、端末制御部１２３は、端末通信部１２４を介して耳装着型発音装置１３０，１４０からの音声信号の出力を停止するように耳装着型発音装置１３０，１４０に指示するように構成してもよい。

特に使用者２０１の向きや姿勢に応じて定位位置が変わるような場合は、耳装着型発音装置１３０，１４０において音声信号は出力が停止されることが好ましい。信号の空間的な定位処理が困難で、２つの耳装着型発音装置１３０，１４０のうちの１つのみから信号を受信した信号を使用者２０１が正しく受聴することが困難な場合は耳装着型発音装置１３０，１４０において音声信号は出力が停止されることが好ましい。

一方例えば、端末信号処理部１２２は、入力部１２１が受信した音声信号が１チャンネル、例えばモノラル形式であって、耳装着型発音装置１３０，１４０の両方が使用者２０１に装着されていると判定された場合には、この１チャンネルの信号を、耳装着型発音装置１３０，１４０に対応して疑似的に複数チャンネルの音声信号、例えばステレオ形式の音声信号へ変換する処理を行うように構成してもよい。

また例えば端末信号処理部１２２は、入力部１２１が受信した音声信号が複数チャンネル、例えばステレオ形式であって、耳装着型発音装置１３０，１４０の一方のみが使用者２０１に装着されていると判定された場合には、この複数チャンネルの信号を、耳装着型発音装置１３０，１４０の一方に対応して１チャンネルの音声信号、例えばモノラル形式の音声信号へ変換する処理を行う。なお、端末信号処理部１２２は、入力部１２１が受信した音声信号が、そのまま使用できる場合には、特に処理を行わないように構成してもよい。

端末信号処理部１２２で処理された耳装着型発音装置１３０，１４０のそれぞれに対応する音声信号は、端末通信部１２４を介して、耳装着型発音装置１３０，１４０のそれぞれに送信され、上述のとおり、耳装着型発音装置１３０，１４０において発音される。

次に本実施の形態における信号処理システム１００における信号処理の概要について説明する。図３は本実施の形態における信号処理システム１００の信号処理Ｓ３００の処理手順を示すフローチャートである。図３に示すように、耳装着型発音装置１３０，１４０において、センサ１３２，１４２は２つの耳装着型発音装置１３０，１４０の角加速度α_ｘをそれぞれ検出し（Ｓ３０１）、装置制御部１３３，１４３は、センサ１３２，１４２が検出した角加速度α_ｘを通信部１３１，１４１や端末通信部１２４などを介して端末制御部１２３に送信する。

端末制御部１２３は、装置制御部１３３，１４３から受信した２つの角加速度α_ｘに基づいて、耳装着型発音装置１３０，１４０の状態を判定するモード判定処理Ｓ４００を行う。詳細は後述するが、端末制御部１２３は、取得した耳装着型発音装置１３０の角加速度α_ｘと耳装着型発音装置１４０の角加速度α_ｘとの相関に基づいて、ステレオモードかモノラルモードかのモード判定を行う。

端末制御部１２３は、取得した耳装着型発音装置１３０の角加速度α_ｘと耳装着型発音
装置１４０の角加速度α_ｘとの相関が高い場合は耳装着型発音装置１３０，１４０が同一の使用者２０１に装着されている状態であると判定する。

また耳装着型発音装置１３０の角加速度α_ｘと耳装着型発音装置１４０の角加速度α_ｘとの相関が低い場合は耳装着型発音装置１３０，１４０の一方のみが使用者２０１に装着されている状態であると判定する。端末制御部１２３は、モード判定処理Ｓ４００において判定した結果を端末信号処理部１２２に送信する。

端末信号処理部１２２は、受信した判定した結果（以下、これを耳装着型発音装置１３０，１４０の状態と呼んでもよい）に基づいて、入力部１２１が受信した音声信号を処理する（Ｓ３０２）。

例えば端末信号処理部１２２は、耳装着型発音装置１３０，１４０が同一の使用者２０１に装着されている状態と判定された場合、入力部１２１が受信した音声信号を、耳装着型発音装置１３０に送信する音声信号と耳装着型発音装置１４０に送信する音声信号と、が異なる、例えば、ステレオ形式の音声信号とする処理をする。

一方端末信号処理部１２２は、耳装着型発音装置１３０，１４０の一方が使用者２０１に装着されている状態とされた場合、入力部１２１が受信した音声信号を、耳装着型発音装置１３０に送信する音声信号と耳装着型発音装置１４０に送信する音声信号とが同一である、例えばモノラル形式の音声信号とする処理をする。

この処理された音声信号は耳装着型発音装置１３０，１４０に送信され、耳装着型発音装置１３０，１４０の備える発音体１３５，１４５はこの音声信号に基づいて発音する（Ｓ３０３）。

本実施の形態の信号処理システム１００によれば、２つの耳装着型発音装置１３０，１４０のそれぞれの動きに基づいて、音声信号を処理し、これら耳装着型発音装置１３０，１４０で発音される。

なお上記において、耳装着型発音装置１３０，１４０のいずれか一方の装置制御部１３３，１４３が端末制御部１２３の役割を果たしてもよい。この場合、増幅部１３４，１４４が端末信号処理部１２２と同様の役割を果たす。

ここで例えば処理される音声信号が、耳装着型発音装置１３０，１４０で異なる、例えばステレオ形式である場合であって、耳装着型発音装置１３０，１４０の一方のみが使用者２０１に装着されている場合には、使用者２０１が聴取できない音声があり得る。

本実施の形態によれば、例えばステレオ形式の音声信号をモノラル形式の音声信号に変換処理することにより、聴取できない音声をカバーし、不具合を解消し得る。例えば、耳装着型発音装置１３０，１４０が異なる使用者２０１に装着されている場合において、音源がステレオ形式であっても、モノラル形式に変換処理されるので、異なる使用者２０１で同じ音声を聴取することができる。

次に図４を用いてモード判定処理Ｓ４００の詳細について説明する。図４に示すようにモード判定処理Ｓ４００が開始されると端末制御部１２３は、１度目の第１の相関判定処理Ｓ５００を行う。１度目の第１の相関判定処理Ｓ５００は、１人の使用者２０１が２つの耳装着型発音装置１３０，１４０を装着しておりステレオ形式で音楽などの音声信号を視聴している状況から例えば耳装着型発音装置１３０を別の使用者２０１に渡した際に音声信号をモノラル形式に変更するために行われる。

ここでは１度目の第１の相関判定処理Ｓ５００の開始時においては、１人の使用者２０１が２つの耳装着型発音装置１３０，１４０を装着し、音声信号はステレオ形式で出力されていることが前提となっている。なお１度目の第１の相関判定処理Ｓ５００は、使用者２０１が２つの耳装着型発音装置１３０，１４０のうちの１つを外す際を想定して処理を行っている。

図５に示すように１度目の第１の相関判定処理Ｓ５００として、まず端末制御部１２３は、端末通信部１２４を介して例えば通信部１３１から角加速度検出通知を受信すると、所定の時間の間、２つの耳装着型発音装置１３０，１４０の（センサ１３２，１４２が測定した）角加速度α_ｘをそれぞれ受信する（ステップＳ５０１）。

次に端末制御部１２３は、２つの耳装着型発音装置１３０，１４０の角加速度α_ｘの相関を演算する（ステップＳ５０２）。次に端末制御部１２３は、ステップＳ５０２の演算結果に基づいて、２つの耳装着型発音装置１３０，１４０の角加速度α_ｘの相関が低いか否かを判断する（ステップＳ５０３）。

ステップＳ５０３の判断結果が否定となり、端末制御部１２３は、２つの耳装着型発音装置１３０，１４０の角加速度α_ｘの相関が高いと判断した場合、ステップＳ５０１に戻る。端末制御部１２３がステップＳ５０１に戻る場合としては、１人の使用者２０１が２つの耳装着型発音装置１３０，１４０を装着している場合などが挙げられる。１人の使用者２０１が２つの耳装着型発音装置１３０，１４０を装着している場合は相関が高いので、音声信号のステレオ形式が維持される。

一方ステップＳ５０３の判断結果が肯定となり、端末制御部１２３は、２つの耳装着型発音装置１３０，１４０の角加速度α_ｘの相関が低いと判断した場合、１つ目の第１の相関判定処理Ｓ５００を終了する。例えば耳装着型発音装置１３０を外した場合には、耳装着型発音装置１３０，１４０及び端末１１０の角加速度α_ｘの相関は低くなる。

次に端末制御部１２３は、１度目の第１の相関判定処理Ｓ５００を終了すると、モノラルモード指示として、端末信号処理部１２２に対してモノラル形式の信号生成指示を行う（ステップＳ４０１）。

例えば耳装着型発音装置１３０を外した場合は、２つの耳装着型発音装置６３０，６４０の角加速度α_ｘの相関は低くなる。そこでこのような場合には耳装着型発音装置１３０，１４０で再生される音声信号をモノラル形式に切り替えることにより、各使用者２０１は２チャンネル分（左右両方分）の音声信号を聞くことができる。

次に端末制御部１２３は、２度目の第１の相関判定処理Ｓ５００及び第２の相関判定処理Ｓ６００を行う。２度目の第１の相関判定処理Ｓ５００及び第２の相関判定処理Ｓ６００は、音声信号がモノラル形式に切り替わった後、さらに、その耳装着型発音装置１３０を元の使用者２０１に渡して、元の使用者２０１が頷く動作（形式変更のトリガー）をした際に音声信号をステレオ形式に変更するために行われる。

図５に示すように２度目の第１の相関判定処理Ｓ５００として、まず端末制御部１２３は、端末通信部１２４を介して例えば通信部１３１から角加速度検出通知を受信すると、所定の時間の間、２つの耳装着型発音装置１３０，１４０の（センサ１３２，１４２が測定した）角加速度α_ｘをそれぞれ受信する（ステップＳ５０１）。

なお２度目の第１の相関判定処理Ｓ５００は、２つの耳装着型発音装置１３０，１４０
ではそれぞれモノラル形式の音声信号が再生されていることを前提としている。また２度目の第１の相関判定処理Ｓ５００は、使用者２０１が２つの耳装着型発音装置１３０，１４０のうちの１つの外された例えば耳装着型発音装置１３０を再度装着する際を想定して処理を行っている。

次に端末制御部１２３は、２つの耳装着型発音装置１３０，１４０の角加速度α_ｘの相関を演算する（ステップＳ５０２）。次に端末制御部１２３は、ステップＳ５０２の演算結果に基づいて、２つの耳装着型発音装置１３０，１４０の角加速度α_ｘの相関が低いか否かを判断する（ステップＳ５０３）。

ステップＳ５０３の判断結果が否定となり、端末制御部１２３は、２つの耳装着型発音装置１３０，１４０の角加速度α_ｘの相関が高いと判断した場合、ステップＳ５０１に戻る。端末制御部１２３がステップＳ５０１に戻る場合としては、使用者２０１が耳装着型発音装置１３０をポケットにしまい、耳装着型発音装置１４０を耳に装着して歩いている場合などが挙げられる。この場合２つの耳装着型発音装置１３０，１４０の角加速度α_ｘの相関は高いので、音声信号のモノラル形式が維持される。

一方ステップＳ５０３の判断結果が肯定となり、端末制御部１２３は、２つの耳装着型発音装置１３０，１４０の角加速度α_ｘの相関が低いと判断した場合、２つ目の第１の相関判定処理Ｓ５００を終了する。例えば使用者２０１が外していた耳装着型発音装置１３０を再度装着した際には、耳装着型発音装置１３０，１４０の角加速度α_ｘの相関は低くなる。

２度目の第１の相関判定処理Ｓ５００を終了すると、端末制御部１２３は、第２の相関判定処理Ｓ６００を行う。第２の相関判定処理Ｓ６００は、２つの耳装着型発音装置１３０，１４０を装着した使用者２０１が頷いたかどうかを判定するために行われる。

図６に示すように第２の相関判定処理Ｓ６００として、まず端末制御部１２３は、端末通信部１２４を介して例えば通信部１３１から角加速度検出通知を受信すると、所定の時間の間、２つの耳装着型発音装置１３０，１４０の（センサ１３２，１４２が測定した）角加速度α_ｘをそれぞれ受信する（ステップＳ６０１）。

次に端末制御部１２３は、２つの耳装着型発音装置１３０，１４０の角加速度α_ｘの相関を演算する（ステップＳ６０２）。次に端末制御部１２３は、ステップＳ６０２の演算結果に基づいて、２つの耳装着型発音装置１３０，１４０の角加速度α_ｘの相関が高いか否かを判断する（ステップＳ６０３）。

ステップＳ６０３の判断結果が否定となり、端末制御部１２３は、２つの耳装着型発音装置１３０，１４０の角加速度α_ｘの相関が低いと判断した場合、ステップＳ６０１に戻る。

なおステップＳ６０３の判断結果が否定となった場合、端末制御部１２３は、２度目の第１の相関判定処理Ｓ５００に戻ってもよい。この場合は、２度目の第１の相関判定処理Ｓ５００における判断結果が否定となった場合の誤判定を防止することができる。

一方ステップＳ６０３の判断結果が肯定となり、端末制御部１２３は、２つの耳装着型発音装置１３０，１４０の角加速度α_ｘの相関が高いと判断した場合、第２の相関判定処理Ｓ６００を終了する。

例えば使用者２０１が耳装着型発音装置１３０を再度装着し、さらに使用者２０１が頷
く動作をした際には、２つの耳装着型発音装置１３０，１４０の角加速度α_ｘの相関は高くなる。

第２の相関判定処理Ｓ６００を終了すると、端末制御部１２３は、ステレオモード指示として、端末信号処理部１２２に対してステレオ形式の信号生成指示を行う（ステップＳ４０２）。

上述のように使用者２０１は、所定の動作に基づいて耳装着型発音装置１３０，１４０の両方を用いて、ステレオ形式の音声を聴取することができる。なお耳装着型発音装置１３０，１４０を装着した使用者２０１が頷いた場合、耳装着型発音装置１３０，１４０に発生する角加速度α_ｘは図２に示すように正負が逆とはなるが絶対値はほぼ同じ値となる。

なお耳装着型発音装置１３０，１４０におけるセンサ１３２，１４２の少なくとも何れかが、所定値以上の角加速度α_ｘを検出した際、例えば使用者２０１が耳装着型発音装置１３０，１４０の何れかを装着して、頷く動作をした際、端末信号処理部１２２は、入力部１２１が受信した音声信号がステレオ形式の場合にはモノラル形式に変換、音声信号がモノラル形式の場合にはステレオ形式に変換するように構成してもよい。

また使用者２０１は、自らの動作によりステレオ形式かモノラル形式かを変更することができる。また所定値が用いられることで、本来検出されるべき使用者２０１の頭部または耳道の動きとは関係のない動きの検出を排除することが可能となる。

本来検出されるべき動きとは関係のない動きとは、例えば使用者２０１の頭部から耳装着型発音装置１３０，１４０がずれる動きなどが挙げられる。また所定値が用いられることで、センサ１３２，１４２のノイズやドリフトなどの入力の検出も排除することができる。

なお耳装着型発音装置１３０，１４０が使用者２０１の耳にかけて使用するような筐体を有する場合、発音体１３５，１４５は大型となり発音の際にセンサ１３２，１４２で発音体１３５，１４５の動きが検出される。

そこで発音体１３５，１４５に入力される信号に基づいた信号をセンサ１３２，１４２から出力される信号から減算するなどの補償処理を行い、発音体１３５，１４５の動きに関する誤差を取り除くように構成してもよい。

なお相関が高いか否かに関しては、加速度ａ_ｘを複数回取得して相関を求める場合、例えば相関係数ｒに基づいて判断するように構成してもよい。

ここで、相関係数は下記式（１）を用いて表される。なお、ｘを耳装着型発音装置１３０の角加速度α_ｘ、ｙを耳装着型発音装置１４０の角加速度α_ｘとする。また共分散Ｓ_ｘｙはｘとｙとの共分散、標準偏差Ｓ_ｘはｘの標準偏差、標準偏差Ｓ_ｙはｙの標準偏差、ｎは２変数データ（ｘ，ｙ）の総数、ｘ_ｉはｘの個々の数値、ｙ_ｉはｙの個々の数値、

はｘの平均値、

はｙの平均値、とする。

そして例えば、相関係数ｒが−１以上−０．７以下の場合にｘとｙとは強い負の相関であり、相関が高いとする。また例えば、相関係数ｒが−０．７より大きく−０．４以下の場合にｘとｙとは負の相関であり相関が高いとし、相関係数ｒが−０．４より大きく−０．２以下の場合にｘとｙとは弱い負の相関であり、相関が低いとする。

また例えば相関係数ｒが−０．２より大きく０．２以下の場合にｘとｙとはほとんど相関がなく、相関が低いとする。また例えば相関係数ｒが０．２より大きく０．４以下の場合にｘとｙとは弱い正の相関であり、相関が低いとする。また例えば相関係数ｒが０．４より大きく０．７以下の場合にｘとｙとは正の相関であり、相関が高いとする。また例えば相関係数ｒが０．７より大きく１以下の場合にｘとｙとは強い正の相関であり、相関が高いとする。

次に図７の耳装着型発音装置１３０，１４０の起動時及び角加速度検出時のシーケンス図を用いて、耳装着型発音装置１３０，１４０の起動時及び角加速度検出時の詳細な動作の一例について説明する。まず、信号送出部１２０が動作を開始した後、端末制御部１２３は端末１１０と通信可能な登録機器がリストアップされた、端末制御部１２３が保持する登録機器テーブルを用いて、現在通信が可能な登録機器があるか否かを確認する機器接続処理Ｓ７００を行う。

機器接続処理Ｓ７００では、具体的には例えば信号送出部１２０は、耳装着型発音装置１３０に対して接続メッセージを送信する（ステップＳ７０１）。耳装着型発音装置１３０は、電源オン状態であって接続メッセージに対して応答が可能であれば応答メッセージを信号送出部１２０に対して返送する（ステップＳ７０２）。

機器接続処理Ｓ７００では、信号送出部１２０は、耳装着型発音装置１４０に対して接続メッセージを送信する（ステップＳ７０３）。耳装着型発音装置１４０は、電源オン状態であって接続メッセージに対して応答が可能であれば応答メッセージを信号送出部１２０に対して返送する（ステップＳ７０４）。

信号送出部１２０は耳装着型発音装置１３０から応答メッセージを受信すると、耳装着型発音装置１３０との通信を開始する。信号送出部１２０は耳装着型発音装置１４０から応答メッセージを受信すると、耳装着型発音装置１４０との通信を開始する。

信号送出部１２０と耳装着型発音装置１３０とが通信を開始すると、信号送出部１２０は耳装着型発音装置１３０から角加速度情報を受信可能となり、耳装着型発音装置１３０は信号送出部１２０から耳装着型発音装置１３０に対応する信号を受信可能となる。

信号送出部１２０と耳装着型発音装置１４０とが通信を開始すると、信号送出部１２０は耳装着型発音装置１４０から角加速度情報を受信可能となり、耳装着型発音装置１４０は信号送出部１２０から耳装着型発音装置１４０に対応する信号を受信可能となる。

耳装着型発音装置１３０，１４０が耳装着型発音装置１３０，１４０にそれぞれ対応する信号を信号送出部１２０から受信することで使用者２０１はステレオ形式の音声情報を、耳装着型発音装置１３０，１４０を介して受聴することができる。

ステレオ形式においては、受聴の際に例えば音像が頭内に定位しないような頭部伝達関数や頭部伝達関数を模擬した関数などによる空間的な定位処理を行った信号を用いられることが好ましい。空間的な定位処理の一例としては、ヘッドホンを用いてヘッドホンの前後上下左右の定位を実現する定位処理が挙げられる。

信号送出部１２０と耳装着型発音装置１３０との通信が開始され、耳装着型発音装置１３０において所定値以上の角加速度α_ｘが検出されると角加速度検出処理Ｓ７１０が開始される。角加速度検出処理Ｓ７１０ではまず、耳装着型発音装置１３０は信号送出部１２０に角加速度検出通知を送信する（ステップＳ７１１）。

なお耳装着型発音装置１３０において所定値以上の角加速度α_ｘが検出されると、例えば角加速度情報を３回分送信するような所定時間の間、耳装着型発音装置１３０は角加速度情報を信号送出部１２０に送信する。

信号送出部１２０は、耳装着型発音装置１３０から角加速度検出通知を受信すると、耳装着型発音装置１４０に角加速度要求通知を送信する（ステップＳ７１２）。耳装着型発音装置１４０は、信号送出部１２０から角加速度要求通知を受信すると、例えば角加速度情報を３回分送信するような所定時間の間、角加速度情報を信号送出部１２０に送信する（ステップ７１３）。

信号送出部１２０と耳装着型発音装置１４０との通信が開始され、耳装着型発音装置１４０において所定値以上の角加速度α_ｘが検出されると角加速度検出処理Ｓ７２０が開始される。角加速度検出処理Ｓ７２０ではまず、耳装着型発音装置１４０は信号送出部１２０に角加速度検出通知を送信する（ステップＳ７２１）。

なお耳装着型発音装置１４０において所定値以上の角加速度α_ｘが検出されると、例えば角加速度情報を３回分送信するような所定時間の間、耳装着型発音装置１４０は角加速度情報を信号送出部１２０に送信する。

信号送出部１２０は、耳装着型発音装置１４０から角加速度検出通知を受信すると、耳装着型発音装置１３０に角加速度要求通知を送信する（ステップＳ７２２）。耳装着型発音装置１３０は、信号送出部１２０から角加速度要求通知を受信すると、例えば角加速度情報を３回分送信するような所定時間の間、角加速度情報を信号送出部１２０に送信する（ステップＳ７２３）。

また図８に示す本実施の形態によるモード判定処理Ｓ８００の処理手順を示す別のフローチャートを用いて、第１の相関判定処理Ｓ５００及び第２の相関判定処理Ｓ６００を共通化した場合について説明する。端末制御部１２３は、端末通信部１２４を介して例えば通信部１３１から角加速度検出通知を受信すると、所定の時間の間、２つの耳装着型発音装置１３０，１４０の（センサ１３２，１４２が測定した）角加速度α_ｘをそれぞれ受信する（ステップＳ５０１）。

次に端末制御部１２３は、２つの耳装着型発音装置１３０，１４０の角加速度α_ｘの相関を演算する（ステップＳ５０２）。次に端末制御部１２３は、ステップＳ５０２の演算結果に基づいて、２つの耳装着型発音装置１３０，１４０の角加速度α_ｘの相関が低いか否かを判断する（ステップＳ５０３）。

端末制御部１２３が２つの耳装着型発音装置１３０，１４０の角加速度α_ｘの相関が低いと判断した場合にステップＳ５０３の判断結果は肯定となる。ステップＳ５０３の判断結果が肯定の場合、端末制御部１２３は、モノラルモード指示として、端末信号処理部１
２２に対してモノラル形式の信号生成指示を行い（ステップＳ４０１）、モード判定処理Ｓ８００を終了する。

端末制御部１２３が２つの耳装着型発音装置１３０，１４０の角加速度α_ｘの相関が高いと判断した場合にステップＳ５０３の判断結果は否定となる。ステップＳ５０３の判断結果が否定の場合、端末制御部１２３は、ステレオモード指示として、端末信号処理部１２２に対してステレオ形式の信号生成指示を行い（ステップＳ４０２）、モード判定処理Ｓ８００を終了する。

ここで上記において、使用者２０１が耳装着型発音装置１３０，１４０を装着し、頷く動作をした際のフローの一例について説明する。この場合は、２度モード判定処理Ｓ８００が行われる。

まず耳装着型発音装置１３０，１４０が装着された際に１度モード判定処理Ｓ８００が行われ、この場合一時的に信号処理システム１００は、モノラル形式の信号を出力するようになる。次に耳装着型発音装置１３０，１４０が装着をした状態の使用者２０１が頷く動作をした際に、信号処理システム１００は、ステレオ形式の信号を出力するようになる。

この場合例えば、耳装着型発音装置１３０，１４０に備えられたセンサ１３２，１４２が１軸の角加速度センサの場合を例にすると、所定値は耳装着型発音装置１３０，１４０を装着した使用者２０１が頷く際に耳装着型発音装置１３０，１４０に発生する角加速度α_ｘよりも小さい値とする。

また耳装着型発音装置１３０，１４０を装着した使用者２０１が頷く際に耳装着型発音装置１３０，１４０に発生する角加速度α_ｘは、使用者２０１が装着した耳装着型発音装置１３０，１４０を取り外す際に発生する角加速度α_ｘよりも小さいものとする。

さらに使用者２０１が装着した耳装着型発音装置１３０，１４０を取り外す際にセンサ１３２，１４２に発生する角加速度α_ｘと使用者２０１が耳装着型発音装置１３０，１４０を装着する際にセンサ１３２，１４２に発生する角加速度α_ｘとは同程度と想定する。

なお所定値を基本値と基本値よりも小さい暫定値との２つとしてもよい。基本値を用いてモード判定処理Ｓ８００が行われた後の所定の期間は、暫定値を用いてモード判定処理Ｓ８００が行われるものとしてもよい。

例えば基本値を使用者２０１が装着した耳装着型発音装置１３０，１４０を取り外す際に発生する角加速度α_ｘより小さい値とし、暫定値を、耳装着型発音装置１３０，１４０を装着した使用者２０１が頷く際に耳装着型発音装置１３０，１４０に発生する角加速度α_ｘよりも小さい値とする。

［第２の実施の形態］
次に本発明の第２の実施の形態について説明する。第１の実施の形態では２つの耳装着型発音装置１３０，１４０の角加速度α_ｘの相関についてのみ着目している。これに対して本実施の形態では、さらに２つの耳装着型発音装置１３０，１４０の角加速度α_ｘと端末１１０の角加速度α_ｘとの相関についてもさらに着目する点が主に第１の実施の形態と異なる。

また耳装着型発音装置１３０，１４０は周囲の音を集音するマイクなどの装置を備えていなかったが、本実施の形態においてはマイクなどの装置を備える。なお下記においては
第１の実施の形態と同様の点については説明を省略する。

図９に本実施の形態における信号処理システム９００の構成を示すブロック図を示す。信号を処理する信号処理システム９００は、耳装着型発音装置９３０，９４０と端末１１０とを備える。信号送出部９２０は信号送出部１２０の構成要素に加え出力部９２１及び端末センサ９２２をさらに備える。

耳装着型発音装置９３０，９４０は、耳装着型発音装置１３０，１４０の構成要素に加えて集音体９３２，９４２をさらに備え、増幅部１３４，１４４の代わりに信号処理部９３１，９４１を備える。

信号送出部９２０が電子回路の場合、出力部９２１は、独立した電子回路であってもよいし、信号送出部９２０の有するメモリに保存されたプログラムによる一機能であって端末１１０の有するＣＰＵ(Central Processing Unit)によって処理されてもよい。

信号送出部９２０が端末１１０の有するメモリに保存されたプログラムによる一機能である場合、出力部９２１は、信号送出部９２０の機能を細分化した機能を有するプログラムとする。

出力部９２１は、集音体９３２，９４２から入力された情報が基となる信号を信号送出部９２０の外部の例えば端末１１０の有するメモリへ送信する。集音体９３２，９４２から入力された情報は端末通信部１２４によって受信される。

端末通信部１２４は端末信号処理部１２２に集音体９３２，９４２から入力された情報を送信し、端末信号処理部１２２は端末制御部１２３からの制御信号によって集音体９３２，９４２から入力された情報を処理する。なお、集音体９３２，９４２は、例えば、マイク等である。

端末信号処理部１２２は、信号対雑音比が高くなるように２つの集音体９３２，９４２から入力された情報から信号を生成する。例えば端末信号処理部１２２は、２つの集音体９３２，９４２から入力された情報のうちノイズの少ない一方の情報のみから信号を生成してもよいし、２つの集音体９３２，９４２から入力された情報の平均値を信号として生成してもよい。

なお耳装着型発音装置９３０，９４０において出力される音声信号が、耳装着型発音装置９３０，９４０の角加速度α_ｘの相関が低くモノラル形式となる場合、集音体９３２，９４２から集音された音は、端末信号処理部１２２によってそれぞれ違ったように処理されてもよい。

例えば耳装着型発音装置９３０，９４０の角加速度α_ｘの相関が低く、かつ、耳装着型発音装置９３０と端末１１０との角加速度α_ｘの相関が高く、耳装着型発音装置９３０と端末１１０との角加速度α_ｘの相関が低い場合を例に挙げる。

この場合、端末信号処理部１２２は、耳装着型発音装置９３０の集音体９３２から集音した音に基づく音声信号を大きくし、耳装着型発音装置９３０の集音体９３２から集音した音に基づく音声信号を小さくする処理をしてもよい。

このように本実施の形態の端末１１０では、集音体９３２，９４２から入力された情報が基となる信号が端末１１０の有するメモリに送信されることで、集音体９３２，９４２から入力された情報が基となる信号を記録することができる。

端末センサ９２２は、端末１１０の動きを検出する例えば角加速度センサのようなセンサである。そして、端末センサ９２２は、例えば、端末１１０の筐体に、筐体の向きとは関係なく常に図２に示したような耳装着型発音装置１３０と同じｘ軸，ｙ軸，ｚ軸を持つように内蔵される。端末センサ９２２は、端末１１０の角加速度情報を測定し、測定した角加速度情報を端末制御部１２３に、例えば、一定の周期で送信する。

集音体９３２，９４２は、耳装着型発音装置９３０，９４０の周囲の音を集音して信号として例えば一定の周期で信号処理部９３１，９４１に送信する。集音体９３２，９４２は、例えば、主に使用者２０１の声を集音することを目的とする。

信号処理部９３１，９４１は、増幅部１３４，１４４と同様に独立した電子回路でもよいし、耳装着型発音装置９３０，９４０の有するメモリに保存されたプログラムによる一機能であってもよい。信号処理部９３１，９４１は、増幅部１３４，１４４と同等の動作に加え、装置制御部１３３，１４３からの制御信号に従って集音体９３２，９４２から受信する信号を通信部１３１，１４１に送信する。通信部１３１，１４１は集音体９３２，９４２から受信した信号を端末通信部１２４に送信する。

なお、集音体９３２，９４２で集音される音には、発音体１３５，１４５から発音される音が含まれるため、信号処理部９３１，９４１においてエコーキャンセル処理をすることが望ましい。具体的には信号処理部９３１，９４１は、集音体９３２，９４２で集音された音を信号する際に、発音体１３５，１４５から出力される信号を減算する。

通信部１３１，１４１が集音体９３２，９４２から受信した信号を端末通信部１２４に送信するタイミングとしては、機器接続処理Ｓ７００によって、信号送出部９２０及び耳装着型発音装置９３０，９４０の接続が確立された後となる。また、集音体９３２，９４２が信号を受信していない間は通信部１３１，１４１から端末通信部１２４への信号の送信はないものとする。

なお耳装着型発音装置９３０，９４０は、装着されているか否かを検出する装着センサをさらに備えていてもよい。装着センサが、耳装着型発音装置９３０，９４０が装着されていないことを検出した場合、発音体１３５，１４５及び集音体９３２，９４２は使用されないことが予測されるため発音体１３５，１４５及び集音体９３２，９４２の動作を停止させてもよい。

次に本実施の形態における信号処理システム９００における信号処理の概要について説明する。図１０は本実施の形態における信号処理システム９００の信号処理Ｓ１０００の処理手順を示すフローチャートである。

図１０に示すように、耳装着型発音装置９３０，９４０において、センサ１３２，１４２及び端末センサ９２２は、耳装着型発音装置９３０，９４０及び端末１１０の角加速度α_ｘをそれぞれ検出し（Ｓ１００１）、装置制御部１３３，１４３は、センサ１３２，１４２及び端末センサ９２２が検出した角加速度α_ｘを通信部１３１，１４１や端末通信部１２４などを介して端末制御部１２３に送信する。

端末制御部１２３は、装置制御部１３３，１４３及び端末センサ９２２から受信した２つの角加速度α_ｘに基づいて、耳装着型発音装置１３０，１４０及び端末１１０の状態を判定するモード判定処理Ｓ１１００を行う。詳細は後述するが、端末制御部１２３は、取得した耳装着型発音装置９３０の角加速度α_ｘと耳装着型発音装置９４０の角加速度α_ｘと端末１１０の角加速度α_ｘとの相関に基づいて、ステレオモードかモノラルモードかの
モード判定を行う。

端末制御部１２３は、耳装着型発音装置９３０の角加速度α_ｘと耳装着型発音装置９４０の角加速度α_ｘとの相関が高く、かつ、耳装着型発音装置９３０，９４０の角加速度α_ｘと端末１１０の角加速度α_ｘとの相関が低い場合は耳装着型発音装置９３０，９４０が同一の使用者２０１に装着されている状態であると判定する。

また端末制御部１２３は、耳装着型発音装置９３０の角加速度α_ｘと耳装着型発音装置９４０の角加速度α_ｘとの相関が低い場合は耳装着型発音装置１３０，１４０の一方のみが使用者２０１に装着されている状態であると判定する。端末制御部１２３は、モード判定処理Ｓ１１００において判定した結果を端末信号処理部１２２に送信する。

端末信号処理部１２２は、受信した判定した結果（以下、これを耳装着型発音装置９３０，９４０及び端末１１０の状態と呼んでもよい）に基づいて、入力部１２１が受信した音声信号を処理する（Ｓ１００２）。

例えば端末信号処理部１２２は、耳装着型発音装置９３０，９４０が同一の使用者２０１に装着されている状態と判定された場合、入力部１２１が受信した音声信号を、耳装着型発音装置９３０に送信する音声信号と耳装着型発音装置９４０に送信する音声信号と、が異なる、例えばステレオ形式の音声信号とする処理をする。

一方端末信号処理部１２２は、耳装着型発音装置９３０，９４０の一方が使用者２０１に装着されている状態とされた場合、入力部１２１が受信した音声信号を、耳装着型発音装置１３０に送信する音声信号と耳装着型発音装置１４０に送信する音声信号とが同一である、例えばモノラル形式の音声信号とする処理をする。

なお端末信号処理部１２２は、耳装着型発音装置９３０の角加速度α_ｘと耳装着型発音装置９４０の角加速度α_ｘとの相関が低く、耳装着型発音装置９３０，９４０の一方が使用者２０１に装着されている状態とされた場合、集音体９３２，９４２からの音声信号の一方を大きくし、もう一方を小さくするような処理をしてもよい。

端末信号処理部１２２によって処理された音声信号は耳装着型発音装置９３０，９４０に送信され、耳装着型発音装置９３０，９４０の備える発音体１３５，１４５はこの音声信号に基づいて発音する（Ｓ１００３）。

本実施の形態の信号処理システム９００は、耳装着型発音装置９３０，９４０及び端末１１０のそれぞれの動きに基づいて音声信号を処理し、耳装着型発音装置９３０，９４０では音声信号に基づく発音がなされる。

なお上記において、耳装着型発音装置９３０，９４０のいずれか一方の装置制御部１３３、１４３が端末制御部１２３の役割を果たしてもよい。この場合、信号処理部９３１，９４１が端末信号処理部１２２と同様の役割を果たす。

次に図１１に示す本実施の形態におけるモード判定処理Ｓ１１００の処理手順を示すフローチャートを用いて、本実施の形態の一例について説明する。なお下記においては、理解の容易化のため、１人の使用者２０１が２つの耳装着型発音装置９３０，９４０を装着しており、ステレオ形式で音楽などの音声信号を視聴している状況から、例えば耳装着型発音装置９３０を別の使用者２０１に渡して、音声信号がモノラル形式に切り替わった後、さらに、その耳装着型発音装置９３０を元の使用者２０１に渡して、元の使用者２０１が頷く動作（形式変更のトリガー）をして音声信号がステレオ形式に切り替わるまでのフローについて説明する。

図１１に示すようにモード判定処理Ｓ１１００が開始されると端末制御部１２３は、１度目の第１の相関判定処理Ｓ１２００を行う。１度目の第１の相関判定処理Ｓ１２００は、１人の使用者２０１が２つの耳装着型発音装置９３０，９４０を装着しておりステレオ形式で音楽などの音声信号を視聴している状況から例えば耳装着型発音装置９３０を別の使用者２０１に渡した際に音声信号をモノラル形式に変更するために行われる。

ここでは１度目の第１の相関判定処理Ｓ１２００の開始時においては、１人の使用者２０１が２つの耳装着型発音装置９３０，９４０を装着し、音声信号はステレオ形式で出力されていることが前提となっている。なお１度目の第１の相関判定処理Ｓ１２００は、使用者２０１が２つの耳装着型発音装置９３０，９４０のうちの１つを外す際を想定して処理を行っている。

図１２に示すように１度目の第１の相関判定処理Ｓ１２００として、まず端末制御部１２３は、端末通信部１２４を介して例えば通信部１３１から角加速度検出通知を受信すると、所定の時間の間、２つの耳装着型発音装置９３０，９４０及び端末１１０の（センサ１３２，１４２及び端末センサ９２２が測定した）角加速度α_ｘをそれぞれ受信する（ステップＳ１２０１）。

次に端末制御部１２３は、２つの耳装着型発音装置９３０，９４０の角加速度α_ｘの相関を演算する（ステップＳ１２０２）。次に端末制御部１２３は、ステップＳ１２０２の演算結果に基づいて、２つの耳装着型発音装置９３０，９４０の角加速度α_ｘの相関が低いか否かを判断する（ステップＳ１２０３）。

ステップＳ１２０３の判断結果が否定となり、端末制御部１２３は、２つの耳装着型発音装置９３０，９４０の角加速度α_ｘの相関が高いと判断した場合、ステップＳ１２０１に戻る。端末制御部１２３がステップＳ１２０１に戻る場合としては、１人の使用者２０１が２つの耳装着型発音装置９３０，９４０を装着している場合などが挙げられる。１人の使用者２０１が２つの耳装着型発音装置９３０，９４０を装着している場合は相関が高いので、音声信号のステレオ形式が維持される。

一方、ステップＳ１２０３の判断結果が肯定となり、端末制御部１２３は、２つの耳装着型発音装置９３０，９４０の角加速度α_ｘの相関が低いと判断した場合、耳装着型発音装置９３０，９４０及び端末１１０の角加速度α_ｘの相関を演算する（ステップＳ１２０４）。例えば耳装着型発音装置９３０の角加速度α_ｘと耳装着型発音装置９４０の角加速度α_ｘとを平均した角加速度α_ｘを端末１１０の角加速度α_ｘとの相関を求めるのに使用する。

なお耳装着型発音装置９３０，９４０及び端末１１０の角加速度α_ｘの相関を演算する際には、耳装着型発音装置９３０，９４０から端末１１０に信号が伝送される時間である伝送時間に相当する遅延を考慮して端末１１０の角加速度α_ｘを取得することが望ましい。

次に端末制御部１２３は、ステップＳ１２０４の演算結果に基づいて、耳装着型発音装置９３０，９４０及び端末１１０の角加速度α_ｘの相関が低いか否かを判断する（ステップＳ１２０５）。

ステップＳ１２０５の判断結果が否定となり、端末制御部１２３は、耳装着型発音装置９３０，９４０及び端末１１０の角加速度α_ｘの相関が高いと判断した場合、ステップＳ
１２０１に戻る。例えば使用者２０１が乗り物に乗っているような場合には、乗り物が揺れた際に、耳装着型発音装置９３０，９４０及び端末１１０も揺れるので、耳装着型発音装置９３０，９４０及び端末１１０の角加速度α_ｘの相関は高くなる。

一方、ステップＳ１２０５の判断結果が肯定となり、端末制御部１２３は、耳装着型発音装置９３０，９４０及び端末１１０の角加速度α_ｘの相関が低いと判断した場合、１つ目の第１の相関判定処理Ｓ１２００を終了する。例えば耳装着型発音装置９３０を別の使用者２０１に渡した場合には、耳装着型発音装置９３０，９４０及び端末１１０の角加速度α_ｘの相関は低くなる。

次に端末制御部１２３は、１度目の第１の相関判定処理Ｓ１２００を終了すると、モノラルモード指示として、端末信号処理部１２２に対してモノラル形式の信号生成指示を行う（ステップＳ１１０１）。

例えば耳装着型発音装置９３０を別の使用者２０１に渡した場合は、２つの耳装着型発音装置９３０，９４０の角加速度α_ｘの相関と、耳装着型発音装置９３０，９４０及び端末１１０の角加速度α_ｘの相関と、は共に低くなる。そこで、このような場合には耳装着型発音装置９３０，９４０で再生される音声信号をモノラル形式に切り替えることにより、各使用者２０１は２チャンネル分（左右両方分）の音声信号を聞くことができる。

次に端末制御部１２３は、２度目の第１の相関判定処理Ｓ１２００及び第２の相関判定処理Ｓ１３００を行う。２度目の第１の相関判定処理Ｓ１２００及び第２の相関判定処理Ｓ１３００は、音声信号がモノラル形式に切り替わった後、さらに、その耳装着型発音装置９３０を元の使用者２０１に渡して、元の使用者２０１が頷く動作（形式変更のトリガー）をした際に音声信号をステレオ形式に変更するために行われる。

図１２に示すように２度目の第１の相関判定処理Ｓ１２００として、まず端末制御部１２３は、端末通信部１２４を介して例えば通信部１３１から角加速度検出通知を受信すると、所定の時間の間、２つの耳装着型発音装置９３０，９４０及び端末１１０の（センサ１３２，１４２及び端末センサ９２２が測定した）角加速度α_ｘをそれぞれ受信する（ステップＳ１２０１）。

なお２度目の第１の相関判定処理Ｓ１２００は、２つの耳装着型発音装置９３０，９４０ではそれぞれモノラル形式の音声信号が再生されていることを前提としている。また２度目の第１の相関判定処理Ｓ１２００は、使用者２０１が２つの耳装着型発音装置９３０，９４０のうちの１つの外された例えば耳装着型発音装置９３０を再度装着する際を想定して処理を行っている。

次に端末制御部１２３は、２つの耳装着型発音装置９３０，９４０の角加速度α_ｘの相関を演算する（ステップＳ１２０２）。次に端末制御部１２３は、ステップＳ１２０２の演算結果に基づいて、２つの耳装着型発音装置９３０，９４０の角加速度α_ｘの相関が低いか否かを判断する（ステップＳ１２０３）。

ステップＳ１２０３の判断結果が否定となり、端末制御部１２３は、２つの耳装着型発音装置９３０，９４０の角加速度α_ｘの相関が高いと判断した場合、ステップＳ１２０１に戻る。端末制御部１２３がステップＳ１２０１に戻る場合としては、２つの耳装着型発音装置９３０，９４０をそれぞれ装着した２人の使用者２０１が乗り物に乗っている際に乗り物が揺れた場合などが挙げられる。この場合２つの耳装着型発音装置９３０，９４０の角加速度α_ｘの相関は高いので、音声信号のモノラル形式が維持される。

一方、ステップＳ１２０３の判断結果が肯定となり、端末制御部１２３は、２つの耳装着型発音装置９３０，９４０の角加速度α_ｘの相関が低いと判断した場合、耳装着型発音装置９３０，９４０及び端末１１０の角加速度α_ｘの相関を演算する（ステップＳ１２０４）。例えば端末１１０の角加速度α_ｘとの相関を求めるのに使用するのは、耳装着型発音装置９３０の角加速度α_ｘと耳装着型発音装置９４０の角加速度α_ｘとを平均した角加速度α_ｘとする。

なお耳装着型発音装置９３０，９４０及び端末１１０の角加速度α_ｘの相関を演算する際には、耳装着型発音装置９３０，９４０から端末１１０に信号が伝送される時間である伝送時間に相当する遅延を考慮して端末１１０の角加速度α_ｘを取得することが望ましい。

次に端末制御部１２３は、ステップＳ１２０４の演算結果に基づいて、耳装着型発音装置９３０，９４０及び端末１１０の角加速度α_ｘの相関が低いか否かを判断する（ステップＳ１２０５）。

ステップＳ１２０５の判断結果が否定となり、端末制御部１２３は、耳装着型発音装置９３０，９４０及び端末１１０の角加速度α_ｘの相関が高いと判断した場合、ステップＳ１２０１に戻る。例えば使用者２０１が乗り物に乗っているような場合には、乗り物が揺れた際に、耳装着型発音装置９３０，９４０及び端末１１０も揺れるので、耳装着型発音装置９３０，９４０及び端末１１０の角加速度α_ｘの相関は高くなる。耳装着型発音装置９３０，９４０及び端末１１０の角加速度α_ｘの相関が高い場合、音声信号のモノラル形式は維持される。

一方ステップＳ１２０５の判断結果が肯定となり、端末制御部１２３は、耳装着型発音装置９３０，９４０及び端末１１０の角加速度α_ｘの相関が低いと判断した場合、２つ目の第１の相関判定処理Ｓ１２００を終了する。例えば使用者２０１が耳装着型発音装置９３０を別の使用者２０１から返却された際には、耳装着型発音装置９３０，９４０及び端末１１０の角加速度α_ｘの相関は低くなる。

２度目の第１の相関判定処理Ｓ１２００を終了すると、端末制御部１２３は、第２の相関判定処理Ｓ１３００を行う。第２の相関判定処理Ｓ１３００は、２つの耳装着型発音装置９３０，９４０を装着した使用者２０１が頷いたかどうかを判定するために行われる。

図１３に示すように第２の相関判定処理Ｓ１３００として、まず端末制御部１２３は、端末通信部１２４を介して例えば通信部１３１から角加速度検出通知を受信すると、所定の時間の間、２つの耳装着型発音装置９３０，９４０及び端末１１０の（センサ１３２，１４２及び端末センサ９２２が測定した）角加速度α_ｘをそれぞれ受信する（ステップＳ１３０１）。

次に端末制御部１２３は、２つの耳装着型発音装置９３０，９４０の角加速度α_ｘの相関を演算する（ステップＳ１３０２）。次に端末制御部１２３は、ステップＳ１３０２の演算結果に基づいて、２つの耳装着型発音装置９３０，９４０の角加速度α_ｘの相関が高いか否かを判断する（ステップＳ１３０３）。

ステップＳ１３０３の判断結果が否定となり、端末制御部１２３は、２つの耳装着型発音装置９３０，９４０の角加速度α_ｘの相関が低いと判断した場合、ステップＳ１３０１に戻る。

なおステップＳ１３０３の判断結果が否定となった場合、端末制御部１２３は、２度目
の第１の相関判定処理Ｓ１２００に戻ってもよい。この場合は、２度目の第１の相関判定処理Ｓ１２００における判断結果が否定となった場合の誤判定を防止することができる。

一方、ステップＳ１３０３の判断結果が肯定となり、端末制御部１２３は、２つの耳装着型発音装置９３０，９４０の角加速度α_ｘの相関が高いと判断した場合、耳装着型発音装置９３０，９４０及び端末１１０の角加速度α_ｘの相関を演算する（ステップＳ１３０４）。例えば耳装着型発音装置６３０の角加速度α_ｘと耳装着型発音装置６４０の角加速度α_ｘとを平均した角加速度α_ｘを端末１１０の角加速度α_ｘとの相関を求めるのに使用する。

なお耳装着型発音装置９３０，９４０及び端末１１０の角加速度α_ｘの相関を演算する際には、耳装着型発音装置９３０，９４０から端末１１０に信号が伝送される時間である伝送時間に相当する遅延を考慮して端末１１０の角加速度α_ｘを取得することが望ましい。

次に端末制御部１２３は、ステップＳ１３０４の演算結果に基づいて、耳装着型発音装置９３０，９４０及び端末１１０の角加速度α_ｘの相関が低いか否かを判断する（ステップＳ１３０５）。

ステップＳ１３０５の判断結果が否定となり、端末制御部１２３は、耳装着型発音装置９３０，９４０及び端末１１０の角加速度α_ｘの相関が高いと判断した場合、ステップＳ１３０１に戻る。

例えば使用者２０１が耳装着型発音装置９３０を別の使用者２０１から返却され装着した後に、乗り物が揺れた場合、２つの２つの耳装着型発音装置９３０，９４０の角加速度α_ｘの相関は高くなり、ステップＳ１３０３の判断結果は肯定となる。

しかしながらステップＳ１３０５の判断があり、端末制御部１２３は、端末１１０も揺れていることも判断できるため、頷く動作以外で後述のステップＳ１１０２に進まずにすむ。端末制御部１２３がステップＳ１１０２に進まないため音声信号がステレオ形式とならない。

一方、ステップＳ１３０５の判断結果が肯定となり、端末制御部１２３は、耳装着型発音装置９３０，９４０及び端末１１０の角加速度α_ｘの相関が低いと判断した場合、第２の相関判定処理Ｓ１３００を終了する。

例えば使用者２０１が耳装着型発音装置９３０を別の使用者２０１から返却され装着し、さらに使用者２０１が頷く動作をした際には、２つの耳装着型発音装置９３０，９４０の角加速度α_ｘの相関は高く、かつ、耳装着型発音装置９３０，９４０及び端末１１０の角加速度α_ｘの相関は低くなる。

第２の相関判定処理Ｓ１３００を終了すると、端末制御部１２３は、ステレオモード指示として、端末信号処理部１２２に対してステレオ形式の信号生成指示を行う（ステップＳ１１０２）。

なおモード判定処理Ｓ１１００を詳細に説明するために、第１の相関判定処理Ｓ１２００と第２の相関判定処理Ｓ１３００とを分けたが、モード判定処理Ｓ１１００を図１４に示すモード判定処理Ｓ１４００のように一般化してもよい。モード判定処理Ｓ１１００とモード判定処理Ｓ１４００とはほぼ同じ動作となる。

モード判定処理Ｓ１４００は、大別すると使用者２０１が２つの耳装着型発音装置９３０，９４０のうちの１つを外す際、使用者２０１が２つの耳装着型発音装置９３０，９４０のうちの１つの外された例えば耳装着型発音装置９３０を再度装着する際、２つの耳装着型発音装置９３０，９４０を装着した使用者２０１が頷く際の３つの場面で実行される。

端末１１０の角加速度α_ｘを参照するため本実施の形態においては、例えば使用者２０１が別の使用者２０１と別々に耳装着型発音装置９３０，９４０を装着した状態で自動車や電車などの乗り物に乗った場合に、乗り物の揺れを原因として２チャンネル分の音声信号が再生されないといった不具合が生じない。

乗り物は移動に伴って加速度や角加速度を生じるため、使用者２０１及び別の使用者２０１が乗り物に対して相対的に固定されるような場合には、２つの耳装着型発音装置６３０，６４０における角加速度α_ｘは相関する値となる。

第１の実施の形態においては、使用者２０１及び別の使用者２０１が別々に耳装着型発音装置１３０，１４０からモノラル形式の音声信号を再生して使用している際、乗り物の揺れによってモード判定処理Ｓ４００が開始される。モード判定処理Ｓ４００が開始される理由は、使用者２０１及び別の使用者２０１が乗り物に対して相対的に固定されているため、２つの耳装着型発音装置１３０，１４０の角加速度α_ｘは相関ありと判断されるためである。

使用者２０１及び別の使用者２０１が乗り物に対して相対的に固定されているため、モード判定処理Ｓ４００においても２つの耳装着型発音装置１３０，１４０の角加速度α_ｘは相関が高いと判断され、ステレオモード指示が行われる。

別々に使用されている２つの耳装着型発音装置１３０，１４０にステレオ形式の信号が送信されてしまうと、使用者２０１及び別の使用者２０１はそれぞれ１チャンネル分の信号情報しか取得できない。

これに対して本実施の形態では、端末１１０の角加速度α_ｘも参照されるため、上述の場合において２つの耳装着型発音装置９３０，９４０はモノラル形式の信号を受信する。このため、使用者２０１及び別の使用者２０１はそれぞれ２チャンネル分の信号情報を取得することができる。このように本実施の形態による耳装着型発音装置９３０，９４０は、第１の実施の形態では対応できないような場合にも使用者２０１の意図通りの動作が可能となる。

［第３の実施の形態］
次に本発明の第３の実施の形態について説明する。第１及び第２の実施の形態では、所定値以上の角加速度α_ｘが検出された際に、耳装着型発音装置１３０，１４０，９３０，９４０が受信する信号においてステレオ形式とモノラル形式との切り替えを行う。

これに対して本実施の形態では、さらに使用者２０１の動作のみによって耳装着型発音装置９３０，９４０が受信する信号においてステレオ形式とモノラル形式との切り替えを行う。

本実施の形態においては、使用者２０１の動作のみによって耳装着型発音装置９３０，９４０が受信する信号においてステレオ形式とモノラル形式との切り替えを行うため、第１及び第２の実施の形態に加えてもう１軸の角加速度α_ｚを取得する。

つまり本実施の形態において、センサ１３２，１４２及び端末センサ９２２は２軸以上の角加速度センサとする。第１及び第２の実施の形態においては図２におけるｘ軸回りの角加速度α_ｘを用いていたが、本実施の形態においては、さらに図２におけるｚ軸回り（右回り）の角加速度α_ｚを用いる。

ｘ軸回りの角加速度α_ｘは、耳装着型発音装置９３０，９４０が装着された使用者２０１の頷く動作や耳装着型発音装置９３０，９４０が使用者２０１によって脱着される際の動作に対応する。

ｚ軸回りの角加速度α_ｚは、耳装着型発音装置９３０，９４０が装着された使用者２０１の首を振る動作に対応する。なお下記においては第２の実施の形態と同様の点については説明を省略する。

使用者２０１は、端末１１０を操作して操作に対応した反応音を聞いて首を振る動作をする。操作の際に音がなる操作がなされると、端末通信部１２４は音有操作検出通知を受信する。

端末通信部１２４は、受信した音有操作検出通知を端末制御部１２３に送信する。このように端末通信部１２４は、耳装着型発音装置９３０，９４０との他に、端末１１０内の信号送出部９２０とは別の機能を持つ電子回路やプログラムと通信を行う。例えば使用者２０１はモノラル形式で音声信号が出力されている場合に首を振る動作をする。

本実施の形態においては、端末制御部１２３は、角加速度α_ｘに関してモード判定処理Ｓ１１００を行い、かつ、角加速度α_ｚに関しても例えば図１３に示す第２の相関判定処理Ｓ１３００及びステレオモード指示（ステップＳ１１０２）を行う。

使用者２０１が端末１１０を操作すると、発音体１３５，１４５から反応音が出力され、音有操作検出通知が端末制御部に送信される。使用者２０１は反応音に基づいて首を振るなどの動作を行う。

端末制御部１２３は、音有操作検出通知を受信すると、所定の時間の間、２つの耳装着型発音装置９３０，９４０及び端末１１０の（センサ１３２，１４２及び端末センサ９２２が測定した）角加速度α_ｚをそれぞれ受信する（ステップＳ１３０１）。

次に端末制御部１２３は、２つの耳装着型発音装置９３０，９４０の角加速度α_ｚの相関を演算する（ステップＳ１３０２）。次に端末制御部１２３は、ステップＳ１３０２の演算結果に基づいて、２つの耳装着型発音装置９３０，９４０の角加速度α_ｚの相関が高いか否かを判断する（ステップＳ１３０３）。

使用者２０１が首を振るなどの動作をせずに、２つの耳装着型発音装置９３０，９４０の角加速度α_ｚの相関が低く、ステップＳ１３０３の判断結果が否定の場合、端末制御部１２３は、ステップＳ１３０１に戻る。

使用者２０１が首を振るなどの動作をした際などで、２つの耳装着型発音装置６３０，６４０の角加速度α_ｚの相関が高く、ステップＳ９０３の判断結果が肯定の場合、端末制御部１２３は、耳装着型発音装置６３０，６４０及び端末１１０の角加速度α_ｚの相関を演算する（ステップＳ１３０４）。

例えば端末１１０との相関を求めるために、耳装着型発音装置９３０，９４０の角加速度α_ｚの平均値を用いる。耳装着型発音装置９３０，９４０の角加速度α_ｚの平均値は使
用者２０１の頭部の中央の動きに相当するため、耳装着型発音装置９３０，９４０の角加速度α_ｚの平均値を用いることで相関演算の際の使用者２０１のあごの動きによる誤差を軽減することができる。

また耳装着型発音装置９３０，９４０の角加速度α_ｚの平均値を用いることで、耳介や耳道の違いに由来する使用者２０１の頭部の回転軸（図２のｚ軸）に対する相関演算の際の誤差を軽減することができる。なお耳装着型発音装置９３０，９４０の角加速度α_ｚの平均値を用いる場合は耳装着型発音装置９３０，９４０が共に使用者２０１に正しく装着されていることが前提となる。

次に端末制御部１２３は、ステップＳ１３０４の演算結果に基づいて、耳装着型発音装置９３０，９４０及び端末１１０の角加速度α_ｚの相関が低いか否かを判断する（ステップＳ１３０５）。

使用者２０１が首を振るなどの動作をせずに、耳装着型発音装置９３０，９４０及び端末１１０の角加速度α_ｚの相関が高く、ステップＳ１３０５の判断結果が否定の場合、端末制御部１２３は、ステップＳ１３０１に戻る。

使用者２０１が首を振るなどの動作をした際などで、耳装着型発音装置９３０，９４０及び端末１１０の角加速度α_ｚの相関が低く、ステップＳ１３０５の判断結果が肯定の場合、端末制御部１２３は、第２の相関判定処理Ｓ１３００を終了する。

端末制御部１２３は、第２の相関判定処理Ｓ１３００を終了すると、ステレオモード指示として、端末信号処理部１２２に対してステレオ形式の信号生成指示を行う（ステップＳ１１０２）。

使用者２０１がモノラル形式の音声信号を聞いて首を振る動作をすると、２つの耳装着型発音装置９３０，９４０の角加速度α_ｚの相関が高くなり、かつ、耳装着型発音装置９３０，９４０及び端末１１０の角加速度α_ｚの相関が低くなり、ステレオ形式の音声信号が出力される。

このように本実施の形態においては、使用者２０１の動作によって、乗り物の揺れとは区別して耳装着型発音装置９３０，９４０が受信する信号においてステレオ形式とモノラル形式との切り替えを行うことができる。

なお本実施の形態ではｚ軸回りの角加速度α_ｚに着目し首を振る動作について主に述べているが、ｘ軸回りの角加速度α_ｘについては、第２の実施の形態で述べているため省略する。

また例えばｘ軸回りの角加速度α_ｘ及びｚ軸回りの角加速度α_ｚの２つを用いた処理は、使用者２０１の動作によって耳装着型発音装置９３０，９４０が受信する信号におけるステレオ形式とモノラル形式との切り替え以外にも応用することができる。

例えばユーザインタフェースとして、使用者２０１の頷く動作を縦スクロールと対応付け、首を振る動作を横スクロールと対応付けると、使用者２０１の動作を端末１１０の画面のスクロールの操作とすることもできる。

［その他の実施の形態］
本発明は、第１〜３の実施の形態に限定されるものではなく、種々の変形が可能である。例えば、第１〜第３の実施の形態で示した構成と実質的に同一の構成、同一の作用効果を奏する構成又は同一の目的を達成することができる構成で置き換えることができる。

第１〜３の実施の形態においては、耳装着型発音装置１３０，１４０や耳装着型発音装置９３０，９４０を２つ使用する場合について述べているが、３つ以上使用してもよい。例えば耳装着型発音装置９３０などを３つ使用する場合は３者通話が可能になる。

耳装着型発音装置９３０，９４０において出力される音声信号をモノラル形式とすると、それぞれの使用者２０１が３者通話をする際に話者の定位を左右にずらして提示するような機能を持たせたアプリケーションを使用することが可能となる。つまり使用者２０１は、２つの耳装着型発音装置９３０，９４０のどちらか片方のみで２チャンネルのうちの一方のみに定位する話者の信号情報を取得できる。

また耳装着型発音装置１３０，１４０や耳装着型発音装置９３０，９４０を４つ使う場合は、動きに相関のある２つの耳装着型発音装置１３０，１４０や耳装着型発音装置９３０，９４０をステレオ形式の信号を送信するペアの１系統として処理を行う。

耳装着型発音装置１３０，１４０や耳装着型発音装置９３０，９４０を４つ使う場合で、動きに相関のない耳装着型発音装置１３０，１４０や耳装着型発音装置９３０，９４０はそれぞれをモノラル形式の信号を送信する１系統として処理を行う。

耳装着型発音装置１３０，１４０や耳装着型発音装置９３０，９４０を４つ使う場合、端末制御部１２３は、センサ１３２，１４２からの角加速度情報から重力方向を推定し、耳装着型発音装置１３０，１４０や耳装着型発音装置９３０，９４０の左右を識別してもよい。

例えば使用者２０１が４回頷くなどの特定の動作をした場合に、端末制御部１２３は耳装着型発音装置１３０，１４０や耳装着型発音装置９３０，９４０の左右を識別する処理を行うものとする。

また第１〜３の実施の形態においては、センサ１３２，１４２は角加速度センサとする場合について述べたが、加速度センサとしてもよいし、加速度センサ及び角加速度センサの両方としてもよい。なお相関を求めやすくする観点から端末センサ９２２は、センサ１３２，１４２と同種類のセンサであることが好ましい。

また第２の実施の形態は、第１の実施の形態に端末センサ９２２と集音体９３２，９４２とを追加した形態としているが、第１の実施の形態に端末センサ９２２のみを追加した形態や集音体９３２，９４２のみを追加した形態としてもよい。

さらに第３の実施の形態は、首を振る動作としてｚ軸回りの角加速度α_ｚに着目しているが、本発明はこれに限らず、首をかしげる動作としてｙ軸回りの角加速度α_ｙに着目してもよい。

信号処理システム１００，９００は、端末１１０と複数の耳装着型発音装置１３０，１４０，９３０，９４０で構成してもよいし、端末１１０のみで構成してもよいし、１つの耳装着型発音装置１３０，１４０，９３０，９４０で構成してもよい。

信号処理システム１００，９００は、端末１１０と複数の耳装着型発音装置１３０，１４０，９３０，９４０で構成してもよいし、端末１１０のみで構成してもよいし、１つの耳装着型発音装置１３０，１４０，９３０，９４０で構成してもよい。端末１１０のみで信号処理システム１００，９００を構成する場合には、端末１１０は発音体１３５，１４５や集音体９３２，９４２などを備えるように構成してもよい。

例えば信号処理システム１００において、耳装着型発音装置１３０の装置制御部１３３が、モード判定処理（Ｓ４００）を行い、耳装着型発音装置１４０の増幅部１４４が音声信号を処理（Ｓ３０２）してもよい。

なお、特許請求の範囲における信号処理システムは、例えば端末単体、耳装着型発音装置のうちの１つ、又は、端末と耳装着型発音装置のうちの複数で実現される場合のいずれも含む。

１００，９００……信号処理システム、１１０……端末、１２０，９２０……信号送出部、１２１……入力部、１２２……端末信号処理部、１２３……端末制御部、１２４……端末通信部、１３０，１４０，９３０，９４０……耳装着型発音装置、１３１，１４１……通信部、１３２，１４２……センサ、１３３，１４３……装置制御部、１３４，１４４……増幅部、１３５，１４５……発音体、２０１……使用者、９２１……出力部、９３２，９４２……集音体。

Claims (6)

1. 第１の耳装着型発音装置の動きを検出する第１のセンサの第１の検出信号と、第２の耳装着型発音装置の動きを検出する第２のセンサの第２の検出信号とを取得する検出信号取得部と、
   前記第１の検出信号と前記第２の検出信号との相関に基づいて、前記第１の耳装着型発音装置から出力される第１の出力信号及び前記第２の耳装着型発音装置から出力される第２の出力信号のうち少なくとも１つを変化させる制御部と、
   を備えることを特徴とする信号処理システム。
2. 前記制御部は、前記第１の検出信号と、前記第２の検出信号との相関が低い場合、前記第１の出力信号の基となる信号と、前記第２の出力信号の基となる信号とを同一とする、
   請求項１に記載の信号処理システム。
3. 前記制御部は、前記第１の検出信号と、前記第２の検出信号との相関が高い場合、前記第１の出力信号の基となる信号と、前記第２の出力信号の基となる信号とを異ならせる、
   請求項１に記載の信号処理システム。
4. 前記検出信号取得部は、さらに、端末の動きを検出する第３のセンサの第３の検出信号を取得し、
   前記制御部は、さらに、前記第１及び第２の検出信号の少なくとも１つと、前記第３の検出信号との相関に基づいて、前記第１の出力信号及び前記第２の出力信号のうち少なくとも１つを変化させる、
   請求項１〜３のいずれか１項に記載の信号処理システム。
5. 前記第１のセンサ及び前記第２のセンサは複数方向の動きを検出し、
   前記制御部は、前記第１のセンサ及び前記第２のセンサが検出したそれぞれの方向に関して前記第１のセンサの検出した動きと前記第２のセンサの検出した動きとの相関に基づいて、前記第１の出力信号及び前記第２の出力信号のうち少なくとも１つを変化させる、
   請求項１〜４のいずれか１項に記載の信号処理システム。
6. 第１の耳装着型発音装置の動きを検出する第１のセンサの第１の検出信号を取得し、
   第２の耳装着型発音装置の動きを検出する第２のセンサの第２の検出信号を取得し、
   前記第１の検出信号と前記第２の検出信号との相関に基づいて、前記第１の耳装着型発音装置から出力される第１の出力信号及び前記第２の耳装着型発音装置から出力される第２の出力信号のうち少なくとも１つを変化させる、
   ことを特徴とする信号処理方法。

Images