JP2020113981A - 補聴器システム - Google Patents

Abstract

【課題】着用者の周囲の状況に応じて集音方法を変更することができる補聴器システムを提供する。【解決手段】補聴器システムは、イメージキャプチャー４と、マイクロフォンアレイ５と、集音処理装置６と、スピーカー７と、を備えている。集音処理装置６は、イメージキャプチャー４が撮影した着用者の前方の視野を分析し、着用者がいる環境状況に合う環境画像サンプルデータを選び、その環境画像サンプルデータに対応する集音制御方針データとサウンド処理方法に基づいて、マイクロフォンアレイ５を起動及び制御して集音し、そして、スピーカー７に処理されたサウンドデータを出力させる。【選択図】図２

Description

本発明は補聴器に関し、特に環境を分析し集音処理する補聴器システムに関する。

従来の補聴器は、例えば特許文献１に記載されるものが挙げられ、音声信号の特性の違いを利用して、スピーチとノイズを区別してノイズを効果的に除去したり、指向性マイクロフォンを用いて、ユーザーの後方や側面からの音を排除したりなどの機能を持った製品が提供されてきたが、日常生活の環境では、着用者の前方からの話し声であっても、会話対象の話し声以外の他人の会話音も集音されることが多い。また、例えば、市場やレストラン、会議などの環境では、話す人の音源は多様で異なり、従来の音声信号処理方法では、これらの状況に応じて集音方法を調整することができず、使用上の不便な点がまだ多々ある。

また、バイノーラル(Binaural)技術とビームフォーミング技術を補聴器に用いることによって、音声出力する際に音の方向を着用者に伝えることができるが、複数の言語音声が補聴器着用者の前方から伝わる際、通常は着用者の真正面からの音声を強調して出力するように構成されているため、複数の人間が会話をする状況においては目的の話し声を円滑に取得できないことがよくある。

特開２０１８−９８７９８号公報

そこで、本発明の目的は、着用者の周囲の状況に応じて集音方法を変更することができる補聴器システムを提供することにある。

上記目的を達成すべく、本発明の補聴器システムは、着用者の前方の視野を撮影してデジタルイメージデータに変換するイメージキャプチャーと、それぞれ独立して周囲の音を収集してデジタルサウンドデータに変換する複数のマイクロフォンユニットにより構成されたマイクロフォンアレイと、前記イメージキャプチャー及び前記マイクロフォンアレイに信号的に接続して前記イメージキャプチャー及び各前記マイクロフォンユニットから受信した前記デジタルイメージデータ及び各前記デジタルサウンドデータに基づいて出力サウンドデータを作成して出力する集音処理装置と、前記集音処理装置に接続して前記出力サウンドデータを受信して対応の音に変換して出力するスピーカーと、を備える補聴器システムであって、前記集音処理装置は、複数の環境画像サンプルデータと、各前記環境画像サンプルデータにそれぞれ対応する複数の集音制御方針データと、各前記環境画像サンプルデータにそれぞれ対応する複数のサウンド処理方法データと、が保存されているメモリと、前記メモリにアクセスし、前記イメージキャプチャーから受信した前記デジタルイメージデータを分析して複数の前記環境画像サンプルデータから対応の１つを選択する環境分析部と、前記メモリにアクセスし、前記環境分析部により選択された前記環境画像サンプルデータに対応する前記集音制御方針データに基づいて、前記マイクロフォンアレイを構成する各前記マイクロフォンユニットを制御する集音制御部と、前記メモリにアクセスし、前記環境分析部により選択された前記環境画像サンプルデータに対応する前記サウンド処理方法データに基づいて、前記マイクロフォンアレイを構成する各前記マイクロフォンユニットからそれぞれ受信した各前記デジタルサウンドデータを変換して前記出力サウンドデータとして作成して前記スピーカーに出力する出力処理部と、を有している。

上記構成により、本発明の補聴器システムは、イメージキャプチャーから受信したデジタルイメージデータを分析して複数の環境サンプルデータから対応する1つを選択し、且つ、該選択された環境画像サンプルデータに応じた集音制御方針データに基づいてマイクロフォンアレイを制御して集音する上、該選択された環境サンプルデータに応じたサウンド処理方法データに基づいてマイクロフォンアレイからのデジタルサウンドデータを変換して出力サウンドデータを作成してスピーカーに出力させるので、着用者がいる環境の音源パターンをより正確に識別し、適宜な集音制御方針を起動することができ、即ち、着用者の周囲の状況に応じて集音方法を変更することが可能な補聴器システムを提供することができる。

本発明の一実施例に係る補聴器システムの構造を模式的に示す斜視図である。 当該実施例の構成が示されるブロック図である。

以下は説明図を参照しながら本発明の補聴器システムについて詳しく説明する。

図１と図２には、本発明の補聴器システム２００の実施例が示されている。図示のように、この実施例の補聴器システム２００は、装着者が着用する装身具３と、ディスプレイ手段８を有する。

本実施例の装身具３は、眼鏡タイプに構成され、着用者の頭部に装着することができる。装身具３は一対のレンズ３２を保持しているフロントサポーター３１と、着用者の耳に掛けるためにフロントサポーター３１の左右両端にそれぞれ連結されているサイドサポーター３３を有している。更に装身具３には、フロントサポーター３１の中央に配置されるイメージキャプチャー４と、一対のレンズ３２それぞれの上方に配置される複数のマイクロフォンユニット５１により構成されるマイクロフォンアレイ５と、サイドサポーター３３に配置される集音処理装置６と、サイドサポーター３３に接続されていると共に、着用者の外耳道に挿入して装着可能な２つのスピーカー７と、がそれぞれ設置されている。

集音処理装置６は、イメージキャプチャー４とマイクロフォンアレイ５とスピーカー７と信号的に接続されている。

ディスプレイ手段８は、モバイル端末やタブレットコンピューター、または体に身に付けるリストバンド、腕時計、ネックレス状に設計可能で、有線通信技術や無線通信技術によって、集音処理装置６と信号的に接続され、画像を表示できる。

イメージキャプチャー４は、フロントサポーター３１の真ん中、即ち本実施例では一対のレンズ３２の間に設置されており、着用者の前方の視野を撮影してデジタルイメージデータに変換することができる。

マイクロフォンアレイ５は複数のマイクロフォンユニット５１により構成され、複数のマイクロフォンユニット５１はフロントサポーター３１とサイドサポーター３３に取り付けらている。マイクロフォンユニット５１はそれぞれ独立して周囲の音を収集してデジタルサウンドデータに変換することができる。

集音処理装置６は、イメージキャプチャー４と各マイクロフォンユニット５１から受信した前記デジタルイメージデータ及び各デジタルサウンドデータに基づいて出力サウンドデータを作成してスピーカー７に出力する装置である。

スピーカー７は、集音処理装置６に信号的に接続して前記出力サウンドデータを受信して対応の音に変換して出力する。

以下、集音処理装置６の構成についてより詳細に説明する。

集音処理装置６は、メモリ（図示せず）と、起動制御部６１と、環境分析部６２と、集音制御部６３と、出力処理部６５と、を有している。

メモリには、複数の環境画像サンプルデータと、各前記環境画像サンプルデータにそれぞれ対応する複数の集音制御方針データと、各前記環境画像サンプルデータにそれぞれ対応する複数のサウンド処理方法データと、が保存されている。

起動制御部６１は、少なくとも１つのマイクロフォンユニット５１を起動し、周囲の音を収集してデジタルサウンドデータに変換し、前記デジタルサウンドデータに人間の話し声の存在があるかどうかを出力処理部６５に分析させ、出力処理部６５は前記デジタルサウンドデータを分析して人間の話し声を検出すると、イメージキャプチャー４を起動させ着用者の視野を撮影してデジタルイメージデータに変換し、環境分析部６２に送信する。

環境分析部６２は、起動制御部６１からのデジタルイメージデータの受信によって起動し、下述する自動選択モード６２２にある場合には、イメージキャプチャー４から受信した前記デジタルイメージデータを分析するように構成されている。

環境画像サンプルデータは、さまざまな場面に存在する可能性のある人物の数、着用者に対する人物の向き、距離、方向、移動／運動方法、およびさまざまな背景物などの各種パラメーターに基づいて、前記各種パラメーターに対して特定の分類アルゴリズムを用いた分類認識学習により作成された分類モデルデータであると共に、各環境画像サンプルデータにはそれぞれ対応する画像が含まれている。

各環境画像サンプルデータに含まれる画像は、例えば、講演／授業環境、会議環境、屋外／公園環境、パーティー環境、市場環境、スーパー／コンビニ環境、市街環境、車内環境、及び銀行環境などに対応する。前記背景物は、例えば、会議テーブル、ホワイトボード、黒板、教卓、プロジェクタ／スクリーン、樹木／緑地、天空、歩道、各種交通手段、棚、またはレジなどが挙げられる。

分類認識学習に用いられる前記特定の分類アルゴリズムとしては、例えば、深層学習（deep belief network）、決定木アルゴリズム（Complex tree）、ｋ近傍法（cosine k-nearest neighbors, Cosine KNN）、畳み込みニューラルネットワーク（convolutional neural network, CNN）、及びサポートベクターマシン（Quadratic support vector machine、Quadratic SVM）などが挙げられる。

集音処理装置６は、着用者により切替可能な手動選択モード６２１と自動選択モード６２２との２種類の制御モードがある。

集音処理装置６が手動選択モード６２１に切り替えられると、全部の環境画像サンプルデータにそれぞれ対応する画像をディスプレイ手段８に表示させるように送信し、着用者に選択させる。この場合、環境分析部６２は、着用者が選択した１つの画像に対応する環境画像サンプルデータを対応の１つとして選択する。

また、集音処理装置６が自動選択モード６２２に切り替えられると、環境分析部６２がイメージキャプチャー４から受信したデジタルイメージデータを分析する際、前記デジタルイメージデータに対して前記特定の分類アルゴリズムを実行すると共に、メモリにアクセスし、複数の環境画像サンプルデータにおいて類似度が一定の閾値を越えた複数の前記環境画像サンプルデータに対応する画像をディスプレイ手段８に表示させるように送信し、着用者がディスプレイ手段８に表示された複数の前記画像から１つを選択して集音処理装置６に送信することに応じて、集音処理装置６の環境分析部６２は着用者により選択された前記画像に対応する前記環境画像サンプルデータを前記対応の１つとして選択する。なお、環境分析部６２が分析し選び出した環境画像サンプルデータが１つのみである場合は、即ち、類似度が一定の閾値を越えた環境画像サンプルデータが１つのみである場合は、それがそのまま前記対応の１つとして自動的に選択される。

集音制御部６３は、メモリにアクセスし、環境分析部６２により選択された（着用者により選択された１つを環境分析部６２が前記対応の１つとして選択する場合を含む）環境画像サンプルデータに対応する集音制御方針データに基づいて、マイクロフォンアレイ５を構成する各マイクロフォンユニット５１を制御する。

集音制御方針データは、１つまたは複数のマイクロフォンユニット５１をどのように起動及び制御して集音するかの方針データであり、例えば、どれか１つのマイクロフォンユニット５１を起動及び制御し、全方向性集音を行わせたり、または、複数のマイクロフォンユニット５１を起動及び制御し、互いに連携させ指向性集音を行うなどである。

集音制御部６３は、ディスプレイ手段８に表示された、環境画像サンプルデータに対応する画像が着用者により例えば画面をタッチされて選ばれると、その選ばれた前記環境画像サンプルデータに対応する集音制御方針データに基づいて、特定の１つまたは複数のマイクロフォンユニット５１を起動して集音をする。

集音制御部６３はまた、ディスプレイ手段８に表示された、イメージキャプチャー４から転送されたリアルタイムの画像のある１箇所がタッチされて発生した信号を受け取ると、タッチされた画像の中の方角にあわせ特定の位置と数のマイクロフォンユニット５１を起動し、互いに連携させマイクロフォンのアレイによる集音を行なうことができるようにも構成される。

出力処理部６５は、メモリにアクセスし、環境分析部６２により選択された環境画像サンプルデータに対応するサウンド処理方法データに基づいて、マイクロフォンアレイ５を構成する各マイクロフォンユニット５１からそれぞれ受信した各デジタルサウンドデータを変換して出力サウンドデータとして作成してスピーカ７に出力する。

サウンド処理方法データのサウンド処理方法は、例えば、アナログ／デジタル変換、ノイズリダクション、音声データ抽出処理など、音声信号から必要としないノイズを除去し、話し声信号に対してフィルタリング処理を実行し増幅出力することによって、信号対雑音比（ＳＮＲ）がよいサウンドデータを得ることができ、スピーカー７に処理されたサウンドデータを出力する。

集音制御部６３が、ディスプレイ手段８に表示された、イメージキャプチャー４から転送されたリアルタイムの画像のある１箇所がタッチされて発生した信号を受け取って、タッチされた画像の中の方角にあわせ特定の位置と数のマイクロフォンユニット５１を起動し集音した際、出力処理部６５は、集音した音声信号に対してアナログ／デジタル変換とノイズリダクションを行うほか、さらに、デジタルサウンドデータに変換された音声信号に対してビームフォーミングによるフィルタリング処理と、音声データ抽出処理と、によって、着用者が目的とする画像の中の方角に対応するサウンドデータを得ることができる。

上記ノイズリダクションや音声データ抽出処理、ビームフォーミングによるフィルタリング処理に関しては、従来の技術を応用することができるので、ここでは詳しい説明を省略する。

ディスプレイ手段８は、リモートコントローラー８１とタッチパネルユニット８２とを有している。リモートコントローラー８１には、切替可能な環境集音モード８１１と指向性集音モード８１２がある。リモートコントローラー８１を操作することにより環境集音モード８１１が起動されると、集音処理装置６の制御によりタッチパネルユニット８２には全部の環境画像サンプルデータにそれぞれ対応する画像、もしくは、分析されたデジタルイメージデータに対応する１つまたは複数の前記環境画像サンプルデータにそれぞれ対応する画像が表示され、そして、画像が複数ある場合には着用者がタッチパネルユニット８２に表示された複数の前記画像から１つを選択して集音処理装置６に対応する信号を送信する。

一方、リモートコントローラー８１を操作することにより指向性集音モード８１２が起動されると、集音処理装置６の制御によりイメージキャプチャー４からの画像がリアルタイムでタッチパネルユニット８２に表示されるように転送され、着用者がタッチパネルユニット８２に表示される画像にあるいずれかの１箇所をタッチして、集音処理装置６にそのタッチ位置に対応する信号を送信する。

本発明の補聴器システム２００を使用する際、着用者は装身具３を頭部に装着し、スピーカー７を両耳につけて、ディスプレイ手段８を所持する。システムの起動後、イメージキャプチャー４はすぐには起動せず、先に集音処理装置６が１つのマイクロフォンユニット５１を起動及び制御して全方向性集音を行い、得られた音声信号から話し声を検出した場合のみ、イメージキャプチャー４を起動して着用者の前方の視野を撮影してデジタルイメージデータに変換する。集音処理装置６の環境分析部６２は、受信した前記デジタルイメージデータを分析し、類似度が一定の閾値を越えた１つまたは複数の環境画像サンプルデータを選択し、さらに、選択された全ての前記環境画像サンプルデータにそれぞれ対応する集音制御方針データ及びサウンド処理方法データを選び出す。

リモートコントローラー８１を操作することにより環境集音モード８１１が起動され、かつ、集音処理装置６が手動選択モード６２１に切り替えられていると、集音処理装置６の制御により全部の前記環境画像サンプルデータにそれぞれ対応する画像がタッチパネルユニット８２に表示され、着用者に選択させる。一方、集音処理装置６が自動選択モード６２２に切り替えられていると、集音処理装置６の環境分析部６２が上記選択された全ての前記環境画像サンプルデータにそれぞれ対応する画像をタッチパネルユニット８２に表示されるように転送する。この時、上記選択された前記環境画像サンプルデータが複数である場合は、着用者はその場の状況に応じて、タッチパネユニット８２に表示された複数の画像から、一番適している１つを選択して集音処理装置６に信号を送信することに応じて、集音処理装置６の環境分析部６２は着用者により選択された前記画像に対応する前記環境画像サンプルデータを前記対応の１つとして選択し、そして、集音制御部６３は、前記対応の１つに対応する前記集音制御方針データに基づいて、特定の位置と数のマイクロフォンユニット５１を起動し集音する。そして、出力処理部６５は、マイクロフォンユニット５１によって集音された前記デジタルサウンドデータに対して音声データ抽出処理をし、処理された前記デジタルサウンドデータを前記出力サウンドデータに作成し、スピーカ７に出力させる。

リモートコントローラー８１を操作することにより指向性集音モード８１２が起動されると、集音処理装置６の制御によりイメージキャプチャー４からの画像がリアルタイムでタッチパネルユニット８２に表示されるように転送される。この時、着用者は目的とするタッチパネルユニット８２に表示されている画像にある１箇所をタッチし、集音処理装置６にそのタッチ位置に対応する信号を送信する。それに応じて、集音処理装置６の集音制御部６３及び出力処理部６５は、該１箇所に対応する方角に向けて集音するようにマイクロフォンアレイ５を制御すると共に、該１箇所に対応する方角からの音がスピーカー７に出力されるよう、集音したデジタルサウンドデータに対してビームフォーミングによるフィルタリング処理を実行して出力サウンドデータを作成し、スピーカ７に出力させる。

本実施例では、集音処理装置６は、装身具３に設置されており、着用者が所持しているディスプレイ手段８と無線通信技術によって接続されている。しかし、本発明の別の実施形態では、集音処理装置６を装身具３に設置するのではなく、そのかわりに、集音処理装置６をディスプレイ手段８に設置することで、装身具３に設置されている電子部品の数量をおさえ、軽量化により着用者の負担を減らすことができる。

また、本発明のさらに別の実施形態では、ディスプレイ手段８をプロジェクターに変え、装身具３に設置し、かつ、装身具３のレンズ３２に画像を投写表示することができるように構成すれば、複数の前記環境画像サンプルデータに対応する画像やイメージキャプチャー４からの画像をレンズ３２に表示し、着用者が視線入力または他の入力手段によって、複数の前記環境画像サンプルデータに対応する画像の選択やイメージキャプチャー４からの画像の一箇所を選ぶことができる。

本発明のさらに別の実施形態では、ディスプレイ手段８を透明液晶パネルに変えることもできる。この場合、ディスプレイ手段８は着用者の目の前の装身具３のレンズ３２に設置して使う。

さらに、本発明の他の実施形態において、ディスプレイ手段８の存在は必要ではなく、集音処理装置６は、デジタルイメージデータを分析し、複数の前記環境サンプルデータにおいて類似度が最も高い前記環境画像サンプルデータを選択し、対応する前記集音制御方針データに基づいて、マイクロフォンアレイ５を起動及び制御し集音を行えるので、ディスプレイ手段８での選択を必要としない。

以上により、本発明に係る補聴器システムは、集音処理装置６のメモリに保存されている複数の環境画像サンプルデータと、各前記環境画像サンプルデータにそれぞれ対応する複数の集音制御方針データと、各前記環境画像サンプルデータにそれぞれ対応する複数のサウンド処理方法データと、の構成により、及び、イメージキャプチャー４が撮影した着用者の前方の視野を分析し、類似度が一定の閾値を越えた１つまたは複数の前記環境画像サンプルデータを選び出す構成により、着用者がいる環境の音源パターンをより正確に識別でき、また、着用者はディスプレイ手段８を操作し、自ら一番適している前記環境画像サンプルデータに対応する画像を選ぶこともできる。さらに、着用者はディスプレイ手段８を操作して指向性集音モード８１２を起動することにより、イメージキャプチャー４から転送されたリアルタイムの画像のある１箇所をタッチし、集音処理装置６がビームフォーミング技術によって特定の方角を集音することもでき、使用上便利である。

以上、本発明の好ましい実施形態を説明したが、本発明はこれらに限定されるものではなく、最も広い解釈の精神および範囲内に含まれる様々な構成として、全ての修飾および均等な構成を包含するものとする。

上記構成により、本発明の補聴器システムは、着用者がいる環境の音源パターンをより正確に識別し、適宜な集音制御方針を起動することができ、即ち、着用者の周囲の状況に応じて集音方法を変更しスピーカーに出力させることができるため、着用者が従来の補聴器を着用しても聞き取りが不便で困難であった環境の対応が可能な補聴器システムを提供することができる。

２００ 補聴器システム
３ 装身具
３１ フロントサポーター
３２ レンズ
３３ サイドサポーター
４ イメージキャプチャー
５ マイクロフォンアレイ
５１ マイクロフォンユニット
６ 集音処理装置
６１ 起動制御部
６２ 環境分析部
６２１ 手動選択モード
６２２ 自動選択モード
６３ 集音制御部
６５ 出力処理部
７ スピーカー
８ ディスプレイ手段
８１ リモートコントローラー
８１１ 環境集音モード
８１２ 指向性集音モード
８２ タッチパネルユニット

Claims (9)

1. 着用者の前方の視野を撮影してデジタルイメージデータに変換するイメージキャプチャーと、
   それぞれ独立して周囲の音を収集してデジタルサウンドデータに変換する複数のマイクロフォンユニットにより構成されたマイクロフォンアレイと、
   前記イメージキャプチャー及び前記マイクロフォンアレイに信号的に接続して前記イメージキャプチャー及び各前記マイクロフォンユニットから受信した前記デジタルイメージデータ及び各前記デジタルサウンドデータに基づいて出力サウンドデータを作成して出力する集音処理装置と、
   前記集音処理装置に信号的に接続して前記出力サウンドデータを受信して対応の音に変換して出力するスピーカーと、を備える補聴器システムであって、
   前記集音処理装置は、
   複数の環境画像サンプルデータと、各前記環境画像サンプルデータにそれぞれ対応する複数の集音制御方針データと、各前記環境画像サンプルデータにそれぞれ対応する複数のサウンド処理方法データと、が保存されているメモリと、
   前記メモリにアクセスし、前記イメージキャプチャーから受信した前記デジタルイメージデータを分析して複数の前記環境画像サンプルデータから対応の１つを選択する環境分析部と、
   前記メモリにアクセスし、前記環境分析部により選択された前記環境画像サンプルデータに対応する前記集音制御方針データに基づいて、前記マイクロフォンアレイを構成する各前記マイクロフォンユニットを制御する集音制御部と、
   前記メモリにアクセスし、前記環境分析部により選択された前記環境画像サンプルデータに対応する前記サウンド処理方法データに基づいて、前記マイクロフォンアレイを構成する各前記マイクロフォンユニットからそれぞれ受信した各前記デジタルサウンドデータを変換して前記出力サウンドデータとして作成して前記スピーカーに出力する出力処理部と、
   を有していることを特徴とする補聴器システム。
2. 前記集音処理装置に信号的に接続して画像を表示できるディスプレイ手段を更に備え、
   前記集音処理装置は、前記環境分析部が前記イメージキャプチャーから受信した前記デジタルイメージデータを分析する際、複数の前記環境画像サンプルデータにおいて類似度が一定の閾値を越えた複数の前記環境画像サンプルデータに対応する画像を前記ディスプレイ手段に表示させるように送信し、着用者が前記ディスプレイ手段に表示された複数の前記画像から１つを選択して前記集音処理装置に送信することに応じて、前記集音処理装置の前記環境分析部は着用者により選択された前記画像に対応する前記環境画像サンプルデータを前記対応の１つとして選択するように構成されることを特徴とする請求項１に記載の補聴器システム。
3. 前記集音処理装置は、着用者により切替可能な手動選択モードと自動選択モードとの２種類の制御モードがあり、
   前記手動選択モードに切り替えられると、全部の前記環境画像サンプルデータにそれぞれ対応する画像を前記ディスプレイ手段に表示させるように送信し、
   前記自動選択モードに切り替えられると、前記環境分析部が前記イメージキャプチャーから受信した前記デジタルイメージデータを分析する際、着用者が手動で選択できるように複数の前記環境画像サンプルデータにおいて類似度が一定の閾値を越えた複数の前記環境画像サンプルデータに対応する画像を前記ディスプレイ手段に表示させるように送信するように構成されることを特徴とする請求項２に記載の補聴器システム。
4. 前記集音処理装置は、起動制御部を更に有しており、
   前記起動制御部は少なくとも１つの前記マイクロフォンユニットを起動し、
   前記出力処理部が該起動されたマイクロフォンユニットからの前記デジタルサウンドデータを分析して人間の話し声を検出すると、前記環境分析部を起動するように構成されることを特徴とする請求項２または請求項３に記載の補聴器システム。
5. 着用者が着用可能な装身具を更に備え、前記イメージキャプチャー及び前記マイクロフォンアレイは該装身具に取り付けられていることを特徴とする請求項２または請求項３に記載の補聴器システム。
6. 前記装身具は眼鏡であり、前記ディスプレイ手段は、前記眼鏡のレンズに画像を投写表示するプロジェクターを有していることを特徴とする請求項５に記載の補聴器システム。
7. 前記装身具は眼鏡であり、前記ディスプレイ手段は、前記眼鏡のレンズに設置される透明液晶パネルを有していることを特徴とする請求項５に記載の補聴器システム。
8. 前記ディスプレイ手段は、リモートコントローラーとタッチパネルユニットとを有しており、
   前記リモートコントローラーを操作することにより環境集音モードが起動されると、前記タッチパネルユニットには全部の前記環境画像サンプルデータにそれぞれ対応する画像が表示され、着用者が前記タッチパネルユニットに表示された複数の前記画像から１つを選択して前記集音処理装置に送信することに応じて、前記集音処理装置の前記環境分析部は着用者により選択された前記画像に対応する前記環境画像サンプルデータを前記対応の１つとして選択するように構成されることを特徴とする請求項５に記載の補聴器システム。
9. 前記リモートコントローラーを操作することにより指向性集音モードが起動されると、前記集音処理装置の制御により前記イメージキャプチャーからの画像がリアルタイムで前記タッチパネルユニットに表示されるように転送され、着用者が前記タッチパネルユニットに表示される画像にあるいずれかの１箇所をタッチすると、前記集音処理装置の前記集音制御部及び前記出力処理部は、該１箇所に対応する方角に向けて集音するように前記マイクロフォンアレイを制御すると共に、該１箇所に対応する方角からの音が前記スピーカーから出力されるよう、集音した前記デジタルサウンドデータに対してビームフォーミングによるフィルタリング処理を実行して前記出力サウンドデータを作成することを特徴とする請求項８に記載の補聴器システム。

Images