JP6017858B2 - 電子機器及び音出力方法 - Google Patents

Description

本発明は、音源データの音を出力する電子機器及び音出力方法に関する。

従来、電子機器から出力される音をイヤホン経由でユーザへ提供する技術が知られている。例えば、携帯型音楽再生機、又は耳鳴りを軽減させる装置等が知られている（例えば、特許文献１参照）。

特開平１０−０８００００号公報

しかしながら、ユーザは、電子機器から出力される音をイヤホン経由で聞いている場合、周囲の音を聞き取りにくかった。

本発明は、音源データの再生音をイヤホン経由で出力している際に、ユーザが周囲の音を聞き取れる電子機器及び音出力方法を提供することを目的とする。

本発明に係る電子機器は、音源データを記憶する記憶部と、前記音源データの音を再生する再生部と、外部の音を集音する集音部と、前記再生部により再生された音に対して、前記集音部により集音された音をミキシングするミキシング部と、前記ミキシング部によりミキシングされた音をイヤホンに対して出力する出力部と、を備える。

また、本発明に係る電子機器は、前記記憶部に記憶されている複数の音源データから、前記再生部により再生させる音源データを選択する選択部を備えることが好ましい。

また、前記ミキシング部は、前記集音部により集音された音の大きさに応じて、前記再生部により再生された音に対してミキシングする音の大きさを調整することが好ましい。

また、本発明に係る電子機器は、予め設けられている複数のモードのうち、いずれのモードであるかを判定する判定部を備え、前記ミキシング部は、前記判定部により判定されたモードに応じて、前記ミキシングする音の大きさを調整することが好ましい。

また、本発明に係る電子機器は、前記音源データが再生された場合に、当該音源データの種別に基づいて、当該種別に対応付けられているモードを設定する設定部を備えることが好ましい。

また、本発明に係る電子機器は、前記音源データのそれぞれに対して、前記種別を指定する入力を受け付ける受付部を備えることが好ましい。

また、前記複数のモードは、耳鳴り低減モードを含み、前記ミキシング部は、前記耳鳴り低減モードの場合、前記集音部により集音された音を、当該音の大きさによらず、前記再生部により再生された音に対してミキシングすることが好ましい。

また、前記複数のモードは、第１の移動モード及び第２の移動モードを含み、前記ミキシング部は、前記第１の移動モードの場合、前記集音部により集音された音を、当該音の大きさによらず、前記再生部により再生された音に対してミキシングし、前記第２の移動モードの場合、前記集音部により集音された音が小さいとき、前記再生部により再生された音に対するミキシングの比率を小さくすることが好ましい。

また、本発明に係る電子機器は、加速度センサと、前記加速度センサにより検出された加速度に応じて前記モードを設定する設定部と、を備えることが好ましい。

また、本発明に係る電子機器は、位置情報を取得する測位部と、前記測位部により取得された位置情報に応じて前記モードを設定する設定部と、を備えることが好ましい。

また、本発明に係る電子機器は、加速度センサと、位置情報を取得する測位部と、前記加速度センサにより検出された加速度、及び前記測位部により取得された位置情報に応じて前記モードを設定する設定部と、を備えることが好ましい。

また、本発明に係る電子機器は、前記集音された音の大きさに応じたミキシングの比率を、指示入力に基づいて更新する更新部を備えることが好ましい。

また、前記ミキシング部は、前記再生部により再生された音の大きさに応じて、前記ミキシングする音の大きさを変更することが好ましい。

本発明に係る音出力方法は、音源データを記憶する記憶部と、前記音源データの音を再生する再生部と、を備える電子機器が音を出力する音出力方法であって、外部の音を集音する集音ステップと、前記再生部により再生された音に対して、前記集音ステップにおいて集音された音をミキシングするミキシングステップと、前記ミキシングステップにおいてミキシングされた音をイヤホンに対して出力する出力ステップと、を含む。

本発明によれば、電子機器が音源データの再生音をイヤホン経由で出力している際に、ユーザが周囲の音を聞き取れる。

実施形態に係るスマートフォンの外観を示す斜視図である。 実施形態に係るスマートフォンの外観を示す正面図である。 実施形態に係るスマートフォンの外観を示す背面図である。 実施形態に係るスマートフォンの構成を示すブロック図である。 実施形態に係るコントローラの詳細な機能を示すブロック図である。 実施形態に係る集音部に入力された音の大きさに対して出力される音の大きさを例示する図である。 実施形態に係る音源データを再生する処理を示すフローチャートである。

本発明を実施するための実施形態を、図面を参照しつつ詳細に説明する。以下では、電子機器の一例として、スマートフォンについて説明する。

図１から図３を参照しながら、実施形態に係るスマートフォン１の外観について説明する。図１から図３に示すように、スマートフォン１は、ハウジング２０を有する。ハウジング２０は、フロントフェイス１Ａと、バックフェイス１Ｂと、サイドフェイス１Ｃ１〜１Ｃ４とを有する。フロントフェイス１Ａは、ハウジング２０の正面である。バックフェイス１Ｂは、ハウジング２０の背面である。サイドフェイス１Ｃ１〜１Ｃ４は、フロントフェイス１Ａとバックフェイス１Ｂとを接続する側面である。以下では、サイドフェイス１Ｃ１〜１Ｃ４を、どの面であるかを特定することなく、サイドフェイス１Ｃと総称することがある。

スマートフォン１は、タッチスクリーンディスプレイ２と、ボタン３Ａ〜３Ｃと、照度センサ４と、近接センサ５と、レシーバ７と、マイク８と、カメラ１２とをフロントフェイス１Ａに有する。スマートフォン１は、カメラ１３をバックフェイス１Ｂに有する。スマートフォン１は、ボタン３Ｄ〜３Ｆと、外部インターフェイス１４とをサイドフェイス１Ｃに有する。以下では、ボタン３Ａ〜３Ｆを、どのボタンであるかを特定することなく、ボタン３と総称することがある。

タッチスクリーンディスプレイ２は、ディスプレイ２Ａと、タッチスクリーン２Ｂとを有する。ディスプレイ２Ａは、液晶ディスプレイ（Ｌｉｑｕｉｄ Ｃｒｙｓｔａｌ Ｄｉｓｐｌａｙ）、有機ＥＬパネル（Ｏｒｇａｎｉｃ Ｅｌｅｃｔｒｏ−Ｌｕｍｉｎｅｓｃｅｎｃｅ ｐａｎｅｌ）、又は無機ＥＬパネル（Ｉｎｏｒｇａｎｉｃ Ｅｌｅｃｔｒｏ−Ｌｕｍｉｎｅｓｃｅｎｃｅ ｐａｎｅｌ）等の表示デバイスを備える。ディスプレイ２Ａは、文字、画像、記号又は図形等を表示する。

タッチスクリーン２Ｂは、タッチスクリーンディスプレイ２に対する指、又はスタイラスペン等の接触を検出する。タッチスクリーン２Ｂは、複数の指、又はスタイラスペン等がタッチスクリーンディスプレイ２に接触した位置を検出することができる。

タッチスクリーン２Ｂの検出方式は、静電容量方式、抵抗膜方式、表面弾性波方式（又は超音波方式）、赤外線方式、電磁誘導方式、及び荷重検出方式等の任意の方式でよい。以下では、説明を簡単にするため、タッチスクリーン２Ｂがタッチスクリーンディスプレイ２に対する接触を検出する指、又はスタイラスペン等を単に「指」ということがある。

スマートフォン１は、タッチスクリーン２Ｂにより検出された接触、接触位置、接触時間又は接触回数に基づいてジェスチャの種別を判別する。ジェスチャは、タッチスクリーンディスプレイ２に対して行われる操作である。スマートフォン１によって判別されるジェスチャには、タッチ、ロングタッチ、リリース、スワイプ、タップ、ダブルタップ、ロングタップ、ドラッグ、フリック、ピンチイン、ピンチアウト等が含まれる。

タッチは、タッチスクリーンディスプレイ２（例えば、表面）に指が接触するジェスチャである。スマートフォン１は、タッチスクリーンディスプレイ２に指が接触するジェスチャをタッチとして判別する。ロングタッチとは、タッチスクリーンディスプレイ２に指が一定時間以上接触するジェスチャである。スマートフォン１は、タッチスクリーンディスプレイ２に指が一定時間以上接触するジェスチャをロングタッチとして判別する。

リリースは、指がタッチスクリーンディスプレイ２から離れるジェスチャである。スマートフォン１は、指がタッチスクリーンディスプレイ２から離れるジェスチャをリリースとして判別する。スワイプは、指がタッチスクリーンディスプレイ２上に接触したままで移動するジェスチャである。スマートフォン１は、指がタッチスクリーンディスプレイ２上に接触したままで移動するジェスチャをスワイプとして判別する。

タップは、タッチに続いてリリースをするジェスチャである。スマートフォン１は、タッチに続いてリリースをするジェスチャをタップとして判別する。ダブルタップは、タッチに続いてリリースをするジェスチャが２回連続するジェスチャである。スマートフォン１は、タッチに続いてリリースをするジェスチャが２回連続するジェスチャをダブルタップとして判別する。

ロングタップは、ロングタッチに続いてリリースをするジェスチャである。スマートフォン１は、ロングタッチに続いてリリースをするジェスチャをロングタップとして判別する。ドラッグは、移動可能なオブジェクトが表示されている領域を始点としてスワイプをするジェスチャである。スマートフォン１は、移動可能なオブジェクトが表示されている領域を始点としてスワイプをするジェスチャをドラッグとして判別する。

フリックは、タッチに続いて指が一方方向へ高速で移動しながらリリースするジェスチャである。スマートフォン１は、タッチに続いて指が一方方向へ高速で移動しながらリリースするジェスチャをフリックとして判別する。フリックは、指が画面の上方向へ移動する上フリック、指が画面の下方向へ移動する下フリック、指が画面の右方向へ移動する右フリック、指が画面の左方向へ移動する左フリック等を含む。

ピンチインは、複数の指が互いに近付く方向にスワイプするジェスチャである。スマートフォン１は、複数の指が互いに近付く方向にスワイプするジェスチャをピンチインとして判別する。ピンチアウトは、複数の指が互いに遠ざかる方向にスワイプするジェスチャである。スマートフォン１は、複数の指が互いに遠ざかる方向にスワイプするジェスチャをピンチアウトとして判別する。

スマートフォン１は、タッチスクリーン２Ｂを介して判別するこれらのジェスチャに従って動作を行う。したがって、利用者にとって直感的で使いやすい操作性が実現される。判別されるジェスチャに従ってスマートフォン１が行う動作は、タッチスクリーンディスプレイ２に表示されている画面に応じて異なる。

図４は、スマートフォン１の構成を示すブロック図である。スマートフォン１は、タッチスクリーンディスプレイ２と、ボタン３と、照度センサ４と、近接センサ５と、通信ユニット６と、レシーバ７と、マイク８と、ストレージ９と、コントローラ１０と、カメラ１２及び１３と、外部インターフェイス１４と、加速度センサ１５と、方位センサ１６と、回転検出センサ１７とを有する。

タッチスクリーンディスプレイ２は、上述したように、ディスプレイ２Ａと、タッチスクリーン２Ｂとを有する。ディスプレイ２Ａは、文字、画像、記号、又は図形等を表示する。タッチスクリーン２Ｂは、ジェスチャを検出する。

ボタン３は、利用者によって操作される。ボタン３は、ボタン３Ａ〜ボタン３Ｆを有する。コントローラ１０はボタン３と協働することによってボタンに対する操作を検出する。ボタンに対する操作は、例えば、クリック、ダブルクリック、プッシュ、及びマルチプッシュである。

例えば、ボタン３Ａ〜３Ｃは、ホームボタン、バックボタン又はメニューボタンである。例えば、ボタン３Ｄは、スマートフォン１のパワーオン／オフボタンである。ボタン３Ｄは、スリープ／スリープ解除ボタンを兼ねてもよい。例えば、ボタン３Ｅ及び３Ｆは、音量ボタンである。

照度センサ４は、照度を検出する。例えば、照度とは、光の強さ、明るさ、輝度等である。照度センサ４は、例えば、ディスプレイ２Ａの輝度の調整に用いられる。

近接センサ５は、近隣の物体の存在を非接触で検出する。近接センサ５は、例えば、タッチスクリーンディスプレイ２が顔に近付けられたことを検出する。

通信ユニット６は、無線により通信する。通信ユニット６によって行われる通信方式は、無線通信規格である。例えば、無線通信規格として、２Ｇ、３Ｇ、４Ｇ等のセルラーフォンの通信規格がある。例えば、セルラーフォンの通信規格としては、ＬＴＥ（Ｌｏｎｇ Ｔｅｒｍ Ｅｖｏｌｕｔｉｏｎ）、Ｗ−ＣＤＭＡ、ＣＤＭＡ２０００、ＰＤＣ、ＧＳＭ（登録商標）、ＰＨＳ（Ｐｅｒｓｏｎａｌ Ｈａｎｄｙ−ｐｈｏｎｅ Ｓｙｓｔｅｍ）等がある。例えば、無線通信規格として、ＷｉＭＡＸ（Ｗｏｒｌｄｗｉｄｅ Ｉｎｔｅｒｏｐｅｒａｂｉｌｉｔｙ ｆｏｒ Ｍｉｃｒｏｗａｖｅ Ａｃｃｅｓｓ）、ＩＥＥＥ８０２．１１、Ｂｌｕｅｔｏｏｔｈ（登録商標）、ＩｒＤＡ、ＮＦＣ（Ｎｅａｒ Ｆｉｅｌｄ Ｃｏｍｍｕｎｉｃａｔｉｏｎ）等がある。通信ユニット６は、上述した通信規格の１つ又は複数をサポートしていてもよい。

レシーバ７は、コントローラ１０から送信される音信号を音として出力する。マイク８は、利用者又は周囲の音を音信号へ変換してコントローラ１０へ送信する。なお、スマートフォン１は、レシーバ７に加えて、スピーカをさらに有してもよい。スマートフォン１は、レシーバ７に代えて、スピーカをさらに有してもよい。

ストレージ９は、プログラム及びデータを記憶する。また、ストレージ９は、コントローラ１０の処理結果を一時的に記憶する作業領域としても利用される。ストレージ９は、半導体記憶デバイス、及び磁気記憶デバイス等の任意の記憶デバイスを含んでよい。また、ストレージ９は、複数の種類の記憶デバイスを含んでよい。また、ストレージ９は、メモリカード等の可搬の記憶媒体と、記憶媒体の読み取り装置との組み合わせを含んでよい。

ストレージ９に記憶されるプログラムには、フォアグランド又はバックグランドで実行されるアプリケーションと、アプリケーションの動作を支援する制御プログラムとが含まれる。アプリケーションは、例えば、ディスプレイ２Ａに所定の画面を表示させ、タッチスクリーン２Ｂによって検出されるジェスチャに応じた処理をコントローラ１０に実行させる。制御プログラムは、例えば、ＯＳである。アプリケーション及び制御プログラムは、通信ユニット６による無線通信又は記憶媒体を介してストレージ９にインストールされてもよい。

ストレージ９は、例えば、制御プログラム９Ａ、メールアプリケーション９Ｂ、ブラウザアプリケーション９Ｃ、設定データ９Ｚを記憶する。メールアプリケーション９Ｂは、電子メールの作成、送信、受信、及び表示等のための電子メール機能を提供する。ブラウザアプリケーション９Ｃは、ＷＥＢページを表示するためのＷＥＢブラウジング機能を提供する。テーブル９Ｄは、キーアサインテーブル等の各種テーブルが格納されている。配置パターンデータベース９Ｅは、ディスプレイ２Ａに表示されるアイコン等の配置パターンが格納されている。設定データ９Ｚは、スマートフォン１の動作に関する各種の設定機能を提供する。

制御プログラム９Ａは、スマートフォン１を稼働させるための各種制御に関する機能を提供する。制御プログラム９Ａは、例えば、通信ユニット６、レシーバ７、及びマイク８等を制御することによって、通話を実現させる。制御プログラム９Ａが提供する機能には、タッチスクリーン２Ｂを介して検出されたジェスチャに応じて、ディスプレイ２Ａに表示されている情報を変更する等の各種制御を行う機能が含まれる。なお、制御プログラム９Ａが提供する機能は、メールアプリケーション９Ｂ等の他のプログラムが提供する機能と組み合わせて利用されることがある。

コントローラ１０は、例えば、ＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）である。コントローラ１０は、通信ユニット６等の他の構成要素が統合されたＳｏＣ（Ｓｙｓｔｅｍ−ｏｎ−ａ−ｃｈｉｐ）等の集積回路であってもよい。コントローラ１０は、スマートフォン１の動作を統括的に制御して各種の機能を実現する。

具体的には、コントローラ１０は、ストレージ９に記憶されているデータを必要に応じて参照しつつ、ストレージ９に記憶されているプログラムに含まれる命令を実行して、ディスプレイ２Ａ及び通信ユニット６等を制御することによって各種機能を実現する。コントローラ１０は、タッチスクリーン２Ｂ、ボタン３、加速度センサ１５等の各種検出部の検出結果に応じて、制御を変更することもある。

コントローラ１０は、例えば、制御プログラム９Ａを実行することにより、タッチスクリーン２Ｂを介して検出されたジェスチャに応じて、ディスプレイ２Ａに表示されている情報を変更する等の各種制御を実行する。

カメラ１２は、フロントフェイス１Ａに面している物体を撮影するインカメラである。カメラ１３は、バックフェイス１Ｂに面している物体を撮影するアウトカメラである。

外部インターフェイス１４は、他の装置が接続される端子である。外部インターフェイス１４は、ＵＳＢ（Ｕｎｉｖｅｒｓａｌ Ｓｅｒｉａｌ Ｂｕｓ）、ＨＤＭＩ（Ｈｉｇｈ−Ｄｅｆｉｎｉｔｉｏｎ Ｍｕｌｔｉｍｅｄｉａ Ｉｎｔｅｒｆａｃｅ）、ライトピーク（サンダーボルト）、イヤホンマイクコネクタのような汎用的な端子であってもよい。外部インターフェイス１４は、Ｄｏｃｋコネクタのような専用に設計された端子でもよい。外部インターフェイス１４に接続される装置には、例えば、外部ストレージ、スピーカ、通信装置が含まれる。

加速度センサ１５は、スマートフォン１に働く加速度の方向及び大きさを検出する。方位センサ１６は、地磁気の向きを検出する。回転検出センサ１７は、スマートフォン１の回転を検出する。加速度センサ１５、方位センサ１６及び回転検出センサ１７の検出結果は、スマートフォン１の位置及び姿勢の変化を検出するために、組み合わせて利用される。

図５は、スマートフォン１におけるコントローラ１０の詳細な機能を示すブロック図である。

なお、外部インターフェイス１４には、イヤホン１９が接続可能であり、イヤホン１９が接続された場合、音は、レシーバ７又はスピーカに代えてイヤホン１９から出力される。
また、ストレージ９（記憶部）は、複数の音源データを記憶する。

コントローラ１０は、音源選択部１０１（選択部）と、音源種別受付部１０２（受付部）と、再生部１０３と、集音部１０４と、ミキシング部１０５と、出力部１０６と、測位部１０７と、モード設定部１０８（設定部）と、モード判定部１０９（判定部）と、ミキシング比率更新部１１０（更新部）とを備える。

音源選択部１０１は、ストレージ９に記憶されている複数の音源データから、再生部１０３により再生させる音源データを選択する。具体的には、例えば、ユーザからのタッチスクリーンディスプレイ２への操作入力に基づいて、あるいは所定のアプリケーションからの指示に基づいて音源データが選択される。

音源種別受付部１０２は、ストレージ９に記憶されている音源データのそれぞれに対して、種別を指定する入力を受け付け、音源データと対応付けて記憶する。この種別により、例えば、耳鳴り低減用の音源データであることが示される。耳鳴り低減用の音源データとは、例えば、マスカー音と呼ばれる、耳鳴りが起こっている状態にユーザを慣らすための音のデータである。

再生部１０３は、音源選択部１０１により選択された音源データの音を再生し、ミキシング部１０５へ提供する。

集音部１０４は、マイク８を介して、スマートフォン１の外部の音を集音し、ミキシング部１０５へ提供する。
なお、集音部１０４は、集音した音に対して、ノイズカット、周波数変更、スピード変更等の補正を行ってもよい。

ミキシング部１０５は、再生部１０３により再生された音に対して、集音部１０４により集音された音をミキシングする。
また、ミキシング部１０５は、集音部１０４により集音された音の大きさに応じて、再生部１０３により再生された音に対してミキシングする音の大きさを調整する。このとき、ミキシング部１０５は、モード判定部１０９により判定されたモードに応じて、ミキシングする音の大きさを調整する。

出力部１０６は、ミキシング部によりミキシングされた音をイヤホン１９に対して出力する。

測位部１０７は、ＧＰＳ（Ｇｌｏｂａｌ Ｐｏｓｉｔｉｏｎｉｎｇ Ｓｙｓｔｅｍ）によって、又は通信ユニット６を介して受信した基地局等の情報等に基づいて、スマートフォン１の位置情報を取得する。

モード設定部１０８は、ユーザからのタッチスクリーンディスプレイ２への操作入力に基づいて、スマートフォン１を指定されたモードに設定する。
また、モード設定部１０８は、音源データが再生された場合に、この音源データの種別に基づいて、当該種別に対応付けられているモードを設定する。

さらに、モード設定部１０８は、加速度センサ１５により検出された加速度情報、測位部１０７により取得された位置情報、又は両方の情報に応じて、スマートフォン１の移動状態を判別し、この移動状態に対応付けられているモードを設定する。
なお、モード設定部１０８によるモードの設定は、所定のタイミング又は周期的に行われることとしてよい。

モード判定部１０９は、予め設けられている複数のモードのうち、スマートフォン１が現在、モード設定部１０８によりいずれのモードに設定されているかを判定する。
複数のモードは、前述した耳鳴り低減用の音源データを再生部１０３に再生させるモードである耳鳴り低減モードを含む。ミキシング部１０５は、耳鳴り低減モードの場合、集音部１０４により集音された音を、再生部１０３により再生された音に対してミキシングする。

また、複数のモードは、ジョギング、ウォーキング又は車両を運転中等、周囲の音を聞きたい状態である第１の移動モードを含む。ミキシング部１０５は、第１の移動モードの場合、集音部１０４により集音された音を、再生部１０３により再生された音に対してミキシングする。

また、複数のモードは、乗り物に乗車中であるため、周囲の特別な音（例えば、電車のアナウンス音等）以外は聞かなくてよい状態である第２の移動モードを含む。ミキシング部１０５は、第２の移動モードの場合、集音部１０４により集音された音が大きいときには、再生部１０３により再生された音に対するミキシング量を行う一方で、集音された音が小さいときには、再生された音に対するミキシングを、行わない又は比率を小さくする。これにより、例えば、ユーザが電車に乗っているときに、アナウンス音等の比較的大きな音と推定される音がミキシングされ、不要な雑音であると推定される、アナウンス音等に比べて小さい音はミキシングされない。

図６は、マイク８へ入力されて集音された音の大きさに対して、ミキシング部１０５によってミキシングされた音、すなわちイヤホンから出力される音のうち再生された音を除いた音の大きさを例示する図である。

上記の耳鳴り低減モード又は第１移動モードの場合、出力の大きさは、破線のように入力の大きさに比例する。
一方、第２移動モードの場合、実線のように、集音された音が小さくなると、ミキシング量が少なくなり、集音される音の大きさが所定値Ａ１以下になると集音された音はミキシングされない。

ミキシング比率更新部１１０は、集音された音の大きさに応じたミキシング量の比率が既定されている設定データを、ユーザからの指示入力に基づいて更新する。
具体的には、例えば、図６に１点鎖線にて示すように、ミキシング比率更新部１１０は、第２の移動モードにおいて入力が所定値Ａ２以下になると集音された音をミキシングしなくするといった調整をユーザの指示入力に基づいて行い、設定データを更新する。

図７は、スマートフォン１において音源データを再生する処理を示すフローチャートである。

ステップＳ１において、コントローラ１０は、再生される音をイヤホンに出力するか否かを判定する。具体的には、コントローラ１０は、外部インターフェイス１４にイヤホン１９が接続されているか否かを判定する。この判定がＹＥＳの場合、処理はステップＳ２に移り、判定がＮＯの場合、処理はステップＳ５に移る。

ステップＳ２において、コントローラ１０のモード判定部１０９は、スマートフォン１が現在、外部の音をミキシングすべき特定のモードであるか否かを判定する。この判定がＹＥＳの場合、処理はステップＳ３に移り、判定がＮＯの場合、処理はステップＳ５に移る。

ステップＳ３において、コントローラ１０は、集音機能を起動する。そして、集音部１０４は、外部の音の集音を開始する。

ステップＳ４において、コントローラ１０は、ミキシング部１０５を起動し、音源データの再生音に対して集音した音をミキシングする設定を行う。このとき、モード判定部１０９は、スマートフォン１の現在のモードを判定し、ミキシング量を決定する。

ステップＳ５において、コントローラ１０の再生部１０３は、音源データを再生する。ステップＳ４においてミキシングの設定がされている場合、この再生音に対して集音した音がミキシングされて、イヤホンから出力される。

以上のように、本実施形態によれば、スマートフォン１は、音源データの再生音に対して、外部から集音した音をミキシングして、イヤホン１９へ出力する。したがって、ユーザは、イヤホン１９で音楽、又は耳鳴り低減用のマスキング音等の音を聞いているときに、周囲の音を聞き取れる。
ユーザは、例えば、ウォーキング時に音楽を聞きながら周囲の音も聞き取れ、安心して移動できる。また、ユーザは、耳鳴り治療用のマスキング音を再生中に周囲の音も聞き取れるので、違和感なく日常生活を阻害される心配が低減される。また、ユーザは、電車やバス等で音楽を聞きながら、アナウンスを聞き取ることができる。

また、スマートフォン１は、ストレージ９に記憶されている複数の音源データから再生音を任意に選択できる。例えば、耳鳴り低減用の機器では通常、パターンの決まったホワイトノイズ等が用いられるが、スマートフォン１のユーザは、任意の音源データを用いて同様の効果を得られる。

また、スマートフォン１は、集音された音の大きさに応じて、ミキシングする音の大きさを調整するので、ユーザにとって不要な音が省かれて利便性の向上が期待できる。

また、スマートフォン１は、予め複数のモードを設け、現在のモードに応じてミキシング量を調整できる。例えば、スマートフォン１は、耳鳴り低減モード、第１の移動モード、第２の移動モードのそれぞれに応じて、集音された音の大きさに応じた適切なミキシング量を決定できる。

また、スマートフォン１は、音源データの種類に基づいてモードを設定できる。したがって、ユーザが音源データを選択すると、例えば、耳鳴り低減用の音源データであることをスマートフォン１が特定し、ユーザがモード切り替え操作を行うことなく、適切なミキシングが行われる。
さらに、スマートフォン１は、音源データの種別をユーザから受け付けることができるので、ユーザは、特定の用途のために任意の音源を追加できる。

また、スマートフォン１は、加速度情報、測位情報、又は双方に基づいて移動状態を推定してモードを設定できるので、ユーザがモード切り替え操作を行うことなく、適切なミキシングが行われる。

また、スマートフォン１は、集音された音に対するミキシング量の比率を指示入力に基づいて更新できるので、ユーザの好みに合わせた適切なミキシングを行える。

以上、本発明の実施形態について説明したが、本発明は前述した実施形態に限るものではない。また、本発明の実施形態に記載された効果は、本発明から生じる最も好適な効果を列挙したに過ぎず、本発明による効果は、前述の実施形態に記載されたものに限定されるものではない。

図４及び図５に示したスマートフォン１の構成は一例であり、本発明の要旨を損なわない範囲において適宜変更してよい。

なお、前述の実施形態においては、集音される音の大きさに応じて、イヤホン１９から出力されるミキシングされた音の大きさを変更する例を提示したが、実施形態はこれに限定されない。
例えば、スマートフォン１は、イヤホン１９から出力される音源データの音の大きさに応じて、イヤホン１９から出力されるミキシングされる音の大きさを変更してもよい。具体的には、イヤホン１９から出力される音源データに基づく音の大きさが小さいときには、イヤホン１９で耳が塞がれている状態であっても、ユーザは外部の音をイヤホン１９越しに聞くことが可能であるため、スマートフォン１は、外部の音をミキシングしてイヤホン１９から出力しなくてもよい。

また、前述の実施形態では、電子機器の一例として、スマートフォンについて説明したが、電子機器は、スマートフォンに限定されない。例えば、電子機器は、モバイルフォン、携帯型パソコン、デジタルカメラ、メディアプレイヤ、電子書籍リーダ、ナビゲータ又はゲーム機等の携帯電子機器であってもよい。また、電子機器は、デスクトップパソコン、テレビ受像器等の据え置き型の電子機器であってもよい。

１ スマートフォン（電子機器）
９ ストレージ（記憶部）
１０ コントローラ
１４ 外部インターフェイス
１５ 加速度センサ
１９ イヤホン
１０１ 音源選択部（選択部）
１０２ 音源種別受付部（受付部）
１０３ 再生部
１０４ 集音部
１０５ ミキシング部
１０６ 出力部
１０７ 測位部
１０８ モード設定部（設定部）
１０９ モード判定部（判定部）
１１０ ミキシング比率更新部（更新部）

Claims (10)

1. 音源データを再生する再生部と、
   集音部と、
   前記再生部により再生された再生音に対して、前記集音部により集音された外部音をミキシングするミキシング部と、
   前記ミキシング部によりミキシングされた音を出力音として出力する出力部と、を備え、
   予め設けられている複数のモードのうち、いずれのモードであるかを判定する判定部を備え、
   前記ミキシング部は、前記集音部により集音された前記外部音の大きさ、及び前記判定部により判定されたモードに応じて、前記再生音に対してミキシングする前記外部音の大きさを調整し、
   前記音源データが再生された場合に、当該音源データの種別に基づいて、当該種別に対応付けられているモードを設定する設定部を備える
   電子機器。
2. 前記音源データのそれぞれに対して、前記種別を指定する入力を受け付ける受付部を備える
   請求項１に記載の電子機器。
3. 音源データを再生する再生部と、
   集音部と、
   前記再生部により再生された再生音に対して、前記集音部により集音された外部音をミキシングするミキシング部と、
   前記ミキシング部によりミキシングされた音を出力音として出力する出力部と、を備え、
   予め設けられている複数のモードのうち、いずれのモードであるかを判定する判定部を備え、
   前記ミキシング部は、前記集音部により集音された前記外部音の大きさ、及び前記判定部により判定されたモードに応じて、前記再生音に対してミキシングする前記外部音の大きさを調整し、
   前記複数のモードは、耳鳴り低減モードを含み、
   前記ミキシング部は、前記耳鳴り低減モードの場合、前記集音部により集音された前記外部音を、当該外部音の大きさによらず、前記再生部により再生された前記再生音に対してミキシングする
   電子機器。
4. 音源データを再生する再生部と、
   集音部と、
   前記再生部により再生された再生音に対して、前記集音部により集音された外部音をミキシングするミキシング部と、
   前記ミキシング部によりミキシングされた音を出力音として出力する出力部と、を備え、
   予め設けられている複数のモードのうち、いずれのモードであるかを判定する判定部を備え、
   前記ミキシング部は、前記集音部により集音された前記外部音の大きさ、及び前記判定部により判定されたモードに応じて、前記再生音に対してミキシングする前記外部音の大きさを調整し、
   前記複数のモードは、第１の移動モード及び第２の移動モードを含み、
   前記ミキシング部は、前記第１の移動モードの場合、前記集音部により集音された前記外部音を、当該外部音の大きさによらず、前記再生部により再生された前記再生音に対してミキシングし、前記第２の移動モードの場合、前記集音部により集音された前記外部音が小さいとき、前記再生部により再生された前記再生音に対するミキシングの比率を小さくする
   電子機器。
5. 加速度センサと、
   前記加速度センサにより検出された加速度に応じて前記モードを設定する設定部と、を備える
   請求項４に記載の電子機器。
6. 位置情報を取得する測位部と、
   前記測位部により取得された位置情報に応じて前記モードを設定する設定部と、を備える
   請求項４に記載の電子機器。
7. 加速度センサと、
   位置情報を取得する測位部と、
   前記加速度センサにより検出された加速度、及び前記測位部により取得された位置情報に応じて前記モードを設定する設定部と、を備える
   請求項４に記載の電子機器。
8. 音源データを再生する再生部を備える電子機器が音を出力する音出力方法であって、
   集音ステップと、
   前記再生部により再生された再生音に対して、前記集音ステップにおいて集音された外部音をミキシングするミキシングステップと、
   前記ミキシングステップにおいてミキシングされた音を出力音として出力する出力ステップと、を含み、
   予め設けられている複数のモードのうち、いずれのモードであるかを判定する判定ステップを含み、
   前記ミキシングステップにおいて、前記集音ステップで集音された前記外部音の大きさ、及び前記判定ステップで判定されたモードに応じて、前記再生音に対してミキシングする前記外部音の大きさを調整し、
   前記音源データが再生された場合に、当該音源データの種別に基づいて、当該種別に対応付けられているモードを設定する設定ステップを含む
   音出力方法。
9. 音源データを再生する再生部を備える電子機器が音を出力する音出力方法であって、
   集音ステップと、
   前記再生部により再生された再生音に対して、前記集音ステップにおいて集音された外部音をミキシングするミキシングステップと、
   前記ミキシングステップにおいてミキシングされた音を出力音として出力する出力ステップと、を含み、
   予め設けられている複数のモードのうち、いずれのモードであるかを判定する判定ステップを含み、
   前記ミキシングステップにおいて、前記集音ステップで集音された前記外部音の大きさ、及び前記判定ステップで判定されたモードに応じて、前記再生音に対してミキシングする前記外部音の大きさを調整し、
   前記複数のモードは、耳鳴り低減モードを含み、
   前記ミキシングステップにおいて、前記耳鳴り低減モードの場合、前記集音ステップで集音された前記外部音を、当該外部音の大きさによらず、前記再生部により再生された前記再生音に対してミキシングする
   音出力方法。
10. 音源データを再生する再生部を備える電子機器が音を出力する音出力方法であって、
    集音ステップと、
    前記再生部により再生された再生音に対して、前記集音ステップにおいて集音された外部音をミキシングするミキシングステップと、
    前記ミキシングステップにおいてミキシングされた音を出力音として出力する出力ステップと、を含み、
    予め設けられている複数のモードのうち、いずれのモードであるかを判定する判定ステップを含み、
    前記ミキシングステップにおいて、前記集音ステップで集音された前記外部音の大きさ、及び前記判定ステップで判定されたモードに応じて、前記再生音に対してミキシングする前記外部音の大きさを調整し、
    前記複数のモードは、第１の移動モード及び第２の移動モードを含み、
    前記ミキシングステップにおいて、前記第１の移動モードの場合、前記集音ステップで集音された前記外部音を、当該外部音の大きさによらず、前記再生部により再生された前記再生音に対してミキシングし、前記第２の移動モードの場合、前記集音ステップで集音された前記外部音が小さいとき、前記再生部により再生された前記再生音に対するミキシングの比率を小さくする
    音出力方法。
    

Images