WO2014061578A1

WO2014061578A1 - Electronic device and acoustic reproduction method

Info

Publication number: WO2014061578A1
Application number: PCT/JP2013/077737
Authority: WO
Inventors: 岸波　雄一郎; 康晴大西; 潤有吉
Original assignee: Ｎｅｃカシオモバイルコミュニケーションズ株式会社
Priority date: 2012-10-15
Filing date: 2013-10-11
Publication date: 2014-04-24

Abstract

Provided is the following electronic device. The electronic device is provided with: an acoustic reproduction unit which supplies an acoustic signal to an earphone provided with a built-in microphone; a control unit which controls the acoustic reproduction unit; a transfer function calculation unit which calculates transfer function data relating to a transfer function with the acoustic signal as an input and a signal picked up by the built-in microphone as an output; and a storage unit which stores user earhole data that is data relating to the transfer function when the earphone is inserted into an ear of a user. The control unit includes an insertion/removal determination unit which, on the basis of the transfer function data calculated by the transfer function calculation unit and the user earhole data, determines whether the earphone is in an inserted state or not. When the insertion/removal determination unit determines that the earphone is in the inserted state, and the volume setting of the acoustic reproduction unit exceeds a predetermined volume, the control unit notifies the user to that effect.

Description

電子機器、及び音響再生方法Electronic device and sound reproduction method

　［関連出願についての記載］
　本発明は、日本国特許出願：特願２０１２－２２７９１９号（２０１２年１０月１５日出願）に基づくものであり、同出願の全記載内容は引用をもって本書に組み込み記載されているものとする。
　本発明は、電子機器、及び音響再生方法に関する。特に、本発明は、イヤホンによる音響再生を制御する技術に関する。 [Description of related applications]
The present invention is based on a Japanese patent application: Japanese Patent Application No. 2012-227919 (filed on October 15, 2012), and the entire description of the application is incorporated herein by reference.
The present invention relates to an electronic device and a sound reproduction method. In particular, the present invention relates to a technique for controlling sound reproduction by an earphone.

　近年、携帯型音楽再生機器の普及により音楽が身近になった反面、イヤホン（以降、本明細書で「イヤホン」と言った場合、ヘッドホンも含んでいるものとする）で過大な音量の音を長時間聴くことによって生ずる難聴が世界的に問題となっている。聴感保護の観点から欧州を中心にイヤホンの最大音量についての規制が強まっている。 In recent years, music has become familiar due to the spread of portable music playback devices, but on the other hand, there is an excessive volume of sound with earphones (hereinafter referred to as “earphones” in this specification, including headphones). Hearing loss caused by listening for a long time is a global problem. From the viewpoint of hearing protection, regulations on the maximum volume of earphones are becoming stronger, especially in Europe.

　また、イヤホンが耳に装着されていない場合には、携帯型音楽再生機器の省電力化のために、再生を自動的に停止させることが望まれている。例えば、特許文献１には、イヤホンが耳に装着されていないことを検出した場合は、自動的に音楽等の音響の再生を停止することで、音楽再生中の再生動作の停止忘れによって生ずる無駄な電力消費を防止することが可能な技術が開示されている。 Also, when the earphone is not worn on the ear, it is desired to automatically stop the playback in order to save power of the portable music playback device. For example, in Patent Document 1, when it is detected that the earphone is not worn on the ear, it is a waste caused by forgetting to stop the reproduction operation during music reproduction by automatically stopping reproduction of sound such as music. A technique capable of preventing excessive power consumption is disclosed.

　特許文献１のイヤホンの挿抜判定では、内蔵マイクを備えたイヤホンを使用し、イヤホンに供給された再生信号と内蔵マイクが集音した信号とを信号比較部で比較し、不一致であれば、イヤホンが耳から外れているものと判定している。 In the earphone insertion / removal determination of Patent Document 1, an earphone provided with a built-in microphone is used, and a reproduction signal supplied to the earphone and a signal collected by the built-in microphone are compared by a signal comparison unit. Is determined to be out of the ear.

特開２００７－１６５９４０号公報JP 2007-165940 A

　尚、上記特許文献の全開示内容はその引用をもって本書に繰込み記載する。以下の分析は、本発明の観点から与えられる。 Note that the entire disclosure of the above patent document is incorporated herein by reference. The following analysis is given from the perspective of the present invention.

　しかしながら、特許文献１に開示されたイヤホンの挿抜判定では、イヤホンに供給される再生信号と内蔵マイクが集音した信号とを比較する信号比較回路（特許文献１の図３を参照）を設けることが必要となり、挿抜判定機能を簡易に搭載することが難しいという問題がある。 However, in the earphone insertion / removal determination disclosed in Patent Document 1, a signal comparison circuit (see FIG. 3 of Patent Document 1) for comparing the reproduction signal supplied to the earphone and the signal collected by the built-in microphone is provided. There is a problem that it is difficult to easily mount the insertion / extraction determination function.

　また、特許文献１では、イヤホンが耳に装着されていると判定した場合に、聴感保護のために音響再生を制御することに関しては何ら考慮されていない。 Also, in Patent Document 1, no consideration is given to controlling sound reproduction for hearing protection when it is determined that the earphone is worn on the ear.

　そこで、本発明は、イヤホンの挿抜判定機能を簡易に搭載し、イヤホンが耳に挿入されている場合の音響再生を最適化することに貢献できる電子機器を提供することを課題とする。 Therefore, an object of the present invention is to provide an electronic device that can be easily equipped with an earphone insertion / extraction determination function and can contribute to optimizing sound reproduction when the earphone is inserted into an ear.

　本発明の第１の視点によれば、内蔵マイクを備えたイヤホンに音響信号を供給する音響再生部と、前記音響再生部を制御する制御部と、前記音響信号を入力とし前記内蔵マイクで集音した信号を出力とする伝達関数の伝達関数データを算出する伝達関数算出部と、前記イヤホンをユーザの耳に挿入した際の前記伝達関数のデータであるユーザ耳孔データを格納する記憶部と、を備えた電子機器が提供される。ここで、前記制御部は、前記伝達関数算出部が算出した前記伝達関数データと前記ユーザ耳孔データに基づいて、前記イヤホンが挿入状態にあるか否かを判定する挿抜判定部を含み、前記挿抜判定部により前記イヤホンが挿入状態であると判定され、且つ前記音響再生部の音量設定が所定の音量を超えている場合には、前記音響再生部の音量設定が前記所定の音量を超えている旨を前記ユーザに通知する。 According to a first aspect of the present invention, an acoustic reproduction unit that supplies an acoustic signal to an earphone equipped with a built-in microphone, a control unit that controls the acoustic reproduction unit, and the acoustic signal as an input are collected by the built-in microphone. A transfer function calculation unit that calculates transfer function data of a transfer function that outputs a sound signal; a storage unit that stores user ear hole data that is data of the transfer function when the earphone is inserted into a user's ear; Is provided. Here, the control unit includes an insertion / extraction determination unit that determines whether or not the earphone is in an insertion state based on the transfer function data calculated by the transfer function calculation unit and the user ear hole data, When the determination unit determines that the earphone is in an inserted state and the volume setting of the sound reproduction unit exceeds a predetermined volume, the volume setting of the sound reproduction unit exceeds the predetermined volume This is notified to the user.

　本発明の第２の視点によれば、内蔵マイクを備えたイヤホンに音響信号を供給して、前記イヤホンにより音響再生する音響再生方法であり、以下の音響再生方法が提供される。即ち、該音響再生方法は、前記イヤホンをユーザの耳に挿入した際の前記音響信号を入力とし前記内蔵マイクで集音した信号を出力とする伝達関数のデータであるユーザ耳孔データを予め用意するステップを含む。また、該音響再生方法は、前記音響信号を入力とし前記内蔵マイクで集音した信号を出力とする伝達関数の伝達関数データを算出するステップを含む。また、該音響再生方法は、前記算出された前記伝達関数データと前記ユーザ耳孔データに基づいて、前記イヤホンが挿入状態にあるか否かを判定する挿抜判定ステップを含む。さらに、該音響再生方法は、前記挿抜判定ステップにおいて前記イヤホンが挿入状態であると判定され、且つ音響再生の音量設定が所定の音量を超えている場合には、前記音響再生の音量設定が前記所定の音量を超えている旨を前記ユーザに通知するステップを含む。 According to a second aspect of the present invention, there is provided an acoustic reproduction method in which an acoustic signal is supplied to an earphone provided with a built-in microphone and is reproduced by the earphone, and the following acoustic reproduction method is provided. That is, the sound reproduction method prepares in advance user ear hole data, which is transfer function data in which the sound signal when the earphone is inserted into the user's ear is input and the signal collected by the built-in microphone is output. Includes steps. Further, the sound reproduction method includes a step of calculating transfer function data of a transfer function having the sound signal as an input and a signal collected by the built-in microphone as an output. In addition, the sound reproduction method includes an insertion / extraction determination step of determining whether the earphone is in an insertion state based on the calculated transfer function data and the user ear hole data. Further, in the sound reproduction method, when the earphone is determined to be inserted in the insertion / extraction determination step, and the sound reproduction volume setting exceeds a predetermined volume, the sound reproduction volume setting is Notifying the user that the predetermined volume is exceeded.

　本発明の第３の視点によれば、内蔵マイクを備えたイヤホンに音響信号を供給して、前記イヤホンによる音響再生を制御するプログラムであって、以下のプログラムが提供される。即ち、該プログラムは、前記イヤホンをユーザの耳に挿入した際の前記音響信号を入力とし前記内蔵マイクで集音した信号を出力とする伝達関数のデータであるユーザ耳孔データを予め用意する処理を実行させる。また、該プログラムは、前記音響信号を入力とし前記内蔵マイクで集音した信号を出力とする伝達関数の伝達関数データを算出する処理を実行させる。また、該プログラムは、前記算出された前記伝達関数データと前記ユーザ耳孔データに基づいて、前記イヤホンが挿入状態にあるか否かを判定する挿抜判定処理を実行させる。また、該プログラムは、前記挿抜判定処理において前記イヤホンが挿入状態であると判定され、且つ音響再生の音量設定が所定の音量を超えている場合には、前記音響再生の音量設定が前記所定の音量を超えている旨を前記ユーザに通知する処理を実行させる。なお、プログラムは非トランジェントな記憶媒体に記憶することができる。 According to a third aspect of the present invention, there is provided a program for supplying an acoustic signal to an earphone having a built-in microphone and controlling sound reproduction by the earphone, and the following program is provided. That is, the program prepares in advance user ear data, which is transfer function data in which the acoustic signal when the earphone is inserted into the user's ear is input and the signal collected by the built-in microphone is output. Let it run. Further, the program executes a process of calculating transfer function data of a transfer function having the acoustic signal as an input and a signal collected by the built-in microphone as an output. The program also executes an insertion / extraction determination process for determining whether or not the earphone is in an insertion state based on the calculated transfer function data and the user ear hole data. In addition, the program determines that the earphone is in the insertion state in the insertion / extraction determination process, and if the sound reproduction volume setting exceeds a predetermined volume, the sound reproduction volume setting is the predetermined sound volume. A process of notifying the user that the volume has been exceeded is executed. The program can be stored in a non-transient storage medium.

　本発明の第１の視点によれば、イヤホンの挿抜判定機能を簡易に搭載し、イヤホンが耳に挿入されている場合の音響再生を最適化することに貢献できる電子機器を提供することが可能になる。 According to the first aspect of the present invention, it is possible to provide an electronic device which can easily contribute to optimizing sound reproduction when an earphone is inserted into an ear, with an earphone insertion / removal determination function easily installed. become.

第１の実施形態に係る電子機器の構成を示すブロック図である。It is a block diagram which shows the structure of the electronic device which concerns on 1st Embodiment. 図１の電子機器をユーザが装着した状態を示す図である。It is a figure which shows the state which the user mounted | worn with the electronic device of FIG. 第１の実施形態に係る音響再生方法を示すフローチャートである。It is a flowchart which shows the sound reproduction method which concerns on 1st Embodiment. 第１の実施形態の変形例に係る音響再生方法を示すフローチャートである。It is a flowchart which shows the sound reproduction method which concerns on the modification of 1st Embodiment. 第２の実施形態に係る電子機器の構成を示すブロック図である。It is a block diagram which shows the structure of the electronic device which concerns on 2nd Embodiment.

　まず、本発明の一実施形態の概要について説明する。なお、実施形態の概要の説明において付記した図面参照符号は専ら理解を助けるための例示であり、図示の態様に限定することを意図するものではない。 First, an outline of an embodiment of the present invention will be described. Note that the reference numerals of the drawings added in the description of the outline of the embodiment are merely examples for helping understanding, and are not intended to be limited to the illustrated modes.

　一実施形態における電子機器１は、図１、図２のいずれかに示すように、内蔵マイク４を備えたイヤホン２に音響信号Ｃ０を供給する音響再生部１６と、音響再生部１６を制御する制御部１０と、音響信号Ｃ０を入力とし内蔵マイクで集音した信号Ｃ１を出力とする伝達関数の伝達関数データＣ４を算出する伝達関数算出部１４と、イヤホン２をユーザ５の耳６に挿入した際の伝達関数のデータであるユーザ耳孔データ２８を格納する記憶部１２と、を備える。ここで、制御部１０は、伝達関数算出部１４が算出した伝達関数データＣ４とユーザ耳孔データ２８に基づいて、イヤホン２が挿入状態にあるか否かを判定する挿抜判定部２２を含み、挿抜判定部２２によりイヤホン２が挿入状態であると判定され、且つ音響再生部１６の音量設定ＶＯＬが所定の音量を超えている場合には、音響再生部１６の音量設定ＶＯＬが所定の音量を超えている旨をユーザ５に通知する。 The electronic device 1 according to the embodiment controls the sound reproducing unit 16 and the sound reproducing unit 16 that supplies the sound signal C0 to the earphone 2 including the built-in microphone 4 as illustrated in FIG. 1 or 2. The control unit 10, the transfer function calculation unit 14 that calculates the transfer function data C 4 of the transfer function that receives the acoustic signal C 0 and receives the signal C 1 collected by the built-in microphone, and the earphone 2 is inserted into the ear 6 of the user 5. And a storage unit 12 that stores user ear hole data 28 that is transfer function data at the time. Here, the control unit 10 includes an insertion / removal determination unit 22 that determines whether or not the earphone 2 is in an insertion state based on the transfer function data C4 calculated by the transfer function calculation unit 14 and the user ear hole data 28. When the determination unit 22 determines that the earphone 2 is in the inserted state and the volume setting VOL of the sound reproduction unit 16 exceeds a predetermined volume, the volume setting VOL of the sound reproduction unit 16 exceeds the predetermined volume. The user 5 is notified.

　ここで、ユーザ耳孔データ２８は、イヤホン２をユーザ５の耳６に挿入した状態、即ち、ユーザ５の耳孔をイヤホン２で密閉した状態の耳孔の空間に対しスピーカ３で音圧を与え、その音響振動を内蔵マイク４が受けるときの伝達関数である。耳孔の空間は、ユーザにより異なるため、ユーザ耳孔データはユーザによって変化する。このような状況を考慮し、上記の構成では、携帯端末１のユーザ５のユーザ耳孔データ２８を予め作成し用意することで、イヤホン２の挿抜判定を精度よく行うことを可能にしている。従って、簡易な構成でイヤホンの挿抜判定を精度よく行い、イヤホン２が耳に挿入されている場合の音響再生を最適化することが可能な電子機器を提供することができる。 Here, the user ear hole data 28 gives sound pressure by the speaker 3 to the ear hole space in which the earphone 2 is inserted into the ear 6 of the user 5, that is, the ear hole of the user 5 sealed with the earphone 2. It is a transfer function when the built-in microphone 4 receives acoustic vibration. Since the space of the ear canal varies from user to user, user ear canal data varies from user to user. Considering such a situation, in the above configuration, the user ear hole data 28 of the user 5 of the mobile terminal 1 is created and prepared in advance, so that the insertion / extraction determination of the earphone 2 can be performed with high accuracy. Therefore, it is possible to provide an electronic device that can accurately determine the insertion / extraction of the earphone with a simple configuration and optimize sound reproduction when the earphone 2 is inserted into the ear.

　上記制御部１０は、ユーザ５に通知する場合に、音響再生部１６の音量設定ＶＯＬが所定の音量以下になるように制御してもよい。 The control unit 10 may control the volume setting VOL of the sound playback unit 16 to be equal to or lower than a predetermined volume when notifying the user 5.

　上記制御部１０は、ユーザ５に通知した後、所定の時間が経過する間に、ユーザ５からの応答がなかった場合には、音響再生部１６の音量設定が所定の音量以下になるように制御してもよい。 If there is no response from the user 5 after a predetermined time has elapsed after notifying the user 5, the control unit 10 sets the volume setting of the sound reproduction unit 16 to be equal to or lower than the predetermined volume. You may control.

　上記制御部１０の挿抜判定部２２によりイヤホン２が耳から外れた状態であると判定された場合に、上記制御部１０は、音響再生部１６による音響の再生を停止するように制御するようにしてもよい。 When it is determined by the insertion / extraction determination unit 22 of the control unit 10 that the earphone 2 has been removed from the ear, the control unit 10 performs control so as to stop the sound reproduction by the sound reproduction unit 16. May be.

　電子機器（図５の８）において、図５に示すように、ユーザ認証部４０と、複数のユーザ毎のユーザ耳孔データ２８ａ～ｂと、をさらに備え、制御部１０の挿抜判定部２２は、ユーザ認証部４０が認証したユーザに対応するユーザ耳孔データ（２８ａ～ｂのいずれか）をアクセスするように制御してもよい。 In the electronic device (8 in FIG. 5), as shown in FIG. 5, the electronic device (8) further includes a user authentication unit 40 and user ear hole data 28a to 28b for each of a plurality of users. You may control to access the user ear hole data (any of 28a-b) corresponding to the user authenticated by the user authentication unit 40.

　一実施形態における音響再生方法は、図１～３のいずれかに示すように、内蔵マイク４を備えたイヤホン２に音響信号Ｃ０を供給して、イヤホン２により音響再生する音響再生方法であり、以下のステップを含む。即ち、該音響再生方法は、イヤホン２をユーザ５の耳６に挿入した際の、音響信号Ｃ０を入力とし内蔵マイクで集音した信号Ｃ１を出力とする伝達関数のデータであるユーザ耳孔データ２８を予め用意するステップ（Ｓ１０）を含む。また、該音響再生方法は、音響信号Ｃ０を入力とし内蔵マイクで集音した信号Ｃ１を出力とする伝達関数の伝達関数データＣ４を算出するステップ（Ｓ１１）を含む。また、該音響再生方法は、算出された伝達関数データＣ４とユーザ耳孔データ２８に基づいて、イヤホン２が挿入状態にあるか否かを判定する挿抜判定ステップ（Ｓ１３）を含む。さらに、該音響再生方法は、挿抜判定ステップ（Ｓ１３）においてイヤホン２が挿入状態であると判定され、且つ音響再生の音量設定ＶＯＬが所定の音量を超えている場合には、音響再生の音量設定ＶＯＬが所定の音量を超えている旨をユーザ５に通知するステップ（Ｓ１６）を含む。 The sound reproduction method in one embodiment is a sound reproduction method in which an acoustic signal C0 is supplied to an earphone 2 having a built-in microphone 4 and sound is reproduced by the earphone 2, as shown in any of FIGS. Includes the following steps: That is, in the sound reproduction method, when the earphone 2 is inserted into the ear 6 of the user 5, the user ear hole data 28 which is data of a transfer function having the sound signal C0 as input and the signal C1 collected by the built-in microphone as output is output. Is prepared in advance (S10). Further, the sound reproduction method includes a step (S11) of calculating transfer function transfer function data C4 of a transfer function having the sound signal C0 as an input and the signal C1 collected by the built-in microphone as an output. In addition, the sound reproduction method includes an insertion / extraction determination step (S13) for determining whether or not the earphone 2 is in an insertion state based on the calculated transfer function data C4 and user ear hole data 28. Further, in the sound reproduction method, when it is determined in the insertion / extraction determination step (S13) that the earphone 2 is in the inserted state and the sound reproduction volume setting VOL exceeds a predetermined volume, the sound reproduction volume setting is performed. A step (S16) of notifying the user 5 that the VOL exceeds a predetermined volume;

　上記音響再生方法は、図１～３のいずれかに示すように、ユーザ５に通知する場合に、音響再生の音量設定ＶＯＬが所定の音量以下になるように制御するステップ（Ｓ１９）をさらに含むようにしてもよい。 As shown in any of FIGS. 1 to 3, the sound reproduction method further includes a step (S19) of controlling the sound reproduction volume setting VOL to be equal to or lower than a predetermined volume when notifying the user 5. You may make it.

　上記音響再生方法は、図１～２、図４のいずれかに示すように、ユーザ５に通知した後、所定の時間が経過する間に、ユーザ５からの応答がなかった場合（Ｓ１７でＮｏ、且つＳ１８でＹｅｓの場合）には、音響再生の音量設定ＶＯＬが所定の音量以下になるように制御するステップ（Ｓ１９）をさらに含むようにしてもよい。 In the above sound reproduction method, as shown in any of FIGS. 1 to 2 and FIG. 4, when there is no response from the user 5 after a predetermined time has elapsed after notifying the user 5 (No in S17). In the case of Yes in S18, a step (S19) of controlling the sound reproduction volume setting VOL to be equal to or lower than a predetermined volume may be further included.

　上記音響再生方法は、挿抜判定ステップ（Ｓ１３）によりイヤホン２が耳から外れた状態であると判定された場合に、音響再生を停止するステップ（Ｓ１４）をさらに含むようにしてもよい。 The sound reproduction method may further include a step (S14) of stopping sound reproduction when the earphone 2 is determined to be detached from the ear in the insertion / extraction determination step (S13).

　本発明において下記の形態が可能である。
［形態１］第１の視点に既述のとおり。
［形態２］前記制御部は、前記ユーザに通知する場合に、前記音響再生部の音量設定が前記所定の音量以下になるように制御してもよい。
［形態３］前記制御部は、前記ユーザに通知した後、所定の時間が経過する間に、前記ユーザからの応答がなかった場合には、前記音響再生部の音量設定が前記所定の音量以下になるように制御してもよい。
［形態４］前記制御部の前記挿抜判定部により前記イヤホンが耳から外れた状態であると判定された場合に、前記制御部は、前記音響再生部による音響の再生を停止するように制御するようにしてもよい。
［形態５］ユーザ認証部と、複数のユーザ毎の前記ユーザ耳孔データと、をさらに備え、前記制御部の挿抜判定部は、前記ユーザ認証部が認証したユーザに対応する前記ユーザ耳孔データをアクセスするように制御してもよい。
［形態６］第２の視点に既述のとおり。
［形態７］前記ユーザに通知する場合に、前記音響再生の音量設定が前記所定の音量以下になるように制御するステップをさらに含むようにしてもよい。
［形態８］前記ユーザに通知した後、所定の時間が経過する間に、前記ユーザからの応答がなかった場合には、前記音響再生の音量設定が前記所定の音量以下になるように制御するステップをさらに含むようにしてもよい。
［形態９］前記挿抜判定ステップにより前記イヤホンが耳から外れた状態であると判定された場合に、前記音響再生を停止するステップをさらに含むようにしてもよい。
［形態１０］第３の視点に既述のとおり。 In the present invention, the following modes are possible.
[Mode 1] As described in the first viewpoint.
[Mode 2] When notifying the user, the control unit may control the volume setting of the sound reproducing unit to be equal to or lower than the predetermined volume.
[Mode 3] When there is no response from the user while a predetermined time has elapsed after notifying the user, the control unit sets the volume of the sound reproduction unit to be equal to or lower than the predetermined volume. You may control to become.
[Mode 4] When the insertion / extraction determination unit of the control unit determines that the earphone is out of the ear, the control unit performs control so as to stop the sound reproduction by the sound reproduction unit. You may do it.
[Mode 5] The apparatus further includes a user authentication unit and the user ear hole data for each of a plurality of users, and the insertion / extraction determination unit of the control unit accesses the user ear hole data corresponding to the user authenticated by the user authentication unit. You may control to do.
[Mode 6] As described in the second viewpoint.
[Mode 7] When notifying the user, it may further include a step of controlling the sound reproduction volume setting to be equal to or lower than the predetermined volume.
[Mode 8] If no response is received from the user while a predetermined time has elapsed after notifying the user, the sound reproduction volume setting is controlled to be equal to or lower than the predetermined volume. A step may be further included.
[Mode 9] When it is determined in the insertion / extraction determination step that the earphone is in a state of being removed from the ear, a step of stopping the sound reproduction may be further included.
[Mode 10] As described in the third aspect.

　以下に具体的な実施の形態について、図面を参照して説明する。 Hereinafter, specific embodiments will be described with reference to the drawings.

［第１の実施形態］
（第１の実施形態の構成）
　第１の実施形態の構成について、図１～２を参照しながら詳細に説明する。図１は第１の実施形態に係る携帯端末（電子機器）１の構成を示すブロック図である。図１は、イヤホン２が携帯端末１のイヤホンジャック１９に接続された状態を示している。また、イヤホン２は、スピーカ３と内蔵マイク４とを有している。 [First Embodiment]
(Configuration of the first embodiment)
The configuration of the first embodiment will be described in detail with reference to FIGS. FIG. 1 is a block diagram showing a configuration of a portable terminal (electronic device) 1 according to the first embodiment. FIG. 1 shows a state in which the earphone 2 is connected to the earphone jack 19 of the mobile terminal 1. The earphone 2 has a speaker 3 and a built-in microphone 4.

　次に、図２は、ユーザ５が携帯端末１のイヤホンジャック１９にイヤホン２を接続し、耳６に装着した状態を示している。この状態で、ユーザ５は、通話中に相手の音声をイヤホン２で聞きながら、内蔵マイク４を介して自分の音声を相手に送ることが可能である。また、ユーザ５は、携帯端末１で再生した音楽をイヤホン２のスピーカ３により聴くこともできる。 Next, FIG. 2 shows a state in which the user 5 connects the earphone 2 to the earphone jack 19 of the mobile terminal 1 and wears it on the ear 6. In this state, the user 5 can send his / her voice to the other party via the built-in microphone 4 while listening to the other party's voice with the earphone 2 during a call. Further, the user 5 can also listen to the music reproduced on the mobile terminal 1 through the speaker 3 of the earphone 2.

　次に図１に戻って、携帯端末１の構成について詳細に説明する。図１は、携帯端末１が有する様々な機能のうち、主として音響再生に関連した部分を示している。図１に示すように、携帯端末１は、制御部１０、記憶部１２、表示部１７、操作部１８、伝達関数算出部１４、音響再生部１６、スイッチ２０、スピーカ２１、及びイヤホンジャック１９を含んで構成される。 Next, returning to FIG. 1, the configuration of the mobile terminal 1 will be described in detail. FIG. 1 shows a part mainly related to sound reproduction among various functions of the portable terminal 1. As shown in FIG. 1, the mobile terminal 1 includes a control unit 10, a storage unit 12, a display unit 17, an operation unit 18, a transfer function calculation unit 14, an acoustic reproduction unit 16, a switch 20, a speaker 21, and an earphone jack 19. Consists of including.

　まず、制御部１０は、不図示のＣＰＵ（Ｃｅｎｔｒａｌ　Ｐｒｏｃｅｓｓｉｎｇ　Ｕｎｉｔ）により携帯端末１全体の動作を制御している。制御部１０で動作するプログラムは、予め記憶部１２に格納され、制御部１０のＣＰＵにより呼び出されて実行される。図１に示された制御部１０の挿抜判定部２２、ユーザ通知部２３、及び音量制御部２４は、それぞれ制御部１０のＣＰＵで動作するプログラムである。挿抜判定部２２、ユーザ通知部２３及び音量制御部２４の処理内容の詳細については後述する。 First, the control unit 10 controls the operation of the entire mobile terminal 1 by a CPU (Central Processing Unit) (not shown). A program that operates in the control unit 10 is stored in the storage unit 12 in advance, and is called and executed by the CPU of the control unit 10. The insertion / extraction determination unit 22, the user notification unit 23, and the volume control unit 24 of the control unit 10 illustrated in FIG. 1 are programs that operate on the CPU of the control unit 10, respectively. Details of processing contents of the insertion / extraction determination unit 22, the user notification unit 23, and the volume control unit 24 will be described later.

　記憶部１２は、プログラムを格納するＲＯＭ（Ｒｅａｄ　Ｏｎｌｙ　Ｍｅｍｏｒｙ）と、上記プログラムの動作に必要なデータを格納するＲＡＭを備えている。また、記憶部１２には、ユーザ５が視聴する音楽ファイル２７、ユーザ５に通知する際の音声ガイダンスデータ２６が格納されている。ここで、音楽ファイル２７には、予め携帯端末１に書き込まれているもの、ユーザ５がインターネットを介してダウンロードしたもの、記録メディアを介して書き込んだもの、等が含まれる。また、音だけの音楽ファイル２７以外に、音声データを含む動画ファイル（不図示）も含まれる。 The storage unit 12 includes a ROM (Read Only Memory) for storing a program and a RAM for storing data necessary for the operation of the program. In addition, the storage unit 12 stores a music file 27 to be viewed by the user 5 and voice guidance data 26 for notifying the user 5. Here, the music file 27 includes a file written in advance on the portable terminal 1, a file downloaded by the user 5 via the Internet, a file written via a recording medium, and the like. In addition to the music file 27 containing only sound, a moving image file (not shown) including audio data is also included.

　また、携帯端末１は図２に示すようにスマートフォンであり、図１において表示部１７は液晶パネル方式で構成され、操作部１８はタッチパネル方式で構成される。 Further, the mobile terminal 1 is a smartphone as shown in FIG. 2, and in FIG. 1, the display unit 17 is configured by a liquid crystal panel method, and the operation unit 18 is configured by a touch panel method.

　次に、イヤホン２の内蔵マイクで集音した信号Ｃ１はアンプ３０で増幅され、その後、Ａ／Ｄ変換器３１で内蔵マイクで集音したディジタル信号Ｃ３に変換される。伝達関数算出部１４は、音響ディジタル信号Ｃ２及び内蔵マイクで集音したディジタル信号Ｃ３を入力し伝達関数データＣ４を算出する。ここで、伝達関数算出部１４はＣＰＵにより動作するプログラムで構成される。図１では、伝達関数算出部１４は伝達関数算出部１４が有するＣＰＵ（不図示）で動作する構成を想定しているが、制御部１０が有するＣＰＵで動作するように構成してもよい。 Next, the signal C1 collected by the built-in microphone of the earphone 2 is amplified by the amplifier 30, and then converted into the digital signal C3 collected by the built-in microphone by the A / D converter 31. The transfer function calculation unit 14 receives the acoustic digital signal C2 and the digital signal C3 collected by the built-in microphone, and calculates transfer function data C4. Here, the transfer function calculation unit 14 is configured by a program operated by the CPU. In FIG. 1, the transfer function calculation unit 14 is assumed to be configured to operate with a CPU (not shown) included in the transfer function calculation unit 14, but may be configured to operate with a CPU included in the control unit 10.

　ここで、伝達関数について説明する。伝達関数は、イヤホン２のスピーカ３に供給する音響信号Ｃ０を入力とし、イヤホン２の内蔵マイク４で集音した信号Ｃ１を出力としたときの周波数応答であり、音響信号Ｃ０と内蔵マイクで集音した信号Ｃ１の周波数応答における比率で表される。一般的には、上記の伝達関数をＨとすると、Ｈは周波数の関数であり、式（１）により表される。式（１）において、音響信号Ｃ０の周波数成分の振幅を｜Ａ０（ω）｜、内蔵マイクで集音した信号Ｃ１の周波数成分の振幅を｜Ａ１（ω）｜としている（但し、上記｜｜は、絶対値を表す）。

　　　Ｈ（ω）＝　｜Ａ１（ω）｜／｜Ａ０（ω）｜　　　　　　式（１） Here, the transfer function will be described. The transfer function is a frequency response when the acoustic signal C0 supplied to the speaker 3 of the earphone 2 is input and the signal C1 collected by the built-in microphone 4 of the earphone 2 is output, and is collected by the acoustic signal C0 and the built-in microphone. It is expressed as a ratio in the frequency response of the sound signal C1. In general, when the above transfer function is H, H is a function of frequency, and is represented by Expression (1). In Expression (1), the amplitude of the frequency component of the acoustic signal C0 is | A0 (ω) |, and the amplitude of the frequency component of the signal C1 collected by the built-in microphone is | A1 (ω) | Represents an absolute value).

H (ω) = | A1 (ω) | / | A0 (ω) | Equation (1)

　ここで、図１に示すように、音響信号Ｃ０、内蔵マイクで集音した信号Ｃ１は共にアナログ信号であるが、伝達関数算出部１４での演算を行う上で、ディジタル信号を入力する必要性から、音響信号Ｃ０、内蔵マイクで集音した信号Ｃ１の代わりに、夫々音響ディジタル信号Ｃ２、内蔵マイクで集音したディジタル信号Ｃ３を用いている。但し、音響信号Ｃ０と音響ディジタル信号Ｃ２は、音量設定ＶＯＬの値で補正する必要がある。式（１）の伝達関数Ｈ（ω）は、音響ディジタル信号Ｃ２、内蔵マイクで集音したディジタル信号Ｃ３によって、式（２）により表される。ここで、音量設定ＶＯＬの値は、制御部１０が保持しており、制御部１０より伝達関数算出部１４に供給される。また、音響ディジタル信号Ｃ２の周波数成分の振幅を｜Ａ２（ω）｜、内蔵マイクで集音したディジタル信号Ｃ３の周波数成分の振幅を｜Ａ３（ω）｜としている。

　　　Ｈ（ω）＝　｜Ａ３（ω）｜／ＶＯＬ｜Ａ２（ω）｜　　　式（２） Here, as shown in FIG. 1, the acoustic signal C0 and the signal C1 collected by the built-in microphone are both analog signals, but it is necessary to input a digital signal when performing the calculation in the transfer function calculation unit 14. Therefore, instead of the acoustic signal C0 and the signal C1 collected by the built-in microphone, the acoustic digital signal C2 and the digital signal C3 collected by the built-in microphone are used, respectively. However, the acoustic signal C0 and the acoustic digital signal C2 need to be corrected with the value of the volume setting VOL. The transfer function H (ω) in Expression (1) is expressed by Expression (2) by the acoustic digital signal C2 and the digital signal C3 collected by the built-in microphone. Here, the value of the volume setting VOL is held by the control unit 10 and is supplied from the control unit 10 to the transfer function calculation unit 14. Also, the amplitude of the frequency component of the acoustic digital signal C2 is | A2 (ω) |, and the amplitude of the frequency component of the digital signal C3 collected by the built-in microphone is | A3 (ω) |.

H (ω) = | A3 (ω) | / VOL | A2 (ω) | Equation (2)

　伝達関数算出部１４は、式（２）に基づいて、Ｎ点の周波数ω＝ω０、．．．、ωＮ－１における伝達関数データＣ４を出力する。 The transfer function calculation unit 14 calculates the N-point frequency ω = ω0,. . . , ΩN−1, transfer function data C4 is output.

　また、携帯端末１はイヤホン２装着時に内蔵マイク４で集音した通話中の音声を相手に送る機能を有しているため、図１のアンプ３０及びＡ／Ｄ変換器３１は、元々携帯端末１に備わっている通話用のアンプ及びＡ／Ｄ変換器で共用することができる。即ち、携帯端末１で伝達関数算出の機能追加を行う際に、新たにセンサや回路（アンプ、Ａ／Ｄ変換器等）を設ける必要はない。 Further, since the portable terminal 1 has a function of sending the voice during a call collected by the built-in microphone 4 when the earphone 2 is attached to the other party, the amplifier 30 and the A / D converter 31 in FIG. 1 can be shared by the amplifier and A / D converter for call. That is, when adding a function for calculating a transfer function in the portable terminal 1, it is not necessary to provide a new sensor or circuit (amplifier, A / D converter, etc.).

　次に音響再生部１６は、デコーダ３５とＤ／Ａ変換器３４とアンプ３３を含んで構成される。デコーダ３５は、記憶部１２から供給される音楽ファイル２７をデコードして音響ディジタル信号Ｃ２をＤ／Ａ変換器３４に出力する。アンプ３３は、Ｄ／Ａ変換器３４の出力を増幅し音響信号Ｃ０を出力する。ここで、アンプ３３はゲイン可変型の増幅器であり、ユーザ５が調整した音量設定ＶＯＬに応じてアンプ３３のゲインが制御される。ここで、ユーザ５による音量設定ＶＯＬは、ユーザ５が好ましいと感じる音量が得られるように、ユーザ５が操作部１８で調整することができるようになっている。 Next, the sound reproducing unit 16 includes a decoder 35, a D / A converter 34, and an amplifier 33. The decoder 35 decodes the music file 27 supplied from the storage unit 12 and outputs the acoustic digital signal C 2 to the D / A converter 34. The amplifier 33 amplifies the output of the D / A converter 34 and outputs an acoustic signal C0. Here, the amplifier 33 is a variable gain amplifier, and the gain of the amplifier 33 is controlled according to the volume setting VOL adjusted by the user 5. Here, the volume setting VOL by the user 5 can be adjusted by the operation unit 18 by the user 5 so that the volume that the user 5 feels is preferable.

　また、図１では、記憶部１２の音楽ファイル２７から音響再生する場合について示しているが、それに限定されず、例えば、インターネットを介して受信したストリーミングデータを音響再生部１６で再生することもできる。 In addition, FIG. 1 shows a case where sound playback is performed from the music file 27 of the storage unit 12, but the present invention is not limited thereto, and for example, streaming data received via the Internet can be played back by the sound playback unit 16. .

　また、図１において、イヤホンジャック１９にイヤホン２が挿入されている場合には、イヤホン２が挿入されていることが検知され、スイッチ２０の入力端子は第１出力端子４１と接続するように制御される。それにより、音響再生部１６が出力する音響信号はイヤホン２のスピーカ３に出力される。一方、イヤホンジャック１９に何も挿入されていない場合には、何も挿入されていないことが検知され、スイッチ２０の入力端子は第２出力端子４２と接続するように制御される。それにより、音響再生部１６が出力する音響信号は携帯端末１に内蔵されるスピーカ２１のほうに出力される。 In FIG. 1, when the earphone 2 is inserted into the earphone jack 19, it is detected that the earphone 2 is inserted, and the input terminal of the switch 20 is controlled to be connected to the first output terminal 41. Is done. Thereby, the sound signal output from the sound reproducing unit 16 is output to the speaker 3 of the earphone 2. On the other hand, when nothing is inserted into the earphone jack 19, it is detected that nothing is inserted, and the input terminal of the switch 20 is controlled to be connected to the second output terminal 42. As a result, the sound signal output from the sound playback unit 16 is output to the speaker 21 built in the mobile terminal 1.

（第１の実施形態の動作）
　次に第１の実施形態の動作について、図３を参照しながら詳細に説明する。図３は第１の実施形態に係る音響再生方法の動作を示すフローチャートである。また、図３の各ステップを説明する際に、図１を適宜、参照する。 (Operation of the first embodiment)
Next, the operation of the first embodiment will be described in detail with reference to FIG. FIG. 3 is a flowchart showing the operation of the sound reproducing method according to the first embodiment. Also, FIG. 1 will be referred to as appropriate when each step of FIG. 3 is described.

　以下の図３の説明では、図２に示すようにユーザ５が内蔵マイク４を備えたイヤホン２を耳６に装着して、ある音楽ファイル（図１の２７）を再生させている状態を想定している。 In the description of FIG. 3 below, it is assumed that the user 5 wears the earphone 2 with the built-in microphone 4 on the ear 6 and reproduces a music file (27 in FIG. 1) as shown in FIG. is doing.

　図３において、まず、ユーザ耳孔データ２８を予め用意し、記憶部１２に格納する（Ｓ１０）。ここで、ユーザ耳孔データ２８は、前述したように、イヤホン２をユーザ５の耳６に挿入した状態、即ち、ユーザ５の耳孔をイヤホン２で密閉した状態の耳孔の空間に対しスピーカ３で音圧を与え、その音響振動を内蔵マイク４が受けるときの伝達関数である。 In FIG. 3, first, user ear hole data 28 is prepared in advance and stored in the storage unit 12 (S10). Here, as described above, the user ear hole data 28 is sounded by the speaker 3 with respect to the ear hole space in which the earphone 2 is inserted into the ear 6 of the user 5, that is, the ear hole of the user 5 sealed with the earphone 2. This is a transfer function when pressure is applied and the built-in microphone 4 receives the acoustic vibration.

　ユーザ耳孔データ２８は、例えば、以下に示す方法で取得することができる。イヤホン２をユーザ５の耳６に挿入した状態で、音響ディジタル信号Ｃ２として単一周波数ωの正弦波信号をイヤホン２のスピーカ３に供給し、そのときの内蔵マイクで集音したディジタル信号Ｃ３を取得する。この動作を、供給する正弦波の周波数ωｉをω０、．．．、ωＮ－１に亘って変化させることにより、式（２）に基づいてＮ点の周波数ω＝ω０、．．．、ωＮ－１におけるユーザ耳孔データ２８が得られる。ここで、このようにして得られたユーザ耳孔データ２８をＨｕ（ω）と表す。 The user ear canal data 28 can be acquired by the following method, for example. With the earphone 2 inserted into the ear 6 of the user 5, a sine wave signal having a single frequency ω is supplied to the speaker 3 of the earphone 2 as the acoustic digital signal C2, and the digital signal C3 collected by the built-in microphone at that time is supplied. get. This operation is performed by changing the frequency ωi of the supplied sine wave to ω0,. . . , ΩN−1, the frequency ω = ω0,. . . , ΩN−1, user ear hole data 28 is obtained. Here, the user ear hole data 28 obtained in this way is represented as Hu (ω).

　また、別の方法として、音響ディジタル信号Ｃ２として白色雑音（ホワイトノイズ）をイヤホン２のスピーカ３に供給して、内蔵マイクで集音したディジタル信号Ｃ３を取得し、式（２）に基づいてＮ点の周波数ω＝ω０、．．．、ωＮ－１におけるユーザ耳孔データ２８を得ることもできる。 As another method, white noise (white noise) is supplied as the acoustic digital signal C2 to the speaker 3 of the earphone 2 to acquire the digital signal C3 collected by the built-in microphone, and N based on the equation (2) The frequency of the point ω = ω0,. . . , ΩN−1 user ear hole data 28 can also be obtained.

　また、ユーザ耳孔データ２８の取得方法は、上記した方法に限定されない。例えば、ユーザ耳孔データ２８の算出を携帯端末１で行うのではなく、外部機器を用いて測定し、その測定結果をユーザ耳孔データ２８として記憶部１２に格納するようにしてもよい。 Moreover, the acquisition method of the user ear canal data 28 is not limited to the method described above. For example, the calculation of the user ear canal data 28 may be performed using an external device instead of being performed by the mobile terminal 1, and the measurement result may be stored in the storage unit 12 as the user ear canal data 28.

　また、多くの人間の耳孔データを周波数特性によりＭ通りに分類しておき、ユーザ５のユーザ耳孔データ２８がＭ通りのうちのどれに近いかを判定し、最も近いと判定された耳孔データを、ユーザ耳孔データ２８として使用するようにしてもよい。 Further, a lot of human ear canal data is classified into M ways according to the frequency characteristics, the user ear canal data 28 of the user 5 is determined to which of the M ways is close, and the ear canal data determined to be the closest is determined. The user ear canal data 28 may be used.

　尚、一度ステップＳ１０によりユーザ耳孔データ２８が用意できた場合には、次回からはステップＳ１１から動作させればよい。次に、伝達関数算出部１４は、伝達関数データＣ４を算出する（Ｓ１１）。ここで、伝達関数算出部１４に入力するデータは、再生中の音楽ファイル２７の一部の期間Ｔ１のデータを使用する。即ち、期間Ｔ１における音響ディジタル信号Ｃ２及び内蔵マイクで集音したディジタル信号Ｃ３を伝達関数算出部１４に供給する。前述したように、期間Ｔ１のデータを用いて、式（２）に基づいて、Ｎ点の周波数ω＝ω０、．．．、ωＮ－１における伝達関数データＣ４が計算される。 It should be noted that once the user ear canal data 28 has been prepared in step S10, the operation may be performed from step S11 from the next time. Next, the transfer function calculation unit 14 calculates transfer function data C4 (S11). Here, as data to be input to the transfer function calculation unit 14, data of a part of the period T1 of the music file 27 being reproduced is used. In other words, the acoustic digital signal C2 in the period T1 and the digital signal C3 collected by the built-in microphone are supplied to the transfer function calculation unit 14. As described above, using the data of the period T1, the frequency ω = ω0,. . . , ΩN−1, transfer function data C4 is calculated.

　また、伝達関数算出部１４による伝達関数データＣ４の算出は、複数の異なる期間Ｔ１、．．、Ｔｎ－１に対して各々の伝達関数データを算出し、算出したｎ個の伝達関数データを統計処理することにより算出してもよい。統計処理としては、例えば、平均化処理などが適用可能である。 Further, the transfer function data C4 is calculated by the transfer function calculation unit 14 in a plurality of different periods T1,. . , Tn−1 may be calculated by calculating each transfer function data and statistically processing the calculated n transfer function data. As the statistical process, for example, an averaging process can be applied.

　次に、図３において、記憶部１２に格納されたユーザ耳孔データ２８を読み出す（Ｓ１２）。 Next, in FIG. 3, the user ear hole data 28 stored in the storage unit 12 is read (S12).

　次に、図３において、挿抜判定部２２は、伝達関数データＣ４とユーザ耳孔データ２８に基づいて、イヤホン２が挿入状態か否かの挿抜判定を行う（Ｓ１３）。挿抜判定部２２の挿抜判定のアルゴリズムは、具体的には、以下に示す方法が適用可能である。重み関数Ｗ（ω）、ω＝ω０、ω１、．．．、ωＮ－１を用意し、式（３）に示すように積和演算を行い、その結果をＥとする。重み関数Ｗ（ω）としては、任意の関数が適用可能であるが、イヤホンが挿入されているときと、外れているときとで、伝達関数の差が大きくなる周波数に対する重みを大きくしておくことが好ましい。式（３）で算出されたＥを伝達関数データの重み和という。

　　　Ｅ＝Ｗ（ω０）Ｈ（ω０）＋Ｗ（ω１）Ｈ（ω１）＋．．．
　　　　　　　　＋Ｗ（ωＮ－１）Ｈ（ωＮ－１）　　　　　　　　　　式（３） Next, in FIG. 3, the insertion / extraction determination unit 22 determines whether the earphone 2 is in an insertion state based on the transfer function data C4 and the user ear hole data 28 (S13). Specifically, the following method can be applied to the insertion / extraction determination algorithm of the insertion / extraction determination unit 22. Weight function W (ω), ω = ω0, ω1,. . . , ΩN−1 are prepared, a product-sum operation is performed as shown in Equation (3), and the result is represented by E. Any function can be applied as the weighting function W (ω), but the weight for the frequency at which the difference in the transfer function is large between when the earphone is inserted and when the earphone is disconnected is increased. It is preferable. E calculated by Equation (3) is referred to as a weighted sum of transfer function data.

E = W (ω0) H (ω0) + W (ω1) H (ω1) +. . .
+ W (ωN−1) H (ωN−1) Equation (3)

　また、ユーザ耳孔データ２８に対しても、式（４）に示すように同様の積和演算を行い、その結果をＥｕとする。式（４）で算出されたＥｕをユーザ耳孔データの重み和という。

　　　Ｅｕ＝Ｗ（ω０）Ｈｕ（ω０）＋Ｗ（ω１）Ｈｕ（ω１）＋．．．
　　　　　　　　　＋Ｗ（ωＮ－１）Ｈｕ（ωＮ－１）　　　　　　　　式（４） Further, a similar product-sum operation is performed on the user ear hole data 28 as shown in Expression (4), and the result is Eu. Eu calculated by Expression (4) is referred to as a weight sum of user ear hole data.

Eu = W (ω0) Hu (ω0) + W (ω1) Hu (ω1) +. . .
+ W (ωN−1) Hu (ωN−1) Equation (4)

　挿抜判定部２２の挿抜判定は、伝達関数データの重み和Ｅが、ユーザ耳孔データの重み和Ｅｕにどの程度近いかにより判定する。これは、ユーザ耳孔データ２８は、ユーザ５の耳６をイヤホン２で密閉した状態での伝達関数に相当するので、イヤホン２が挿入状態である場合は、伝達関数データの重み和Ｅはユーザ耳孔データの重み和Ｅｕに近くなるからである。一方、イヤホン２が外れている場合は、ユーザ５の鼓膜からの反射音がなくなるため、内蔵マイク４はスピーカ３の音を少ししか拾わなくなる。その他には、内蔵マイク４は、周囲の外部音を拾うだけであるから、伝達関数データの重み和Ｅは、ユーザ耳孔データの重み和Ｅｕに対して、小さな値になる傾向がある。 The insertion / extraction determination of the insertion / extraction determination unit 22 is determined based on how close the weight sum E of the transfer function data is to the weight sum Eu of the user ear hole data. This is because the user ear hole data 28 corresponds to a transfer function in a state in which the ear 6 of the user 5 is sealed with the earphone 2, so that when the earphone 2 is in the insertion state, the weight sum E of the transfer function data is the user ear hole. This is because it becomes close to the data weight sum Eu. On the other hand, when the earphone 2 is disconnected, there is no sound reflected from the eardrum of the user 5, so the built-in microphone 4 picks up the sound of the speaker 3 only a little. In addition, since the built-in microphone 4 only picks up surrounding external sounds, the weight sum E of the transfer function data tends to be smaller than the weight sum Eu of the user ear hole data.

　挿抜判定部２２の挿抜判定は、具体的には、所定の閾値Ｔを設定して、以下の式（５）により判定する。式（５）の条件を満たしている場合は、イヤホン２は挿入状態であると判定し、式（５）の条件を満たさない場合は、イヤホン２は外れていると判定する。

　　　｜Ｅ－Ｅｕ｜≦Ｔ　　　　　式（５） Specifically, the insertion / removal determination of the insertion / removal determination unit 22 is determined by the following equation (5) by setting a predetermined threshold T. When the condition of Expression (5) is satisfied, it is determined that the earphone 2 is in the inserted state, and when the condition of Expression (5) is not satisfied, it is determined that the earphone 2 is disconnected.

| E-Eu | ≦ T Formula (5)

　尚、挿抜判定のアルゴリズムは、上記した方法に限定されない。例えば、Ｎ点のデータＨ（ω）、Ｈｕ（ω）のスペクトル形状の相関を取って、スペクトル形状の相関が高い場合を挿入状態とし、低い場合を外れた状態と判定するようにしてもよい。 The insertion / extraction determination algorithm is not limited to the method described above. For example, the correlation between the spectral shapes of the N-point data H (ω) and Hu (ω) may be taken, and the case where the correlation between the spectral shapes is high is set as the inserted state, and the case where the spectral shape is low is determined as the off state. .

　次に、図３において、ステップＳ１３でイヤホン２が外れた状態であると判定された場合（Ｓ１３でＮｏの場合）には、無駄な音響再生がなされていると見做し、制御部１０の音量制御部２４は音響再生部１６の音響再生を停止するように制御する（Ｓ１４）。 Next, in FIG. 3, when it is determined in step S <b> 13 that the earphone 2 is disconnected (No in S <b> 13), it is assumed that useless sound reproduction is being performed, and the control unit 10 The volume control unit 24 performs control so as to stop the sound reproduction of the sound reproduction unit 16 (S14).

　一方、ステップＳ１３でイヤホン２が挿入状態であると判定された場合（Ｓ１３でＹｅｓの場合）には、音量設定ＶＯＬが所定の音量ＶＯＬｔｈを超えているかを判定する（Ｓ１５）。上記の所定の音量ＶＯＬｔｈは、それ以上の音量設定でイヤホン２による視聴を行った場合、聴感保護の観点から好ましくない状態であることを示すものである。所定の音量ＶＯＬｔｈは予め携帯端末１の出荷時に書き込むパラメータであってもよいし、上述した挿抜判定機能を携帯端末１にインストールする際に設定するものであってもよい。 On the other hand, if it is determined in step S13 that the earphone 2 is in the inserted state (Yes in S13), it is determined whether the volume setting VOL exceeds a predetermined volume VOLth (S15). The predetermined volume VOLth indicates that when viewing with the earphone 2 at a volume setting higher than that, it is not preferable from the viewpoint of hearing protection. The predetermined volume VOLth may be a parameter that is written in advance when the portable terminal 1 is shipped, or may be set when the above-described insertion / removal determination function is installed in the portable terminal 1.

　上述したステップＳ１５で、音量設定ＶＯＬが所定の音量ＶＯＬｔｈを超えていると判定された場合（Ｓ１５でＹｅｓの場合）、ユーザ５に音量設定ＶＯＬが所定の音量ＶＯＬｔｈを超えており聴感保護の観点から好ましくない旨を通知する（Ｓ１６）。そして、音量設定ＶＯＬを所定の音量以下、例えばＶＯＬｏｐｔ（但し、ＶＯＬｏｐｔ＜ＶＯＬｔｈ）に制御する（Ｓ１９）。具体的には、ユーザ通知部２３がユーザ５に対して上記の通知をし、音量制御部２４が音響再生部１６に対して音量設定値ＶＯＬｏｐｔを含む音量制御信号Ｃ５を送信することにより音響再生部１６の音量設定をＶＯＬｏｐｔに制御する。 When it is determined in step S15 described above that the volume setting VOL exceeds the predetermined volume VOLth (Yes in S15), the volume setting VOL exceeds the predetermined volume VOLth for the user 5, and the viewpoint of hearing protection is maintained. To notify that it is not preferable (S16). Then, the volume setting VOL is controlled to a predetermined volume or less, for example, VOLopt (however, VOLopt <VOLth) (S19). Specifically, the user notification unit 23 notifies the user 5 of the above, and the volume control unit 24 transmits the volume control signal C5 including the volume setting value VOLopt to the sound playback unit 16, thereby reproducing the sound. The volume setting of the unit 16 is controlled to VOLopt.

　ユーザ５に対する通知の方法は、例えば、図１に示すように、予め通知のための音声ガイダンスデータ２６を記憶部１２に格納しておき、ユーザ通知部２３が、音響再生部１６に対して音声ガイダンスデータ２６を流すように制御する（図１の破線矢印を参照）。音声ガイダンスデータ２６は、例えば、「聴感を損なう虞のある音量になっていることが検出されましたので、問題のないレベルまで音量を落としました」というようなメッセージ内容とする。 For example, as shown in FIG. 1, a voice guidance data 26 for notification is stored in the storage unit 12 in advance, and the user notification unit 23 sends a voice to the sound reproduction unit 16. The guidance data 26 is controlled to flow (see the broken line arrow in FIG. 1). The voice guidance data 26 has, for example, a message content such as “Since it has been detected that the volume is likely to impair the sense of hearing, the volume has been reduced to a level where there is no problem”.

　一方、図３のステップＳ１５において、音量設定ＶＯＬが所定の音量ＶＯＬｔｈを超えていないと判定された場合（Ｓ１５でＮｏの場合）には、ステップＳ１６、Ｓ１９の処理は行わずに、そのままの音量設定ＶＯＬでユーザ５は音楽の視聴を継続する。 On the other hand, if it is determined in step S15 of FIG. 3 that the volume setting VOL does not exceed the predetermined volume VOLth (No in S15), the process of steps S16 and S19 is not performed and the volume is kept as it is. With the setting VOL, the user 5 continues to watch music.

　以上説明したように、第１の実施形態に係る携帯端末１によれば、新たにセンサや回路を追加することなく、イヤホン２の挿抜判定機能を簡易に搭載することが可能であるという効果が得られる。 As described above, according to the mobile terminal 1 according to the first embodiment, it is possible to easily mount the insertion / extraction determination function of the earphone 2 without adding a new sensor or circuit. can get.

　また、イヤホン２が耳６に挿入されていると判定され、且つ音量設定ＶＯＬが所定の音量量ＶＯＬｔｈを超えており聴感保護の観点から好ましくないと判定された場合には、その旨をユーザ５に通知し、音量設定を低くすることで、ユーザ５の聴感を保護することができるという効果が得られる。 If it is determined that the earphone 2 is inserted into the ear 6 and the volume setting VOL exceeds the predetermined volume VOLth and it is determined that this is not preferable from the viewpoint of hearing protection, the user 5 And the volume setting is lowered, it is possible to protect the user 5 from hearing.

　また、イヤホン２が外れていると判定された場合には、無駄な音響再生を停止することで、携帯端末１を省電力化することができるという効果が得られる。 In addition, when it is determined that the earphone 2 is disconnected, it is possible to save the power of the mobile terminal 1 by stopping useless sound reproduction.

　また、挿抜判定において、携帯端末１を使用するユーザ５のユーザ耳孔データ２８を予め用意し、音響再生時の伝達関数データＣ４と比較判定するようにしたから、挿抜判定を精度よく行うことが可能になるという効果が得られる。即ち、耳孔データがユーザ毎のばらつきを含むことによる挿抜判定の精度低下を防ぐため、使用するユーザ５の耳孔データを用いているようにすることで安定して挿抜判定を行うことを実現している。 In addition, in the insertion / extraction determination, the user ear hole data 28 of the user 5 who uses the mobile terminal 1 is prepared in advance and is compared with the transfer function data C4 at the time of sound reproduction, so that the insertion / extraction determination can be performed with high accuracy. The effect of becoming. That is, in order to prevent the accuracy of the insertion / removal determination from being reduced due to the variation in the ear canal data for each user, it is possible to stably perform the insertion / removal determination by using the ear hole data of the user 5 to be used. Yes.

［第１の実施形態の変形例］
　次に第１の実施形態の変形例について、図４を参照しながら説明する。図４は、第１の実施形態の変形例を示すフローチャートである。第１の実施形態の変形例は、第１の実施形態に対して、音量制御部２４の動作を変更している。以下、その変更点を中心に説明する。図４を図３（第１の実施形態）と比較すると分かるように、図３では、ユーザに通知する（Ｓ１６）と共に音量設定を所定の音量以下にする動作（Ｓ１９）を行っているのに対して、図４では、所定の時間経過する間にユーザからの応答がなかった場合に、音量設定を所定の音量以下にする動作を行うようにしている。 [Modification of First Embodiment]
Next, a modification of the first embodiment will be described with reference to FIG. FIG. 4 is a flowchart showing a modification of the first embodiment. In the modification of the first embodiment, the operation of the volume control unit 24 is changed with respect to the first embodiment. Hereinafter, the changes will be mainly described. As can be seen by comparing FIG. 4 with FIG. 3 (first embodiment), in FIG. 3, the user is notified (S16) and the volume setting is set to a predetermined volume or lower (S19). On the other hand, in FIG. 4, when there is no response from the user during a predetermined time, an operation for setting the volume to a predetermined volume or less is performed.

　第１の実施形態の変形例では、ユーザ５に対する音声ガイダンスデータ２６を、「聴感を損なう虞のある音量になっていることが検出されました。音量を落としていいですか？もし、そのままの音量で聴きたい場合は応答して下さい」といったメッセージ内容とする。そして、ユーザ５からの応答を待つようにする。ユーザ５からの応答方法は、操作部１８の画面タッチ、イヤホン２の内蔵マイク４に対する音声入力などにより行う。 In the modification of the first embodiment, the voice guidance data 26 for the user 5 is detected as “It is detected that the volume is likely to impair the hearing. Is it okay to reduce the volume? Please respond if you want to listen at the volume. " Then, a response from the user 5 is waited. The response method from the user 5 is performed by touching the screen of the operation unit 18 or inputting voice to the built-in microphone 4 of the earphone 2.

　図４において、ユーザ５からの応答が有るか否かをチェックする（Ｓ１７）。ステップＳ１７でユーザ５からの応答が有った場合（Ｓ１７でＹｅｓの場合）には、そのままの音量設定とする。 In FIG. 4, it is checked whether or not there is a response from the user 5 (S17). If there is a response from the user 5 in step S17 (Yes in S17), the sound volume is set as it is.

　ステップＳ１７においてＮｏの場合は、所定の時間が経過したか否かの判定を行う（ステップＳ１８）。ステップＳ１８でＹｅｓと判定された場合、即ち、所定の時間が経過する間にユーザ５からの応答がなかった場合には、音量設定ＶＯＬを所定の音量以下、例えばＶＯＬｏｐｔ（但し、ＶＯＬｏｐｔ＜ＶＯＬｔｈ）にする（Ｓ１９）。具体的には、音量制御部２４が音響再生部１６に対して音量設定値ＶＯＬｏｐｔを含む音量制御信号Ｃ５を送信することにより音響再生部１６の音量設定をＶＯＬｏｐｔに制御する。 If No in step S17, it is determined whether or not a predetermined time has elapsed (step S18). When it is determined Yes in step S18, that is, when there is no response from the user 5 while a predetermined time elapses, the volume setting VOL is set to a predetermined volume or less, for example, VOLopt (however, VOLopt <VOLth). (S19). Specifically, the volume control unit 24 controls the volume setting of the sound reproduction unit 16 to VOLopt by transmitting a volume control signal C5 including the volume setting value VOLopt to the sound reproduction unit 16.

　尚、ユーザ５からの応答を待つ間に、音量設定をＶＯＬｏｐｔに低下させ、ユーザ５からの応答があった場合に、元の大きな音量に戻すようにしてもよい。 In addition, while waiting for a response from the user 5, the volume setting may be reduced to VOLopt, and when there is a response from the user 5, the volume may be restored to the original high volume.

　以上説明したように、第１の実施形態の変形例によれば、聴感保護のために音量を低下させる場合に、ユーザ５の了解を得てから行うことが可能となる。また、ユーザ５からの応答がなかった場合には、第１の実施形態と同様に、ユーザ５の聴感を保護することができるという効果が得られる。 As described above, according to the modification of the first embodiment, when the volume is reduced for the purpose of hearing protection, it can be performed after obtaining the consent of the user 5. Moreover, when there is no response from the user 5, the effect that the auditory sensation of the user 5 can be protected is acquired similarly to 1st Embodiment.

［第２の実施形態］
　次に、第２の実施形態について、図５を参照しながら詳細に説明する。図５は、第２の実施形態に係る携帯端末（電子機器）８の構成を示すブロック図である。第２の実施形態に係る携帯端末８は、複数のユーザが使用することを想定している。携帯端末８は、操作部１８にユーザ認証部４０と、複数のユーザに対するユーザ耳孔データ２８ａ～ｂと、を備えている。その他の点は第１の実施形態と同様であるため、同じ参照符号を付し、重複する説明は省略する。 [Second Embodiment]
Next, the second embodiment will be described in detail with reference to FIG. FIG. 5 is a block diagram illustrating a configuration of a mobile terminal (electronic device) 8 according to the second embodiment. The mobile terminal 8 according to the second embodiment is assumed to be used by a plurality of users. The mobile terminal 8 includes a user authentication unit 40 in the operation unit 18 and user ear hole data 28a to 28b for a plurality of users. Since the other points are the same as those of the first embodiment, the same reference numerals are given, and duplicate descriptions are omitted.

　操作部１８のユーザ認証部４０は、ユーザに対してユーザＩＤ及びパスワードの入力を要求する。ユーザによる入力が、予め登録してある複数のユーザのユーザＩＤ及びパスワードのいずれかに一致した場合に、携帯端末８は使用可能になり、ユーザは音楽再生をすることができる。また、記憶部１２には登録されたユーザ毎にユーザ耳孔データ２８ａ～ｂが設けられ、ログインしたユーザに対応したユーザ耳孔データがアクセスされる。図５はユーザＢがログインした状態を示しており、複数のユーザ耳孔データ２８ａ～ｂのうち、ユーザＢに対応したユーザ耳孔データ２８ｂのほうが、挿抜判定部２２からアクセスされている。 The user authentication unit 40 of the operation unit 18 requests the user to input a user ID and a password. When the input by the user matches one of the user IDs and passwords of a plurality of users registered in advance, the mobile terminal 8 can be used and the user can play music. The storage unit 12 is provided with user ear hole data 28a to 28b for each registered user, and user ear hole data corresponding to the logged-in user is accessed. FIG. 5 shows a state in which the user B has logged in, and the user ear hole data 28b corresponding to the user B among the plurality of user ear hole data 28a to 28b is accessed from the insertion / extraction determination unit 22.

　以上説明したように、第２の実施形態に係る携帯端末（電子機器）８によれば、第１の実施形態で得られた効果に加えて、複数のユーザに対して、それぞれ最適化した挿抜判定を行うことができるという効果が得られる。また、ユーザ毎に通知の方法や、音量設定を低下させる場合の設定ＶＯＬｏｐｔを、ユーザの好みに応じて設定することも可能である。 As described above, according to the portable terminal (electronic device) 8 according to the second embodiment, in addition to the effects obtained in the first embodiment, insertion / extraction optimized for a plurality of users, respectively. The effect that the determination can be performed is obtained. It is also possible to set a notification method for each user and a setting VOLopt for lowering the volume setting according to the user's preference.

　尚、各実施形態における音量制御は、音響再生部１６の音量設定ＶＯＬに対して行う場合について例示したが、それに限定されない。例えば、イヤホン２側にも音量設定機能がある場合には、所定の音量ＶＯＬｔｈを超えた場合に、イヤホン２側の音量設定を制御するようにしてもよい。あるいは、音響再生部１６とイヤホン２側の音量設定の両方を制御するようにしてもよい。 In addition, although the volume control in each embodiment illustrated about the case where it performs with respect to the volume setting VOL of the sound reproduction part 16, it is not limited to it. For example, if there is a volume setting function on the earphone 2 side, the volume setting on the earphone 2 side may be controlled when a predetermined volume VOLth is exceeded. Alternatively, both the sound reproduction unit 16 and the volume setting on the earphone 2 side may be controlled.

　尚、各実施形態における制御部１０の挿抜判定部２２、ユーザ通知部２３、音量制御部２４、及び伝達関数算出部１４が実行する各々の処理（図３のＳ１０～Ｓ１６、Ｓ１９；図４のＳ１０～Ｓ１９等）は、記憶部１２にプログラムとして格納され、携帯端末が備えたコンピュータによって呼び出されて実行される。また、そのプログラムは、ネットワークを介してダウンロードするか、或いは、プログラムを記憶した（non-transitoryな）記憶媒体を用いて、更新することができる。 In addition, each process (S10 to S16, S19 in FIG. 3; FIG. 4) performed by the insertion / extraction determination unit 22, the user notification unit 23, the volume control unit 24, and the transfer function calculation unit 14 of the control unit 10 in each embodiment. S10 to S19) are stored as programs in the storage unit 12, and are called and executed by a computer provided in the portable terminal. The program can be downloaded via a network or updated using a storage medium (non-transitory) storing the program.

　尚、各実施形態では携帯端末で音響再生を行う場合について例示したが、それに限定されず、各実施形態の開示内容は、内蔵マイクを備えたイヤホンにより音響再生を行う電子機器全般に適用することができる。 In addition, although each embodiment illustrated the case where sound reproduction was performed with a portable terminal, the disclosure content of each embodiment is applicable to all electronic devices that perform sound reproduction using an earphone with a built-in microphone. Can do.

　本発明は、内蔵マイクを備えたイヤホンを装着して音響再生する電子機器全般に適用することができる。上記電子機器としては、例えば、携帯電話、スマートフォン、携帯音楽プレーヤなどの携帯型の電子機器や、ディスクトップコンピュータ、テレビなどの携帯型でない電子機器が含まれる。内蔵マイクを備えたイヤホンとしては、コードレスタイプ（ワイヤレスタイプ）、コードタイプの両方が含まれる。 The present invention can be applied to all electronic devices that reproduce sound by wearing earphones with built-in microphones. Examples of the electronic device include portable electronic devices such as a mobile phone, a smartphone, and a portable music player, and non-portable electronic devices such as a desktop computer and a television. As an earphone provided with a built-in microphone, both a cordless type (wireless type) and a cord type are included.

　なお、本発明の全開示（請求の範囲及び図面を含む）の枠内において、さらにその基本的技術思想に基づいて、実施形態の変更・調整が可能である。また、本発明の請求の範囲の枠内において種々の開示要素（各請求項の各要素、各実施形態の各要素、各図面の各要素等を含む）の多様な組み合わせないし選択が可能である。すなわち、本発明は、請求の範囲及び図面を含む全開示、技術的思想にしたがって当業者であればなし得るであろう各種変形、修正を含むことは勿論である。特に、本書に記載した数値範囲については、当該範囲内に含まれる任意の数値ないし小範囲が、別段の記載のない場合でも具体的に記載されているものと解釈されるべきである。 It should be noted that, within the scope of the entire disclosure (including claims and drawings) of the present invention, the embodiments can be changed and adjusted based on the basic technical concept. Various combinations or selections of various disclosed elements (including each element of each claim, each element of each embodiment, each element of each drawing, etc.) are possible within the scope of the claims of the present invention. . That is, the present invention naturally includes various variations and modifications that could be made by those skilled in the art according to the entire disclosure including the claims and the drawings, and the technical idea. In particular, with respect to the numerical ranges described in this document, any numerical value or small range included in the range should be construed as being specifically described even if there is no specific description.

１、８：携帯端末（電子機器）
２：イヤホン
３、２１：スピーカ
４：内蔵マイク
５：ユーザ
６：耳
１０：制御部
１２：記憶部
１４：伝達関数算出部
１６：音響再生部
１７：表示部
１８：操作部
１９：イヤホンジャック
２０：スイッチ
２２：挿抜判定部
２３：ユーザ通知部
２４：音量制御部
２６：音声ガイダンスデータ
２７：音楽ファイル
２８、２８ａ～ｂ：ユーザ耳孔データ
３０、３３：アンプ
３１：Ａ／Ｄ変換器
３４：Ｄ／Ａ変換器
３５：デコーダ
４０：ユーザ認証部
４１：第１出力端子
４２：第２出力端子
Ｃ０：音響信号
Ｃ１：内蔵マイクで集音した信号
Ｃ２：音響ディジタル信号
Ｃ３：内蔵マイクで集音したディジタル信号
Ｃ４：伝達関数データ
Ｃ５：音量制御信号
ＶＯＬ：音量設定 1, 8: Portable terminal (electronic equipment)
2: Earphone 3, 21: Speaker 4: Built-in microphone 5: User 6: Ear 10: Control unit 12: Storage unit 14: Transfer function calculation unit 16: Sound reproduction unit 17: Display unit 18: Operation unit 19: Earphone jack 20 : Switch 22: insertion / removal determination unit 23: user notification unit 24: volume control unit 26: voice guidance data 27: music files 28 and 28 a-b: user ear hole data 30 and 33: amplifier 31: A / D converter 34: D / A converter 35: Decoder 40: User authentication unit 41: First output terminal 42: Second output terminal C0: Acoustic signal C1: Signal collected by the built-in microphone C2: Acoustic digital signal C3: Sound collected by the built-in microphone Digital signal C4: transfer function data C5: volume control signal VOL: volume setting

Claims

　内蔵マイクを備えたイヤホンに音響信号を供給する音響再生部と、
　前記音響再生部を制御する制御部と、
　前記音響信号を入力とし前記内蔵マイクで集音した信号を出力とする伝達関数の伝達関数データを算出する伝達関数算出部と、
　前記イヤホンをユーザの耳に挿入した際の前記伝達関数のデータであるユーザ耳孔データを格納する記憶部と、
を備え、
　前記制御部は、
　　前記伝達関数算出部が算出した前記伝達関数データと前記ユーザ耳孔データに基づいて、前記イヤホンが挿入状態にあるか否かを判定する挿抜判定部を含み、
　　前記挿抜判定部により前記イヤホンが挿入状態であると判定され、且つ前記音響再生部の音量設定が所定の音量を超えている場合には、前記音響再生部の音量設定が前記所定の音量を超えている旨を前記ユーザに通知する、ことを特徴とする電子機器。 An acoustic reproduction unit for supplying an acoustic signal to an earphone with a built-in microphone;
A control unit for controlling the sound reproduction unit;
A transfer function calculation unit for calculating transfer function data of a transfer function having the acoustic signal as an input and a signal collected by the built-in microphone as an output;
A storage unit that stores user ear hole data that is data of the transfer function when the earphone is inserted into a user's ear;
With
The controller is
Based on the transfer function data calculated by the transfer function calculation unit and the user ear canal data, including an insertion / extraction determination unit that determines whether the earphone is in an insertion state,
When the earphone is determined to be inserted by the insertion / extraction determination unit, and the volume setting of the sound reproduction unit exceeds a predetermined volume, the volume setting of the sound reproduction unit exceeds the predetermined volume. An electronic device characterized in that the user is notified of the fact.
　前記制御部は、
　前記ユーザに通知する場合に、前記音響再生部の音量設定が前記所定の音量以下になるように制御することを特徴とする請求項１に記載の電子機器。 The controller is
The electronic apparatus according to claim 1, wherein when notifying the user, control is performed so that a volume setting of the sound reproduction unit is equal to or lower than the predetermined volume.
　前記制御部は、
　前記ユーザに通知した後、所定の時間が経過する間に、前記ユーザからの応答がなかった場合には、前記音響再生部の音量設定が前記所定の音量以下になるように制御することを特徴とする請求項１に記載の電子機器。 The controller is
If no response is received from the user while a predetermined time has elapsed after notifying the user, the volume setting of the sound reproduction unit is controlled to be equal to or lower than the predetermined volume. The electronic device according to claim 1.
　前記制御部の前記挿抜判定部により前記イヤホンが耳から外れた状態であると判定された場合に、前記制御部は、前記音響再生部による音響の再生を停止するように制御することを特徴とする請求項１乃至３のいずれか一に記載の電子機器。 When the insertion / extraction determination unit of the control unit determines that the earphone is in a state of being removed from the ear, the control unit controls to stop the sound reproduction by the sound reproduction unit. The electronic device according to any one of claims 1 to 3.
　ユーザ認証部と、複数のユーザ毎の前記ユーザ耳孔データと、をさらに備え、
　前記制御部の挿抜判定部は、前記ユーザ認証部が認証したユーザに対応する前記ユーザ耳孔データをアクセスするように制御することを特徴とする請求項１乃至４のいずれか一に記載の電子機器。 A user authentication unit, and the user ear hole data for each of a plurality of users,
5. The electronic device according to claim 1, wherein the insertion / extraction determination unit of the control unit performs control so as to access the user ear hole data corresponding to the user authenticated by the user authentication unit. .
　内蔵マイクを備えたイヤホンに音響信号を供給して、前記イヤホンにより音響再生する音響再生方法であって、
　前記イヤホンをユーザの耳に挿入した際の、前記音響信号を入力とし前記内蔵マイクで集音した信号を出力とする伝達関数のデータであるユーザ耳孔データを予め用意するステップと、
　前記音響信号を入力とし前記内蔵マイクで集音した信号を出力とする伝達関数の伝達関数データを算出するステップと、
　前記算出された前記伝達関数データと前記ユーザ耳孔データに基づいて、前記イヤホンが挿入状態にあるか否かを判定する挿抜判定ステップと、
　前記挿抜判定ステップにおいて前記イヤホンが挿入状態であると判定され、且つ音響再生の音量設定が所定の音量を超えている場合には、前記音響再生の音量設定が前記所定の音量を超えている旨を前記ユーザに通知するステップと、
　を含む音響再生方法。 An acoustic reproduction method for supplying an acoustic signal to an earphone with a built-in microphone and reproducing the sound with the earphone,
Preparing in advance user ear data, which is transfer function data in which the acoustic signal is input and the signal collected by the built-in microphone is output when the earphone is inserted into the user's ear;
Calculating transfer function data of a transfer function having the acoustic signal as an input and a signal collected by the built-in microphone as an output;
Based on the calculated transfer function data and the user ear canal data, an insertion / extraction determination step for determining whether or not the earphone is in an insertion state;
If it is determined in the insertion / extraction determination step that the earphone is in an inserted state, and the sound reproduction volume setting exceeds a predetermined volume, the sound reproduction volume setting exceeds the predetermined volume. Informing the user of:
A sound reproduction method including:
　前記ユーザに通知する場合に、前記音響再生の音量設定が前記所定の音量以下になるように制御するステップをさらに含むことを特徴とする請求項６に記載の音響再生方法。 The sound reproduction method according to claim 6, further comprising a step of controlling the sound reproduction volume setting to be equal to or lower than the predetermined sound volume when notifying the user.
　前記ユーザに通知した後、所定の時間が経過する間に、前記ユーザからの応答がなかった場合には、前記音響再生の音量設定が前記所定の音量以下になるように制御するステップをさらに含むことを特徴とする請求項６に記載の音響再生方法。 When there is no response from the user after a predetermined time has elapsed after notifying the user, the method further includes a step of controlling the sound reproduction sound volume setting to be equal to or lower than the predetermined sound volume. The sound reproduction method according to claim 6.
　前記挿抜判定ステップにより前記イヤホンが耳から外れた状態であると判定された場合に、前記音響再生を停止するステップをさらに含むことを特徴とする請求項６乃至８に記載の音響再生方法。 The sound reproduction method according to any one of claims 6 to 8, further comprising a step of stopping the sound reproduction when the earphone is determined to be detached from the ear in the insertion / extraction determination step.
　内蔵マイクを備えたイヤホンに音響信号を供給して、前記イヤホンによる音響再生を制御するプログラムであって、
　　前記イヤホンをユーザの耳に挿入した際の、前記音響信号を入力とし前記内蔵マイクで集音した信号を出力とする伝達関数のデータであるユーザ耳孔データを予め用意する処理と、
　前記音響信号を入力とし前記内蔵マイクで集音した信号を出力とする伝達関数の伝達関数データを算出する処理と、
　前記算出された前記伝達関数データと前記ユーザ耳孔データに基づいて、前記イヤホンが挿入状態にあるか否かを判定する挿抜判定処理と、
　前記挿抜判定処理において前記イヤホンが挿入状態であると判定され、且つ音響再生の音量設定が所定の音量を超えている場合には、前記音響再生の音量設定が前記所定の音量を超えている旨を前記ユーザに通知する処理と、
　をコンピュータに実行させるプログラム。 A program for supplying an acoustic signal to an earphone with a built-in microphone and controlling sound reproduction by the earphone,
When the earphone is inserted into a user's ear, a process for preparing user ear hole data which is transfer function data having the acoustic signal as an input and a signal collected by the built-in microphone as an output;
A process of calculating transfer function data of a transfer function having the acoustic signal as an input and a signal collected by the built-in microphone as an output;
Based on the calculated transfer function data and the user ear canal data, an insertion / extraction determination process for determining whether the earphone is in an insertion state,
If it is determined in the insertion / extraction determination process that the earphone is in an inserted state, and the sound reproduction volume setting exceeds a predetermined volume, the sound reproduction volume setting exceeds the predetermined volume. Processing to notify the user,
A program that causes a computer to execute.